plugins/imager/raw_plugin.py

   1 #!/usr/bin/python -tt
   2 #
   3 # Copyright (c) 2011 Intel, Inc.
   4 #
   5 # This program is free software; you can redistribute it and/or modify it
   6 # under the terms of the GNU General Public License as published by the Free
   7 # Software Foundation; version 2 of the License
   8 #
   9 # This program is distributed in the hope that it will be useful, but
  10 # WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
  11 # or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  12 # for more details.
  13 #
  14 # You should have received a copy of the GNU General Public License along
  15 # with this program; if not, write to the Free Software Foundation, Inc., 59
  16 # Temple Place - Suite 330, Boston, MA 02111-1307, USA.
  17
  18 import os
  19 import shutil
  20 import re
  21 import tempfile
  22
  23 from mic import configmgr, pluginmgr, chroot, msger
  24 from mic.utils import misc, fs_related, errors, runner
  25 from mic.utils.partitionedfs import PartitionedMount
  26
  27 import mic.imager.raw as raw
  28
  29 from mic.pluginbase import ImagerPlugin
  30 class RawPlugin(ImagerPlugin):
  31     name = 'raw'
  32
  33     @classmethod
  34     def do_create(self, subcmd, opts, *args):
  35         """${cmd_name}: create raw image
  36
  37         ${cmd_usage}
  38         ${cmd_option_list}
  39         """
  40
  41         if not args:
  42             raise errors.Usage("More arguments needed")
  43
  44         if len(args) != 1:
  45             raise errors.Usage("Extra arguments given")
  46
  47         cfgmgr = configmgr.getConfigMgr()
  48         creatoropts = cfgmgr.create
  49         ksconf = args[0]
  50
  51         if not os.path.exists(ksconf):
  52             raise errors.CreatorError("Can't find the file: %s" % ksconf)
  53
  54         recording_pkgs = []
  55         if len(creatoropts['record_pkgs']) > 0:
  56             recording_pkgs = creatoropts['record_pkgs']
  57         if creatoropts['release'] is not None:
  58             if 'name' not in recording_pkgs:
  59                 recording_pkgs.append('name')
  60             ksconf = misc.save_ksconf_file(ksconf, creatoropts['release'])
  61             name = os.path.splitext(os.path.basename(ksconf))[0]
  62             creatoropts['outdir'] = "%s/%s/images/%s/" % (creatoropts['outdir'], creatoropts['release'], name)
  63         cfgmgr._ksconf = ksconf
  64
  65         # try to find the pkgmgr
  66         pkgmgr = None
  67         for (key, pcls) in pluginmgr.PluginMgr().get_plugins('backend').iteritems():
  68             if key == creatoropts['pkgmgr']:
  69                 pkgmgr = pcls
  70                 break
  71
  72         if not pkgmgr:
  73             pkgmgrs = pluginmgr.PluginMgr().get_plugins('backend').keys()
  74             raise errors.CreatorError("Can't find package manager: %s (availables: %s)" % (creatoropts['pkgmgr'], ', '.join(pkgmgrs)))
  75
  76         creator = raw.RawImageCreator(creatoropts, pkgmgr)
  77
  78         if len(recording_pkgs) > 0:
  79             creator._recording_pkgs = recording_pkgs
  80
  81         if creatoropts['release'] is None:
  82             imagefile = "%s-sda.raw" % os.path.join(creator.destdir, creator.name)
  83             if os.path.exists(imagefile):
  84                 if msger.ask('The target image: %s already exists, need to delete it?' % imagefile):
  85                     os.unlink(imagefile)
  86
  87         try:
  88             creator.check_depend_tools()
  89             creator.mount(None, creatoropts["cachedir"])
  90             creator.install()
  91             creator.configure(creatoropts["repomd"])
  92             creator.unmount()
  93             creator.package(creatoropts["outdir"])
  94             if creatoropts['release'] is not None:
  95                 creator.release_output(ksconf, creatoropts['outdir'], creatoropts['release'])
  96             creator.print_outimage_info()
  97
  98         except errors.CreatorError:
  99             raise
 100         finally:
 101             creator.cleanup()
 102
 103         msger.info("Finished.")
 104         return 0
 105
 106     @classmethod
 107     def do_chroot(cls, target):
 108         img = target
 109         imgsize = misc.get_file_size(img) * 1024L * 1024L
 110         partedcmd = fs_related.find_binary_path("parted")
 111         disk = fs_related.SparseLoopbackDisk(img, imgsize)
 112         imgmnt = misc.mkdtemp()
 113         imgloop = PartitionedMount({'/dev/sdb':disk}, imgmnt, skipformat = True)
 114         img_fstype = "ext3"
 115
 116         # Check the partitions from raw disk.
 117         root_mounted = False
 118         partition_mounts = 0
 119         for line in runner.outs([partedcmd,"-s",img,"unit","B","print"]).splitlines():
 120             line = line.strip()
 121
 122             # Lines that start with number are the partitions,
 123             # because parted can be translated we can't refer to any text lines.
 124             if not line or not line[0].isdigit():
 125                 continue
 126
 127             # Some vars have extra , as list seperator.
 128             line = line.replace(",","")
 129
 130             # Example of parted output lines that are handled:
 131             # Number  Start        End          Size         Type     File system     Flags
 132             #  1      512B         3400000511B  3400000000B  primary
 133             #  2      3400531968B  3656384511B  255852544B   primary  linux-swap(v1)
 134             #  3      3656384512B  3720347647B  63963136B    primary  fat16           boot, lba
 135
 136             partition_info = re.split("\s+",line)
 137
 138             size = partition_info[3].split("B")[0]
 139
 140             if len(partition_info) < 6 or partition_info[5] in ["boot"]:
 141                 # No filesystem can be found from partition line. Assuming
 142                 # btrfs, because that is the only MeeGo fs that parted does
 143                 # not recognize properly.
 144                 # TODO: Can we make better assumption?
 145                 fstype = "btrfs"
 146             elif partition_info[5] in ["ext2","ext3","ext4","btrfs"]:
 147                 fstype = partition_info[5]
 148             elif partition_info[5] in ["fat16","fat32"]:
 149                 fstype = "vfat"
 150             elif "swap" in partition_info[5]:
 151                 fstype = "swap"
 152             else:
 153                 raise errors.CreatorError("Could not recognize partition fs type '%s'." % partition_info[5])
 154
 155             if not root_mounted and fstype in ["ext2","ext3","ext4","btrfs"]:
 156                 # TODO: Check that this is actually the valid root partition from /etc/fstab
 157                 mountpoint = "/"
 158                 root_mounted = True
 159             elif fstype == "swap":
 160                 mountpoint = "swap"
 161             else:
 162                 # TODO: Assing better mount points for the rest of the partitions.
 163                 partition_mounts += 1
 164                 mountpoint = "/media/partition_%d" % partition_mounts
 165
 166             if "boot" in partition_info:
 167                 boot = True
 168             else:
 169                 boot = False
 170
 171             msger.verbose("Size: %s Bytes, fstype: %s, mountpoint: %s, boot: %s" % (size, fstype, mountpoint, boot))
 172             # TODO: add_partition should take bytes as size parameter.
 173             imgloop.add_partition((int)(size)/1024/1024, "/dev/sdb", mountpoint, fstype = fstype, boot = boot)
 174
 175         try:
 176             imgloop.mount()
 177
 178         except errors.MountError:
 179             imgloop.cleanup()
 180             raise
 181
 182         try:
 183             chroot.chroot(imgmnt, None,  "/bin/env HOME=/root /bin/bash")
 184         except:
 185             raise errors.CreatorError("Failed to chroot to %s." %img)
 186         finally:
 187             chroot.cleanup_after_chroot("img", imgloop, None, imgmnt)
 188
 189     @classmethod
 190     def do_unpack(cls, srcimg):
 191         srcimgsize = (misc.get_file_size(srcimg)) * 1024L * 1024L
 192         srcmnt = misc.mkdtemp("srcmnt")
 193         disk = fs_related.SparseLoopbackDisk(srcimg, srcimgsize)
 194         srcloop = PartitionedMount({'/dev/sdb':disk}, srcmnt, skipformat = True)
 195
 196         srcloop.add_partition(srcimgsize/1024/1024, "/dev/sdb", "/", "ext3", boot=False)
 197         try:
 198             srcloop.mount()
 199
 200         except errors.MountError:
 201             srcloop.cleanup()
 202             raise
 203
 204         image = os.path.join(tempfile.mkdtemp(dir = "/var/tmp", prefix = "tmp"), "target.img")
 205         args = ['dd', "if=%s" % srcloop.partitions[0]['device'], "of=%s" % image]
 206
 207         msger.info("`dd` image ...")
 208         rc = runner.show(args)
 209         srcloop.cleanup()
 210         shutil.rmtree(os.path.dirname(srcmnt), ignore_errors = True)
 211
 212         if rc != 0:
 213             raise errors.CreatorError("Failed to dd")
 214         else:
 215             return image