plugins/imager/raw_plugin.py

   1 #!/usr/bin/python -tt
   2 #
   3 # Copyright (c) 2011 Intel, Inc.
   4 #
   5 # This program is free software; you can redistribute it and/or modify it
   6 # under the terms of the GNU General Public License as published by the Free
   7 # Software Foundation; version 2 of the License
   8 #
   9 # This program is distributed in the hope that it will be useful, but
  10 # WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
  11 # or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  12 # for more details.
  13 #
  14 # You should have received a copy of the GNU General Public License along
  15 # with this program; if not, write to the Free Software Foundation, Inc., 59
  16 # Temple Place - Suite 330, Boston, MA 02111-1307, USA.
  17
  18 import os
  19 import shutil
  20 import re
  21 import tempfile
  22
  23 from mic import configmgr, pluginmgr, chroot, msger
  24 from mic.utils import misc, fs_related, errors, runner
  25 from mic.utils.partitionedfs import PartitionedMount
  26
  27 import mic.imager.raw as raw
  28
  29 from mic.pluginbase import ImagerPlugin
  30 class RawPlugin(ImagerPlugin):
  31     name = 'raw'
  32
  33     @classmethod
  34     def do_create(self, subcmd, opts, *args):
  35         """${cmd_name}: create raw image
  36
  37         ${cmd_usage}
  38         ${cmd_option_list}
  39         """
  40
  41         if not args:
  42             raise errors.Usage("More arguments needed")
  43
  44         if len(args) != 1:
  45             raise errors.Usage("Extra arguments given")
  46
  47         cfgmgr = configmgr.getConfigMgr()
  48         creatoropts = cfgmgr.create
  49         ksconf = args[0]
  50
  51         if not os.path.exists(ksconf):
  52             raise errors.CreatorError("Can't find the file: %s" % ksconf)
  53
  54         recording_pkgs = []
  55         if len(creatoropts['record_pkgs']) > 0:
  56             recording_pkgs = creatoropts['record_pkgs']
  57         if creatoropts['release'] is not None:
  58             if 'name' not in recording_pkgs:
  59                 recording_pkgs.append('name')
  60             ksconf = misc.save_ksconf_file(ksconf, creatoropts['release'])
  61             name = os.path.splitext(os.path.basename(ksconf))[0]
  62             creatoropts['outdir'] = "%s/%s/images/%s/" % (creatoropts['outdir'], creatoropts['release'], name)
  63         cfgmgr._ksconf = ksconf
  64
  65         # try to find the pkgmgr
  66         pkgmgr = None
  67         for (key, pcls) in pluginmgr.PluginMgr().get_plugins('backend').iteritems():
  68             if key == creatoropts['pkgmgr']:
  69                 pkgmgr = pcls
  70                 break
  71
  72         if not pkgmgr:
  73             pkgmgrs = pluginmgr.PluginMgr().get_plugins('backend').keys()
  74             raise errors.CreatorError("Can't find package manager: %s (availables: %s)" % (creatoropts['pkgmgr'], ', '.join(pkgmgrs)))
  75
  76         creator = raw.RawImageCreator(creatoropts, pkgmgr)
  77
  78         if len(recording_pkgs) > 0:
  79             creator._recording_pkgs = recording_pkgs
  80
  81         try:
  82             creator.check_depend_tools()
  83             creator.mount(None, creatoropts["cachedir"])
  84             creator.install()
  85             creator.configure(creatoropts["repomd"])
  86             creator.unmount()
  87             creator.package(creatoropts["outdir"])
  88             if creatoropts['release'] is not None:
  89                 creator.release_output(ksconf, creatoropts['outdir'], creatoropts['release'])
  90             creator.print_outimage_info()
  91
  92         except errors.CreatorError:
  93             raise
  94         finally:
  95             creator.cleanup()
  96
  97         msger.info("Finished.")
  98         return 0
  99
 100     @classmethod
 101     def do_chroot(cls, target):
 102         img = target
 103         imgsize = misc.get_file_size(img) * 1024L * 1024L
 104         partedcmd = fs_related.find_binary_path("parted")
 105         disk = fs_related.SparseLoopbackDisk(img, imgsize)
 106         imgmnt = misc.mkdtemp()
 107         imgloop = PartitionedMount({'/dev/sdb':disk}, imgmnt, skipformat = True)
 108         img_fstype = "ext3"
 109
 110         # Check the partitions from raw disk.
 111         root_mounted = False
 112         partition_mounts = 0
 113         for line in runner.outs([partedcmd,"-s",img,"unit","B","print"]).splitlines():
 114             line = line.strip()
 115
 116             # Lines that start with number are the partitions,
 117             # because parted can be translated we can't refer to any text lines.
 118             if not line or not line[0].isdigit():
 119                 continue
 120
 121             # Some vars have extra , as list seperator.
 122             line = line.replace(",","")
 123
 124             # Example of parted output lines that are handled:
 125             # Number  Start        End          Size         Type     File system     Flags
 126             #  1      512B         3400000511B  3400000000B  primary
 127             #  2      3400531968B  3656384511B  255852544B   primary  linux-swap(v1)
 128             #  3      3656384512B  3720347647B  63963136B    primary  fat16           boot, lba
 129
 130             partition_info = re.split("\s+",line)
 131
 132             size = partition_info[3].split("B")[0]
 133
 134             if len(partition_info) < 6 or partition_info[5] in ["boot"]:
 135                 # No filesystem can be found from partition line. Assuming
 136                 # btrfs, because that is the only MeeGo fs that parted does
 137                 # not recognize properly.
 138                 # TODO: Can we make better assumption?
 139                 fstype = "btrfs"
 140             elif partition_info[5] in ["ext2","ext3","ext4","btrfs"]:
 141                 fstype = partition_info[5]
 142             elif partition_info[5] in ["fat16","fat32"]:
 143                 fstype = "vfat"
 144             elif "swap" in partition_info[5]:
 145                 fstype = "swap"
 146             else:
 147                 raise errors.CreatorError("Could not recognize partition fs type '%s'." % partition_info[5])
 148
 149             if not root_mounted and fstype in ["ext2","ext3","ext4","btrfs"]:
 150                 # TODO: Check that this is actually the valid root partition from /etc/fstab
 151                 mountpoint = "/"
 152                 root_mounted = True
 153             elif fstype == "swap":
 154                 mountpoint = "swap"
 155             else:
 156                 # TODO: Assing better mount points for the rest of the partitions.
 157                 partition_mounts += 1
 158                 mountpoint = "/media/partition_%d" % partition_mounts
 159
 160             if "boot" in partition_info:
 161                 boot = True
 162             else:
 163                 boot = False
 164
 165             msger.verbose("Size: %s Bytes, fstype: %s, mountpoint: %s, boot: %s" % (size, fstype, mountpoint, boot))
 166             # TODO: add_partition should take bytes as size parameter.
 167             imgloop.add_partition((int)(size)/1024/1024, "/dev/sdb", mountpoint, fstype = fstype, boot = boot)
 168
 169         try:
 170             imgloop.mount()
 171
 172         except errors.MountError:
 173             imgloop.cleanup()
 174             raise
 175
 176         try:
 177             chroot.chroot(imgmnt, None,  "/bin/env HOME=/root /bin/bash")
 178         except:
 179             raise errors.CreatorError("Failed to chroot to %s." %img)
 180         finally:
 181             chroot.cleanup_after_chroot("img", imgloop, None, imgmnt)
 182
 183     @classmethod
 184     def do_unpack(cls, srcimg):
 185         srcimgsize = (misc.get_file_size(srcimg)) * 1024L * 1024L
 186         srcmnt = misc.mkdtemp("srcmnt")
 187         disk = fs_related.SparseLoopbackDisk(srcimg, srcimgsize)
 188         srcloop = PartitionedMount({'/dev/sdb':disk}, srcmnt, skipformat = True)
 189
 190         srcloop.add_partition(srcimgsize/1024/1024, "/dev/sdb", "/", "ext3", boot=False)
 191         try:
 192             srcloop.mount()
 193
 194         except errors.MountError:
 195             srcloop.cleanup()
 196             raise
 197
 198         image = os.path.join(tempfile.mkdtemp(dir = "/var/tmp", prefix = "tmp"), "target.img")
 199         args = ['dd', "if=%s" % srcloop.partitions[0]['device'], "of=%s" % image]
 200
 201         msger.info("`dd` image ...")
 202         rc = runner.show(args)
 203         srcloop.cleanup()
 204         shutil.rmtree(os.path.dirname(srcmnt), ignore_errors = True)
 205
 206         if rc != 0:
 207             raise errors.CreatorError("Failed to dd")
 208         else:
 209             return image