plugins/imager/raw_plugin.py

   1 #!/usr/bin/python -tt
   2 #
   3 # Copyright (c) 2011 Intel, Inc.
   4 #
   5 # This program is free software; you can redistribute it and/or modify it
   6 # under the terms of the GNU General Public License as published by the Free
   7 # Software Foundation; version 2 of the License
   8 #
   9 # This program is distributed in the hope that it will be useful, but
  10 # WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
  11 # or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  12 # for more details.
  13 #
  14 # You should have received a copy of the GNU General Public License along
  15 # with this program; if not, write to the Free Software Foundation, Inc., 59
  16 # Temple Place - Suite 330, Boston, MA 02111-1307, USA.
  17
  18 import os
  19 import subprocess
  20 import shutil
  21 import re
  22 import tempfile
  23
  24 from mic import chroot, msger, rt_util
  25 from mic.utils import misc, fs_related, errors, runner
  26 from mic.plugin import pluginmgr
  27 from mic.utils.partitionedfs import PartitionedMount
  28
  29 import mic.imager.raw as raw
  30
  31 from mic.pluginbase import ImagerPlugin
  32 class RawPlugin(ImagerPlugin):
  33     name = 'raw'
  34
  35     @classmethod
  36     def do_create(self, args):
  37         """${cmd_name}: create raw image
  38         """
  39
  40         creatoropts, pkgmgr, recording_pkgs = rt_util.prepare_create(args)
  41
  42         creator = raw.RawImageCreator(creatoropts, pkgmgr, args.compress_image,
  43                                       args.generate_bmap, args.fstab_entry)
  44
  45         if len(recording_pkgs) > 0:
  46             creator._recording_pkgs = recording_pkgs
  47
  48         images = ["%s-%s.raw" % (creator.name, disk_name)
  49                   for disk_name in creator.get_disk_names()]
  50         self.check_image_exists(creator.destdir,
  51                                 creator.pack_to,
  52                                 images,
  53                                 creatoropts['release'])
  54
  55         try:
  56             creator.check_depend_tools()
  57             creator.mount(None, creatoropts["cachedir"])
  58             creator.install()
  59             creator.tpkinstall()
  60             creator.configure(creatoropts["repomd"])
  61             creator.copy_kernel()
  62             creator.unmount()
  63             creator.generate_bmap()
  64             creator.package(creatoropts["destdir"])
  65             creator.create_manifest()
  66             if creatoropts['release'] is not None:
  67                 creator.release_output(args.ksfile, creatoropts['destdir'], creatoropts['release'])
  68             creator.print_outimage_info()
  69
  70         except errors.CreatorError:
  71             raise
  72         finally:
  73             creator.cleanup()
  74
  75         #Run script of --run_script after image created
  76         if creatoropts['run_script']:
  77             cmd = creatoropts['run_script']
  78             try:
  79                 runner.show(cmd)
  80             except OSError as err:
  81                 msger.warning(str(err))
  82
  83
  84         msger.info("Finished.")
  85         return 0
  86
  87     @classmethod
  88     def do_chroot(cls, target, cmd=[]):
  89         img = target
  90         imgsize = misc.get_file_size(img) * 1024 * 1024
  91         partedcmd = fs_related.find_binary_path("parted")
  92         disk = fs_related.SparseLoopbackDisk(img, imgsize)
  93         imgmnt = misc.mkdtemp()
  94         imgloop = PartitionedMount(imgmnt, skipformat = True)
  95         imgloop.add_disk('/dev/sdb', disk)
  96         img_fstype = "ext3"
  97
  98         msger.info("Partition Table:")
  99         partnum = []
 100         for line in runner.outs([partedcmd, "-s", img, "print"]).splitlines():
 101             # no use strip to keep line output here
 102             if "Number" in line:
 103                 msger.raw(line)
 104             if line.strip() and line.strip()[0].isdigit():
 105                 partnum.append(line.strip()[0])
 106                 msger.raw(line)
 107
 108         rootpart = None
 109         if len(partnum) > 1:
 110             rootpart = msger.choice("please choose root partition", partnum)
 111
 112         # Check the partitions from raw disk.
 113         # if choose root part, the mark it as mounted
 114         if rootpart:
 115             root_mounted = True
 116         else:
 117             root_mounted = False
 118         partition_mounts = 0
 119         for line in runner.outs([ partedcmd, "-s", img, "unit", "B", "print" ]).splitlines():
 120             line = line.strip()
 121
 122             # Lines that start with number are the partitions,
 123             # because parted can be translated we can't refer to any text lines.
 124             if not line or not line[0].isdigit():
 125                 continue
 126
 127             # Some vars have extra , as list seperator.
 128             line = line.replace(",","")
 129
 130             # Example of parted output lines that are handled:
 131             # Number  Start        End          Size         Type     File system    Flags
 132             #  1      512B         3400000511B  3400000000B  primary
 133             #  2      3400531968B  3656384511B  255852544B   primary  linux-swap(v1)
 134             #  3      3656384512B  3720347647B  63963136B    primary  fat16          boot, lba
 135
 136             partition_info = re.split("\s+", line)
 137
 138             size = partition_info[3].split("B")[0]
 139
 140             if len(partition_info) < 6 or partition_info[5] in ["boot"]:
 141                 # No filesystem can be found from partition line. Assuming
 142                 # btrfs, because that is the only MeeGo fs that parted does
 143                 # not recognize properly.
 144                 # TODO: Can we make better assumption?
 145                 fstype = "btrfs"
 146             elif partition_info[5] in [ "ext2", "ext3", "ext4", "btrfs", "f2fs" ]:
 147                 fstype = partition_info[5]
 148             elif partition_info[5] in [ "fat16", "fat32" ]:
 149                 fstype = "vfat"
 150             elif "swap" in partition_info[5]:
 151                 fstype = "swap"
 152             else:
 153                 raise errors.CreatorError("Could not recognize partition fs type '%s'." %
 154                         partition_info[5])
 155
 156             if rootpart and rootpart == line[0]:
 157                 mountpoint = '/'
 158             elif not root_mounted and fstype in [ "ext2", "ext3", "ext4", "btrfs", "f2fs" ]:
 159                 # TODO: Check that this is actually the valid root partition from /etc/fstab
 160                 mountpoint = "/"
 161                 root_mounted = True
 162             elif fstype == "swap":
 163                 mountpoint = "swap"
 164             else:
 165                 # TODO: Assing better mount points for the rest of the partitions.
 166                 partition_mounts += 1
 167                 mountpoint = "/media/partition_%d" % partition_mounts
 168
 169             if "boot" in partition_info:
 170                 boot = True
 171             else:
 172                 boot = False
 173
 174             msger.verbose("Size: %s Bytes, fstype: %s, mountpoint: %s, boot: %s" %
 175                     (size, fstype, mountpoint, boot))
 176             # TODO: add_partition should take bytes as size parameter.
 177             imgloop.add_partition((int)(size)/1024/1024, "/dev/sdb", mountpoint,
 178                     fstype = fstype, boot = boot)
 179
 180         try:
 181             imgloop.mount()
 182
 183         except errors.MountError:
 184             imgloop.cleanup()
 185             raise
 186
 187         try:
 188             if len(cmd) != 0:
 189                 cmdline = ' '.join(cmd)
 190             else:
 191                 cmdline = "/bin/bash"
 192             envcmd = fs_related.find_binary_inchroot("env", imgmnt)
 193             if envcmd:
 194                 cmdline = "%s HOME=/root %s" % (envcmd, cmdline)
 195             chroot.chroot(imgmnt, None, cmdline)
 196         except:
 197             raise errors.CreatorError("Failed to chroot to %s." %img)
 198         finally:
 199             chroot.cleanup_after_chroot("img", imgloop, None, imgmnt)
 200
 201     @classmethod
 202     def do_unpack(cls, srcimg):
 203         srcimgsize = (misc.get_file_size(srcimg)) * 1024 * 1024
 204         srcmnt = misc.mkdtemp("srcmnt")
 205         disk = fs_related.SparseLoopbackDisk(srcimg, srcimgsize)
 206         srcloop = PartitionedMount(srcmnt, skipformat = True)
 207
 208         srcloop.add_disk('/dev/sdb', disk)
 209         srcloop.add_partition(srcimgsize/1024/1024, "/dev/sdb", "/", "ext3", boot=False)
 210         try:
 211             srcloop.mount()
 212
 213         except errors.MountError:
 214             srcloop.cleanup()
 215             raise
 216
 217         image = os.path.join(tempfile.mkdtemp(dir = "/var/tmp", prefix = "tmp"), "target.img")
 218         args = ['dd', "if=%s" % srcloop.partitions[0]['device'], "of=%s" % image]
 219
 220         msger.info("`dd` image ...")
 221         rc = runner.show(args)
 222         srcloop.cleanup()
 223         shutil.rmtree(os.path.dirname(srcmnt), ignore_errors = True)
 224
 225         if rc != 0:
 226             raise errors.CreatorError("Failed to dd")
 227         else:
 228             return image