Add --record-pkgs option to output more package info
[tools/mic.git] / plugins / imager / raw_plugin.py
1 #!/usr/bin/python -tt
2 #
3 # Copyright (c) 2011 Intel, Inc.
4 #
5 # This program is free software; you can redistribute it and/or modify it
6 # under the terms of the GNU General Public License as published by the Free
7 # Software Foundation; version 2 of the License
8 #
9 # This program is distributed in the hope that it will be useful, but
10 # WITHOUT ANY WARRANTY; without even the implied warranty of MERCHANTABILITY
11 # or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
12 # for more details.
13 #
14 # You should have received a copy of the GNU General Public License along
15 # with this program; if not, write to the Free Software Foundation, Inc., 59
16 # Temple Place - Suite 330, Boston, MA 02111-1307, USA.
17
18 import os
19 import shutil
20 import re
21 import tempfile
22
23 from mic import configmgr, pluginmgr, chroot, msger
24 from mic.utils import misc, fs_related, errors, runner
25 from mic.utils.partitionedfs import PartitionedMount
26
27 import mic.imager.raw as raw
28
29 from mic.pluginbase import ImagerPlugin
30 class RawPlugin(ImagerPlugin):
31     name = 'raw'
32
33     @classmethod
34     def do_create(self, subcmd, opts, *args):
35         """${cmd_name}: create raw image
36
37         ${cmd_usage}
38         ${cmd_option_list}
39         """
40
41         if not args:
42             raise errors.Usage("More arguments needed")
43
44         if len(args) != 1:
45             raise errors.Usage("Extra arguments given")
46
47         cfgmgr = configmgr.getConfigMgr()
48         creatoropts = cfgmgr.create
49         ksconf = args[0]
50
51         recording_pkgs = []
52         if len(creatoropts['record_pkgs']) > 0:
53             recording_pkgs = creatoropts['record_pkgs']
54         if creatoropts['release'] is not None:
55             if 'name' not in recording_pkgs:
56                 recording_pkgs.append('name')
57             ksconf = misc.save_ksconf_file(ksconf, creatoropts['release'])
58             name = os.path.splitext(os.path.basename(ksconf))[0]
59             creatoropts['outdir'] = "%s/%s-%s/" % (creatoropts['outdir'], name, creatoropts['release'])
60         cfgmgr._ksconf = ksconf
61
62         # try to find the pkgmgr
63         pkgmgr = None
64         for (key, pcls) in pluginmgr.PluginMgr().get_plugins('backend').iteritems():
65             if key == creatoropts['pkgmgr']:
66                 pkgmgr = pcls
67                 break
68
69         if not pkgmgr:
70             pkgmgrs = pluginmgr.PluginMgr().get_plugins('backend').keys()
71             raise errors.CreatorError("Can't find package manager: %s (availables: %s)" % (creatoropts['pkgmgr'], ', '.join(pkgmgrs)))
72
73         creator = raw.RawImageCreator(creatoropts, pkgmgr)
74
75         if len(recording_pkgs) > 0:
76             creator._recording_pkgs = recording_pkgs
77
78         try:
79             creator.check_depend_tools()
80             creator.mount(None, creatoropts["cachedir"])
81             creator.install()
82             creator.configure(creatoropts["repomd"])
83             creator.unmount()
84             creator.package(creatoropts["outdir"])
85             if creatoropts['release'] is not None:
86                 creator.release_output(ksconf, creatoropts['outdir'], creatoropts['name'], creatoropts['release'])
87             creator.print_outimage_info()
88
89         except errors.CreatorError:
90             raise
91         finally:
92             creator.cleanup()
93
94         msger.info("Finished.")
95         return 0
96
97     @classmethod
98     def do_chroot(cls, target):
99         img = target
100         imgsize = misc.get_file_size(img) * 1024L * 1024L
101         partedcmd = fs_related.find_binary_path("parted")
102         disk = fs_related.SparseLoopbackDisk(img, imgsize)
103         imgmnt = misc.mkdtemp()
104         imgloop = PartitionedMount({'/dev/sdb':disk}, imgmnt, skipformat = True)
105         img_fstype = "ext3"
106
107         # Check the partitions from raw disk.
108         root_mounted = False
109         partition_mounts = 0
110         for line in runner.outs([partedcmd,"-s",img,"unit","B","print"]).splitlines():
111             line = line.strip()
112
113             # Lines that start with number are the partitions,
114             # because parted can be translated we can't refer to any text lines.
115             if not line or not line[0].isdigit():
116                 continue
117
118             # Some vars have extra , as list seperator.
119             line = line.replace(",","")
120
121             # Example of parted output lines that are handled:
122             # Number  Start        End          Size         Type     File system     Flags
123             #  1      512B         3400000511B  3400000000B  primary
124             #  2      3400531968B  3656384511B  255852544B   primary  linux-swap(v1)
125             #  3      3656384512B  3720347647B  63963136B    primary  fat16           boot, lba
126
127             partition_info = re.split("\s+",line)
128
129             size = partition_info[3].split("B")[0]
130
131             if len(partition_info) < 6 or partition_info[5] in ["boot"]:
132                 # No filesystem can be found from partition line. Assuming
133                 # btrfs, because that is the only MeeGo fs that parted does
134                 # not recognize properly.
135                 # TODO: Can we make better assumption?
136                 fstype = "btrfs"
137             elif partition_info[5] in ["ext2","ext3","ext4","btrfs"]:
138                 fstype = partition_info[5]
139             elif partition_info[5] in ["fat16","fat32"]:
140                 fstype = "vfat"
141             elif "swap" in partition_info[5]:
142                 fstype = "swap"
143             else:
144                 raise errors.CreatorError("Could not recognize partition fs type '%s'." % partition_info[5])
145
146             if not root_mounted and fstype in ["ext2","ext3","ext4","btrfs"]:
147                 # TODO: Check that this is actually the valid root partition from /etc/fstab
148                 mountpoint = "/"
149                 root_mounted = True
150             elif fstype == "swap":
151                 mountpoint = "swap"
152             else:
153                 # TODO: Assing better mount points for the rest of the partitions.
154                 partition_mounts += 1
155                 mountpoint = "/media/partition_%d" % partition_mounts
156
157             if "boot" in partition_info:
158                 boot = True
159             else:
160                 boot = False
161
162             msger.verbose("Size: %s Bytes, fstype: %s, mountpoint: %s, boot: %s" % (size, fstype, mountpoint, boot))
163             # TODO: add_partition should take bytes as size parameter.
164             imgloop.add_partition((int)(size)/1024/1024, "/dev/sdb", mountpoint, fstype = fstype, boot = boot)
165
166         try:
167             imgloop.mount()
168
169         except errors.MountError:
170             imgloop.cleanup()
171             raise
172
173         try:
174             chroot.chroot(imgmnt, None,  "/bin/env HOME=/root /bin/bash")
175         except:
176             raise errors.CreatorError("Failed to chroot to %s." %img)
177         finally:
178             chroot.cleanup_after_chroot("img", imgloop, None, imgmnt)
179
180     @classmethod
181     def do_unpack(cls, srcimg):
182         srcimgsize = (misc.get_file_size(srcimg)) * 1024L * 1024L
183         srcmnt = misc.mkdtemp("srcmnt")
184         disk = fs_related.SparseLoopbackDisk(srcimg, srcimgsize)
185         srcloop = PartitionedMount({'/dev/sdb':disk}, srcmnt, skipformat = True)
186
187         srcloop.add_partition(srcimgsize/1024/1024, "/dev/sdb", "/", "ext3", boot=False)
188         try:
189             srcloop.mount()
190
191         except errors.MountError:
192             srcloop.cleanup()
193             raise
194
195         image = os.path.join(tempfile.mkdtemp(dir = "/var/tmp", prefix = "tmp"), "target.img")
196         args = ['dd', "if=%s" % srcloop.partitions[0]['device'], "of=%s" % image]
197
198         msger.info("`dd` image ...")
199         rc = runner.show(args)
200         srcloop.cleanup()
201         shutil.rmtree(os.path.dirname(srcmnt), ignore_errors = True)
202
203         if rc != 0:
204             raise errors.CreatorError("Failed to dd")
205         else:
206             return image