- add hook to run QA tests esp for post product builds
[platform/upstream/build.git] / build_kiwi.sh
1 #!/bin/bash
2 run_kiwi()
3 {
4     imagetype=$(perl -I$BUILD_DIR -MBuild::Kiwi -e Build::Kiwi::show $BUILD_ROOT/$TOPDIR/SOURCES/$SPECFILE imagetype)
5     imagename=$(perl -I$BUILD_DIR -MBuild::Kiwi -e Build::Kiwi::show $BUILD_ROOT/$TOPDIR/SOURCES/$SPECFILE filename)
6     imageversion=$(perl -I$BUILD_DIR -MBuild::Kiwi -e Build::Kiwi::show $BUILD_ROOT/$TOPDIR/SOURCES/$SPECFILE version)
7     # prepare rpms as source and createrepo on the repositories
8     ln -sf $TOPDIR/SOURCES/repos $BUILD_ROOT/repos
9     cd $BUILD_ROOT/$TOPDIR/SOURCES/repos
10     for r in */* ; do
11         test -L $r && continue
12         test -d $r || continue
13         repo="$TOPDIR/SOURCES/repos/$r/"
14         # create compatibility link for old kiwi versions
15         rc="${r//:/:/}"
16         if test "$rc" != "$r" ; then
17         rl="${rc//[^\/]}"
18         rl="${rl//?/../}"
19         mkdir -p "${rc%/*}"
20         ln -s $rl$r "${rc%/*}/${rc##*/}"
21         repo="$TOPDIR/SOURCES/repos/${rc%/*}/${rc##*/}/"
22         fi
23         if test "$imagetype" != product ; then
24             echo "creating repodata for $repo"
25             if chroot $BUILD_ROOT createrepo --simple-md-filenames --help >/dev/null 2>&1 ; then
26                 chroot $BUILD_ROOT createrepo --simple-md-filenames "$repo"
27             else
28                 chroot $BUILD_ROOT createrepo "$repo"
29             fi
30         fi
31     done
32     # unpack root tar
33     for t in $BUILD_ROOT/$TOPDIR/SOURCES/root.tar* ; do
34         test -f $t || continue
35         mkdir -p $BUILD_ROOT/$TOPDIR/SOURCES/root
36         chroot $BUILD_ROOT tar -C $TOPDIR/SOURCES/root -xf "$TOPDIR/SOURCES/${t##*/}"
37     done
38     # fix script permissions
39     chmod a+x $BUILD_ROOT/$TOPDIR/SOURCES/*.sh 2>/dev/null
40     # unpack tar files in image directories
41     if test -d $BUILD_ROOT/$TOPDIR/SOURCES/images ; then
42         (
43         cd $BUILD_ROOT/$TOPDIR/SOURCES/images
44         for r in */* ; do
45             test -L $r && continue
46             test -d $r || continue
47             for t in $r/root.tar* ; do
48                 test -f $t || continue
49                 mkdir -p $r/root
50                 chroot $BUILD_ROOT tar -C $TOPDIR/SOURCES/images/$r/root -xf "$TOPDIR/SOURCES/images/$r/${t##*/}"
51             done
52             # fix script permissions
53             chmod a+x $BUILD_ROOT/$TOPDIR/SOURCES/images/$r/*.sh 2>/dev/null
54             # create compatibility link for old kiwi versions
55             rc="${r//:/:/}"
56             if test "$rc" != "$r" ; then
57                 rl="${rc//[^\/]}"
58                 rl="${rl//?/../}"
59                 mkdir -p "${rc%/*}"
60                 ln -s $rl$r "${rc%/*}/${rc##*/}"
61             fi
62         done
63         )
64     fi
65     rm -f $BUILD_ROOT/$TOPDIR/SOURCES/config.xml
66     ln -s $SPECFILE $BUILD_ROOT/$TOPDIR/SOURCES/config.xml
67     if test "$imagetype" = product ; then
68         echo "running kiwi --create-instsource..."
69         # runs always as abuild user
70         mkdir -p "$BUILD_ROOT/$TOPDIR/KIWIROOT"
71         chroot "$BUILD_ROOT" chown -R abuild.abuild "$TOPDIR"
72         ver=`chroot "$BUILD_ROOT" su -c "/usr/sbin/kiwi --version | sed -n 's,.*kiwi version v\(.*\),\1,p'"`
73         if [ ${ver:0:1} == "3" ]; then
74           # old style kiwi 3 builds
75           chroot "$BUILD_ROOT" su -c "APPID=- LANG=POSIX /usr/sbin/kiwi --root $TOPDIR/KIWIROOT -v --logfile terminal -p $TOPDIR/SOURCES --instsource-local --create-instsource $TOPDIR/SOURCES" - abuild < /dev/null && BUILD_SUCCEEDED=true
76           if [ ${ver:2:2} == "01" ]; then
77             ## This block is obsolete with current kiwi versions, only needed for kiwi 3.01 version
78             for i in $BUILD_ROOT/$TOPDIR/KIWIROOT/main/* ; do
79                 test -d "$i" || continue
80                 n="${i##*/}"
81                 test "$n" = scripts && continue
82                 test "$n" != "${n%0}" && continue
83                 chroot $BUILD_ROOT su -c "suse-isolinux $TOPDIR/KIWIROOT/main/$n $TOPDIR/KIWI/$n.iso" - $BUILD_USER
84             done
85           fi
86         else
87           if [ ${ver:0:1} == "4" -a ${ver:2:2} -lt 90 ]; then
88             # broken kiwi version, not accepting verbose level
89             chroot "$BUILD_ROOT" su -c "APPID=- LANG=POSIX /usr/sbin/kiwi --root $TOPDIR/KIWIROOT -v --logfile terminal -p $TOPDIR/SOURCES --create-instsource $TOPDIR/SOURCES" - abuild < /dev/null && BUILD_SUCCEEDED=true
90           else
91             # current default
92             chroot "$BUILD_ROOT" su -c "APPID=- LANG=POSIX /usr/sbin/kiwi --root $TOPDIR/KIWIROOT -v 2 --logfile terminal -p $TOPDIR/SOURCES --create-instsource $TOPDIR/SOURCES" - abuild < /dev/null && BUILD_SUCCEEDED=true
93           fi
94         fi
95
96         # move created product to correct destination
97         for i in $BUILD_ROOT/$TOPDIR/KIWIROOT/main/* ; do
98             test -e "$i" || continue
99             f=${i##*/}
100             case $f in
101                 *.iso) mv $i $BUILD_ROOT/$TOPDIR/KIWI/. ;;
102                 scripts) ;;
103                 *0) ;;
104                 *) test -d $i && mv $i $BUILD_ROOT/$TOPDIR/KIWI/. ;;
105             esac
106         done
107     else
108         BUILD_SUCCEEDED=true
109         if [ -z "$RUNNING_IN_VM" ]; then
110             # NOTE: this must be done with the outer system, because it loads the dm-mod kernel modules, which needs to fit to the kernel.
111             echo "starting device mapper for kiwi..."
112             [ -x /etc/init.d/boot.device-mapper ] && /etc/init.d/boot.device-mapper start
113         fi
114         for imgtype in $imagetype ; do
115             echo "running kiwi --prepare for $imgtype..."
116             # Do not use $BUILD_USER here, since we always need root permissions
117             if chroot $BUILD_ROOT su -c "cd $TOPDIR/SOURCES && kiwi --prepare $TOPDIR/SOURCES --logfile terminal --root $TOPDIR/KIWIROOT-$imgtype" - root < /dev/null ; then
118                 echo "running kiwi --create for $imgtype..."
119                 mkdir -p $BUILD_ROOT/$TOPDIR/KIWI-$imgtype
120                 chroot $BUILD_ROOT su -c "cd $TOPDIR/SOURCES && kiwi --create $TOPDIR/KIWIROOT-$imgtype --logfile terminal --type $imgtype -d $TOPDIR/KIWI-$imgtype" - root < /dev/null || cleanup_and_exit 1
121             else
122                 cleanup_and_exit 1
123             fi
124         done
125
126         # create tar.gz of images, in case it makes sense
127         imagearch=`uname -m`
128         buildnum=""
129           if test -n "$RELEASE"; then
130             buildnum="-Build$RELEASE"
131         fi
132         imageout="$imagename.$imagearch-$imageversion"
133         for imgtype in $imagetype ; do
134             case "$imgtype" in
135                 oem)
136                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
137 echo "compressing oem images... "
138 cd /$TOPDIR/KIWI-oem
139 if [ -e "$imageout.iso" ]; then
140         echo "take iso file and create sha256..."
141         mv "$imageout.iso" "/$TOPDIR/KIWI/$imageout$buildnum.iso"
142         pushd /$TOPDIR/KIWI
143         if [ -x /usr/bin/sha256sum ]; then
144            /usr/bin/sha256sum "$imageout$buildnum.iso" > "$imageout$buildnum.iso.sha256"
145         fi
146         popd
147 fi
148 if [ -e "$imageout.raw" ]; then
149         mv "$imageout.raw" "/$TOPDIR/KIWI/$imageout$buildnum.raw"
150         pushd /$TOPDIR/KIWI
151         echo "bzip2 raw file..."
152         bzip2 "$imageout$buildnum.raw"
153         if [ -x /usr/bin/sha256sum ]; then
154             echo "Create sha256 file..."
155             /usr/bin/sha256sum "$imageout$buildnum.raw.bz2" > "$imageout$buildnum.raw.bz2.sha256"
156         fi
157         popd
158 fi
159
160 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-raw.tar.bz2" \
161         --exclude="$imageout.iso" --exclude="$imageout.raw" *
162 cd /$TOPDIR/KIWI
163 if [ -x /usr/bin/sha256sum ]; then
164    /usr/bin/sha256sum "$imageout$buildnum-raw.tar.bz2" > "$imageout$buildnum-raw.tar.bz2.sha256"
165 fi
166 EOF
167                     ;;
168                 vmx)
169                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
170 echo "compressing vmx images... "
171 cd /$TOPDIR/KIWI-vmx
172 # This option has a number of format parameters
173 VMXFILES=""
174 SHAFILES=""
175 for i in "$imageout.vmx" "$imageout.vmdk" "$imageout-disk*.vmdk" "$imageout.ovf"; do
176         ls \$i >& /dev/null && VMXFILES="\$VMXFILES \$i"
177 done
178 if [ -n "\$VMXFILES" ]; then
179         tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-vmx.tar.bz2" \$VMXFILES
180         SHAFILES="\$SHAFILES $imageout$buildnum-vmx.tar.bz2"
181 fi
182
183 if [ -e "$imageout.xenconfig" ]; then
184         tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-vmx.tar.bz2" $imageout.xenconfig $imageout.raw initrd-*
185         SHAFILES="\$SHAFILES $imageout$buildnum-vmx.tar.bz2"
186 fi
187 # FIXME: do we need a single .raw file in any case ?
188
189 cd /$TOPDIR/KIWI
190 if [ -n "\$SHAFILES" -a -x /usr/bin/sha256sum ]; then
191         for i in \$SHAFILES; do
192                 echo "Create sha256 file..."
193                 /usr/bin/sha256sum "\$i" > "\$i.sha256"
194         done
195 fi
196 EOF
197                     ;;
198                 xen)
199                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
200 echo "compressing xen images... "
201 cd /$TOPDIR/KIWI-xen
202 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-xen.tar.bz2" \
203         `grep ^kernel $imageout.xenconfig | cut -d'"'  -f2` \
204         `grep ^ramdisk $imageout.xenconfig | cut -d'"'  -f2` \
205         initrd-* \
206         "$imageout.xenconfig" \
207         "$imageout"
208 if [ -x /usr/bin/sha256sum ]; then
209    echo "Create sha256 file..."
210    cd $TOPDIR/KIWI
211    /usr/bin/sha256sum "$imageout$buildnum-xen.tar.bz2" > "$imageout$buildnum-xen.tar.bz2.sha256"
212 fi
213 EOF
214                     ;;
215                 pxe)
216                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
217 echo "compressing pxe images... "
218 cd /$TOPDIR/KIWI-pxe
219 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-pxe.tar.bz2" ${imageout}* initrd-*
220 if [ -x /usr/bin/sha256sum ]; then
221    echo "Create sha256 file..."
222    cd $TOPDIR/KIWI
223    /usr/bin/sha256sum "$imageout$buildnum-pxe.tar.bz2" > "$imageout$buildnum-pxe.tar.bz2.sha256"
224 fi
225 EOF
226                     ;;
227                 iso)
228                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
229 cd /$TOPDIR/KIWI-iso
230 for i in *.iso; do
231         mv "\$i" "/$TOPDIR/KIWI/\${i%.iso}$buildnum.iso"
232 done
233 if [ -x /usr/bin/sha256sum ]; then
234    echo "creating sha256 sum for iso images... "
235    cd $TOPDIR/KIWI
236    for i in *.iso; do
237         /usr/bin/sha256sum "\$i" > "\$i.sha256"
238    done
239 fi
240 EOF
241                     ;;
242                 *)
243                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
244 echo "compressing unkown images... "
245 cd /$TOPDIR/KIWI-$imgtype
246 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-$imgtype.tar.bz2" *
247 if [ -x /usr/bin/sha256sum ]; then
248    echo "Create sha256 file..."
249    cd /$TOPDIR/KIWI
250    /usr/bin/sha256sum "$imageout$buildnum-$imgtype.tar.bz2" > "$imageout$buildnum-$imgtype.tar.bz2.sha256"
251 fi
252 EOF
253                     ;;
254             esac
255             chroot $BUILD_ROOT su -c "sh -x -e /kiwi_post.sh" || cleanup_and_exit 1
256             rm -f $BUILD_ROOT/kiwi_post.sh
257         done
258     fi
259     # Hook for running post kiwi build scripts like QA scripts if installed
260     if [ -x /usr/lib/build/kiwi_post_run ]; then
261         chroot $BUILD_ROOT su -c /usr/lib/build/kiwi_post_run || cleanup_and_exit 1
262     fi
263 }