build_kiwi.sh

   1 #!/bin/bash
   2 run_kiwi()
   3 {
   4     imagetype=$(perl -I$BUILD_DIR -MBuild::Kiwi -e Build::Kiwi::show $BUILD_ROOT/$TOPDIR/SOURCES/$SPECFILE imagetype)
   5     imagename=$(perl -I$BUILD_DIR -MBuild::Kiwi -e Build::Kiwi::show $BUILD_ROOT/$TOPDIR/SOURCES/$SPECFILE filename)
   6     imageversion=$(perl -I$BUILD_DIR -MBuild::Kiwi -e Build::Kiwi::show $BUILD_ROOT/$TOPDIR/SOURCES/$SPECFILE version)
   7     # prepare rpms as source and createrepo on the repositories
   8     ln -sf $TOPDIR/SOURCES/repos $BUILD_ROOT/repos
   9     cd $BUILD_ROOT/$TOPDIR/SOURCES/repos
  10     for r in */* ; do
  11         test -L $r && continue
  12         test -d $r || continue
  13         repo="$TOPDIR/SOURCES/repos/$r/"
  14         # create compatibility link for old kiwi versions
  15         rc="${r//:/:/}"
  16         if test "$rc" != "$r" ; then
  17         rl="${rc//[^\/]}"
  18         rl="${rl//?/../}"
  19         mkdir -p "${rc%/*}"
  20         ln -s $rl$r "${rc%/*}/${rc##*/}"
  21         repo="$TOPDIR/SOURCES/repos/${rc%/*}/${rc##*/}/"
  22         fi
  23         if test "$imagetype" != product -a "$DO_INIT" != "false" ; then
  24             echo "creating repodata for $repo"
  25             if chroot $BUILD_ROOT createrepo --simple-md-filenames --help >/dev/null 2>&1 ; then
  26                 chroot $BUILD_ROOT createrepo --simple-md-filenames "$repo"
  27             else
  28                 chroot $BUILD_ROOT createrepo "$repo"
  29             fi
  30         fi
  31     done
  32     # unpack root tar
  33     for t in $BUILD_ROOT/$TOPDIR/SOURCES/root.tar* ; do
  34         test -f $t || continue
  35         mkdir -p $BUILD_ROOT/$TOPDIR/SOURCES/root
  36         chroot $BUILD_ROOT tar -C $TOPDIR/SOURCES/root -xf "$TOPDIR/SOURCES/${t##*/}"
  37     done
  38     # fix script permissions
  39     chmod a+x $BUILD_ROOT/$TOPDIR/SOURCES/*.sh 2>/dev/null
  40     # unpack tar files in image directories
  41     if test -d $BUILD_ROOT/$TOPDIR/SOURCES/images ; then
  42         (
  43         cd $BUILD_ROOT/$TOPDIR/SOURCES/images
  44         for r in */* ; do
  45             test -L $r && continue
  46             test -d $r || continue
  47             for t in $r/root.tar* ; do
  48                 test -f $t || continue
  49                 mkdir -p $r/root
  50                 chroot $BUILD_ROOT tar -C $TOPDIR/SOURCES/images/$r/root -xf "$TOPDIR/SOURCES/images/$r/${t##*/}"
  51             done
  52             # fix script permissions
  53             chmod a+x $BUILD_ROOT/$TOPDIR/SOURCES/images/$r/*.sh 2>/dev/null
  54             # create compatibility link for old kiwi versions
  55             rc="${r//:/:/}"
  56             if test "$rc" != "$r" ; then
  57                 rl="${rc//[^\/]}"
  58                 rl="${rl//?/../}"
  59                 mkdir -p "${rc%/*}"
  60                 ln -s $rl$r "${rc%/*}/${rc##*/}"
  61             fi
  62         done
  63         )
  64     fi
  65     rm -f $BUILD_ROOT/$TOPDIR/SOURCES/config.xml
  66     ln -s $SPECFILE $BUILD_ROOT/$TOPDIR/SOURCES/config.xml
  67     if test "$imagetype" = product ; then
  68         echo "running kiwi --create-instsource..."
  69         # runs always as abuild user
  70         mkdir -p "$BUILD_ROOT/$TOPDIR/KIWIROOT"
  71         chroot "$BUILD_ROOT" chown -R abuild.abuild "$TOPDIR"
  72         ver=`chroot "$BUILD_ROOT" su -c "/usr/sbin/kiwi --version | sed -n 's,.*kiwi version v\(.*\),\1,p'"`
  73         if [ ${ver:0:1} == "3" ]; then
  74           # old style kiwi 3 builds
  75           chroot "$BUILD_ROOT" su -c "APPID=- LANG=POSIX /usr/sbin/kiwi --root $TOPDIR/KIWIROOT -v --logfile terminal -p $TOPDIR/SOURCES --instsource-local --create-instsource $TOPDIR/SOURCES" - abuild < /dev/null && BUILD_SUCCEEDED=true
  76           if [ ${ver:2:2} == "01" ]; then
  77             ## This block is obsolete with current kiwi versions, only needed for kiwi 3.01 version
  78             for i in $BUILD_ROOT/$TOPDIR/KIWIROOT/main/* ; do
  79                 test -d "$i" || continue
  80                 n="${i##*/}"
  81                 test "$n" = scripts && continue
  82                 test "$n" != "${n%0}" && continue
  83                 chroot $BUILD_ROOT su -c "suse-isolinux $TOPDIR/KIWIROOT/main/$n $TOPDIR/KIWI/$n.iso" - $BUILD_USER
  84             done
  85           fi
  86         else
  87           if [ ${ver:0:1} == "4" -a ${ver:2:2} -lt 90 ]; then
  88             # broken kiwi version, not accepting verbose level
  89             chroot "$BUILD_ROOT" su -c "APPID=- LANG=POSIX /usr/sbin/kiwi --root $TOPDIR/KIWIROOT -v -v --logfile terminal -p $TOPDIR/SOURCES --create-instsource $TOPDIR/SOURCES" - abuild < /dev/null && BUILD_SUCCEEDED=true
  90           else
  91             # current default
  92             chroot "$BUILD_ROOT" su -c "APPID=- LANG=POSIX /usr/sbin/kiwi --root $TOPDIR/KIWIROOT -v 2 --logfile terminal -p $TOPDIR/SOURCES --create-instsource $TOPDIR/SOURCES" - abuild < /dev/null && BUILD_SUCCEEDED=true
  93           fi
  94         fi
  95
  96         # move created product to correct destination
  97         for i in $BUILD_ROOT/$TOPDIR/KIWIROOT/main/* ; do
  98             test -e "$i" || continue
  99             f=${i##*/}
 100             case $f in
 101                 *.iso) mv $i $BUILD_ROOT/$TOPDIR/KIWI/. ;;
 102                 scripts) ;;
 103                 *0) ;;
 104                 *) test -d $i && mv $i $BUILD_ROOT/$TOPDIR/KIWI/. ;;
 105             esac
 106         done
 107     else
 108         BUILD_SUCCEEDED=true
 109         if [ -z "$RUNNING_IN_VM" ]; then
 110             # NOTE: this must be done with the outer system, because it loads the dm-mod kernel modules, which needs to fit to the kernel.
 111             echo "starting device mapper for kiwi..."
 112             [ -x /etc/init.d/boot.device-mapper ] && /etc/init.d/boot.device-mapper start
 113         fi
 114         for imgtype in $imagetype ; do
 115             echo "running kiwi --prepare for $imgtype..."
 116             # Do not use $BUILD_USER here, since we always need root permissions
 117             if chroot $BUILD_ROOT su -c "cd $TOPDIR/SOURCES && kiwi --prepare $TOPDIR/SOURCES --logfile terminal --root $TOPDIR/KIWIROOT-$imgtype" - root < /dev/null ; then
 118                 echo "running kiwi --create for $imgtype..."
 119                 mkdir -p $BUILD_ROOT/$TOPDIR/KIWI-$imgtype
 120                 chroot $BUILD_ROOT su -c "cd $TOPDIR/SOURCES && kiwi --create $TOPDIR/KIWIROOT-$imgtype --logfile terminal --type $imgtype -d $TOPDIR/KIWI-$imgtype" - root < /dev/null || cleanup_and_exit 1
 121             else
 122                 cleanup_and_exit 1
 123             fi
 124         done
 125
 126         # create tar.gz of images, in case it makes sense
 127         imagearch=`uname -m`
 128         buildnum=""
 129           if test -n "$RELEASE"; then
 130             buildnum="-Build$RELEASE"
 131         fi
 132         imageout="$imagename.$imagearch-$imageversion"
 133         for imgtype in $imagetype ; do
 134             case "$imgtype" in
 135                 oem)
 136                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 137 echo "compressing oem images... "
 138 cd /$TOPDIR/KIWI-oem
 139 # do not store compressed file _and_ uncompressed one
 140 [ -e "$imageout.gz" ] && rm -f "$imageout"
 141 if [ -e "$imageout.iso" ]; then
 142         echo "take iso file and create sha256..."
 143         mv "$imageout.iso" "/$TOPDIR/KIWI/$imageout$buildnum.iso"
 144         pushd /$TOPDIR/KIWI
 145         if [ -x /usr/bin/sha256sum ]; then
 146            /usr/bin/sha256sum "$imageout$buildnum.iso" > "$imageout$buildnum.iso.sha256"
 147         fi
 148         popd
 149 fi
 150 if [ -e "$imageout.qcow2" ]; then
 151         mv "$imageout.qcow2" "/$TOPDIR/KIWI/$imageout$buildnum.qcow2"
 152         pushd /$TOPDIR/KIWI
 153         if [ -x /usr/bin/sha256sum ]; then
 154             echo "Create sha256 file..."
 155             /usr/bin/sha256sum "$imageout$buildnum.qcow2" > "$imageout$buildnum.qcow2.sha256"
 156         fi
 157         popd
 158 fi
 159 if [ -e "$imageout.raw" ]; then
 160         compress_tool="bzip2"
 161         compress_suffix="bz2"
 162         if [ -x /usr/bin/xz ]; then
 163             # take xz to get support for sparse files
 164             compress_tool="xz -2"
 165             compress_suffix="xz"
 166         fi
 167         mv "$imageout.raw" "/$TOPDIR/KIWI/$imageout$buildnum.raw"
 168         pushd /$TOPDIR/KIWI
 169         echo "\$compress_tool raw file..."
 170         \$compress_tool "$imageout$buildnum.raw"
 171         if [ -x /usr/bin/sha256sum ]; then
 172             echo "Create sha256 file..."
 173             /usr/bin/sha256sum "$imageout$buildnum.raw.\${compress_suffix}" > "$imageout$buildnum.raw.\${compress_suffix}.sha256"
 174         fi
 175         popd
 176 fi
 177
 178 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-raw.tar.bz2" \
 179         --exclude="$imageout.iso" --exclude="$imageout.raw" --exclude="$imageout.qcow2" *
 180 cd /$TOPDIR/KIWI
 181 if [ -x /usr/bin/sha256sum ]; then
 182    /usr/bin/sha256sum "$imageout$buildnum-raw.tar.bz2" > "$imageout$buildnum-raw.tar.bz2.sha256"
 183 fi
 184 EOF
 185                     ;;
 186                 vmx)
 187                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 188 echo "compressing vmx images... "
 189 cd /$TOPDIR/KIWI-vmx
 190 # This option has a number of format parameters
 191 VMXFILES=""
 192 SHAFILES=""
 193 for i in "$imageout.vmx" "$imageout.vmdk" "$imageout-disk*.vmdk" "$imageout.ovf" "$imageout.qcow2"; do
 194         test -e \$i && VMXFILES="\$VMXFILES \$i"
 195 done
 196 # take raw files as fallback
 197 if [ -z "\$VMXFILES" ]; then
 198         test -e "$imageout.raw" && VMXFILES="$imageout.raw"
 199 fi
 200 if [ -n "\$VMXFILES" ]; then
 201         tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-vmx.tar.bz2" \$VMXFILES
 202         SHAFILES="\$SHAFILES $imageout$buildnum-vmx.tar.bz2"
 203 fi
 204 if [ -e "$imageout.xenconfig" ]; then
 205         tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-vmx.tar.bz2" $imageout.xenconfig $imageout.raw initrd-*
 206         SHAFILES="\$SHAFILES $imageout$buildnum-vmx.tar.bz2"
 207 fi
 208 # FIXME: do we need a single .raw file in any case ?
 209
 210 cd /$TOPDIR/KIWI
 211 if [ -n "\$SHAFILES" -a -x /usr/bin/sha256sum ]; then
 212         for i in \$SHAFILES; do
 213                 echo "Create sha256 file..."
 214                 /usr/bin/sha256sum "\$i" > "\$i.sha256"
 215         done
 216 fi
 217 EOF
 218                     ;;
 219                 xen)
 220                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 221 echo "compressing xen images... "
 222 cd /$TOPDIR/KIWI-xen
 223 # do not store compressed file _and_ uncompressed one
 224 [ -e "$imageout.gz" ] && rm -f "$imageout"
 225 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-xen.tar.bz2" \
 226         `grep ^kernel $imageout.xenconfig | cut -d'"'  -f2` \
 227         `grep ^ramdisk $imageout.xenconfig | cut -d'"'  -f2` \
 228         initrd-* \
 229         "$imageout.xenconfig" \
 230         "$imageout"
 231 if [ -x /usr/bin/sha256sum ]; then
 232    echo "Create sha256 file..."
 233    cd $TOPDIR/KIWI
 234    /usr/bin/sha256sum "$imageout$buildnum-xen.tar.bz2" > "$imageout$buildnum-xen.tar.bz2.sha256"
 235 fi
 236 EOF
 237                     ;;
 238                 pxe)
 239                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 240 echo "compressing pxe images... "
 241 cd /$TOPDIR/KIWI-pxe
 242 # do not store compressed file _and_ uncompressed one
 243 [ -e "$imageout.gz" ] && rm -f "$imageout"
 244 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-pxe.tar.bz2" ${imageout}* initrd-*
 245 if [ -x /usr/bin/sha256sum ]; then
 246    echo "Create sha256 file..."
 247    cd $TOPDIR/KIWI
 248    /usr/bin/sha256sum "$imageout$buildnum-pxe.tar.bz2" > "$imageout$buildnum-pxe.tar.bz2.sha256"
 249 fi
 250 EOF
 251                     ;;
 252                 iso)
 253                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 254 cd /$TOPDIR/KIWI-iso
 255 for i in *.iso; do
 256         mv "\$i" "/$TOPDIR/KIWI/\${i%.iso}$buildnum.iso"
 257 done
 258 if [ -x /usr/bin/sha256sum ]; then
 259    echo "creating sha256 sum for iso images... "
 260    cd $TOPDIR/KIWI
 261    for i in *.iso; do
 262         /usr/bin/sha256sum "\$i" > "\$i.sha256"
 263    done
 264 fi
 265 EOF
 266                     ;;
 267                 tbz)
 268                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 269 cd /$TOPDIR/KIWI-tbz
 270 for i in *.tbz; do
 271         file=\$(readlink -f "\$i")
 272         [ -z "\$file" ] && echo readlink failed for $i
 273         mv "\$file" "/$TOPDIR/KIWI/\${i%.tbz}$buildnum.tbz"
 274 done
 275 if [ -x /usr/bin/sha256sum ]; then
 276    echo "creating sha256 sum for tar balls... "
 277    cd $TOPDIR/KIWI
 278    for i in *.tbz; do
 279         /usr/bin/sha256sum "\$i" > "\$i.sha256"
 280    done
 281 fi
 282 EOF
 283                     ;;
 284                 *)
 285                     cat > $BUILD_ROOT/kiwi_post.sh << EOF
 286 echo "compressing unkown images... "
 287 cd /$TOPDIR/KIWI-$imgtype
 288 # do not store compressed file _and_ uncompressed one
 289 [ -e "$imageout.gz" ] && rm -f "$imageout"
 290 tar cvjfS "/$TOPDIR/KIWI/$imageout$buildnum-$imgtype.tar.bz2" *
 291 if [ -x /usr/bin/sha256sum ]; then
 292    echo "Create sha256 file..."
 293    cd /$TOPDIR/KIWI
 294    /usr/bin/sha256sum "$imageout$buildnum-$imgtype.tar.bz2" > "$imageout$buildnum-$imgtype.tar.bz2.sha256"
 295 fi
 296 EOF
 297                     ;;
 298             esac
 299             chroot $BUILD_ROOT su -c "sh -e /kiwi_post.sh" || cleanup_and_exit 1
 300             rm -f $BUILD_ROOT/kiwi_post.sh
 301         done
 302     fi
 303     # Hook for running post kiwi build scripts like QA scripts if installed
 304     if [ -x $BUILD_ROOT/usr/lib/build/kiwi_post_run ]; then
 305         chroot $BUILD_ROOT su -c /usr/lib/build/kiwi_post_run || cleanup_and_exit 1
 306     fi
 307 }