src-release.sh

   1 #!/usr/bin/env bash
   2 #   Copyright (C) 1990-2018 Free Software Foundation
   3 #
   4 # This file is free software; you can redistribute it and/or modify
   5 # it under the terms of the GNU General Public License as published by
   6 # the Free Software Foundation; either version 3 of the License, or
   7 # (at your option) any later version.
   8 #
   9 # This program is distributed in the hope that it will be useful,
  10 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  11 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  12 # GNU General Public License for more details.
  13 #
  14 # You should have received a copy of the GNU General Public License
  15 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
  16 #
  17
  18 # This script creates release packages for gdb, binutils, and other
  19 # packages which live in src.  It used to be implemented as the src-release
  20 # Makefile and prior to that was part of the top level Makefile, but that
  21 # turned out to be very messy and hard to maintain.
  22
  23 set -e
  24
  25 BZIPPROG=bzip2
  26 GZIPPROG=gzip
  27 LZIPPROG=lzip
  28 XZPROG=xz
  29 MD5PROG=md5sum
  30 MAKE=make
  31 CC=gcc
  32 CXX=g++
  33
  34 # Default to avoid splitting info files by setting the threshold high.
  35 MAKEINFOFLAGS=--split-size=5000000
  36
  37 #
  38 # Support for building net releases
  39
  40 # Files in root used in any net release.
  41 DEVO_SUPPORT="README Makefile.in configure configure.ac \
  42         config.guess config.sub config move-if-change \
  43         COPYING COPYING.LIB install-sh config-ml.in symlink-tree \
  44         mkinstalldirs ltmain.sh missing ylwrap \
  45         libtool.m4 ltsugar.m4 ltversion.m4 ltoptions.m4 \
  46         Makefile.def Makefile.tpl src-release.sh config.rpath \
  47         ChangeLog MAINTAINERS README-maintainer-mode \
  48         lt~obsolete.m4 ltgcc.m4 depcomp mkdep compile \
  49         COPYING3 COPYING3.LIB"
  50
  51 # Files in devo/etc used in any net release.
  52 ETC_SUPPORT="Makefile.in configure configure.in standards.texi \
  53         make-stds.texi standards.info* configure.texi configure.info* \
  54         ChangeLog configbuild.* configdev.* fdl.texi texi2pod.pl gnu-oids.texi"
  55
  56 # Get the version number of a given tool
  57 getver()
  58 {
  59     tool=$1
  60     if grep 'AC_INIT.*BFD_VERSION' $tool/configure.ac >/dev/null 2>&1; then
  61         bfd/configure --version | sed -n -e '1s,.* ,,p'
  62     elif test -f $tool/common/create-version.sh; then
  63         $tool/common/create-version.sh $tool 'dummy-host' 'dummy-target' VER.tmp
  64         cat VER.tmp | grep 'version\[\]' | sed 's/.*"\([^"]*\)".*/\1/' | sed 's/-git$//'
  65         rm -f VER.tmp
  66     elif test -f $tool/version.in; then
  67         head -1 $tool/version.in
  68     else
  69         echo VERSION
  70     fi
  71 }
  72
  73 # Setup build directory for building release tarball
  74 do_proto_toplev()
  75 {
  76     package=$1
  77     ver=$2
  78     tool=$3
  79     support_files=$4
  80
  81     echo "==> Cleaning sources."
  82     find \( -name "*.orig" -o  -name "*.rej" -o -name "*~" -o -name ".#*" -o -name "*~$bkpat" \) -exec rm {} \;
  83
  84     echo "==> Making $package-$ver/"
  85     # Take out texinfo from a few places.
  86     sed -e '/^all\.normal: /s/\all-texinfo //' \
  87         -e '/^  install-texinfo /d' \
  88         <Makefile.in >tmp
  89     mv -f tmp Makefile.in
  90     # configure.  --enable-gold is needed to ensure .c/.h from .y are
  91     # built in the gold dir.  The disables speed the build a little.
  92     enables=
  93     disables=
  94     for dir in binutils gas gdb gold gprof ld libdecnumber readline sim; do
  95         case " $tool $support_files " in
  96             *" $dir "*) enables="$enables --enable-$dir" ;;
  97             *) disables="$disables --disable-$dir" ;;
  98         esac
  99     done
 100     echo "==> configure --target=i386-pc-linux-gnu $disables $enables"
 101     ./configure --target=i386-pc-linux-gnu $disables $enables
 102     $MAKE configure-host configure-target \
 103         ALL_GCC="" ALL_GCC_C="" ALL_GCC_CXX="" \
 104         CC_FOR_TARGET="$CC" CXX_FOR_TARGET="$CXX"
 105     # Make links, and run "make diststuff" or "make info" when needed.
 106     rm -rf proto-toplev
 107     mkdir proto-toplev
 108     dirs="$DEVO_SUPPORT $support_files $tool"
 109     for d in $dirs ; do
 110         if [ -d $d ]; then
 111             if [ ! -f $d/Makefile ] ; then
 112                 true
 113             elif grep '^diststuff:' $d/Makefile >/dev/null ; then
 114                 (cd $d ; $MAKE MAKEINFOFLAGS="$MAKEINFOFLAGS" diststuff) \
 115                     || exit 1
 116             elif grep '^info:' $d/Makefile >/dev/null ; then
 117                 (cd $d ; $MAKE MAKEINFOFLAGS="$MAKEINFOFLAGS" info) \
 118                     || exit 1
 119             fi
 120             if [ -d $d/proto-$d.dir ]; then
 121                 ln -s ../$d/proto-$d.dir proto-toplev/$d
 122             else
 123                 ln -s ../$d proto-toplev/$d
 124             fi
 125         else
 126             if (echo x$d | grep / >/dev/null); then
 127               mkdir -p proto-toplev/`dirname $d`
 128               x=`dirname $d`
 129               ln -s ../`echo $x/ | sed -e 's,[^/]*/,../,g'`$d proto-toplev/$d
 130             else
 131               ln -s ../$d proto-toplev/$d
 132             fi
 133           fi
 134         done
 135         (cd etc; $MAKE MAKEINFOFLAGS="$MAKEINFOFLAGS" info)
 136         $MAKE distclean
 137         mkdir proto-toplev/etc
 138         (cd proto-toplev/etc;
 139             for i in $ETC_SUPPORT; do
 140                 ln -s ../../etc/$i .
 141                 done)
 142         #
 143         # Take out texinfo from configurable dirs
 144         rm proto-toplev/configure.ac
 145         sed -e '/^host_tools=/s/texinfo //' \
 146             <configure.ac >proto-toplev/configure.ac
 147         #
 148         mkdir proto-toplev/texinfo
 149         ln -s ../../texinfo/texinfo.tex proto-toplev/texinfo/
 150         if test -r texinfo/util/tex3patch ; then
 151             mkdir proto-toplev/texinfo/util && \
 152                 ln -s ../../../texinfo/util/tex3patch proto-toplev/texinfo/util
 153         else
 154             true
 155         fi
 156         chmod -R og=u . || chmod og=u `find . -print`
 157         #
 158         # Create .gmo files from .po files.
 159         for f in `find . -name '*.po' -type f -print`; do
 160             msgfmt -o `echo $f | sed -e 's/\.po$/.gmo/'` $f
 161         done
 162         #
 163         rm -f $package-$ver
 164         ln -s proto-toplev $package-$ver
 165 }
 166
 167 CVS_NAMES='-name CVS -o -name .cvsignore'
 168
 169 # Add an md5sum to the built tarball
 170 do_md5sum()
 171 {
 172     echo "==> Adding md5 checksum to top-level directory"
 173     (cd proto-toplev && find * -follow \( $CVS_NAMES \) -prune \
 174         -o -type f -print \
 175         | xargs $MD5PROG > ../md5.new)
 176     rm -f proto-toplev/md5.sum
 177     mv md5.new proto-toplev/md5.sum
 178 }
 179
 180 # Build the release tarball
 181 do_tar()
 182 {
 183     package=$1
 184     ver=$2
 185     echo "==> Making $package-$ver.tar"
 186     rm -f $package-$ver.tar
 187     find $package-$ver -follow \( $CVS_NAMES \) -prune \
 188         -o -type f -print \
 189         | tar cTfh - $package-$ver.tar
 190 }
 191
 192 # Compress the output with bzip2
 193 do_bz2()
 194 {
 195     package=$1
 196     ver=$2
 197     echo "==> Bzipping $package-$ver.tar.bz2"
 198     rm -f $package-$ver.tar.bz2
 199     $BZIPPROG -k -v -9 $package-$ver.tar
 200 }
 201
 202 # Compress the output with gzip
 203 do_gz()
 204 {
 205     package=$1
 206     ver=$2
 207     echo "==> Gzipping $package-$ver.tar.gz"
 208     rm -f $package-$ver.tar.gz
 209     $GZIPPROG -k -v -9 $package-$ver.tar
 210 }
 211
 212 # Compress the output with lzip
 213 do_lz()
 214 {
 215     package=$1
 216     ver=$2
 217     echo "==> Lzipping $package-$ver.tar.lz"
 218     rm -f $package-$ver.tar.lz
 219     $LZIPPROG -k -v -9 $package-$ver.tar
 220 }
 221
 222 # Compress the output with xz
 223 do_xz()
 224 {
 225     package=$1
 226     ver=$2
 227     echo "==> Xzipping $package-$ver.tar.xz"
 228     rm -f $package-$ver.tar.xz
 229     $XZPROG -k -v -9 $package-$ver.tar
 230 }
 231
 232 # Compress the output with all selected compresion methods
 233 do_compress()
 234 {
 235     package=$1
 236     ver=$2
 237     compressors=$3
 238     for comp in $compressors; do
 239         case $comp in
 240             bz2)
 241                 do_bz2 $package $ver;;
 242             gz)
 243                 do_gz $package $ver;;
 244             lz)
 245                 do_lz $package $ver;;
 246             xz)
 247                 do_xz $package $ver;;
 248             *)
 249                 echo "Unknown compression method: $comp" && exit 1;;
 250         esac
 251     done
 252 }
 253
 254 # Add djunpack.bat the tarball
 255 do_djunpack()
 256 {
 257     package=$1
 258     ver=$2
 259     echo "==> Adding updated djunpack.bat to top-level directory"
 260     echo - 's /gdb-[0-9\.]*/$package-'"$ver"'/'
 261     sed < djunpack.bat > djunpack.new \
 262         -e 's/gdb-[0-9][0-9\.]*/$package-'"$ver"'/'
 263     rm -f proto-toplev/djunpack.bat
 264     mv djunpack.new proto-toplev/djunpack.bat
 265 }
 266
 267 # Create a release package, tar it and compress it
 268 tar_compress()
 269 {
 270     package=$1
 271     tool=$2
 272     support_files=$3
 273     compressors=$4
 274     verdir=${5:-$tool}
 275     ver=$(getver $verdir)
 276     do_proto_toplev $package $ver $tool "$support_files"
 277     do_md5sum
 278     do_tar $package $ver
 279     do_compress $package $ver "$compressors"
 280 }
 281
 282 # Create a gdb release package, tar it and compress it
 283 gdb_tar_compress()
 284 {
 285     package=$1
 286     tool=$2
 287     support_files=$3
 288     compressors=$4
 289     ver=$(getver $tool)
 290     do_proto_toplev $package $ver $tool "$support_files"
 291     do_md5sum
 292     do_djunpack $package $ver
 293     do_tar $package $ver
 294     do_compress $package $ver "$compressors"
 295 }
 296
 297 # The FSF "binutils" release includes gprof and ld.
 298 BINUTILS_SUPPORT_DIRS="bfd gas include libiberty opcodes ld elfcpp gold gprof intl setup.com makefile.vms cpu zlib"
 299 binutils_release()
 300 {
 301     compressors=$1
 302     package=binutils
 303     tool=binutils
 304     tar_compress $package $tool "$BINUTILS_SUPPORT_DIRS" "$compressors"
 305 }
 306
 307 GAS_SUPPORT_DIRS="bfd include libiberty opcodes intl setup.com makefile.vms zlib"
 308 gas_release()
 309 {
 310     compressors=$1
 311     package=gas
 312     tool=gas
 313     tar_compress $package $tool "$GAS_SUPPORT_DIRS" "$compressors"
 314 }
 315
 316 GDB_SUPPORT_DIRS="bfd include libiberty opcodes readline sim intl libdecnumber cpu zlib"
 317 gdb_release()
 318 {
 319     compressors=$1
 320     package=gdb
 321     tool=gdb
 322     gdb_tar_compress $package $tool "$GDB_SUPPORT_DIRS" "$compressors"
 323 }
 324
 325 # Corresponding to the CVS "sim" module.
 326 SIM_SUPPORT_DIRS="bfd opcodes libiberty include intl gdb/version.in gdb/common/create-version.sh makefile.vms zlib"
 327 sim_release()
 328 {
 329     compressors=$1
 330     package=sim
 331     tool=sim
 332     tar_compress $package $tool "$SIM_SUPPORT_DIRS" "$compressors" gdb
 333 }
 334
 335 usage()
 336 {
 337     echo "src-release.sh <options> <release>"
 338     echo "options:"
 339     echo "  -b: Compress with bzip2"
 340     echo "  -g: Compress with gzip"
 341     echo "  -l: Compress with lzip"
 342     echo "  -x: Compress with xz"
 343     exit 1
 344 }
 345
 346 build_release()
 347 {
 348     release=$1
 349     compressors=$2
 350     case $release in
 351         binutils)
 352             binutils_release "$compressors";;
 353         gas)
 354             gas_release "$compressors";;
 355         gdb)
 356             gdb_release "$compressors";;
 357         sim)
 358             sim_release "$compressors";;
 359         *)
 360             echo "Unknown release name: $release" && usage;;
 361     esac
 362 }
 363
 364 compressors=""
 365
 366 while getopts ":bglx" opt; do
 367     case $opt in
 368         b)
 369             compressors="$compressors bz2";;
 370         g)
 371             compressors="$compressors gz";;
 372         l)
 373             compressors="$compressors lz";;
 374         x)
 375             compressors="$compressors xz";;
 376         \?)
 377             echo "Invalid option: -$OPTARG" && usage;;
 378   esac
 379 done
 380 shift $((OPTIND -1))
 381 release=$1
 382
 383 build_release $release "$compressors"