AArch64: Add SVE constraints verifier.
[external/binutils.git] / src-release.sh
1 #!/usr/bin/env bash
2 #   Copyright (C) 1990-2018 Free Software Foundation
3 #
4 # This file is free software; you can redistribute it and/or modify
5 # it under the terms of the GNU General Public License as published by
6 # the Free Software Foundation; either version 3 of the License, or
7 # (at your option) any later version.
8
9 # This program is distributed in the hope that it will be useful,
10 # but WITHOUT ANY WARRANTY; without even the implied warranty of
11 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12 # GNU General Public License for more details.
13
14 # You should have received a copy of the GNU General Public License
15 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
16 #
17
18 # This script creates release packages for gdb, binutils, and other
19 # packages which live in src.  It used to be implemented as the src-release
20 # Makefile and prior to that was part of the top level Makefile, but that
21 # turned out to be very messy and hard to maintain.
22
23 set -e
24
25 BZIPPROG=bzip2
26 GZIPPROG=gzip
27 LZIPPROG=lzip
28 XZPROG=xz
29 MD5PROG=md5sum
30 MAKE=make
31 CC=gcc
32 CXX=g++
33
34 # Default to avoid splitting info files by setting the threshold high.
35 MAKEINFOFLAGS=--split-size=5000000
36
37 #
38 # Support for building net releases
39
40 # Files in root used in any net release.
41 DEVO_SUPPORT="README Makefile.in configure configure.ac \
42         config.guess config.sub config move-if-change \
43         COPYING COPYING.LIB install-sh config-ml.in symlink-tree \
44         mkinstalldirs ltmain.sh missing ylwrap \
45         libtool.m4 ltsugar.m4 ltversion.m4 ltoptions.m4 \
46         Makefile.def Makefile.tpl src-release.sh config.rpath \
47         ChangeLog MAINTAINERS README-maintainer-mode \
48         lt~obsolete.m4 ltgcc.m4 depcomp mkdep compile \
49         COPYING3 COPYING3.LIB test-driver ar-lib"
50
51 # Files in devo/etc used in any net release.
52 ETC_SUPPORT="Makefile.in configure configure.in standards.texi \
53         make-stds.texi standards.info* configure.texi configure.info* \
54         ChangeLog configbuild.* configdev.* fdl.texi texi2pod.pl gnu-oids.texi"
55
56 # Get the version number of a given tool
57 getver()
58 {
59     tool=$1
60     if grep 'AC_INIT.*BFD_VERSION' $tool/configure.ac >/dev/null 2>&1; then
61         bfd/configure --version | sed -n -e '1s,.* ,,p'
62     elif test -f $tool/common/create-version.sh; then
63         $tool/common/create-version.sh $tool 'dummy-host' 'dummy-target' VER.tmp
64         cat VER.tmp | grep 'version\[\]' | sed 's/.*"\([^"]*\)".*/\1/' | sed 's/-git$//'
65         rm -f VER.tmp
66     elif test -f $tool/version.in; then
67         head -1 $tool/version.in
68     else
69         echo VERSION
70     fi
71 }
72
73 # Setup build directory for building release tarball
74 do_proto_toplev()
75 {
76     package=$1
77     ver=$2
78     tool=$3
79     support_files=$4
80
81     echo "==> Cleaning sources."
82     find \( -name "*.orig" -o  -name "*.rej" -o -name "*~" -o -name ".#*" -o -name "*~$bkpat" \) -exec rm {} \;
83     
84     echo "==> Making $package-$ver/"
85     # Take out texinfo from a few places.
86     sed -e '/^all\.normal: /s/\all-texinfo //' \
87         -e '/^  install-texinfo /d' \
88         <Makefile.in >tmp
89     mv -f tmp Makefile.in
90     # configure.  --enable-gold is needed to ensure .c/.h from .y are
91     # built in the gold dir.  The disables speed the build a little.
92     enables=
93     disables=
94     for dir in binutils gas gdb gold gprof ld libdecnumber readline sim; do
95         case " $tool $support_files " in
96             *" $dir "*) enables="$enables --enable-$dir" ;;
97             *) disables="$disables --disable-$dir" ;;
98         esac
99     done
100     echo "==> configure --target=i386-pc-linux-gnu $disables $enables"
101     ./configure --target=i386-pc-linux-gnu $disables $enables
102     $MAKE configure-host configure-target \
103         ALL_GCC="" ALL_GCC_C="" ALL_GCC_CXX="" \
104         CC_FOR_TARGET="$CC" CXX_FOR_TARGET="$CXX"
105     # Make links, and run "make diststuff" or "make info" when needed.
106     rm -rf proto-toplev
107     mkdir proto-toplev
108     dirs="$DEVO_SUPPORT $support_files $tool"
109     for d in $dirs ; do
110         if [ -d $d ]; then
111             if [ ! -f $d/Makefile ] ; then
112                 true
113             elif grep '^diststuff:' $d/Makefile >/dev/null ; then
114                 (cd $d ; $MAKE MAKEINFOFLAGS="$MAKEINFOFLAGS" diststuff) \
115                     || exit 1
116             elif grep '^info:' $d/Makefile >/dev/null ; then
117                 (cd $d ; $MAKE MAKEINFOFLAGS="$MAKEINFOFLAGS" info) \
118                     || exit 1
119             fi
120             if [ -d $d/proto-$d.dir ]; then
121                 ln -s ../$d/proto-$d.dir proto-toplev/$d
122             else
123                 ln -s ../$d proto-toplev/$d
124             fi
125         else
126             if (echo x$d | grep / >/dev/null); then
127               mkdir -p proto-toplev/`dirname $d`
128               x=`dirname $d`
129               ln -s ../`echo $x/ | sed -e 's,[^/]*/,../,g'`$d proto-toplev/$d
130             else
131               ln -s ../$d proto-toplev/$d
132             fi
133           fi
134         done
135         (cd etc; $MAKE MAKEINFOFLAGS="$MAKEINFOFLAGS" info)
136         $MAKE distclean
137         mkdir proto-toplev/etc
138         (cd proto-toplev/etc;
139             for i in $ETC_SUPPORT; do
140                 ln -s ../../etc/$i .
141                 done)
142         #
143         # Take out texinfo from configurable dirs
144         rm proto-toplev/configure.ac
145         sed -e '/^host_tools=/s/texinfo //' \
146             <configure.ac >proto-toplev/configure.ac
147         #
148         mkdir proto-toplev/texinfo
149         ln -s ../../texinfo/texinfo.tex proto-toplev/texinfo/
150         if test -r texinfo/util/tex3patch ; then
151             mkdir proto-toplev/texinfo/util && \
152                 ln -s ../../../texinfo/util/tex3patch proto-toplev/texinfo/util
153         else
154             true
155         fi
156         chmod -R og=u . || chmod og=u `find . -print`
157         #
158         # Create .gmo files from .po files.
159         for f in `find . -name '*.po' -type f -print`; do
160             msgfmt -o `echo $f | sed -e 's/\.po$/.gmo/'` $f
161         done
162         #
163         rm -f $package-$ver
164         ln -s proto-toplev $package-$ver
165 }
166
167 CVS_NAMES='-name CVS -o -name .cvsignore'
168
169 # Add an md5sum to the built tarball
170 do_md5sum()
171 {
172     echo "==> Adding md5 checksum to top-level directory"
173     (cd proto-toplev && find * -follow \( $CVS_NAMES \) -prune \
174         -o -type f -print \
175         | xargs $MD5PROG > ../md5.new)
176     rm -f proto-toplev/md5.sum
177     mv md5.new proto-toplev/md5.sum
178 }
179
180 # Build the release tarball
181 do_tar()
182 {
183     package=$1
184     ver=$2
185     echo "==> Making $package-$ver.tar"
186     rm -f $package-$ver.tar
187     find $package-$ver -follow \( $CVS_NAMES \) -prune \
188         -o -type f -print \
189         | tar cTfh - $package-$ver.tar
190 }
191
192 # Compress the output with bzip2
193 do_bz2()
194 {
195     package=$1
196     ver=$2
197     echo "==> Bzipping $package-$ver.tar.bz2"
198     rm -f $package-$ver.tar.bz2
199     $BZIPPROG -k -v -9 $package-$ver.tar
200 }
201
202 # Compress the output with gzip
203 do_gz()
204 {
205     package=$1
206     ver=$2
207     echo "==> Gzipping $package-$ver.tar.gz"
208     rm -f $package-$ver.tar.gz
209     $GZIPPROG -k -v -9 $package-$ver.tar
210 }
211
212 # Compress the output with lzip
213 do_lz()
214 {
215     package=$1
216     ver=$2
217     echo "==> Lzipping $package-$ver.tar.lz"
218     rm -f $package-$ver.tar.lz
219     $LZIPPROG -k -v -9 $package-$ver.tar
220 }
221
222 # Compress the output with xz
223 do_xz()
224 {
225     package=$1
226     ver=$2
227     echo "==> Xzipping $package-$ver.tar.xz"
228     rm -f $package-$ver.tar.xz
229     $XZPROG -k -v -9 $package-$ver.tar
230 }
231
232 # Compress the output with all selected compresion methods
233 do_compress()
234 {
235     package=$1
236     ver=$2
237     compressors=$3
238     for comp in $compressors; do
239         case $comp in
240             bz2)
241                 do_bz2 $package $ver;;
242             gz)
243                 do_gz $package $ver;;
244             lz)
245                 do_lz $package $ver;;
246             xz)
247                 do_xz $package $ver;;
248             *)
249                 echo "Unknown compression method: $comp" && exit 1;;
250         esac
251     done
252 }
253
254 # Add djunpack.bat the tarball
255 do_djunpack()
256 {
257     package=$1
258     ver=$2
259     echo "==> Adding updated djunpack.bat to top-level directory"
260     echo - 's /gdb-[0-9\.]*/$package-'"$ver"'/'
261     sed < djunpack.bat > djunpack.new \
262         -e 's/gdb-[0-9][0-9\.]*/$package-'"$ver"'/'
263     rm -f proto-toplev/djunpack.bat
264     mv djunpack.new proto-toplev/djunpack.bat
265 }
266
267 # Create a release package, tar it and compress it
268 tar_compress()
269 {
270     package=$1
271     tool=$2
272     support_files=$3
273     compressors=$4
274     verdir=${5:-$tool}
275     ver=$(getver $verdir)
276     do_proto_toplev $package $ver $tool "$support_files"
277     do_md5sum
278     do_tar $package $ver
279     do_compress $package $ver "$compressors"
280 }
281
282 # Create a gdb release package, tar it and compress it
283 gdb_tar_compress()
284 {
285     package=$1
286     tool=$2
287     support_files=$3
288     compressors=$4
289     ver=$(getver $tool)
290     do_proto_toplev $package $ver $tool "$support_files"
291     do_md5sum
292     do_djunpack $package $ver
293     do_tar $package $ver
294     do_compress $package $ver "$compressors"
295 }
296
297 # The FSF "binutils" release includes gprof and ld.
298 BINUTILS_SUPPORT_DIRS="bfd gas include libiberty opcodes ld elfcpp gold gprof intl setup.com makefile.vms cpu zlib"
299 binutils_release()
300 {
301     compressors=$1
302     package=binutils
303     tool=binutils
304     tar_compress $package $tool "$BINUTILS_SUPPORT_DIRS" "$compressors"
305 }
306
307 GAS_SUPPORT_DIRS="bfd include libiberty opcodes intl setup.com makefile.vms zlib"
308 gas_release()
309 {
310     compressors=$1
311     package=gas
312     tool=gas
313     tar_compress $package $tool "$GAS_SUPPORT_DIRS" "$compressors"
314 }
315
316 GDB_SUPPORT_DIRS="bfd include libiberty opcodes readline sim intl libdecnumber cpu zlib contrib"
317 gdb_release()
318 {
319     compressors=$1
320     package=gdb
321     tool=gdb
322     gdb_tar_compress $package $tool "$GDB_SUPPORT_DIRS" "$compressors"
323 }
324
325 # Corresponding to the CVS "sim" module.
326 SIM_SUPPORT_DIRS="bfd opcodes libiberty include intl gdb/version.in gdb/common/create-version.sh makefile.vms zlib"
327 sim_release()
328 {
329     compressors=$1
330     package=sim
331     tool=sim
332     tar_compress $package $tool "$SIM_SUPPORT_DIRS" "$compressors" gdb
333 }
334
335 usage()
336 {
337     echo "src-release.sh <options> <release>"
338     echo "options:"
339     echo "  -b: Compress with bzip2"
340     echo "  -g: Compress with gzip"
341     echo "  -l: Compress with lzip"
342     echo "  -x: Compress with xz"
343     exit 1
344 }
345
346 build_release()
347 {
348     release=$1
349     compressors=$2
350     case $release in
351         binutils)
352             binutils_release "$compressors";;
353         gas)
354             gas_release "$compressors";;
355         gdb)
356             gdb_release "$compressors";;
357         sim)
358             sim_release "$compressors";;
359         *)
360             echo "Unknown release name: $release" && usage;;
361     esac
362 }
363
364 compressors=""
365
366 while getopts ":bglx" opt; do
367     case $opt in
368         b)
369             compressors="$compressors bz2";;
370         g)
371             compressors="$compressors gz";;
372         l)
373             compressors="$compressors lz";;
374         x)
375             compressors="$compressors xz";;
376         \?)
377             echo "Invalid option: -$OPTARG" && usage;;
378   esac
379 done
380 shift $((OPTIND -1))
381 release=$1
382
383 build_release $release "$compressors"