build: be more respectful of user-specified verbosity
[platform/upstream/automake.git] / t / tap-exit.sh
1 #! /bin/sh
2 # Copyright (C) 2011-2013 Free Software Foundation, Inc.
3 #
4 # This program is free software; you can redistribute it and/or modify
5 # it under the terms of the GNU General Public License as published by
6 # the Free Software Foundation; either version 2, or (at your option)
7 # any later version.
8 #
9 # This program is distributed in the hope that it will be useful,
10 # but WITHOUT ANY WARRANTY; without even the implied warranty of
11 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12 # GNU General Public License for more details.
13 #
14 # You should have received a copy of the GNU General Public License
15 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
16
17 # TAP support:
18 #  - an exit status != 0 of a test script causes an hard error
19 #  - the '--ignore-exit' option causes the TAP test driver to ignore
20 #    exit statuses of the test scripts.
21
22 . test-init.sh
23
24 echo TESTS = > Makefile.am
25 for st in 1 2 77 99; do
26   unindent > exit${st}.test <<END
27     #!/bin/sh
28     echo 1..1
29     echo ok 1
30     exit $st
31 END
32   echo TESTS += exit${st}.test >> Makefile.am
33 done
34
35 chmod a+x *.test
36
37 . tap-setup.sh
38
39 $MAKE check >stdout && { cat stdout; exit 1; }
40 cat stdout
41 count_test_results total=8 pass=4 fail=0 xpass=0 xfail=0 skip=0 error=4
42
43 grep '^ERROR: exit1\.test - exited with status 1$' stdout
44 grep '^ERROR: exit2\.test - exited with status 2$' stdout
45 grep '^ERROR: exit77\.test - exited with status 77$' stdout
46 grep '^ERROR: exit99\.test - exited with status 99$' stdout
47
48 echo TEST_LOG_DRIVER_FLAGS = --ignore-exit >> Makefile
49 $MAKE check >stdout || { cat stdout; exit 1; }
50 cat stdout
51 count_test_results total=4 pass=4 fail=0 xpass=0 xfail=0 skip=0 error=0
52
53 :