deps/v8/tools/testrunner/local/statusfile.py

   1 # Copyright 2012 the V8 project authors. All rights reserved.
   2 # Redistribution and use in source and binary forms, with or without
   3 # modification, are permitted provided that the following conditions are
   4 # met:
   5 #
   6 #     * Redistributions of source code must retain the above copyright
   7 #       notice, this list of conditions and the following disclaimer.
   8 #     * Redistributions in binary form must reproduce the above
   9 #       copyright notice, this list of conditions and the following
  10 #       disclaimer in the documentation and/or other materials provided
  11 #       with the distribution.
  12 #     * Neither the name of Google Inc. nor the names of its
  13 #       contributors may be used to endorse or promote products derived
  14 #       from this software without specific prior written permission.
  15 #
  16 # THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
  17 # "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
  18 # LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
  19 # A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
  20 # OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
  21 # SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
  22 # LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
  23 # DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
  24 # THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
  25 # (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
  26 # OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
  27
  28
  29 # These outcomes can occur in a TestCase's outcomes list:
  30 SKIP = "SKIP"
  31 FAIL = "FAIL"
  32 PASS = "PASS"
  33 OKAY = "OKAY"
  34 TIMEOUT = "TIMEOUT"
  35 CRASH = "CRASH"
  36 SLOW = "SLOW"
  37 FLAKY = "FLAKY"
  38 FAST_VARIANTS = "FAST_VARIANTS"
  39 NO_VARIANTS = "NO_VARIANTS"
  40 # These are just for the status files and are mapped below in DEFS:
  41 FAIL_OK = "FAIL_OK"
  42 PASS_OR_FAIL = "PASS_OR_FAIL"
  43
  44 ALWAYS = "ALWAYS"
  45
  46 KEYWORDS = {}
  47 for key in [SKIP, FAIL, PASS, OKAY, TIMEOUT, CRASH, SLOW, FLAKY, FAIL_OK,
  48             FAST_VARIANTS, NO_VARIANTS, PASS_OR_FAIL, ALWAYS]:
  49   KEYWORDS[key] = key
  50
  51 DEFS = {FAIL_OK: [FAIL, OKAY],
  52         PASS_OR_FAIL: [PASS, FAIL]}
  53
  54 # Support arches, modes to be written as keywords instead of strings.
  55 VARIABLES = {ALWAYS: True}
  56 for var in ["debug", "release", "big", "little",
  57             "android_arm", "android_arm64", "android_ia32", "android_x87",
  58             "arm", "arm64", "ia32", "mips", "mipsel", "mips64el", "x64", "x87", "nacl_ia32",
  59             "nacl_x64", "ppc", "ppc64", "macos", "windows", "linux", "aix"]:
  60   VARIABLES[var] = var
  61
  62
  63 def DoSkip(outcomes):
  64   return SKIP in outcomes
  65
  66
  67 def IsSlow(outcomes):
  68   return SLOW in outcomes
  69
  70
  71 def OnlyStandardVariant(outcomes):
  72   return NO_VARIANTS in outcomes
  73
  74
  75 def OnlyFastVariants(outcomes):
  76   return FAST_VARIANTS in outcomes
  77
  78
  79 def IsFlaky(outcomes):
  80   return FLAKY in outcomes
  81
  82
  83 def IsPassOrFail(outcomes):
  84   return ((PASS in outcomes) and (FAIL in outcomes) and
  85           (not CRASH in outcomes) and (not OKAY in outcomes))
  86
  87
  88 def IsFailOk(outcomes):
  89     return (FAIL in outcomes) and (OKAY in outcomes)
  90
  91
  92 def _AddOutcome(result, new):
  93   global DEFS
  94   if new in DEFS:
  95     mapped = DEFS[new]
  96     if type(mapped) == list:
  97       for m in mapped:
  98         _AddOutcome(result, m)
  99     elif type(mapped) == str:
 100       _AddOutcome(result, mapped)
 101   else:
 102     result.add(new)
 103
 104
 105 def _ParseOutcomeList(rule, outcomes, target_dict, variables):
 106   result = set([])
 107   if type(outcomes) == str:
 108    outcomes = [outcomes]
 109   for item in outcomes:
 110     if type(item) == str:
 111       _AddOutcome(result, item)
 112     elif type(item) == list:
 113       if not eval(item[0], variables): continue
 114       for outcome in item[1:]:
 115         assert type(outcome) == str
 116         _AddOutcome(result, outcome)
 117     else:
 118       assert False
 119   if len(result) == 0: return
 120   if rule in target_dict:
 121     target_dict[rule] |= result
 122   else:
 123     target_dict[rule] = result
 124
 125
 126 def ReadStatusFile(path, variables):
 127   with open(path) as f:
 128     global KEYWORDS
 129     contents = eval(f.read(), KEYWORDS)
 130
 131   rules = {}
 132   wildcards = {}
 133   variables.update(VARIABLES)
 134   for section in contents:
 135     assert type(section) == list
 136     assert len(section) == 2
 137     if not eval(section[0], variables): continue
 138     section = section[1]
 139     assert type(section) == dict
 140     for rule in section:
 141       assert type(rule) == str
 142       if rule[-1] == '*':
 143         _ParseOutcomeList(rule, section[rule], wildcards, variables)
 144       else:
 145         _ParseOutcomeList(rule, section[rule], rules, variables)
 146   return rules, wildcards