bin/sync-and-gyp

   1 #!/usr/bin/env python
   2
   3 # Copyright 2015 Google Inc.
   4 #
   5 # Use of this source code is governed by a BSD-style license that can be
   6 # found in the LICENSE file.
   7
   8 # This script will update Skia's dependencies as necessary and run
   9 # gyp if needed.
  10
  11 # Depends on: Python, Git, and depot_tools.
  12 #
  13 # Example usage:
  14 #
  15 #   git clone https://chromium.googlesource.com/chromium/tools/depot_tools.git
  16 #   export PATH="${PWD}/depot_tools:${PATH}"
  17 #   git clone https://skia.googlesource.com/skia
  18 #   cd skia
  19 #   python bin/sync-and-gyp
  20 #   ninja -C out/Debug && out/Debug/dm
  21 #
  22 # Once changes are made to DEPS or gyp/ or the source, call:
  23 #
  24 #   python bin/sync-and-gyp
  25
  26 # To retreive and use all optional deps:
  27 #
  28 #   python bin/sync-and-gyp --deps=all
  29 #   ninja -C out/Debug && out/Debug/dm
  30
  31 import fnmatch
  32 import hashlib
  33 import os
  34 import subprocess
  35 import sys
  36
  37 skia_dir = os.path.join(os.path.dirname(__file__), os.pardir)
  38
  39 skia_opt_deps = [arg for arg in sys.argv[1:] if arg.startswith('--deps=')]
  40
  41 skia_out = os.environ.get("SKIA_OUT")
  42 if skia_out:
  43   skia_out = os.path.abspath(skia_out)
  44   hash_path = os.path.join(skia_out, 'gyp_hash')
  45 else:
  46   hash_path = os.path.join('out', 'gyp_hash')
  47
  48 os.chdir(skia_dir)
  49
  50 if not os.path.isfile('DEPS'):
  51   sys.stderr.write('DEPS file missing')
  52   exit(1)
  53
  54 deps_hasher = hashlib.sha1()
  55 with open('DEPS', 'r') as f:
  56   deps_hasher.update(f.read())
  57 deps_hasher.update(repr(skia_opt_deps))
  58 deps_hash = deps_hasher.hexdigest()
  59 current_deps_hash = None
  60 if os.path.isfile('.deps_sha1'):
  61   with open('.deps_sha1', 'r') as f:
  62     current_deps_hash = f.read().strip()
  63
  64 default_gclient_config = '''
  65 solutions = [
  66   { "name"        : ".",
  67     "url"         : "https://skia.googlesource.com/skia.git",
  68     "deps_file"   : "DEPS",
  69     "managed"     : False,
  70     "custom_deps" : {
  71     },
  72     "safesync_url": "",
  73   },
  74 ]
  75 cache_dir = None
  76 '''
  77 if current_deps_hash != deps_hash:
  78   # `gclient sync` is very slow, so skip whenever we can.
  79   if not os.path.isfile('.gclient'):
  80     with open('.gclient', 'w') as o:
  81       o.write(default_gclient_config)
  82   gclient_sync_command = ['gclient', 'sync'] + skia_opt_deps
  83   try:
  84     sys.stdout.write('%r\n' % gclient_sync_command)
  85     subprocess.check_call(gclient_sync_command)
  86   except:
  87     sys.stderr.write('\n`gclient sync` failed.\n')
  88     os.remove('.deps_sha1')  # Unknown state.
  89     exit(1)
  90   # Only write hash after a successful sync.
  91   with open('.deps_sha1', 'w') as o:
  92     o.write(deps_hash)
  93
  94 hasher = hashlib.sha1()
  95
  96 for var in ['AR', 'AR_host', 'AR_target',
  97             'CC', 'CC_host', 'CC_target',
  98             'CFLAGS', 'CFLAGS_host',
  99             'CPPFLAGS', 'CPPFLAGS_host',
 100             'CXX', 'CXX_host', 'CXX_target',
 101             'GYP_DEFINES', 'GYP_GENERATORS',
 102             'NM', 'NM_host', 'NM_target',
 103             'READELF', 'READELF_host', 'READELF_target']:
 104   hasher.update(os.environ.get(var, '') + '\n')
 105
 106 def listfiles(folder, matchfilter):
 107   for root, folders, files in os.walk(folder):
 108     for filename in files:
 109       if fnmatch.fnmatch(filename, matchfilter):
 110         yield os.path.join(root, filename)
 111
 112 for filename in sorted(listfiles('gyp', '*')):
 113   with open(filename, 'r') as f:
 114     hasher.update(f.read())
 115
 116 for dir in ['bench', 'gm', 'tests']:
 117   for filename in sorted(listfiles(dir, '*.c*')):
 118     hasher.update(filename + '\n')
 119
 120 gyp_hash = hasher.hexdigest()
 121
 122 def cat_if_exists(path):
 123   if os.path.exists(path):
 124     with open(path, 'r') as f:
 125       return f.read()
 126   return ''
 127
 128 if cat_if_exists(hash_path).strip() != gyp_hash:
 129   env = os.environ.copy()
 130   if skia_out:
 131     env['SKIA_OUT'] = skia_out
 132   subprocess.call(['python', './gyp_skia'], env=env)
 133   with open(hash_path, 'w') as o:
 134     o.write(gyp_hash)