tools/internal_ci/linux/grpc_xds_bazel_test_in_docker.sh

   1 #!/usr/bin/env bash
   2 # Copyright 2020 gRPC authors.
   3 #
   4 # Licensed under the Apache License, Version 2.0 (the "License");
   5 # you may not use this file except in compliance with the License.
   6 # You may obtain a copy of the License at
   7 #
   8 #     http://www.apache.org/licenses/LICENSE-2.0
   9 #
  10 # Unless required by applicable law or agreed to in writing, software
  11 # distributed under the License is distributed on an "AS IS" BASIS,
  12 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  13 # See the License for the specific language governing permissions and
  14 # limitations under the License.
  15
  16 trap 'date' DEBUG
  17 set -ex -o igncr || set -ex
  18
  19 mkdir -p /var/local/git
  20 git clone /var/local/jenkins/grpc /var/local/git/grpc
  21 (cd /var/local/jenkins/grpc/ && git submodule foreach 'cd /var/local/git/grpc \
  22 && git submodule update --init --reference /var/local/jenkins/grpc/${name} \
  23 ${name}')
  24 cd /var/local/git/grpc
  25
  26 python3 -m pip install virtualenv
  27 VIRTUAL_ENV=$(mktemp -d)
  28 python3 -m virtualenv "$VIRTUAL_ENV" -p python3
  29 PYTHON="$VIRTUAL_ENV"/bin/python
  30 "$PYTHON" -m pip install --upgrade pip==19.3.1
  31 "$PYTHON" -m pip install --upgrade grpcio grpcio-tools google-api-python-client google-auth-httplib2 oauth2client xds-protos
  32
  33 # Prepare generated Python code.
  34 TOOLS_DIR=tools/run_tests
  35 PROTO_SOURCE_DIR=src/proto/grpc/testing
  36 PROTO_DEST_DIR="$TOOLS_DIR"/"$PROTO_SOURCE_DIR"
  37 mkdir -p "$PROTO_DEST_DIR"
  38 touch "$TOOLS_DIR"/src/__init__.py
  39 touch "$TOOLS_DIR"/src/proto/__init__.py
  40 touch "$TOOLS_DIR"/src/proto/grpc/__init__.py
  41 touch "$TOOLS_DIR"/src/proto/grpc/testing/__init__.py
  42
  43 "$PYTHON" -m grpc_tools.protoc \
  44     --proto_path=. \
  45     --python_out="$TOOLS_DIR" \
  46     --grpc_python_out="$TOOLS_DIR" \
  47     "$PROTO_SOURCE_DIR"/test.proto \
  48     "$PROTO_SOURCE_DIR"/messages.proto \
  49     "$PROTO_SOURCE_DIR"/empty.proto
  50
  51 HEALTH_PROTO_SOURCE_DIR=src/proto/grpc/health/v1
  52 HEALTH_PROTO_DEST_DIR=${TOOLS_DIR}/${HEALTH_PROTO_SOURCE_DIR}
  53 mkdir -p ${HEALTH_PROTO_DEST_DIR}
  54 touch "$TOOLS_DIR"/src/proto/grpc/health/__init__.py
  55 touch "$TOOLS_DIR"/src/proto/grpc/health/v1/__init__.py
  56
  57 "$PYTHON" -m grpc_tools.protoc \
  58     --proto_path=. \
  59     --python_out=${TOOLS_DIR} \
  60     --grpc_python_out=${TOOLS_DIR} \
  61     ${HEALTH_PROTO_SOURCE_DIR}/health.proto
  62
  63 bazel build test/cpp/interop:xds_interop_client
  64
  65 # Test cases "path_matching" and "header_matching" are not included in "all",
  66 # because not all interop clients in all languages support these new tests.
  67 #
  68 # TODO: remove "path_matching" and "header_matching" from --test_case after
  69 # they are added into "all".
  70 GRPC_VERBOSITY=debug GRPC_TRACE=xds_client,xds_resolver,xds_cluster_manager_lb,cds_lb,xds_cluster_resolver_lb,priority_lb,xds_cluster_impl_lb,weighted_target_lb "$PYTHON" \
  71   tools/run_tests/run_xds_tests.py \
  72     --halt_after_fail \
  73     --test_case="all,circuit_breaking,timeout,fault_injection,csds" \
  74     --project_id=grpc-testing \
  75     --project_num=830293263384 \
  76     --source_image=projects/grpc-testing/global/images/xds-test-server-4 \
  77     --path_to_server_binary=/java_server/grpc-java/interop-testing/build/install/grpc-interop-testing/bin/xds-test-server \
  78     --gcp_suffix=$(date '+%s') \
  79     --verbose \
  80     ${XDS_V3_OPT-} \
  81     --client_cmd='bazel-bin/test/cpp/interop/xds_interop_client --server=xds:///{server_uri} --stats_port={stats_port} --qps={qps} {fail_on_failed_rpc} \
  82       {rpcs_to_send} \
  83       {metadata_to_send}'