shell/python-tools-install.sh

   1 #!/bin/bash
   2 # SPDX-License-Identifier: EPL-1.0
   3 ##############################################################################
   4 # Copyright (c) 2018 The Linux Foundation and others.
   5 #
   6 # All rights reserved. This program and the accompanying materials
   7 # are made available under the terms of the Eclipse Public License v1.0
   8 # which accompanies this distribution, and is available at
   9 # http://www.eclipse.org/legal/epl-v10.html
  10 ##############################################################################
  11 echo "---> python-tools-install.sh"
  12
  13 set -eufo pipefail
  14
  15 # Souce the python version from lf-env.sh if available.
  16 python="python3"
  17 if [[ -f ~/lf-env.sh ]]; then
  18     source ~/lf-env.sh
  19     lf-activate-venv --python "$python" lftools
  20     # Save the virtualenv path
  21     echo "$lf_venv" > "/tmp/.os_lf_venv"
  22 elif [[ -d /opt/pyenv ]]; then
  23     echo "Setup up pyenv"
  24     export PYENV_ROOT="/opt/pyenv"
  25     export PATH="$PYENV_ROOT/bin:$PATH"
  26     pyenv versions
  27     if command -v pyenv 1>/dev/null 2>&1; then
  28         eval "$(pyenv init - --no-rehash)"
  29         pyenv local "$python"
  30     fi
  31 fi
  32
  33 # This script will typically be called during pre-build & post-build.
  34 # Create the user venv during pre-build.
  35 if [[ ! -f /tmp/pre-build-complete ]]; then
  36     requirements_file=$(mktemp /tmp/requirements-XXXXXX)
  37
  38     # Note: To test lftools master branch change the lftools configuration below in
  39     #       the requirements file from "lftools[openstack]~=#.##.#" to
  40     #       git+https://github.com/lfit/releng-lftools.git#egg=lftools[openstack]
  41
  42     echo "Generating Requirements File"
  43     cat << 'EOF' > "$requirements_file"
  44 openstacksdk<0.99
  45 python-heatclient
  46 python-openstackclient
  47 python-magnumclient
  48 kubernetes
  49 niet~=1.4.2
  50 cryptography<3.4
  51 yq
  52
  53 # PINNED INDIRECT DEPENDENCIES
  54 # ============================
  55 # The libraries listed below should be considered workarounds and thus need
  56 # to have a link to a JIRA and any relevant pkg versions and support packages
  57 # necessary so that future maintainers of this file can make decisions to
  58 # remove the workarounds in the future.
  59 importlib-resources<2.0.0  # virtualenv 20.0.21 requires importlib-resources<2.0.0 (RELENG-2993)
  60 pyparsing<3.0.0 # httplib2 0.20.1 requires pyparsing<3,>=2.4.2
  61 EOF
  62
  63     #Python 3.5 in Ubuntu 16.04 workaround
  64     if [[ -f /etc/lsb-release ]]; then
  65         # shellcheck disable=SC1091
  66         source /etc/lsb-release
  67         if [[ $DISTRIB_RELEASE == "16.04" && $DISTRIB_ID == "Ubuntu" ]]; then
  68             echo "WARNING: Python projects should move to Ubuntu 18.04 to continue receiving support"
  69             echo "zipp==1.1.0" >> "$requirements_file"
  70         fi
  71     fi
  72
  73     python3 -m pip install --quiet --upgrade pip
  74     # TODO: temporarily pinning setuptools to avoid plugin version format issues
  75     # https://github.com/pypa/setuptools/issues/3772#issuecomment-1384342813
  76     python3 -m pip install --quiet --no-warn-script-location --upgrade setuptools<66.0.0
  77     python3 -m pip install --quiet --no-warn-script-location --upgrade lftools[openstack]
  78     python3 -m pip install --quiet --no-warn-script-location --upgrade \
  79         --upgrade-strategy eager -r "$requirements_file"
  80     # installs are silent, show version details in log
  81     python3 --version
  82     python3 -m pip --version
  83     python3 -m pip freeze
  84
  85     rm -rf "$requirements_file"
  86     touch /tmp/pre-build-complete
  87 fi