jenkins/upload_packages_testing_to_stable.sh

   1 #!/bin/bash
   2 # Copyright (C) The Arvados Authors. All rights reserved.
   3 #
   4 # SPDX-License-Identifier: AGPL-3.0
   5
   6 # This script publishes packages from our dev repo to the prod repo (#11572)
   7 # Parameters: list of packages, space separated, to move from *-testing to *
   8 # under /var/lib/freight/apt/ in host public.curoverse.com
   9
  10 APT_REPO_SERVER="apt.arvados.org"
  11 RPM_REPO_SERVER="rpm.arvados.org"
  12
  13 DEBUG=1
  14 SSH_PORT=2222
  15 ECODE=0
  16
  17 # Convert package list into a regex for publising
  18 # Make sure the variables are set or provide an example of how to use them
  19 if [ -z "${PACKAGES_TO_PUBLISH}" ]; then
  20   echo "You must provide a list of packages to publish, as obtained with https://dev.arvados.org/projects/ops/wiki/Updating_clusters#Gathering-package-versions."
  21   exit 254
  22 fi
  23 if [ -z "${LSB_DISTRIB_CODENAMES}" ]; then
  24   echo "You must provide a space-separated list of LSB distribution codenames to which you want to publish to, ie."
  25   echo "* Debian: jessie, xenial, stretch, etc."
  26   echo "* Centos: centos7 (the only one currently supported.)"
  27   exit 255
  28 fi
  29
  30 # Only numbered package versions are supposed to go into the stable repositories
  31 TMP=$(echo "$PACKAGES_TO_PUBLISH" | sed 's/versions://g;')
  32 VALIDATED_PACKAGES_TO_PUBLISH=`echo "$TMP" | sed -nE '/^.*: [0-9].[0-9].[0-9]-[0-9]$/p'`
  33
  34 if [[ "$TMP" != "$VALIDATED_PACKAGES_TO_PUBLISH" ]]; then
  35   echo "The list of packages has invalid syntax. each line must be of the format:"
  36   echo
  37   echo "packagename: [0-9].[0-9].[0-9]-[0-9]"
  38   echo
  39   exit 253
  40 fi
  41
  42 # Sanitize the vars in a way suitable to be used by the remote 'publish_packages.sh' script
  43 # Just to make copying a single line, and not having to loop over it
  44 PACKAGES_LIST=$(echo ${PACKAGES_TO_PUBLISH} | sed 's/versions://g; s/\([a-z-]*\):[[:blank:]]*\([0-9.-]*\)/\1*\2*,/g; s/[[:blank:]]//g; s/,$//g;')
  45
  46 DISTROS=$(echo "${LSB_DISTRIB_CODENAMES}"|sed s/[[:space:]]/,/g |tr '[:upper:]' '[:lower:]')
  47
  48 if ( echo ${LSB_DISTRIB_CODENAMES} |grep -q centos ); then
  49   REPO_SERVER=${RPM_REPO_SERVER}
  50 else
  51   REPO_SERVER=${APT_REPO_SERVER}
  52 fi
  53
  54 REMOTE_CMD="/usr/local/bin/testing_to_stable_publish_packages.sh --distros ${DISTROS} --packages ${PACKAGES_LIST}"
  55
  56 # Now we execute it remotely
  57 TMP_FILE=`mktemp`
  58
  59 ssh -t \
  60     -l jenkinsapt \
  61     -p $SSH_PORT \
  62     -o "StrictHostKeyChecking no" \
  63     -o "ConnectTimeout 5" \
  64     ${REPO_SERVER} \
  65     "${REMOTE_CMD}" | tee ${TMP_FILE}
  66 ECODE=$?
  67
  68 grep -q "FAILED TO PUBLISH" ${TMP_FILE}
  69 if [ $? -eq 0 ]; then
  70   ECODE=1
  71 fi
  72 rm -f ${TMP_FILE}
  73 exit ${ECODE}