18253: Merge branch 'main' into 18253-doc-gpg-key-updates
[arvados.git] / build / run-build-docker-images.sh
1 #!/bin/bash
2 # Copyright (C) The Arvados Authors. All rights reserved.
3 #
4 # SPDX-License-Identifier: AGPL-3.0
5
6 function usage {
7     echo >&2
8     echo >&2 "usage: $0 [options]"
9     echo >&2
10     echo >&2 "$0 options:"
11     echo >&2 "  -t, --tags [csv_tags]         comma separated tags"
12     echo >&2 "  -i, --images [dev,demo]       Choose which images to build (default: dev and demo)"
13     echo >&2 "  -u, --upload                  Upload the images (docker push)"
14     echo >&2 "  -h, --help                    Display this help and exit"
15     echo >&2
16     echo >&2 "  If no options are given, just builds the images."
17 }
18
19 upload=false
20 images=dev,demo
21
22 # NOTE: This requires GNU getopt (part of the util-linux package on Debian-based distros).
23 TEMP=`getopt -o hut:i: \
24     --long help,upload,tags:,images: \
25     -n "$0" -- "$@"`
26
27 if [ $? != 0 ] ; then echo "Use -h for help"; exit 1 ; fi
28 # Note the quotes around `$TEMP': they are essential!
29 eval set -- "$TEMP"
30
31 while [ $# -ge 1 ]
32 do
33     case $1 in
34         -u | --upload)
35             upload=true
36             shift
37             ;;
38         -i | --images)
39             case "$2" in
40                 "")
41                   echo "ERROR: --images needs a parameter";
42                   usage;
43                   exit 1
44                   ;;
45                 *)
46                   images=$2;
47                   shift 2
48                   ;;
49             esac
50             ;;
51         -t | --tags)
52             case "$2" in
53                 "")
54                   echo "ERROR: --tags needs a parameter";
55                   usage;
56                   exit 1
57                   ;;
58                 *)
59                   tags=$2;
60                   shift 2
61                   ;;
62             esac
63             ;;
64         --)
65             shift
66             break
67             ;;
68         *)
69             usage
70             exit 1
71             ;;
72     esac
73 done
74
75
76 EXITCODE=0
77
78 COLUMNS=80
79
80 title () {
81     printf "\n%*s\n\n" $(((${#title}+$COLUMNS)/2)) "********** $1 **********"
82 }
83
84 docker_push () {
85     # docker always creates a local 'latest' tag, and we don't want to push that
86     # tag in every case. Remove it.
87     docker rmi $1:latest
88     if [[ ! -z "$tags" ]]
89     then
90         for tag in $( echo $tags|tr "," " " )
91         do
92              $DOCKER tag $1 $1:$tag
93         done
94     fi
95
96     # Sometimes docker push fails; retry it a few times if necessary.
97     for i in `seq 1 5`; do
98         $DOCKER push $*
99         ECODE=$?
100         if [[ "$ECODE" == "0" ]]; then
101             break
102         fi
103     done
104
105     if [[ "$ECODE" != "0" ]]; then
106         title "!!!!!! docker push $* failed !!!!!!"
107         EXITCODE=$(($EXITCODE + $ECODE))
108     fi
109 }
110
111 timer_reset() {
112     t0=$SECONDS
113 }
114
115 timer() {
116     echo -n "$(($SECONDS - $t0))s"
117 }
118
119 # Sanity check
120 if ! [[ -n "$WORKSPACE" ]]; then
121     echo >&2
122     echo >&2 "Error: WORKSPACE environment variable not set"
123     echo >&2
124     exit 1
125 fi
126
127 echo $WORKSPACE
128
129 # find the docker binary
130 DOCKER=`which docker.io`
131
132 if [[ "$DOCKER" == "" ]]; then
133     DOCKER=`which docker`
134 fi
135
136 if [[ "$DOCKER" == "" ]]; then
137     title "Error: you need to have docker installed. Could not find the docker executable."
138     exit 1
139 fi
140
141 # DOCKER
142 title "Starting docker build"
143
144 timer_reset
145
146 # clean up the docker build environment
147 cd "$WORKSPACE"
148
149 if [[ "$images" =~ demo ]]; then
150   title "Starting arvbox build localdemo"
151
152   tools/arvbox/bin/arvbox build localdemo
153   ECODE=$?
154
155   if [[ "$ECODE" != "0" ]]; then
156       title "!!!!!! docker BUILD FAILED !!!!!!"
157       EXITCODE=$(($EXITCODE + $ECODE))
158   fi
159 fi
160
161 if [[ "$images" =~ dev ]]; then
162   title "Starting arvbox build dev"
163
164   tools/arvbox/bin/arvbox build dev
165
166   ECODE=$?
167
168   if [[ "$ECODE" != "0" ]]; then
169       title "!!!!!! docker BUILD FAILED !!!!!!"
170       EXITCODE=$(($EXITCODE + $ECODE))
171   fi
172 fi
173
174 title "docker build complete (`timer`)"
175
176 if [[ "$EXITCODE" != "0" ]]; then
177     title "upload arvados images SKIPPED because build failed"
178 else
179     if [[ $upload == true ]]; then
180         title "uploading images"
181         timer_reset
182
183         ## 20150526 nico -- *sometimes* dockerhub needs re-login
184         ## even though credentials are already in .dockercfg
185         docker login -u arvados
186
187         if [[ "$images" =~ dev ]]; then
188           docker_push arvados/arvbox-dev
189         fi
190         if [[ "$images" =~ demo ]]; then
191           docker_push arvados/arvbox-demo
192         fi
193         title "upload arvados images complete (`timer`)"
194     else
195         title "upload arvados images SKIPPED because no --upload option set"
196     fi
197 fi
198
199 exit $EXITCODE