docker/migrate-docker19/migrate.sh

   1 #!/bin/bash
   2
   3 # This script is called by arv-migrate-docker19 to perform the actual migration
   4 # of a single image.  This works by running Docker-in-Docker (dnd.sh) to
   5 # download the image using Docker 1.9 and then upgrading to Docker 1.13 and
   6 # uploading the converted image.
   7
   8 # When using bash in pid 1 and using "trap on EXIT"
   9 # it will sometimes go into an 100% CPU infinite loop.
  10 #
  11 # Using workaround from here:
  12 #
  13 # https://github.com/docker/docker/issues/4854
  14 if [ "$$" = 1 ]; then
  15   $0 "$@"
  16   exit $?
  17 fi
  18
  19 # -x           show script
  20 # -e           exit on error
  21 # -o pipefail  use exit code from 1st failure in pipeline, not last
  22 set -x -e -o pipefail
  23
  24 image_tar_keepref=$1
  25 image_id=$2
  26 image_repo=$3
  27 image_tag=$4
  28 project_uuid=$5
  29 graph_driver=$6
  30
  31 # Print free space in /var/lib/docker
  32 function freespace() {
  33     df -B1 /var/lib/docker | tail -n1 | sed 's/  */ /g' | cut -d' ' -f4
  34 }
  35
  36 # Run docker-in-docker script and then wait for it to come up
  37 function start_docker {
  38     /root/dnd.sh $graph_driver &
  39     for i in $(seq 1 10) ; do
  40         if docker version >/dev/null 2>/dev/null ; then
  41             return
  42         fi
  43         sleep 1
  44     done
  45     false
  46 }
  47
  48 # Kill docker from pid then wait for it to be down
  49 function kill_docker {
  50     if test -f /var/run/docker.pid ; then
  51         kill $(cat /var/run/docker.pid)
  52     fi
  53     for i in $(seq 1 10) ; do
  54         if ! docker version >/dev/null 2>/dev/null ; then
  55             return
  56         fi
  57         sleep 1
  58     done
  59     false
  60 }
  61
  62 # Ensure that we clean up docker graph and/or lingering cache files on exit
  63 function cleanup {
  64     kill_docker
  65     rm -rf /var/lib/docker/*
  66     rm -rf /root/.cache/arvados/docker/*
  67     echo "Available space after cleanup is $(freespace)"
  68 }
  69
  70 trap cleanup EXIT
  71
  72 start_docker
  73
  74 echo "Initial available space is $(freespace)"
  75
  76 arv-get $image_tar_keepref | docker load
  77
  78 docker tag $image_id $image_repo:$image_tag
  79
  80 docker images -a
  81
  82 kill_docker
  83
  84 echo "Available space after image load is $(freespace)"
  85
  86 cd /root/pkgs
  87 dpkg -i libltdl7_2.4.2-1.11+b1_amd64.deb docker-engine_1.13.1-0~debian-jessie_amd64.deb
  88
  89 echo "Available space after image upgrade is $(freespace)"
  90
  91 start_docker
  92
  93 docker images -a
  94
  95 UUID=$(arv-keepdocker --force-image-format --project-uuid=$project_uuid $image_repo $image_tag)
  96
  97 echo "Available space after arv-keepdocker is $(freespace)"
  98
  99 echo "Migrated uuid is $UUID"