arvados/controller/resources/virtual_machines.sls

   1 # -*- coding: utf-8 -*-
   2 # vim: ft=sls
   3
   4 {#- Get the `tplroot` from `tpldir` #}
   5 {%- set tplroot = tpldir.split('/')[0] %}
   6 {%- set sls_config_file = tplroot ~ '.config.file' %}
   7 {%- from tplroot ~ "/map.jinja" import arvados with context %}
   8 {%- from tplroot ~ "/libtofs.jinja" import files_switch with context %}
   9
  10 {%- set virtual_machines = arvados.cluster.resources.virtual_machines | default({}) %}
  11 {%- set api_token = arvados.cluster.tokens.system_root | yaml_encode %}
  12 {%- set api_host = arvados.cluster.Services.Controller.ExternalURL | regex_replace('^http(s?)://', '', ignorecase=true) %}
  13
  14 include:
  15   - ..package
  16   - {{ sls_config_file }}
  17   - ..service
  18
  19 arvados-controller-resources-virtual-machines-jq-pkg-installed:
  20   pkg.installed:
  21     - name: jq
  22
  23 {%- for vm, vm_params in virtual_machines.items() %}
  24   {%- set vm_name = vm_params.name | default(vm) %}
  25
  26   {%- set cmd_query_vm_uuid = 'ARVADOS_API_TOKEN=' ~ api_token ~
  27                               ' ARVADOS_API_HOST=' ~ api_host ~
  28                               ' arv --short virtual_machine list' ~
  29                               ' --filters \'[["hostname", "=", "' ~ vm_name ~ '"]]\''
  30   %}
  31
  32 # Create the virtual machine record
  33 arvados-controller-resources-virtual-machines-{{ vm }}-record-cmd-run:
  34   cmd.run:
  35     - env:
  36       - ARVADOS_API_TOKEN: {{ api_token }}
  37       - ARVADOS_API_HOST: {{ api_host }}
  38     - name: |
  39         arv --format=uuid \
  40           virtual_machine \
  41           create \
  42           --virtual-machine '{"hostname":"{{ vm_name }}" }'
  43     - unless: |
  44           {{ cmd_query_vm_uuid }} | \
  45           /bin/grep -qE "[a-z0-9]{5}-2x53u-[a-z0-9]{15}"
  46     - require:
  47       - pkg: arvados-controller-package-install-pkg-installed
  48       - cmd: arvados-controller-service-running-service-ready-cmd-run
  49
  50 # We need to use the UUID generated in the previous command to see if there's a
  51 # scoped token for it. There's no easy way to pass the value from a shellout
  52 # to another state, so we store it in a temp file and use that in the next
  53 # command. Flaky, mostly because the `unless` clause is just checking thatg
  54 # the file content is a token uuid :|
  55 arvados-controller-resources-virtual-machines-{{ vm }}-get-vm_uuid-cmd-run:
  56   cmd.run:
  57     - name: {{ cmd_query_vm_uuid }} | head -1 | tee /tmp/{{ vm }}
  58     - require:
  59       - cmd: arvados-controller-resources-virtual-machines-{{ vm }}-record-cmd-run
  60     - unless:
  61       - /bin/grep -qE "[a-z0-9]{5}-2x53u-[a-z0-9]{15}" /tmp/{{ vm }}
  62
  63   # There's no direct way to query the scoped_token for a given virtual_machine
  64   # so we need to parse the api_client_authorization list through some jq
  65   {%- set cmd_query_scoped_token_url = 'VM_UUID=$(cat /tmp/' ~ vm ~ ') && ' ~
  66                                        ' ARVADOS_API_TOKEN=' ~ api_token ~
  67                                        ' ARVADOS_API_HOST=' ~ api_host ~
  68                                        ' arv api_client_authorization list |' ~
  69                                        ' /usr/bin/jq -e \'.items[].scopes[] | select(. == "GET ' ~
  70                                        '/arvados/v1/virtual_machines/\'${VM_UUID}\'/logins")\' && ' ~
  71                                        'unset VM_UUID'
  72   %}
  73
  74 # Create the VM scoped tokens
  75 arvados-controller-resources-virtual-machines-{{ vm }}-scoped-token-cmd-run:
  76   cmd.run:
  77     - env:
  78       - ARVADOS_API_TOKEN: {{ api_token }}
  79       - ARVADOS_API_HOST: {{ api_host }}
  80     - name: |
  81         VM_UUID=$(cat /tmp/{{ vm }}) &&
  82         arv --format=uuid \
  83           api_client_authorization \
  84           create \
  85           --api-client-authorization '{"scopes":["GET /arvados/v1/virtual_machines/'${VM_UUID}'/logins"]}'
  86     - unless: {{ cmd_query_scoped_token_url }}
  87     - require:
  88       - pkg: arvados-controller-package-install-pkg-installed
  89       - pkg: arvados-controller-resources-virtual-machines-jq-pkg-installed
  90       - cmd: arvados-controller-resources-virtual-machines-{{ vm }}-get-vm_uuid-cmd-run
  91
  92 {%- endfor %}