13493: Proxy requests to remote clusters.
[arvados.git] / sdk / go / arvados / config.go
1 // Copyright (C) The Arvados Authors. All rights reserved.
2 //
3 // SPDX-License-Identifier: Apache-2.0
4
5 package arvados
6
7 import (
8         "fmt"
9         "os"
10
11         "git.curoverse.com/arvados.git/sdk/go/config"
12 )
13
14 const DefaultConfigFile = "/etc/arvados/config.yml"
15
16 type Config struct {
17         Clusters map[string]Cluster
18 }
19
20 // GetConfig returns the current system config, loading it from
21 // configFile if needed.
22 func GetConfig(configFile string) (*Config, error) {
23         var cfg Config
24         err := config.LoadFile(&cfg, configFile)
25         return &cfg, err
26 }
27
28 // GetCluster returns the cluster ID and config for the given
29 // cluster, or the default/only configured cluster if clusterID is "".
30 func (sc *Config) GetCluster(clusterID string) (*Cluster, error) {
31         if clusterID == "" {
32                 if len(sc.Clusters) == 0 {
33                         return nil, fmt.Errorf("no clusters configured")
34                 } else if len(sc.Clusters) > 1 {
35                         return nil, fmt.Errorf("multiple clusters configured, cannot choose")
36                 } else {
37                         for id, cc := range sc.Clusters {
38                                 cc.ClusterID = id
39                                 return &cc, nil
40                         }
41                 }
42         }
43         if cc, ok := sc.Clusters[clusterID]; !ok {
44                 return nil, fmt.Errorf("cluster %q is not configured", clusterID)
45         } else {
46                 cc.ClusterID = clusterID
47                 return &cc, nil
48         }
49 }
50
51 type Cluster struct {
52         ClusterID          string `json:"-"`
53         ManagementToken    string
54         NodeProfiles       map[string]NodeProfile
55         InstanceTypes      []InstanceType
56         HTTPRequestTimeout Duration
57         RemoteClusters     map[string]RemoteCluster
58 }
59
60 type RemoteCluster struct {
61         // API endpoint host or host:port; default is {id}.arvadosapi.com
62         Host string
63         // Perform a proxy request when a local client requests an
64         // object belonging to this remote.
65         Proxy bool
66         // Scheme, default "https". Can be set to "http" for testing.
67         Scheme string
68 }
69
70 type InstanceType struct {
71         Name         string
72         ProviderType string
73         VCPUs        int
74         RAM          int64
75         Scratch      int64
76         Price        float64
77         Preemptible  bool
78 }
79
80 // GetNodeProfile returns a NodeProfile for the given hostname. An
81 // error is returned if the appropriate configuration can't be
82 // determined (e.g., this does not appear to be a system node). If
83 // node is empty, use the OS-reported hostname.
84 func (cc *Cluster) GetNodeProfile(node string) (*NodeProfile, error) {
85         if node == "" {
86                 hostname, err := os.Hostname()
87                 if err != nil {
88                         return nil, err
89                 }
90                 node = hostname
91         }
92         if cfg, ok := cc.NodeProfiles[node]; ok {
93                 return &cfg, nil
94         }
95         // If node is not listed, but "*" gives a default system node
96         // config, use the default config.
97         if cfg, ok := cc.NodeProfiles["*"]; ok {
98                 return &cfg, nil
99         }
100         return nil, fmt.Errorf("config does not provision host %q as a system node", node)
101 }
102
103 type NodeProfile struct {
104         Controller  SystemServiceInstance `json:"arvados-controller"`
105         Health      SystemServiceInstance `json:"arvados-health"`
106         Keepproxy   SystemServiceInstance `json:"keepproxy"`
107         Keepstore   SystemServiceInstance `json:"keepstore"`
108         Keepweb     SystemServiceInstance `json:"keep-web"`
109         Nodemanager SystemServiceInstance `json:"arvados-node-manager"`
110         RailsAPI    SystemServiceInstance `json:"arvados-api-server"`
111         Websocket   SystemServiceInstance `json:"arvados-ws"`
112         Workbench   SystemServiceInstance `json:"arvados-workbench"`
113 }
114
115 type ServiceName string
116
117 const (
118         ServiceNameRailsAPI    ServiceName = "arvados-api-server"
119         ServiceNameController  ServiceName = "arvados-controller"
120         ServiceNameNodemanager ServiceName = "arvados-node-manager"
121         ServiceNameWorkbench   ServiceName = "arvados-workbench"
122         ServiceNameWebsocket   ServiceName = "arvados-ws"
123         ServiceNameKeepweb     ServiceName = "keep-web"
124         ServiceNameKeepproxy   ServiceName = "keepproxy"
125         ServiceNameKeepstore   ServiceName = "keepstore"
126 )
127
128 // ServicePorts returns the configured listening address (or "" if
129 // disabled) for each service on the node.
130 func (np *NodeProfile) ServicePorts() map[ServiceName]string {
131         return map[ServiceName]string{
132                 ServiceNameRailsAPI:    np.RailsAPI.Listen,
133                 ServiceNameController:  np.Controller.Listen,
134                 ServiceNameNodemanager: np.Nodemanager.Listen,
135                 ServiceNameWorkbench:   np.Workbench.Listen,
136                 ServiceNameWebsocket:   np.Websocket.Listen,
137                 ServiceNameKeepweb:     np.Keepweb.Listen,
138                 ServiceNameKeepproxy:   np.Keepproxy.Listen,
139                 ServiceNameKeepstore:   np.Keepstore.Listen,
140         }
141 }
142
143 type SystemServiceInstance struct {
144         Listen string
145         TLS    bool
146 }