Merge branch '16375-arvados-multinode-testing'
[arvados.git] / cmd / arvados-package / cmd.go
1 // Copyright (C) The Arvados Authors. All rights reserved.
2 //
3 // SPDX-License-Identifier: AGPL-3.0
4
5 package main
6
7 import (
8         "context"
9         "flag"
10         "fmt"
11         "io"
12         "os"
13         "path/filepath"
14         "strings"
15
16         "git.arvados.org/arvados.git/lib/cmd"
17         "git.arvados.org/arvados.git/lib/install"
18         "git.arvados.org/arvados.git/sdk/go/ctxlog"
19 )
20
21 var (
22         handler = cmd.Multi(map[string]cmd.Handler{
23                 "version":   cmd.Version,
24                 "-version":  cmd.Version,
25                 "--version": cmd.Version,
26
27                 "build":       cmdFunc(build),
28                 "testinstall": cmdFunc(testinstall),
29                 "_fpm":        cmdFunc(fpm),    // internal use
30                 "_install":    install.Command, // internal use
31         })
32 )
33
34 func main() {
35         if len(os.Args) < 2 || strings.HasPrefix(os.Args[1], "-") {
36                 parseFlags(os.Args[0], []string{"-help"}, os.Stderr)
37                 os.Exit(2)
38         }
39         os.Exit(handler.RunCommand(os.Args[0], os.Args[1:], os.Stdin, os.Stdout, os.Stderr))
40 }
41
42 type cmdFunc func(ctx context.Context, opts opts, stdin io.Reader, stdout, stderr io.Writer) error
43
44 func (cf cmdFunc) RunCommand(prog string, args []string, stdin io.Reader, stdout, stderr io.Writer) int {
45         logger := ctxlog.New(stderr, "text", "info")
46         ctx := ctxlog.Context(context.Background(), logger)
47         opts, ok, code := parseFlags(prog, args, stderr)
48         if !ok {
49                 return code
50         }
51         err := cf(ctx, opts, stdin, stdout, stderr)
52         if err != nil {
53                 logger.WithError(err).Error("failed")
54                 return 1
55         }
56         return 0
57 }
58
59 type opts struct {
60         PackageVersion string
61         PackageDir     string
62         PackageChown   string
63         RebuildImage   bool
64         SourceDir      string
65         TargetOS       string
66         Maintainer     string
67         Vendor         string
68 }
69
70 func parseFlags(prog string, args []string, stderr io.Writer) (_ opts, ok bool, exitCode int) {
71         opts := opts{
72                 SourceDir:  ".",
73                 TargetOS:   "debian:10",
74                 Maintainer: "Arvados Package Maintainers <packaging@arvados.org>",
75                 Vendor:     "The Arvados Project",
76         }
77         flags := flag.NewFlagSet("", flag.ContinueOnError)
78         flags.StringVar(&opts.PackageVersion, "package-version", opts.PackageVersion, "package version to build/test, like \"1.2.3\"")
79         flags.StringVar(&opts.SourceDir, "source", opts.SourceDir, "arvados source tree location")
80         flags.StringVar(&opts.PackageDir, "package-dir", opts.PackageDir, "destination directory for new package (default is cwd)")
81         flags.StringVar(&opts.PackageChown, "package-chown", opts.PackageChown, "desired uid:gid for new package (default is current user:group)")
82         flags.StringVar(&opts.TargetOS, "target-os", opts.TargetOS, "target operating system vendor:version")
83         flags.StringVar(&opts.Maintainer, "package-maintainer", opts.Maintainer, "maintainer to be listed in package metadata")
84         flags.StringVar(&opts.Vendor, "package-vendor", opts.Vendor, "vendor to be listed in package metadata")
85         flags.BoolVar(&opts.RebuildImage, "rebuild-image", opts.RebuildImage, "rebuild docker image(s) instead of using existing")
86         flags.Usage = func() {
87                 fmt.Fprint(flags.Output(), `Usage: arvados-package <subcommand> [options]
88
89 Subcommands:
90         build
91                 use a docker container to build a package from a checked
92                 out version of the arvados source tree
93         testinstall
94                 use a docker container to install a package and confirm
95                 the resulting installation is functional
96         version
97                 show program version
98
99 Internally used subcommands:
100         _fpm
101                 build a package
102         _install
103                 equivalent to "arvados-server install"
104
105 Automation/integration notes:
106         The first time a given machine runs "build" or "testinstall" (and
107         any time the -rebuild-image is used), new docker images are built,
108         which is quite slow. If you use on-demand VMs to run automated builds,
109         run "build" and "testinstall" once when setting up your initial VM
110         image, and be prepared to rebuild that VM image when package-building
111         slows down (this will happen when new dependencies are introduced).
112
113         The "build" subcommand, if successful, also runs
114         dpkg-scanpackages to create/replace Packages.gz in the package
115         dir. This enables the "testinstall" subcommand to list the
116         package dir as a source in /etc/apt/sources.*.
117
118 Options:
119 `)
120                 flags.PrintDefaults()
121         }
122         if ok, code := cmd.ParseFlags(flags, prog, args, "", stderr); !ok {
123                 return opts, false, code
124         }
125         if opts.SourceDir == "" {
126                 d, err := os.Getwd()
127                 if err != nil {
128                         fmt.Fprintf(stderr, "error getting current working directory: %s\n", err)
129                         return opts, false, 1
130                 }
131                 opts.SourceDir = d
132         }
133         opts.PackageDir = filepath.Clean(opts.PackageDir)
134         abs, err := filepath.Abs(opts.SourceDir)
135         if err != nil {
136                 fmt.Fprintf(stderr, "error resolving source dir %q: %s\n", opts.SourceDir, err)
137                 return opts, false, 1
138         }
139         opts.SourceDir = abs
140         return opts, true, 0
141 }