20846: Don't use pip to install virtualenv, just rely on OS pkg.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Skip workbench package build.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add debian12 package target.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Fix shell command in env var.

With Ruby 3, something uses the MAKE var without the expected
shell-eval, so the number-of-processors trick stopped working.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

    make --jobs \$\(grep -c processor /proc/cpuinfo\) DESTDIR\=
    sitearchdir\=./.gem.20231120-15-fa6sx6 sitelibdir\=./.gem.20231120-15-fa6sx6
    clean
    make: invalid option -- 'c'
    Usage: make [options] [target] ...
    Options:
      -b, -m                      Ignored for compatibility.
      [...]

20846: Update fpm for Ruby 3 compatibility.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Use Ruby 3.2.2 for ubuntu2204 packages.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Merge branch '19213-ubuntu2204-support' into 20846-ubuntu2204

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21189-changeset-limit'

refs #21189

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21189: Improve wording in config comments and logs.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '20846-ruby3'

refs #20846

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Specify nodejs version without 'v' prefix.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21189: Revert exit code 64 to 2 for invalid command line argument.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Exit 2 on invalid argument.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add -nodejs-version option to arvados-server install.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add -singularity-version option to arvados-server install.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add -bundler-version option to arvados-server install.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add -ruby-version option to arvados-server install.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Merge branch 'main' into 20846-ruby3

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21189: Replace -commit-X with Balance{Pull,Trash}Limit configs.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21189: On usage error, exit 64 and do not auto-restart.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '18874-merge-wb2'

refs #18874

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Try a different login timeout.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21021-controller-logout'

Closes #21021.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

18874: Fix wb2 install/boot to accommodate readonly source tree.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Embed real git commit in wb2 build.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Update package-building test OS to debian:11.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Update setuptools/pip requirements.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Don't bring up test services for package/boot/install tests.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '20846-python-fixes'

refs #20846

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Silence ResourceWarning messages.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Avoid deadlock in unmount-and-replace race.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Avoid deadlock in unmount-and-replace race.

refs #20846

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Remove timeout on cy.url().

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21021: Merge branch 'main' into 21021-controller-logout

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

18874: Use git root as default arvados tree.

Remove auto-download/auto-remove mode.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Pass additional args to cypress test runner.

e.g.,

./tools/run-integration-tests.sh -a ~/arvados -- --spec cypress/integration/process.spec.js

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '18874-merge-wb2'

refs #18874

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21031-test-provision-fix'. Refs #21031

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

18874: Update test scripts to use wb2+arvados in same repo.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21031: Fixes post installation script for rails applications.

Set up schema files ownership in the same way without regards on the
rake task used: db:schema:load or db:structure:load (deprecated).

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

Handle non-nil, empty Instances return refs #20978

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

18874: Merge branch 'main' from arvados-workbench2.git

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21031: Replaces deprecated db:structure:load command with db:schema:load

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

Fix "detected dubious ownership in repository" git error.

No issue #

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21184-fix-build'

refs #21184

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21184: Accept singularity env var passed through to container.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21184: Remove refs to subprocess32 python2 compatibility shim.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21184: Expect recent setuptools and pip versions.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21021: Send logout requests to the issuing cluster in a federation

User agents may not follow the redirect sent by the previous
implementation, meaning the logout process never really completes: the
token gets deleted locally, but then can be revived when it gets
re-checked against the issuing cluster. Address this by having the local
controller make a logout request to the issuing cluster directly.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

18874: Use test auth instead of adding real accounts on test host.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

18874: Fix errant it.only().

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '20978-instance-types'

closes #20978

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21041-installer-from-HEAD'. Closes #21041

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

Merge branch 'main' from workbench2.git

refs #18874

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Remove old/conflicting erb script if needed.

Otherwise:

/tmp/tmp.tktwTXjGi1/ruby-3.2.2/lib/rubygems/installer.rb:272:in `check_executable_overwrite': "erb" from erb conflicts with /var/lib/arvados/bin/erb (Gem::InstallError)

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Fix workbench2 build recipe.

Install recipe was failing on readonly source tree, e.g., mounted into
a docker container by `arvados-package build`.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Fix python build recipe.

See #20846#note-13.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Disable workbench1 in `arvados-server boot`.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Remove workbench1 from `arvados-server install`.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Use newer setuptools.

services/fuse -> llfuse -> python-daemon -> setuptools >= 62.4.0.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Fix dependencies for ubuntu 22.04.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add libffi-dev dependency for building ruby 3.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Force overwriting old executables during ruby install.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Update ruby install recipe, add libyaml dep for psych gem.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Update install docs to match `arvados-server install` recipe.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Update ruby to 3.2.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21041: Improves the sync() function so that it can push code from HEAD.

When running the installer from a Jenkins pipeline, the checked out code
may not be from a specific branch, so we need to take care of this special
case when pushing the code to the bare repositories on the nodes.

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

20978: Add MaximumPriceFactor to exported config.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Add upgrade note about MaximumPriceFactor.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Merge branch 'main' into 20978-instance-types

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Return the last capacity error if failing all subnets.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21141-arvbox-debian-12' refs #21141

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

21141: Update arvbox base image to debian:12

Everything seems to just work, so that's cool.

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

20978: Add sort-by-scratch fallback.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Rearrange large if-else sequence for clarity.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Treat "unsupported instance type" as capacity=0.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21126-trash-when-ro'

refs #21126

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21126: Add doc comment to AllowTrashWhenReadOnly config.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '20846-ruby3-compat'

refs #20846

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Links CUDA capability NVIDIA page from a-d-c documentation. No issue #

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

Merge branch '21125-installer-s3-prefix-length'. Closes #21125

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

21125: Fixes comment on PrefixLength config.

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

20978: Test MaximumPriceFactor.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Test choosing multiple instance types.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20978: Add MaximumPriceFactor config.

Scheduler attempts to run containers on more costly instances if the
cloud reports the lowest-cost instance type is not available.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Update sdk/ruby for Ruby 3.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: More kwargs / Ruby 3 compatibility fixes.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21067-process-panel-error' refs #21067

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

20846: Fix kwargs variable name.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21067: Fix bug deleting projects from shared-with-me

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

21126: Add upgrade note.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

21126: Merge branch 'main' into 21126-trash-when-ro

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch 'main' from workbench2.git

refs #18874

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '21025-keep-web-redirect-bypass'

Closes #21025.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

21025: Clarify explanation

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

Merge branch 'main' into 21067-process-panel-error

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

20846: Update kwargs usage for ruby 3.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Remove deprecated Random::DEFAULT usage.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Add explicit webrick dependency.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

20846: Update ruby-prof, test-unit gems.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>