Merge branch '22974-rails-dependency-upgrades'. Closes #22974

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22974: Override Rack::QueryParser default request size limit.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22793: more flakiness ironing

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: added not found display to overview panel

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: more flaky test fixes

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: various small test adjustments

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

Merge branch '22974-go-dependency-upgrades'

Refs #22974

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

Merge branch '22860-non-home-panel-layout' into main. Closes #22860

Arvados-DCO-1.1-Signed-off-by: Stephen Smith <stephen@curii.com>

22793: updated page-not-found test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: updated workflow test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: restored gitprops tags to wf panel

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22958: Add missing `become`

Refs #22958.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22974: Updates net-imap to address CVE-2025-43857

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22974: Updates nokogiri to address CVE-2025-24855 & CVE-2024-55549

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22974: Upgrades rack to address CVE-2025-46727

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22860: Add arbitrary flexbasis to allow main content to shrink

Arvados-DCO-1.1-Signed-off-by: Stephen Smith <stephen@curii.com>

22793: made panelStates update when children.length changes

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22974: Upgrades github.com/go-jose/go-jose/v4 to address CVE-2025-27144

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22974: Upgrades golang.org/x/net to address CVE-2025-22872

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22974: Upgrades github.com/golang-jwt/jwt/v4 to address CVE-2025-30204

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22974: Upgrades golang.org/x/crypto to address CVE-2025-22869

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22793: updated trash test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: updated sharinng test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: updated process test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793:  fixed last tab out of range error

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

8815: Remove ARVADOS_DEV_ROOT documentation

arvbox stopped using this in commit
4727a3b6417bd254b3e8bca1bd19a77773493572.
Refs #8815.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

21362: Update rpm.arvados.org URLs to https

They're being redirected anyway, and explicitly using HTTPS gets us
ready for RHEL 9+ support. Refs #21362.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

Merge branch '22958-ansible-docker-package-builds'

Refs #22958.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22793: updated page-not-found test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: updated multiselect-toolbar test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: updated details-panel test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22973: fixed toolbar switching when favoriting item

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: updated favorites test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22958: Document Ansible as a prerequisite for package builds

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Remove arm64 from package build scripts

Our arm64 support has never been fully developed, and our new
Ansible-based build process does not support it at all. Drop it
completely for now.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Update Ansible comments for recent developments

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22793: rewrite details card test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: update delete-multiple-files test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: update create-workflow test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: context-menu tests

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: collection tests pt 2

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: restored version browser option to collection attributes

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: restored old version warning and Link to Process

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: collection test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: fixed banner-tooltip test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: fixed multi-panel-view test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22958: Update Python packages to depend on libcurl4

This is sort of a side effect of the switch to building Docker images
with Ansible, but I wanted it to be a separate commit for
clarity. `install-dev-tools.yml` installs `libcurl4-openssl-dev` because
it's clearly the preferred version: it depends on libcurl4, which in
turn is the version used by curl. The package build Dockerfiles use
`libcurl4-gnutls-dev` which depends on `libcurl3-gnutls` which is
clearly second-rate.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Use Ansible to build package build Docker images

This extends the install-dev-tools.yml playbook to introduce new
`arvados_build_one_target` and `arvados_build_all_targets` groups, to
clarify what happens inside the Docker container vs. outside. Then
`arvados_build_one_target` installs additional build tools that are
required for packages like fpm.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Introduce distro_dnf role to Ansible

Akin to distro_packages, this role is a common place that knows what
module streams we enable on different versions of RHEL, and can enable
any that are requested.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Declare package dependencies for build roles that unarchive

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Introduce distro_packages role

The point of this role is to abstract away differences between
distributions. This is the one place that knows about packaging
differences across distributions and takes care of it, so we don't have
to keep re-encoding the same logic across our playbooks.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Remove Passenger runtime dependencies from arvados_build_ruby

These are only required for the production Passenger agent.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Rename install-test-env.yml→install-dev-tools.yml

To better reflect its expanded scope.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Enable installing select build/test dependencies

This commit completely reorganizes `install-test-env.yml` to make it
possible to install a subset of dependencies using inventory
groups. This is a first step towards reusing the playbook in other
contexts like package build Dockerfiles.

If you put a host in the `arvados_test_all` group, the playbook still
manages all the same stuff it did before, it's just completely
reorganized.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22958: Refactor NodeJS installation to a role

Mostly so we can use role defaults which act consistently with most of
the rest of our code.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

Merge branch 'main' into 22793-unify-tab-view

refs #22793

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: removed extraneous process-overview file

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: added null check for initial root project load

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: fixed Overview panel flickering when navigating to user panel

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: added filter for all root projects, not just current user

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: Process panel now uses new layout

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

Merge branch '22613-update-salt'. Refs #22613

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22613: Updates final arvados-formula merge commit

Arvados-DCO-1.1-Signed-off-by: Lucas Di Pentima <lucas.dipentima@curii.com>

22793: Workflows follow new pattern

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

Merge branch '22827-many-mounts-inside-output-dir'

fixes #22827

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22859: Comment Nginx setup for dynamically assigned ports.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22793: added description reset and expanded height logic

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: applied overview layout to collection view

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22970: Upgrade to go 1.24.1.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22859: Merge branch 'main' into 22859-service-port-range

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '22777-named-proxy-port'

closes #22777

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22777: Change example domain name to match existing docs.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22859: Route ContainerWebServices using dynamically assigned ports.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22793: added dynamic maxHeight to collapsibleDescription

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: abandoned MUI collapse component in favor of jsx/jss

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: removed Overview Panel from Root Project

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22793: added overview-panel and project-attributes

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22859: Merge branch '22777-named-proxy-port' into 22859-service-port-range

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22859: Dynamically assign external ports for container web services.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22777: published_port links specify container request UUIDs.

...not container UUIDs.

The generic proxy endpoint (https://{uuid}-{port}.containers.domain)
can be used with either a container request UUID or a container UUID.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22827: Fix memory usage check in case Alloc decreases during test.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '22935-ssh-key-type'

fixes #22935

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22935: Change example key type from rsa to ed25519.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22827: Log memory consumption even when passing test.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '22931-crunch-run-open-sockets'

fixes #22931

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22827: Fail test on excess memory usage.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22827: Single-entry cache for source collection filesystem.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

22827: Update fs/keepclient pointers during Snapshot and Splice

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '22957-ansible-package-tests'

Closes #22957, #22944, #22962.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22827: Test repetitive mounts under output directory.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '22819-cwl-use-s3-creds' refs #22819

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

22819: Add mock for now() since utcnow() is deprecated.

Arvados-DCO-1.1-Signed-off-by: Peter Amstutz <peter.amstutz@curii.com>

22935: Add SSH key compatibility note to compute node image doc.

Arvados-DCO-1.1-Signed-off-by: Tom Clegg <tom@curii.com>

Merge branch '22845-process-status-counts'

closes #22845

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22845: added tbody assertions in test

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22845: fixed intermittent CORS error

Arvados-DCO-1.1-Signed-off-by: Lisa Knox <lisa.knox@curii.com>

22957: Build package test Docker images with Ansible

This is not a huge win by itself, but it means we can manage these
images with a single playbook rather than one Dockerfile per image. The
bigger win will come when we do the same for package build Dockerfiles,
which can reuse a lot of the code we've already written in
`install-test-env.yml`.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22957: Add arvados_ansible role to install-test-env playbook

This is in preparation to build packaging Docker images with Ansible.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22957: Support RHEL-based distros in distro_bootstrap

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>

22944: Bugfix and DRY Ansible bootstrap tasks

By default, Ansible tries to gather host facts at the start of each
play. In order for the bootstrap task to work as intended, it must run
in an early play with `gather_facts: no`.

Make this easier by adding a role to do it. This removes some
bootstrapping of the `gnupg` and `xz-utils` packages. Both of these were
carried over from previous automations, and they don't seem to really be
required by Ansible directly. I have been able to run all these
playbooks as-is. They might be getting pulled in as dependencies of
other packages, or might be core to more recent Debian, but whatever the
reason, we should be fine.

Arvados-DCO-1.1-Signed-off-by: Brett Smith <brett.smith@curii.com>