2352: Update arv-run-pipeline-instance to handle RunningOnClient and Paused states

Refactored directory handling a bit in fuse to better accomodate other virtual
directory types, and added virtual directories for tags (untested).  Existing
tests pass, need to write new tests for tag directories.

Fix name_for method name.

Fix crash if item has no name (backported from 1970-folder-view)

Fix for interaction between 'select' and 'order' (SQL requires that order
fields show up in select when doing select distinct; readable_by does 'select distinct' by default to avoid duplicate rows).

Use class_for_display more.

Add folder list to left nav.

Merge branch '2640-folder-api' into 1970-folder-view

Add "Copy selections to current folder" button to selection drop-down.

Name links do not need to be owned by tail_uuid.

Merge branch '2640-folder-api' into 1970-folder-view

Add unique and valid name constraints.

Fix wrong infixes in fixture uuids.

Merge branch 'master' into 2640-folder-api

Merge remote-tracking branch 'origin/master' into 2035-arv-mount-tags-folders

Conflicts:
services/api/app/controllers/application_controller.rb

Added 'select' and 'distinct' parameters to discovery document.  Improved
select parameter to parse strings as json.

Use partial unique index for name links.

Fix log permission case broken in merge.

Merge branch 'master' into 2640-folder-api

Conflicts:
services/api/app/controllers/application_controller.rb
services/api/app/models/arvados_model.rb

Merge branch 'master' of git.clinicalfuture.com:arvados

# Please enter a commit message to explain why this merge is necessary,
# especially if it merges an updated upstream into a topic branch.
#
# Lines starting with '#' will be ignored, and an empty message aborts
# the commit.

Another go at migration, uses batched loading and transactions, should have
improved performance.

Merge branch '2328-signatures-for-integration-testing'

refs #2328

Add partial unique index

Add test cases that produce predictable signatures with fixed expiry times.

Put back missing parentheses.

Add "show object" button partials.

Add "Shared with" section to Sharing/Permissions panel.

Changed Log.all.each to Log.find_each because Log.all loads all records (!) and
Log.find_each loads records in batches.  Hopefully this will enable migration
to run without being killed.

Fixed middleware customization so that it doesn't assume the presence or
location of ActionDispatch::Static.

Update tests for new layout.

Do not return Links with group contents

2525: add apiVersion to constructor args

Merge branch 'master' into 2525-java-sdk

Synchronize "show more" button style, turn off cards for now

Focus/hover side navs with white instead of arbitrary color.

Render cards with real content from first few items.

Fix up table columns, use explicit Open button instead of linking uuid

Add integration test for folders.

Fix "show all activity".

Less side-nav padding.

Merge branch 'master' of git.clinicalfuture.com:arvados

# Please enter a commit message to explain why this merge is necessary,
# especially if it merges an updated upstream into a topic branch.
#
# Lines starting with '#' will be ignored, and an empty message aborts
# the commit.

Merge branch 'origin-2608-websocket-event-bus-alt2'

Conflicts:
services/api/app/models/arvados_model.rb
services/api/test/test_helper.rb

Merge branch '2620-keep-serialize-io' (closes #2620)

Move up more useful navs, make activity text smaller.

Fix tests to work with new css/layout.

Use separator instead of drop-down for less-used nav links.

Merge branch '2640-folder-api' into 1970-folder-view

Merge branch 'master' into 2640-folder-api

Fix "create folder"

Fix no-side-nav mode.

Move folders into a separate controller. Add description-editing.

Replaced KeepVolumes with a VolumeManager interface.

A VolumeManager interface may be used to set policy for writing to a set
of Keep volumes. The sole implementation at present is RRVolumeManager,
which implements simple round-robin scheduling; other implementations
could include a manager which selects the least-loaded disk first, the
fastest one, the one with the fewest pending writes, etc. etc.

Refs #2620

Merge branch '1904-api-reader-tokens'

Closes #2702, #2707.

api: Accept JSON-formatted reader token array.

api: Introduce reader_tokens for extra access.

reader_tokens are API tokens whose read permissions will be added to
the primary API token's.  For actions that only read resources, like
:index and :show, you can now omit the API token as long as you
provide at least one reader_token.

This allows users to get access to one-off resources without
interrupting their primary session.  For example, Workbench will use
it to access Collections shared via secret link.

api: More consistency in test helper methods.

I keep accidentally rewriting the methods in ArvadosTestHelper, so I'm
putting them in one module loaded for all tests so I can use them
consistently.

Merge remote-tracking branch 'origin/master' into origin-2608-websocket-event-bus-alt2

Conflicts:
services/api/app/controllers/application_controller.rb
services/api/app/controllers/arvados/v1/schema_controller.rb
services/api/db/schema.rb

Moved message handling out to a separate method for clarity in eventbus.
Fixing name mismatch /websockets => /websocket in configuration
Added guards to various tests to ensure no more messages are processed after
the test is supposed to be done.

Short-circuts #readable_by when the user is admin.

Unsubscribe message now takes filter definition instead of filter_id, reducing
the state both the client and server have to maintain in order to support
unsubscribing.  Added code comments and updated tests.

Added code comments.

Now supports both websocket integrated (ARVADOS_WEBSOCKETS defined) and
websocket-only (ARVADOS_WEBSOCKETS=ws-only) server modes.  Added comment to
application.yml.example about setting websocket_address when running in
websocket-only mode.

525: Update the .classpath to reflect the latest trimmed down version of pom.xml

2525: Java SDK does not need com.google.oauth-client library

Merge branch 'master' into 2525-java-sdk

2525: when using main method, print output to console.

Fix route name in nodes.create, add basic functional test.

Make "create folder" button work

2525: README file to serve as getting started guide.

Adding more code documentation.

Rename owned_items to contents.

Merge branch '2640-folder-api' into 1970-folder-view

Rename owned_items to contents, remove user method, update docs.

2525: Minor updates to log4j configuration of log line format.

api: Make JSON the default response format.

Rails assumes that the request should be sent in HTML unless a format
parameter or the Accept header expressly overrides that.  This change
makes JSON the default unless the request specified it would like
HTML.

Added support for :distinct to application controller.  User can now specify a
column and only get back rows with distinct values of that column.

Merge branch '0000-ruby-client-config'

2525: Add ArvadosSDKJavaUser.java to serve as an example implementation of SDK usage example.

Added ability to select which fields to return, instead of always returning all fields.

Incorporating code review comments (refs #2620)

* use filepath.Join to build file paths instead of fmt.Sprintf
* use ioutil.ReadAll to ensure that we read the whole file

2525: What was that typo!!

Merge branch '1969-persistent-switch'

closes #1969

2525: Use log4j for logging from java SDK

Replace radio button group with a single click-to-toggle button.

Merge branch 'master' into 1969-persistent-switch

Fix error reporting, catch "=foo" in config file, add dev doc.

2525: Add pipeline template create testing. Use maven resources for input files.

2525: Address multithreading concerns in the sdk.

2525: Add sdk/java/target to gitignore list

2525: Cleanup and additional tests.

2525 - Arvados Java SDK. Eclipse project file. Since we are using maven, eclipse users may find it hard to setup eclipse project without this file.

2525 - Arvados Java SDK. API discovery and call methods working. Need logging, further cleanup, and more testing.

Merge branch '2640-folder-api' into 1970-folder-view

Skip UserAgreement in owned_items. They are just collections again.

Add folders page, backed by groups.

Add sb-admin layout.

Show folder contents with editable names.

api: Support filters in API client auths index.

Per comments on Refs #1904.  filters is generally the preferred way to
do searching now.  I maintained existing limits on what can be
searched with this method.

api: Support scope searching in API token index.

api: Migrate VM auth scopes to new system.

VirtualMachinesController was the only one doing anything special with
API token scopes before we provided the more general-purpose system.
This commit removes its specialized code, and provides a database
migration to convert those specialized scopes to the general-purpose
schema.