Merge branch '2638-add-cache-age-disk-usage-histogram-to-workbench' closes #2638

Fixed stop_keep().  Updated test_mount because the fixture changed (again).

Merge branch 'master' of git.clinicalfuture.com:arvados

# Please enter a commit message to explain why this merge is necessary,
# especially if it merges an updated upstream into a topic branch.
#
# Lines starting with '#' will be ignored, and an empty message aborts
# the commit.

- Added MANIFEST.in to include setup_header.py in the source package.  Now gets
the version number from PKG-INFO metadata if available, or git if not, which
should handle all the cases of using sdist, pip install, or install from git
checkout.
- Improved run_test_server.py and fixed Python SDK tests to use it.

Trim newline from logfile hash emerging from `arv keep put`.

Merge branch '2525-java-sdk'

2759: Workbench shouldn't try to make links from Link names.

Because the name attribute can include arbitrary text, it might
resemble an Arvados object UUID.  If that happens, the
_arvados_attr_value partial will try to make a link from it.  All
sorts of weirdness could happen as a result (our specific bug was a
bad URL fed to Workbench's API client), so don't even try.  Just
render the name directly as editable text.

Closes #2759.

Merge branch 'master' of git.curoverse.com:arvados into 2638-add-cache-age-disk-usage-histogram-to-workbench

Added some documentation and renamed variables after Tim's review.

Remove now-superfluous build.sh step from the documentation to build the
Python SDK from source.

2525: update available params method

2525: getAvailableParametersForMethod includes properties from request also.
This is required for create and update methods which have no other parameters.

Merge branch '2352-use-state'

Merge branch '2739-fix-100-task-limit-wip'

Closes #2739.

2739: Ensure crunch-job spawns all new tasks.

Without this fix, crunch-job would only spawn tasks up to the API
server default result limit (currently 100).  Refs #2739.

Bugfix: Don't crash trying to render a new log buffer.

If you submit a Job and then try to load your Workbench Dashboard,
Workbench will likely crash because the log_buffer is a symbol at that
time.  This check guards to make sure that we only try to render
actual log content.

2352: when a running pipeline_instance is stopped in workbench, put it in Paused state.
Similar behavior as when run with --run-here at command prompt.

Merge branch 'master' into 2352-use-state

2352: fix issue with setting active during save

2492: Properly escape Docker image name in Crunch.

2492: Crunch respects the maximum length of Docker image hashes.

2352: look for only RunningOnServer in queue method in pipeline_instance

2352: set active to nil when Ready

2352: when --submit is used, set the state to Ready, not RunningOnClient.
And do not set Active to true.

Merge branch 'master' into 2352-use-state

Merge branch 'master' into 2525-java-sdk

2525: prompt example

2525: list resources, methods, and parameters in prompt example to improve user experience.

2525: Expand prompt example to list the available resources and methods. This can help enhance user experience.

Merge branch 'origin-2035-arv-mount-tags-folders'

Conflicts:
sdk/python/bin/arv-mount

Merge branch '2035-arv-mount-tags-folders' into origin-2035-arv-mount-tags-folders

Merge branch '2492-docker-crunch-jobs'

Closes #2492.

crunch: Install Docker images on demand.

Ward requested this to simplify the installation and testing
procedure.  This is sort of temporary scaffolding; we expect that in
the future Docker images will be stored in, and read from, Keep.

crunch-job: Support runtime Docker image.

This adds support for the allow_other mount option in arv-mount to
make the Keep mount available to the container.

docker: Build base container for Crunch jobs.

2525: refactor response printing

Merge branch '2744-update-dev-docs'

closes #2744

2525: update java sdk documentation to include ArvadosSDKJavaExampleWithPrompt

Improve tests: multiple values for "not in", check =, != results more carefully.

Merge branch 'master' into origin-2035-arv-mount-tags-folders

2525: more testing. also "=" works in place of "is_a" for a filter.

Eliminated build.sh and sed in favor of a common setup_header.py script which
call popen to get the git revision directly.  Removed spurious server_pid > 0
and added except Execption: on run_test_server.py.

2525: example param parsing

2525: example

Merge branch 'master' into 2525-java-sdk

2525: improve response printing in the examples for readability.

Merge branch 'master' of git.curoverse.com:arvados into 2638-add-cache-age-disk-usage-histogram-to-workbench

Clarify log methods page: say "log entry" instead of "log".

Document "filters" feature. Add missing "!=" and "not in" operators.

Refuse to run rake tasks without "bundle exec".

Otherwise you can accidentally load (or dump) schemas without having
the pg_power gem loaded, which will leave you with incorrect indexes
in your database (or schema.rb).

2525: Add ArvadosSDKJavaExampleWithPrompt.java to serve as an easier tool to make quick calls to API server.

Avoided printing graph if no data. Added date histogram was generated.

Added cache age histogram!

Merge branch 'master' into 2525-java-sdk

Fix crash creating new user during initial login. Add test.

Merge branch 'master' into 2525-java-sdk

2525: Address review feedback.

Fix up workbench and apiserver install docs.

Fix prompt paths.

Added printing of histogram json.

Clean up install docs

Add wait_for_ajax after using x-editable in tests.

Fix Perl and Python SDK instructions on crunch install page

Merge branch 'master' into 2744-update-dev-docs

Fix dead links

Added div for histogram and style for it.

Merge branch '2733-coverage-report'

closes #2733

Merge branch 'master' into 2525-java-sdk

Synchronize repository and crunch setup instructions with current behavior.

Fix copy/paste error in gem build instructions.

Remove Gemfile.lock from repo

see http://yehudakatz.com/2010/12/16/clarifying-the-roles-of-the-gemspec-and-gemfile/

Remove stray debug puts.

Merge branch '1970-folder-view'

closes #1970

Merge branch 'master' into 1970-folder-view

Add find?() method so "assert find?(...), msg" can be used in test cases.

Replace unfailable assert() with a comment explaining what it means
for find() to raise an exception.

2525: correct indentation for pom.xml

2525: use -Dmaven.test.skip=true when packaging the SDK.

Added test for group mount.  Passes.

Improved fresh/stale handling with base class, added property fuse inode cache
invalidation.  Added common merge function for handling directory updates.
arv-mount now daemonizes by default.

Merge branch 'master' into 2525-java-sdk

2352: initial tests for arv-run-pipeline-instance

Merge branch 'master' into 2352-use-state

Adding support for groups and viewing arvados objects as files (serialized
json).  Work in progress.

Merge branch 'master' into origin-2035-arv-mount-tags-folders

Fix so that a present but empty select parameter in queries no longer yields
an error.

Added PyYAML to requirements.txt

Merge branch 'master' into origin-2035-arv-mount-tags-folders

Remove duplicate ERROR_ACTIONS constant from merge.

Ensure edited description really gets saved.

Use send(symbol) instead of send(string).

Change icon for virtual machines nav.

Remove confusing return value.

Merge branch '2640-folder-api' into 1970-folder-view

Conflicts:
apps/workbench/app/controllers/application_controller.rb
services/api/app/controllers/application_controller.rb

Move contents action to GroupsController.

Fix broken test case.

2352: when using arv-run-pipeline-instance, set state to RunningOnClient.

Merge branch 'master' of git.curoverse.com:arvados

Documentation tweaks:
* Python SDK requires Python 2.7, make that clear up front
* Remove duplicated SDK installation instructions

Merge branch '2640-folder-api'