16718: Merge branch 'master' into 16718-group-contents-collection-versions
[arvados.git] / services / api / app / controllers / arvados / v1 / groups_controller.rb
1 # Copyright (C) The Arvados Authors. All rights reserved.
2 #
3 # SPDX-License-Identifier: AGPL-3.0
4
5 require "trashable"
6
7 class Arvados::V1::GroupsController < ApplicationController
8   include TrashableController
9
10   skip_before_action :find_object_by_uuid, only: :shared
11   skip_before_action :render_404_if_no_object, only: :shared
12
13   def self._index_requires_parameters
14     (super rescue {}).
15       merge({
16         include_trash: {
17           type: 'boolean', required: false, default: false, description: "Include items whose is_trashed attribute is true.",
18         },
19       })
20   end
21
22   def self._show_requires_parameters
23     (super rescue {}).
24       merge({
25         include_trash: {
26           type: 'boolean', required: false, default: false, description: "Show group/project even if its is_trashed attribute is true.",
27         },
28       })
29   end
30
31   def self._contents_requires_parameters
32     params = _index_requires_parameters.
33       merge({
34               uuid: {
35                 type: 'string', required: false, default: nil,
36               },
37               recursive: {
38                 type: 'boolean', required: false, default: false, description: 'Include contents from child groups recursively.',
39               },
40               include: {
41                 type: 'string', required: false, description: 'Include objects referred to by listed field in "included" (only owner_uuid).',
42               },
43               include_old_versions: {
44                 type: 'boolean', required: false, default: false, description: 'Include past collection versions.',
45               }
46             })
47     params.delete(:select)
48     params
49   end
50
51   def self._create_requires_parameters
52     super.merge(
53       {
54         async: {
55           required: false,
56           type: 'boolean',
57           location: 'query',
58           default: false,
59           description: 'defer permissions update',
60         }
61       }
62     )
63   end
64
65   def self._update_requires_parameters
66     super.merge(
67       {
68         async: {
69           required: false,
70           type: 'boolean',
71           location: 'query',
72           default: false,
73           description: 'defer permissions update',
74         }
75       }
76     )
77   end
78
79   def create
80     if params[:async]
81       @object = model_class.new(resource_attrs.merge({async_permissions_update: true}))
82       @object.save!
83       render_accepted
84     else
85       super
86     end
87   end
88
89   def update
90     if params[:async]
91       attrs_to_update = resource_attrs.reject { |k, v|
92         [:kind, :etag, :href].index k
93       }.merge({async_permissions_update: true})
94       @object.update_attributes!(attrs_to_update)
95       @object.save!
96       render_accepted
97     else
98       super
99     end
100   end
101
102   def render_404_if_no_object
103     if params[:action] == 'contents'
104       if !params[:uuid]
105         # OK!
106         @object = nil
107         true
108       elsif @object
109         # Project group
110         true
111       elsif (@object = User.where(uuid: params[:uuid]).first)
112         # "Home" pseudo-project
113         true
114       else
115         super
116       end
117     else
118       super
119     end
120   end
121
122   def contents
123     load_searchable_objects
124     list = {
125       :kind => "arvados#objectList",
126       :etag => "",
127       :self_link => "",
128       :offset => @offset,
129       :limit => @limit,
130       :items_available => @items_available,
131       :items => @objects.as_api_response(nil)
132     }
133     if @extra_included
134       list[:included] = @extra_included.as_api_response(nil, {select: @select})
135     end
136     send_json(list)
137   end
138
139   def shared
140     # The purpose of this endpoint is to return the toplevel set of
141     # groups which are *not* reachable through a direct ownership
142     # chain of projects starting from the current user account.  In
143     # other words, groups which to which access was granted via a
144     # permission link or chain of links.
145     #
146     # This also returns (in the "included" field) the objects that own
147     # those projects (users or non-project groups).
148     #
149     #
150     # The intended use of this endpoint is to support clients which
151     # wish to browse those projects which are visible to the user but
152     # are not part of the "home" project.
153
154     load_limit_offset_order_params
155     load_filters_param
156
157     @objects = exclude_home Group.readable_by(*@read_users), Group
158
159     apply_where_limit_order_params
160
161     if params["include"] == "owner_uuid"
162       owners = @objects.map(&:owner_uuid).to_set
163       @extra_included = []
164       [Group, User].each do |klass|
165         @extra_included += klass.readable_by(*@read_users).where(uuid: owners.to_a).to_a
166       end
167     end
168
169     index
170   end
171
172   def self._shared_requires_parameters
173     rp = self._index_requires_parameters
174     rp[:include] = { type: 'string', required: false }
175     rp
176   end
177
178   protected
179
180   def load_searchable_objects
181     all_objects = []
182     @items_available = 0
183
184     # Reload the orders param, this time without prefixing unqualified
185     # columns ("name" => "groups.name"). Here, unqualified orders
186     # apply to each table being searched, not "groups".
187     load_limit_offset_order_params(fill_table_names: false)
188
189     # Trick apply_where_limit_order_params into applying suitable
190     # per-table values. *_all are the real ones we'll apply to the
191     # aggregate set.
192     limit_all = @limit
193     offset_all = @offset
194     # save the orders from the current request as determined by load_param,
195     # but otherwise discard them because we're going to be getting objects
196     # from many models
197     request_orders = @orders.clone
198     @orders = []
199
200     request_filters = @filters
201
202     klasses = [Group,
203      Job, PipelineInstance, PipelineTemplate, ContainerRequest, Workflow,
204      Collection,
205      Human, Specimen, Trait]
206
207     table_names = Hash[klasses.collect { |k| [k, k.table_name] }]
208
209     disabled_methods = Rails.configuration.API.DisabledAPIs
210     avail_klasses = table_names.select{|k, t| !disabled_methods[t+'.index']}
211     klasses = avail_klasses.keys
212
213     request_filters.each do |col, op, val|
214       if col.index('.') && !table_names.values.include?(col.split('.', 2)[0])
215         raise ArgumentError.new("Invalid attribute '#{col}' in filter")
216       end
217     end
218
219     wanted_klasses = []
220     request_filters.each do |col,op,val|
221       if op == 'is_a'
222         (val.is_a?(Array) ? val : [val]).each do |type|
223           type = type.split('#')[-1]
224           type[0] = type[0].capitalize
225           wanted_klasses << type
226         end
227       end
228     end
229
230     filter_by_owner = {}
231     if @object
232       if params['recursive']
233         filter_by_owner[:owner_uuid] = [@object.uuid] + @object.descendant_project_uuids
234       else
235         filter_by_owner[:owner_uuid] = @object.uuid
236       end
237
238       if params['exclude_home_project']
239         raise ArgumentError.new "Cannot use 'exclude_home_project' with a parent object"
240       end
241     end
242
243     included_by_uuid = {}
244
245     seen_last_class = false
246     klasses.each do |klass|
247       @offset = 0 if seen_last_class  # reset offset for the new next type being processed
248
249       # if current klass is same as params['last_object_class'], mark that fact
250       seen_last_class = true if((params['count'].andand.==('none')) and
251                                 (params['last_object_class'].nil? or
252                                  params['last_object_class'].empty? or
253                                  params['last_object_class'] == klass.to_s))
254
255       # if klasses are specified, skip all other klass types
256       next if wanted_klasses.any? and !wanted_klasses.include?(klass.to_s)
257
258       # don't reprocess klass types that were already seen
259       next if params['count'] == 'none' and !seen_last_class
260
261       # don't process rest of object types if we already have needed number of objects
262       break if params['count'] == 'none' and all_objects.size >= limit_all
263
264       # If the currently requested orders specifically match the
265       # table_name for the current klass, apply that order.
266       # Otherwise, order by recency.
267       request_order =
268         request_orders.andand.find { |r| r =~ /^#{klass.table_name}\./i || r !~ /\./ } ||
269         klass.default_orders.join(", ")
270
271       @select = nil
272       where_conds = filter_by_owner
273       if klass == Collection
274         @select = klass.selectable_attributes - ["manifest_text"]
275       elsif klass == Group
276         where_conds = where_conds.merge(group_class: "project")
277       end
278
279       @filters = request_filters.map do |col, op, val|
280         if !col.index('.')
281           [col, op, val]
282         elsif (col = col.split('.', 2))[0] == klass.table_name
283           [col[1], op, val]
284         else
285           nil
286         end
287       end.compact
288
289       @objects = klass.readable_by(*@read_users, {
290           :include_trash => params[:include_trash],
291           :include_old_versions => params[:include_old_versions]
292         }).order(request_order).where(where_conds)
293
294       if params['exclude_home_project']
295         @objects = exclude_home @objects, klass
296       end
297
298       klass_limit = limit_all - all_objects.count
299       @limit = klass_limit
300       apply_where_limit_order_params klass
301       klass_object_list = object_list(model_class: klass)
302       klass_items_available = klass_object_list[:items_available] || 0
303       @items_available += klass_items_available
304       @offset = [@offset - klass_items_available, 0].max
305       all_objects += klass_object_list[:items]
306
307       if klass_object_list[:limit] < klass_limit
308         # object_list() had to reduce @limit to comply with
309         # max_index_database_read. From now on, we'll do all queries
310         # with limit=0 and just accumulate items_available.
311         limit_all = all_objects.count
312       end
313
314       if params["include"] == "owner_uuid"
315         owners = klass_object_list[:items].map {|i| i[:owner_uuid]}.to_set
316         [Group, User].each do |ownerklass|
317           ownerklass.readable_by(*@read_users).where(uuid: owners.to_a).each do |ow|
318             included_by_uuid[ow.uuid] = ow
319           end
320         end
321       end
322     end
323
324     if params["include"]
325       @extra_included = included_by_uuid.values
326     end
327
328     @objects = all_objects
329     @limit = limit_all
330     @offset = offset_all
331   end
332
333   protected
334
335   def exclude_home objectlist, klass
336     # select records that are readable by current user AND
337     #   the owner_uuid is a user (but not the current user) OR
338     #   the owner_uuid is not readable by the current user
339     #   the owner_uuid is a group but group_class is not a project
340
341     read_parent_check = if current_user.is_admin
342                           ""
343                         else
344                           "NOT EXISTS(SELECT 1 FROM #{PERMISSION_VIEW} WHERE "+
345                             "user_uuid=(:user_uuid) AND target_uuid=#{klass.table_name}.owner_uuid AND perm_level >= 1) OR "
346                         end
347
348     objectlist.where("#{klass.table_name}.owner_uuid IN (SELECT users.uuid FROM users WHERE users.uuid != (:user_uuid)) OR "+
349                      read_parent_check+
350                      "EXISTS(SELECT 1 FROM groups as gp where gp.uuid=#{klass.table_name}.owner_uuid and gp.group_class != 'project')",
351                      user_uuid: current_user.uuid)
352   end
353
354 end