Merge branch '7676-dispatch-cheaper-nodes' closes #7676
[arvados.git] / services / api / lib / simulate_job_log.rb
1 module SimulateJobLog
2   def replay(filename, multiplier = 1, simulated_job_uuid = nil)
3     raise "Environment must be development or test" unless [ 'test', 'development' ].include? ENV['RAILS_ENV']
4
5     multiplier = multiplier.to_f
6     multiplier = 1.0 if multiplier <= 0
7
8     actual_start_time = Time.now
9     log_start_time = nil
10
11     if simulated_job_uuid and (job = Job.where(uuid: simulated_job_uuid).first)
12       job_owner_uuid = job.owner_uuid
13     else
14       job_owner_uuid = system_user_uuid
15     end
16
17     act_as_system_user do
18       File.open(filename).each.with_index do |line, index|
19         cols = {}
20         cols[:timestamp], rest_of_line = line.split(' ', 2)
21         begin
22           cols[:timestamp] = Time.strptime( cols[:timestamp], "%Y-%m-%d_%H:%M:%S" )
23         rescue ArgumentError
24           if line =~ /^((?:Sun|Mon|Tue|Wed|Thu|Fri|Sat) (?:Jan|Feb|Mar|Apr|May|Jun|Jul|Aug|Sep|Oct|Nov|Dec) \d{1,2} \d\d:\d\d:\d\d \d{4}) (.*)/
25             # Wed Nov 19 07:12:39 2014
26             cols[:timestamp] = Time.strptime( $1, "%a %b %d %H:%M:%S %Y" )
27             rest_of_line = $2
28           else
29               STDERR.puts "Ignoring log line because of unknown time format: #{line}"
30           end
31         end
32         cols[:job_uuid], cols[:pid], cols[:task], cols[:event_type], cols[:message] = rest_of_line.split(' ', 5)
33         # Override job uuid with a simulated one if specified
34         cols[:job_uuid] = simulated_job_uuid || cols[:job_uuid]
35         # determine when we want to simulate this log being created, based on the time multiplier
36         log_start_time = cols[:timestamp] if log_start_time.nil?
37         log_time = cols[:timestamp]
38         actual_elapsed_time = Time.now - actual_start_time
39         log_elapsed_time = log_time - log_start_time
40         modified_elapsed_time = log_elapsed_time / multiplier
41         pause_time = modified_elapsed_time - actual_elapsed_time
42         sleep pause_time if pause_time > 0
43
44         Log.new({
45           owner_uuid:  job_owner_uuid,
46           event_at:    Time.zone.local_to_utc(cols[:timestamp]),
47           object_uuid: cols[:job_uuid],
48           event_type:  cols[:event_type],
49           properties:  { 'text' => line }
50         }).save!
51       end
52     end
53
54   end
55 end