Perf-o-matic should process reports in background
[WebKit-https.git] / Websites / webkit-perf.appspot.com / controller.py
1 #!/usr/bin/env python
2 # Copyright (C) 2012 Google Inc. All rights reserved.
3 #
4 # Redistribution and use in source and binary forms, with or without
5 # modification, are permitted provided that the following conditions are
6 # met:
7 #
8 #     * Redistributions of source code must retain the above copyright
9 # notice, this list of conditions and the following disclaimer.
10 #     * Redistributions in binary form must reproduce the above
11 # copyright notice, this list of conditions and the following disclaimer
12 # in the documentation and/or other materials provided with the
13 # distribution.
14 #     * Neither the name of Google Inc. nor the names of its
15 # contributors may be used to endorse or promote products derived from
16 # this software without specific prior written permission.
17 #
18 # THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
19 # "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
20 # LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
21 # A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
22 # OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
23 # SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
24 # LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
25 # DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
26 # THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
27 # (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
28 # OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
29
30 import webapp2
31 from google.appengine.api import memcache
32 from google.appengine.api import taskqueue
33 from google.appengine.ext import db
34
35 from models import Test
36 from models import PersistentCache
37
38
39 def set_persistent_cache(name, value):
40     memcache.set(name, value)
41
42     def execute():
43         cache = PersistentCache.get_by_key_name(name)
44         if cache:
45             cache.value = value
46             cache.put()
47         else:
48             PersistentCache(key_name=name, value=value).put()
49
50     db.run_in_transaction(execute)
51
52
53 def get_persistent_cache(name):
54     value = memcache.get(name)
55     if value:
56         return value
57     cache = PersistentCache.get_by_key_name(name)
58     memcache.set(name, cache)
59     return cache.value
60
61
62 def cache_manifest(cache):
63     set_persistent_cache('manifest', cache)
64
65
66 def schedule_manifest_update():
67     taskqueue.add(url='/api/test/update', name='manifest_update')
68
69
70 class CachedManifestHandler(webapp2.RequestHandler):
71     def get(self):
72         self.response.headers['Content-Type'] = 'application/json'
73         manifest = get_persistent_cache('manifest')
74         if manifest:
75             self.response.out.write(manifest)
76         else:
77             schedule_manifest_update()
78
79
80 def cache_dashboard(cache):
81     set_persistent_cache('dashboard', cache)
82
83
84 def schedule_dashboard_update():
85     taskqueue.add(url='/api/test/dashboard/update', name='dashboard_update')
86
87
88 class CachedDashboardHandler(webapp2.RequestHandler):
89     def get(self):
90         self.response.headers['Content-Type'] = 'application/json'
91         dashboard = get_persistent_cache('dashboard')
92         if dashboard:
93             self.response.out.write(dashboard)
94         else:
95             schedule_dashboard_update()
96
97
98 def cache_runs(test_id, branch_id, platform_id, cache):
99     set_persistent_cache(Test.cache_key(test_id, branch_id, platform_id), cache)
100
101
102 def schedule_runs_update(test_id, branch_id, platform_id):
103     taskqueue.add(url='/api/test/runs/update', name='runs_update_%d_%d_%d' % (test_id, branch_id, platform_id),
104         params={'id': test_id, 'branchid': branch_id, 'platformid': platform_id})
105
106
107 class CachedRunsHandler(webapp2.RequestHandler):
108     def get(self):
109         self.response.headers['Content-Type'] = 'application/json'
110
111         try:
112             test_id = int(self.request.get('id', 0))
113             branch_id = int(self.request.get('branchid', 0))
114             platform_id = int(self.request.get('platformid', 0))
115         except TypeError:
116             # FIXME: Output an error here
117             test_id = 0
118             branch_id = 0
119             platform_id = 0
120
121         runs = get_persistent_cache(Test.cache_key(test_id, branch_id, platform_id))
122         if runs:
123             self.response.out.write(runs)
124         else:
125             schedule_runs_update(test_id, branch_id, platform_id)
126
127
128 def schedule_report_process(log):
129     taskqueue.add(url='/api/test/report/process', params={'id': log.key().id()})