perf-o-matic should store test results' units
[WebKit-https.git] / Websites / webkit-perf.appspot.com / json_generators.py
1 #!/usr/bin/env python
2 # Copyright (C) 2012 Google Inc. All rights reserved.
3 #
4 # Redistribution and use in source and binary forms, with or without
5 # modification, are permitted provided that the following conditions are
6 # met:
7 #
8 #     * Redistributions of source code must retain the above copyright
9 # notice, this list of conditions and the following disclaimer.
10 #     * Redistributions in binary form must reproduce the above
11 # copyright notice, this list of conditions and the following disclaimer
12 # in the documentation and/or other materials provided with the
13 # distribution.
14 #     * Neither the name of Google Inc. nor the names of its
15 # contributors may be used to endorse or promote products derived from
16 # this software without specific prior written permission.
17 #
18 # THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
19 # "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
20 # LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
21 # A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
22 # OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
23 # SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
24 # LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
25 # DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
26 # THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
27 # (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
28 # OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
29
30 import json
31 from datetime import datetime
32 from datetime import timedelta
33 from time import mktime
34
35 from models import Build
36 from models import Builder
37 from models import Branch
38 from models import Platform
39 from models import Test
40 from models import TestResult
41
42
43 class JSONGeneratorBase(object):
44     def to_json(self):
45         return json.dumps(self.value())
46
47
48 class DashboardJSONGenerator(JSONGeneratorBase):
49     def __init__(self):
50         # FIXME: Don't hard-code webkit-trunk here; ideally we want this be customizable.
51         webkit_trunk = Branch.get_by_key_name('webkit-trunk')
52         if not webkit_trunk:
53             self._dashboard = None
54             return
55
56         # FIXME: Determine popular branches, platforms, and tests
57         self._dashboard = {
58             'defaultBranch': 'WebKit trunk',
59             'branchToId': {webkit_trunk.name: webkit_trunk.id},
60             'platformToId': {},
61             'testToId': {},
62         }
63
64         for platform in Platform.all():
65             if not platform.hidden:
66                 self._dashboard['platformToId'][platform.name] = platform.id
67
68         for test in Test.all():
69             if not test.hidden:
70                 self._dashboard['testToId'][test.name] = test.id
71
72     def value(self):
73         return self._dashboard
74
75
76 class ManifestJSONGenerator(JSONGeneratorBase):
77     def __init__(self):
78         # FIXME: This function is massive. Break it up
79         self._test_map = {}
80         platform_id_map = {}
81         branch_id_map = {}
82         for test in Test.all():
83             if test.hidden:
84                 continue
85
86             branch_ids = [Branch.get(branch_key).id for branch_key in test.branches]
87             platform_ids = [Platform.get(platform_key).id for platform_key in test.platforms]
88             self._test_map[test.id] = {
89                 'name': test.name,
90                 'branchIds': branch_ids,
91                 'platformIds': platform_ids,
92             }
93
94             for platform_id in platform_ids:
95                 platform_id_map.setdefault(platform_id, {'tests': [], 'branches': []})
96                 platform_id_map[platform_id]['tests'].append(test.id)
97                 platform_id_map[platform_id]['branches'] += branch_ids
98
99             for branch_id in branch_ids:
100                 branch_id_map.setdefault(branch_id, {'tests': [], 'platforms': []})
101                 branch_id_map[branch_id]['tests'].append(test.id)
102                 branch_id_map[branch_id]['platforms'] += platform_ids
103
104         self._platform_map = {}
105         for platform in Platform.all():
106             if platform.id not in platform_id_map:
107                 continue
108
109             if platform.hidden:
110                 for test_id in platform_id_map[platform.id]['tests']:
111                     self._test_map[test_id]['platformIds'].remove(platform.id)
112                 for branch_id in platform_id_map[platform.id]['branches']:
113                     branch_id_map[branch_id]['platforms'].remove(platform.id)
114                 continue
115
116             self._platform_map[platform.id] = {
117                 'name': platform.name,
118                 'testIds': list(set(platform_id_map[platform.id]['tests'])),
119                 'branchIds': list(set(platform_id_map[platform.id]['branches'])),
120             }
121
122         self._branch_map = {}
123         for branch in Branch.all():
124             if branch.id not in branch_id_map:
125                 continue
126             self._branch_map[branch.id] = {
127                 'name': branch.name,
128                 'testIds': list(set(branch_id_map[branch.id]['tests'])),
129                 'platformIds': list(set(branch_id_map[branch.id]['platforms'])),
130             }
131
132     def value(self):
133         return {'branchMap': self._branch_map, 'platformMap': self._platform_map, 'testMap': self._test_map}