New flakiness dashboard should align results by revision numbers
[WebKit-https.git] / Websites / test-results / ChangeLog
1 2013-10-21  Ryosuke Niwa  <rniwa@webkit.org>
2
3         New flakiness dashboard should align results by revision numbers
4         https://bugs.webkit.org/show_bug.cgi?id=123129
5
6         Reviewed by Tim Horton.
7
8         * include/config.json: Specify the default cache time to be 10 minutes.
9         * include/json-shared.php: Added Expires and Cache-Control headers. It's configurable via config.json.
10         * index.html:
11         (TestResultsView._createResultCell): Don't put '-' in a result cell without time.
12         (TestResultsView._populateTestPane): Create an array of build times ordered from the newest to the oldest.
13         Not that build.time() is the newest commit time among all repository for each result. e.g. if we had
14         both WebKit and Safari repository information in a given result, the newer of the two will be used.
15         (TestResultsView._createTestResultHeader): Added.
16         (TestResultsView._createBuildsAndComputeSlownessOfResults): Extracted from _createTestResultRow so
17         that _populateTestPane could use Build object before calling _createTestResultRow.
18         (TestResultsView._createTestResultRow): Takes buildTimes. Insert an empty cell for a build time if
19         the current row doesn't contain that a result for that build time.
20         (TestResultsView._populateBuilderPane):
21         * main.css: Tweaked the style so that bubbles are aligned vertically without '-'.
22         (.resultsTable):
23         (.resultsTable thead th):
24         (.resultsTable .resultCell):
25         (.resultsTable a):
26         (.resultsTable span a):
27
28 2013-10-21  Ryosuke Niwa  <rniwa@webkit.org>
29
30         New flakiness dashboard show test time, modifiers, and flaky tests
31         https://bugs.webkit.org/show_bug.cgi?id=123119
32
33         Reviewed by Tim Horton.
34
35         * api/failing-tests.php: Manually serialize each row in the results to avoid hitting the memory limit.
36         * include/db.php:
37         (Database::query): Added.
38         (Database::fetch_next_row): Added.
39         * include/init-database.sql: Added modifiers and time columns to results table.
40         * include/test-results.php:
41         (store_test_results): Update start_time and end_time to the union of the new interval and the existing interval.
42         (recursively_add_test_results): Handle empty $full_name to eliminate the loop over tests in store_test_results.
43         Also verify that each test name, expected and actual results conform to the specific format to prevent XSS.
44         Also use insert_row instead of select_or_insert_row to avoid issuing an unnecessary SQL query.
45         (format_result): Extracted from format_result_rows. Used in failing-tests.php.
46         * index.html:
47         (TestResultsView): Added _currentBuilderFailureType and _currentBuilderDays.
48         (TestResultsView._createResultCell): Show the test time and the expected result.
49         (TestResultsView._createTestResultRow): Compute the slowest run and also round time to tenth of second for time
50         less than 10s or second if it's more than 10s so that the test time will always be shown in two digits.
51         Also show the bug number and the latest expected result on the left columns after linkifying the bug numbers. 
52         (TestResultsView._matchesFailureType): Added. Determines whether results is of a particular failure type.
53         (TestResultsView._populateBuilderPane):
54         (TestResultsView.fetchFailingTestsForBuilder): Store the failure type such as flaky, wrongtestexpectations.
55         (TestResultsView.updateLocationHash):
56         (TestResultsView.loadTestsFromLocationHash):
57         (fetchManifest):
58         * js/dom.js:
59         (element): appendChild if an item is a Node. Otherwise, e.g. integer, create a text node out of toString() call.
60         * main.css: Updated styles.
61
62 2013-10-18  Ryosuke Niwa  <rniwa@webkit.org>
63
64         New flakiness dashboard should support showing the failing tests per builder
65         https://bugs.webkit.org/show_bug.cgi?id=123011
66
67         Reviewed by Timothy Hatcher.
68
69         Added the feature. Also did some refactoring to add this feature.
70
71         * ChangeLog: Added.
72         * api/failing-tests.php: Added.
73         * api/manifest.php: Removed the code to make maps by id. The work is now done in index.html.
74         * api/results.php:
75         * common.css: Added. Extracted from index.html.
76         * include/test-results.php: Extracted parse_revisions_array and format_result_rows from results.php.
77         * index.html:
78         * main.css: Added.
79         (TestResultsView.setAvailableTests): Added.
80         (TestResultsView.showTooltip): Fixed the code to compute x and y coordinates of the tooltip to take
81         scrolled positions into account.
82         (TestResultsView._createTestResultRow): Extracted from _populateTestPane.
83         (TestResultsView.fetchTest): Added the code to show "Loading..." in the pane while loading the JSON.
84         (TestResultsView.fetchTests): Respect the doNotUpdateHash flag.
85         (TestResultsView._populateBuilderPane): Added.
86         (TestResultsView.fetchFailingTestsForBuilder): Added.
87         (TestResultsView.updateLocationHash): Serialize builder & builderDays.
88         (TestResultsView.locationHashChanged): Don't delete existing test panes since that's now done in
89         loadTestsFromLocationHash.
90         (TestResultsView.loadTestsFromLocationHash): Take care of both 'tests' and 'builder' components.
91         (fetchManifest): Setup the UI to select a builder.
92