Loader_unittests should reset state between runs.
[WebKit-https.git] / Tools / TestResultServer / static-dashboards / loader_unittests.js
1 // Copyright (C) Zan Dobersek <zandobersek@gmail.com>
2 //
3 // Redistribution and use in source and binary forms, with or without
4 // modification, are permitted provided that the following conditions are
5 // met:
6 //
7 //         * Redistributions of source code must retain the above copyright
8 // notice, this list of conditions and the following disclaimer.
9 //         * Redistributions in binary form must reproduce the above
10 // copyright notice, this list of conditions and the following disclaimer
11 // in the documentation and/or other materials provided with the
12 // distribution.
13 //         * Neither the name of Google Inc. nor the names of its
14 // contributors may be used to endorse or promote products derived from
15 // this software without specific prior written permission.
16 //
17 // THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
18 // "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
19 // LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
20 // A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
21 // OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
22 // SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
23 // LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
24 // DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
25 // THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
26 // (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
27 // OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
28
29 module('loader');
30
31 test('loading steps', 1, function() {
32     resetGlobals();
33     var loadedSteps = [];
34     var resourceLoader = new loader.Loader();
35     function loadingStep1() {
36         loadedSteps.push('step 1');
37         resourceLoader.load();
38     }
39     function loadingStep2() {
40         loadedSteps.push('step 2');
41         resourceLoader.load();
42     }
43
44     var loadingCompleteCallback = resourceLoadingComplete;
45     resourceLoadingComplete = function() {
46         deepEqual(loadedSteps, ['step 1', 'step 2']);
47     }
48
49     try {
50         resourceLoader._loadingSteps = [loadingStep1, loadingStep2];
51         resourceLoader.load();
52     } finally {
53         resourceLoadingComplete = loadingCompleteCallback;
54     }
55 });
56
57 test('results files loading', 5, function() {
58     resetGlobals();
59     var expectedLoadedBuilders = ["WebKit Linux", "WebKit Win"];
60     var loadedBuilders = [];
61     var resourceLoader = new loader.Loader();
62     resourceLoader._loadNext = function() {
63         deepEqual(loadedBuilders.sort(), expectedLoadedBuilders);
64         loadedBuilders.forEach(function(builderName) {
65             ok('secondsSinceEpoch' in g_resultsByBuilder[builderName]);
66             deepEqual(g_resultsByBuilder[builderName].tests, {});
67         });
68     }
69
70     var requestFunction = loader.request;
71     loader.request = function(url, successCallback, errorCallback) {
72         var builderName = /builder=([\w ]+)&/.exec(url)[1];
73         loadedBuilders.push(builderName);
74         successCallback({responseText: '{"version": 4, "' + builderName + '": {"secondsSinceEpoch": [' + Date.now() + '], "tests": {}}}'});
75     }
76
77     g_builders = {"WebKit Linux": true, "WebKit Win": true};
78
79     builders.masters['ChromiumWebkit'] = {'tests': {'layout-tests': {builders: ["WebKit Linux", "WebKit Win"]}}};
80     loadBuildersList('@ToT - chromium.org', 'layout-tests');
81
82     try {
83         resourceLoader._loadResultsFiles();
84     } finally {
85         loader.request = requestFunction;
86     }
87 });
88
89 test('expectations files loading', 1, function() {
90     resetGlobals();
91     parseCrossDashboardParameters();
92     var expectedLoadedPlatforms = ["chromium", "chromium-android", "efl", "efl-wk1", "efl-wk2", "gtk",
93                                    "gtk-wk2", "mac", "mac-lion", "mac-snowleopard", "qt", "win", "wk2"];
94     var loadedPlatforms = [];
95     var resourceLoader = new loader.Loader();
96     resourceLoader._loadNext = function() {
97         deepEqual(loadedPlatforms.sort(), expectedLoadedPlatforms);
98     }
99
100     var requestFunction = loader.request;
101     loader.request = function(url, successCallback, errorCallback) {
102         loadedPlatforms.push(/LayoutTests\/platform\/(.+)\/TestExpectations/.exec(url)[1]);
103         successCallback({responseText: ''});
104     }
105
106     try {
107         resourceLoader._loadExpectationsFiles();
108     } finally {
109         loader.request = requestFunction;
110     }
111 });
112
113 test('results file failing to load', 2, function() {
114     resetGlobals();
115     // FIXME: loader shouldn't depend on state defined in dashboard_base.js.
116     g_buildersThatFailedToLoad = [];
117
118     var resourceLoader = new loader.Loader();
119     var resourceLoadCount = 0;
120     resourceLoader._handleResourceLoad = function() {
121         resourceLoadCount++;
122     }
123
124     var builder1 = 'builder1';
125     g_builders[builder1] = true;
126     resourceLoader._handleResultsFileLoadError(builder1);
127
128     var builder2 = 'builder2';
129     g_builders[builder2] = true;
130     resourceLoader._handleResultsFileLoadError(builder2);
131
132     deepEqual(g_buildersThatFailedToLoad, [builder1, builder2]);
133     equal(resourceLoadCount, 2);
134
135 })