adf5cf3a5659442393e879a69b473f276d8c0344
[WebKit-https.git] / LayoutTests / platform / chromium / test_expectations.txt
1 // This file consists of lines with specifications of what
2 // to expect from layout test cases. The test cases can be directories
3 // in which case the expectations apply to all test cases in that
4 // directory and any subdirectory. The format of the file is along the
5 // lines of:
6 //
7 // fast/js/fixme.js = FAIL
8 // fast/js/flaky.js = FAIL PASS
9 // fast/js/crash.js = CRASH TIMEOUT FAIL PASS
10 //
11 // The format of a test line is as follows:
12 // METADATA : relative/path/to/test.html = EXPECTATIONS
13 //
14 // Valid values for METADATA:
15 //
16 // BUG(CR|WK|V8_)[0-9]+: See this chromium/webkit/v8 bug for more information.
17 //                       Every test that isn't marked WONTFIX should have the
18 //                       appropriate BUG annotation.
19 // SKIP: Doesn't run the test.
20 // SLOW: The test takes a long time to run, but does not timeout indefinitely.
21 // WONTFIX: For tests that we never intend to pass on a given platform.
22 // DEBUG: Expectations apply only to the debug build.
23 // RELEASE: Expectations apply only to release build.
24 // LINUX/WIN/WIN-XP/WIN-VISTA/MAC: Expectations apply only to these platforms.
25 //
26 // Valid values for EXPECTATIONS:
27 //
28 // PASS: Test should pass
29 // CRASH: Test should crash
30 // TIMEOUT: Test should timeout
31 // IMAGE: Test will produce an incorrect image dump
32 // TEXT: Test will produce incorrect text output (either full or simplified)
33 // IMAGE+TEXT: Test will produce both incorrect text and images
34 // FAIL: Test will produce either incorrect text, images, or both
35 //
36 // If a line contains multiple expectations, it is considered "flakey",
37 // because it means that we're not producing consistent, reliable results.
38 //
39 // For example,
40 // LINUX : media = PASS FAIL
41 //
42 // The above means that all the media tests are flaky, but only on Linux.
43 //
44 // Other examples:
45 //
46 // SKIP : fast/js/no-good.js = TIMEOUT PASS
47 // DEBUG : fast/js/no-good.js = TIMEOUT PASS
48 // DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
49 // LINUX DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
50 // BUGCR1234 DEBUG MAC : fast/js/no-good.js = TIMEOUT PASS
51 //
52 // Notes:
53 // -A test cannot be both SLOW and TIMEOUT
54 // -A test can be included twice, but not via the same path.
55 // -If a test is included twice, then the more precise path wins.
56 // -CRASH tests cannot be WONTFIX
57
58 // -----------------------------------------------------------------
59 // SLOW TESTS
60 // -----------------------------------------------------------------
61
62 BUGCR24182 SLOW : fast/js/regexp-overflow.html = PASS
63 BUGCR24182 SLOW RELEASE : http/tests/misc/DOMContentLoaded-event.html = PASS
64 BUGCR24182 SLOW LINUX DEBUG : http/tests/misc/DOMContentLoaded-event.html = PASS
65 BUGCR24182 SLOW : http/tests/xmlhttprequest/simple-cross-origin-progress-events.html = PASS
66 BUGCR24182 SLOW : tables/mozilla/other/slashlogo.html = PASS
67 BUGCR24182 SLOW WIN RELEASE : tables/mozilla/bugs/bug113235-1.html = PASS
68 BUGCR24182 SLOW DEBUG : fast/js/toString-and-valueOf-override.html = PASS
69
70 // This tests is normally <1 second, but occasionally takes >20s.
71 BUGCR24182 SLOW WIN RELEASE : fast/dom/Window/webkitConvertPoint.html = PASS
72
73 BUGCR24182 WIN RELEASE SLOW : http/tests/loading/redirect-methods.html = PASS
74 BUGCR24182 SLOW MAC RELEASE : dom/html/level2/html/HTMLImageElement01.html = PASS
75 BUGCR24182 SLOW WIN RELEASE : http/tests/local/file-url-sent-as-referer.html = PASS
76 BUGCR24182 SLOW LINUX DEBUG : fast/xpath/4XPath/Borrowed/cz_20030217.html = PASS
77 BUGCR24182 SLOW WIN MAC DEBUG : tables/mozilla/bugs/45621.html = PASS
78 //BUGCR24852 started failing since webkit 49583
79 BUGCR24182 SLOW WIN : http/tests/security/xssAuditor/meta-tag-http-refresh-javascript-url.html = PASS
80 BUGCR24182 SLOW WIN RELEASE : http/tests/security/cross-origin-css.html = PASS
81 BUGCR24182 SLOW WIN RELEASE : fast/loader/local-CSS-from-local.html = PASS
82 BUGCR24182 WIN RELEASE SLOW : http/tests/incremental/split-hex-entities.pl = PASS
83 BUGCR24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/XMLHttpRequestException.html = PASS
84 BUGCR24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/connection-error-sync.html = PASS
85 BUGCR24182 WIN RELEASE SLOW : http/tests/loading/onload-vs-immediate-refresh.pl = PASS
86 BUGCR24182 SLOW : http/tests/cache/subresource-failover-to-network.html = PASS
87 BUGCR24182 WIN DEBUG SLOW : fast/parser/block-nesting-cap.html = PASS
88
89 // Usually <1s in release, ~1s in debug, but occasionally >5s in release.
90 BUGCR27335 WIN RELEASE : plugins/embed-attributes-setting.html = PASS TIMEOUT
91 BUGCR27335 WIN DEBUG SLOW : plugins/embed-attributes-setting.html = PASS
92
93 // --- collecting results for supported-xml-content-types.html ---
94 // was slow, started to timeout
95 BUGCR18702 WIN : http/tests/xmlhttprequest/supported-xml-content-types.html = PASS TIMEOUT
96
97 BUGCR36539 SLOW : http/tests/misc/uncacheable-script-repeated.html = PASS
98
99 BUGCR32018 SLOW : http/tests/websocket/tests/frame-lengths.html = PASS
100 BUGCR69513 DEBUG SLOW : html5lib/webkit-resumer.html = PASS
101
102 // -----------------------------------------------------------------
103 // SKIPPED TESTS
104 // -----------------------------------------------------------------
105
106 // Since V8 is more interruptible than other engines, they use the standard
107 // long-running-script mechanism to handle very-long-running regexps too.
108 // See http://code.google.com/p/v8/issues/detail?id=287
109 WONTFIX SKIP : fast/js/regexp-overflow-too-big.html = TIMEOUT
110
111 // XHTML tests.  These tests seem like they work, but only because the
112 // expected output expects to see JS errors.  There is no point in running
113 // these tests, because they are giving us a false sense of testing that isn't
114 // really happening.  Furthermore, since they appear to pass if we do try to
115 // run them, we can't even list them as permanently expected to fail.
116 BUGCR24185 WONTFIX SKIP : dom/xhtml = PASS
117
118 // We do not want to support Legacy mac encodings on Windows/Linux.
119 // On Mac, we can support them by building platform/text/mac, but
120 // probably we don't want there, either.
121 WONTFIX SKIP WIN LINUX : fast/encoding/char-encoding-mac.html = FAIL
122
123 // Fails due to different window.close() rules.  We need to decide whether we
124 // ever expect to pass this.  Now also timing out.
125 BUGCR24189 WONTFIX SKIP : fast/dom/open-and-close-by-DOM.html = FAIL
126
127 // WML is still an inprogress feature upstream. Chromium does not build
128 // with WML support, so skip its tests.
129 WONTFIX SKIP : wml = FAIL
130 WONTFIX SKIP : http/tests/wml = FAIL
131 WONTFIX SKIP : fast/wml = FAIL
132
133 // These tests are based on the JSC JavaScript profiler. The V8 JavaScript
134 // profiler is in development and will use a different approach than JSC and
135 // most likely these tests will always be JSC specific.
136 WONTFIX SKIP : fast/profiler = FAIL TIMEOUT
137
138 // We use worker_uitests to run workers tests. Don't run them in test_shell.
139 WONTFIX SKIP : fast/workers = PASS TIMEOUT FAIL
140 WONTFIX SKIP : fast/files/workers = PASS TIMEOUT FAIL
141 WONTFIX SKIP : fast/filesystem/workers = PASS TIMEOUT FAIL
142 WONTFIX SKIP : http/tests/workers = PASS TIMEOUT FAIL
143 WONTFIX SKIP : http/tests/xmlhttprequest/workers = PASS TIMEOUT FAIL
144 WONTFIX SKIP : http/tests/eventsource/workers = PASS TIMEOUT FAIL
145 WONTFIX SKIP : http/tests/websocket/tests/workers/ = PASS TIMEOUT FAIL
146
147 // Page Cache - based tests. Chromium disables page cache because the WebKit page cache keeps previously
148 // loaded pages alive in memory to be able to quickly substitute them when user clicks History buttons.
149 // Chromium wants those to be separate navigations made via browser process to be able to make decision
150 // on which renderer process to use for each of them.
151 WONTFIX SKIP BUGCR19635 : fast/harness/use-page-cache.html = TIMEOUT FAIL
152 WONTFIX SKIP BUGCR19635 : fast/dom/Window/timer-resume-on-navigation-back.html = TIMEOUT FAIL
153 // Depends on page cache, as far as I can tell.
154 WONTFIX SKIP BUGCR19635 : fast/events/pageshow-pagehide-on-back-cached.html = TIMEOUT FAIL
155 WONTFIX SKIP BUGCR19635 : fast/events/pageshow-pagehide-on-back-cached-with-frames.html = TIMEOUT
156 WONTFIX SKIP BUGCR19635 : media/restore-from-page-cache.html = TIMEOUT
157 WONTFIX SKIP BUGCR19635 : loader/go-back-to-different-window-size.html = TIMEOUT TEXT
158 WONTFIX SKIP BUGCR19635 : fast/loader/crash-copying-backforwardlist.html = TEXT
159 WONTFIX SKIP BUGCR19635 : fast/harness/page-cache-crash-on-data-urls.html = TEXT
160
161 // Tests that rely on cross-process MessagePorts.  No point in running them in
162 // test_shell, since we'd have to use a completely different implementation from
163 // what is used in the browser.
164 WONTFIX SKIP : fast/events/message-channel-gc-2.html = FAIL
165 WONTFIX SKIP : fast/events/message-channel-gc-3.html = FAIL
166 WONTFIX SKIP : fast/events/message-channel-gc-4.html = FAIL
167 WONTFIX SKIP : fast/events/message-channel-gc.html = FAIL
168 WONTFIX SKIP : fast/events/message-channel-listener-circular-ownership.html = FAIL
169 WONTFIX SKIP : fast/events/message-port-clone.html = FAIL
170 WONTFIX SKIP : fast/events/message-port-deleted-document.html = FAIL
171 WONTFIX SKIP : fast/events/message-port-deleted-frame.html = FAIL
172 WONTFIX SKIP : fast/events/message-port-inactive-document.html = FAIL
173 WONTFIX SKIP : fast/events/message-port-no-wrapper.html = FAIL
174 WONTFIX SKIP : fast/events/message-port.html = FAIL
175 WONTFIX SKIP : fast/events/message-port-multi.html = FAIL
176 WONTFIX SKIP : http/tests/security/MessagePort/event-listener-context.html = FAIL
177
178 // Implement java testing harness.
179 BUGCR36681 SKIP : java = TEXT
180 // Chrome does not support Java LiveConnect.
181 WONTFIX SKIP : java/lc3 = TEXT
182
183 // this test doesn't make sense on Win or Mac.
184 // TODO: move to platform/chromium-linux/.
185 WONTFIX SKIP MAC WIN : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = FAIL
186
187
188 // -----------------------------------------------------------------
189 // WONTFIX TESTS
190 // -----------------------------------------------------------------
191
192 // This test is completely timing dependent.  It is testing the time
193 // between a key event and a search event.  You cannot count on this
194 // always being exactly the same.
195 WONTFIX DEBUG : fast/forms/search-event-delay.html = PASS TEXT
196 WONTFIX SLOW WIN RELEASE : fast/forms/search-event-delay.html = FAIL PASS
197 WONTFIX SLOW MAC RELEASE : fast/forms/search-event-delay.html = FAIL PASS CRASH
198 WONTFIX LINUX RELEASE : fast/forms/search-event-delay.html = FAIL PASS
199
200 // Chrome uses different keyboard accelerators from those used by Safari, so
201 // these tests will always fail.
202 // TODO(pinkerton): these should probably pass on Mac since we want Emacs
203 // keybindings but they currently do not.
204 WONTFIX LINUX WIN DEBUG : editing/pasteboard/emacs-cntl-y-001.html = FAIL
205 WONTFIX LINUX RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
206 WONTFIX SLOW WIN RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
207 WONTFIX : editing/pasteboard/emacs-ctrl-a-k-y.html = FAIL
208 WONTFIX : editing/pasteboard/emacs-ctrl-k-y-001.html = FAIL
209 WONTFIX : editing/input/emacs-ctrl-o.html = FAIL
210
211 // Checks for very kjs-specific garbage collector behavior.
212 // Would have to be implemented much differently to work in v8.
213 WONTFIX : fast/dom/gc-10.html = FAIL
214
215 // This fails because we're missing various useless apple-specific
216 // properties on the window object.
217 // This test also timeouts in Debug mode.
218 BUGCR24187 WONTFIX SLOW DEBUG : fast/dom/Window/window-properties.html = FAIL
219 BUGCR24187 WONTFIX SLOW WIN RELEASE : fast/dom/Window/window-properties.html = FAIL
220 BUGCR24187 WONTFIX LINUX MAC RELEASE : fast/dom/Window/window-properties.html = FAIL
221
222 // Safari specific test to ensure that JavaScript errors aren't logged when in
223 // private browsing mode.
224 WONTFIX : http/tests/security/cross-frame-access-private-browsing.html = FAIL
225
226 // Chromium doesn't implement private browsing in the renderer.
227 WONTFIX : plugins/private-browsing-mode.html = FAIL
228 WONTFIX : plugins/private-browsing-mode-2.html = TEXT
229
230 // We don't let anyone set status in the browser.
231 WONTFIX : plugins/set-status.html = TEXT
232
233 // We don't care about dashboard compatibility mode.
234 WONTFIX SKIP : http/tests/xmlhttprequest/default-content-type-dashboard.html = FAIL
235 WONTFIX SKIP : http/tests/xmlhttprequest/svg-created-by-xhr-disallowed-in-dashboard.html = FAIL
236 WONTFIX : svg/custom/embedded-svg-disallowed-in-dashboard.xml = FAIL
237 WONTFIX : svg/custom/manually-parsed-embedded-svg-disallowed-in-dashboard.html = FAIL
238 WONTFIX : svg/custom/manually-parsed-svg-disallowed-in-dashboard.html = FAIL
239 WONTFIX SKIP : svg/custom/svg-disallowed-in-dashboard-object.html = FAIL
240 WONTFIX : fast/canvas/canvas-gradient-addStop-error.html = FAIL
241
242
243 // Chrome uses different keyboard accelerators from those used by Safari, so
244 // these tests will always fail.
245 // TODO(ericroman): can the following 2 tests be removed from this list, since they pass?
246 WONTFIX : fast/events/keydown-1.html = FAIL
247 WONTFIX LINUX WIN : fast/events/option-tab.html = FAIL
248
249 // Chrome does not support WebArchives.
250 BUGCR10395 WONTFIX SKIP : webarchive = FAIL PASS
251 BUGCR10395 WONTFIX SKIP : svg/webarchive = FAIL PASS
252 BUGCR10395 WONTFIX SKIP : svg/custom/image-with-prefix-in-webarchive.svg = FAIL PASS
253 BUGCR10395 WONTFIX SKIP : http/tests/webarchive = FAIL PASS
254
255 // Compositing tests are run separately on machines with GPUs; see
256 // LayoutTests/platform/chromium-gpu.
257 BUGCR15733 WONTFIX SKIP : compositing = FAIL PASS TIMEOUT
258 BUGCR15733 WONTFIX SKIP : platform/chromium/compositing = FAIL PASS TIMEOUT
259
260 // Run the Mac-specific platform tests, but only to check for crashes.
261 WONTFIX : platform/gtk = FAIL PASS
262 WONTFIX : platform/mac = FAIL PASS TIMEOUT
263 WONTFIX : platform/mac-leopard = FAIL PASS
264 WONTFIX : platform/mac-tiger = FAIL PASS
265 WONTFIX : platform/qt = FAIL PASS
266 WONTFIX SKIP : platform/qt/plugins/qt-qwidget-plugin.html = FAIL
267 WONTFIX SKIP : platform/mac/fast/text/international/Geeza-Pro-vertical-metrics-adjustment.html = PASS
268
269 WONTFIX LINUX MAC : platform/win = FAIL PASS
270
271 // This is a Safari specific test to make WebKit behave like AppKit on the Mac.
272 // We do not support it because PLATFORM(MAC) is not defined for the mac version.
273 WONTFIX SKIP : platform/mac/editing/deleting/backward-delete.html = TEXT
274
275 // Ignored because we do not have OBJC bindings
276 WONTFIX SKIP : editing/pasteboard/paste-RTFD.html = FAIL
277 WONTFIX SKIP : editing/pasteboard/paste-TIFF.html = FAIL
278 WONTFIX SKIP : platform/mac/plugins/root-object-premature-delete-crash.html = FAIL
279 WONTFIX SKIP : platform/mac/plugins/undefined-property-crash.html = FAIL
280
281 // Ignore test because it tries to load .pdf files in <img> tags.
282 WONTFIX : fast/images/pdf-as-image-landscape.html = FAIL
283 WONTFIX : fast/images/pdf-as-image.html = FAIL
284 WONTFIX : fast/replaced/pdf-as-image.html = FAIL
285
286 // These tests try to print a PDF file as the expected result.  I don't think
287 // we plan on supporting this anytime soon.
288 WONTFIX SKIP : printing/compositing-layer-printing.html = PASS
289 WONTFIX SKIP : printing/media-queries-print.html = PASS
290 WONTFIX SKIP : printing/page-rule-in-media-query.html = PASS
291
292 // Chrome doesn't call the willCacheResponse callback (a method
293 // of ResourceHandleClient).  That function is Mac-specific.
294 WONTFIX SKIP : http/tests/misc/willCacheResponse-delegate-callback.html = FAIL
295
296 // Checks for very kjs-specific garbage collector
297 // behavior. Gc-9 is completely braindamaged; it tests that certain
298 // properties are reset by the garbage collector. It looks to pass recently.
299 WONTFIX : fast/dom/gc-9.html = FAIL
300
301 // This test checks that properties of arguments arrays are non-enumerable
302 // which is incorrect according to the ES5 spec.
303 WONTFIX : fast/js/kde/function.html = FAIL
304
305 // This test is broken.  The regular expression used contains an error
306 // which kjs swallows and returns false, which is the expected result,
307 // but for which we issue a syntax error.
308 WONTFIX : fast/js/code-serialize-paren.html = FAIL
309
310 // These tests check for a kjs-specific extension, that source file
311 // name and line numbers are available as properties on exception
312 // objects.  We handle error positions differently.
313 WONTFIX : fast/js/exception-linenums-in-html-1.html = FAIL
314 WONTFIX : fast/js/exception-linenums-in-html-2.html = FAIL
315 WONTFIX : fast/js/exception-linenums.html = FAIL
316 WONTFIX : fast/js/exception-expression-offset.html = FAIL
317
318 // These tests rely on specific details of decompilation of
319 // functions. V8 always returns the source code as written; there's
320 // no decompilation or pretty printing involved except for
321 // certain "native" functions where the V8 output does not include
322 // newline characters. This is working as intended and we don't care
323 // if the tests pass or fail. (It should probably simply be re-baselined.)
324 WONTFIX : fast/js/function-names.html = FAIL
325
326 // This test relies on KJS specific implementation
327 // (window.GCController.getJSObjectCount), which we have no intention of
328 // supporting.
329 WONTFIX SKIP : fast/dom/Window/timeout-released-on-close.html = FAIL
330
331 // These tests expect a tiff decoder, which we don't have.
332 WONTFIX LINUX WIN : fast/images/embed-image.html = FAIL
333 WONTFIX LINUX WIN : fast/images/object-image.html = FAIL
334
335 // Safari has a unique handling of the BOM characters among browsers.
336 // There is a strong suspicion that this is a security problem, so we
337 // follow the rest of the browsers on this one.
338 WONTFIX : fast/js/removing-Cf-characters.html = FAIL
339
340 // These tests fail in all but the PST/PDT time zone.
341 // Another reason for failure is that, for compatability, we don't obey
342 // the ECMA standard on DST exactly.  We use the OS's facilities to
343 // convert to local time for dates within the UNIX 32-bit epoch,
344 // and follow the ECMA rules for dates outside that range.
345 // The ECMA rules say to use current DST rules for all dates,
346 // and that all dates that are separated by an exact multiple of
347 // 28 years must behave exactly the same.
348 // OS local time services are more accurate than this ECMA rule,
349 // which is a discrepancy.
350 WONTFIX SKIP : fast/js/date-DST-time-cusps.html = PASS FAIL
351 WONTFIX SKIP : fast/js/date-big-setdate.html = PASS FAIL
352
353 // This test expects weird behavior of __defineGetter__ on the
354 // window object.  It expects variables introduced with 'var x = value'
355 // to behave differently from variables introduced with 'y = value'.
356 // This just seems wrong and should have very low priority.
357 // Agreed, not required for Beta, we can debate this with WebKit post Beta
358 // (eseidel, 4/25)
359 // Ignore this until we see evidence that we need to support it.
360 WONTFIX : fast/dom/getter-on-window-object2.html = FAIL
361
362 // V8 doesn't stable sort and we currently have no intention of
363 // changing this.  The following tests only happen to pass due to
364 // the current algorithm used for sorting small arrays. If larger
365 // arrays were used in the tests, they would fail.
366 // It is tracked by: http://code.google.com/p/v8/issues/detail?id=90
367 WONTFIX : fast/js/comparefn-sort-stability.html = PASS
368 WONTFIX : fast/js/sort-stability.html = PASS
369
370 // We have no indication that anyone misses this and have currently no
371 // intention of implementing it.
372 WONTFIX : fast/js/function-dot-arguments.html = FAIL
373
374 // This is a Safari specific test used to document the set of global
375 // constructors they expose and the exact way they are printed.  Not
376 // important.
377 WONTFIX : fast/js/global-constructors.html = FAIL
378
379 // This test is not reliable.  The behavior depends on exactly how the
380 // stack limit is reached.  We're happy with our behavior on this test
381 // as long as we don't crash.
382 WONTFIX : fast/js/global-recursion-on-full-stack.html = FAIL
383
384 // Our DOM Storage implementation doesn't use WebKit's private browsing feature (even for incognito mode).
385 WONTFIX : storage/domstorage/localstorage/private-browsing-affects-storage.html = FAIL
386 WONTFIX : storage/domstorage/sessionstorage/private-browsing-affects-storage.html = FAIL
387
388 // These tests propagate auth credentials back to the renderer, which we
389 // don't want to do.
390 WONTFIX BUGCR21840 MAC LINUX : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
391 WONTFIX BUGCR21840 WIN : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL TIMEOUT
392 WONTFIX BUGCR21840 : http/tests/loading/basic-credentials-sent-automatically.html = FAIL
393
394 // This checks the IDN behavior of WebKit/WebKit on Mac, not WebKit/WebCore or
395 // WebKit/JavaScriptCore. Chrome doesn't use WebKit/WebKit, and Chrome's IDN
396 // security model is different from it.
397 BUGCR21814 WONTFIX SKIP: fast/encoding/idn-security.html = FAIL
398
399 // Our implementation of global history is completely different, and
400 // these tests are irrelevant.
401 BUGCR23748 WONTFIX : http/tests/globalhistory = FAIL
402
403 // DataGrid was pulled from HTML5 spec, unlikely to re-emerge in the current form.
404 BUGCR17585 WONTFIX : fast/dom/HTMLDataGridElement = FAIL
405
406 // We are not going to support submitting a form to about:* pages.
407 // For more details, see discussions at issue 20570.
408 BUGCR20570 WONTFIX : fast/forms/get-forms-to-about-blank.html = FAIL
409
410 // xhtml mp tests were added in http://trac.webkit.org/changeset/43865 and are
411 // skipped on all platforms upstream.
412 // We are not planning to support these.
413 BUGCR12254 WONTFIX SKIP : fast/xhtmlmp = FAIL
414 BUGCR12254 WONTFIX SKIP : http/tests/xhtmlmp = FAIL
415
416 // This test requires LayoutTestController.setCacheModel, which we don't implement
417 // because we can't emulate the cahcing behaviors it expects.
418 WONTFIX : fast/dom/HTMLScriptElement/nested-execution.html = FAIL
419
420 // Deletion UI is a Mail-ism. We don't need to worry about this.
421 WONTFIX SKIP : editing/deleting/deletionUI-single-instance.html = FAIL IMAGE
422 WONTFIX SKIP : fast/dom/Element/id-in-deletebutton.html = TEXT
423
424 // Tests for FAST_MOBILE_SCROLLING. We don't use it.
425 WONTFIX BUGCR32663 WIN LINUX : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE+TEXT
426 WONTFIX BUGCR32663 WIN LINUX : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE+TEXT
427 WONTFIX BUGCR32663 MAC : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE PASS
428 WONTFIX BUGCR32663 MAC : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE PASS
429
430 // Tests for frameset flattening. Relevant only on mobile browsers.
431 WONTFIX SKIP : fast/frames/flattening = TIMEOUT
432
433 // This should be tested differently (see discussion on https://bugs.webkit.org/show_bug.cgi?id=35063).
434 // No need to waste cycles implementing harness support for this variant of the test.
435 WONTFIX SKIP : fast/loader/api-test-go-to-current-back-forward-item.html = TIMEOUT
436
437 // We're not planning to support rocker-based cursor navigation.
438 WONTFIX SKIP : fast/spatial-navigation = FAIL
439
440 // We're not planning to relax third-party cookie rules any time soon.
441 WONTFIX BUGCR37684 SKIP : http/tests/cookies/third-party-cookie-relaxing.html = FAIL
442
443 // <progress> on Mac is always animated.
444 WONTFIX MAC : fast/dom/HTMLProgressElement/progress-element.html = IMAGE PASS
445
446 // We do not use Safari's private browsing
447 WONTFIX SKIP : storage/private-browsing-noread-nowrite.html = PASS
448
449 // These tests are WONTFIX because they use codecs Chromium doesn't support.
450 BUGCR16779 WONTFIX SKIP : media/audio-mpeg-supported.html = FAIL TIMEOUT
451 BUGCR16779 WONTFIX SKIP : media/audio-data-url.html = FAIL TIMEOUT
452 BUGCR16779 WONTFIX SKIP : media/media-can-play-mpeg-audio.html = TEXT
453 BUGCR16779 WONTFIX SKIP : media/video-can-play-type.html = FAIL TIMEOUT
454 BUGCR16779 WONTFIX SKIP : media/video-document-types.html = FAIL TIMEOUT
455 BUGCR16779 WONTFIX SKIP : media/video-size-intrinsic-scale.html = FAIL TIMEOUT
456 BUGWK45102 WONTFIX SKIP : media/media-can-play-mpeg4-video.html = TEXT
457 BUGCR68289 WONTFIX SKIP : media/video-element-other-namespace-crash.html = TIMEOUT
458
459 // Chromium does not use the icon loader in WebCore for loading notifications.
460 WONTFIX SKIP : http/tests/notifications = FAIL
461
462 // Doesn't apply to Chromium (QuickTime-specific behavior)
463 WONTFIX SKIP : media/video-does-not-loop.html = TIMEOUT
464
465 // Pre-HTML5 parser quirks only apply to the mac port for now.
466 WONTFIX SKIP : fast/parser/pre-html5-parser-quirks.html = FAIL
467
468 // -----------------------------------------------------------------
469 // CHROME REWRITTEN TESTS
470 // -----------------------------------------------------------------
471
472 // These tests have been rewritten, with the original being ignored,
473 // because they rely on being able to shadow the 'top' variable on the
474 // global object.  For security we disallow shadowing of top.
475 WONTFIX : editing/selection/click-before-and-after-table.html = FAIL
476
477 // We're taking a different approach on this test than Webkit does, related to
478 // whether we create a window via a plugin when target is _blank.
479 BUGCR24186 WONTFIX SKIP : plugins/get-url-with-blank-target.html = FAIL
480
481 // Dashboard-related test
482 WONTFIX SKIP : platform/mac/fast/css/dashboard-region-parser.html = FAIL
483
484 // Not a test?
485 WONTFIX SKIP : http/tests/incremental/pause-in-script-element.pl = FAIL
486
487 // This tests for an arbitrary limit set in JSCRE to terminate regular
488 // expressions with an exponential matching behavior.  Since the V8
489 // regular expression engine can be preempted from the outside, we do not
490 // need to limit the execution this way.  Firefox also keeps running
491 // on this one.
492 WONTFIX : fast/regex/slow.html = TIMEOUT
493
494 // Test to verify legacy MAC encodings. We don't want to support them and
495 // have to skip this test.
496 WONTFIX SKIP : fast/encoding/char-decoding-mac.html = FAIL
497
498 // WebKit QT Build-specific tests
499 WONTFIX SKIP : platform/qt/view/fixed-layout-size.html = FAIL
500
501 // These don't have pixel results and rely on ObjC bindings. Don't run until they have pixel results.
502 WONTFIX SKIP : platform/mac/editing/pasteboard/dataTransfer-set-data-file-url.html = FAIL
503 WONTFIX SKIP : http/tests/security/dataTransfer-set-data-file-url.html = FAIL
504
505 // The issue is which global object to use as the implicit
506 // receiver for cross-frame calls.  Currently, IE, Firefox and Chrome
507 // agree and only Safari is doing it this way.
508 BUGCR5053 WONTFIX : fast/frames/cross-site-this.html = FAIL
509
510 // This tests a Safari incompatibility.  This test should fail since
511 // it contains syntax errors that JSC for some reason choose not to
512 // throw.  V8 follows the spec.
513 WONTFIX : fast/js/reparsing-semicolon-insertion.html = FAIL
514
515 // These tests relate to transform/3d which is a work in progress and is not
516 // even run by the WebKit folk. They should be enabled whenever WebKit begins
517 // testing them by default. The bug to re-enable is:
518 // http://code.google.com/p/chromium/issues/detail?id=8455
519 WONTFIX SKIP : transforms/3d = FAIL
520
521 // Copying with no selection is sometimes supposed to work
522 // Also skipped by Apple on Windows (rdar://problem/5015941)
523 BUGCR20404 : editing/execCommand/copy-without-selection.html = FAIL
524
525 // -----------------------------------------------------------------
526 // LIGHTTPD
527 // -----------------------------------------------------------------
528 // This are failing for different reasons under our lighttpd configuration.
529 // (Note that lighttpd is only used on Windows at this point.)
530
531 // LightTPD doesn't accept unknown HTTP methods
532 BUGCR30536 WIN SKIP : http/tests/xmlhttprequest/methods-lower-case.html = TIMEOUT CRASH
533 BUGCR30536 WIN : http/tests/xmlhttprequest/methods-async.html = TIMEOUT
534 BUGCR30536 WIN SLOW : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-invalidation-by-method.html = FAIL
535 // LightTPD doesn't accept unknown HTTP methods and passes CGIs a Content-Type
536 // even when a request didn't send the header.
537 BUGCR30536 WIN SLOW : http/tests/xmlhttprequest/methods.html = FAIL
538 // Webkit 50667:50696 (Lighttpd related?)
539 BUGCR30536 WIN : http/tests/xmlhttprequest/xmlhttprequest-setrequestheader-no-value.html = TEXT
540
541 // Another lighttpd quirk.
542 BUGCR8941 WIN SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
543 BUGCR8941 WIN : http/tests/xmlhttprequest/web-apps/012.html = FAIL
544
545 // -----------------------------------------------------------------
546 // TEXT
547 // -----------------------------------------------------------------
548
549 // This class of test fails because of size differences in text runs.
550 // Mostly this is because of international text rendering differences.
551
552 // Incrorect results, in incorrect international font metrics.
553 BUGCR20521 LINUX WIN : fast/text/atsui-multiple-renderers.html = FAIL
554 BUGCR20521 LINUX WIN : fast/text/atsui-pointtooffset-calls-cg.html = FAIL TIMEOUT
555 BUGCR20521 LINUX WIN : fast/text/atsui-rtl-override-selection.html = FAIL
556
557 // This test checks that we hack around a bug in helvetica.  We fail to.
558 BUGCR20519 WIN : fast/text/wide-zero-width-space.html = FAIL
559
560 // There's a missing glyph box in "full-time".
561 BUGCR20547 WIN : fast/text/capitalize-boundaries.html = FAIL
562
563 // Different button line-heights, our behavior looks wrong.
564 BUGCR20551 LINUX WIN : fast/replaced/table-percent-height.html = FAIL
565 BUGCR20551 LINUX WIN : fast/replaced/table-percent-height-text-controls.html = FAIL
566
567
568 // -----------------------------------------------------------------
569 // PENDING TESTS (forked to pending/, need to be sent upstream)
570 // -----------------------------------------------------------------
571
572 // These tests don't work with fast timers due to setTimeout
573 // races. See https://bugs.webkit.org/show_bug.cgi?id=21536
574 // We currently match upstream except for font differences, but we should
575 // probably rewrite the test as suggested in the webkit bug.
576 BUGCR24195 WIN LINUX : fast/repaint/bugzilla-6473.html = IMAGE+TEXT
577 BUGCR24195 MAC : fast/repaint/bugzilla-6473.html = IMAGE
578
579 // -----------------------------------------------------------------
580 // Tests requiring features not currently in test_shell.
581 // -----------------------------------------------------------------
582
583 // Implement layoutTestController.display()
584 BUGCR8630 WIN LINUX : fast/repaint/body-background-image.html = FAIL
585
586 // Relies on text metrics to pass. Rework to be meaningful for ports other than platform/mac.
587 BUGCR8630 WIN LINUX : fast/repaint/overflow-outline-repaint.html = FAIL
588 BUGCR8630 WIN LINUX : fast/backgrounds/solid-color-context-restore.html = FAIL
589 BUGCR8630 WIN LINUX : fast/dynamic/containing-block-change.html = FAIL
590 BUGCR8630 LINUX : fast/forms/listbox-clip.html = IMAGE+TEXT
591 BUGCR8630 WIN LINUX : fast/overflow/hidden-scrollbar-resize.html = FAIL
592 BUGCR8630 WIN LINUX RELEASE : fast/reflections/inline-crash.html = FAIL
593 BUGCR8630 LINUX WIN DEBUG : fast/reflections/inline-crash.html = FAIL
594 BUGCR8630 WIN LINUX : fast/text/font-initial.html = FAIL
595
596 // Need a setAuthorAndUserStylesEnabled method in
597 // layoutTestController. Now we have preference to enable/disable user
598 // styles(not work now), we still need to add a preference to enable/disable
599 // styles of both author and user.
600 // SKIP because it causes an additional error message in:
601 // fast/css/display-none-inline-style-change-crash.html   somehow
602 // the message is dumped after the #EOF, which causes an additional
603 // error in the header of the following test.
604 BUGCR24197 SKIP : fast/css/disabled-author-styles.html = FAIL
605
606 // -----------------------------------------------------------------
607 // Inspector tests
608 // -----------------------------------------------------------------
609
610 // There is no message port harness to test extensions
611 WONTFIX SKIP : inspector/extensions.html = FAIL
612 WONTFIX SKIP : inspector/extensions-api.html = FAIL
613 WONTFIX SKIP : inspector/extensions-audits.html = FAIL
614 WONTFIX SKIP : inspector/extensions-audits-api.html = FAIL
615 WONTFIX SKIP : inspector/extensions-events.html = FAIL
616 WONTFIX SKIP : inspector/extensions-eval.html = FAIL
617 WONTFIX SKIP : inspector/extensions-resources.html = TIMEOUT CRASH
618 WONTFIX SKIP : http/tests/inspector/extensions-headers.html = FAIL
619
620 // Inspector tests in Debug build are very slow.  If we remove SLOW, we'll see
621 // random TIMEOUTs.  Is this issue DRT-specific?
622 BUG_DRT WIN LINUX DEBUG SLOW : inspector = PASS
623 BUG_DRT WIN LINUX DEBUG SLOW : http/tests/inspector = PASS
624 BUG_DRT WIN LINUX DEBUG SLOW : http/tests/inspector-enabled = PASS
625
626 // Add support for inspector layout tests on non-Windows.
627 BUGCR26734 MAC SKIP : inspector = PASS
628 BUGCR26734 MAC SKIP : http/tests/inspector = PASS
629 BUGCR26734 MAC SKIP : http/tests/inspector-enabled = PASS
630
631 BUGCR66087 WIN LINUX SLOW : inspector/styles-disable-then-enable.html = PASS TEXT
632 BUGCR66087 WIN LINUX : inspector/timeline-layout.html = CRASH TIMEOUT PASS TEXT
633 BUGCR66087 WIN LINUX : inspector/timeline-parse-html.html = CRASH TIMEOUT PASS TEXT
634 // WebKit roll 74708:74711
635 BUGCR68165 WIN LINUX DEBUG SLOW : inspector/styles-source-lines.html = PASS
636 BUGCR66087 WIN LINUX SLOW : inspector/storage-panel-dom-storage.html = PASS TEXT
637
638 BUG_DRT WIN LINUX : http/tests/inspector-enabled/console-log-before-frame-navigation.html = TEXT
639 BUG_DRT WIN LINUX : http/tests/inspector/change-iframe-src.html = CRASH
640 BUGCR66087 WIN LINUX SLOW : http/tests/inspector/console-resource-errors.html = PASS TEXT
641 BUGCR66087 WIN LINUX SLOW : http/tests/inspector/inspect-iframe-from-different-domain.html = PASS TEXT
642
643 // -----------------------------------------------------------------
644 // Other
645 // -----------------------------------------------------------------
646
647 // Mac Safari under certain circumstances automatically places
648 // a caret in editable document even when none was requested programatically.
649 // We don't intend to copy this feature (at least not for Beta).
650 BUGCR20844 LINUX WIN RELEASE : editing/selection/designmode-no-caret.html = FAIL
651 BUGCR20844 LINUX WIN DEBUG : editing/selection/designmode-no-caret.html = FAIL
652
653 // Regression from merge 41268:41286
654 BUGCR10435 MAC : editing/selection/designmode-no-caret.html = FAIL
655
656 // Issue 3273: TextInputController::firstRectForCharacterRange not returning
657 // the correct values for bidi/rtl text.
658 BUGCR3273 : editing/selection/move-left-right.html = FAIL
659 BUGCR3273 MAC : platform/mac/editing/input/caret-primary-bidi.html = FAIL PASS
660 BUGCR3273 MAC : platform/mac/editing/input/firstrectforcharacterrange-plain.html = FAIL PASS
661 BUGCR3273 MAC : platform/mac/editing/input/range-for-empty-document.html = FAIL PASS
662
663 // These tests also use firstRectForCharacterRange, but they generate slightly
664 // different values.
665 BUGCR3273 : editing/selection/5825350-1.html = TEXT
666 BUGCR3273 : editing/selection/5825350-2.html = TEXT
667 BUGCR3273 : editing/selection/mixed-editability-10.html = TEXT
668
669 // selection
670 BUGCR10369 LINUX : editing/selection/5354455-2.html = FAIL
671
672 // TODO(erg): Attempted to rebaseline these tests as part of the above
673 // 43346:43361 rebaseling from http://trac.webkit.org/changeset/43355. Turned
674 // tree red. May be more involved then just rebaselining.
675
676 BUGCR14832 : editing/selection/user-drag-element-and-user-select-none.html = FAIL
677
678 // Fails due to textInputController.setInputMethod not implemented for Mac.
679 BUGCR19665 MAC : platform/mac/editing/input/hangul-enter-confirms-and-sends-keypress.html = FAIL
680 BUGCR19665 MAC : platform/mac/editing/input/kotoeri-enter-to-confirm-and-newline.html = FAIL
681
682 // New failures from merge 51412:51455.
683 BUGCR28916 MAC : editing/pasteboard/paste-xml.xhtml = TEXT
684
685 // Flaky
686 BUGCR31803 MAC LINUX : editing/inserting/12882.html = IMAGE PASS
687
688 BUGWK45438 : editing/spelling/spelling-backspace-between-lines.html = TEXT
689
690 // Tests added in r69269.
691 // Apple-Mac port corrects "notationl" to "notational" automatically?
692 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-delete.html = IMAGE+TEXT
693 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-removing-underline-after-paste.html = IMAGE+TEXT
694 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-removing-underline.html = IMAGE+TEXT
695 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-simple.html = IMAGE+TEXT
696
697 // Directionality of mixed-direction text in selected choice should
698 // match that in the <select> option lists.
699 // Low priority, unclear if test expectations are correct (see bug)
700 BUGCR6139 : fast/forms/select-writing-direction-natural.html = FAIL
701
702 // Shadow offset tests crash occasionally on Mac and Linux debug.
703 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-1.html = PASS CRASH
704 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-2.html = PASS CRASH
705 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-3.html = PASS CRASH
706 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-4.html = PASS CRASH
707 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-5.html = PASS CRASH
708 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-6.html = PASS CRASH
709 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-7.html = PASS CRASH
710
711 // This SVG test is occasionally crashing apparently for the same reason.
712 BUGCR67732 MAC LINUX DEBUG : svg/W3C-SVG-1.1-SE/paths-dom-02-f.svg = PASS CRASH
713
714 BUGCR67767 : http/tests/security/cross-frame-access-call.html = TEXT
715 BUGCR67767 : http/tests/security/aboutBlank/xss-DENIED-set-opener.html = TEXT
716
717 // -----------------------------------------------------------------
718 // Plugin tests
719 // -----------------------------------------------------------------
720 BUGCR21841 MAC WIN DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
721 BUGJOHNNYG LINUX : plugins/embed-attributes-style.html = IMAGE
722 BUGCR61799 : plugins/evaluate-js-after-removing-plugin-element.html = TEXT
723 BUGCR37962 MAC : plugins/iframe-shims.html = TEXT PASS
724 BUGCR10351 MAC : plugins/inner-html-display-none.html = FAIL
725 BUGWK48164 MAC LINUX WIN : plugins/invalid-mime-with-valid-extension-shows-missing-plugin.html = TEXT
726 // Need to implement NPP_HandleEvent in the layout_test_plugin
727 // WIN started failing during webkit roll 62670 -> 62844.
728 BUGCR38353 : plugins/keyboard-events.html = TEXT
729 BUGCR10351 MAC : plugins/mouse-events.html = FAIL
730 BUGCR32864 MAC LINUX : plugins/mouse-events-fixedpos.html = TEXT
731 BUGCR35822 : plugins/npruntime/browser-object-identity.html = TEXT
732 // Object.keys on an NPObject produces the wrong output.
733 BUGCR21901 : plugins/npruntime/enumerate.html = TEXT
734 BUGCR50787 : plugins/npruntime/plugin-scriptable-object-invoke-default.html = TEXT
735 BUGCR50910 : plugins/npruntime/remove-property.html = TEXT
736 BUGWK48034 : plugins/pass-different-npp-struct.html = TEXT
737 // NPP_HandleEvent doesn't be implemented/work on mac/linux.
738 BUGCR48033 LINUX MAC SKIP : plugins/plugin-initiate-popup-window.html = PASS TIMEOUT
739 BUGCR35387 MAC : plugins/reentrant-update-widget-positions.html = TIMEOUT
740 BUGCR38392 : plugins/resize-from-plugin.html = TEXT
741 // Times out after http://trac.webkit.org/changeset/62739/
742 BUGCR48550 SKIP : plugins/return-negative-one-from-write.html = TIMEOUT
743 BUGCR38353 : http/tests/plugins/plugin-document-has-focus.html = TEXT TIMEOUT
744
745 // Tests differences from switching to webkit.org's test netscape plugin rather
746 // than chromium's old forked copy.  We can remove the PASS on these once we
747 // switch.
748 BUG_TONY WIN : plugins/geturlnotify-during-document-teardown.html = CRASH
749 BUGWK48655 : plugins/js-from-destroy.html = CRASH PASS
750 BUG_TONY WIN : plugins/mouse-events.html = TEXT
751 BUG_TONY WIN : plugins/plugin-initiate-popup-window.html = TIMEOUT
752 // This test is failing because the plugin has changed names on Windows to
753 // match the name of the plugin upstream.
754 BUG_TONY WIN : plugins/plugin-javascript-access.html = TEXT PASS
755 // New test introduced at r75217 is failing on Win - for same reason as the 
756 // test above.
757 BUG_TONY BUGWK52062 WIN : fast/frames/iframe-reparenting-plugins.html = TEXT
758
759 // Expectations for this test changed upstream. We should fix this test, but
760 // it doesn't need to block the current release
761 BUGCR10275 : http/tests/security/cross-frame-access-put.html = FAIL
762
763 // Requires layoutTestController.dispatchPendingLoadRequests
764 BUGCR33211 WIN RELEASE : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT CRASH
765 BUGCR33211 WIN DEBUG : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
766 BUGCR33211 MAC LINUX : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
767
768 // HTML5 DB layout tests
769 BUGCR27697 SKIP : storage/hash-change-with-xhr.html = PASS
770
771 // HTML5 datalist element. We don't enable it because WebKit implementation
772 // is incomplete.
773 BUGCR20226 : fast/forms/datalist.html = TEXT
774 BUGCR20226 : fast/forms/input-list.html = FAIL
775 BUGCR20226 : fast/forms/input-selectedoption.html = FAIL
776
777 // Generic theme in test_shell doesn't have inner-spin-button support.
778 // We need to do rebaseline when we switch to DRT.
779 BUGWK38570 WIN : fast/forms/input-appearance-spinbutton-disabled-readonly.html = IMAGE+TEXT
780
781 // The feature was disabled due to a compatibility issue.
782 BUGWK40520 : fast/forms/interactive-validation-lost-focusable.html = TEXT
783 BUGWK40520 : fast/forms/interactive-validation-prevented.html = TEXT
784
785 // These tests need to be changed to be platform independent.
786 // These tests are skipped since they hang DRT and test_shell.
787 // BUGCR62964 : we should either enable or delete these testsvi
788 BUGCR54465 BUGCR62964 SKIP : http/tests/media/remove-while-loading.html = TIMEOUT
789 BUGCR54465 BUGCR62964 SKIP : http/tests/media/video-play-stall-seek.html = TIMEOUT
790 BUGCR54465 BUGCR62964 SKIP : http/tests/media/video-play-stall.html = TIMEOUT
791 BUGCR54465 BUGCR62964 SKIP : http/tests/media/video-seekable-stall.html = TIMEOUT
792 // UNIMPLEMENTED : * we don't have test-par-16-9.ogv generated in WebKit * we don't handle aspect ratio correctly.
793 BUGCR59635 SKIP : media/video-display-aspect-ratio.html = PASS FAIL TIMEOUT
794
795 // video.buffered multiple TimeRanges support.
796 BUGCR49165 SKIP : http/tests/media/video-buffered.html = PASS
797
798 // These tests need to be changed to not rely on setTimeout().
799 BUGCR13907 BUGCR60740 SLOW WIN DEBUG : media/video-played-collapse.html = PASS FAIL
800 BUGCR13907 BUGCR60740 SLOW WIN DEBUG : media/video-seek-past-end-playing.html = PASS FAIL
801 // Flakey test
802 BUGCR13907 LINUX : media/audio-only-video-intrinsic-size.html = TIMEOUT PASS
803
804 // We sometimes emit an error from the same source element twice.
805 BUGCR13907 BUGCR59226 : media/video-source-error.html = PASS FAIL TIMEOUT
806
807 // Failing because we sometimes emit additional timeupdate events.
808 // Test may need to be rewritten or only log the first timeupdate event.
809 BUGCR13907 BUGCR59399 LINUX MAC : media/audio-delete-while-slider-thumb-clicked.html = PASS FAIL
810
811 // Failing because we sometimes emit additional timeupdate events.
812 // Test might be WONTFIX because we don't export a step button in the first place.
813 BUGCR25375 BUGCR59399 SKIP : media/audio-delete-while-step-button-clicked.html = FAIL
814
815 // Seeks to the end of file, which results in ogg packets with no timestamps.
816 // KNOWNISSUE : fails because progress event is not published 
817 BUGCR59675 BUGCR59263 SKIP : media/event-attributes.html = PASS FAIL TIMEOUT
818
819 // Flaky because of our new seeking algorithm.
820 BUGCR50438 BUGCR20187 : media/controls-drag-timebar.html = PASS FAIL
821
822 // These tests are flaky with subtle pixel differences.
823 BUGCR13907 LINUX MAC : media/video-zoom.html = IMAGE PASS
824 BUGCR13907 BUGCR60744 LINUX : media/video-layer-crash.html = IMAGE PASS
825
826 // Behavior was changed by WebKit roll 69035:69062.
827 BUGCR53660 BUGCR60746 MAC : media/video-transformed.html = IMAGE
828
829 // This is flaky with a subtle pixel difference in the bottom right corner,
830 // which I believe is due to new video scaling algorithm.
831 // We should rewrite this test so that we wait for timeupdate event until the time is no less than 1. 
832 BUGCR13907 BUGCR60244 : media/video-replaces-poster.html = IMAGE PASS
833
834 // These tests are failing because they use position-dependent mouse clicks.
835 // TESTISSUE 
836 BUGCR13907 BUGCR25375 : media/video-controls-transformed.html = FAIL
837
838 // We haven't implemented the WebKit fullscreen extension.
839 // UNIMPLEMENTED
840 BUGCR16735 SKIP : media/media-fullscreen-inline.html = TIMEOUT
841 BUGCR16735 SKIP : media/media-fullscreen-not-in-document.html = TIMEOUT
842
843 // We haven't implemented the WebKit captioning extension.
844 // UNIMPLEMENTED
845 BUGCR28301 SKIP : media/media-captions.html = TIMEOUT
846
847 // We haven't implemented reverse audio/video playback.
848 // UNIMPLEMENTED BUGCR33099 Implement reverse audio/video playback
849 BUGCR33099 SKIP : media/video-reverse-play-duration.html = TIMEOUT
850 BUGCR33099 SKIP : media/video-timeupdate-reverse-play.html = TIMEOUT
851
852 // We haven't implemented video preloading and it passing is a false positive.
853 // UNIMPLEMENTED
854 BUGWK16482 SKIP : media/video-preload.html = PASS FAIL
855
856 // Does not display courier for the letters, as the test requests.
857 BUGCR10278 LINUX : fast/css/font-face-implicit-local-font.html = FAIL
858 BUGCR10278 LINUX : fast/css/font-face-unicode-range.html = FAIL
859
860 // The v8 bindings allow shadowing of all properties on the global
861 // object.  If you use 'var prop = value' you will get a new variable
862 // named prop that shadows builtin properties on the global object.
863 // This behavior is consistent and I'm reluctant to make the massive
864 // change that would be needed to implement the inconsistent handling
865 // of this that KJS has (some properties can be shadowed and others
866 // can't).  This should have low priority.
867 // We currently match IE and the plan was to convince KJS to change
868 // post-beta, but the bug is here:
869 // https://bugs.webkit.org/show_bug.cgi?id=16644 , and it's unclear
870 // what the resolution was.
871 BUGCR10279 : fast/js/var-declarations-shadowing.html = FAIL
872
873 // Implement full JSON support in V8
874 BUGCR14885 SLOW : fast/js/JSON-parse.html = FAIL
875 BUGCR14885 SLOW : fast/js/JSON-stringify.html = FAIL CRASH
876 BUGCR14885 : fast/js/JSON-parse-reviver.html = FAIL
877 BUGCR14885 : fast/js/JSON-stringify-replacer.html = FAIL
878
879 // Implement CSS -webkit-font-smoothing property support.
880 BUGCR23270 WIN LINUX : fast/css/font-smoothing.html = FAIL
881
882 // Make canvas shadow work with drawImage.
883 BUGCR11153 WIN LINUX : fast/canvas/canvas-incremental-repaint-2.html = FAIL
884 BUGCR11153 WIN LINUX : fast/canvas/canvas-incremental-repaint.html = FAIL
885
886 BUGCR20507 : http/tests/uri/resolve-encoding-relative.html = FAIL
887
888 // test_shell, DRT do not correctly schedule paints when invalidating.
889 BUGCR62433 WIN : fast/images/gif-loop-count.html = IMAGE
890
891 // -----------------------------------------------------------------
892 // SVG TESTS
893 // -----------------------------------------------------------------
894
895 BUGCR8763 LINUX WIN MAC : svg/custom/use-on-g-containing-foreignObject-and-image.svg = IMAGE+TEXT IMAGE
896
897 // We show reduced version of the entire SVN image rather than an image
898 BUGCR23463 MAC : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE
899 BUGCR23463 WIN LINUX : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE+TEXT TEXT
900 BUGCR23463 WIN LINUX : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE IMAGE+TEXT PASS
901 BUGCR23463 WIN LINUX : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE+TEXT
902
903 // Merge 39744:39829 - regression
904 BUGCR10284 MAC : svg/custom/path-bad-data.svg = FAIL
905
906 // Text mismatch since r65370.
907 // There was also an unnoticed image mismatch before this revision
908 // (wrong baseline was committed). No idea about when it really started to fail.
909 BUGCR52692 WIN LINUX : svg/W3C-SVG-1.1/animate-elem-80-t.svg = IMAGE+TEXT
910
911 // New in WK r65880, some probably just need rebaselining, others have real diffs
912 BUGWK44514 WIN LINUX : svg/clip-path/clip-in-mask-objectBoundingBox.svg = IMAGE
913 BUGWK44514 WIN LINUX : svg/clip-path/clip-in-mask-userSpaceOnUse.svg = IMAGE
914 BUGWK44514 WIN LINUX : svg/clip-path/clip-in-mask.svg = IMAGE
915 BUGWK44514 WIN LINUX : svg/clip-path/deep-nested-clip-in-mask-different-unitTypes.svg = IMAGE+TEXT
916 BUGWK44514 WIN LINUX : svg/clip-path/deep-nested-clip-in-mask-panning.svg = IMAGE+TEXT
917 BUGWK44514 WIN LINUX : svg/clip-path/deep-nested-clip-in-mask.svg = IMAGE+TEXT
918 BUGWK44514 WIN LINUX : svg/clip-path/nested-clip-in-mask-image-based-clipping.svg = IMAGE
919 BUGWK44514 WIN LINUX : svg/clip-path/nested-clip-in-mask-path-and-image-based-clipping.svg = IMAGE
920 BUGWK44514 WIN LINUX : svg/clip-path/nested-clip-in-mask-path-based-clipping.svg = IMAGE
921 // Rebaselined in WK r65874, Linux has missing lines
922 BUGWK44514 LINUX WIN : svg/custom/missing-xlink.svg = TEXT
923 // Also fail since WK roll 65859:65885
924 BUGWK44514 MAC : fast/backgrounds/svg-as-background-6.html = IMAGE
925
926 // May require re-baseline.
927 BUGWK42370 WIN MAC : svg/custom/image-rescale-scroll.html = FAIL
928 BUGWK42370 WIN MAC : svg/custom/image-rescale-clip.html = FAIL
929
930 // -----------------------------------------------------------------
931 // End SVG Regressions
932 // -----------------------------------------------------------------
933
934 // Compact support was removed from WebKit by Hyatt and layout tests rebaselined in r40259.
935
936 BUGCR10295 MAC : fast/dom/prototype-chain.html = FAIL
937
938 // Font differences, requiring overriden metrics, not a real bug, not fixing for Beta
939 BUGCR10296 MAC : fast/text/international/bidi-menulist.html = FAIL
940 // Maybe need to be rebaselined - should be looked at in more detail.
941 BUGCR10296 LINUX : svg/custom/foreign-object-skew.svg = FAIL
942 BUGCR10296 LINUX : svg/batik/text/textLength.svg = FAIL
943
944 // No anti-aliasing on the text.
945 BUGCR10298 LINUX : svg/custom/use-on-disallowed-foreign-object-3.svg = FAIL
946
947 // The failures listed below have never passed in Chromium and need to be
948 // investigated, categorized, and (one hopes) fixed.
949
950 // These test fail full text diff (but not simplified diff) most likely due
951 // to differing implementations of SVG fonts. They may or may not represent
952 // real bugs which need fixin'
953
954 // There's no baseline at all for this!
955 BUGCR32392 SKIP : svg/batik/text/smallFonts.svg = FAIL
956
957 // The test is flaky and maybe platform-dependent.
958 BUGCR32401 LINUX WIN : svg/custom/marker-changes.svg = IMAGE+TEXT IMAGE
959
960 BUGCR32444 LINUX WIN : svg/hixie/text/003.html = FAIL
961
962 // SVG masks aren't quite working yet.
963 // Might also be related to https://bugs.webkit.org/show_bug.cgi?id=21910
964 // New tests. We should fix these, but they don't need to block the current release
965 BUGCR3244 LINUX WIN : fast/backgrounds/svg-as-mask.html = FAIL
966 BUGCR3244 WIN DEBUG : fast/backgrounds/animated-svg-as-mask.html = FAIL
967 BUGCR3244 SLOW WIN RELEASE : fast/backgrounds/animated-svg-as-mask.html = FAIL
968 BUGCR3244 LINUX : fast/backgrounds/animated-svg-as-mask.html = FAIL
969 // More tests that fail because of masks not working properly.
970 // New tests. We should fix these, but they don't need to block the current release
971 BUGCR3244 WIN LINUX : fast/backgrounds/mask-composite.html = FAIL
972 BUGCR3244 WIN LINUX : fast/backgrounds/repeat/mask-negative-offset-repeat.html = FAIL
973 // Marking this again as failed. This test failed even after rebaseline due to
974 // the fact that the font is not specified in the test and it seems that the
975 // test falls back on a different font locally than on the buildbot so the
976 // baseline is invalid. This might indicate a failure in our font fallback code
977 // or might be expected and that we should either go with the buildbot output
978 // or change the test upstream to specify explicitly what font to use.
979 // The mask part of this test is totally wrong.
980 BUGCR3244 WIN LINUX : fast/backgrounds/svg-as-background-6.html = FAIL
981
982 // Our gradients are wrong here.
983 BUGCR19559 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-08-b.svg = FAIL
984 BUGCR10304 LINUX : svg/carto.net/button.svg = FAIL
985
986 // Probably need to change the test upstream to describe it better and use no
987 // hard coded numbers.
988 BUGCR19897 WIN LINUX : svg/custom/getscreenctm-in-mixed-content2.xhtml = FAIL
989
990 BUGCR10306 LINUX : svg/carto.net/combobox.svg = FAIL
991
992 // Linux pixeltest failure: slightly different shade of composited
993 // alpha in bottom group.
994 BUGCR10310 LINUX : svg/W3C-SVG-1.1/masking-opacity-01-b.svg = FAIL
995
996 // -----------------------------------------------------------------
997 // Accessibility layout tests
998 //
999 // In addition to WebCore, these are meant to exercise platform APIs
1000 // (MSAA, NSAccessibility, ATK). Since we don't have access to these in the
1001 // sandbox, making these tests pass involves faking interactions with these APIs
1002 // and doesn't seem like a good use of our time.
1003 // We need to identify a good testing strategy for Chromium accessibility.
1004 // It is possible we won't use these at all.
1005
1006 BUGCR10322 SKIP : accessibility = PASS FAIL
1007 BUGCR10322 SKIP : platform/mac/accessibility = PASS FAIL
1008 BUGCR10322 SKIP : platform/win/accessibility = PASS FAIL
1009
1010 // -----------------------------------------------------------------
1011 // Other failures
1012 // -----------------------------------------------------------------
1013
1014 // These fail the pixel tests in debug mode because they have
1015 // unpainted space (filled red in Debug but not in Release).
1016 // https://bugs.webkit.org/show_bug.cgi?id=8423
1017 BUGCR24204 WIN LINUX : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE+TEXT TEXT
1018
1019 // Fails on webkit windows as well.
1020 BUGCR24207 : fast/events/attempt-scroll-with-no-scrollbars.html = FAIL
1021
1022 // No glyph for U+FFFD (Replacement Character : black diamond with
1023 // question mark) in them
1024 BUGCR10315 WIN : fast/encoding/invalid-UTF-8.html = FAIL
1025
1026 // V8 failures as a result of the WebKit merge.
1027 // http://code.google.com/p/v8/issues/detail?id=92
1028
1029 // v8: A setter that is added to a prototype after the inline cache is
1030 // recorded will not be called.
1031 BUGCR24209 : fast/js/pic/cached-prototype-setter.html = FAIL
1032
1033 // We have the wrong shadow for "This".
1034 // It appears we're not obeying the "transparent" fill color.
1035 BUGCR10317 LINUX : fast/css/shadow-multiple.html = FAIL
1036
1037 // Problems with getImageData and toDataURL.
1038 // This test requires us to do alpha blending exactly the way CG does it,
1039 // which Skia may never do (see bug).
1040 BUGCR22700 LINUX WIN : fast/canvas/canvas-getImageData.html = FAIL
1041
1042 // We're much closer now. To fully pass this we need encoders for jpg
1043 // and gif, which is a low priority.
1044 BUGCR10318 : fast/canvas/toDataURL-supportedTypes.html = FAIL
1045
1046 // Regression from the 41362:41402 merge.
1047 BUGCR8402 MAC : fast/forms/drag-out-of-textarea.html = FAIL
1048
1049 // GURL doesn't handle switching from standard URL to path URL correctly
1050 BUGWK27914 : fast/dom/HTMLAnchorElement/set-href-attribute-protocol.html = TEXT
1051
1052 // ----------------------------------------------------------------------------
1053 // NEW FOR THE MERGE
1054 //
1055 // These tests need to have their output inspected to make sure it's reasonable
1056 // and then baselined if necessary.
1057 // ----------------------------------------------------------------------------
1058
1059 // This test isn't hanging, it just takes 12-13 seconds to run.
1060 BUGCR30536 SLOW WIN LINUX : http/tests/misc/acid3.html = FAIL
1061 BUGCR30536 : http/tests/misc/favicon-as-image.html = FAIL
1062
1063 // Has failed for Chromium since it was first checked in.  (Lighttpd related?)
1064 BUGCR10323 WIN : http/tests/xmlhttprequest/xmlhttprequest-no-content-length-onProgress.html = FAIL
1065
1066 // Post-MERGE failures: these will all need to be fixed one day
1067
1068 // This test assumes we're using unix paths and looks for a file:///test
1069 // path.  We correctly return file:///C:/test on Windows.  We should fix
1070 // upstream
1071 // Expectations for this test changed upstream. We should fix this test, but
1072 // it doesn't need to block the current release
1073 BUGCR10325 WIN : fast/dom/resource-locations-in-created-html-document.html = FAIL
1074
1075 // GURL/KURL difference in handling of "http:".
1076 // New test. We should fix it, but it doesn't need to block the current release
1077 BUGCR7386 : http/tests/security/postMessage/invalid-origin-throws-exception.html = FAIL
1078
1079 // Linux pixeltest failure: Font mismatch
1080 BUGCR10327 LINUX : tables/mozilla_expected_failures/bugs/bug14007-2.html = FAIL
1081
1082 // On Linux, we don't seem to be getting Helvetica Bold for all cases.
1083 BUGCR10328 LINUX : fast/css/font-face-multiple-faces.html = FAIL
1084
1085 // Got flakey (both debug and release) around r3581 (ananta).
1086 BUGCR10329 WIN LINUX : http/tests/plugins/geturlnotify-from-npp-destroystream.html = PASS TEXT
1087
1088 // Uses ahem font and expects line heights to match some pixel value.
1089 // We should be able to pass this -- not sure what's wrong.
1090 BUGCR10331 LINUX : css2.1/t1008-c44-ln-box-02-d-ag.html = FAIL
1091
1092 // Looks like we're failing the test -- there are red boogers in the box that should be all green.
1093 BUGCR10332 LINUX : css2.1/t1605-c545-txttrans-00-b-ag.html = FAIL
1094
1095 // Asks for "system" fonts, which we don't support at all.
1096 BUGCR10335 LINUX : fast/css/css2-system-fonts.html = FAIL
1097
1098 // Large fonts have different metrics.
1099 BUGCR10336 LINUX : fast/css/font-face-descriptor-multiple-values.html = FAIL
1100
1101 // Wants Helvetica, Monaco.  It's still testing something useful, but we may
1102 // need to check in a wrong-looking baseline.  Windows looks wrong too.
1103 BUGCR10337 LINUX : fast/css/font-face-locally-installed.html = FAIL
1104
1105 // Font metrics wrong, despite using Lucida Grande?
1106 BUGCR10338 LINUX : fast/events/updateLayoutForHitTest.html = FAIL
1107
1108 // Layout totally different -- wrong font selected?
1109 BUGCR10340 LINUX : fast/frames/viewsource-attribute.html = FAIL
1110
1111 // We fail to load a file URL with a port number -- how does this work on
1112 // Windows?
1113 BUGCR10342 LINUX MAC : fast/loader/file-URL-with-port-number.html = TIMEOUT
1114
1115 // Text doesn't display at all -- maybe we don't have the slow font
1116 // code enabled?
1117 BUGCR10343 LINUX : fast/text/atsui-kerning-and-ligatures.html = FAIL
1118 BUGCR10343 LINUX RELEASE : fast/text/atsui-partial-selection.html = IMAGE
1119 BUGCR10343 LINUX : fast/text/atsui-small-caps-punctuation-size.html = FAIL
1120
1121 // Started timing out with agl's complext text change.  Page is verrry slow.
1122 BUGCR10343 SKIP LINUX : fast/text/large-text-composed-char.html = TIMEOUT FAIL
1123
1124 // Missing text -- slow font path unimplemented?
1125 BUGCR10344 LINUX : fast/text/should-use-atsui.html = FAIL
1126
1127 // We print to stderr when a failure happens while importing XSL;
1128 // should disable this in libxml.
1129 BUGCR10347 MAC : fast/xsl/transform-xhr-doc.xhtml = FAIL
1130
1131 // Linux pixeltest failure: Failing to apply style
1132 BUGCR10349 LINUX : fast/forms/select-style.html = FAIL
1133
1134 // Linux pixeltest failure: The text suggests that the radios should not
1135 // overlap, but it's very close and quite different from the Windows version
1136 BUGCR10350 LINUX : fast/replaced/width100percent-radio.html = FAIL
1137
1138 // These tests are marked as failing on Linux because they depend on QuickTime.
1139 // See the bug for more discussion.
1140 BUGCR15797 LINUX : fast/dom/object-embed-plugin-scripting.html = FAIL
1141 BUGCR15797 LINUX : plugins/embed-attributes-setting.html = FAIL
1142
1143 // Skip because we throw an exception before we get to dumpAsText.
1144 BUGCR10351 SKIP MAC : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1145
1146 // NEW FOR MERGE 36102:37604
1147
1148 BUGCR32184 : fast/js/arguments.html = FAIL
1149 // See bug http://code.google.com/p/chromium/issues/detail?id=7868,
1150 // not urgent for current release.
1151 BUGCR24227 : http/tests/plugins/local-geturl-from-remote.html = FAIL
1152
1153 // This test sometimes fails indefinitely, other times it takes 1-2 seconds.
1154 BUGCR14009 WIN : http/tests/misc/dns-prefetch-control.html = TIMEOUT PASS
1155
1156 // NEW FOR MERGE 37604:38097
1157 // This is a Safari specific test used to document the set of global
1158 // constructors they expose and the exact way they are printed.  Not
1159 // important - we might even want to ignore it.
1160 // New tests. We should fix these, but they doesn't need to block the current
1161 // release
1162 BUGCR10354 WIN LINUX : fast/layers/opacity-transforms.html = FAIL
1163
1164 // MERGE 38389:38450
1165 // Form submit causes invalid page reload/navigation when action is a named
1166 // anchor
1167 BUGCR10357 : fast/dom/cssTarget-crash.html = TIMEOUT PASS
1168
1169 // New test. We should fix it, but it doesn't need to block the current release
1170 BUGCR10361 WIN : http/tests/misc/single-character-pi-stylesheet.xhtml = FAIL
1171
1172 // Windows is missing the green box. Started to pass in roll to WebKit r50313
1173 BUGCR8729 WIN : http/tests/multipart/invalid-image-data.html = IMAGE+TEXT
1174
1175 // -----------------------------------------------------------------
1176 // MAC PORT TESTS
1177 // -----------------------------------------------------------------
1178
1179 //
1180 // *** TESTS TO WORK ON FIRST ***
1181 // These tests fail because of work that needs to be done in Mac TestShell to
1182 // bring it up to par with Win TestShell. These tests pass on Win and should
1183 // pass on Mac once we fix the bugs.
1184 //
1185
1186 // We've bucketed tests into groupings for why they're failing. Please try
1187 // to add new failures in the appropriate bucket.
1188
1189 // text fields wrong width
1190 BUGCR10363 MAC : tables/mozilla/bugs/bug53690-1.html = FAIL
1191 BUGCR10363 MAC : tables/mozilla/bugs/bug9024.html = FAIL
1192
1193 // bad key event handling
1194 BUGCR10366 MAC : fast/events/option-tab.html = TEXT
1195
1196 // Not really sure why these are failing at the moment
1197 BUGCR10376 MAC : fast/dom/isindex-002.html = FAIL
1198
1199 // These two have a different object type in the dom dump. Plugin-related.
1200 // Ignored on Win/Linux because they rely on QT to provide a TIFF decoder.
1201 BUGCR10378 MAC : fast/images/embed-image.html = FAIL
1202 BUGCR10378 MAC : fast/images/object-image.html = FAIL
1203
1204 // The following are flaky in that some times the timeout or crash, but we think
1205 // it is because of bugs in other parts of the code and not specific to what
1206 // these tests are doing.  The are being noted here so we can get the buildbots
1207 // green so new mac regressions are caught much quicker.
1208 // (there are a few others marked w/ multiple status like this in other parts of
1209 // the file, but they were left there as the comments in those areas are valid.)
1210 BUGCR10384 MAC : fast/dom/Window/new-window-opener.html = TEXT
1211
1212 BUGCR10399 MAC : fast/encoding/char-encoding-mac.html = FAIL
1213
1214 // Broken pixel tests
1215
1216 // Widget location is just slightly off
1217 BUGCR23496 MAC : css1/box_properties/acid_test.html = IMAGE
1218 BUGCR23496 MAC : css2.1/t09-c5526c-display-00-e.html = IMAGE
1219 BUGCR23496 MAC : fast/block/basic/011.html = IMAGE
1220 BUGCR23496 MAC : fast/forms/001.html = IMAGE
1221 BUGCR23496 MAC : fast/forms/basic-inputs.html = IMAGE
1222 BUGCR23496 MAC : fast/forms/checkbox-radio-onchange.html = IMAGE
1223 BUGCR23496 MAC : fast/forms/file-input-disabled.html = IMAGE+TEXT
1224 BUGCR23496 MAC : fast/forms/form-element-geometry.html = IMAGE+TEXT
1225 BUGCR23496 MAC : fast/forms/formmove.html = IMAGE
1226 // Recently became crashy. See http://crbug.com/24721
1227 BUGCR23496 MAC : fast/forms/formmove2.html = IMAGE
1228 BUGCR23496 MAC : fast/forms/indeterminate.html = IMAGE
1229 BUGCR23496 MAC : fast/forms/input-appearance-height.html = IMAGE+TEXT
1230 BUGCR23496 MAC : fast/forms/input-value.html = IMAGE+TEXT
1231 BUGCR23496 MAC : fast/forms/radio-attr-order.html = IMAGE
1232 BUGCR23496 MAC : fast/forms/radio-nested-labels.html = IMAGE
1233 BUGCR23496 MAC : fast/forms/radio_checked.html = IMAGE
1234 BUGCR23496 MAC : fast/forms/radio_checked_dynamic.html = IMAGE
1235 BUGCR23496 MAC : fast/inline/positionedLifetime.html = IMAGE
1236 BUGCR23496 MAC : fast/parser/bad-xml-slash.html = IMAGE
1237 BUGCR23496 MAC : fast/replaced/replaced-breaking.html = IMAGE
1238 BUGCR23496 MAC DEBUG : fast/text/textIteratorNilRenderer.html = IMAGE
1239 BUGCR23496 SLOW MAC RELEASE : fast/text/textIteratorNilRenderer.html = IMAGE
1240 BUGCR23496 MAC : fast/text/whitespace/normal-after-nowrap-breaking.html = IMAGE
1241 BUGCR23496 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1242 BUGCR23496 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1243
1244 // These should not be pixel tests, they're not testing anything
1245 // layout/rendering-specific. They also dump layout tree, so depending on which baselines
1246 // are around either or both text or image may mismatch.
1247 BUGWK48651 LINUX MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE IMAGE+TEXT
1248 BUGWK48651 LINUX MAC : http/tests/navigation/error404-goback.html = IMAGE IMAGE+TEXT TEXT
1249 BUGWK48651 LINUX MAC : http/tests/navigation/postredirect-frames.html = IMAGE IMAGE+TEXT
1250 BUGWK48651 MAC : http/tests/navigation/error404-subframeload.html = IMAGE
1251
1252 BUGCR26253 SLOW WIN RELEASE : http/tests/navigation/reload-subframe-object.html = PASS
1253 BUGCR9798 WIN RELEASE : http/tests/navigation/no-referrer-reset.html = TIMEOUT PASS
1254 // Regressions from r67349? 
1255 BUGCR10364 MAC : http/tests/navigation/reload-subframe-object.html = FAIL
1256
1257 // Big button widgets are broken
1258 BUGCR23495 MAC : fast/forms/box-shadow-override.html = IMAGE+TEXT
1259
1260 // Text declared as "monospace" with no size is bigger in Chromium
1261 BUGCR23494 MAC : css1/font_properties/font_family.html = IMAGE
1262 BUGCR23494 MAC : css2.1/t1503-c522-font-family-00-b.html = IMAGE
1263 BUGCR23494 MAC : fast/text/monospace-width-cache.html = IMAGE
1264
1265 // Actual is just slightly off in color than expected
1266 BUGCR23488 MAC RELEASE : fast/backgrounds/size/backgroundSize15.html = IMAGE
1267 BUGCR23488 MAC DEBUG SLOW : fast/backgrounds/size/backgroundSize15.html = IMAGE
1268 BUGCR23488 MAC : fast/block/float/float-avoidance.html = IMAGE
1269 BUGCR23488 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1270 BUGCR23488 MAC : fast/box-shadow/inset.html = IMAGE
1271 BUGCR23488 MAC : fast/canvas/canvas-incremental-repaint-2.html = IMAGE
1272 BUGCR23488 MAC : fast/css/shadow-multiple.html = IMAGE
1273 BUGCR23488 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1274 BUGCR23488 MAC : fast/frames/content-opacity-1.html = IMAGE
1275 BUGCR23488 MAC : fast/frames/content-opacity-2.html = IMAGE
1276 BUGCR23488 MAC : fast/layers/add-layer-with-nested-stacking.html = IMAGE
1277 BUGCR23488 MAC : fast/layers/inline-dirty-z-order-lists.html = IMAGE
1278 BUGCR23488 MAC : fast/layers/layer-content-visibility-change.html = IMAGE
1279 BUGCR23488 MAC : fast/layers/remove-layer-with-nested-stacking.html = IMAGE
1280 BUGCR23488 MAC : fast/lists/ol-start-parsing.html = IMAGE
1281 BUGCR23488 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1282 BUGCR23488 MAC : fast/text/shadow-no-blur.html = IMAGE
1283 BUGCR23488 MAC : fast/text/shadow-translucent-fill.html = IMAGE
1284 BUGCR23488 MAC : svg/transforms/animated-path-inside-transformed-html.xhtml = IMAGE
1285 BUGCR23488 MAC : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE
1286
1287 // Looks the same to me... huh. Variation of above?
1288 BUGCR23489 MAC : fast/table/empty-section-crash.html = IMAGE
1289
1290 // Various drawing tests that are broken
1291 BUGCR23477 MAC : fast/backgrounds/bgCompositeCopy.html = IMAGE
1292 BUGCR23477 MAC : fast/canvas/canvas-as-image-incremental-repaint.html = IMAGE
1293 BUGCR23477 MAC : fast/canvas/canvas-incremental-repaint.html = IMAGE
1294 BUGCR23477 MAC : fast/canvas/fill-stroke-clip-reset-path.html = IMAGE
1295 BUGCR23477 MAC : fast/dynamic/containing-block-change.html = IMAGE
1296
1297 // Unexpected gray
1298 BUGCR23476 MAC : fast/forms/listbox-clip.html = IMAGE
1299 BUGCR23476 MAC : fast/frames/inline-object-inside-frameset.html = IMAGE
1300 BUGCR23476 MAC : fast/text/font-initial.html = IMAGE
1301
1302 // Disagreeing XML parsing error messages
1303 BUGCR23475 MAC : fast/parser/xhtml-alternate-entities.xml = IMAGE
1304 BUGCR23475 MAC : fast/xsl/xslt-extra-content-at-end.xml = IMAGE
1305
1306 // Repaint tests failing on Mac.  Need to be manually triaged.
1307 BUGCR23473 MAC : fast/repaint/4774354.html = IMAGE
1308 BUGCR23473 MAC : fast/repaint/4776765.html = IMAGE
1309 BUGCR23473 MAC : fast/repaint/background-generated.html = IMAGE
1310 BUGCR23473 MAC : fast/repaint/backgroundSizeRepaint.html = IMAGE
1311 BUGCR23473 MAC : fast/repaint/block-selection-gap-in-composited-layer.html = IMAGE
1312 BUGCR23473 MAC : fast/repaint/block-selection-gap-in-table-cell.html = IMAGE
1313 BUGCR23473 MAC : fast/repaint/body-background-image.html = IMAGE
1314 BUGCR23473 MAC : fast/repaint/border-fit-lines.html = IMAGE
1315 BUGCR23473 MAC : fast/repaint/border-radius-repaint.html = IMAGE
1316 BUGCR23473 MAC : fast/repaint/border-repaint-glitch.html = IMAGE
1317 BUGCR23473 MAC : fast/repaint/box-shadow-dynamic.html = IMAGE
1318 BUGCR23473 MAC : fast/repaint/bugzilla-3509.html = IMAGE
1319 BUGCR23473 MAC : fast/repaint/bugzilla-5699.html = IMAGE
1320 BUGCR23473 MAC : fast/repaint/bugzilla-6278.html = IMAGE
1321 BUGCR23473 MAC : fast/repaint/bugzilla-6388.html = IMAGE
1322 BUGCR23473 MAC : fast/repaint/bugzilla-7235.html = IMAGE
1323 BUGCR23473 MAC : fast/repaint/button-spurious-layout-hint.html = IMAGE
1324 BUGCR23473 MAC : fast/repaint/change-transform.html = IMAGE
1325 BUGCR23473 MAC : fast/repaint/clipped-relative.html = IMAGE
1326 BUGCR23473 MAC : fast/repaint/clip-with-layout-delta.html = IMAGE
1327 BUGCR23473 MAC : fast/repaint/containing-block-position-change.html = IMAGE
1328 BUGCR23473 MAC : fast/repaint/content-into-overflow.html = IMAGE
1329 BUGCR23473 MAC : fast/repaint/control-clip.html = IMAGE
1330 BUGCR23473 MAC : fast/repaint/create-layer-repaint.html = IMAGE
1331 BUGCR23473 MAC : fast/repaint/delete-into-nested-block.html = IMAGE
1332 BUGCR23473 MAC : fast/repaint/dynamic-table-vertical-alignment-change.html = IMAGE
1333 BUGCR23473 MAC : fast/repaint/erase-overflow.html = IMAGE
1334 BUGCR23473 MAC : fast/repaint/fixed-child-move-after-scroll.html = IMAGE
1335 BUGCR23473 MAC : fast/repaint/fixed-child-of-fixed-move-after-scroll.html = IMAGE
1336 BUGCR23473 MAC : fast/repaint/fixed-child-of-transformed-move-after-scroll.html = IMAGE
1337 BUGCR23473 MAC : fast/repaint/fixed-move-after-scroll.html = IMAGE
1338 BUGCR23473 MAC : fast/repaint/float-in-new-block-with-layout-delta.html = IMAGE
1339 BUGCR23473 MAC : fast/repaint/float-move-during-layout.html = IMAGE
1340 BUGCR23473 MAC : fast/repaint/float-overflow.html = IMAGE
1341 BUGCR23473 MAC : fast/repaint/float-overflow-right.html = IMAGE
1342 BUGCR23473 MAC : fast/repaint/inline-block-resize.html = IMAGE
1343 BUGCR23473 MAC : fast/repaint/inline-color-change.html = IMAGE
1344 BUGCR23473 MAC : fast/repaint/inline-overflow.html = IMAGE
1345 BUGCR23473 MAC : fast/repaint/inline-relative-positioned.html = IMAGE
1346 BUGCR23473 MAC : fast/repaint/intermediate-layout-position-clip.html = IMAGE
1347 BUGCR23473 MAC : fast/repaint/intermediate-layout-position.html = IMAGE
1348 BUGCR23473 MAC : fast/repaint/invisible-objects.html = IMAGE
1349 BUGCR23473 MAC : fast/repaint/layer-full-repaint.html = IMAGE
1350 BUGCR23473 MAC : fast/repaint/layer-hide-when-needs-layout.html = IMAGE
1351 BUGCR23473 MAC : fast/repaint/layer-visibility.html = IMAGE
1352 BUGCR23473 MAC : fast/repaint/layout-state-only-positioned.html = IMAGE
1353 BUGCR23473 MAC : fast/repaint/layout-state-relative.html = IMAGE
1354 BUGCR23473 MAC : fast/repaint/line-in-scrolled-clipped-block.html = IMAGE
1355 BUGCR23473 MAC : fast/repaint/line-overflow.html = IMAGE
1356 BUGCR23473 MAC : fast/repaint/lines-with-layout-delta.html = IMAGE
1357 BUGCR23473 MAC : fast/repaint/list-marker-2.html = IMAGE
1358 BUGCR23473 MAC : fast/repaint/make-children-non-inline.html = IMAGE
1359 BUGCR23473 MAC : fast/repaint/outline-child-repaint.html = IMAGE
1360 BUGCR23473 MAC : fast/repaint/outline-inset.html = IMAGE
1361 BUGCR23473 MAC : fast/repaint/outline-repaint-glitch.html = IMAGE
1362 BUGCR23473 MAC : fast/repaint/outline-shrinking.html = IMAGE
1363 BUGCR23473 MAC : fast/repaint/overflow-clip-subtree-layout.html = IMAGE
1364 BUGCR23473 MAC : fast/repaint/overflow-delete-line.html = IMAGE
1365 BUGCR23473 MAC : fast/repaint/overflow-into-content.html = IMAGE
1366 BUGCR23473 MAC : fast/repaint/overflow-outline-repaint.html = IMAGE
1367 BUGCR23473 MAC : fast/repaint/overflow-scroll-delete.html = IMAGE
1368 BUGCR23473 MAC : fast/repaint/reflection-redraw.html = IMAGE
1369 BUGCR23473 MAC : fast/repaint/reflection-repaint-test.html = IMAGE
1370 BUGCR23473 MAC : fast/repaint/rel-positioned-inline-with-overflow.html = IMAGE
1371 BUGCR23473 MAC : fast/repaint/repaint-resized-overflow.html = IMAGE
1372 BUGCR23473 MAC : fast/repaint/search-field-cancel.html = IMAGE
1373 BUGCR23473 MAC : fast/repaint/selected-replaced.html = IMAGE
1374 BUGCR23473 MAC : fast/repaint/selection-after-delete.html = IMAGE
1375 BUGCR23473 MAC : fast/repaint/selection-after-remove.html = IMAGE
1376 BUGCR23473 MAC : fast/repaint/selection-clear.html = IMAGE
1377 BUGCR23473 MAC : fast/repaint/selection-gap-overflow-scroll.html = IMAGE
1378 BUGCR23473 MAC : fast/repaint/stacked-diacritics.html = IMAGE
1379 BUGCR23473 MAC : fast/repaint/static-to-positioned.html = IMAGE
1380 BUGCR23473 MAC : fast/repaint/subtree-layoutstate-transform.html = IMAGE
1381 BUGCR23473 MAC : fast/repaint/subtree-root-clip-2.html = IMAGE
1382 BUGCR23473 MAC : fast/repaint/subtree-root-clip.html = IMAGE
1383 BUGCR23473 MAC : fast/repaint/subtree-root-skipped.html = IMAGE
1384 BUGCR23473 MAC : fast/repaint/table-cell-move.html = IMAGE
1385 BUGCR23473 MAC : fast/repaint/table-cell-overflow.html = IMAGE
1386 BUGCR23473 MAC : fast/repaint/table-col-background.html = IMAGE
1387 BUGCR23473 MAC : fast/repaint/table-collapsed-border.html = IMAGE
1388 BUGCR23473 MAC : fast/repaint/table-extra-bottom-grow.html = IMAGE
1389 BUGCR23473 MAC : fast/repaint/table-outer-border.html = IMAGE
1390 BUGCR23473 MAC : fast/repaint/table-row.html = IMAGE
1391 BUGCR23473 MAC : fast/repaint/table-section-overflow.html = IMAGE
1392 BUGCR23473 MAC : fast/repaint/table-section-repaint.html = IMAGE
1393 BUGCR23473 MAC : fast/repaint/table-two-pass-layout-overpaint.html = IMAGE
1394 BUGCR23473 MAC : fast/repaint/text-append-dirty-lines.html = IMAGE
1395 BUGCR23473 MAC : fast/repaint/text-selection-rect-in-overflow-2.html = IMAGE
1396 BUGCR23473 MAC : fast/repaint/text-selection-rect-in-overflow.html = IMAGE
1397 BUGCR23473 MAC : fast/repaint/trailing-floats-root-line-box-overflow.html = IMAGE
1398 BUGCR23473 MAC : fast/repaint/transform-absolute-child.html = IMAGE
1399 BUGCR23473 MAC : fast/repaint/transform-absolute-in-positioned-container.html = IMAGE
1400 BUGCR23473 MAC : fast/repaint/transform-disable-layoutstate.html = IMAGE
1401 BUGCR23473 MAC : fast/repaint/transform-layout-repaint.html = IMAGE
1402 BUGCR23473 MAC : fast/repaint/transform-relative-position.html = IMAGE
1403 BUGCR23473 MAC : fast/repaint/transform-repaint-descendants.html = IMAGE
1404 BUGCR23473 MAC : fast/repaint/transform-replaced-shadows.html = IMAGE
1405 BUGCR23473 MAC : fast/repaint/transform-translate.html = IMAGE
1406
1407 // Fails due to r67862.
1408 BUGWK39966 : fast/repaint/table-cell-collapsed-border.html = IMAGE
1409
1410 // Thicker shadow than expected
1411 BUGCR23471 MAC : fast/text/stroking.html = IMAGE
1412
1413 // Failing on the bots but not locally; need investigation
1414 BUGCR23560 MAC : fast/images/animated-svg-as-image.html = IMAGE PASS
1415
1416 // -----------------------------------------------------------------
1417 // END MAC PORT TESTS
1418 // -----------------------------------------------------------------
1419
1420 // Linux pixeltest failure: alpha=0.5 red (1,0,0) atop yellow (1,1,0) is
1421 // coming out with with a slightly-less-than-100% red channel. This test fails
1422 // because we enforce non-transparent color in Font::drawGlyphs.
1423 BUGCR24191 LINUX : fast/css/hsla-color.html = FAIL
1424
1425 // Merge 39309:39335 Regressions (RenderButton::setupInnerStyle regression).
1426 BUGCR5737 LINUX : fast/forms/001.html = FAIL
1427 BUGCR5737 LINUX : fast/forms/input-first-letter.html = FAIL
1428
1429 // The (x) in type=search inputs appears to be slightly broken.  This test will also need a rebaseline.
1430 BUGCR20439 WIN LINUX : fast/forms/search-transformed.html = FAIL
1431
1432 // New test. We should fix it, but it doesn't need to block the current release
1433 BUGCR10418 WIN DEBUG : animations/change-keyframes-name.html = FAIL PASS
1434
1435 // We could fix this test for us and upstream it if the test shell user agent
1436 // would let us differentiate test_shell and WebKit DumpTreeNode.
1437 BUGCR7482 LINUX MAC : http/tests/misc/timer-vs-loading.html = TIMEOUT
1438 BUGCR7482 WIN : http/tests/misc/timer-vs-loading.html = TIMEOUT PASS
1439
1440 // Regressions from WebKit merge to 40864
1441 // Likely just needs a rebaseline.
1442 BUGCR10421 LINUX : fast/block/positioning/001.html = FAIL
1443
1444 // Selection highlight colors are wrong.
1445 BUGCR10426 LINUX : fast/lists/drag-into-marker.html = FAIL
1446
1447 // It's not clear that the test isn't wrong here. It believes that middle
1448 // aligning 15px Ahem should end up in a certain spot. But we have the
1449 // x-height correct and we're still one px off.
1450 BUGCR10429 LINUX : css2.1/t100801-c544-valgn-01-d-ag.html = FAIL
1451
1452 // New failures from Merge 41078:41149
1453 BUGCR10430 LINUX : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT
1454
1455 // Flakey. Not clear when it started, but it was before 3/9/09.
1456 // This test also started failing with the merge of March 25th 2009
1457 BUGCR10441 WIN DEBUG : transitions/transition-end-event-transform.html = FAIL PASS
1458 BUGCR10441 MAC WIN RELEASE : transitions/transition-end-event-transform.html = FAIL PASS
1459
1460 // Merge 41768:41807
1461 // Perhaps just needs new baseline?
1462 // These tests were rebaselined with failure long ago. We shouldn't do this, and
1463 // instead work upstream to improve tests so that they don't fail.
1464 // Just need rebaseline
1465 BUGCR10458 LINUX : fast/forms/textarea-width.html = FAIL
1466
1467 // New failures from merge
1468 BUGCR27486 WIN : fast/forms/listbox-hit-test-zoomed.html = FAIL
1469 BUGCR27486 RELEASE LINUX : fast/forms/listbox-hit-test-zoomed.html = FAIL
1470 BUGCR27486 LINUX DEBUG : fast/forms/listbox-hit-test-zoomed.html = FAIL
1471 BUGCR27486 WIN LINUX : fast/forms/slider-zoomed.html = FAIL
1472
1473 // See WebKit 41948
1474 // Regressed further at 57820, jamesr investigating
1475 BUGCR10468 MAC SKIP : fast/replaced/border-radius-clip.html = IMAGE+TEXT
1476
1477 // Mac flaky failures.
1478 BUGCR10472 MAC DEBUG : svg/css/glyph-orientation-rounding-test.xhtml = FAIL PASS
1479
1480 // <input type="search">; various failures, some tests may simply need new
1481 // baselines, others have more problems.
1482 BUGCR10473 LINUX : fast/forms/placeholder-set-value.html = FAIL
1483 BUGCR10473 LINUX : fast/forms/search-display-none-cancel-button.html = FAIL
1484 BUGCR10473 LINUX : fast/replaced/width100percent-searchfield.html = FAIL
1485
1486 // This test isn't just slow -- sometimes it times out indefinitely.
1487 BUGCR27569 LINUX MAC WIN : http/tests/xmlhttprequest/redirect-cross-origin-tripmine.html = TIMEOUT PASS
1488
1489 // These tests were affected by rolling out WebKit i8n patches.
1490 // Was only WIN, also fail on LINUX since merge 43346:43361
1491 BUGCR9768 LINUX WIN : fast/forms/select-initial-position.html = FAIL
1492 // Was only WIN, also fail on LINUX since merge 43346:43361
1493 BUGCR9768 LINUX WIN : fast/forms/select-visual-hebrew.html = FAIL
1494 // Was only WIN, also fail on LINUX since merge 43346:43361
1495 BUGCR9768 LINUX WIN : fast/forms/visual-hebrew-text-field.html = FAIL
1496 // Linux looks ok, rebaselined.
1497 BUGCR9768 WIN : fast/text/cg-fallback-bolding.html = FAIL
1498 BUGCR9768 WIN : fast/text/international/001.html = FAIL
1499 BUGCR9768 WIN : fast/text/international/002.html = FAIL
1500 BUGCR9768 WIN : fast/text/international/003.html = FAIL
1501 BUGCR9768 WIN : fast/text/international/wrap-CJK-001.html = FAIL
1502
1503 // Merge WebKit 42200:42244 regressions
1504 BUGCR9786 : fast/dom/Window/dom-access-from-closure-iframe.html = FAIL
1505 BUGCR9786 : fast/dom/Window/dom-access-from-closure-window.html = FAIL
1506 BUGCR9786 WIN DEBUG : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1507 BUGCR9786 SLOW WIN RELEASE : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1508 BUGCR9786 LINUX MAC : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1509 BUGCR9786 : http/tests/security/cross-frame-access-location-prototype.html = FAIL
1510 BUGCR9786 : http/tests/security/cross-frame-access-document-direct.html = TIMEOUT
1511
1512 BUGCR9798 SLOW WIN DEBUG : fast/dom/Window/slow-unload-handler.html = PASS
1513
1514 // Was flaky. Became a consistent failure.
1515 BUGCR9798 WIN DEBUG : http/tests/local/style-access-before-stylesheet-loaded.html = FAIL PASS
1516 BUGCR9798 WIN DEBUG : http/tests/misc/redirect-with-quotes.php = TIMEOUT PASS
1517 BUGCR9798 WIN SLOW : http/tests/misc/refresh-headers.php = PASS
1518 BUGCR9798 WIN : http/tests/security/cross-frame-access-protocol-explicit-domain.html = FAIL PASS
1519 BUGCR9798 WIN DEBUG : http/tests/security/cross-frame-access-protocol.html = FAIL PASS
1520 BUGCR9798 RELEASE : http/tests/security/dataURL/xss-DENIED-from-data-url-in-foreign-domain-subframe.html = TIMEOUT PASS
1521 BUGCR9798 WIN : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-timeout.html = PASS TIMEOUT
1522 BUGCR9798 WIN : http/tests/xmlhttprequest/basic-auth.html = TIMEOUT PASS
1523 BUGCR9798 WIN DEBUG : http/tests/xmlhttprequest/encode-request-url-2.html = TIMEOUT PASS
1524 BUGCR9797 BUGCR9798 WIN RELEASE SLOW : http/tests/xmlhttprequest/state-after-network-error.html = PASS
1525 BUGCR9797 LINUX DEBUG : svg/carto.net/colourpicker.svg = FAIL
1526 BUGCR9798 LINUX RELEASE : svg/carto.net/colourpicker.svg = FAIL
1527 BUGCR9798 LINUX RELEASE : tables/mozilla/bugs/45621.html = FAIL
1528 BUGCR9798 LINUX DEBUG SLOW : tables/mozilla/bugs/45621.html = FAIL
1529 //also BUGCR24868 (crash)
1530 BUGCR9798 LINUX DEBUG : transitions/mask-transitions.html = FAIL PASS
1531 BUGCR9798 SLOW LINUX RELEASE : transitions/transition-timing-function.html = PASS
1532 // This test definitely times out (i.e. is not just slow).
1533 BUGCR9798 WIN RELEASE : http/tests/xmlhttprequest/small-chunks-response-text.html = PASS TIMEOUT
1534 BUGCR9798 LINUX : svg/custom/use-property-changes-through-svg-dom.svg = FAIL
1535 BUGCR9798 LINUX : svg/custom/js-update-transform-changes.svg = FAIL
1536 // Occasionally times out. Not just slow.
1537 BUGCR9798 WIN DEBUG : http/tests/loading/redirect-methods.html = TIMEOUT PASS
1538
1539 // New tests or failures from WebKit merge 42324:42364. Re-baselined on
1540 // Windows. Probably just need the same on other platforms.
1541 BUGCR9962 MAC : fast/js/function-apply-aliased.html = FAIL
1542
1543 // Regressions from WebKit merge 43264:42403, unknown cause(s)
1544 BUGCR10055 MAC : fast/events/updateLayoutForHitTest.html = FAIL
1545
1546 // New tests from WebKit Merge 42609:42671
1547 BUGCR10760 LINUX : fast/forms/input-text-scroll-left-on-blur.html = FAIL
1548 BUGCR10760 LINUX : fast/inline/25277-2.html = FAIL
1549 BUGCR10760 LINUX : fast/inline/25277.html = FAIL
1550 BUGCR10760 LINUX : svg/custom/marker-child-changes.svg = PASS FAIL
1551 BUGCR10760 LINUX : svg/custom/marker-viewBox-changes.svg = FAIL
1552
1553 // New failures from WebKit merge 42725:42805
1554 // WebKit change http://trac.webkit.org/changeset/42785
1555 // added a test which submits a form and then uses history.back()
1556 // to go back. in test_shell history.back() does not go back,
1557 // so the test timeouts.
1558 BUGCR11001 LINUX MAC WIN : http/tests/history/back-to-post.php = TIMEOUT
1559
1560 // Regressions from WebKit Merge 42932:42994 due to text metric changes.
1561 BUGCR11251 WIN DEBUG : fast/forms/textarea-width.html = FAIL
1562 BUGCR11251 SLOW WIN RELEASE : fast/forms/textarea-width.html = FAIL
1563 BUGCR11251 WIN LINUX RELEASE : fast/forms/text-control-intrinsic-widths.html = FAIL
1564 BUGCR11251 LINUX WIN DEBUG : fast/forms/text-control-intrinsic-widths.html = FAIL
1565 BUGCR11251 WIN LINUX : svg/custom/svg-fonts-in-text-controls.html = FAIL
1566 BUGCR11251 WIN LINUX : fast/forms/textarea-metrics.html = FAIL
1567
1568 // Regresssions from WebKit Merge 43114:43242 that just need to be re-baselined.
1569 BUGCR11483 LINUX : fast/forms/input-text-double-click.html = FAIL
1570 BUGCR11483 LINUX : svg/text/foreignObject-repaint.xml = FAIL
1571
1572 // Regressions from WebKit merge 43242:43321.  These just need to re-baselining:
1573 BUGCR24229 LINUX : fast/forms/select-dirty-parent-pref-widths.html = FAIL
1574 BUGCR24229 LINUX : svg/transforms/animated-path-inside-transformed-html.xhtml = FAIL
1575
1576 // Details for all of these are in the bugs.
1577 BUGCR12361 WIN : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1578 BUGCR12361 LINUX MAC DEBUG : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1579 BUGCR12361 LINUX RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1580 BUGCR12361 SLOW MAC RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1581
1582 BUGCR14207 LINUX : tables/mozilla/bugs/bug28341.html = FAIL
1583 BUGCR32231 WIN DEBUG : tables/mozilla/bugs/bug28341.html = IMAGE PASS
1584
1585 // Newly added test http://trac.webkit.org/changeset/44816
1586 BUGCR18733 WIN SLOW : http/tests/xmlhttprequest/cross-origin-no-authorization.html = PASS
1587
1588 // WebKit 45017:45086
1589 BUGCR15217 : fast/js/dictionary-no-cache.html = FAIL
1590
1591 // WebKit 45086:45111
1592 BUGCR15270 MAC LINUX RELEASE : fast/js/excessive-comma-usage.html = TEXT
1593 BUGCR15270 MAC LINUX DEBUG SLOW : fast/js/excessive-comma-usage.html = FAIL
1594 BUGCR15270 WIN : fast/js/excessive-comma-usage.html = CRASH FAIL
1595
1596
1597 // Flaky for a while; also related to BUGCR17974
1598 BUGCR15267 WIN LINUX : transitions/cancel-transition.html = PASS FAIL
1599
1600 // WebKit 45431:45444
1601 BUGCR10384 MAC : fast/events/frame-tab-focus.html = FAIL
1602 BUGCR11613 LINUX : fast/forms/tabbing-input-iframe.html = FAIL
1603 BUGCR11613 LINUX RELEASE : fast/overflow/scrollRevealButton.html = FAIL
1604 BUGCR11613 LINUX DEBUG : fast/overflow/scrollRevealButton.html = FAIL
1605
1606 // WebKit merge 42738:45840
1607 // New tests, need baseline.
1608 BUGCR16240 WIN DEBUG : http/tests/cache/subresource-expiration.html = TIMEOUT
1609 BUGCR16240 MAC WIN RELEASE : http/tests/cache/subresource-expiration.html = TIMEOUT
1610 BUGCR14752 LINUX SLOW : http/tests/cache/subresource-expiration.html = PASS
1611
1612 // New tests with WebKit merge 46288:46363
1613 BUGCR18116 : fast/dom/constructed-objects-prototypes.html = TEXT
1614 BUGCR18116 WIN RELEASE : fast/dom/prototype-inheritance-2.html = TEXT
1615 BUGCR18116 WIN DEBUG : fast/dom/prototype-inheritance-2.html = CRASH
1616 BUGCR18116 MAC LINUX : fast/dom/prototype-inheritance-2.html = TEXT CRASH
1617 // New in WebKit r52559
1618 BUGCR18116 : svg/custom/global-constructors.html = TEXT
1619
1620 // Flaky crashes
1621 BUGCR18656 MAC RELEASE : fast/dom/Window/window-lookup-precedence.html = FAIL
1622 BUGCR18656 MAC DEBUG : fast/dom/Window/window-lookup-precedence.html = FAIL
1623
1624 // Test failures caused by re-enabling skia asserts.
1625 BUGCR18896 WIN LINUX DEBUG : svg/batik/paints/gradientLimit.svg = TIMEOUT FAIL CRASH
1626
1627 // Test failures from WebKit merge 46894 to 46977
1628 BUGCR26737 : fast/js/prototypes.html = FAIL
1629
1630 // WebKit roll r47417:47528
1631 BUGCR19766 LINUX : fast/replaced/width100percent-menulist.html = FAIL
1632
1633 // WebKit 47777:47790 - getOwnPropertyDescriptor
1634 BUGCR20345 : fast/js/getOwnPropertyDescriptor.html = FAIL
1635 BUGCR20345 : fast/dom/Window/window-property-descriptors.html = TEXT
1636 // Failures from Webkit merger 51724 -> 51772
1637 BUGCR20345 : http/tests/security/cross-frame-access-getOwnPropertyDescriptor.html = TEXT
1638
1639 // Flaky, not clear as of when.
1640 BUGCR21411 WIN LINUX DEBUG : svg/dom/SVGScriptElement/script-load-and-error-events.svg = TEXT PASS
1641
1642
1643 BUGCR25616 WIN : fast/overflow/overflow-float-stacking.html = FAIL
1644
1645 // Flaky. The width of containing RenderBlocks sometimes becomes larger
1646 BUGCR21958 MAC : svg/hixie/error/012.xml = FAIL
1647
1648 // WebKit merge 48500:48585, newly implemented Object.defineProperty.
1649 BUGCR22526 WIN MAC: fast/js/Object-create.html = FAIL
1650 BUGCR22526 : fast/js/Object-defineProperties.html = FAIL CRASH
1651 BUGCR22526 : fast/js/Object-defineProperty.html = FAIL CRASH
1652 BUGCR22526 : http/tests/security/xss-DENIED-defineProperty.html = FAIL
1653
1654 // WebKit merge 48500:48585, due to newly added support for MathML.
1655 BUGCR22554 SKIP : mathml = FAIL
1656
1657 // WebKit update 48796:48820
1658 // Test #9 throws an exception.
1659 BUGCR23956 WIN LINUX : fast/dom/Range/getClientRects.html = FAIL
1660 BUGCR24126 : fast/dom/HTMLInputElement/size-attribute.html = FAIL
1661
1662 // Started happening somewhere around http://trac.webkit.org/changeset/48989.
1663 BUGCR23955 LINUX : fast/css/last-of-type-pseudo-class.html = IMAGE
1664
1665 // Started failing for no apparent reason at r28124, and IMAGE+TEXT diffs started at r51875
1666
1667 // Flaky timeouts first appearing at r27764 (webkit 48947)
1668 BUGCR9798 WIN : http/tests/cookies/multiple-cookies.html = TIMEOUT PASS
1669
1670 // WebKit update: 49213:49221
1671 BUGCR24063 : fast/dom/Window/window-postmessage-clone.html = FAIL
1672
1673 // Got slow with V8 update to 1.3.15. Debug logging perhaps?
1674 BUGCR24182 DEBUG SLOW : fast/forms/input-implicit-length-limit.html = PASS
1675 BUGCR24182 DEBUG SLOW : fast/forms/input-maxlength.html = PASS
1676
1677 // Failing at WebKit Linux (dbg)(3) build 7795
1678 BUGCR24119 LINUX DEBUG : tables/mozilla/bugs/bug1220.html = PASS FAIL
1679
1680 // WebKit roll 49405:49413
1681 BUGCR28409 : http/tests/xmlhttprequest/logout.html = FAIL
1682
1683 // WebKit Roll 49597:49640
1684 BUGCR24966 SLOW MAC DEBUG : fast/frames/calculate-fixed.html = PASS
1685
1686 // WebKit Roll 49640:49684
1687 BUGCR25202 LINUX WIN : svg/W3C-SVG-1.1/masking-path-02-b.svg = FAIL
1688 BUGCR25208 LINUX WIN : svg/W3C-SVG-1.1/masking-path-05-f.svg = FAIL
1689 BUG_JEREMY MAC : fast/frames/onlyCommentInIFrame.html = FAIL
1690
1691 // WebKit Roll 49684:49761
1692 BUGCR26042 DEBUG : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
1693 BUGCR26042 LINUX RELEASE : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
1694
1695 // Incorrect baseline removed.
1696 BUGCR25433 WIN LINUX : css2.1/t040103-ident-03-c.html = IMAGE
1697
1698 // WebKit roll 49961:49992
1699 // Added in http://trac.webkit.org/changeset/49990
1700 BUGCR25884 WIN LINUX : fast/dom/Document/CaretRangeFromPoint/caretRangeFromPoint-in-zoom-and-scroll.html = FAIL
1701
1702 // This only crashes on the old buildbot slave. It fails image, like the other slaves, on the new one.
1703 // FIXME: Make this just be IMAGE after we move over to the new bots.
1704 BUGCR26344 LINUX DEBUG : fast/text/atsui-partial-selection.html = CRASH IMAGE
1705
1706 BUGWK45957 : fast/multicol/column-rules-stacking.html = FAIL
1707
1708 // ==== WebKit roll 50258:50313 ====
1709 BUGCR26291 MAC : fast/text/atsui-multiple-renderers.html = IMAGE
1710 BUGCR26291 MAC : transforms/2d/hindi-rotated.html = IMAGE
1711
1712 // Flaky since at least WebKit 50258.
1713 BUGCR32098 : fast/dom/defaultView.html = MISSING PASS
1714
1715 // more test flakiness
1716 BUGCR27334 MAC : http/tests/security/xssAuditor/object-embed-tag.html = PASS
1717
1718 // more test flakiness
1719 BUGCR27418 SLOW WIN RELEASE : http/tests/cookies/simple-cookies-max-age.html = PASS
1720 BUGCR27418 SLOW WIN RELEASE : http/tests/misc/url-in-utf16le.html = PASS
1721 BUGCR27418 MAC DEBUG : http/tests/plugins/interrupted-get-url.html = PASS TEXT
1722 BUGCR27418 MAC RELEASE SLOW : http/tests/plugins/interrupted-get-url.html = PASS
1723
1724 // The following upstream patches add -Webkit-color-correction support:
1725 // http://trac.webkit.org/changeset/50760
1726 // http://trac.webkit.org/changeset/50852
1727 // The ColorSpace was only implemented for CG, more port implementation
1728 // required in order for Chromium to support color correction.
1729 BUGCR28005 WIN LINUX : fast/css/color-correction-backgrounds-and-text.html = FAIL
1730 BUGCR28005 WIN LINUX : fast/css/color-correction-on-backgrounds.html = IMAGE+TEXT
1731 BUGCR28005 WIN LINUX : fast/css/color-correction-on-text.html = IMAGE+TEXT
1732 BUGCR28005 WIN LINUX : fast/css/color-correction.html = IMAGE+TEXT
1733 BUGCR28005 WIN LINUX : fast/css/color-correction-on-box-shadow.html = IMAGE+TEXT
1734 BUGCR28005 WIN LINUX : fast/css/color-correction-on-text-shadow.html = IMAGE+TEXT
1735 BUGCR28005 WIN LINUX : fast/css/color-correction-on-background-image.html = FAIL
1736 BUGCR28005 WIN LINUX : fast/css/color-correction-untagged-images.html = IMAGE+TEXT
1737
1738 // May also be related to r50760, but not as confident.
1739 BUGCR27551 WIN : fast/css/shadow-multiple.html = IMAGE
1740
1741 // WebKit merge 50756:50820, possibly due to WebKit r50808/r50786 and Chromium r31715
1742 BUGCR27553 WIN : fast/text/atsui-partial-selection.html = IMAGE
1743
1744 BUGCR22700 WIN LINUX : fast/canvas/canvas-shadow.html = TEXT
1745
1746
1747 // Failures from merge 50972:51042
1748 // The test requires DRT/Test Shell to support error page handling.
1749 BUGCR27850 : fast/history/back-forward-reset-after-error-handling.html = TEXT
1750 // Need to update chromium so the web frame delegate is informed when window objects
1751 // in isolated worlds are cleared.
1752 BUGCR27849 : http/tests/security/isolatedWorld/didClearWindowObject.html = TEXT
1753
1754 BUGCR28040 WIN MAC DEBUG : fast/body-propagation/overflow/003-xhtml.xhtml = PASS IMAGE+TEXT
1755
1756 BUGCR28092 WIN : http/tests/xmlhttprequest/redirect-cross-origin-post.html = PASS FAIL
1757
1758 // Started failing with move from Lighttpd to Apache.
1759 // Since we have some bots on Lighttpd and some on Apache, mark it as flaky for
1760 // now. Once we decide on one or the other, then we can address these tests.
1761 BUG_OJAN MAC LINUX : http/tests/loading/text-content-type-with-binary-extension.html = TEXT
1762 BUG_OJAN LINUX : http/tests/xmlhttprequest/cache-override.html = TEXT
1763
1764 // These tests time out *and* are slow. The test should be fixed to not timeout,
1765 // then should be marked as SLOW/PASS.
1766 BUGCR2844 WIN : http/tests/appcache/cyrillic-uri.html = TIMEOUT PASS CRASH
1767 BUGCR2844 WIN : http/tests/appcache/fail-on-update.html = TIMEOUT PASS TEXT
1768 BUGCR2844 WIN : http/tests/appcache/offline-access.html = TIMEOUT PASS
1769 BUGCR2844 WIN LINUX DEBUG : http/tests/appcache/update-cache.html = TIMEOUT PASS
1770 BUGCR2844 WIN RELEASE : http/tests/appcache/update-cache.html = TIMEOUT PASS
1771
1772 // These tests sometimes pass and sometimes have a text difference due
1773 // to chromium's appcache being async.
1774 BUGCR2844 WIN RELEASE : http/tests/appcache/top-frame-3.html = TEXT PASS
1775 BUGCR2844 MAC LINUX : http/tests/appcache/top-frame-3.html = TEXT PASS
1776 BUGCR2844 WIN RELEASE : http/tests/appcache/top-frame-4.html = TEXT PASS
1777 BUGCR2844 MAC LINUX : http/tests/appcache/top-frame-4.html = TEXT PASS
1778
1779 // These fail because chromium's appcache is async but webkit's is not.
1780 BUGCR2844 SKIP : http/tests/appcache/idempotent-update.html = FAIL
1781 BUGCR2844 SKIP : http/tests/appcache/top-frame-2.html = FAIL
1782
1783 // This test fails because there is no setAppCacheMaximumSize API yet.
1784 BUGCR2844 SKIP : http/tests/appcache/max-size.html = FAIL
1785
1786 // Flakiness documented around Webkit Roll 51681:51711
1787 BUGCR2844 SKIP : http/tests/appcache/404-manifest.html = TIMEOUT PASS
1788 BUGCR2844 SKIP : http/tests/appcache/404-resource.html = TIMEOUT PASS
1789 BUGCR2844 SKIP : http/tests/appcache/foreign-iframe-main.html = TIMEOUT PASS
1790 BUGCR2844 SKIP : http/tests/appcache/non-html.xhtml = TIMEOUT PASS
1791
1792 // New failures from WebKit r51577
1793 BUGCR29164 WIN LINUX MAC : fast/frames/sandboxed-iframe-plugins.html = TEXT
1794
1795 // New failures from WebKit merge 51581:51584
1796 BUGCR29167 MAC DEBUG : fast/dom/replaceChild.html = IMAGE PASS
1797
1798 // Failures introduced by USE_NEW_BUILDER in Skia.
1799 BUGCR33287 WIN LINUX : fast/canvas/set-colors.html = TEXT
1800
1801 // Failures from WebKit merge 51711:51724
1802 BUGCR32003 : fast/js/string-property-deletion.html = TEXT
1803
1804 // Regression from Webkit merge 51772 -> 51784
1805 BUGCR35329 WIN : http/tests/appcache/resource-redirect-2.html = TIMEOUT PASS
1806
1807 // More Webkit Roll to r51875
1808 // Some of these went from IMAGE+TEXT to just IMAGE at r57886
1809 BUGCR29737 MAC : svg/custom/use-elementInstance-event-target.svg = IMAGE
1810 BUGCR29737 MAC : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE
1811 BUGCR29737 MAC : svg/filters/sourceAlpha.svg = IMAGE
1812
1813 // These tests got very flaky (failing 8/10 runs!) after
1814 // http://src.chromium.org/viewvc/chrome?view=rev&revision=34610
1815 // The only relevant change there is that we now sort tests purely
1816 // lexicographically instead of putting the http tests first. This is a good
1817 // thing because it matches upstream. The regressions are likely due to timing
1818 // issues because the http tests moved from one debug shard to another.
1819 // Likely, moving Windows to using Apache2 will fix this as the Linux/Mac builds
1820 // did not get flaky here and moving to Apache made the appcache tests less
1821 // flaky on those platforms.
1822 BUGCR25977 WIN DEBUG : http/tests/appcache/access-via-redirect.php = TIMEOUT PASS
1823 BUGCR25977 WIN : http/tests/appcache/auth.html = TIMEOUT PASS
1824 BUGCR25977 WIN DEBUG : http/tests/appcache/crash-when-navigating-away-then-back.html = TIMEOUT PASS
1825 BUGCR25977 WIN DEBUG : http/tests/appcache/empty-manifest.html = TIMEOUT PASS
1826 // This test is slow on windows, but sometimes times out indefinitely.
1827 // See if this improves when we move to apache.
1828 BUGCR25977 WIN : http/tests/appcache/fallback.html = TIMEOUT PASS
1829 BUGCR25977 WIN DEBUG : http/tests/appcache/local-content.html = TIMEOUT PASS
1830 BUGCR25977 WIN DEBUG : http/tests/appcache/main-resource-hash.html = TIMEOUT PASS
1831 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-containing-itself.html = TIMEOUT PASS
1832 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-redirect-2.html = TIMEOUT PASS
1833 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-redirect.html = TIMEOUT PASS
1834 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-with-empty-file.html = TIMEOUT PASS
1835 BUGCR25977 WIN DEBUG : http/tests/appcache/wrong-content-type.html = TIMEOUT PASS
1836 BUGCR25977 WIN DEBUG : http/tests/appcache/online-whitelist.html = TIMEOUT PASS
1837 BUGCR25977 WIN DEBUG : http/tests/appcache/top-frame-1.html = TIMEOUT PASS
1838 BUGCR25977 WIN DEBUG : http/tests/appcache/whitelist-wildcard.html = TIMEOUT PASS
1839 BUGCR25977 WIN DEBUG : http/tests/appcache/resource-redirect.html = TIMEOUT PASS
1840 BUGCR25977 WIN : http/tests/appcache/xhr-foreign-resource.html = TIMEOUT PASS
1841 BUGCR25977 WIN DEBUG : http/tests/appcache/simple.html = TIMEOUT PASS
1842 BUGCR25977 WIN DEBUG : http/tests/appcache/reload.html = TIMEOUT PASS
1843 BUGCR25977 WIN DEBUG : http/tests/appcache/wrong-signature-2.html = TIMEOUT PASS
1844 BUGCR25977 WIN DEBUG : http/tests/appcache/top-frame-4.html = TIMEOUT TEXT PASS
1845 BUGCR25977 WIN DEBUG : http/tests/appcache/top-frame-3.html = TIMEOUT TEXT PASS
1846
1847 // WebKit update 52293->52323
1848 BUGCR31253 : http/tests/security/xss-DENIED-assign-location-href-javascript.html = TEXT
1849
1850 // WebKit update 52323->52366
1851 BUGCR30826 WIN : platform/win/fast/events/panScroll-imageMap-noHref-scroll.html = TEXT
1852 BUGCR30826 WIN DEBUG : platform/win/fast/events/panScroll-event-fired.html = PASS TEXT TIMEOUT
1853
1854 // Flaky
1855 BUGCR30930 LINUX DEBUG : tables/mozilla/bugs/bug15933.html = IMAGE PASS
1856
1857 // WebKit roll 52468->52535
1858 BUGCR31991 WIN LINUX : fast/text/international/bidi-layout-across-linebreak.html = TEXT
1859 BUGCR31252 : http/tests/security/listener/xss-inactive-closure.html = TEXT
1860
1861 BUGCR31623 WIN: http/tests/appcache/remove-cache.html = PASS TEXT TIMEOUT
1862
1863 // WebKit roll 52852 -> 52867
1864 BUGCR32018 DEBUG : http/tests/websocket/tests/simple-stress.html = PASS TEXT TIMEOUT
1865
1866 // V8's implementation of getOwnPropertyNames has different results for built-in
1867 // functions.
1868 BUGCR32155 : fast/js/Object-getOwnPropertyNames.html = TEXT
1869
1870 // New flakiness?
1871 BUGCR32149 WIN RELEASE : fast/dom/Document/early-document-access.html = TIMEOUT PASS
1872
1873 // Expectations from roll to 53171:53194
1874 // As of Oct 7, 2010, times out on all platforms when doing DEBUG costing 13 seconds on average. Skipping.
1875 BUGCR32308 DEBUG SKIP : fast/frames/cached-frame-counter.html = TIMEOUT
1876
1877 // WebKit roll 53341:53451
1878 BUGCR32670 LINUX : fast/css/zoom-body-scroll.html = TEXT
1879 BUGCR32673 WIN LINUX : fast/forms/textarea-scrollbar-height.html = TEXT
1880
1881 // Flaky tests found during the roll.
1882 BUGCR32689 MAC LINUX DEBUG : http/tests/security/mixedContent/about-blank-iframe-in-main-frame.html = TEXT PASS
1883 BUGCR32693 MAC DEBUG : svg/dom/SVGRectElement/rect-modify-rx.svg = TEXT PASS
1884
1885 BUGCR33293 SKIP : fast/media/lifetime.html = TIMEOUT
1886
1887 // WebKit roll 53655 -> 53704
1888 BUGCR32900 WIN LINUX : http/tests/misc/slow-loading-mask.html = IMAGE+TEXT
1889
1890 // WebKit roll 53941 -> 54015
1891 BUGCR33358 WIN LINUX : fast/dom/Window/window-postmessage-clone-frames.html = TEXT
1892
1893 // WebKit roll 54059 -> 54075
1894 BUGCR33538 : fast/dom/Window/anonymous-slot-with-changes.html = TEXT
1895
1896 BUGCR35064 WIN : fast/forms/restore-selection-after-layout.html = TEXT PASS
1897
1898 // WebKit roll 54482 to 54493.
1899 BUGCR35242 WIN : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT
1900
1901 // WebKit roll 54493 to 54530: new tests.
1902 BUGCR35114 : fast/js/parser-syntax-check.html = TEXT
1903
1904 // Started failing during roll from 54848 -> 54898
1905 // Started failing with 54865. No rebaselines upstream but they don't run pixel tests.
1906 BUGCR36019 WIN LINUX : fast/images/svg-as-tiled-background.html = IMAGE
1907
1908 // WebKit roll 55250 to 55339
1909 BUGCR36966 : fast/loader/about-blank-hash-kept.html = FAIL
1910
1911 // New test, added http://trac.webkit.org/changeset/55546
1912 BUGCR37896 WIN LINUX : fast/multicol/hit-test-above-or-below.html = TEXT
1913 BUGCR37896 WIN DEBUG : fast/text/firstline/001.html = PASS CRASH
1914 BUGCR37896 LINUX MAC DEBUG : fast/text/firstline/001.html = PASS CRASH TIMEOUT
1915 // Added in http://trac.webkit.org/changeset/55587
1916 // Three flaky tests noticed during a sheriff rotation.
1917 BUGCR37962 MAC LINUX DEBUG : fast/dom/HTMLElement/bdo.html = CRASH PASS
1918 BUGCR37962 LINUX DEBUG : fast/forms/multiple-form-submission-protection-mouse.html = CRASH PASS
1919
1920 // WebKit roll r55853 -> 55940
1921 // Flaky test
1922 BUG_JIANLI MAC : fast/forms/select-style.html = IMAGE PASS
1923
1924 // The touch targeting logic was recently changed.
1925 // TIMEOUT added for WebKit roll 74534:74557
1926 // FAIL added because of differing failure modes on different platforms
1927 BUGCR36415 : fast/events/touch/touch-target.html = FAIL TIMEOUT
1928
1929 // One pixel changes from gray 0x83 to gray 0x81. Valgrind is clean.
1930 BUGCR38534 LINUX : tables/mozilla/bugs/bug20804.html = IMAGE PASS
1931
1932 // WebKit roll 56197:56239.
1933 // Needs layoutTestController.setMediaType() (implemented on Qt only)
1934 BUGCR38656 : fast/media/print-restores-previous-mediatype.html = TEXT
1935
1936 // Needs layoutTestController.setViewModeMediaFeature()
1937 BUGCR40680 SKIP : fast/media/view-mode-media-feature.html = FAIL
1938 BUGCR40680 SKIP : fast/media/media-query-list-02.html = FAIL
1939 BUGCR40680 SKIP : fast/media/media-query-list-03.html = FAIL
1940 BUGCR40680 SKIP : fast/media/media-query-list-04.html = FAIL
1941 BUGCR40680 SKIP : fast/media/media-query-list-05.html = FAIL
1942 BUGCR40680 SKIP : fast/media/media-query-list-06.html = FAIL
1943 BUGCR40680 SKIP : fast/media/media-query-list-07.html = FAIL
1944
1945 // Unknown flakiness.
1946 BUGCR38706 : svg/custom/deep-dynamic-updates.svg = IMAGE+TEXT IMAGE PASS
1947
1948 // Caused by http://trac.webkit.org/changeset/56288/
1949 BUGCR29737 WIN LINUX : svg/filters/filterRes.svg = IMAGE
1950
1951 // Caused by http://trac.webkit.org/changeset/56394.
1952 BUG_JAPHET WIN : http/tests/xmlhttprequest/xmlhttprequest-50ms-download-dispatch.html = TEXT
1953
1954 // Due to the differences in initialization checks in KURL and googleurl.
1955 // Note: this test was also marked as flaky on WIN RELEASE above, BUGCR31342.
1956 BUGCR39423 : security/block-test.html = TIMEOUT
1957
1958 BUGWK36666 : storage/open-database-over-quota.html = TEXT
1959
1960 BUGWK37283 : fast/overflow/scrollbar-restored-and-then-locked.html = TEXT
1961
1962 BUGWK37297 : fast/history/nested-visited-test.html = TEXT
1963 BUGWK37297 : fast/history/self-is-visited.html = TEXT
1964 BUGWK37297 : fast/history/sibling-visited-test.html = TEXT
1965
1966 // Added in http://trac.webkit.org/changeset/57476. Fails in Chromium because
1967 // LayoutTestController::computedStyleWithVisitedInfo() is missing.
1968 BUGCR41206 : fast/history/multiple-classes-visited.html = TEXT TIMEOUT
1969
1970 // Tests that work with KURL, but fail with GURL
1971 BUGCR41292 : fast/url/ipv4.html = TEXT
1972 BUGCR41292 : fast/url/anchor.html = TEXT
1973
1974 BUGWK33812 SKIP : fast/dom/icon-url-property.html = FAIL
1975
1976 // Failing with webkit roll 57659 -> 57677.
1977 BUGCR41817 WIN LINUX : fast/backgrounds/svg-as-background-1.html = IMAGE PASS
1978 BUGCR41817 WIN LINUX : fast/backgrounds/svg-as-background-3.html = IMAGE PASS
1979 BUGCR41817 MAC : svg/text/text-intro-05-t.svg = IMAGE
1980
1981 BUGCR42044 WIN : http/tests/security/xss-DENIED-mime-type-execute-as-html.html = PASS TIMEOUT
1982
1983 // might have been flaky
1984 BUGJAMESR WIN LINUX : svg/filters/filter-clip.svg = IMAGE
1985 BUGJAMESR WIN : svg/filters/filter-source-position.svg = IMAGE
1986 BUGJAMESR MAC LINUX : svg/filters/filter-source-position.svg = IMAGE
1987 BUGJAMESR BUGCR30048 BUGCR29737 WIN LINUX : svg/filters/shadow-on-rect-with-filter.svg = IMAGE
1988
1989 // New layoutTestController function added at r57993
1990 BUGCR42696 : http/tests/xmlhttprequest/cross-origin-authorization-with-embedder.html = TIMEOUT
1991
1992 // Started failing at r58152
1993 BUGWK38038 WIN LINUX MAC : fast/url/file-http-base.html = TEXT
1994
1995 // New test, may be safe to just rebaseline.
1996
1997 // Started failing at 58212
1998 BUGWK38108 MAC : fast/backgrounds/size/contain-and-cover.html = IMAGE
1999
2000 // WebKit roll 58304:58400
2001 // Skip since not relevant
2002 BUGUKAI WIN MAC SKIP : fast/text/international/bold-bengali.html = FAIL
2003
2004 // These 5,000+ tests are already being run by the V8 team (and have no chromium expectations).
2005 // They should be moved to the JavaScriptCore test suite.
2006 BUGCR42875 WONTFIX SKIP : fast/js/sputnik = TEXT
2007
2008 // These tests may just need to be rebaselined.
2009 // WebKit roll 58400:58523
2010 BUGWK38360 WIN LINUX : fast/images/svg-background-partial-redraw.html = FAIL
2011 BUGWK38360 WIN LINUX : svg/carto.net/tabgroup.svg = FAIL
2012
2013 // Failing a few times, flak dashboard seems to agree.
2014 BUGCR41973 MAC : svg/text/text-text-05-t.svg = IMAGE
2015
2016 // WebKit roll 58626:58719
2017 BUGCR43963 WIN : fast/forms/searchfield-heights.html = IMAGE
2018 BUGCR43963 LINUX : fast/forms/searchfield-heights.html = IMAGE+TEXT TEXT
2019
2020 BUGWK38705 : http/tests/security/sandbox-inherit-to-initial-document-2.html = TEXT
2021
2022 // WebKit roll 58791:58807
2023 BUGCR43319 MAC : fast/forms/select-empty-option-height.html = TIMEOUT IMAGE PASS
2024
2025 BUGCR43496 LINUX : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2026 BUGCR43497 MAC WIN : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2027
2028 // WebKit roll 58855:58878
2029 BUGCR43419: fast/wcss/wap-input-format.xhtml = TEXT
2030 BUGCR43419: fast/wcss/wap-input-required.xhtml = TEXT
2031
2032 // Flaky tests
2033 BUGCR43890 WIN : http/tests/loading/basic.html = TEXT PASS
2034
2035 // Flaky crashing test. Started crashing around Chromium r47220
2036 BUGCR44150 LINUX : fast/forms/input-text-paste-maxlength.html = CRASH PASS
2037
2038 // The following tests fail on all platforms and need further investigation.
2039 // Many of these are skipped on the Mac platform
2040 BUGWK45991 : canvas/philip/tests/2d.drawImage.broken.html = TEXT
2041 BUGWK45991 MAC WIN : canvas/philip/tests/2d.gradient.radial.cone.top.html = TEXT
2042 BUGWK45991 LINUX RELEASE : canvas/philip/tests/2d.gradient.radial.cone.top.html = TEXT
2043 BUGWK45991 LINUX DEBUG : canvas/philip/tests/2d.gradient.radial.cone.top.html = TEXT TIMEOUT
2044 BUGWK39212 : canvas/philip/tests/2d.imageData.create1.type.html = TEXT
2045 BUGWK39212 : canvas/philip/tests/2d.imageData.create2.type.html = TEXT
2046 BUGWK39212 : canvas/philip/tests/2d.imageData.get.type.html = TEXT
2047 BUGWK40272 : canvas/philip/tests/2d.imageData.object.round.html = TEXT
2048 BUGWK40272 : canvas/philip/tests/2d.imageData.object.wrap.html = TEXT
2049 BUGWK45991 : canvas/philip/tests/2d.missingargs.html = TEXT
2050 BUGWK45991 : canvas/philip/tests/2d.pattern.image.broken.html = TEXT
2051 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.ideographic.html = TEXT
2052 BUGWK48579 : canvas/philip/tests/type.prototype.html = TEXT
2053 BUGWK50797 : canvas/philip/tests/2d.fillStyle.parse.invalid.rgba-6.html = TEXT
2054 BUGWK40147 MAC : canvas/philip/tests/toDataURL.jpeg.alpha.html = TEXT
2055 BUGCR61824 : canvas/philip/tests/2d.pattern.image.string.html = TEXT
2056
2057 // Update canvas/philip in WK r71481
2058 BUGCR62301 : canvas/philip/tests/2d.drawImage.image.incomplete.omitted.html = TEXT
2059 BUGCR62301 : canvas/philip/tests/2d.fillStyle.parse.rgb-eof.html = TEXT
2060 BUGCR62301 : canvas/philip/tests/2d.fillStyle.parse.rgba-eof.html = TEXT
2061 BUGCR62301 : canvas/philip/tests/2d.imageData.put.wrongtype.html = TEXT
2062 BUGCR62301 : canvas/philip/tests/2d.pattern.image.incomplete.empty.html = TEXT
2063 BUGCR62301 : canvas/philip/tests/2d.pattern.image.incomplete.omitted.html = TEXT
2064
2065 BUGWK48288 : canvas/philip/tests/2d.composite.operation.clear.html = TEXT
2066 BUGWK48289 : canvas/philip/tests/2d.composite.operation.darker.html = TEXT
2067 BUGWK48290 : canvas/philip/tests/2d.composite.operation.highlight.html = TEXT
2068 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.copy.html = TEXT
2069 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.destination-atop.html = TEXT
2070 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.destination-in.html = TEXT
2071 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.source-in.html = TEXT
2072 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.source-out.html = TEXT
2073 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.copy.html = TEXT
2074 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.destination-atop.html = TEXT
2075 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.destination-in.html = TEXT
2076 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.source-in.html = TEXT
2077 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.source-out.html = TEXT
2078 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.copy.html = TEXT
2079 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.destination-atop.html = TEXT
2080 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.destination-in.html = TEXT
2081 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.source-in.html = TEXT
2082 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.source-out.html = TEXT
2083 BUGWK39168 : canvas/philip/tests/2d.fillStyle.parse.system.html = TEXT
2084 BUGWK45991 : canvas/philip/tests/2d.pattern.image.undefined.html = TEXT
2085 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.bottom.html = TEXT
2086 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.hanging.html = TEXT
2087 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.middle.html = TEXT
2088 BUGWK38463 : canvas/philip/tests/2d.text.draw.baseline.top.html = TEXT
2089 BUGWK20867 : canvas/philip/tests/2d.text.draw.fill.maxWidth.fontface.html = TEXT
2090 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.end.html = TEXT
2091 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.nonspace.html = TEXT
2092 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.other.html = TEXT
2093 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.space.html = TEXT
2094 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.start.html = TEXT
2095 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.basic.html = TEXT
2096 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.complex.html = TEXT
2097 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.invalid.html = TEXT
2098 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.size.percentage.default.html = TEXT
2099 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.size.percentage.html = TEXT
2100 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.system.html = TEXT
2101 BUGWK45991 : canvas/philip/tests/2d.text.measure.width.space.html = TEXT
2102
2103 // These tests fail everywhere we use skia and are most likely skia bugs
2104 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.object.update.html = TEXT
2105 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.behind.html = TEXT
2106 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.beside.html = TEXT
2107 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.cylinder.html = TEXT
2108 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.shape2.html = TEXT
2109 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.outside3.html = TEXT
2110 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.touch1.html = TEXT
2111 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.touch3.html = TEXT
2112 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.line.width.basic.html = TEXT
2113 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.line.width.transformed.html = TEXT
2114 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arc.angle.3.html = TEXT
2115 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arc.angle.5.html = TEXT
2116 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arcTo.shape.curve1.html = TEXT
2117 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arcTo.shape.curve2.html = TEXT
2118 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.pattern.paint.norepeat.coord3.html = TEXT
2119 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.pattern.paint.repeatx.coord1.html = TEXT
2120 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.pattern.paint.repeaty.coord1.html = TEXT
2121 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.alpha.3.html = TEXT
2122 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.alpha.4.html = TEXT
2123 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.alpha.5.html = TEXT
2124 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.canvas.alpha.html = TEXT
2125 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.canvas.basic.html = TEXT
2126 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.canvas.transparent.2.html = TEXT
2127 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.enable.blur.html = TEXT
2128 BUGWK15266 LINUX WIN : canvas/philip/tests/2d.shadow.gradient.alpha.html = TEXT
2129 BUGWK15266 LINUX WIN : canvas/philip/tests/2d.shadow.gradient.basic.html = TEXT
2130 BUGWK15266 LINUX WIN : canvas/philip/tests/2d.shadow.gradient.transparent.2.html = TEXT
2131 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.alpha.html = TEXT
2132 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.basic.html = TEXT
2133 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.scale.html = TEXT
2134 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.transparent.2.html = TEXT
2135 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.pattern.alpha.html = TEXT
2136 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.pattern.basic.html = TEXT
2137 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.pattern.transparent.2.html = TEXT
2138 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.transformation.setTransform.skewed.html = TEXT
2139 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.transformation.transform.skewed.html = TEXT
2140
2141 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.cone.front.html = TEXT
2142 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.inside2.html = TEXT
2143 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.inside3.html = TEXT
2144 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.outside1.html = TEXT
2145 BUGWK45991 MAC : canvas/philip/tests/2d.line.cap.closed.html = TEXT
2146 BUGWK45991 MAC : canvas/philip/tests/2d.line.join.parallel.html = TEXT
2147 BUGWK45991 MAC : canvas/philip/tests/2d.line.miter.lineedge.html = TEXT
2148 BUGWK45991 MAC : canvas/philip/tests/2d.path.rect.winding.html = TEXT
2149 BUGWK45991 MAC : canvas/philip/tests/2d.shadow.enable.blur.html = TEXT
2150 BUGWK45991 MAC : canvas/philip/tests/2d.shadow.enable.x.html = TEXT
2151 BUGWK45991 MAC : canvas/philip/tests/2d.shadow.enable.y.html = TEXT
2152 BUGWK45991 MAC : canvas/philip/tests/2d.strokeRect.zero.4.html = TEXT
2153 BUGWK45991 WIN : canvas/philip/tests/2d.gradient.radial.touch2.html = TEXT
2154
2155 // Flaky tests
2156 BUGCR44229 WIN LINUX : fast/loader/recursive-before-unload-crash.html = PASS TEXT
2157
2158 BUGWK39655 : fast/dom/prototype-property.html = FAIL
2159
2160 // These SVG tests have been flaky on Win from quite some time.
2161 // Hard to pin down which roll introduced the flakiness.
2162 BUGCR45106 WIN : svg/clip-path/clip-path-evenodd-nonzero.svg = PASS CRASH
2163 BUGCR45106 WIN : svg/text/text-text-05-t.svg = PASS CRASH
2164
2165 BUGCR45720 WIN LINUX : http/tests/websocket/tests/reload-crash.html = PASS CRASH
2166
2167 // Chromium does not support cancel for notifications permissions.
2168 BUGWK42798 SKIP : fast/notifications/notifications-cancel-request-permission.html = FAIL
2169
2170
2171 // HTML5 Geolocation API does not use window.clientInformation.
2172 BUGCR11246 SKIP : fast/dom/Window/window-properties-geolocation.html = TEXT
2173
2174 BUGWK40740 : svg/W3C-SVG-1.1/fonts-glyph-02-t.svg = CRASH PASS
2175
2176 BUGCR46603 : fast/frames/lots-of-iframes.html = PASS TIMEOUT
2177 BUGCR46603 : fast/frames/lots-of-objects.html = PASS TIMEOUT
2178
2179 // LayoutTestController::pageProperty is not implemented for Chromium yet.
2180 BUGWK35961 : printing/page-rule-selection.html = TEXT
2181
2182 BUGCR47035 WIN DEBUG : fast/loader/stateobjects/document-destroyed-navigate-back-with-fragment-scroll.html = PASS TEXT
2183
2184 // CSS3 Hyphenation landed in http://trac.webkit.org/changeset/61548
2185 // We don't implement it yet.
2186 BUGCR47083 : fast/text/hyphenate-character.html = IMAGE+TEXT
2187 BUGCR47083 : fast/text/hyphens.html = IMAGE+TEXT
2188 BUGCR47083 : fast/text/hyphenate-locale.html = IMAGE+TEXT
2189 BUGCR47083 : fast/text/hyphenate-first-word.html = IMAGE+TEXT
2190
2191 // WebKit roll 61547:61629. Still need to investigate.
2192 BUG_HCLAM : fast/js/script-line-number.html = TEXT
2193
2194 // LayoutTestController::isPageBoxVisible, pageAreaRectInPixels, and preferredPageSizeInPixels are not implemented yet for Chromium.
2195 BUGWK37538 : printing/page-format-data.html = TEXT
2196
2197 // First noticed on trybots after r61836, now in the tree.
2198 BUG_MNAGANOV LINUX : fast/js/Object-create.html = CRASH FAIL
2199
2200 // Produces different results on Mac dbg.
2201 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-appearances-capacity.html = FAIL
2202 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-element.html = FAIL
2203 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-optimums.html = FAIL
2204 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles.html = FAIL
2205 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles-changing-pseudo.html = FAIL
2206
2207
2208 BUGWK41311 WIN LINUX : fast/borders/border-radius-circle.html = IMAGE
2209 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-01.html = IMAGE
2210 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-02.html = IMAGE
2211 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-03.html = IMAGE
2212 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-01.html = IMAGE
2213 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-02.html = IMAGE
2214 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-03.html = IMAGE
2215 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-04.html = IMAGE
2216 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed04.html = IMAGE
2217 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed05.html = IMAGE
2218 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed06.html = IMAGE
2219 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted04.html = IMAGE
2220 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted05.html = IMAGE
2221 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted06.html = IMAGE
2222 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble04.html = IMAGE
2223 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble05.html = IMAGE
2224 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble06.html = IMAGE
2225 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble07.html = IMAGE
2226 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble08.html = IMAGE
2227 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble09.html = IMAGE
2228
2229 // Need to implement EditorClient::requestCheckingOfString()
2230 // Overriden with 66682
2231 // BUGWK41423 WIN LINUX : editing/spelling/spellcheck-paste.html = TEXT
2232
2233 // Flaky tests.
2234 BUGCR44345 LINUX : svg/zoom/text/zoom-hixie-mixed-009.xml = IMAGE PASS
2235 BUGCR44346 LINUX : svg/zoom/page/zoom-hixie-mixed-009.xml = IMAGE PASS
2236 BUGCR44347 LINUX : svg/hixie/mixed/009.xml = IMAGE PASS
2237 BUGCR48139 LINUX : fast/js/comparison-operators-less.html = CRASH PASS
2238 BUGCR48144 LINUX : fast/js/activation-object-function-lifetime.html = CRASH PASS
2239
2240 // Failing/flaky.
2241 BUGCR48239 : fast/js/function-apply.html = TEXT
2242 BUGCR48239 WIN LINUX : fast/js/function-apply-aliased.html = TEXT PASS
2243 BUGCR48239 : fast/js/function-apply-many-args.html = TEXT
2244
2245 // The error gives a different line number than upstream.  Maybe a V8/JSC
2246 // difference?
2247 BUGCR48452 : svg/custom/use-font-face-crash.svg = FAIL
2248
2249 BUGCR48668 MAC : svg/W3C-SVG-1.1/struct-use-01-t.svg = FAIL
2250
2251 // These ietestcenter tests still don't pass. Careful before removing these
2252 // that the baselines aren't incorrect
2253 // (like in: https://bugs.webkit.org/show_bug.cgi?id=42215)
2254 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-1.html = TEXT
2255 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-2.html = TEXT
2256 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-1.html = TEXT
2257 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-2.html = TEXT
2258 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-1.html = TEXT
2259 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-2.html = TEXT
2260 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-3.html = TEXT
2261 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-4.html = TEXT
2262 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-5.html = TEXT
2263 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-7.html = TEXT
2264 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-178.html = TEXT
2265 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-179.html = TEXT
2266 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-180.html = TEXT
2267 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-10.html = TEXT
2268 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-18.html = TEXT
2269 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-34.html = TEXT
2270 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.6.html = TEXT
2271 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.1-1.html = TEXT
2272 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.2-1.html = TEXT
2273 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.3-1.html = TEXT
2274 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.4-1.html = TEXT
2275 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.5-1.html = TEXT
2276 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-212.html = TEXT
2277 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-213.html = TEXT
2278 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-214.html = TEXT
2279 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-215.html = TEXT
2280
2281 BUGCR49029 WIN LINUX MAC : fast/js/object-literal-syntax.html = TEXT
2282
2283 BUGCR48859 WIN : fast/inline/continuation-outlines-with-layers-2.html = IMAGE+TEXT
2284
2285 // Somehow rebaseline in http://trac.webkit.org/changeset/63196 failed.
2286 // Need investigation.
2287 BUGWK38016 WIN : svg/custom/foreign-object-skew.svg = FAIL
2288
2289 BUGWK42241 LINUX : svg/custom/text-rotated-gradient.svg = IMAGE PASS
2290
2291 // These tests all fail because the expected output is wrong. The
2292 // reason is that JSC does not currently implement Object.freeze and
2293 // Object.isFrozen. These test has intentionally been marked as FAIL,
2294 // which makes it easy to fix this when webkit implements these ES5 features.
2295 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-21.html = FAIL
2296 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-24.html = FAIL
2297 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-1.html = FAIL
2298 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-2.html = FAIL
2299 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-1.html = FAIL
2300 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-1.html = FAIL
2301 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-2.html = FAIL
2302 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-1.html = FAIL
2303 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-1.html = FAIL
2304 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-2.html = FAIL
2305 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-3.html = FAIL
2306 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-4.html = FAIL
2307 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-5.html = FAIL
2308 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-6.html = FAIL
2309 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-7.html = FAIL
2310 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-8.html = FAIL
2311 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-9.html = FAIL
2312 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-10.html = FAIL
2313 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-11.html = FAIL
2314 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-12.html = FAIL
2315 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-13.html = FAIL
2316 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-14.html = FAIL
2317 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-15.html = FAIL
2318 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-16.html = FAIL
2319 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-17.html = FAIL
2320 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-18.html = FAIL
2321 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-19.html = FAIL
2322 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-20.html = FAIL
2323 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-21.html = FAIL
2324 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-22.html = FAIL
2325 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-23.html = FAIL
2326 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-24.html = FAIL
2327 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-25.html = FAIL
2328 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-26.html = FAIL
2329 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-27.html = FAIL
2330 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-6.html = FAIL
2331
2332 // These tests all fail because the expected output is wrong. The
2333 // reason is that JSC does not currently implement Object.seal and
2334 // Object.isSealed. These test has intentionally been marked as FAIL,
2335 // which makes it easy to fix this when webkit implements these ES5 features.
2336 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-1.html = FAIL
2337 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-2.html = FAIL
2338 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-1.html = FAIL
2339 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-1.html = FAIL
2340 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-10.html = FAIL
2341 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-11.html = FAIL
2342 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-12.html = FAIL
2343 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-13.html = FAIL
2344 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-14.html = FAIL
2345 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-15.html = FAIL
2346 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-16.html = FAIL
2347 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-17.html = FAIL
2348 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-18.html = FAIL
2349 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-19.html = FAIL
2350 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-2.html = FAIL
2351 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-20.html = FAIL
2352 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-21.html = FAIL
2353 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-22.html = FAIL
2354 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-23.html = FAIL
2355 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-24.html = FAIL
2356 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-25.html = FAIL
2357 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-26.html = FAIL
2358 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-27.html = FAIL
2359 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-3.html = FAIL
2360 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-4.html = FAIL
2361 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-5.html = FAIL
2362 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-6.html = FAIL
2363 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-7.html = FAIL
2364 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-8.html = FAIL
2365 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-9.html = FAIL
2366 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-5.html = FAIL
2367 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-20.html = FAIL
2368 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-23.html = FAIL
2369 BUGWK42371 : ietestcenter/Javascript/15.2.3.4-4-2.html = FAIL
2370 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-1.html = FAIL
2371 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-2.html = FAIL
2372 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-1.html = FAIL
2373
2374 // These tests all fail because the expected output is wrong. The
2375 // reason is that JSC does not currently implement Function.prototype.bind
2376 // These test has intentionally been marked as FAIL, which makes it easy
2377 // to fix this when webkit implements this ES5 feature.
2378 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-38.html = FAIL
2379 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-0-1.html = FAIL
2380 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-0-2.html = FAIL
2381 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-1.html = FAIL
2382 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-2.html = FAIL
2383 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-3.html = FAIL
2384 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-4.html = FAIL
2385 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-5.html = FAIL
2386 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-15-1.html = FAIL
2387 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-15-2.html = FAIL
2388 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-16-1.html = FAIL
2389 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-1.html = FAIL
2390 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-2.html = FAIL
2391 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-3.html = FAIL
2392 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-4.html = FAIL
2393 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-5.html = FAIL
2394 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-6.html = FAIL
2395 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-7.html = FAIL
2396 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-8.html = FAIL
2397 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-9.html = FAIL
2398 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-8-1.html = FAIL
2399 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-8-2.html = FAIL
2400 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-9-1.html = FAIL
2401 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-9-2.html = FAIL
2402
2403 BUGWK42428 LINUX WIN : svg/W3C-SVG-1.1/filters-conv-01-f.svg = IMAGE+TEXT
2404
2405 // Need setPrinting.
2406 BUGWK20011 : printing/setPrinting.html = FAIL
2407
2408 // Needs V8 change.
2409 BUGCR49343 : fast/js/reserved-words-as-property.html = TEXT
2410
2411 BUGWK42598 : http/tests/misc/401-alternative-content.php = TEXT
2412 BUGWK42598 : http/tests/xmlhttprequest/failed-auth.html = TEXT
2413
2414 BUGWK42769 : http/tests/xmlhttprequest/remember-bad-password.html = TEXT
2415 BUGWK42769 : http/tests/security/401-logout/401-logout.php = TIMEOUT
2416
2417 // Flaky since at least chromium r52834, WebKit r63615.
2418 BUGCR49970 : platform/chromium/plugins/call-as-function.html = PASS TEXT
2419
2420 // Flaky since WebKit r63994
2421 BUGWK42964 WIN LINUX : tables/mozilla_expected_failures/bugs/bug89315.html = PASS FAIL
2422
2423 // Fails since WebKit r64156
2424 BUGWK43086 : fast/canvas/canvas-ImageData-behaviour.html = TEXT
2425
2426 // Application Cache Quotas
2427 BUGWK43459 : http/tests/appcache/origin-quota.html = TEXT MISSING
2428
2429 // Fixed only on Mac
2430 // This test has not landed yet, though the fix has.
2431 //BUGWK41968 LINUX WIN : svg/hittest/svg-rect-hit.html = TEXT
2432
2433 // Need to support DeviceMotion.
2434 BUGCR51416 : fast/dom/DeviceMotion/window-property.html = TEXT
2435
2436 // Slow test introduced in r64817
2437 BUGCR51571 WIN : http/tests/misc/bad-charset-alias.html = TIMEOUT PASS
2438
2439 BUGCR51869 : http/tests/websocket/tests/frame-length-overflow.html = TEXT PASS
2440
2441 BUGCR51854 WIN SLOW : http/tests/storage/callbacks-are-called-in-correct-context.html = PASS
2442
2443 // Regressions from r65229
2444 BUGWK43912 WIN LINUX : svg/batik/masking/maskRegions.svg = IMAGE
2445 BUGWK43912 WIN LINUX : svg/custom/grayscale-gradient-mask.svg = IMAGE
2446 BUGWK43912 WIN LINUX : svg/custom/absolute-sized-content-with-resources.xhtml = IMAGE
2447
2448 // Times out frequently since the test was added
2449 BUGCR52017 MAC LINUX : http/tests/misc/isindex-with-no-form.html = PASS TIMEOUT
2450
2451 // Probably http://trac.webkit.org/changeset/65381
2452 // This test causes the next one to run to ASSERT
2453 BUGWK44079 DEBUG SKIP : fast/events/popup-allowed-from-gesture-initiated-form-submit.html = PASS
2454
2455 // Flaky. Not sure when it started to fail.
2456 BUGCR52572 WIN LINUX DEBUG : http/tests/misc/image-blocked-src-change.html = PASS TEXT
2457
2458 // Started to crash around Chromium r56408.
2459 BUGCR52573 LINUX RELEASE : fast/js/array-every.html = PASS CRASH
2460
2461 BUGWK44199 : perf = PASS TEXT
2462 BUGWK44199 DEBUG : perf/array-binary-search.html = PASS TEXT TIMEOUT
2463
2464 // Failing after http://trac.webkit.org/changeset/65665/
2465 BUGWK44278 WIN LINUX : svg/transforms/text-with-mask-with-svg-transform.svg = IMAGE+TEXT
2466
2467 // Clip paths aren't working after http://trac.webkit.org/changeset/65729
2468 BUGWK44341 WIN LINUX : svg/clip-path/clip-path-pixelation.svg = IMAGE+TEXT
2469 BUGWK44341 WIN LINUX : svg/clip-path/clip-path-childs-clipped.svg = IMAGE
2470
2471 // Flaky on Linux
2472 BUGCR53131 LINUX : fast/js/array-iterate-backwards.html = CRASH PASS
2473
2474 // new or failing since WebKit rev. 65740:65800
2475 // This test causes the DRT to crash. 
2476 BUGCR53073 DEBUG SKIP : storage/change-version.html = CRASH PASS
2477 BUGCR53073 LINUX : svg/custom/clip-path-units-changes.svg = TEXT PASS
2478
2479 // r66144 added tests to test user scripts on special documents, and Linux can't
2480 // pass them because they rely on QuickTime being installed. We wontfix these
2481 // tests and let the Mac/Win coverage ensure that the (cross-platform)
2482 // special-document machinery still works.
2483 BUGCR53546 WONTFIX LINUX : userscripts/user-script-video-document.html = TEXT
2484
2485 // These tests are flaky on Mac and Linux.
2486 BUGCR53554 MAC LINUX : svg/W3C-SVG-1.1/fonts-elem-07-b.svg = PASS IMAGE
2487 BUGCR53554 MAC LINUX : svg/custom/svg-fonts-without-missing-glyph.xhtml = PASS IMAGE
2488
2489 // New test, need to verify if it's safe to rebaseline.
2490 BUGWK44770 WIN LINUX : svg/repaint/filter-repaint.svg = IMAGE+TEXT CRASH
2491
2492 // Full Screen JS API is not yet enabled.
2493 BUGWK44797 : fullscreen = FAIL
2494
2495 // Not focusing an anchor when tab is pressed.
2496 BUGWK45061 : fast/forms/focus2.html = FAIL
2497
2498 BUGCR54330 MAC : fast/forms/input-spinbutton-capturing.html = TEXT PASS
2499 BUGCR54331 MAC : fast/forms/input-number-events.html = TEXT PASS
2500 BUGCR54333 WIN LINUX : fast/replaced/embed-display-none.html = PASS TIMEOUT
2501 BUGCR54348 LINUX : http/tests/security/xssAuditor/dom-write-innerHTML.html = PASS TEXT
2502
2503 // New test in r66740
2504 BUGWK45193 LINUX : fast/text/decomposed-after-stacked-diacritics.html = TEXT CRASH
2505
2506 // WebKit r67068
2507 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-dom-azimuth-attr.html = IMAGE
2508 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-dom-elevation-attr.html = IMAGE
2509 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-svgdom-azimuth-prop.html = IMAGE
2510 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-svgdom-elevation-prop.html = IMAGE
2511
2512 // Regressions from webkit r67182
2513 BUGWK45527 WIN LINUX : fast/dom/replaceChild.html = IMAGE
2514 BUGWK45527 MAC RELEASE : fast/dom/replaceChild.html = IMAGE
2515
2516 // Regression from r67285
2517 BUGWK45623 WIN LINUX : fast/dynamic/first-letter-display-change.html = IMAGE
2518
2519 // New tests added in r67376
2520 BUGWK45652 : fast/viewport/ = TEXT
2521 BUGWK45652 SKIP : fast/viewport/viewport-65.html = TEXT
2522 BUGWK45652 SKIP : fast/viewport/viewport-82.html = TEXT
2523 BUGWK45652 SKIP : fast/viewport/viewport-84.html = TEXT
2524 BUGWK45652 SKIP : fast/viewport/viewport-87.html = TEXT
2525 BUGWK45652 SKIP : fast/viewport/viewport-126.html = TEXT
2526 BUGWK45652 SKIP : fast/viewport/viewport-127.html = TEXT
2527 BUGWK45652 SKIP : fast/viewport/viewport-128.html = TIMEOUT TEXT
2528
2529 BUGWK45667 : fast/files/read-file-async.html = CRASH PASS
2530 BUGWK45667 LINUX : fast/files/read-blob-async.html = CRASH PASS
2531
2532 BUGWK45737 DEBUG SLOW : fast/frames/frame-limit.html = PASS
2533
2534 // Regressions from webkit roll r67178:t67358
2535 BUGDPRANKE WIN LINUX DEBUG : fast/forms/select-set-length-with-mutation-remove.html = TIMEOUT PASS
2536 BUGDPRANKE LINUX DEBUG : http/tests/incremental/slow-utf8-text.pl = TIMEOUT PASS
2537
2538 // BUGCR60845 : Adding the sleep  may improves the stablility
2539 BUGDPRANKE BUGCR60845 WIN LINUX : media/video-poster.html = PASS TEXT
2540
2541 BUGWEBGL : fast/canvas/webgl/css-webkit-canvas-repaint.html = IMAGE
2542 BUGWEBGL : fast/canvas/webgl/css-webkit-canvas.html = IMAGE
2543 BUGWEBGL WIN : fast/canvas/webgl/tex-image-and-sub-image-2d-with-array-buffer-view.html = CRASH PASS
2544 BUGWEBGL WIN DEBUG : fast/canvas/webgl/texture-complete.html = PASS TEXT
2545 BUGWEBGL : fast/canvas/webgl/read-pixels-test.html = TIMEOUT
2546
2547 // These three failures are due to Mesa bugs
2548 BUGWEBGL : fast/canvas/webgl/gl-uniform-arrays.html = TEXT
2549 BUGWEBGL : fast/canvas/webgl/point-size.html = TEXT
2550
2551 // Failing after r75175
2552 BUGWEBGL : fast/canvas/webgl/glsl-conformance.html = CRASH
2553
2554 // These were not fixed by the Mesa 7.9 upgrade. Need to investigate.
2555 BUGCR60651 WIN : fast/canvas/webgl/gl-object-get-calls.html = TIMEOUT PASS
2556 // BUGCR60651 WIN : fast/canvas/webgl/glsl-conformance.html = TIMEOUT FAIL
2557 BUGCR60651 WIN : fast/canvas/webgl/uniform-location.html = TIMEOUT CRASH
2558 BUGCR60651 LINUX MAC : fast/canvas/webgl/uniform-location.html = TEXT
2559
2560 BUG_AUTO LINUX WIN DEBUG : animations/suspend-resume-animation.html = PASS TEXT
2561 BUG_AUTO LINUX RELEASE : animations/3d/transform-origin-vs-functions.html = PASS TEXT
2562 BUG_AUTO WIN DEBUG : animations/3d/transform-origin-vs-functions.html = PASS TEXT
2563 BUG_AUTO WIN DEBUG : animations/multiple-keyframes.html = PASS TEXT
2564
2565 // Seems to have been crashing intermittently for as long as we have test history.
2566 BUGCR62741 WIN LINUX DEBUG : svg/clip-path/clip-path-text-and-stroke.svg = CRASH PASS
2567
2568 // nodesFromRect() removed from Document.idl and test skipped on other platforms at r68345.
2569 BUGWK46596 : fast/dom/nodesFromRect-basic.html = TIMEOUT
2570
2571 // Possibly regressed within 68216:68246 (flakiness rate increased)
2572 BUGCR57056 LINUX : svg/custom/clip-path-referencing-use2.svg = PASS FAIL
2573 BUGCR57056 LINUX : svg/custom/circular-marker-reference-4.svg = PASS FAIL
2574
2575 // Flaky since http://trac.webkit.org/changeset/68440 (where this test added at).
2576 BUGWK46689 : fast/dom/HTMLElement/class-list.html = TEXT PASS
2577
2578 // Flaky since r68438:r68445 or before that.
2579 BUGWK46693 MAC : fast/repaint/repaint-svg-after-style-change.html = TEXT
2580
2581 // New test; was added in http://trac.webkit.org/changeset/68520
2582 BUGWK46735 WIN : platform/win/plugins/window-geometry-initialized-before-set-window.html = TEXT
2583
2584 // New failures introduced in 68854.
2585 BUGWK46951 : fast/url/segments-from-data-url.html = TEXT
2586 BUGWK46951 : fast/url/segments.html = TEXT
2587
2588 // New failure introduced in 68896.
2589 BUGWK44406 : http/tests/appcache/foreign-fallback.html = PASS FAIL CRASH
2590
2591 // This test starts to timeout during build bots were down between 68880:68920
2592 BUG_HCLAM WIN : fast/css/acid2-pixel.html = TIMEOUT PASS
2593
2594 BUGCR62738 BUGCR60845 WIN LINUX : media/video-size.html = PASS TEXT
2595
2596 // Unexpected timeout in these tests.
2597 BUG_HCLAM : http/tests/css/border-image-loading.html = TEXT TIMEOUT PASS
2598 BUG_HCLAM : http/tests/css/css-image-loading.html = TEXT TIMEOUT PASS
2599 BUG_HCLAM : http/tests/css/mask-image-loading.html = TEXT TIMEOUT PASS
2600 BUG_HCLAM : http/tests/css/reflection-mask-image-loading.html = TEXT TIMEOUT PASS
2601
2602 BUG_HCLAM LINUX : svg/text/text-intro-05-t.svg = IMAGE PASS
2603
2604 // Added by r69084
2605 BUGCR57934 WIN : http/tests/appcache/fail-on-update-2.html = PASS TEXT TIMEOUT
2606
2607 // Failing since r69181. Verified as legitimate by looking at the results
2608 // of the SVG rendering.
2609 BUGCR58194 LINUX : svg/filters/sourceAlpha.svg = IMAGE
2610 BUGCR58195 WIN LINUX : svg/filters/feDisplacementMap.svg = IMAGE
2611
2612 // Issues starting from
2613 // http://build.chromium.org/buildbot/waterfall.fyi/builders/Webkit%20%28webkit.org%29/builds/35997
2614 BUGCR58333 WIN LINUX : fast/css/font-face-download-error.html = TEXT PASS
2615
2616 // Flakiness first seen
2617 // http://build.chromium.org/buildbot/waterfall.fyi/builders/Webkit%20%28webkit.org%29/builds/35995
2618 BUGCR58212 WIN : http/tests/appcache/main-resource-redirect.html = TEXT TIMEOUT PASS
2619
2620 BUGCR58257 WIN : http/tests/misc/last-modified-parsing.html = PASS TEXT TIMEOUT
2621
2622 // Flaky because they snapshot and animation.
2623 // Started failing on Mac since 69314:69342.
2624 BUGCR10479 : svg/hixie/perf/001.xml = IMAGE PASS
2625 BUGCR10479 : svg/hixie/perf/002.xml = IMAGE PASS
2626
2627 // New test from Webkit r69326.
2628 BUGCR58337 : platform/gtk/fonts/fontconfig-synthetic-bold.html = MISSING
2629
2630 // From r69334. Mask seems broken on the reflected image.
2631 BUGCR58358 WIN LINUX : fast/css/transformed-mask.html = IMAGE+TEXT
2632
2633 // FileWriter isn't in TestShell yet.
2634 BUGCR58587 SKIP : fast/filesystem/file-writer-gc-blob.html = FAIL
2635
2636 // Failing somewhere between after Webkit r69367 and r69417.
2637 BUGCR58970 LINUX : svg/text/text-tselect-02-f.svg = IMAGE PASS
2638 BUGCR58931 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-17-b.svg = IMAGE PASS
2639
2640 // Failing from around r62021
2641 BUGCR15797 WIN : fast/dom/object-embed-plugin-scripting.html = TIMEOUT PASS
2642
2643 // Failing from r69420, mac failing from r71493:r71496
2644 BUGCR58735 SLOW : http/tests/misc/prefetch-purpose.html = PASS
2645
2646 // V8 does not implement ECMAScript strict mode
2647 BUGCR58936 : fast/js/basic-strict-mode.html = TEXT
2648 BUGCR58936 : fast/js/numeric-escapes-in-string-literals.html = TEXT
2649
2650 // Started failing around Webkit r69541 in this build.
2651 // http://build.chromium.org/buildbot/waterfall.fyi/builders/Webkit%20Linux%20%28webkit.org%29/builds/40424
2652 BUGCR58942 : fast/dom/prototype-inheritance.html = TEXT
2653
2654 // Started failing at Webkit r69628.
2655 BUGWK47578 : printing/simultaneous-position-float-change.html = IMAGE+TEXT
2656
2657
2658 // We don't support layoutTestController.nodesFromRect so this test just times out
2659 BUGWK46600 SKIP : fast/dom/nodesFromRect-links-and-text.html = TEXT
2660 BUGWK46600 SKIP : fast/dom/nodesFromRect-inner-documents.html = TEXT
2661
2662 // Many flaky SVG tests
2663 BUGCR59671 LINUX : svg/W3C-SVG-1.1-SE/pservers-grad-17-b.svg = IMAGE+TEXT PASS
2664 BUGCR59671 LINUX : svg/custom/convolution-crash.svg = PASS TEXT
2665 BUGCR59671 LINUX : svg/custom/focus-ring.svg = IMAGE+TEXT PASS
2666 BUGCR59671 LINUX : svg/custom/repaint-on-constant-size-change.svg = IMAGE PASS
2667 BUGCR59671 LINUX : svg/carto.net/slider.svg = IMAGE PASS
2668
2669 // Needs investigation
2670 BUGJAMESR LINUX WIN : fast/text/international/vertical-text-glyph-test.html = IMAGE+TEXT
2671 BUGJAMESR MAC : fast/text/international/vertical-text-glyph-test.html = IMAGE
2672 BUGJAMESR LINUX WIN : fast/text/international/vertical-text-metrics-test.html = TEXT
2673
2674 // Added in WebKit r69755, failed immediately.
2675 BUGJAPHET WIN LINUX : fast/canvas/canvas-currentColor.html = TEXT
2676
2677 // Added in WebKit r69749, failed immediately due to KURL/KURLGoogle differences.
2678 BUGJAPHET : fast/dom/anchor-getParameter.html = TEXT
2679
2680 // Added in Webkit r69707 without expected results.
2681 BUGJAPHET : platform/gtk/accessibility/aria-table-hierarchy.html = MISSING
2682
2683 // Added in WebKit r69824, failed immediately due to KURL/KURLGoogle differences.
2684 BUGJAPHET : fast/dom/HTMLAnchorElement/set-href-attribute-prevents-rebase.html = TEXT
2685
2686 // r69833, JSC/V8 Date parsing differences
2687 BUGJAPHET : fast/js/date-parse-test.html = TEXT
2688
2689 // Added in WebKit r70265
2690 BUGWK48034 : platform/win/plugins/npn-invalidate-rect-invalidates-window.html = TEXT
2691
2692 // Have been flaky for a long time.
2693 BUGWK48143 : svg/dom/altGlyph-dom.xhtml = CRASH PASS
2694 BUGWK48256 WIN LINUX : fast/multicol/float-multicol.html = IMAGE+TEXT PASS
2695 BUGWK48263 : media/adopt-node-crash.html = TIMEOUT PASS
2696 BUGWK48341 : svg/W3C-SVG-1.1/masking-intro-01-f.svg = CRASH PASS
2697 BUGWK48352 : fast/blockflow/block-level-images.html = IMAGE PASS
2698
2699 // Vertical text needs to be implemented in platforms other than OS X.
2700 BUGCR65877 LINUX WIN : fast/blockflow/border-vertical-lr.html = IMAGE+TEXT
2701 BUGCR65877 LINUX WIN : fast/blockflow/japanese-lr-selection.html = IMAGE+TEXT
2702 BUGCR65877 LINUX WIN : fast/blockflow/japanese-rl-selection.html = IMAGE+TEXT
2703 BUGCR65877 WIN : fast/blockflow/broken-ideographic-font.html = IMAGE
2704 BUGCR65877 LINUX : fast/blockflow/broken-ideographic-font.html = IMAGE+TEXT
2705 BUGCR65877 LINUX WIN : fast/blockflow/vertical-font-fallback.html = IMAGE+TEXT
2706 BUGCR65877 LINUX WIN : fast/blockflow/broken-ideograph-small-caps.html = IMAGE
2707 BUGCR65877 LINUX WIN : fast/blockflow/Kusa-Makura-background-canvas.html = IMAGE+TEXT
2708
2709 // New test, introduced by http://trac.webkit.org/changeset/70813 with only platform/mac baselines.
2710 BUGWK61161 LINUX WIN : fast/blockflow/border-image-horizontal-bt.html = IMAGE+TEXT
2711 BUGWK61161 LINUX WIN : fast/blockflow/border-image-vertical-lr.html = IMAGE+TEXT
2712 BUGWK61161 LINUX WIN : fast/blockflow/border-image-vertical-rl.html = IMAGE+TEXT
2713
2714 // New test, added in http://trac.webkit.org/changeset/70814.
2715 // This test was removed by revert of r70814, but keep it for now.
2716 //BUGWK61166 LINUX MAC WIN : media/video-seek-by-small-increment.html = TEXT
2717
2718 // These tests started failing presumably after r70850
2719 BUGWK48627 MAC : fast/invalid/missing-end-tag.xhtml = IMAGE
2720 BUGWK48627 MAC : svg/custom/createImageElement2.xhtml = IMAGE
2721
2722 // New test, seems V8 differs from JSC here.
2723 // Added by http://trac.webkit.org/changeset/70910
2724 BUGWK61246 : fast/js/interpreter-no-activation.html = TEXT
2725
2726 // Failures after WebKit roll 70949:71000
2727 BUGCR61406 : svg/dynamic-updates/SVGFEColorMatrixElement-svgdom-values-prop.html = IMAGE+TEXT
2728 BUGCR61406 : svg/dynamic-updates/SVGFEColorMatrixElement-svgdom-type-prop.html = IMAGE
2729 BUGCR61406 WIN LINUX : svg/dynamic-updates/SVGFETurbulenceElement-svgdom-baseFrequency-prop.html = IMAGE
2730 // from http://trac.webkit.org/changeset/53086 (expectation changed in above WK roll, was IMAGE+TEXT)
2731 BUGCR32153and61406 WIN LINUX : svg/dynamic-updates/SVGTextElement-svgdom-rotate-prop.html = IMAGE
2732
2733 // Flaky: fails about 5% of the time.
2734 BUGCR31342 WIN RELEASE : security/block-test-no-port.html = TEXT PASS
2735
2736 // See also https://webkit.org/b/49045
2737 BUGCR61978 : svg/animations/animate-path-nested-transforms.html = CRASH PASS TEXT
2738 BUGCR61978 : svg/animations/animate-text-nested-transforms.html = PASS TEXT
2739
2740 // Added in WK r71416, doesn't look like it's applicable to Chromium
2741 WONTFIX SKIP WIN : platform/win/plugins/window-region-is-set-to-clip-rect.html = TEXT
2742
2743 // Added in WK r71418, doesn't look like it's applicable to Chromium
2744 WONTFIX SKIP : platform/win/plugins/draws-gradient.html = IMAGE+TEXT
2745
2746 // Added in WK r71424
2747 BUGCR62138 : animations/stop-animation-on-suspend.html = TEXT PASS
2748
2749 // test_shell and DRT do not have LayoutTestController.pageSizeAndMarginsInPixels
2750 BUGCR62515 : printing/page-format-data-display-none.html = TEXT
2751
2752 BUGCR60393 MAC : fast/selectors/001.html = PASS TIMEOUT
2753
2754 BUGCR61739 MAC WIN DEBUG SLOW : animations/suspend-resume-animation-events.html = CRASH PASS
2755
2756 BUGWK49477 WIN LINUX : fast/canvas/canvas-arc-360-winding.html = TEXT
2757
2758 // New tests added with http://trac.webkit.org/changeset/72472 and further.
2759 // See https://bugs.webkit.org/show_bug.cgi?id=51982 for more info.
2760 BUGCR63921 LINUX WIN : fast/canvas/canvas-fillPath-shadow.html = TEXT
2761 BUGCR63921 LINUX WIN : fast/canvas/canvas-fillPath-gradient-shadow.html = TEXT
2762 BUGCR63921 LINUX WIN : fast/canvas/canvas-fillPath-pattern-shadow.html = TEXT
2763 BUGCR63921 LINUX WIN : fast/canvas/canvas-fillPath-alpha-shadow.html = TEXT
2764
2765 // Mainly flaky with mac debug, but also intermittent crashes seen on linux release
2766 BUGCR64129 MAC LINUX : fast/files/revoke-blob-url.html = CRASH PASS
2767
2768 // Unknown reason. Was introduced at r72588
2769 BUG_LOISLO WIN LINUX : fast/canvas/canvas-drawImage-shadow.html = TEXT
2770
2771 BUGWK50112 WIN LINUX : fast/canvas/canvas-createPattern-fillRect-shadow.html = TEXT
2772
2773 BUGCR64647 WIN LINUX : fast/canvas/canvas-scale-drawImage-shadow.html = TEXT
2774
2775 BUGCR64672 : fast/regex/invalid-range-in-class.html = TEXT
2776
2777 BUGCR64733 : editing/text-iterator/findString.html = TEXT
2778
2779 // FIXME: Need to add tooling support for V8 bugs.
2780 BUGV8_953 : fast/regex/pcre-test-1.html = TIMEOUT
2781
2782 BUGCR50347 : plugins/get-user-agent-with-null-npp-from-npp-new.html = TEXT
2783
2784 BUGCR50282 MAC : fast/images/imagemap-case.html = IMAGE
2785 BUGCR50282 MAC : fast/images/imagemap-focus-ring-zoom.html = IMAGE
2786 BUGCR50282 MAC : fast/images/imagemap-focus-ring.html = IMAGE
2787 BUGCR50282 WIN LINUX : fast/images/imagemap-focus-ring-outline-color-explicitly-inherited-from-map.html = IMAGE+TEXT
2788 BUGCR50282 MAC : fast/images/imagemap-focus-ring-outline-color-explicitly-inherited-from-map.html = IMAGE
2789 BUGCR50282 WIN LINUX : fast/images/imagemap-focus-ring-outline-color-not-inherited-from-map.html = IMAGE+TEXT
2790 BUGCR50282 MAC : fast/images/imagemap-focus-ring-outline-color-not-inherited-from-map.html = IMAGE
2791 BUGCR50282 WIN LINUX : fast/images/imagemap-focus-ring-outline-color.html = IMAGE+TEXT
2792 BUGCR50282 MAC : fast/images/imagemap-focus-ring-outline-color.html = IMAGE
2793
2794 // Started to flake since http://src.chromium.org/viewvc/chrome?view=rev&revision=66937
2795 // (72440; 72514] range
2796 BUGCR64952 LINUX : fast/ruby/nested-ruby.html = IMAGE
2797
2798 // Selection is wrong.
2799 BUGCR64938 : editing/selection/5354455-1.html = TEXT
2800
2801 // New test in r73423.
2802 // Mac: Some image differences, and the message "scrolled to 3999,0" is missing.
2803 BUG_YUTAK MAC SLOW : fast/blockflow/Kusa-Makura-background-canvas.html = IMAGE+TEXT
2804
2805 // Regressed at r73423. All areas are painted green.
2806 BUGWK50734 : fast/repaint/positioned-document-element.html = IMAGE
2807
2808 // r73490. Win/Linux: Focus ring is not rendered. Mac: Just rebaseline?
2809 BUG_YUTAK WIN LINUX : fast/images/imagemap-circle-focus-ring.html = IMAGE+TEXT
2810 BUG_YUTAK MAC : fast/images/imagemap-circle-focus-ring.html = IMAGE
2811 BUG_YUTAK WIN LINUX : fast/images/imagemap-polygon-focus-ring.html = IMAGE+TEXT
2812 BUG_YUTAK MAC : fast/images/imagemap-polygon-focus-ring.html = IMAGE
2813
2814 // Started to produce text difference occasionally since r68528.
2815 BUGCR65279 LINUX DEBUG : fast/css/visited-link-hang.html = TEXT PASS
2816
2817 ///////////////////////////////////////////////////////////////////////////
2818 // Regressions caused by switching to DRT.
2819 ///////////////////////////////////////////////////////////////////////////
2820
2821 // DRT needs to schedule paints on invalidations like Chrome does.
2822 BUGCR62433 MAC LINUX : fast/backgrounds/animated-gif-as-background.html = IMAGE
2823 BUGCR62433 MAC LINUX : fast/images/gif-loop-count.html = IMAGE
2824
2825 // input-speech related failures
2826 BUG_DRT WIN MAC : fast/speech/input-appearance-numberandspeech.html = IMAGE
2827 BUG_DRT WIN MAC : fast/speech/input-appearance-searchandspeech.html = IMAGE
2828 BUG_DRT WIN MAC : fast/speech/input-appearance-speechbutton.html = IMAGE
2829
2830 // Similar to the above, input-search related failures
2831 BUG_DRT MAC : fast/css/input-search-padding.html = IMAGE
2832
2833 // Background color is wrong.
2834 BUG_DRT MAC : fast/backgrounds/solid-color-context-restore.html = IMAGE
2835 BUG_DRT MAC : fast/reflections/inline-crash.html = IMAGE
2836 // The background color of Apple Mac results also look wrong.
2837 BUG_DRT : http/tests/misc/slow-loading-image-in-pattern.html = IMAGE
2838
2839 // Extra didFinishDocumentLoadForFrame line.
2840 // The first didFinishDocumentLoadForFrame line is for the previous test document.
2841 BUG_DRT WIN MAC LINUX : http/tests/loading/preload-img-test.html = TEXT TIMEOUT PASS
2842
2843 // Flaky since 2010-09-17?
2844 BUGCR57950 WIN : svg/batik/text/verticalText.svg = CRASH PASS
2845
2846 // This is an error which test_shell can't find.
2847 BUGWK43960 WIN MAC LINUX : scrollbars/custom-scrollbar-with-incomplete-style.html = IMAGE
2848
2849 // media/video-* flakyness
2850 BUGCR59665 MAC : media/video-aspect-ratio.html = CRASH TIMEOUT PASS
2851 BUGCR59665 MAC : media/video-play-empty-events.html = CRASH TIMEOUT PASS
2852 BUGCR59665 MAC : media/video-src-change.html = CRASH TEXT PASS
2853 BUGCR59665 MAC : media/video-src.html = CRASH TIMEOUT PASS
2854 BUGCR59665 MAC : media/video-controls-rendering.html = CRASH FAIL TIMEOUT PASS
2855 BUGCR59665 MAC : media/video-delay-load-event.html = CRASH TIMEOUT PASS
2856 BUGCR59665 MAC : media/video-layer-crash.html = CRASH TIMEOUT PASS IMAGE
2857 // BUGCR59415 : setting SLOW in test_expectations.txt may fix the problem
2858 BUGCR59665 : media/video-loop.html = CRASH TIMEOUT PASS FAIL
2859 BUGCR59665 MAC : media/video-load-readyState.html = CRASH TIMEOUT PASS
2860 BUGCR59665 MAC : media/video-pause-immediately.html = CRASH PASS
2861 // This test needs enhanced eventSender.contextMenu() return value.
2862 // See https://bugs.webkit.org/show_bug.cgi?id=45021 for more info.
2863 // UNIMPLEMENTED for chrome
2864 BUGCR59665 BUGWK45021 SKIP : media/context-menu-actions.html = CRASH TIMEOUT PASS
2865 BUGCR54334 MAC LINUX DEBUG : media/video-timeupdate-during-playback.html = PASS TIMEOUT
2866 // Started flakily failing on win debug around r70597, WebKit r75136.
2867 BUGCR54334 WIN DEBUG : media/video-timeupdate-during-playback.html = PASS TEXT TIMEOUT
2868
2869 // Also fails on the mac port; see http://webkit.org/b/34331
2870 BUG_DRT : http/tests/media/video-referer.html = TEXT PASS
2871
2872 // Occasionally times out with, only under the DRT for Linux
2873 BUGCR58212 LINUX : http/tests/appcache/main-resource-redirect.html = PASS TIMEOUT
2874
2875 // Flaky on Linux with test_shell, fails consistently on Mac and Linux DRT
2876 BUGWK49265 MAC LINUX : svg/dynamic-updates/SVGFEConvolveMatrixElement-svgdom-edgeMode-prop.html = IMAGE PASS
2877
2878 BUGWK49406 MAC : svg/animations/animVal-basics.html = TIMEOUT
2879
2880 // Not investigated.
2881 BUG_DRT LINUX : animations/suspend-resume-animation-events.html = CRASH PASS
2882 BUG_DRT MAC LINUX : fast/css/line-height-determined-by-primary-font.html = IMAGE
2883 BUG_DRT MAC : fast/dom/Window/Plug-ins.html = TIMEOUT PASS
2884 BUG_DRT MAC : fast/dom/Window/alert-undefined.html = TIMEOUT PASS
2885 BUG_DRT MAC : fast/dom/beforeload/script-before-load-dynamic.html = TIMEOUT PASS
2886 BUG_DRT : fast/dynamic/window-resize-scrollbars-test.html = IMAGE+TEXT
2887 BUG_DRT LINUX : fast/events/select-onchange-crash.html = CRASH
2888 BUG_DRT DEBUG : fast/frames/calculate-round.html = TIMEOUT PASS
2889 BUG_DRT BUGCR43890 LINUX : fast/forms/implicit-submission.html = CRASH PASS TEXT
2890 BUG_DRT BUGCR21141 LINUX : fast/forms/select-double-onchange.html = CRASH FAIL
2891 BUG_DRT BUGCR21141 LINUX : fast/forms/select-script-onchange.html = CRASH FAIL
2892 BUG_DRT MAC : fast/images/extra-image-in-image-document.html = TIMEOUT PASS
2893 BUG_DRT MAC : fast/loader/font-face-empty.html = TIMEOUT PASS
2894 BUG_DRT MAC : fast/loader/for-window-event-onload-scripts.html = TIMEOUT PASS
2895 BUG_DRT MAC : fast/loader/fragment-after-redirect-gets-back-entry.html = TIMEOUT PASS
2896 BUG_DRT DEBUG : fast/loader/non-deferred-substitute-load.html = CRASH
2897 BUG_DRT WIN : fast/repaint/iframe-scroll-repaint.html = IMAGE
2898 BUG_DRT LINUX : fast/repaint/repaint-across-writing-mode-boundary.html = IMAGE
2899 BUG_DRT LINUX : fast/table/border-changes.html = TIMEOUT PASS
2900 BUG_DRT LINUX : fast/text/find-soft-hyphen.html = CRASH PASS
2901 BUG_DRT LINUX : fast/text/justification-padding-mid-word.html = PASS CRASH
2902 BUG_DRT MAC LINUX : http/tests/plugins/post-url-file.html = TIMEOUT
2903 BUG_DRT BUGCR8729 MAC LINUX : http/tests/multipart/invalid-image-data.html = IMAGE PASS
2904 BUG_DRT MAC : media/video-poster.html = TEXT PASS
2905 BUG_DRT LINUX : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = IMAGE+TEXT
2906 // Crashes with DRT and is a text failure with TestShell
2907 BUG_DRT : platform/gtk/fast/forms/menulist-typeahead-find.html = CRASH TEXT
2908 BUG_DRT : storage/domstorage/quota.html = TEXT
2909 BUG_DRT LINUX : svg/carto.net/selectionlist.svg = IMAGE PASS
2910 BUG_DRT WIN LINUX : svg/custom/use-instanceRoot-event-bubbling.xhtml = TIMEOUT PASS
2911 BUG_DRT MAC : svg/custom/clip-path-referencing-use2.svg = TEXT
2912 BUG_DRT : svg/custom/selectSubString.html = TIMEOUT
2913 BUG_DRT MAC : transforms/2d/zoom-menulist.html = IMAGE
2914
2915 // The test says you should see numbers, but we display letters.
2916 // It looks like we are missing the WebKit "WeightWatcher" fonts,
2917 // checked in as part of http://trac.webkit.org/changeset/34771.
2918 BUGCR10370 LINUX WIN : fast/css/font-weight-1.html = IMAGE+TEXT
2919
2920 // End DRT failures
2921 /////////////////////////////////////////////////////////////////////////////
2922
2923 BUGCR65012 LINUX : fast/dom/HTMLHeadElement/head-check.html = CRASH PASS
2924
2925 BUG_VITALYR : fast/images/gray-scale-jpeg-with-color-profile.html = MISSING
2926 BUG_VITALYR MAC : tables/mozilla/bugs/bug82946-2.html = IMAGE
2927
2928 // Mostly-flaky timeouts
2929 BUGCR66085 WIN LINUX : dom/html/level1/core/documentgetdoctypenodtd.html = PASS TIMEOUT
2930 BUGCR66085 LINUX : editing/selection/3690703-2.html = PASS TIMEOUT
2931 BUGCR66085 LINUX : fast/dom/Geolocation/disconnected-frame-permission-denied.html = PASS TIMEOUT
2932 BUGCR66085 WIN LINUX : fast/events/5056619.html = PASS TIMEOUT
2933 BUGCR66085 LINUX : fast/js/cyclic-proto.html = PASS TIMEOUT
2934 BUGCR66085 WIN LINUX : fast/replaced/css-content-and-webkit-mask-box-image-crash.html = PASS TIMEOUT
2935 BUGCR66085 WIN LINUX RELEASE : http/tests/media/reload-after-dialog.html = PASS TIMEOUT
2936 BUGCR66085 WIN DEBUG : http/tests/media/reload-after-dialog.html = PASS TIMEOUT
2937 BUGCR66085 LINUX DEBUG : http/tests/media/reload-after-dialog.html = CRASH
2938 BUGCR66085 LINUX : http/tests/media/video-cancel-load.html = PASS TIMEOUT
2939 BUGCR66085 LINUX : http/tests/xmlhttprequest/xmlhttprequest-test-send-flag.html = PASS TIMEOUT
2940 BUGCR66085 LINUX : media/constructors.html = PASS TIMEOUT
2941 BUGCR66085 : media/remove-from-document.html = PASS TIMEOUT
2942 BUGCR66085 : media/video-display-toggle.html = PASS TIMEOUT
2943 BUGCR66085 : media/video-play-pause-exception.html = PASS TIMEOUT
2944 BUGCR66085 : media/video-source.html = PASS TIMEOUT
2945 BUGCR66085 : media/video-source-moved.html = PASS TIMEOUT
2946 BUGCR66085 : media/video-source-type.html = PASS TIMEOUT
2947 BUGCR66085 LINUX : media/video-src-source.html = PASS TIMEOUT
2948
2949 // Flaky failures
2950 BUGCR66087 WIN : fast/dom/Geolocation/timestamp.html = PASS TEXT
2951 BUGCR66087 LINUX : http/tests/misc/iframe404.html = PASS TEXT
2952 BUGCR66087 WIN : http/tests/misc/no-last-modified.html = PASS TEXT
2953 BUGCR66087 WIN : http/tests/xmlhttprequest/open-async-overload.html = PASS TEXT
2954
2955 // Needs V8 investigation.  Skipped due to concern that this may be corrupting
2956 // memory and thus leading to unpredictable results.
2957 BUGCR66099 SKIP : fast/js/array-sort-modifying-tostring.html = TEXT CRASH TIMEOUT
2958
2959 BUGCR66466 MAC WIN DEBUG SLOW : perf/array-nested-loop.html = PASS TEXT
2960 BUGCR66554 WIN DEBUG : fast/js/kde/encode_decode_uri.html = CRASH PASS
2961
2962 BUGCR66683 WIN LINUX : fast/canvas/canvas-draw-canvas-on-canvas-shadow.html = TEXT
2963 BUGCR66682 WIN LINUX MAC : editing/spelling/spellcheck-paste.html = TEXT TIMEOUT
2964 BUGCR66686 : fast/loader/user-stylesheet-fast-path.html = TEXT
2965
2966 BUGCR66751 : http/tests/local/link-stylesheet-load-order-preload.html = TEXT TIMEOUT PASS
2967 BUGCR66751 : http/tests/local/link-stylesheet-load-order.html = TEXT TIMEOUT PASS
2968
2969 BUGCR66923 MAC : fast/css/focus-ring-detached.html = IMAGE
2970 BUGCR66923 MAC : fast/css/focus-ring-multiline.html = IMAGE
2971 BUGCR66979 WIN LINUX : fast/dom/global-constructors.html = TEXT PASS
2972
2973 // The test is just too slow and has never passed since on Dbg build.
2974 BUG_YURYS DEBUG SLOW : fast/overflow/lots-of-sibling-inline-boxes.html = PASS
2975 BUGCR67139 WIN MAC LINUX DEBUG : storage/close-during-stress-test.html = CRASH PASS
2976
2977 // These tests are flaky.
2978 BUGCR67209 WIN LINUX DEBUG : inspector/console-uncaught-exception-in-eval.html = CRASH TIMEOUT PASS
2979 BUGCR67209 WIN LINUX DEBUG : inspector/timeline-enum-stability.html = CRASH TIMEOUT PASS
2980 BUGCR67209 WIN LINUX DEBUG : inspector/console-clear.html = CRASH TIMEOUT PASS
2981 BUGCR67209 WIN LINUX DEBUG : inspector/styles-disable-then-delete.html = CRASH TIMEOUT PASS
2982
2983 // WebKit roll 74255:74308
2984 BUGCR67416 : fast/text/emphasis.html = FAIL
2985 BUGCR67416 : fast/text/emphasis-vertical.html = FAIL
2986 BUGCR67540 WIN LINUX : fast/text/emphasis-overlap.html = IMAGE+TEXT
2987 BUGCR67540 WIN LINUX : fast/text/emphasis-avoid-ruby.html = IMAGE
2988 BUGCR67540 WIN LINUX : fast/repaint/text-emphasis-h.html = IMAGE
2989 BUGCR67540 WIN LINUX : fast/repaint/text-emphasis-v.html = IMAGE
2990
2991 BUGCR67662 WIN LINUX RELEASE : http/tests/inspector/console-websocket-error.html = TEXT
2992 BUGCR67662 WIN LINUX DEBUG SLOW : http/tests/inspector/console-websocket-error.html = TEXT
2993 BUGCR68173 WIN LINUX RELEASE : http/tests/inspector/extensions-resources-redirect.html = TIMEOUT
2994 BUGCR68173 WIN LINUX DEBUG : http/tests/inspector/extensions-resources-redirect.html = CRASH TIMEOUT
2995
2996 BUGCR67442 WIN LINUX : fast/canvas/fillText-shadow.html = TEXT
2997
2998 // WebKit roll 74534:74545
2999 BUGWK51536 : fast/css/box-shadow.html = FAIL TIMEOUT
3000
3001 // WebKit roll 74667:74679
3002 BUGCR68067 LINUX DEBUG : fast/canvas/webgl/tex-image-with-format-and-type.html = TEXT PASS
3003
3004 BUGWK51720 DEBUG : http/tests/incremental/split-hex-entities.pl = CRASH PASS
3005 BUGCR64371 WIN RELEASE : http/tests/appcache/online-whitelist.html = TEXT
3006 BUGWK51721 DEBUG SLOW: fast/encoding/parser-tests.html = PASS
3007 BUGCR67463 MAC : editing/selection/caret-mode-paragraph-keys-navigation.html = TEXT
3008
3009 BUGCR68436 LINUX MAC DEBUG : fast/dom/DOMImplementation/createDocument-with-used-doctype.html = PASS TIMEOUT
3010 BUGCR68436 WIN DEBUG : fast/dom/DOMImplementation/createDocument-with-used-doctype.html = PASS TEXT TIMEOUT
3011 BUGCR68576 LINUX DEBUG : svg/batik/paints/patternPreserveAspectRatioA.svg = PASS TIMEOUT CRASH
3012 BUGCR68599 LINUX WIN : http/tests/security/mixedContent/insecure-css-in-main-frame.html = PASS TEXT
3013
3014 // Disabled scrollbars are rendered differently
3015 BUGWK52414 MAC : fast/body-propagation/overflow/001-xhtml.xhtml = IMAGE
3016 BUGWK52414 MAC : fast/body-propagation/overflow/001.html = IMAGE
3017 BUGWK52414 MAC : fast/body-propagation/overflow/005-declarative.xhtml = IMAGE
3018 BUGWK52414 MAC : fast/body-propagation/overflow/005-xhtml.xhtml = IMAGE
3019 BUGWK52414 MAC : fast/body-propagation/overflow/005.html = IMAGE
3020 BUGWK52414 MAC : fast/overflow/006.html = IMAGE
3021 BUGWK52414 MAC : fast/overflow/overflow-x-y.html = IMAGE
3022
3023 // Platforms that use Skia don't support elliptical gradients.
3024 BUGWK51841 : fast/gradients/css3-color-stop-units.html = IMAGE
3025 BUGWK51841 : fast/gradients/css3-color-stops.html = IMAGE
3026 BUGWK51841 : fast/gradients/css3-linear-angle-gradients.html = IMAGE
3027 BUGWK51841 : fast/gradients/css3-radial-gradients.html = IMAGE
3028 BUGWK51841 : fast/gradients/css3-radial-gradients2.html = IMAGE
3029 BUGWK51841 : fast/gradients/css3-radial-gradients3.html = IMAGE
3030 BUGWK51841 : fast/gradients/css3-repeating-radial-gradients.html = IMAGE
3031
3032 // This was introduced by r75077.
3033 BUGWK52082 LINUX MAC : fast/text/basic/014.html = IMAGE
3034 BUGWK52082 LINUX MAC : fast/text/midword-break-after-breakable-char.html = IMAGE
3035 BUGWK52082 LINUX : fast/text/capitalize-boundaries.html = IMAGE
3036 BUGWK52082 WIN : fast/text/basic/014.html = IMAGE+TEXT
3037 BUGWK52082 WIN : fast/text/midword-break-after-breakable-char.html = IMAGE+TEXT
3038
3039 // These were introduced by r75139
3040 BUGWK51989 WIN LINUX : fast/canvas/canvas-fillRect-gradient-shadow.html = TEXT
3041 BUGWK51989 MAC : svg/batik/text/textEffect.svg = IMAGE
3042 BUGWK51989 MAC : svg/batik/text/textEffect3.svg = IMAGE
3043 BUGWK51989 MAC : svg/css/composite-shadow-text.svg = IMAGE
3044 BUGWK51989 MAC : svg/custom/js-late-gradient-and-object-creation.svg = IMAGE
3045 BUGWK51989 MAC : svg/custom/js-late-gradient-creation.svg = IMAGE
3046 BUGWK51989 MAC : svg/text/selection-background-color.xhtml = IMAGE
3047 BUGWK51989 MAC : svg/text/selection-styles.xhtml = IMAGE
3048 BUGWK51989 MAC : svg/text/text-gradient-positioning.svg = IMAGE
3049
3050 // These have been flaky for as long as we have test history.
3051 BUGWK52064 WIN DEBUG : fast/events/overflow-events.html = PASS TEXT
3052 BUGWK52063 WIN DEBUG : http/tests/media/text-served-as-text.html = PASS TEXT TIMEOUT
3053 BUGWK52063 WIN : http/tests/navigation/ping-cross-origin.html = PASS TEXT TIMEOUT
3054 BUGWK52063 MAC SLOW : http/tests/navigation/ping-cross-origin.html = PASS
3055
3056 // These were flaky, now failing more consistently after r75169.
3057 BUGWK52061 DEBUG : transitions/suspend-transform-transition.html = IMAGE PASS
3058 BUGWK52061 DEBUG : transitions/change-values-during-transition.html = PASS TEXT
3059 BUGWK52061 DEBUG : transitions/interrupted-accelerated-transition.html = PASS TEXT
3060 BUGWK52061 DEBUG : transitions/transition-timing-function.html = PASS TEXT
3061
3062 // These will fail on the canaries until a chromium-side features_overrides.gypi change lands
3063 BUG_JAMESR : fast/animation = TEXT
3064
3065 // Failing since creation in http://trac.webkit.org/changeset/75308
3066 BUG_ABARTH : svg/text/caret-in-svg-text.xhtml = TEXT
3067
3068 // V8 test failures introduced by r75408
3069 BUGCR69181 : fast/js/exception-codegen-crash.html = FAIL
3070 BUGCR69181 : fast/js/kde/parse.html = FAIL
3071 BUGCR69181 : fast/js/large-expressions.html = FAIL
3072
3073 // Flaky on Linux since r75250
3074 BUGCR69300 LINUX : svg/batik/text/textOnPath.svg = IMAGE PASS
3075
3076 // Test added in r75567
3077 BUGWK52266 WIN : plugins/no-mime-with-valid-extension.html = TEXT
3078
3079 // Flaky since r75548; transformed character is occasionally corrupt
3080 BUGCR69411 LINUX : svg/custom/linking-a-03-b-transform.svg = IMAGE PASS
3081
3082 // New test added in r75720
3083 BUGCR69571 : plugins/destroy-on-setwindow.html = CRASH
3084
3085 // Failing after r75768
3086 BUGCR69639 : http/tests/loading/cross-origin-XHR-willLoadRequest.html = TEXT
3087
3088 // New test, added in r75852 for JSC, fails in V8
3089 BUGCR69736 : fast/js/js-continue-break-restrictions.html = TEXT
3090 BUGCR1 REBASELINE MAC : fast/events/offsetX-offsetY.html = TEXT
3091
3092 // Waiting to rebaseline
3093 BUG_DGLAZKOV : fast/forms/slider-mouse-events.html = TEXT