db0780a4ebfcf492f7c36efe37ed1fca20c48a6d
[WebKit-https.git] / LayoutTests / platform / chromium / test_expectations.txt
1 // This file consists of lines with specifications of what
2 // to expect from layout test cases. The test cases can be directories
3 // in which case the expectations apply to all test cases in that
4 // directory and any subdirectory. The format of the file is along the
5 // lines of:
6 //
7 // fast/js/fixme.js = FAIL
8 // fast/js/flaky.js = FAIL PASS
9 // fast/js/crash.js = CRASH TIMEOUT FAIL PASS
10 //
11 // The format of a test line is as follows:
12 // METADATA : relative/path/to/test.html = EXPECTATIONS
13 //
14 // Valid values for METADATA:
15 //
16 // BUG(CR|WK|V8_)[0-9]+: See this chromium/webkit/v8 bug for more information.
17 //                       Every test that isn't marked WONTFIX should have the
18 //                       appropriate BUG annotation.
19 // SKIP: Doesn't run the test.
20 // SLOW: The test takes a long time to run, but does not timeout indefinitely.
21 // WONTFIX: For tests that we never intend to pass on a given platform.
22 // DEBUG: Expectations apply only to the debug build.
23 // RELEASE: Expectations apply only to release build.
24 // LINUX/WIN/WIN-XP/WIN-VISTA/MAC: Expectations apply only to these platforms.
25 //
26 // Valid values for EXPECTATIONS:
27 //
28 // PASS: Test should pass
29 // CRASH: Test should crash
30 // TIMEOUT: Test should timeout
31 // IMAGE: Test will produce an incorrect image dump
32 // TEXT: Test will produce incorrect text output (either full or simplified)
33 // IMAGE+TEXT: Test will produce both incorrect text and images
34 // FAIL: Test will produce either incorrect text, images, or both
35 //
36 // If a line contains multiple expectations, it is considered "flakey",
37 // because it means that we're not producing consistent, reliable results.
38 //
39 // For example,
40 // LINUX : media = PASS FAIL
41 //
42 // The above means that all the media tests are flaky, but only on Linux.
43 //
44 // Other examples:
45 //
46 // SKIP : fast/js/no-good.js = TIMEOUT PASS
47 // DEBUG : fast/js/no-good.js = TIMEOUT PASS
48 // DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
49 // LINUX DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
50 // BUGCR1234 DEBUG MAC : fast/js/no-good.js = TIMEOUT PASS
51 //
52 // Notes:
53 // -A test cannot be both SLOW and TIMEOUT
54 // -A test can be included twice, but not via the same path.
55 // -If a test is included twice, then the more precise path wins.
56 // -CRASH tests cannot be WONTFIX
57
58 // -----------------------------------------------------------------
59 // SLOW TESTS
60 // -----------------------------------------------------------------
61
62 BUGCR24182 SLOW : fast/js/regexp-overflow.html = PASS
63 BUGCR24182 SLOW RELEASE : http/tests/misc/DOMContentLoaded-event.html = PASS
64 BUGCR24182 SLOW LINUX DEBUG : http/tests/misc/DOMContentLoaded-event.html = PASS
65 BUGCR24182 SLOW : http/tests/xmlhttprequest/simple-cross-origin-progress-events.html = PASS
66 BUGCR24182 SLOW : tables/mozilla/other/slashlogo.html = PASS
67 BUGCR24182 SLOW WIN RELEASE : tables/mozilla/bugs/bug113235-1.html = PASS
68 BUGCR24182 SLOW DEBUG : fast/js/toString-and-valueOf-override.html = PASS
69
70 // This tests is normally <1 second, but occasionally takes >20s.
71 BUGCR24182 SLOW WIN RELEASE : fast/dom/Window/webkitConvertPoint.html = PASS
72
73 BUGCR24182 WIN RELEASE SLOW : http/tests/loading/redirect-methods.html = PASS
74 BUGCR24182 SLOW MAC RELEASE : dom/html/level2/html/HTMLImageElement01.html = PASS
75 BUGCR24182 SLOW WIN RELEASE : http/tests/local/file-url-sent-as-referer.html = PASS
76 BUGCR24182 SLOW LINUX DEBUG : fast/xpath/4XPath/Borrowed/cz_20030217.html = PASS
77 BUGCR24182 SLOW WIN MAC DEBUG : tables/mozilla/bugs/45621.html = PASS
78 //BUGCR24852 started failing since webkit 49583
79 BUGCR24182 SLOW WIN : http/tests/security/xssAuditor/meta-tag-http-refresh-javascript-url.html = PASS
80 BUGCR24182 SLOW WIN RELEASE : http/tests/security/cross-origin-css.html = PASS
81 BUGCR24182 SLOW WIN RELEASE : fast/loader/local-CSS-from-local.html = PASS
82 BUGCR24182 WIN RELEASE SLOW : http/tests/incremental/split-hex-entities.pl = PASS
83 BUGCR24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/XMLHttpRequestException.html = PASS
84 BUGCR24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/connection-error-sync.html = PASS
85 BUGCR24182 WIN RELEASE SLOW : http/tests/loading/onload-vs-immediate-refresh.pl = PASS
86 BUGCR24182 SLOW : http/tests/cache/subresource-failover-to-network.html = PASS
87 BUGCR24182 WIN DEBUG SLOW : fast/parser/block-nesting-cap.html = PASS
88
89 // Usually <1s in release, ~1s in debug, but occasionally >5s in release.
90 BUGCR27335 WIN RELEASE : plugins/embed-attributes-setting.html = PASS TIMEOUT
91 BUGCR27335 WIN DEBUG SLOW : plugins/embed-attributes-setting.html = PASS
92
93 // --- collecting results for supported-xml-content-types.html ---
94 // was slow, started to timeout
95 BUGCR18702 WIN : http/tests/xmlhttprequest/supported-xml-content-types.html = PASS TIMEOUT
96
97 BUGCR36539 SLOW : http/tests/misc/uncacheable-script-repeated.html = PASS
98
99 BUGCR32018 SLOW : http/tests/websocket/tests/frame-lengths.html = PASS
100
101 // -----------------------------------------------------------------
102 // SKIPPED TESTS
103 // -----------------------------------------------------------------
104
105 // Since V8 is more interruptible than other engines, they use the standard
106 // long-running-script mechanism to handle very-long-running regexps too.
107 // See http://code.google.com/p/v8/issues/detail?id=287
108 WONTFIX SKIP : fast/js/regexp-overflow-too-big.html = TIMEOUT
109
110 // XHTML tests.  These tests seem like they work, but only because the
111 // expected output expects to see JS errors.  There is no point in running
112 // these tests, because they are giving us a false sense of testing that isn't
113 // really happening.  Furthermore, since they appear to pass if we do try to
114 // run them, we can't even list them as permanently expected to fail.
115 BUGCR24185 WONTFIX SKIP : dom/xhtml = PASS
116
117 // We do not want to support Legacy mac encodings on Windows/Linux.
118 // On Mac, we can support them by building platform/text/mac, but
119 // probably we don't want there, either.
120 WONTFIX SKIP WIN LINUX : fast/encoding/char-encoding-mac.html = FAIL
121
122 // Fails due to different window.close() rules.  We need to decide whether we
123 // ever expect to pass this.  Now also timing out.
124 BUGCR24189 WONTFIX SKIP : fast/dom/open-and-close-by-DOM.html = FAIL
125
126 // WML is still an inprogress feature upstream. Chromium does not build
127 // with WML support, so skip its tests.
128 WONTFIX SKIP : wml = FAIL
129 WONTFIX SKIP : http/tests/wml = FAIL
130 WONTFIX SKIP : fast/wml = FAIL
131
132 // These tests are based on the JSC JavaScript profiler. The V8 JavaScript
133 // profiler is in development and will use a different approach than JSC and
134 // most likely these tests will always be JSC specific.
135 WONTFIX SKIP : fast/profiler = FAIL TIMEOUT
136
137 // We use worker_uitests to run workers tests. Don't run them in test_shell.
138 WONTFIX SKIP : fast/workers = PASS TIMEOUT FAIL
139 WONTFIX SKIP : fast/files/workers = PASS TIMEOUT FAIL
140 WONTFIX SKIP : fast/filesystem/workers = PASS TIMEOUT FAIL
141 WONTFIX SKIP : http/tests/workers = PASS TIMEOUT FAIL
142 WONTFIX SKIP : http/tests/xmlhttprequest/workers = PASS TIMEOUT FAIL
143 WONTFIX SKIP : http/tests/eventsource/workers = PASS TIMEOUT FAIL
144 WONTFIX SKIP : http/tests/websocket/tests/workers/ = PASS TIMEOUT FAIL
145
146 // Page Cache - based tests. Chromium disables page cache because the WebKit page cache keeps previously
147 // loaded pages alive in memory to be able to quickly substitute them when user clicks History buttons.
148 // Chromium wants those to be separate navigations made via browser process to be able to make decision
149 // on which renderer process to use for each of them.
150 WONTFIX SKIP BUGCR19635 : fast/harness/use-page-cache.html = TIMEOUT FAIL
151 WONTFIX SKIP BUGCR19635 : fast/dom/Window/timer-resume-on-navigation-back.html = TIMEOUT FAIL
152 // Depends on page cache, as far as I can tell.
153 WONTFIX SKIP BUGCR19635 : fast/events/pageshow-pagehide-on-back-cached.html = TIMEOUT FAIL
154 WONTFIX SKIP BUGCR19635 : fast/events/pageshow-pagehide-on-back-cached-with-frames.html = TIMEOUT
155 WONTFIX SKIP BUGCR19635 : media/restore-from-page-cache.html = TIMEOUT
156 WONTFIX SKIP BUGCR19635 : loader/go-back-to-different-window-size.html = TIMEOUT TEXT
157 WONTFIX SKIP BUGCR19635 : fast/loader/crash-copying-backforwardlist.html = TEXT
158 WONTFIX SKIP BUGCR19635 : fast/harness/page-cache-crash-on-data-urls.html = TEXT
159
160 // Tests that rely on cross-process MessagePorts.  No point in running them in
161 // test_shell, since we'd have to use a completely different implementation from
162 // what is used in the browser.
163 WONTFIX SKIP : fast/events/message-channel-gc-2.html = FAIL
164 WONTFIX SKIP : fast/events/message-channel-gc-3.html = FAIL
165 WONTFIX SKIP : fast/events/message-channel-gc-4.html = FAIL
166 WONTFIX SKIP : fast/events/message-channel-gc.html = FAIL
167 WONTFIX SKIP : fast/events/message-channel-listener-circular-ownership.html = FAIL
168 WONTFIX SKIP : fast/events/message-port-clone.html = FAIL
169 WONTFIX SKIP : fast/events/message-port-deleted-document.html = FAIL
170 WONTFIX SKIP : fast/events/message-port-deleted-frame.html = FAIL
171 WONTFIX SKIP : fast/events/message-port-inactive-document.html = FAIL
172 WONTFIX SKIP : fast/events/message-port-no-wrapper.html = FAIL
173 WONTFIX SKIP : fast/events/message-port.html = FAIL
174 WONTFIX SKIP : fast/events/message-port-multi.html = FAIL
175 WONTFIX SKIP : http/tests/security/MessagePort/event-listener-context.html = FAIL
176
177 // Implement java testing harness.
178 BUGCR36681 SKIP : java = TEXT
179 // Chrome does not support Java LiveConnect.
180 WONTFIX SKIP : java/lc3 = TEXT
181
182 // this test doesn't make sense on Win or Mac.
183 // TODO: move to platform/chromium-linux/.
184 WONTFIX SKIP MAC WIN : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = FAIL
185
186
187 // -----------------------------------------------------------------
188 // WONTFIX TESTS
189 // -----------------------------------------------------------------
190
191 // This test is completely timing dependent.  It is testing the time
192 // between a key event and a search event.  You cannot count on this
193 // always being exactly the same.
194 WONTFIX DEBUG : fast/forms/search-event-delay.html = PASS TEXT
195 WONTFIX SLOW WIN RELEASE : fast/forms/search-event-delay.html = FAIL PASS
196 WONTFIX SLOW MAC RELEASE : fast/forms/search-event-delay.html = FAIL PASS CRASH
197 WONTFIX LINUX RELEASE : fast/forms/search-event-delay.html = FAIL PASS
198
199 // Chrome uses different keyboard accelerators from those used by Safari, so
200 // these tests will always fail.
201 // TODO(pinkerton): these should probably pass on Mac since we want Emacs
202 // keybindings but they currently do not.
203 WONTFIX LINUX WIN DEBUG : editing/pasteboard/emacs-cntl-y-001.html = FAIL
204 WONTFIX LINUX RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
205 WONTFIX SLOW WIN RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
206 WONTFIX : editing/pasteboard/emacs-ctrl-a-k-y.html = FAIL
207 WONTFIX : editing/pasteboard/emacs-ctrl-k-y-001.html = FAIL
208 WONTFIX : editing/input/emacs-ctrl-o.html = FAIL
209
210 // Checks for very kjs-specific garbage collector behavior.
211 // Would have to be implemented much differently to work in v8.
212 WONTFIX : fast/dom/gc-10.html = FAIL
213
214 // This fails because we're missing various useless apple-specific
215 // properties on the window object.
216 // This test also timeouts in Debug mode.
217 BUGCR24187 WONTFIX SLOW DEBUG : fast/dom/Window/window-properties.html = FAIL
218 BUGCR24187 WONTFIX SLOW WIN RELEASE : fast/dom/Window/window-properties.html = FAIL
219 BUGCR24187 WONTFIX LINUX MAC RELEASE : fast/dom/Window/window-properties.html = FAIL
220
221 // Safari specific test to ensure that JavaScript errors aren't logged when in
222 // private browsing mode.
223 WONTFIX : http/tests/security/cross-frame-access-private-browsing.html = FAIL
224
225 // Chromium doesn't implement private browsing in the renderer.
226 WONTFIX : plugins/private-browsing-mode.html = FAIL
227 WONTFIX : plugins/private-browsing-mode-2.html = TEXT
228
229 // We don't let anyone set status in the browser.
230 WONTFIX : plugins/set-status.html = TEXT
231
232 // We don't care about dashboard compatibility mode.
233 WONTFIX SKIP : http/tests/xmlhttprequest/default-content-type-dashboard.html = FAIL
234 WONTFIX SKIP : http/tests/xmlhttprequest/svg-created-by-xhr-disallowed-in-dashboard.html = FAIL
235 WONTFIX : svg/custom/embedded-svg-disallowed-in-dashboard.xml = FAIL
236 WONTFIX : svg/custom/manually-parsed-embedded-svg-disallowed-in-dashboard.html = FAIL
237 WONTFIX : svg/custom/manually-parsed-svg-disallowed-in-dashboard.html = FAIL
238 WONTFIX SKIP : svg/custom/svg-disallowed-in-dashboard-object.html = FAIL
239 WONTFIX : fast/canvas/canvas-gradient-addStop-error.html = FAIL
240
241
242 // Chrome uses different keyboard accelerators from those used by Safari, so
243 // these tests will always fail.
244 // TODO(ericroman): can the following 2 tests be removed from this list, since they pass?
245 WONTFIX : fast/events/keydown-1.html = FAIL
246 WONTFIX LINUX WIN : fast/events/option-tab.html = FAIL
247
248 // Chrome does not support WebArchives.
249 BUGCR10395 WONTFIX SKIP : webarchive = FAIL PASS
250 BUGCR10395 WONTFIX SKIP : svg/webarchive = FAIL PASS
251 BUGCR10395 WONTFIX SKIP : svg/custom/image-with-prefix-in-webarchive.svg = FAIL PASS
252 BUGCR10395 WONTFIX SKIP : http/tests/webarchive = FAIL PASS
253
254 // Compositing tests are run separately on machines with GPUs; see
255 // LayoutTests/platform/chromium-gpu.
256 BUGCR15733 WONTFIX SKIP : compositing = FAIL PASS TIMEOUT
257 BUGCR15733 WONTFIX SKIP : platform/chromium/compositing = FAIL PASS TIMEOUT
258
259 // Run the Mac-specific platform tests, but only to check for crashes.
260 WONTFIX : platform/gtk = FAIL PASS
261 WONTFIX : platform/mac = FAIL PASS TIMEOUT
262 WONTFIX : platform/mac-leopard = FAIL PASS
263 WONTFIX : platform/mac-tiger = FAIL PASS
264 WONTFIX : platform/qt = FAIL PASS
265 WONTFIX SKIP : platform/qt/plugins/qt-qwidget-plugin.html = FAIL
266 WONTFIX SKIP : platform/mac/fast/text/international/Geeza-Pro-vertical-metrics-adjustment.html = PASS
267
268 WONTFIX LINUX MAC : platform/win = FAIL PASS
269
270 // This is a Safari specific test to make WebKit behave like AppKit on the Mac.
271 // We do not support it because PLATFORM(MAC) is not defined for the mac version.
272 WONTFIX SKIP : platform/mac/editing/deleting/backward-delete.html = TEXT
273
274 // Ignored because we do not have OBJC bindings
275 WONTFIX SKIP : editing/pasteboard/paste-RTFD.html = FAIL
276 WONTFIX SKIP : editing/pasteboard/paste-TIFF.html = FAIL
277 WONTFIX SKIP : platform/mac/plugins/root-object-premature-delete-crash.html = FAIL
278 WONTFIX SKIP : platform/mac/plugins/undefined-property-crash.html = FAIL
279
280 // Ignore test because it tries to load .pdf files in <img> tags.
281 WONTFIX : fast/images/pdf-as-image-landscape.html = FAIL
282 WONTFIX : fast/images/pdf-as-image.html = FAIL
283 WONTFIX : fast/replaced/pdf-as-image.html = FAIL
284
285 // These tests try to print a PDF file as the expected result.  I don't think
286 // we plan on supporting this anytime soon.
287 WONTFIX SKIP : printing/compositing-layer-printing.html = PASS
288 WONTFIX SKIP : printing/media-queries-print.html = PASS
289 WONTFIX SKIP : printing/page-rule-in-media-query.html = PASS
290
291 // Chrome doesn't call the willCacheResponse callback (a method
292 // of ResourceHandleClient).  That function is Mac-specific.
293 WONTFIX SKIP : http/tests/misc/willCacheResponse-delegate-callback.html = FAIL
294
295 // Checks for very kjs-specific garbage collector
296 // behavior. Gc-9 is completely braindamaged; it tests that certain
297 // properties are reset by the garbage collector. It looks to pass recently.
298 WONTFIX : fast/dom/gc-9.html = FAIL
299
300 // This test checks that properties of arguments arrays are non-enumerable
301 // which is incorrect according to the ES5 spec.
302 WONTFIX : fast/js/kde/function.html = FAIL
303
304 // This test is broken.  The regular expression used contains an error
305 // which kjs swallows and returns false, which is the expected result,
306 // but for which we issue a syntax error.
307 WONTFIX : fast/js/code-serialize-paren.html = FAIL
308
309 // These tests check for a kjs-specific extension, that source file
310 // name and line numbers are available as properties on exception
311 // objects.  We handle error positions differently.
312 WONTFIX : fast/js/exception-linenums-in-html-1.html = FAIL
313 WONTFIX : fast/js/exception-linenums-in-html-2.html = FAIL
314 WONTFIX : fast/js/exception-linenums.html = FAIL
315 WONTFIX : fast/js/exception-expression-offset.html = FAIL
316
317 // These tests rely on specific details of decompilation of
318 // functions. V8 always returns the source code as written; there's
319 // no decompilation or pretty printing involved except for
320 // certain "native" functions where the V8 output does not include
321 // newline characters. This is working as intended and we don't care
322 // if the tests pass or fail. (It should probably simply be re-baselined.)
323 WONTFIX : fast/js/function-names.html = FAIL
324
325 // This test relies on KJS specific implementation
326 // (window.GCController.getJSObjectCount), which we have no intention of
327 // supporting.
328 WONTFIX SKIP : fast/dom/Window/timeout-released-on-close.html = FAIL
329
330 // These tests expect a tiff decoder, which we don't have.
331 WONTFIX LINUX WIN : fast/images/embed-image.html = FAIL
332 WONTFIX LINUX WIN : fast/images/object-image.html = FAIL
333
334 // Safari has a unique handling of the BOM characters among browsers.
335 // There is a strong suspicion that this is a security problem, so we
336 // follow the rest of the browsers on this one.
337 WONTFIX : fast/js/removing-Cf-characters.html = FAIL
338
339 // These tests fail in all but the PST/PDT time zone.
340 // Another reason for failure is that, for compatability, we don't obey
341 // the ECMA standard on DST exactly.  We use the OS's facilities to
342 // convert to local time for dates within the UNIX 32-bit epoch,
343 // and follow the ECMA rules for dates outside that range.
344 // The ECMA rules say to use current DST rules for all dates,
345 // and that all dates that are separated by an exact multiple of
346 // 28 years must behave exactly the same.
347 // OS local time services are more accurate than this ECMA rule,
348 // which is a discrepancy.
349 WONTFIX SKIP : fast/js/date-DST-time-cusps.html = PASS FAIL
350 WONTFIX SKIP : fast/js/date-big-setdate.html = PASS FAIL
351
352 // This test expects weird behavior of __defineGetter__ on the
353 // window object.  It expects variables introduced with 'var x = value'
354 // to behave differently from variables introduced with 'y = value'.
355 // This just seems wrong and should have very low priority.
356 // Agreed, not required for Beta, we can debate this with WebKit post Beta
357 // (eseidel, 4/25)
358 // Ignore this until we see evidence that we need to support it.
359 WONTFIX : fast/dom/getter-on-window-object2.html = FAIL
360
361 // V8 doesn't stable sort and we currently have no intention of
362 // changing this.  The following tests only happen to pass due to
363 // the current algorithm used for sorting small arrays. If larger
364 // arrays were used in the tests, they would fail.
365 // It is tracked by: http://code.google.com/p/v8/issues/detail?id=90
366 WONTFIX : fast/js/comparefn-sort-stability.html = PASS
367 WONTFIX : fast/js/sort-stability.html = PASS
368
369 // We have no indication that anyone misses this and have currently no
370 // intention of implementing it.
371 WONTFIX : fast/js/function-dot-arguments.html = FAIL
372
373 // This is a Safari specific test used to document the set of global
374 // constructors they expose and the exact way they are printed.  Not
375 // important.
376 WONTFIX : fast/js/global-constructors.html = FAIL
377
378 // This test is not reliable.  The behavior depends on exactly how the
379 // stack limit is reached.  We're happy with our behavior on this test
380 // as long as we don't crash.
381 WONTFIX : fast/js/global-recursion-on-full-stack.html = FAIL
382
383 // Our DOM Storage implementation doesn't use WebKit's private browsing feature (even for incognito mode).
384 WONTFIX : storage/domstorage/localstorage/private-browsing-affects-storage.html = FAIL
385 WONTFIX : storage/domstorage/sessionstorage/private-browsing-affects-storage.html = FAIL
386
387 // These tests propagate auth credentials back to the renderer, which we
388 // don't want to do.
389 WONTFIX BUGCR21840 MAC LINUX : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
390 WONTFIX BUGCR21840 WIN : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL TIMEOUT
391 WONTFIX BUGCR21840 : http/tests/loading/basic-credentials-sent-automatically.html = FAIL
392
393 // This checks the IDN behavior of WebKit/WebKit on Mac, not WebKit/WebCore or
394 // WebKit/JavaScriptCore. Chrome doesn't use WebKit/WebKit, and Chrome's IDN
395 // security model is different from it.
396 BUGCR21814 WONTFIX SKIP: fast/encoding/idn-security.html = FAIL
397
398 // Our implementation of global history is completely different, and
399 // these tests are irrelevant.
400 BUGCR23748 WONTFIX : http/tests/globalhistory = FAIL
401
402 // DataGrid was pulled from HTML5 spec, unlikely to re-emerge in the current form.
403 BUGCR17585 WONTFIX : fast/dom/HTMLDataGridElement = FAIL
404
405 // We are not going to support submitting a form to about:* pages.
406 // For more details, see discussions at issue 20570.
407 BUGCR20570 WONTFIX : fast/forms/get-forms-to-about-blank.html = FAIL
408
409 // xhtml mp tests were added in http://trac.webkit.org/changeset/43865 and are
410 // skipped on all platforms upstream.
411 // We are not planning to support these.
412 BUGCR12254 WONTFIX SKIP : fast/xhtmlmp = FAIL
413 BUGCR12254 WONTFIX SKIP : http/tests/xhtmlmp = FAIL
414
415 // This test requires LayoutTestController.setCacheModel, which we don't implement
416 // because we can't emulate the cahcing behaviors it expects.
417 WONTFIX : fast/dom/HTMLScriptElement/nested-execution.html = FAIL
418
419 // Deletion UI is a Mail-ism. We don't need to worry about this.
420 WONTFIX SKIP : editing/deleting/deletionUI-single-instance.html = FAIL IMAGE
421 WONTFIX SKIP : fast/dom/Element/id-in-deletebutton.html = TEXT
422
423 // Tests for FAST_MOBILE_SCROLLING. We don't use it.
424 WONTFIX BUGCR32663 WIN LINUX : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE+TEXT
425 WONTFIX BUGCR32663 WIN LINUX : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE+TEXT
426 WONTFIX BUGCR32663 MAC : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE PASS
427 WONTFIX BUGCR32663 MAC : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE PASS
428
429 // Tests for frameset flattening. Relevant only on mobile browsers.
430 WONTFIX SKIP : fast/frames/flattening = TIMEOUT
431
432 // This should be tested differently (see discussion on https://bugs.webkit.org/show_bug.cgi?id=35063).
433 // No need to waste cycles implementing harness support for this variant of the test.
434 WONTFIX SKIP : fast/loader/api-test-go-to-current-back-forward-item.html = TIMEOUT
435
436 // We're not planning to support rocker-based cursor navigation.
437 WONTFIX SKIP : fast/spatial-navigation = FAIL
438
439 // We're not planning to relax third-party cookie rules any time soon.
440 WONTFIX BUGCR37684 SKIP : http/tests/cookies/third-party-cookie-relaxing.html = FAIL
441
442 // <progress> on Mac is always animated.
443 WONTFIX MAC : fast/dom/HTMLProgressElement/progress-element.html = IMAGE PASS
444
445 // We do not use Safari's private browsing
446 WONTFIX SKIP : storage/private-browsing-noread-nowrite.html = PASS
447
448 // These tests are WONTFIX because they use codecs Chromium doesn't support.
449 BUGCR16779 WONTFIX SKIP : media/audio-mpeg-supported.html = FAIL TIMEOUT
450 BUGCR16779 WONTFIX SKIP : media/audio-data-url.html = FAIL TIMEOUT
451 BUGCR16779 WONTFIX SKIP : media/media-can-play-mpeg-audio.html = TEXT
452 BUGCR16779 WONTFIX SKIP : media/video-can-play-type.html = FAIL TIMEOUT
453 BUGCR16779 WONTFIX SKIP : media/video-document-types.html = FAIL TIMEOUT
454 BUGCR16779 WONTFIX SKIP : media/video-size-intrinsic-scale.html = FAIL TIMEOUT
455 BUGWK45102 WONTFIX SKIP : media/media-can-play-mpeg4-video.html = TEXT
456 BUGCR68289 WONTFIX SKIP : media/video-element-other-namespace-crash.html = TIMEOUT
457
458 // Chromium does not use the icon loader in WebCore for loading notifications.
459 WONTFIX SKIP : http/tests/notifications = FAIL
460
461 // Doesn't apply to Chromium (QuickTime-specific behavior)
462 WONTFIX SKIP : media/video-does-not-loop.html = TIMEOUT
463
464 // Pre-HTML5 parser quirks only apply to the mac port for now.
465 WONTFIX SKIP : fast/parser/pre-html5-parser-quirks.html = FAIL
466
467 // -----------------------------------------------------------------
468 // CHROME REWRITTEN TESTS
469 // -----------------------------------------------------------------
470
471 // These tests have been rewritten, with the original being ignored,
472 // because they rely on being able to shadow the 'top' variable on the
473 // global object.  For security we disallow shadowing of top.
474 WONTFIX : editing/selection/click-before-and-after-table.html = FAIL
475
476 // We're taking a different approach on this test than Webkit does, related to
477 // whether we create a window via a plugin when target is _blank.
478 BUGCR24186 WONTFIX SKIP : plugins/get-url-with-blank-target.html = FAIL
479
480 // Dashboard-related test
481 WONTFIX SKIP : platform/mac/fast/css/dashboard-region-parser.html = FAIL
482
483 // Not a test?
484 WONTFIX SKIP : http/tests/incremental/pause-in-script-element.pl = FAIL
485
486 // This tests for an arbitrary limit set in JSCRE to terminate regular
487 // expressions with an exponential matching behavior.  Since the V8
488 // regular expression engine can be preempted from the outside, we do not
489 // need to limit the execution this way.  Firefox also keeps running
490 // on this one.
491 WONTFIX : fast/regex/slow.html = TIMEOUT
492
493 // Test to verify legacy MAC encodings. We don't want to support them and
494 // have to skip this test.
495 WONTFIX SKIP : fast/encoding/char-decoding-mac.html = FAIL
496
497 // WebKit QT Build-specific tests
498 WONTFIX SKIP : platform/qt/view/fixed-layout-size.html = FAIL
499
500 // These don't have pixel results and rely on ObjC bindings. Don't run until they have pixel results.
501 WONTFIX SKIP : platform/mac/editing/pasteboard/dataTransfer-set-data-file-url.html = FAIL
502 WONTFIX SKIP : http/tests/security/dataTransfer-set-data-file-url.html = FAIL
503
504 // The issue is which global object to use as the implicit
505 // receiver for cross-frame calls.  Currently, IE, Firefox and Chrome
506 // agree and only Safari is doing it this way.
507 BUGCR5053 WONTFIX : fast/frames/cross-site-this.html = FAIL
508
509 // This tests a Safari incompatibility.  This test should fail since
510 // it contains syntax errors that JSC for some reason choose not to
511 // throw.  V8 follows the spec.
512 WONTFIX : fast/js/reparsing-semicolon-insertion.html = FAIL
513
514 // These tests relate to transform/3d which is a work in progress and is not
515 // even run by the WebKit folk. They should be enabled whenever WebKit begins
516 // testing them by default. The bug to re-enable is:
517 // http://code.google.com/p/chromium/issues/detail?id=8455
518 WONTFIX SKIP : transforms/3d = FAIL
519
520 // Copying with no selection is sometimes supposed to work
521 // Also skipped by Apple on Windows (rdar://problem/5015941)
522 BUGCR20404 : editing/execCommand/copy-without-selection.html = FAIL
523
524 // -----------------------------------------------------------------
525 // LIGHTTPD
526 // -----------------------------------------------------------------
527 // This are failing for different reasons under our lighttpd configuration.
528 // (Note that lighttpd is only used on Windows at this point.)
529
530 // LightTPD doesn't accept unknown HTTP methods
531 BUGCR30536 WIN SKIP : http/tests/xmlhttprequest/methods-lower-case.html = TIMEOUT CRASH
532 BUGCR30536 WIN : http/tests/xmlhttprequest/methods-async.html = TIMEOUT
533 BUGCR30536 WIN SLOW : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-invalidation-by-method.html = FAIL
534 // LightTPD doesn't accept unknown HTTP methods and passes CGIs a Content-Type
535 // even when a request didn't send the header.
536 BUGCR30536 WIN SLOW : http/tests/xmlhttprequest/methods.html = FAIL
537 // Webkit 50667:50696 (Lighttpd related?)
538 BUGCR30536 WIN : http/tests/xmlhttprequest/xmlhttprequest-setrequestheader-no-value.html = TEXT
539
540 // Another lighttpd quirk.
541 BUGCR8941 WIN SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
542 BUGCR8941 WIN : http/tests/xmlhttprequest/web-apps/012.html = FAIL
543
544 // -----------------------------------------------------------------
545 // TEXT
546 // -----------------------------------------------------------------
547
548 // This class of test fails because of size differences in text runs.
549 // Mostly this is because of international text rendering differences.
550
551 // Incrorect results, in incorrect international font metrics.
552 BUGCR20521 LINUX WIN : fast/text/atsui-multiple-renderers.html = FAIL
553 BUGCR20521 LINUX WIN : fast/text/atsui-pointtooffset-calls-cg.html = FAIL TIMEOUT
554 BUGCR20521 LINUX WIN : fast/text/atsui-rtl-override-selection.html = FAIL
555
556 // This test checks that we hack around a bug in helvetica.  We fail to.
557 BUGCR20519 WIN : fast/text/wide-zero-width-space.html = FAIL
558
559 // There's a missing glyph box in "full-time".
560 BUGCR20547 WIN : fast/text/capitalize-boundaries.html = FAIL
561
562 // Different button line-heights, our behavior looks wrong.
563 BUGCR20551 LINUX WIN : fast/replaced/table-percent-height.html = FAIL
564 BUGCR20551 LINUX WIN : fast/replaced/table-percent-height-text-controls.html = FAIL
565
566
567 // -----------------------------------------------------------------
568 // PENDING TESTS (forked to pending/, need to be sent upstream)
569 // -----------------------------------------------------------------
570
571 // These tests don't work with fast timers due to setTimeout
572 // races. See https://bugs.webkit.org/show_bug.cgi?id=21536
573 // We currently match upstream except for font differences, but we should
574 // probably rewrite the test as suggested in the webkit bug.
575 BUGCR24195 WIN LINUX : fast/repaint/bugzilla-6473.html = IMAGE+TEXT
576 BUGCR24195 MAC : fast/repaint/bugzilla-6473.html = IMAGE
577
578 // -----------------------------------------------------------------
579 // Tests requiring features not currently in test_shell.
580 // -----------------------------------------------------------------
581
582 // Implement layoutTestController.display()
583 BUGCR8630 WIN LINUX : fast/repaint/body-background-image.html = FAIL
584
585 // Relies on text metrics to pass. Rework to be meaningful for ports other than platform/mac.
586 BUGCR8630 WIN LINUX : fast/repaint/overflow-outline-repaint.html = FAIL
587 BUGCR8630 WIN LINUX : fast/backgrounds/solid-color-context-restore.html = FAIL
588 BUGCR8630 WIN LINUX : fast/dynamic/containing-block-change.html = FAIL
589 BUGCR8630 LINUX : fast/forms/listbox-clip.html = IMAGE+TEXT
590 BUGCR8630 WIN LINUX : fast/overflow/hidden-scrollbar-resize.html = FAIL
591 BUGCR8630 WIN LINUX RELEASE : fast/reflections/inline-crash.html = FAIL
592 BUGCR8630 LINUX WIN DEBUG : fast/reflections/inline-crash.html = FAIL
593 BUGCR8630 WIN LINUX : fast/text/font-initial.html = FAIL
594
595 // Need a setAuthorAndUserStylesEnabled method in
596 // layoutTestController. Now we have preference to enable/disable user
597 // styles(not work now), we still need to add a preference to enable/disable
598 // styles of both author and user.
599 // SKIP because it causes an additional error message in:
600 // fast/css/display-none-inline-style-change-crash.html   somehow
601 // the message is dumped after the #EOF, which causes an additional
602 // error in the header of the following test.
603 BUGCR24197 SKIP : fast/css/disabled-author-styles.html = FAIL
604
605 // -----------------------------------------------------------------
606 // Inspector tests
607 // -----------------------------------------------------------------
608
609 // There is no message port harness to test extensions
610 WONTFIX SKIP : inspector/extensions.html = FAIL
611 WONTFIX SKIP : inspector/extensions-api.html = FAIL
612 WONTFIX SKIP : inspector/extensions-audits.html = FAIL
613 WONTFIX SKIP : inspector/extensions-audits-api.html = FAIL
614 WONTFIX SKIP : inspector/extensions-events.html = FAIL
615 WONTFIX SKIP : inspector/extensions-eval.html = FAIL
616 WONTFIX SKIP : inspector/extensions-resources.html = TIMEOUT CRASH
617 WONTFIX SKIP : http/tests/inspector/extensions-headers.html = FAIL
618
619 // Inspector tests in Debug build are very slow.  If we remove SLOW, we'll see
620 // random TIMEOUTs.  Is this issue DRT-specific?
621 BUG_DRT WIN DEBUG SLOW : inspector = PASS
622 BUG_DRT WIN DEBUG SLOW : http/tests/inspector = PASS
623 BUG_DRT WIN DEBUG SLOW : http/tests/inspector-enabled = PASS
624
625 // Add support for inspector layout tests on non-Windows.
626 BUGCR26734 LINUX MAC SKIP : inspector = PASS
627 BUGCR26734 LINUX MAC SKIP : http/tests/inspector = PASS
628 BUGCR26734 LINUX MAC SKIP : http/tests/inspector-enabled = PASS
629
630 BUGCR66087 WIN SLOW : inspector/styles-disable-then-enable.html = PASS TEXT
631 BUGCR66087 WIN : inspector/timeline-layout.html = CRASH TIMEOUT PASS TEXT
632 BUGCR66087 WIN : inspector/timeline-parse-html.html = CRASH TIMEOUT PASS TEXT
633 // WebKit roll 74708:74711
634 BUGCR68165 WIN DEBUG SLOW : inspector/styles-source-lines.html = PASS
635 BUGCR66087 WIN SLOW : inspector/storage-panel-dom-storage.html = PASS TEXT
636
637 BUG_DRT WIN : http/tests/inspector-enabled/console-log-before-frame-navigation.html = TEXT
638 BUG_DRT WIN : http/tests/inspector/change-iframe-src.html = CRASH
639 BUGCR66087 WIN SLOW : http/tests/inspector/console-resource-errors.html = PASS TEXT
640 BUGCR66087 WIN SLOW : http/tests/inspector/inspect-iframe-from-different-domain.html = PASS TEXT
641
642 // -----------------------------------------------------------------
643 // Other
644 // -----------------------------------------------------------------
645
646 // Mac Safari under certain circumstances automatically places
647 // a caret in editable document even when none was requested programatically.
648 // We don't intend to copy this feature (at least not for Beta).
649 BUGCR20844 LINUX WIN RELEASE : editing/selection/designmode-no-caret.html = FAIL
650 BUGCR20844 LINUX WIN DEBUG : editing/selection/designmode-no-caret.html = FAIL
651
652 // Regression from merge 41268:41286
653 BUGCR10435 MAC : editing/selection/designmode-no-caret.html = FAIL
654
655 // Issue 3273: TextInputController::firstRectForCharacterRange not returning
656 // the correct values for bidi/rtl text.
657 BUGCR3273 : editing/selection/move-left-right.html = FAIL
658 BUGCR3273 MAC : platform/mac/editing/input/caret-primary-bidi.html = FAIL PASS
659 BUGCR3273 MAC : platform/mac/editing/input/firstrectforcharacterrange-plain.html = FAIL PASS
660 BUGCR3273 MAC : platform/mac/editing/input/range-for-empty-document.html = FAIL PASS
661
662 // These tests also use firstRectForCharacterRange, but they generate slightly
663 // different values.
664 BUGCR3273 : editing/selection/5825350-1.html = TEXT
665 BUGCR3273 : editing/selection/5825350-2.html = TEXT
666 BUGCR3273 : editing/selection/mixed-editability-10.html = TEXT
667
668 // selection
669 BUGCR10369 LINUX : editing/selection/5354455-2.html = FAIL
670
671 // TODO(erg): Attempted to rebaseline these tests as part of the above
672 // 43346:43361 rebaseling from http://trac.webkit.org/changeset/43355. Turned
673 // tree red. May be more involved then just rebaselining.
674
675 BUGCR14832 : editing/selection/user-drag-element-and-user-select-none.html = FAIL
676
677 // Fails due to textInputController.setInputMethod not implemented for Mac.
678 BUGCR19665 MAC : platform/mac/editing/input/hangul-enter-confirms-and-sends-keypress.html = FAIL
679 BUGCR19665 MAC : platform/mac/editing/input/kotoeri-enter-to-confirm-and-newline.html = FAIL
680
681 // New failures from merge 51412:51455.
682 BUGCR28916 MAC : editing/pasteboard/paste-xml.xhtml = TEXT
683
684 // Flaky
685 BUGCR31803 MAC LINUX : editing/inserting/12882.html = IMAGE PASS
686
687 BUGWK45438 : editing/spelling/spelling-backspace-between-lines.html = TEXT
688
689 // Tests added in r69269.
690 // Apple-Mac port corrects "notationl" to "notational" automatically?
691 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-delete.html = IMAGE+TEXT
692 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-removing-underline-after-paste.html = IMAGE+TEXT
693 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-removing-underline.html = IMAGE+TEXT
694 BUGCR58254 MAC : platform/mac/editing/spelling/autocorrection-simple.html = IMAGE+TEXT
695
696 // Directionality of mixed-direction text in selected choice should
697 // match that in the <select> option lists.
698 // Low priority, unclear if test expectations are correct (see bug)
699 BUGCR6139 : fast/forms/select-writing-direction-natural.html = FAIL
700
701 // Shadow offset tests crash occasionally on Mac and Linux debug.
702 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-1.html = PASS CRASH
703 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-2.html = PASS CRASH
704 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-3.html = PASS CRASH
705 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-4.html = PASS CRASH
706 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-5.html = PASS CRASH
707 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-6.html = PASS CRASH
708 BUGCR67732 MAC LINUX DEBUG : fast/canvas/shadow-offset-7.html = PASS CRASH
709
710 // This SVG test is occasionally crashing apparently for the same reason.
711 BUGCR67732 MAC LINUX DEBUG : svg/W3C-SVG-1.1-SE/paths-dom-02-f.svg = PASS CRASH
712
713 BUGCR67767 : http/tests/security/cross-frame-access-call.html = TEXT
714 BUGCR67767 : http/tests/security/aboutBlank/xss-DENIED-set-opener.html = TEXT
715
716 // -----------------------------------------------------------------
717 // Plugin tests
718 // -----------------------------------------------------------------
719 BUGCR21841 MAC WIN DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
720 BUGJOHNNYG LINUX : plugins/embed-attributes-style.html = IMAGE
721 BUGCR61799 : plugins/evaluate-js-after-removing-plugin-element.html = TEXT
722 BUGCR37962 MAC : plugins/iframe-shims.html = TEXT PASS
723 BUGCR10351 MAC : plugins/inner-html-display-none.html = FAIL
724 BUGWK48164 MAC LINUX WIN : plugins/invalid-mime-with-valid-extension-shows-missing-plugin.html = TEXT
725 // Need to implement NPP_HandleEvent in the layout_test_plugin
726 // WIN started failing during webkit roll 62670 -> 62844.
727 BUGCR38353 : plugins/keyboard-events.html = TEXT
728 BUGCR10351 MAC : plugins/mouse-events.html = FAIL
729 BUGCR32864 MAC LINUX : plugins/mouse-events-fixedpos.html = TEXT
730 BUGCR35822 : plugins/npruntime/browser-object-identity.html = TEXT
731 // Object.keys on an NPObject produces the wrong output.
732 BUGCR21901 : plugins/npruntime/enumerate.html = TEXT
733 BUGCR50787 : plugins/npruntime/plugin-scriptable-object-invoke-default.html = TEXT
734 BUGCR50910 : plugins/npruntime/remove-property.html = TEXT
735 BUGWK48034 : plugins/pass-different-npp-struct.html = TEXT
736 // NPP_HandleEvent doesn't be implemented/work on mac/linux.
737 BUGCR48033 LINUX MAC SKIP : plugins/plugin-initiate-popup-window.html = PASS TIMEOUT
738 BUGCR35387 MAC : plugins/reentrant-update-widget-positions.html = TIMEOUT
739 BUGCR38392 : plugins/resize-from-plugin.html = TEXT
740 // Times out after http://trac.webkit.org/changeset/62739/
741 BUGCR48550 SKIP : plugins/return-negative-one-from-write.html = TIMEOUT
742 BUGCR38353 : http/tests/plugins/plugin-document-has-focus.html = TEXT TIMEOUT
743
744 // Tests differences from switching to webkit.org's test netscape plugin rather
745 // than chromium's old forked copy.  We can remove the PASS on these once we
746 // switch.
747 BUG_TONY WIN : plugins/geturlnotify-during-document-teardown.html = CRASH
748 BUGWK48655 : plugins/js-from-destroy.html = CRASH PASS
749 BUG_TONY WIN : plugins/mouse-events.html = TEXT
750 BUG_TONY WIN : plugins/plugin-initiate-popup-window.html = TIMEOUT
751 // This test is failing because the plugin is currently named
752 // WebKitTestNetscapePlugin because the fork in the Chromium repo is named
753 // TestNetscapePlugin.  Once the internal plugin is removed, we'll be able to
754 // fix the plugin names.
755 BUG_TONY : plugins/plugin-javascript-access.html = TEXT PASS
756 // New test introduced at r75217 is failing on Win - for same reason as the 
757 // test above. (BUG_TONY)
758 BUGWK52062 WIN : fast/frames/iframe-reparenting-plugins.html = TEXT
759
760 // Expectations for this test changed upstream. We should fix this test, but
761 // it doesn't need to block the current release
762 BUGCR10275 : http/tests/security/cross-frame-access-put.html = FAIL
763
764 // Requires layoutTestController.dispatchPendingLoadRequests
765 BUGCR33211 WIN RELEASE : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT CRASH
766 BUGCR33211 WIN DEBUG : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
767 BUGCR33211 MAC LINUX : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
768
769 // HTML5 DB layout tests
770 BUGCR27697 SKIP : storage/hash-change-with-xhr.html = PASS
771
772 // HTML5 datalist element. We don't enable it because WebKit implementation
773 // is incomplete.
774 BUGCR20226 : fast/forms/datalist.html = TEXT
775 BUGCR20226 : fast/forms/input-list.html = FAIL
776 BUGCR20226 : fast/forms/input-selectedoption.html = FAIL
777
778 // Generic theme in test_shell doesn't have inner-spin-button support.
779 // We need to do rebaseline when we switch to DRT.
780 BUGWK38570 WIN : fast/forms/input-appearance-spinbutton-disabled-readonly.html = IMAGE+TEXT
781
782 // The feature was disabled due to a compatibility issue.
783 BUGWK40520 : fast/forms/interactive-validation-lost-focusable.html = TEXT
784 BUGWK40520 : fast/forms/interactive-validation-prevented.html = TEXT
785
786 // These tests need to be changed to be platform independent.
787 // These tests are skipped since they hang DRT and test_shell.
788 // BUGCR62964 : we should either enable or delete these testsvi
789 BUGCR54465 BUGCR62964 SKIP : http/tests/media/remove-while-loading.html = TIMEOUT
790 BUGCR54465 BUGCR62964 SKIP : http/tests/media/video-play-stall-seek.html = TIMEOUT
791 BUGCR54465 BUGCR62964 SKIP : http/tests/media/video-play-stall.html = TIMEOUT
792 BUGCR54465 BUGCR62964 SKIP : http/tests/media/video-seekable-stall.html = TIMEOUT
793 // UNIMPLEMENTED : * we don't have test-par-16-9.ogv generated in WebKit * we don't handle aspect ratio correctly.
794 BUGCR59635 SKIP : media/video-display-aspect-ratio.html = PASS FAIL TIMEOUT
795
796 // video.buffered multiple TimeRanges support.
797 BUGCR49165 SKIP : http/tests/media/video-buffered.html = PASS
798
799 // These tests need to be changed to not rely on setTimeout().
800 BUGCR13907 BUGCR60740 SLOW WIN DEBUG : media/video-played-collapse.html = PASS FAIL
801 BUGCR13907 BUGCR60740 SLOW WIN DEBUG : media/video-seek-past-end-playing.html = PASS FAIL
802 // Flakey test
803 BUGCR13907 LINUX : media/audio-only-video-intrinsic-size.html = TIMEOUT PASS
804
805 // We sometimes emit an error from the same source element twice.
806 BUGCR13907 BUGCR59226 : media/video-source-error.html = PASS FAIL TIMEOUT
807
808 // Failing because we sometimes emit additional timeupdate events.
809 // Test may need to be rewritten or only log the first timeupdate event.
810 BUGCR13907 BUGCR59399 LINUX MAC : media/audio-delete-while-slider-thumb-clicked.html = PASS FAIL
811
812 // Failing because we sometimes emit additional timeupdate events.
813 // Test might be WONTFIX because we don't export a step button in the first place.
814 BUGCR25375 BUGCR59399 SKIP : media/audio-delete-while-step-button-clicked.html = FAIL
815
816 // Seeks to the end of file, which results in ogg packets with no timestamps.
817 // KNOWNISSUE : fails because progress event is not published 
818 BUGCR59675 BUGCR59263 SKIP : media/event-attributes.html = PASS FAIL TIMEOUT
819
820 // The media time display isn't appearing.
821 // KNOWNISSUE : Timebar is not scaled when video is zoomed
822 BUGCR59704 : media/video-zoom-controls.html = PASS FAIL TIMEOUT
823
824 // Flaky because of our new seeking algorithm.
825 BUGCR50438 BUGCR20187 : media/controls-drag-timebar.html = PASS FAIL
826
827 // These tests are flaky with subtle pixel differences.
828 BUGCR13907 LINUX MAC : media/video-zoom.html = IMAGE PASS
829 BUGCR13907 BUGCR60744 LINUX : media/video-layer-crash.html = IMAGE PASS
830
831 // Behavior was changed by WebKit roll 69035:69062.
832 BUGCR53660 BUGCR60746 MAC : media/video-transformed.html = IMAGE
833
834 // This is flaky with a subtle pixel difference in the bottom right corner,
835 // which I believe is due to new video scaling algorithm.
836 // We should rewrite this test so that we wait for timeupdate event until the time is no less than 1. 
837 BUGCR13907 BUGCR60244 : media/video-replaces-poster.html = IMAGE PASS
838
839 // These tests are failing because they use position-dependent mouse clicks.
840 // TESTISSUE 
841 BUGCR13907 BUGCR25375 : media/video-controls-transformed.html = FAIL
842
843 // We haven't implemented the WebKit fullscreen extension.
844 // UNIMPLEMENTED
845 BUGCR16735 SKIP : media/media-fullscreen-inline.html = TIMEOUT
846 BUGCR16735 SKIP : media/media-fullscreen-not-in-document.html = TIMEOUT
847
848 // We haven't implemented the WebKit captioning extension.
849 // UNIMPLEMENTED
850 BUGCR28301 SKIP : media/media-captions.html = TIMEOUT
851
852 // We haven't implemented reverse audio/video playback.
853 // UNIMPLEMENTED BUGCR33099 Implement reverse audio/video playback
854 BUGCR33099 SKIP : media/video-reverse-play-duration.html = TIMEOUT
855 BUGCR33099 SKIP : media/video-timeupdate-reverse-play.html = TIMEOUT
856
857 // We haven't implemented video preloading and it passing is a false positive.
858 // UNIMPLEMENTED
859 BUGWK16482 SKIP : media/video-preload.html = PASS FAIL
860
861 // Does not display courier for the letters, as the test requests.
862 BUGCR10278 LINUX : fast/css/font-face-implicit-local-font.html = FAIL
863 BUGCR10278 LINUX : fast/css/font-face-unicode-range.html = FAIL
864
865 // The v8 bindings allow shadowing of all properties on the global
866 // object.  If you use 'var prop = value' you will get a new variable
867 // named prop that shadows builtin properties on the global object.
868 // This behavior is consistent and I'm reluctant to make the massive
869 // change that would be needed to implement the inconsistent handling
870 // of this that KJS has (some properties can be shadowed and others
871 // can't).  This should have low priority.
872 // We currently match IE and the plan was to convince KJS to change
873 // post-beta, but the bug is here:
874 // https://bugs.webkit.org/show_bug.cgi?id=16644 , and it's unclear
875 // what the resolution was.
876 BUGCR10279 : fast/js/var-declarations-shadowing.html = FAIL
877
878 // Implement full JSON support in V8
879 BUGCR14885 SLOW : fast/js/JSON-parse.html = FAIL
880 BUGCR14885 SLOW : fast/js/JSON-stringify.html = FAIL CRASH
881 BUGCR14885 : fast/js/JSON-parse-reviver.html = FAIL
882 BUGCR14885 : fast/js/JSON-stringify-replacer.html = FAIL
883
884 // Implement CSS -webkit-font-smoothing property support.
885 BUGCR23270 WIN LINUX : fast/css/font-smoothing.html = FAIL
886
887 // Make canvas shadow work with drawImage.
888 BUGCR11153 WIN LINUX : fast/canvas/canvas-incremental-repaint-2.html = FAIL
889 BUGCR11153 WIN LINUX : fast/canvas/canvas-incremental-repaint.html = FAIL
890
891 BUGCR20507 : http/tests/uri/resolve-encoding-relative.html = FAIL
892
893 // test_shell, DRT do not correctly schedule paints when invalidating.
894 BUGCR62433 WIN : fast/images/gif-loop-count.html = IMAGE
895
896 // -----------------------------------------------------------------
897 // SVG TESTS
898 // -----------------------------------------------------------------
899
900 BUGCR8763 LINUX WIN MAC : svg/custom/use-on-g-containing-foreignObject-and-image.svg = IMAGE+TEXT IMAGE
901
902 // We show reduced version of the entire SVN image rather than an image
903 BUGCR23463 MAC : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE
904 BUGCR23463 WIN LINUX : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE+TEXT TEXT
905 BUGCR23463 WIN LINUX : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE IMAGE+TEXT PASS
906 BUGCR23463 WIN LINUX : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE+TEXT
907
908 // Merge 39744:39829 - regression
909 BUGCR10284 MAC : svg/custom/path-bad-data.svg = FAIL
910
911 // Text mismatch since r65370.
912 // There was also an unnoticed image mismatch before this revision
913 // (wrong baseline was committed). No idea about when it really started to fail.
914 BUGCR52692 WIN LINUX : svg/W3C-SVG-1.1/animate-elem-80-t.svg = IMAGE+TEXT
915
916 // New in WK r65880, some probably just need rebaselining, others have real diffs
917 BUGWK44514 WIN LINUX : svg/clip-path/clip-in-mask-objectBoundingBox.svg = IMAGE
918 BUGWK44514 WIN LINUX : svg/clip-path/clip-in-mask-userSpaceOnUse.svg = IMAGE
919 BUGWK44514 WIN LINUX : svg/clip-path/clip-in-mask.svg = IMAGE
920 BUGWK44514 WIN LINUX : svg/clip-path/deep-nested-clip-in-mask-different-unitTypes.svg = IMAGE+TEXT
921 BUGWK44514 WIN LINUX : svg/clip-path/deep-nested-clip-in-mask-panning.svg = IMAGE+TEXT
922 BUGWK44514 WIN LINUX : svg/clip-path/deep-nested-clip-in-mask.svg = IMAGE+TEXT
923 BUGWK44514 WIN LINUX : svg/clip-path/nested-clip-in-mask-image-based-clipping.svg = IMAGE
924 BUGWK44514 WIN LINUX : svg/clip-path/nested-clip-in-mask-path-and-image-based-clipping.svg = IMAGE
925 BUGWK44514 WIN LINUX : svg/clip-path/nested-clip-in-mask-path-based-clipping.svg = IMAGE
926 // Rebaselined in WK r65874, Linux has missing lines
927 BUGWK44514 LINUX WIN : svg/custom/missing-xlink.svg = TEXT
928 // Also fail since WK roll 65859:65885
929 BUGWK44514 MAC : fast/backgrounds/svg-as-background-6.html = IMAGE
930
931 // May require re-baseline.
932 BUGWK42370 WIN MAC : svg/custom/image-rescale-scroll.html = FAIL
933 BUGWK42370 WIN MAC : svg/custom/image-rescale-clip.html = FAIL
934
935 // -----------------------------------------------------------------
936 // End SVG Regressions
937 // -----------------------------------------------------------------
938
939 // Compact support was removed from WebKit by Hyatt and layout tests rebaselined in r40259.
940
941 BUGCR10295 MAC : fast/dom/prototype-chain.html = FAIL
942
943 // Font differences, requiring overriden metrics, not a real bug, not fixing for Beta
944 BUGCR10296 MAC : fast/text/international/bidi-menulist.html = FAIL
945 // Maybe need to be rebaselined - should be looked at in more detail.
946 BUGCR10296 LINUX : svg/custom/foreign-object-skew.svg = FAIL
947 BUGCR10296 LINUX : svg/batik/text/textLength.svg = FAIL
948
949 // No anti-aliasing on the text.
950 BUGCR10298 LINUX : svg/custom/use-on-disallowed-foreign-object-3.svg = FAIL
951
952 // The failures listed below have never passed in Chromium and need to be
953 // investigated, categorized, and (one hopes) fixed.
954
955 // These test fail full text diff (but not simplified diff) most likely due
956 // to differing implementations of SVG fonts. They may or may not represent
957 // real bugs which need fixin'
958
959 // There's no baseline at all for this!
960 BUGCR32392 SKIP : svg/batik/text/smallFonts.svg = FAIL
961
962 // The test is flaky and maybe platform-dependent.
963 BUGCR32401 LINUX WIN : svg/custom/marker-changes.svg = IMAGE+TEXT IMAGE
964
965 BUGCR32444 LINUX WIN : svg/hixie/text/003.html = FAIL
966
967 // SVG masks aren't quite working yet.
968 // Might also be related to https://bugs.webkit.org/show_bug.cgi?id=21910
969 // New tests. We should fix these, but they don't need to block the current release
970 BUGCR3244 LINUX WIN : fast/backgrounds/svg-as-mask.html = FAIL
971 BUGCR3244 WIN DEBUG : fast/backgrounds/animated-svg-as-mask.html = FAIL
972 BUGCR3244 SLOW WIN RELEASE : fast/backgrounds/animated-svg-as-mask.html = FAIL
973 BUGCR3244 LINUX : fast/backgrounds/animated-svg-as-mask.html = FAIL
974 // More tests that fail because of masks not working properly.
975 // New tests. We should fix these, but they don't need to block the current release
976 BUGCR3244 WIN LINUX : fast/backgrounds/mask-composite.html = FAIL
977 BUGCR3244 WIN LINUX : fast/backgrounds/repeat/mask-negative-offset-repeat.html = FAIL
978 // Marking this again as failed. This test failed even after rebaseline due to
979 // the fact that the font is not specified in the test and it seems that the
980 // test falls back on a different font locally than on the buildbot so the
981 // baseline is invalid. This might indicate a failure in our font fallback code
982 // or might be expected and that we should either go with the buildbot output
983 // or change the test upstream to specify explicitly what font to use.
984 // The mask part of this test is totally wrong.
985 BUGCR3244 WIN LINUX : fast/backgrounds/svg-as-background-6.html = FAIL
986
987 // Our gradients are wrong here.
988 BUGCR19559 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-08-b.svg = FAIL
989 BUGCR10304 LINUX : svg/carto.net/button.svg = FAIL
990
991 // Probably need to change the test upstream to describe it better and use no
992 // hard coded numbers.
993 BUGCR19897 WIN LINUX : svg/custom/getscreenctm-in-mixed-content2.xhtml = FAIL
994
995 BUGCR10306 LINUX : svg/carto.net/combobox.svg = FAIL
996
997 // Linux pixeltest failure: slightly different shade of composited
998 // alpha in bottom group.
999 BUGCR10310 LINUX : svg/W3C-SVG-1.1/masking-opacity-01-b.svg = FAIL
1000
1001 // -----------------------------------------------------------------
1002 // Accessibility layout tests
1003 //
1004 // In addition to WebCore, these are meant to exercise platform APIs
1005 // (MSAA, NSAccessibility, ATK). Since we don't have access to these in the
1006 // sandbox, making these tests pass involves faking interactions with these APIs
1007 // and doesn't seem like a good use of our time.
1008 // We need to identify a good testing strategy for Chromium accessibility.
1009 // It is possible we won't use these at all.
1010
1011 BUGCR10322 SKIP : accessibility = PASS FAIL
1012 BUGCR10322 SKIP : platform/mac/accessibility = PASS FAIL
1013 BUGCR10322 SKIP : platform/win/accessibility = PASS FAIL
1014
1015 // -----------------------------------------------------------------
1016 // Other failures
1017 // -----------------------------------------------------------------
1018
1019 // These fail the pixel tests in debug mode because they have
1020 // unpainted space (filled red in Debug but not in Release).
1021 // https://bugs.webkit.org/show_bug.cgi?id=8423
1022 BUGCR24204 WIN LINUX : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE+TEXT TEXT
1023
1024 // Fails on webkit windows as well.
1025 BUGCR24207 : fast/events/attempt-scroll-with-no-scrollbars.html = FAIL
1026
1027 // No glyph for U+FFFD (Replacement Character : black diamond with
1028 // question mark) in them
1029 BUGCR10315 WIN : fast/encoding/invalid-UTF-8.html = FAIL
1030
1031 // V8 failures as a result of the WebKit merge.
1032 // http://code.google.com/p/v8/issues/detail?id=92
1033
1034 // v8: A setter that is added to a prototype after the inline cache is
1035 // recorded will not be called.
1036 BUGCR24209 : fast/js/pic/cached-prototype-setter.html = FAIL
1037
1038 // We have the wrong shadow for "This".
1039 // It appears we're not obeying the "transparent" fill color.
1040 BUGCR10317 LINUX : fast/css/shadow-multiple.html = FAIL
1041
1042 // Problems with getImageData and toDataURL.
1043 // This test requires us to do alpha blending exactly the way CG does it,
1044 // which Skia may never do (see bug).
1045 BUGCR22700 LINUX WIN : fast/canvas/canvas-getImageData.html = FAIL
1046
1047 // We're much closer now. To fully pass this we need encoders for jpg
1048 // and gif, which is a low priority.
1049 BUGCR10318 : fast/canvas/toDataURL-supportedTypes.html = FAIL
1050
1051 // Regression from the 41362:41402 merge.
1052 BUGCR8402 MAC : fast/forms/drag-out-of-textarea.html = FAIL
1053
1054 // GURL doesn't handle switching from standard URL to path URL correctly
1055 BUGWK27914 : fast/dom/HTMLAnchorElement/set-href-attribute-protocol.html = TEXT
1056
1057 // ----------------------------------------------------------------------------
1058 // NEW FOR THE MERGE
1059 //
1060 // These tests need to have their output inspected to make sure it's reasonable
1061 // and then baselined if necessary.
1062 // ----------------------------------------------------------------------------
1063
1064 // This test isn't hanging, it just takes 12-13 seconds to run.
1065 BUGCR30536 SLOW WIN LINUX : http/tests/misc/acid3.html = FAIL
1066 BUGCR30536 : http/tests/misc/favicon-as-image.html = FAIL
1067
1068 // Has failed for Chromium since it was first checked in.  (Lighttpd related?)
1069 BUGCR10323 WIN : http/tests/xmlhttprequest/xmlhttprequest-no-content-length-onProgress.html = FAIL
1070
1071 // Post-MERGE failures: these will all need to be fixed one day
1072
1073 // This test assumes we're using unix paths and looks for a file:///test
1074 // path.  We correctly return file:///C:/test on Windows.  We should fix
1075 // upstream
1076 // Expectations for this test changed upstream. We should fix this test, but
1077 // it doesn't need to block the current release
1078 BUGCR10325 WIN : fast/dom/resource-locations-in-created-html-document.html = FAIL
1079
1080 // GURL/KURL difference in handling of "http:".
1081 // New test. We should fix it, but it doesn't need to block the current release
1082 BUGCR7386 : http/tests/security/postMessage/invalid-origin-throws-exception.html = FAIL
1083
1084 // Linux pixeltest failure: Font mismatch
1085 BUGCR10327 LINUX : tables/mozilla_expected_failures/bugs/bug14007-2.html = FAIL
1086
1087 // On Linux, we don't seem to be getting Helvetica Bold for all cases.
1088 BUGCR10328 LINUX : fast/css/font-face-multiple-faces.html = FAIL
1089
1090 // Got flakey (both debug and release) around r3581 (ananta).
1091 BUGCR10329 WIN LINUX : http/tests/plugins/geturlnotify-from-npp-destroystream.html = PASS TEXT
1092
1093 // Uses ahem font and expects line heights to match some pixel value.
1094 // We should be able to pass this -- not sure what's wrong.
1095 BUGCR10331 LINUX : css2.1/t1008-c44-ln-box-02-d-ag.html = FAIL
1096
1097 // Looks like we're failing the test -- there are red boogers in the box that should be all green.
1098 BUGCR10332 LINUX : css2.1/t1605-c545-txttrans-00-b-ag.html = FAIL
1099
1100 // Asks for "system" fonts, which we don't support at all.
1101 BUGCR10335 LINUX : fast/css/css2-system-fonts.html = FAIL
1102
1103 // Large fonts have different metrics.
1104 BUGCR10336 LINUX : fast/css/font-face-descriptor-multiple-values.html = FAIL
1105
1106 // Wants Helvetica, Monaco.  It's still testing something useful, but we may
1107 // need to check in a wrong-looking baseline.  Windows looks wrong too.
1108 BUGCR10337 LINUX : fast/css/font-face-locally-installed.html = FAIL
1109
1110 // Font metrics wrong, despite using Lucida Grande?
1111 BUGCR10338 LINUX : fast/events/updateLayoutForHitTest.html = FAIL
1112
1113 // Layout totally different -- wrong font selected?
1114 BUGCR10340 LINUX : fast/frames/viewsource-attribute.html = FAIL
1115
1116 // We fail to load a file URL with a port number -- how does this work on
1117 // Windows?
1118 BUGCR10342 LINUX MAC : fast/loader/file-URL-with-port-number.html = TIMEOUT
1119
1120 // Text doesn't display at all -- maybe we don't have the slow font
1121 // code enabled?
1122 BUGCR10343 LINUX : fast/text/atsui-kerning-and-ligatures.html = FAIL
1123 BUGCR10343 LINUX RELEASE : fast/text/atsui-partial-selection.html = IMAGE
1124 BUGCR10343 LINUX : fast/text/atsui-small-caps-punctuation-size.html = FAIL
1125
1126 // Started timing out with agl's complext text change.  Page is verrry slow.
1127 BUGCR10343 SKIP LINUX : fast/text/large-text-composed-char.html = TIMEOUT FAIL
1128
1129 // Missing text -- slow font path unimplemented?
1130 BUGCR10344 LINUX : fast/text/should-use-atsui.html = FAIL
1131
1132 // We print to stderr when a failure happens while importing XSL;
1133 // should disable this in libxml.
1134 BUGCR10347 MAC : fast/xsl/transform-xhr-doc.xhtml = FAIL
1135
1136 // Linux pixeltest failure: Failing to apply style
1137 BUGCR10349 LINUX : fast/forms/select-style.html = FAIL
1138
1139 // Linux pixeltest failure: The text suggests that the radios should not
1140 // overlap, but it's very close and quite different from the Windows version
1141 BUGCR10350 LINUX : fast/replaced/width100percent-radio.html = FAIL
1142
1143 // These tests are marked as failing on Linux because they depend on QuickTime.
1144 // See the bug for more discussion.
1145 BUGCR15797 LINUX : fast/dom/object-embed-plugin-scripting.html = FAIL
1146 BUGCR15797 LINUX : plugins/embed-attributes-setting.html = FAIL
1147
1148 // Skip because we throw an exception before we get to dumpAsText.
1149 BUGCR10351 SKIP MAC : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1150
1151 // NEW FOR MERGE 36102:37604
1152
1153 BUGCR32184 : fast/js/arguments.html = FAIL
1154 // See bug http://code.google.com/p/chromium/issues/detail?id=7868,
1155 // not urgent for current release.
1156 BUGCR24227 : http/tests/plugins/local-geturl-from-remote.html = FAIL
1157
1158 // This test sometimes fails indefinitely, other times it takes 1-2 seconds.
1159 BUGCR14009 WIN : http/tests/misc/dns-prefetch-control.html = TIMEOUT PASS
1160
1161 // NEW FOR MERGE 37604:38097
1162 // This is a Safari specific test used to document the set of global
1163 // constructors they expose and the exact way they are printed.  Not
1164 // important - we might even want to ignore it.
1165 // New tests. We should fix these, but they doesn't need to block the current
1166 // release
1167 BUGCR10354 WIN LINUX : fast/layers/opacity-transforms.html = FAIL
1168
1169 // MERGE 38389:38450
1170 // Form submit causes invalid page reload/navigation when action is a named
1171 // anchor
1172 BUGCR10357 : fast/dom/cssTarget-crash.html = TIMEOUT PASS
1173
1174 // New test. We should fix it, but it doesn't need to block the current release
1175 BUGCR10361 WIN : http/tests/misc/single-character-pi-stylesheet.xhtml = FAIL
1176
1177 // Windows is missing the green box. Started to pass in roll to WebKit r50313
1178 BUGCR8729 WIN : http/tests/multipart/invalid-image-data.html = IMAGE+TEXT
1179
1180 // -----------------------------------------------------------------
1181 // MAC PORT TESTS
1182 // -----------------------------------------------------------------
1183
1184 //
1185 // *** TESTS TO WORK ON FIRST ***
1186 // These tests fail because of work that needs to be done in Mac TestShell to
1187 // bring it up to par with Win TestShell. These tests pass on Win and should
1188 // pass on Mac once we fix the bugs.
1189 //
1190
1191 // We've bucketed tests into groupings for why they're failing. Please try
1192 // to add new failures in the appropriate bucket.
1193
1194 // text fields wrong width
1195 BUGCR10363 MAC : tables/mozilla/bugs/bug53690-1.html = FAIL
1196 BUGCR10363 MAC : tables/mozilla/bugs/bug9024.html = FAIL
1197
1198 // bad key event handling
1199 BUGCR10366 MAC : fast/events/option-tab.html = TEXT
1200
1201 // Not really sure why these are failing at the moment
1202 BUGCR10376 MAC : fast/dom/isindex-002.html = FAIL
1203
1204 // These two have a different object type in the dom dump. Plugin-related.
1205 // Ignored on Win/Linux because they rely on QT to provide a TIFF decoder.
1206 BUGCR10378 MAC : fast/images/embed-image.html = FAIL
1207 BUGCR10378 MAC : fast/images/object-image.html = FAIL
1208
1209 // The following are flaky in that some times the timeout or crash, but we think
1210 // it is because of bugs in other parts of the code and not specific to what
1211 // these tests are doing.  The are being noted here so we can get the buildbots
1212 // green so new mac regressions are caught much quicker.
1213 // (there are a few others marked w/ multiple status like this in other parts of
1214 // the file, but they were left there as the comments in those areas are valid.)
1215 BUGCR10384 MAC : fast/dom/Window/new-window-opener.html = TEXT
1216
1217 BUGCR10399 MAC : fast/encoding/char-encoding-mac.html = FAIL
1218
1219 // Broken pixel tests
1220
1221 // Widget location is just slightly off
1222 BUGCR23496 MAC : css1/box_properties/acid_test.html = IMAGE
1223 BUGCR23496 MAC : css2.1/t09-c5526c-display-00-e.html = IMAGE
1224 BUGCR23496 MAC : fast/block/basic/011.html = IMAGE
1225 BUGCR23496 MAC : fast/forms/001.html = IMAGE
1226 BUGCR23496 MAC : fast/forms/basic-inputs.html = IMAGE
1227 BUGCR23496 MAC : fast/forms/checkbox-radio-onchange.html = IMAGE
1228 BUGCR23496 MAC : fast/forms/file-input-disabled.html = IMAGE+TEXT
1229 BUGCR23496 MAC : fast/forms/form-element-geometry.html = IMAGE+TEXT
1230 BUGCR23496 MAC : fast/forms/formmove.html = IMAGE
1231 // Recently became crashy. See http://crbug.com/24721
1232 BUGCR23496 MAC : fast/forms/formmove2.html = IMAGE
1233 BUGCR23496 MAC : fast/forms/indeterminate.html = IMAGE
1234 BUGCR23496 MAC : fast/forms/input-appearance-height.html = IMAGE+TEXT
1235 BUGCR23496 MAC : fast/forms/input-value.html = IMAGE+TEXT
1236 BUGCR23496 MAC : fast/forms/radio-attr-order.html = IMAGE
1237 BUGCR23496 MAC : fast/forms/radio-nested-labels.html = IMAGE
1238 BUGCR23496 MAC : fast/forms/radio_checked.html = IMAGE
1239 BUGCR23496 MAC : fast/forms/radio_checked_dynamic.html = IMAGE
1240 BUGCR23496 MAC : fast/inline/positionedLifetime.html = IMAGE
1241 BUGCR23496 MAC : fast/parser/bad-xml-slash.html = IMAGE
1242 BUGCR23496 MAC : fast/replaced/replaced-breaking.html = IMAGE
1243 BUGCR23496 MAC DEBUG : fast/text/textIteratorNilRenderer.html = IMAGE
1244 BUGCR23496 SLOW MAC RELEASE : fast/text/textIteratorNilRenderer.html = IMAGE
1245 BUGCR23496 MAC : fast/text/whitespace/normal-after-nowrap-breaking.html = IMAGE
1246 BUGCR23496 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1247 BUGCR23496 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1248
1249 // These should not be pixel tests, they're not testing anything
1250 // layout/rendering-specific. They also dump layout tree, so depending on which baselines
1251 // are around either or both text or image may mismatch.
1252 BUGWK48651 LINUX MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE IMAGE+TEXT
1253 BUGWK48651 LINUX MAC : http/tests/navigation/error404-goback.html = IMAGE IMAGE+TEXT TEXT
1254 BUGWK48651 LINUX MAC : http/tests/navigation/postredirect-frames.html = IMAGE IMAGE+TEXT
1255 BUGWK48651 MAC : http/tests/navigation/error404-subframeload.html = IMAGE
1256
1257 BUGCR26253 SLOW WIN RELEASE : http/tests/navigation/reload-subframe-object.html = PASS
1258 BUGCR9798 WIN RELEASE : http/tests/navigation/no-referrer-reset.html = TIMEOUT PASS
1259 // Regressions from r67349? 
1260 BUGCR10364 MAC : http/tests/navigation/reload-subframe-object.html = FAIL
1261
1262 // Big button widgets are broken
1263 BUGCR23495 MAC : fast/forms/box-shadow-override.html = IMAGE+TEXT
1264
1265 // Text declared as "monospace" with no size is bigger in Chromium
1266 BUGCR23494 MAC : css1/font_properties/font_family.html = IMAGE
1267 BUGCR23494 MAC : css2.1/t1503-c522-font-family-00-b.html = IMAGE
1268 BUGCR23494 MAC : fast/text/monospace-width-cache.html = IMAGE
1269
1270 // Actual is just slightly off in color than expected
1271 BUGCR23488 MAC RELEASE : fast/backgrounds/size/backgroundSize15.html = IMAGE
1272 BUGCR23488 MAC DEBUG SLOW : fast/backgrounds/size/backgroundSize15.html = IMAGE
1273 BUGCR23488 MAC : fast/block/float/float-avoidance.html = IMAGE
1274 BUGCR23488 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1275 BUGCR23488 MAC : fast/box-shadow/inset.html = IMAGE
1276 BUGCR23488 MAC : fast/canvas/canvas-incremental-repaint-2.html = IMAGE
1277 BUGCR23488 MAC : fast/css/shadow-multiple.html = IMAGE
1278 BUGCR23488 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1279 BUGCR23488 MAC : fast/frames/content-opacity-1.html = IMAGE
1280 BUGCR23488 MAC : fast/frames/content-opacity-2.html = IMAGE
1281 BUGCR23488 MAC : fast/layers/add-layer-with-nested-stacking.html = IMAGE
1282 BUGCR23488 MAC : fast/layers/inline-dirty-z-order-lists.html = IMAGE
1283 BUGCR23488 MAC : fast/layers/layer-content-visibility-change.html = IMAGE
1284 BUGCR23488 MAC : fast/layers/remove-layer-with-nested-stacking.html = IMAGE
1285 BUGCR23488 MAC : fast/lists/ol-start-parsing.html = IMAGE
1286 BUGCR23488 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1287 BUGCR23488 MAC : fast/text/shadow-no-blur.html = IMAGE
1288 BUGCR23488 MAC : fast/text/shadow-translucent-fill.html = IMAGE
1289 BUGCR23488 MAC : svg/transforms/animated-path-inside-transformed-html.xhtml = IMAGE
1290 BUGCR23488 MAC : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE
1291
1292 // Looks the same to me... huh. Variation of above?
1293 BUGCR23489 MAC : fast/table/empty-section-crash.html = IMAGE
1294
1295 // Various drawing tests that are broken
1296 BUGCR23477 MAC : fast/backgrounds/bgCompositeCopy.html = IMAGE
1297 BUGCR23477 MAC : fast/canvas/canvas-as-image-incremental-repaint.html = IMAGE
1298 BUGCR23477 MAC : fast/canvas/canvas-incremental-repaint.html = IMAGE
1299 BUGCR23477 MAC : fast/canvas/fill-stroke-clip-reset-path.html = IMAGE
1300 BUGCR23477 MAC : fast/dynamic/containing-block-change.html = IMAGE
1301
1302 // Unexpected gray
1303 BUGCR23476 MAC : fast/forms/listbox-clip.html = IMAGE
1304 BUGCR23476 MAC : fast/frames/inline-object-inside-frameset.html = IMAGE
1305 BUGCR23476 MAC : fast/text/font-initial.html = IMAGE
1306
1307 // Disagreeing XML parsing error messages
1308 BUGCR23475 MAC : fast/parser/xhtml-alternate-entities.xml = IMAGE
1309 BUGCR23475 MAC : fast/xsl/xslt-extra-content-at-end.xml = IMAGE
1310
1311 // Repaint tests failing on Mac.  Need to be manually triaged.
1312 BUGCR23473 MAC : fast/repaint/4774354.html = IMAGE
1313 BUGCR23473 MAC : fast/repaint/4776765.html = IMAGE
1314 BUGCR23473 MAC : fast/repaint/background-generated.html = IMAGE
1315 BUGCR23473 MAC : fast/repaint/backgroundSizeRepaint.html = IMAGE
1316 BUGCR23473 MAC : fast/repaint/block-selection-gap-in-composited-layer.html = IMAGE
1317 BUGCR23473 MAC : fast/repaint/block-selection-gap-in-table-cell.html = IMAGE
1318 BUGCR23473 MAC : fast/repaint/body-background-image.html = IMAGE
1319 BUGCR23473 MAC : fast/repaint/border-fit-lines.html = IMAGE
1320 BUGCR23473 MAC : fast/repaint/border-radius-repaint.html = IMAGE
1321 BUGCR23473 MAC : fast/repaint/border-repaint-glitch.html = IMAGE
1322 BUGCR23473 MAC : fast/repaint/box-shadow-dynamic.html = IMAGE
1323 BUGCR23473 MAC : fast/repaint/bugzilla-3509.html = IMAGE
1324 BUGCR23473 MAC : fast/repaint/bugzilla-5699.html = IMAGE
1325 BUGCR23473 MAC : fast/repaint/bugzilla-6278.html = IMAGE
1326 BUGCR23473 MAC : fast/repaint/bugzilla-6388.html = IMAGE
1327 BUGCR23473 MAC : fast/repaint/bugzilla-7235.html = IMAGE
1328 BUGCR23473 MAC : fast/repaint/button-spurious-layout-hint.html = IMAGE
1329 BUGCR23473 MAC : fast/repaint/change-transform.html = IMAGE
1330 BUGCR23473 MAC : fast/repaint/clipped-relative.html = IMAGE
1331 BUGCR23473 MAC : fast/repaint/clip-with-layout-delta.html = IMAGE
1332 BUGCR23473 MAC : fast/repaint/containing-block-position-change.html = IMAGE
1333 BUGCR23473 MAC : fast/repaint/content-into-overflow.html = IMAGE
1334 BUGCR23473 MAC : fast/repaint/control-clip.html = IMAGE
1335 BUGCR23473 MAC : fast/repaint/create-layer-repaint.html = IMAGE
1336 BUGCR23473 MAC : fast/repaint/delete-into-nested-block.html = IMAGE
1337 BUGCR23473 MAC : fast/repaint/dynamic-table-vertical-alignment-change.html = IMAGE
1338 BUGCR23473 MAC : fast/repaint/erase-overflow.html = IMAGE
1339 BUGCR23473 MAC : fast/repaint/fixed-child-move-after-scroll.html = IMAGE
1340 BUGCR23473 MAC : fast/repaint/fixed-child-of-fixed-move-after-scroll.html = IMAGE
1341 BUGCR23473 MAC : fast/repaint/fixed-child-of-transformed-move-after-scroll.html = IMAGE
1342 BUGCR23473 MAC : fast/repaint/fixed-move-after-scroll.html = IMAGE
1343 BUGCR23473 MAC : fast/repaint/float-in-new-block-with-layout-delta.html = IMAGE
1344 BUGCR23473 MAC : fast/repaint/float-move-during-layout.html = IMAGE
1345 BUGCR23473 MAC : fast/repaint/float-overflow.html = IMAGE
1346 BUGCR23473 MAC : fast/repaint/float-overflow-right.html = IMAGE
1347 BUGCR23473 MAC : fast/repaint/inline-block-resize.html = IMAGE
1348 BUGCR23473 MAC : fast/repaint/inline-color-change.html = IMAGE
1349 BUGCR23473 MAC : fast/repaint/inline-overflow.html = IMAGE
1350 BUGCR23473 MAC : fast/repaint/inline-relative-positioned.html = IMAGE
1351 BUGCR23473 MAC : fast/repaint/intermediate-layout-position-clip.html = IMAGE
1352 BUGCR23473 MAC : fast/repaint/intermediate-layout-position.html = IMAGE
1353 BUGCR23473 MAC : fast/repaint/invisible-objects.html = IMAGE
1354 BUGCR23473 MAC : fast/repaint/layer-full-repaint.html = IMAGE
1355 BUGCR23473 MAC : fast/repaint/layer-hide-when-needs-layout.html = IMAGE
1356 BUGCR23473 MAC : fast/repaint/layer-visibility.html = IMAGE
1357 BUGCR23473 MAC : fast/repaint/layout-state-only-positioned.html = IMAGE
1358 BUGCR23473 MAC : fast/repaint/layout-state-relative.html = IMAGE
1359 BUGCR23473 MAC : fast/repaint/line-in-scrolled-clipped-block.html = IMAGE
1360 BUGCR23473 MAC : fast/repaint/line-overflow.html = IMAGE
1361 BUGCR23473 MAC : fast/repaint/lines-with-layout-delta.html = IMAGE
1362 BUGCR23473 MAC : fast/repaint/list-marker-2.html = IMAGE
1363 BUGCR23473 MAC : fast/repaint/make-children-non-inline.html = IMAGE
1364 BUGCR23473 MAC : fast/repaint/outline-child-repaint.html = IMAGE
1365 BUGCR23473 MAC : fast/repaint/outline-inset.html = IMAGE
1366 BUGCR23473 MAC : fast/repaint/outline-repaint-glitch.html = IMAGE
1367 BUGCR23473 MAC : fast/repaint/outline-shrinking.html = IMAGE
1368 BUGCR23473 MAC : fast/repaint/overflow-clip-subtree-layout.html = IMAGE
1369 BUGCR23473 MAC : fast/repaint/overflow-delete-line.html = IMAGE
1370 BUGCR23473 MAC : fast/repaint/overflow-into-content.html = IMAGE
1371 BUGCR23473 MAC : fast/repaint/overflow-outline-repaint.html = IMAGE
1372 BUGCR23473 MAC : fast/repaint/overflow-scroll-delete.html = IMAGE
1373 BUGCR23473 MAC : fast/repaint/reflection-redraw.html = IMAGE
1374 BUGCR23473 MAC : fast/repaint/reflection-repaint-test.html = IMAGE
1375 BUGCR23473 MAC : fast/repaint/rel-positioned-inline-with-overflow.html = IMAGE
1376 BUGCR23473 MAC : fast/repaint/repaint-resized-overflow.html = IMAGE
1377 BUGCR23473 MAC : fast/repaint/search-field-cancel.html = IMAGE
1378 BUGCR23473 MAC : fast/repaint/selected-replaced.html = IMAGE
1379 BUGCR23473 MAC : fast/repaint/selection-after-delete.html = IMAGE
1380 BUGCR23473 MAC : fast/repaint/selection-after-remove.html = IMAGE
1381 BUGCR23473 MAC : fast/repaint/selection-clear.html = IMAGE
1382 BUGCR23473 MAC : fast/repaint/selection-gap-overflow-scroll.html = IMAGE
1383 BUGCR23473 MAC : fast/repaint/stacked-diacritics.html = IMAGE
1384 BUGCR23473 MAC : fast/repaint/static-to-positioned.html = IMAGE
1385 BUGCR23473 MAC : fast/repaint/subtree-layoutstate-transform.html = IMAGE
1386 BUGCR23473 MAC : fast/repaint/subtree-root-clip-2.html = IMAGE
1387 BUGCR23473 MAC : fast/repaint/subtree-root-clip.html = IMAGE
1388 BUGCR23473 MAC : fast/repaint/subtree-root-skipped.html = IMAGE
1389 BUGCR23473 MAC : fast/repaint/table-cell-move.html = IMAGE
1390 BUGCR23473 MAC : fast/repaint/table-cell-overflow.html = IMAGE
1391 BUGCR23473 MAC : fast/repaint/table-col-background.html = IMAGE
1392 BUGCR23473 MAC : fast/repaint/table-collapsed-border.html = IMAGE
1393 BUGCR23473 MAC : fast/repaint/table-extra-bottom-grow.html = IMAGE
1394 BUGCR23473 MAC : fast/repaint/table-outer-border.html = IMAGE
1395 BUGCR23473 MAC : fast/repaint/table-row.html = IMAGE
1396 BUGCR23473 MAC : fast/repaint/table-section-overflow.html = IMAGE
1397 BUGCR23473 MAC : fast/repaint/table-section-repaint.html = IMAGE
1398 BUGCR23473 MAC : fast/repaint/table-two-pass-layout-overpaint.html = IMAGE
1399 BUGCR23473 MAC : fast/repaint/text-append-dirty-lines.html = IMAGE
1400 BUGCR23473 MAC : fast/repaint/text-selection-rect-in-overflow-2.html = IMAGE
1401 BUGCR23473 MAC : fast/repaint/text-selection-rect-in-overflow.html = IMAGE
1402 BUGCR23473 MAC : fast/repaint/trailing-floats-root-line-box-overflow.html = IMAGE
1403 BUGCR23473 MAC : fast/repaint/transform-absolute-child.html = IMAGE
1404 BUGCR23473 MAC : fast/repaint/transform-absolute-in-positioned-container.html = IMAGE
1405 BUGCR23473 MAC : fast/repaint/transform-disable-layoutstate.html = IMAGE
1406 BUGCR23473 MAC : fast/repaint/transform-layout-repaint.html = IMAGE
1407 BUGCR23473 MAC : fast/repaint/transform-relative-position.html = IMAGE
1408 BUGCR23473 MAC : fast/repaint/transform-repaint-descendants.html = IMAGE
1409 BUGCR23473 MAC : fast/repaint/transform-replaced-shadows.html = IMAGE
1410 BUGCR23473 MAC : fast/repaint/transform-translate.html = IMAGE
1411
1412 // Fails due to r67862.
1413 BUGWK39966 : fast/repaint/table-cell-collapsed-border.html = IMAGE
1414
1415 // Thicker shadow than expected
1416 BUGCR23471 MAC : fast/text/stroking.html = IMAGE
1417
1418 // Failing on the bots but not locally; need investigation
1419 BUGCR23560 MAC : fast/images/animated-svg-as-image.html = IMAGE PASS
1420
1421 // -----------------------------------------------------------------
1422 // END MAC PORT TESTS
1423 // -----------------------------------------------------------------
1424
1425 // Linux pixeltest failure: alpha=0.5 red (1,0,0) atop yellow (1,1,0) is
1426 // coming out with with a slightly-less-than-100% red channel. This test fails
1427 // because we enforce non-transparent color in Font::drawGlyphs.
1428 BUGCR24191 LINUX : fast/css/hsla-color.html = FAIL
1429
1430 // Merge 39309:39335 Regressions (RenderButton::setupInnerStyle regression).
1431 BUGCR5737 LINUX : fast/forms/001.html = FAIL
1432 BUGCR5737 LINUX : fast/forms/input-first-letter.html = FAIL
1433
1434 // The (x) in type=search inputs appears to be slightly broken.  This test will also need a rebaseline.
1435 BUGCR20439 WIN LINUX : fast/forms/search-transformed.html = FAIL
1436
1437 // New test. We should fix it, but it doesn't need to block the current release
1438 BUGCR10418 WIN DEBUG : animations/change-keyframes-name.html = FAIL PASS
1439
1440 // We could fix this test for us and upstream it if the test shell user agent
1441 // would let us differentiate test_shell and WebKit DumpTreeNode.
1442 BUGCR7482 LINUX MAC : http/tests/misc/timer-vs-loading.html = TIMEOUT
1443 BUGCR7482 WIN : http/tests/misc/timer-vs-loading.html = TIMEOUT PASS
1444
1445 // Regressions from WebKit merge to 40864
1446 // Likely just needs a rebaseline.
1447 BUGCR10421 LINUX : fast/block/positioning/001.html = FAIL
1448
1449 // Selection highlight colors are wrong.
1450 BUGCR10426 LINUX : fast/lists/drag-into-marker.html = FAIL
1451
1452 // It's not clear that the test isn't wrong here. It believes that middle
1453 // aligning 15px Ahem should end up in a certain spot. But we have the
1454 // x-height correct and we're still one px off.
1455 BUGCR10429 LINUX : css2.1/t100801-c544-valgn-01-d-ag.html = FAIL
1456
1457 // New failures from Merge 41078:41149
1458 BUGCR10430 LINUX : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT
1459
1460 // Flakey. Not clear when it started, but it was before 3/9/09.
1461 // This test also started failing with the merge of March 25th 2009
1462 BUGCR10441 WIN DEBUG : transitions/transition-end-event-transform.html = FAIL PASS
1463 BUGCR10441 MAC WIN RELEASE : transitions/transition-end-event-transform.html = FAIL PASS
1464
1465 // Merge 41768:41807
1466 // Perhaps just needs new baseline?
1467 // These tests were rebaselined with failure long ago. We shouldn't do this, and
1468 // instead work upstream to improve tests so that they don't fail.
1469 // Just need rebaseline
1470 BUGCR10458 LINUX : fast/forms/textarea-width.html = FAIL
1471
1472 // New failures from merge
1473 BUGCR27486 WIN : fast/forms/listbox-hit-test-zoomed.html = FAIL
1474 BUGCR27486 RELEASE LINUX : fast/forms/listbox-hit-test-zoomed.html = FAIL
1475 BUGCR27486 LINUX DEBUG : fast/forms/listbox-hit-test-zoomed.html = FAIL
1476 BUGCR27486 WIN LINUX : fast/forms/slider-zoomed.html = FAIL
1477
1478 // See WebKit 41948
1479 // Regressed further at 57820, jamesr investigating
1480 BUGCR10468 MAC SKIP : fast/replaced/border-radius-clip.html = IMAGE+TEXT
1481
1482 // Mac flaky failures.
1483 BUGCR10472 MAC DEBUG : svg/css/glyph-orientation-rounding-test.xhtml = FAIL PASS
1484
1485 // <input type="search">; various failures, some tests may simply need new
1486 // baselines, others have more problems.
1487 BUGCR10473 LINUX : fast/forms/placeholder-set-value.html = FAIL
1488 BUGCR10473 LINUX : fast/forms/search-display-none-cancel-button.html = FAIL
1489 BUGCR10473 LINUX : fast/replaced/width100percent-searchfield.html = FAIL
1490
1491 // This test isn't just slow -- sometimes it times out indefinitely.
1492 BUGCR27569 LINUX MAC WIN : http/tests/xmlhttprequest/redirect-cross-origin-tripmine.html = TIMEOUT PASS
1493
1494 // These tests were affected by rolling out WebKit i8n patches.
1495 // Was only WIN, also fail on LINUX since merge 43346:43361
1496 BUGCR9768 LINUX WIN : fast/forms/select-initial-position.html = FAIL
1497 // Was only WIN, also fail on LINUX since merge 43346:43361
1498 BUGCR9768 LINUX WIN : fast/forms/select-visual-hebrew.html = FAIL
1499 // Was only WIN, also fail on LINUX since merge 43346:43361
1500 BUGCR9768 LINUX WIN : fast/forms/visual-hebrew-text-field.html = FAIL
1501 // Linux looks ok, rebaselined.
1502 BUGCR9768 WIN : fast/text/cg-fallback-bolding.html = FAIL
1503 BUGCR9768 WIN : fast/text/international/001.html = FAIL
1504 BUGCR9768 WIN : fast/text/international/002.html = FAIL
1505 BUGCR9768 WIN : fast/text/international/003.html = FAIL
1506 BUGCR9768 WIN : fast/text/international/wrap-CJK-001.html = FAIL
1507
1508 // Merge WebKit 42200:42244 regressions
1509 BUGCR9786 : fast/dom/Window/dom-access-from-closure-iframe.html = FAIL
1510 BUGCR9786 : fast/dom/Window/dom-access-from-closure-window.html = FAIL
1511 BUGCR9786 WIN DEBUG : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1512 BUGCR9786 SLOW WIN RELEASE : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1513 BUGCR9786 LINUX MAC : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1514 BUGCR9786 : http/tests/security/cross-frame-access-location-prototype.html = FAIL
1515 BUGCR9786 : http/tests/security/cross-frame-access-document-direct.html = TIMEOUT
1516
1517 BUGCR9798 SLOW WIN DEBUG : fast/dom/Window/slow-unload-handler.html = PASS
1518
1519 // Was flaky. Became a consistent failure.
1520 BUGCR9798 WIN DEBUG : http/tests/local/style-access-before-stylesheet-loaded.html = FAIL PASS
1521 BUGCR9798 WIN DEBUG : http/tests/misc/redirect-with-quotes.php = TIMEOUT PASS
1522 BUGCR9798 WIN SLOW : http/tests/misc/refresh-headers.php = PASS
1523 BUGCR9798 WIN : http/tests/security/cross-frame-access-protocol-explicit-domain.html = FAIL PASS
1524 BUGCR9798 WIN DEBUG : http/tests/security/cross-frame-access-protocol.html = FAIL PASS
1525 BUGCR9798 RELEASE : http/tests/security/dataURL/xss-DENIED-from-data-url-in-foreign-domain-subframe.html = TIMEOUT PASS
1526 BUGCR9798 WIN : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-timeout.html = PASS TIMEOUT
1527 BUGCR9798 WIN : http/tests/xmlhttprequest/basic-auth.html = TIMEOUT PASS
1528 BUGCR9798 WIN DEBUG : http/tests/xmlhttprequest/encode-request-url-2.html = TIMEOUT PASS
1529 BUGCR9797 BUGCR9798 WIN RELEASE SLOW : http/tests/xmlhttprequest/state-after-network-error.html = PASS
1530 BUGCR9797 LINUX DEBUG : svg/carto.net/colourpicker.svg = FAIL
1531 BUGCR9798 LINUX RELEASE : svg/carto.net/colourpicker.svg = FAIL
1532 BUGCR9798 LINUX RELEASE : tables/mozilla/bugs/45621.html = FAIL
1533 BUGCR9798 LINUX DEBUG SLOW : tables/mozilla/bugs/45621.html = FAIL
1534 //also BUGCR24868 (crash)
1535 BUGCR9798 LINUX DEBUG : transitions/mask-transitions.html = FAIL PASS
1536 BUGCR9798 SLOW LINUX RELEASE : transitions/transition-timing-function.html = PASS
1537 // This test definitely times out (i.e. is not just slow).
1538 BUGCR9798 WIN RELEASE : http/tests/xmlhttprequest/small-chunks-response-text.html = PASS TIMEOUT
1539 BUGCR9798 LINUX : svg/custom/use-property-changes-through-svg-dom.svg = FAIL
1540 BUGCR9798 LINUX : svg/custom/js-update-transform-changes.svg = FAIL
1541 // Occasionally times out. Not just slow.
1542 BUGCR9798 WIN DEBUG : http/tests/loading/redirect-methods.html = TIMEOUT PASS
1543
1544 // New tests or failures from WebKit merge 42324:42364. Re-baselined on
1545 // Windows. Probably just need the same on other platforms.
1546 BUGCR9962 MAC : fast/js/function-apply-aliased.html = FAIL
1547
1548 // Regressions from WebKit merge 43264:42403, unknown cause(s)
1549 BUGCR10055 MAC : fast/events/updateLayoutForHitTest.html = FAIL
1550
1551 // New tests from WebKit Merge 42609:42671
1552 BUGCR10760 LINUX : fast/forms/input-text-scroll-left-on-blur.html = FAIL
1553 BUGCR10760 LINUX : fast/inline/25277-2.html = FAIL
1554 BUGCR10760 LINUX : fast/inline/25277.html = FAIL
1555 BUGCR10760 LINUX : svg/custom/marker-child-changes.svg = PASS FAIL
1556 BUGCR10760 LINUX : svg/custom/marker-viewBox-changes.svg = FAIL
1557
1558 // New failures from WebKit merge 42725:42805
1559 // WebKit change http://trac.webkit.org/changeset/42785
1560 // added a test which submits a form and then uses history.back()
1561 // to go back. in test_shell history.back() does not go back,
1562 // so the test timeouts.
1563 BUGCR11001 LINUX MAC WIN : http/tests/history/back-to-post.php = TIMEOUT
1564
1565 // Regressions from WebKit Merge 42932:42994 due to text metric changes.
1566 BUGCR11251 WIN DEBUG : fast/forms/textarea-width.html = FAIL
1567 BUGCR11251 SLOW WIN RELEASE : fast/forms/textarea-width.html = FAIL
1568 BUGCR11251 WIN LINUX RELEASE : fast/forms/text-control-intrinsic-widths.html = FAIL
1569 BUGCR11251 LINUX WIN DEBUG : fast/forms/text-control-intrinsic-widths.html = FAIL
1570 BUGCR11251 WIN LINUX : svg/custom/svg-fonts-in-text-controls.html = FAIL
1571 BUGCR11251 WIN LINUX : fast/forms/textarea-metrics.html = FAIL
1572
1573 // Regresssions from WebKit Merge 43114:43242 that just need to be re-baselined.
1574 BUGCR11483 LINUX : fast/forms/input-text-double-click.html = FAIL
1575 BUGCR11483 LINUX : svg/text/foreignObject-repaint.xml = FAIL
1576
1577 // Regressions from WebKit merge 43242:43321.  These just need to re-baselining:
1578 BUGCR24229 LINUX : fast/forms/select-dirty-parent-pref-widths.html = FAIL
1579 BUGCR24229 LINUX : svg/transforms/animated-path-inside-transformed-html.xhtml = FAIL
1580
1581 // Details for all of these are in the bugs.
1582 BUGCR12361 WIN : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1583 BUGCR12361 LINUX MAC DEBUG : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1584 BUGCR12361 LINUX RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1585 BUGCR12361 SLOW MAC RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1586
1587 BUGCR14207 LINUX : tables/mozilla/bugs/bug28341.html = FAIL
1588 BUGCR32231 WIN DEBUG : tables/mozilla/bugs/bug28341.html = IMAGE PASS
1589
1590 // Newly added test http://trac.webkit.org/changeset/44816
1591 BUGCR18733 WIN SLOW : http/tests/xmlhttprequest/cross-origin-no-authorization.html = PASS
1592
1593 // WebKit 45017:45086
1594 BUGCR15217 : fast/js/dictionary-no-cache.html = FAIL
1595
1596 // WebKit 45086:45111
1597 BUGCR15270 MAC LINUX RELEASE : fast/js/excessive-comma-usage.html = TEXT
1598 BUGCR15270 MAC LINUX DEBUG SLOW : fast/js/excessive-comma-usage.html = FAIL
1599 BUGCR15270 WIN : fast/js/excessive-comma-usage.html = CRASH FAIL
1600
1601
1602 // Flaky for a while; also related to BUGCR17974
1603 BUGCR15267 WIN LINUX : transitions/cancel-transition.html = PASS FAIL
1604
1605 // WebKit 45431:45444
1606 BUGCR10384 MAC : fast/events/frame-tab-focus.html = FAIL
1607 BUGCR11613 LINUX : fast/forms/tabbing-input-iframe.html = FAIL
1608 BUGCR11613 LINUX RELEASE : fast/overflow/scrollRevealButton.html = FAIL
1609 BUGCR11613 LINUX DEBUG : fast/overflow/scrollRevealButton.html = FAIL
1610
1611 // WebKit merge 42738:45840
1612 // New tests, need baseline.
1613 BUGCR16240 WIN DEBUG : http/tests/cache/subresource-expiration.html = TIMEOUT
1614 BUGCR16240 MAC WIN RELEASE : http/tests/cache/subresource-expiration.html = TIMEOUT
1615 BUGCR14752 LINUX SLOW : http/tests/cache/subresource-expiration.html = PASS
1616
1617 // New tests with WebKit merge 46288:46363
1618 BUGCR18116 : fast/dom/constructed-objects-prototypes.html = TEXT
1619 BUGCR18116 WIN RELEASE : fast/dom/prototype-inheritance-2.html = TEXT
1620 BUGCR18116 WIN DEBUG : fast/dom/prototype-inheritance-2.html = CRASH
1621 BUGCR18116 MAC LINUX : fast/dom/prototype-inheritance-2.html = TEXT CRASH
1622 // New in WebKit r52559
1623 BUGCR18116 : svg/custom/global-constructors.html = TEXT
1624
1625 // Flaky crashes
1626 BUGCR18656 MAC RELEASE : fast/dom/Window/window-lookup-precedence.html = FAIL
1627 BUGCR18656 MAC DEBUG : fast/dom/Window/window-lookup-precedence.html = FAIL
1628
1629 // Test failures caused by re-enabling skia asserts.
1630 BUGCR18896 WIN LINUX DEBUG : svg/batik/paints/gradientLimit.svg = TIMEOUT FAIL CRASH
1631
1632 // Test failures from WebKit merge 46894 to 46977
1633 BUGCR26737 : fast/js/prototypes.html = FAIL
1634
1635 // WebKit roll r47417:47528
1636 BUGCR19766 LINUX : fast/replaced/width100percent-menulist.html = FAIL
1637
1638 // WebKit 47777:47790 - getOwnPropertyDescriptor
1639 BUGCR20345 : fast/js/getOwnPropertyDescriptor.html = FAIL
1640 BUGCR20345 : fast/dom/Window/window-property-descriptors.html = TEXT
1641 // Failures from Webkit merger 51724 -> 51772
1642 BUGCR20345 : http/tests/security/cross-frame-access-getOwnPropertyDescriptor.html = TEXT
1643
1644 // Flaky, not clear as of when.
1645 BUGCR21411 WIN LINUX DEBUG : svg/dom/SVGScriptElement/script-load-and-error-events.svg = TEXT PASS
1646
1647
1648 BUGCR25616 WIN : fast/overflow/overflow-float-stacking.html = FAIL
1649
1650 // Flaky. The width of containing RenderBlocks sometimes becomes larger
1651 BUGCR21958 MAC : svg/hixie/error/012.xml = FAIL
1652
1653 // WebKit merge 48500:48585, newly implemented Object.defineProperty.
1654 BUGCR22526 WIN MAC: fast/js/Object-create.html = FAIL
1655 BUGCR22526 : fast/js/Object-defineProperties.html = FAIL CRASH
1656 BUGCR22526 : fast/js/Object-defineProperty.html = FAIL CRASH
1657 BUGCR22526 : http/tests/security/xss-DENIED-defineProperty.html = FAIL
1658
1659 // WebKit merge 48500:48585, due to newly added support for MathML.
1660 BUGCR22554 SKIP : mathml = FAIL
1661
1662 // WebKit update 48796:48820
1663 // Test #9 throws an exception.
1664 BUGCR23956 WIN LINUX : fast/dom/Range/getClientRects.html = FAIL
1665 BUGCR24126 : fast/dom/HTMLInputElement/size-attribute.html = FAIL
1666
1667 // Started happening somewhere around http://trac.webkit.org/changeset/48989.
1668 BUGCR23955 LINUX : fast/css/last-of-type-pseudo-class.html = IMAGE
1669
1670 // Started failing for no apparent reason at r28124, and IMAGE+TEXT diffs started at r51875
1671
1672 // Flaky timeouts first appearing at r27764 (webkit 48947)
1673 BUGCR9798 WIN : http/tests/cookies/multiple-cookies.html = TIMEOUT PASS
1674
1675 // WebKit update: 49213:49221
1676 BUGCR24063 : fast/dom/Window/window-postmessage-clone.html = FAIL
1677
1678 // Got slow with V8 update to 1.3.15. Debug logging perhaps?
1679 BUGCR24182 DEBUG SLOW : fast/forms/input-implicit-length-limit.html = PASS
1680 BUGCR24182 DEBUG SLOW : fast/forms/input-maxlength.html = PASS
1681
1682 // Failing at WebKit Linux (dbg)(3) build 7795
1683 BUGCR24119 LINUX DEBUG : tables/mozilla/bugs/bug1220.html = PASS FAIL
1684
1685 // WebKit roll 49405:49413
1686 BUGCR28409 : http/tests/xmlhttprequest/logout.html = FAIL
1687
1688 // WebKit Roll 49597:49640
1689 BUGCR24966 SLOW MAC DEBUG : fast/frames/calculate-fixed.html = PASS
1690
1691 // WebKit Roll 49640:49684
1692 BUGCR25202 LINUX WIN : svg/W3C-SVG-1.1/masking-path-02-b.svg = FAIL
1693 BUGCR25208 LINUX WIN : svg/W3C-SVG-1.1/masking-path-05-f.svg = FAIL
1694 BUG_JEREMY MAC : fast/frames/onlyCommentInIFrame.html = FAIL
1695
1696 // WebKit Roll 49684:49761
1697 BUGCR26042 DEBUG : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
1698 BUGCR26042 LINUX RELEASE : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
1699
1700 // Incorrect baseline removed.
1701 BUGCR25433 WIN LINUX : css2.1/t040103-ident-03-c.html = IMAGE
1702
1703 // WebKit roll 49961:49992
1704 // Added in http://trac.webkit.org/changeset/49990
1705 BUGCR25884 WIN LINUX : fast/dom/Document/CaretRangeFromPoint/caretRangeFromPoint-in-zoom-and-scroll.html = FAIL
1706
1707 // This only crashes on the old buildbot slave. It fails image, like the other slaves, on the new one.
1708 // FIXME: Make this just be IMAGE after we move over to the new bots.
1709 BUGCR26344 LINUX DEBUG : fast/text/atsui-partial-selection.html = CRASH IMAGE
1710
1711 BUGWK45957 : fast/multicol/column-rules-stacking.html = FAIL
1712
1713 // ==== WebKit roll 50258:50313 ====
1714 BUGCR26291 MAC : fast/text/atsui-multiple-renderers.html = IMAGE
1715 BUGCR26291 MAC : transforms/2d/hindi-rotated.html = IMAGE
1716
1717 // Flaky since at least WebKit 50258.
1718 BUGCR32098 : fast/dom/defaultView.html = MISSING PASS
1719
1720 // more test flakiness
1721 BUGCR27334 MAC : http/tests/security/xssAuditor/object-embed-tag.html = PASS
1722
1723 // more test flakiness
1724 BUGCR27418 SLOW WIN RELEASE : http/tests/cookies/simple-cookies-max-age.html = PASS
1725 BUGCR27418 SLOW WIN RELEASE : http/tests/misc/url-in-utf16le.html = PASS
1726 BUGCR27418 MAC DEBUG : http/tests/plugins/interrupted-get-url.html = PASS TEXT
1727 BUGCR27418 MAC RELEASE SLOW : http/tests/plugins/interrupted-get-url.html = PASS
1728
1729 // The following upstream patches add -Webkit-color-correction support:
1730 // http://trac.webkit.org/changeset/50760
1731 // http://trac.webkit.org/changeset/50852
1732 // The ColorSpace was only implemented for CG, more port implementation
1733 // required in order for Chromium to support color correction.
1734 BUGCR28005 WIN LINUX : fast/css/color-correction-backgrounds-and-text.html = FAIL
1735 BUGCR28005 WIN LINUX : fast/css/color-correction-on-backgrounds.html = IMAGE+TEXT
1736 BUGCR28005 WIN LINUX : fast/css/color-correction-on-text.html = IMAGE+TEXT
1737 BUGCR28005 WIN LINUX : fast/css/color-correction.html = IMAGE+TEXT
1738 BUGCR28005 WIN LINUX : fast/css/color-correction-on-box-shadow.html = IMAGE+TEXT
1739 BUGCR28005 WIN LINUX : fast/css/color-correction-on-text-shadow.html = IMAGE+TEXT
1740 BUGCR28005 WIN LINUX : fast/css/color-correction-on-background-image.html = FAIL
1741 BUGCR28005 WIN LINUX : fast/css/color-correction-untagged-images.html = IMAGE+TEXT
1742
1743 // May also be related to r50760, but not as confident.
1744 BUGCR27551 WIN : fast/css/shadow-multiple.html = IMAGE
1745
1746 // WebKit merge 50756:50820, possibly due to WebKit r50808/r50786 and Chromium r31715
1747 BUGCR27553 WIN : fast/text/atsui-partial-selection.html = IMAGE
1748
1749 BUGCR22700 WIN LINUX : fast/canvas/canvas-shadow.html = TEXT
1750
1751
1752 // Failures from merge 50972:51042
1753 // The test requires DRT/Test Shell to support error page handling.
1754 BUGCR27850 : fast/history/back-forward-reset-after-error-handling.html = TEXT
1755 // Need to update chromium so the web frame delegate is informed when window objects
1756 // in isolated worlds are cleared.
1757 BUGCR27849 : http/tests/security/isolatedWorld/didClearWindowObject.html = TEXT
1758
1759 BUGCR28040 WIN MAC DEBUG : fast/body-propagation/overflow/003-xhtml.xhtml = PASS IMAGE+TEXT
1760
1761 BUGCR28092 WIN : http/tests/xmlhttprequest/redirect-cross-origin-post.html = PASS FAIL
1762
1763 // Started failing with move from Lighttpd to Apache.
1764 // Since we have some bots on Lighttpd and some on Apache, mark it as flaky for
1765 // now. Once we decide on one or the other, then we can address these tests.
1766 BUG_OJAN MAC LINUX : http/tests/loading/text-content-type-with-binary-extension.html = TEXT
1767 BUG_OJAN LINUX : http/tests/xmlhttprequest/cache-override.html = TEXT
1768
1769 // These tests time out *and* are slow. The test should be fixed to not timeout,
1770 // then should be marked as SLOW/PASS.
1771 BUGCR2844 WIN : http/tests/appcache/cyrillic-uri.html = TIMEOUT PASS CRASH
1772 BUGCR2844 WIN : http/tests/appcache/fail-on-update.html = TIMEOUT PASS TEXT
1773 BUGCR2844 WIN : http/tests/appcache/offline-access.html = TIMEOUT PASS
1774 BUGCR2844 WIN LINUX DEBUG : http/tests/appcache/update-cache.html = TIMEOUT PASS
1775 BUGCR2844 WIN RELEASE : http/tests/appcache/update-cache.html = TIMEOUT PASS
1776
1777 // These tests sometimes pass and sometimes have a text difference due
1778 // to chromium's appcache being async.
1779 BUGCR2844 WIN RELEASE : http/tests/appcache/top-frame-3.html = TEXT PASS
1780 BUGCR2844 MAC LINUX : http/tests/appcache/top-frame-3.html = TEXT PASS
1781 BUGCR2844 WIN RELEASE : http/tests/appcache/top-frame-4.html = TEXT PASS
1782 BUGCR2844 MAC LINUX : http/tests/appcache/top-frame-4.html = TEXT PASS
1783
1784 // These fail because chromium's appcache is async but webkit's is not.
1785 BUGCR2844 SKIP : http/tests/appcache/idempotent-update.html = FAIL
1786 BUGCR2844 SKIP : http/tests/appcache/top-frame-2.html = FAIL
1787
1788 // This test fails because there is no setAppCacheMaximumSize API yet.
1789 BUGCR2844 SKIP : http/tests/appcache/max-size.html = FAIL
1790
1791 // Flakiness documented around Webkit Roll 51681:51711
1792 BUGCR2844 SKIP : http/tests/appcache/404-manifest.html = TIMEOUT PASS
1793 BUGCR2844 SKIP : http/tests/appcache/404-resource.html = TIMEOUT PASS
1794 BUGCR2844 SKIP : http/tests/appcache/foreign-iframe-main.html = TIMEOUT PASS
1795 BUGCR2844 SKIP : http/tests/appcache/non-html.xhtml = TIMEOUT PASS
1796
1797 // New failures from WebKit r51577
1798 BUGCR29164 WIN LINUX MAC : fast/frames/sandboxed-iframe-plugins.html = TEXT
1799
1800 // New failures from WebKit merge 51581:51584
1801 BUGCR29167 MAC DEBUG : fast/dom/replaceChild.html = IMAGE PASS
1802
1803 // Failures introduced by USE_NEW_BUILDER in Skia.
1804 BUGCR33287 WIN LINUX : fast/canvas/set-colors.html = TEXT
1805
1806 // Failures from WebKit merge 51711:51724
1807 BUGCR32003 : fast/js/string-property-deletion.html = TEXT
1808
1809 // Regression from Webkit merge 51772 -> 51784
1810 BUGCR35329 WIN : http/tests/appcache/resource-redirect-2.html = TIMEOUT PASS
1811
1812 // More Webkit Roll to r51875
1813 // Some of these went from IMAGE+TEXT to just IMAGE at r57886
1814 BUGCR29737 MAC : svg/custom/use-elementInstance-event-target.svg = IMAGE
1815 BUGCR29737 MAC : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE
1816 BUGCR29737 MAC : svg/filters/sourceAlpha.svg = IMAGE
1817
1818 // These tests got very flaky (failing 8/10 runs!) after
1819 // http://src.chromium.org/viewvc/chrome?view=rev&revision=34610
1820 // The only relevant change there is that we now sort tests purely
1821 // lexicographically instead of putting the http tests first. This is a good
1822 // thing because it matches upstream. The regressions are likely due to timing
1823 // issues because the http tests moved from one debug shard to another.
1824 // Likely, moving Windows to using Apache2 will fix this as the Linux/Mac builds
1825 // did not get flaky here and moving to Apache made the appcache tests less
1826 // flaky on those platforms.
1827 BUGCR25977 WIN DEBUG : http/tests/appcache/access-via-redirect.php = TIMEOUT PASS
1828 BUGCR25977 WIN : http/tests/appcache/auth.html = TIMEOUT PASS
1829 BUGCR25977 WIN DEBUG : http/tests/appcache/crash-when-navigating-away-then-back.html = TIMEOUT PASS
1830 BUGCR25977 WIN DEBUG : http/tests/appcache/empty-manifest.html = TIMEOUT PASS
1831 // This test is slow on windows, but sometimes times out indefinitely.
1832 // See if this improves when we move to apache.
1833 BUGCR25977 WIN : http/tests/appcache/fallback.html = TIMEOUT PASS
1834 BUGCR25977 WIN DEBUG : http/tests/appcache/local-content.html = TIMEOUT PASS
1835 BUGCR25977 WIN DEBUG : http/tests/appcache/main-resource-hash.html = TIMEOUT PASS
1836 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-containing-itself.html = TIMEOUT PASS
1837 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-redirect-2.html = TIMEOUT PASS
1838 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-redirect.html = TIMEOUT PASS
1839 BUGCR25977 WIN DEBUG : http/tests/appcache/manifest-with-empty-file.html = TIMEOUT PASS
1840 BUGCR25977 WIN DEBUG : http/tests/appcache/wrong-content-type.html = TIMEOUT PASS
1841 BUGCR25977 WIN DEBUG : http/tests/appcache/online-whitelist.html = TIMEOUT PASS
1842 BUGCR25977 WIN DEBUG : http/tests/appcache/top-frame-1.html = TIMEOUT PASS
1843 BUGCR25977 WIN DEBUG : http/tests/appcache/whitelist-wildcard.html = TIMEOUT PASS
1844 BUGCR25977 WIN DEBUG : http/tests/appcache/resource-redirect.html = TIMEOUT PASS
1845 BUGCR25977 WIN : http/tests/appcache/xhr-foreign-resource.html = TIMEOUT PASS
1846 BUGCR25977 WIN DEBUG : http/tests/appcache/simple.html = TIMEOUT PASS
1847 BUGCR25977 WIN DEBUG : http/tests/appcache/reload.html = TIMEOUT PASS
1848 BUGCR25977 WIN DEBUG : http/tests/appcache/wrong-signature-2.html = TIMEOUT PASS
1849 BUGCR25977 WIN DEBUG : http/tests/appcache/top-frame-4.html = TIMEOUT TEXT PASS
1850 BUGCR25977 WIN DEBUG : http/tests/appcache/top-frame-3.html = TIMEOUT TEXT PASS
1851
1852 // WebKit update 52293->52323
1853 BUGCR31253 : http/tests/security/xss-DENIED-assign-location-href-javascript.html = TEXT
1854
1855 // WebKit update 52323->52366
1856 BUGCR30826 WIN : platform/win/fast/events/panScroll-imageMap-noHref-scroll.html = TEXT
1857 BUGCR30826 WIN DEBUG : platform/win/fast/events/panScroll-event-fired.html = PASS TEXT TIMEOUT
1858
1859 // Flaky
1860 BUGCR30930 LINUX DEBUG : tables/mozilla/bugs/bug15933.html = IMAGE PASS
1861
1862 // WebKit roll 52468->52535
1863 BUGCR31991 WIN LINUX : fast/text/international/bidi-layout-across-linebreak.html = TEXT
1864 BUGCR31252 : http/tests/security/listener/xss-inactive-closure.html = TEXT
1865
1866 BUGCR31623 WIN: http/tests/appcache/remove-cache.html = PASS TEXT TIMEOUT
1867
1868 // WebKit roll 52852 -> 52867
1869 BUGCR32018 DEBUG : http/tests/websocket/tests/simple-stress.html = PASS TEXT TIMEOUT
1870
1871 // V8's implementation of getOwnPropertyNames has different results for built-in
1872 // functions.
1873 BUGCR32155 : fast/js/Object-getOwnPropertyNames.html = TEXT
1874
1875 // New flakiness?
1876 BUGCR32149 WIN RELEASE : fast/dom/Document/early-document-access.html = TIMEOUT PASS
1877
1878 // Expectations from roll to 53171:53194
1879 // As of Oct 7, 2010, times out on all platforms when doing DEBUG costing 13 seconds on average. Skipping.
1880 BUGCR32308 DEBUG SKIP : fast/frames/cached-frame-counter.html = TIMEOUT
1881
1882 // WebKit roll 53341:53451
1883 BUGCR32670 LINUX : fast/css/zoom-body-scroll.html = TEXT
1884 BUGCR32673 WIN LINUX : fast/forms/textarea-scrollbar-height.html = TEXT
1885
1886 // Flaky tests found during the roll.
1887 BUGCR32689 MAC LINUX DEBUG : http/tests/security/mixedContent/about-blank-iframe-in-main-frame.html = TEXT PASS
1888 BUGCR32693 MAC DEBUG : svg/dom/SVGRectElement/rect-modify-rx.svg = TEXT PASS
1889
1890 BUGCR33293 SKIP : fast/media/lifetime.html = TIMEOUT
1891
1892 // WebKit roll 53655 -> 53704
1893 BUGCR32900 WIN LINUX : http/tests/misc/slow-loading-mask.html = IMAGE+TEXT
1894
1895 // WebKit roll 53941 -> 54015
1896 BUGCR33358 WIN LINUX : fast/dom/Window/window-postmessage-clone-frames.html = TEXT
1897
1898 // WebKit roll 54059 -> 54075
1899 BUGCR33538 : fast/dom/Window/anonymous-slot-with-changes.html = TEXT
1900
1901 BUGCR35064 WIN : fast/forms/restore-selection-after-layout.html = TEXT PASS
1902
1903 // WebKit roll 54482 to 54493.
1904 BUGCR35242 WIN : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT
1905
1906 // WebKit roll 54493 to 54530: new tests.
1907 BUGCR35114 : fast/js/parser-syntax-check.html = TEXT
1908
1909 // Started failing during roll from 54848 -> 54898
1910 // Started failing with 54865. No rebaselines upstream but they don't run pixel tests.
1911 BUGCR36019 WIN LINUX : fast/images/svg-as-tiled-background.html = IMAGE
1912
1913 // WebKit roll 55250 to 55339
1914 BUGCR36966 : fast/loader/about-blank-hash-kept.html = FAIL
1915
1916 // New test, added http://trac.webkit.org/changeset/55546
1917 BUGCR37896 WIN LINUX : fast/multicol/hit-test-above-or-below.html = TEXT
1918 BUGCR37896 WIN DEBUG : fast/text/firstline/001.html = PASS CRASH
1919 BUGCR37896 LINUX MAC DEBUG : fast/text/firstline/001.html = PASS CRASH TIMEOUT
1920 // Added in http://trac.webkit.org/changeset/55587
1921 // Three flaky tests noticed during a sheriff rotation.
1922 BUGCR37962 MAC LINUX DEBUG : fast/dom/HTMLElement/bdo.html = CRASH PASS
1923 BUGCR37962 LINUX DEBUG : fast/forms/multiple-form-submission-protection-mouse.html = CRASH PASS
1924
1925 // WebKit roll r55853 -> 55940
1926 // Flaky test
1927 BUG_JIANLI MAC : fast/forms/select-style.html = IMAGE PASS
1928
1929 // The touch targeting logic was recently changed.
1930 // TIMEOUT added for WebKit roll 74534:74557
1931 // FAIL added because of differing failure modes on different platforms
1932 BUGCR36415 : fast/events/touch/touch-target.html = FAIL TIMEOUT
1933
1934 // One pixel changes from gray 0x83 to gray 0x81. Valgrind is clean.
1935 BUGCR38534 LINUX : tables/mozilla/bugs/bug20804.html = IMAGE PASS
1936
1937 // WebKit roll 56197:56239.
1938 // Needs layoutTestController.setMediaType() (implemented on Qt only)
1939 BUGCR38656 : fast/media/print-restores-previous-mediatype.html = TEXT
1940
1941 // Needs layoutTestController.setViewModeMediaFeature()
1942 BUGCR40680 SKIP : fast/media/view-mode-media-feature.html = FAIL
1943 BUGCR40680 SKIP : fast/media/media-query-list-02.html = FAIL
1944 BUGCR40680 SKIP : fast/media/media-query-list-03.html = FAIL
1945 BUGCR40680 SKIP : fast/media/media-query-list-04.html = FAIL
1946 BUGCR40680 SKIP : fast/media/media-query-list-05.html = FAIL
1947 BUGCR40680 SKIP : fast/media/media-query-list-06.html = FAIL
1948 BUGCR40680 SKIP : fast/media/media-query-list-07.html = FAIL
1949
1950 // Unknown flakiness.
1951 BUGCR38706 : svg/custom/deep-dynamic-updates.svg = IMAGE+TEXT IMAGE PASS
1952
1953 // Caused by http://trac.webkit.org/changeset/56288/
1954 BUGCR29737 WIN LINUX : svg/filters/filterRes.svg = IMAGE
1955
1956 // Caused by http://trac.webkit.org/changeset/56394.
1957 BUG_JAPHET WIN : http/tests/xmlhttprequest/xmlhttprequest-50ms-download-dispatch.html = TEXT
1958
1959 // Due to the differences in initialization checks in KURL and googleurl.
1960 // Note: this test was also marked as flaky on WIN RELEASE above, BUGCR31342.
1961 BUGCR39423 : security/block-test.html = TIMEOUT
1962
1963 BUGWK36666 : storage/open-database-over-quota.html = TEXT
1964
1965 BUGWK37283 : fast/overflow/scrollbar-restored-and-then-locked.html = TEXT
1966
1967 BUGWK37297 : fast/history/nested-visited-test.html = TEXT
1968 BUGWK37297 : fast/history/self-is-visited.html = TEXT
1969 BUGWK37297 : fast/history/sibling-visited-test.html = TEXT
1970
1971 // Added in http://trac.webkit.org/changeset/57476. Fails in Chromium because
1972 // LayoutTestController::computedStyleWithVisitedInfo() is missing.
1973 BUGCR41206 : fast/history/multiple-classes-visited.html = TEXT TIMEOUT
1974
1975 // Tests that work with KURL, but fail with GURL
1976 BUGCR41292 : fast/url/ipv4.html = TEXT
1977 BUGCR41292 : fast/url/anchor.html = TEXT
1978
1979 BUGWK33812 SKIP : fast/dom/icon-url-property.html = FAIL
1980
1981 // Failing with webkit roll 57659 -> 57677.
1982 BUGCR41817 WIN LINUX : fast/backgrounds/svg-as-background-1.html = IMAGE PASS
1983 BUGCR41817 WIN LINUX : fast/backgrounds/svg-as-background-3.html = IMAGE PASS
1984 BUGCR41817 MAC : svg/text/text-intro-05-t.svg = IMAGE
1985
1986 BUGCR42044 WIN : http/tests/security/xss-DENIED-mime-type-execute-as-html.html = PASS TIMEOUT
1987
1988 // might have been flaky
1989 BUGJAMESR WIN LINUX : svg/filters/filter-clip.svg = IMAGE
1990 BUGJAMESR WIN : svg/filters/filter-source-position.svg = IMAGE
1991 BUGJAMESR MAC LINUX : svg/filters/filter-source-position.svg = IMAGE
1992 BUGJAMESR BUGCR30048 BUGCR29737 WIN LINUX : svg/filters/shadow-on-rect-with-filter.svg = IMAGE
1993
1994 // New layoutTestController function added at r57993
1995 BUGCR42696 : http/tests/xmlhttprequest/cross-origin-authorization-with-embedder.html = TIMEOUT
1996
1997 // Started failing at r58152
1998 BUGWK38038 WIN LINUX MAC : fast/url/file-http-base.html = TEXT
1999
2000 // New test, may be safe to just rebaseline.
2001
2002 // Started failing at 58212
2003 BUGWK38108 MAC : fast/backgrounds/size/contain-and-cover.html = IMAGE
2004
2005 // WebKit roll 58304:58400
2006 // Skip since not relevant
2007 BUGUKAI WIN MAC SKIP : fast/text/international/bold-bengali.html = FAIL
2008
2009 // WebKit roll 58400:58523
2010 // We probably don't want to run these massive amount of new ECMA script conformance tests:
2011 BUGCR42875 SKIP : fast/js/sputnik = TEXT
2012 // These tests may just need to be rebaselined.
2013 BUGWK38360 WIN LINUX : fast/images/svg-background-partial-redraw.html = FAIL
2014 BUGWK38360 WIN LINUX : svg/carto.net/tabgroup.svg = FAIL
2015
2016 // Failing a few times, flak dashboard seems to agree.
2017 BUGCR41973 MAC : svg/text/text-text-05-t.svg = IMAGE
2018
2019 // WebKit roll 58626:58719
2020 BUGCR43963 WIN : fast/forms/searchfield-heights.html = IMAGE
2021 BUGCR43963 LINUX : fast/forms/searchfield-heights.html = IMAGE+TEXT TEXT
2022
2023 BUGWK38705 : http/tests/security/sandbox-inherit-to-initial-document-2.html = TEXT
2024
2025 // WebKit roll 58791:58807
2026 BUGCR43319 MAC : fast/forms/select-empty-option-height.html = TIMEOUT IMAGE PASS
2027
2028 BUGCR43496 LINUX : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2029 BUGCR43497 MAC WIN : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2030
2031 // WebKit roll 58855:58878
2032 BUGCR43419: fast/wcss/wap-input-format.xhtml = TEXT
2033 BUGCR43419: fast/wcss/wap-input-required.xhtml = TEXT
2034
2035 // Flaky tests
2036 BUGCR43890 WIN : http/tests/loading/basic.html = TEXT PASS
2037
2038 // Flaky crashing test. Started crashing around Chromium r47220
2039 BUGCR44150 LINUX : fast/forms/input-text-paste-maxlength.html = CRASH PASS
2040
2041 // The following tests fail on all platforms and need further investigation.
2042 // Many of these are skipped on the Mac platform
2043 BUGWK45991 : canvas/philip/tests/2d.drawImage.broken.html = TEXT
2044 BUGWK45991 MAC WIN : canvas/philip/tests/2d.gradient.radial.cone.top.html = TEXT
2045 BUGWK45991 LINUX RELEASE : canvas/philip/tests/2d.gradient.radial.cone.top.html = TEXT
2046 BUGWK45991 LINUX DEBUG : canvas/philip/tests/2d.gradient.radial.cone.top.html = TEXT TIMEOUT
2047 BUGWK39212 : canvas/philip/tests/2d.imageData.create1.type.html = TEXT
2048 BUGWK39212 : canvas/philip/tests/2d.imageData.create2.type.html = TEXT
2049 BUGWK39212 : canvas/philip/tests/2d.imageData.get.type.html = TEXT
2050 BUGWK40272 : canvas/philip/tests/2d.imageData.object.round.html = TEXT
2051 BUGWK40272 : canvas/philip/tests/2d.imageData.object.wrap.html = TEXT
2052 BUGWK45991 : canvas/philip/tests/2d.missingargs.html = TEXT
2053 BUGWK45991 : canvas/philip/tests/2d.pattern.image.broken.html = TEXT
2054 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.ideographic.html = TEXT
2055 BUGWK48579 : canvas/philip/tests/type.prototype.html = TEXT
2056 BUGWK50797 : canvas/philip/tests/2d.fillStyle.parse.invalid.rgba-6.html = TEXT
2057 BUGWK40147 MAC : canvas/philip/tests/toDataURL.jpeg.alpha.html = TEXT
2058 BUGCR61824 : canvas/philip/tests/2d.pattern.image.string.html = TEXT
2059
2060 // Update canvas/philip in WK r71481
2061 BUGCR62301 : canvas/philip/tests/2d.drawImage.image.incomplete.omitted.html = TEXT
2062 BUGCR62301 : canvas/philip/tests/2d.fillStyle.parse.rgb-eof.html = TEXT
2063 BUGCR62301 : canvas/philip/tests/2d.fillStyle.parse.rgba-eof.html = TEXT
2064 BUGCR62301 : canvas/philip/tests/2d.imageData.put.wrongtype.html = TEXT
2065 BUGCR62301 : canvas/philip/tests/2d.pattern.image.incomplete.empty.html = TEXT
2066 BUGCR62301 : canvas/philip/tests/2d.pattern.image.incomplete.omitted.html = TEXT
2067
2068 BUGWK48288 : canvas/philip/tests/2d.composite.operation.clear.html = TEXT
2069 BUGWK48289 : canvas/philip/tests/2d.composite.operation.darker.html = TEXT
2070 BUGWK48290 : canvas/philip/tests/2d.composite.operation.highlight.html = TEXT
2071 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.copy.html = TEXT
2072 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.destination-atop.html = TEXT
2073 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.destination-in.html = TEXT
2074 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.source-in.html = TEXT
2075 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.fill.source-out.html = TEXT
2076 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.copy.html = TEXT
2077 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.destination-atop.html = TEXT
2078 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.destination-in.html = TEXT
2079 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.source-in.html = TEXT
2080 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.image.source-out.html = TEXT
2081 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.copy.html = TEXT
2082 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.destination-atop.html = TEXT
2083 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.destination-in.html = TEXT
2084 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.source-in.html = TEXT
2085 BUGWK39177 : canvas/philip/tests/2d.composite.uncovered.pattern.source-out.html = TEXT
2086 BUGWK39168 : canvas/philip/tests/2d.fillStyle.parse.system.html = TEXT
2087 BUGWK45991 : canvas/philip/tests/2d.pattern.image.undefined.html = TEXT
2088 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.bottom.html = TEXT
2089 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.hanging.html = TEXT
2090 BUGWK45991 : canvas/philip/tests/2d.text.draw.baseline.middle.html = TEXT
2091 BUGWK38463 : canvas/philip/tests/2d.text.draw.baseline.top.html = TEXT
2092 BUGWK20867 : canvas/philip/tests/2d.text.draw.fill.maxWidth.fontface.html = TEXT
2093 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.end.html = TEXT
2094 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.nonspace.html = TEXT
2095 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.other.html = TEXT
2096 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.space.html = TEXT
2097 BUGWK45991 : canvas/philip/tests/2d.text.draw.space.collapse.start.html = TEXT
2098 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.basic.html = TEXT
2099 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.complex.html = TEXT
2100 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.invalid.html = TEXT
2101 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.size.percentage.default.html = TEXT
2102 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.size.percentage.html = TEXT
2103 BUGWK50859 : canvas/philip/tests/2d.text.font.parse.system.html = TEXT
2104 BUGWK45991 : canvas/philip/tests/2d.text.measure.width.space.html = TEXT
2105
2106 // These tests fail everywhere we use skia and are most likely skia bugs
2107 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.object.update.html = TEXT
2108 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.behind.html = TEXT
2109 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.beside.html = TEXT
2110 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.cylinder.html = TEXT
2111 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.cone.shape2.html = TEXT
2112 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.outside3.html = TEXT
2113 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.touch1.html = TEXT
2114 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.gradient.radial.touch3.html = TEXT
2115 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.line.width.basic.html = TEXT
2116 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.line.width.transformed.html = TEXT
2117 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arc.angle.3.html = TEXT
2118 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arc.angle.5.html = TEXT
2119 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arcTo.shape.curve1.html = TEXT
2120 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.path.arcTo.shape.curve2.html = TEXT
2121 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.pattern.paint.norepeat.coord3.html = TEXT
2122 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.pattern.paint.repeatx.coord1.html = TEXT
2123 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.pattern.paint.repeaty.coord1.html = TEXT
2124 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.alpha.3.html = TEXT
2125 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.alpha.4.html = TEXT
2126 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.alpha.5.html = TEXT
2127 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.canvas.alpha.html = TEXT
2128 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.canvas.basic.html = TEXT
2129 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.canvas.transparent.2.html = TEXT
2130 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.enable.blur.html = TEXT
2131 BUGWK15266 LINUX WIN : canvas/philip/tests/2d.shadow.gradient.alpha.html = TEXT
2132 BUGWK15266 LINUX WIN : canvas/philip/tests/2d.shadow.gradient.basic.html = TEXT
2133 BUGWK15266 LINUX WIN : canvas/philip/tests/2d.shadow.gradient.transparent.2.html = TEXT
2134 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.alpha.html = TEXT
2135 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.basic.html = TEXT
2136 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.scale.html = TEXT
2137 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.image.transparent.2.html = TEXT
2138 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.pattern.alpha.html = TEXT
2139 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.pattern.basic.html = TEXT
2140 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.shadow.pattern.transparent.2.html = TEXT
2141 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.transformation.setTransform.skewed.html = TEXT
2142 BUGWK45991 LINUX WIN : canvas/philip/tests/2d.transformation.transform.skewed.html = TEXT
2143
2144 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.cone.front.html = TEXT
2145 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.inside2.html = TEXT
2146 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.inside3.html = TEXT
2147 BUGWK45991 MAC : canvas/philip/tests/2d.gradient.radial.outside1.html = TEXT
2148 BUGWK45991 MAC : canvas/philip/tests/2d.line.cap.closed.html = TEXT
2149 BUGWK45991 MAC : canvas/philip/tests/2d.line.join.parallel.html = TEXT
2150 BUGWK45991 MAC : canvas/philip/tests/2d.line.miter.lineedge.html = TEXT
2151 BUGWK45991 MAC : canvas/philip/tests/2d.path.rect.winding.html = TEXT
2152 BUGWK45991 MAC : canvas/philip/tests/2d.shadow.enable.blur.html = TEXT
2153 BUGWK45991 MAC : canvas/philip/tests/2d.shadow.enable.x.html = TEXT
2154 BUGWK45991 MAC : canvas/philip/tests/2d.shadow.enable.y.html = TEXT
2155 BUGWK45991 MAC : canvas/philip/tests/2d.strokeRect.zero.4.html = TEXT
2156 BUGWK45991 WIN : canvas/philip/tests/2d.gradient.radial.touch2.html = TEXT
2157
2158 // Flaky tests
2159 BUGCR44229 WIN LINUX : fast/loader/recursive-before-unload-crash.html = PASS TEXT
2160
2161 BUGWK39655 : fast/dom/prototype-property.html = FAIL
2162
2163 // These SVG tests have been flaky on Win from quite some time.
2164 // Hard to pin down which roll introduced the flakiness.
2165 BUGCR45106 WIN : svg/clip-path/clip-path-evenodd-nonzero.svg = PASS CRASH
2166 BUGCR45106 WIN : svg/text/text-text-05-t.svg = PASS CRASH
2167
2168 BUGCR45720 WIN LINUX : http/tests/websocket/tests/reload-crash.html = PASS CRASH
2169
2170 // Chromium does not support cancel for notifications permissions.
2171 BUGWK42798 SKIP : fast/notifications/notifications-cancel-request-permission.html = FAIL
2172
2173
2174 // HTML5 Geolocation API does not use window.clientInformation.
2175 BUGCR11246 SKIP : fast/dom/Window/window-properties-geolocation.html = TEXT
2176
2177 BUGWK40740 : svg/W3C-SVG-1.1/fonts-glyph-02-t.svg = CRASH PASS
2178
2179 BUGCR46603 : fast/frames/lots-of-iframes.html = PASS TIMEOUT
2180 BUGCR46603 : fast/frames/lots-of-objects.html = PASS TIMEOUT
2181
2182 // LayoutTestController::pageProperty is not implemented for Chromium yet.
2183 BUGWK35961 : printing/page-rule-selection.html = TEXT
2184
2185 BUGCR47035 WIN DEBUG : fast/loader/stateobjects/document-destroyed-navigate-back-with-fragment-scroll.html = PASS TEXT
2186
2187 // CSS3 Hyphenation landed in http://trac.webkit.org/changeset/61548
2188 // We don't implement it yet.
2189 BUGCR47083 : fast/text/hyphenate-character.html = IMAGE+TEXT
2190 BUGCR47083 : fast/text/hyphens.html = IMAGE+TEXT
2191 BUGCR47083 : fast/text/hyphenate-locale.html = IMAGE+TEXT
2192 BUGCR47083 : fast/text/hyphenate-first-word.html = IMAGE+TEXT
2193
2194 // WebKit roll 61547:61629. Still need to investigate.
2195 BUG_HCLAM : fast/js/script-line-number.html = TEXT
2196
2197 // LayoutTestController::isPageBoxVisible, pageAreaRectInPixels, and preferredPageSizeInPixels are not implemented yet for Chromium.
2198 BUGWK37538 : printing/page-format-data.html = TEXT
2199
2200 // First noticed on trybots after r61836, now in the tree.
2201 BUG_MNAGANOV LINUX : fast/js/Object-create.html = CRASH FAIL
2202
2203 // Produces different results on Mac dbg.
2204 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-appearances-capacity.html = FAIL
2205 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-element.html = FAIL
2206 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-optimums.html = FAIL
2207 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles.html = FAIL
2208 BUGCR47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles-changing-pseudo.html = FAIL
2209
2210
2211 BUGWK41311 WIN LINUX : fast/borders/border-radius-circle.html = IMAGE
2212 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-01.html = IMAGE
2213 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-02.html = IMAGE
2214 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-03.html = IMAGE
2215 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-01.html = IMAGE
2216 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-02.html = IMAGE
2217 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-03.html = IMAGE
2218 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-04.html = IMAGE
2219 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed04.html = IMAGE
2220 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed05.html = IMAGE
2221 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed06.html = IMAGE
2222 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted04.html = IMAGE
2223 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted05.html = IMAGE
2224 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted06.html = IMAGE
2225 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble04.html = IMAGE
2226 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble05.html = IMAGE
2227 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble06.html = IMAGE
2228 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble07.html = IMAGE
2229 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble08.html = IMAGE
2230 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble09.html = IMAGE
2231
2232 // Need to implement EditorClient::requestCheckingOfString()
2233 // Overriden with 66682
2234 // BUGWK41423 WIN LINUX : editing/spelling/spellcheck-paste.html = TEXT
2235
2236 // Flaky tests.
2237 BUGCR44345 LINUX : svg/zoom/text/zoom-hixie-mixed-009.xml = IMAGE PASS
2238 BUGCR44346 LINUX : svg/zoom/page/zoom-hixie-mixed-009.xml = IMAGE PASS
2239 BUGCR44347 LINUX : svg/hixie/mixed/009.xml = IMAGE PASS
2240 BUGCR48139 LINUX : fast/js/comparison-operators-less.html = CRASH PASS
2241 BUGCR48144 LINUX : fast/js/activation-object-function-lifetime.html = CRASH PASS
2242
2243 // Failing/flaky.
2244 BUGCR48239 : fast/js/function-apply.html = TEXT
2245 BUGCR48239 WIN LINUX : fast/js/function-apply-aliased.html = TEXT PASS
2246 BUGCR48239 : fast/js/function-apply-many-args.html = TEXT
2247
2248 // The error gives a different line number than upstream.  Maybe a V8/JSC
2249 // difference?
2250 BUGCR48452 : svg/custom/use-font-face-crash.svg = FAIL
2251
2252 BUGCR48668 MAC : svg/W3C-SVG-1.1/struct-use-01-t.svg = FAIL
2253
2254 // These ietestcenter tests still don't pass. Careful before removing these
2255 // that the baselines aren't incorrect
2256 // (like in: https://bugs.webkit.org/show_bug.cgi?id=42215)
2257 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-1.html = TEXT
2258 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-2.html = TEXT
2259 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-1.html = TEXT
2260 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-2.html = TEXT
2261 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-1.html = TEXT
2262 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-2.html = TEXT
2263 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-3.html = TEXT
2264 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-4.html = TEXT
2265 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-5.html = TEXT
2266 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-7.html = TEXT
2267 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-178.html = TEXT
2268 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-179.html = TEXT
2269 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-180.html = TEXT
2270 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-10.html = TEXT
2271 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-18.html = TEXT
2272 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-34.html = TEXT
2273 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.6.html = TEXT
2274 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.1-1.html = TEXT
2275 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.2-1.html = TEXT
2276 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.3-1.html = TEXT
2277 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.4-1.html = TEXT
2278 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.5-1.html = TEXT
2279 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-212.html = TEXT
2280 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-213.html = TEXT
2281 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-214.html = TEXT
2282 BUGCR48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-215.html = TEXT
2283
2284 BUGCR49029 WIN LINUX MAC : fast/js/object-literal-syntax.html = TEXT
2285
2286 BUGCR48859 WIN : fast/inline/continuation-outlines-with-layers-2.html = IMAGE+TEXT
2287
2288 // Somehow rebaseline in http://trac.webkit.org/changeset/63196 failed.
2289 // Need investigation.
2290 BUGWK38016 WIN : svg/custom/foreign-object-skew.svg = FAIL
2291
2292 BUGWK42241 LINUX : svg/custom/text-rotated-gradient.svg = IMAGE PASS
2293
2294 // These tests all fail because the expected output is wrong. The
2295 // reason is that JSC does not currently implement Object.freeze and
2296 // Object.isFrozen. These test has intentionally been marked as FAIL,
2297 // which makes it easy to fix this when webkit implements these ES5 features.
2298 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-21.html = FAIL
2299 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-24.html = FAIL
2300 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-1.html = FAIL
2301 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-2.html = FAIL
2302 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-1.html = FAIL
2303 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-1.html = FAIL
2304 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-2.html = FAIL
2305 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-1.html = FAIL
2306 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-1.html = FAIL
2307 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-2.html = FAIL
2308 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-3.html = FAIL
2309 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-4.html = FAIL
2310 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-5.html = FAIL
2311 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-6.html = FAIL
2312 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-7.html = FAIL
2313 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-8.html = FAIL
2314 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-9.html = FAIL
2315 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-10.html = FAIL
2316 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-11.html = FAIL
2317 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-12.html = FAIL
2318 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-13.html = FAIL
2319 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-14.html = FAIL
2320 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-15.html = FAIL
2321 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-16.html = FAIL
2322 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-17.html = FAIL
2323 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-18.html = FAIL
2324 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-19.html = FAIL
2325 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-20.html = FAIL
2326 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-21.html = FAIL
2327 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-22.html = FAIL
2328 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-23.html = FAIL
2329 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-24.html = FAIL
2330 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-25.html = FAIL
2331 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-26.html = FAIL
2332 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-27.html = FAIL
2333 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-6.html = FAIL
2334
2335 // These tests all fail because the expected output is wrong. The
2336 // reason is that JSC does not currently implement Object.seal and
2337 // Object.isSealed. These test has intentionally been marked as FAIL,
2338 // which makes it easy to fix this when webkit implements these ES5 features.
2339 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-1.html = FAIL
2340 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-2.html = FAIL
2341 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-1.html = FAIL
2342 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-1.html = FAIL
2343 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-10.html = FAIL
2344 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-11.html = FAIL
2345 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-12.html = FAIL
2346 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-13.html = FAIL
2347 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-14.html = FAIL
2348 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-15.html = FAIL
2349 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-16.html = FAIL
2350 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-17.html = FAIL
2351 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-18.html = FAIL
2352 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-19.html = FAIL
2353 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-2.html = FAIL
2354 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-20.html = FAIL
2355 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-21.html = FAIL
2356 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-22.html = FAIL
2357 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-23.html = FAIL
2358 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-24.html = FAIL
2359 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-25.html = FAIL
2360 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-26.html = FAIL
2361 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-27.html = FAIL
2362 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-3.html = FAIL
2363 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-4.html = FAIL
2364 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-5.html = FAIL
2365 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-6.html = FAIL
2366 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-7.html = FAIL
2367 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-8.html = FAIL
2368 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-9.html = FAIL
2369 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-5.html = FAIL
2370 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-20.html = FAIL
2371 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-23.html = FAIL
2372 BUGWK42371 : ietestcenter/Javascript/15.2.3.4-4-2.html = FAIL
2373 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-1.html = FAIL
2374 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-2.html = FAIL
2375 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-1.html = FAIL
2376
2377 // These tests all fail because the expected output is wrong. The
2378 // reason is that JSC does not currently implement Function.prototype.bind
2379 // These test has intentionally been marked as FAIL, which makes it easy
2380 // to fix this when webkit implements this ES5 feature.
2381 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-38.html = FAIL
2382 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-0-1.html = FAIL
2383 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-0-2.html = FAIL
2384 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-1.html = FAIL
2385 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-2.html = FAIL
2386 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-3.html = FAIL
2387 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-4.html = FAIL
2388 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-5.html = FAIL
2389 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-15-1.html = FAIL
2390 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-15-2.html = FAIL
2391 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-16-1.html = FAIL
2392 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-1.html = FAIL
2393 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-2.html = FAIL
2394 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-3.html = FAIL
2395 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-4.html = FAIL
2396 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-5.html = FAIL
2397 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-6.html = FAIL
2398 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-7.html = FAIL
2399 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-8.html = FAIL
2400 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-9.html = FAIL
2401 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-8-1.html = FAIL
2402 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-8-2.html = FAIL
2403 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-9-1.html = FAIL
2404 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-9-2.html = FAIL
2405
2406 BUGWK42428 LINUX WIN : svg/W3C-SVG-1.1/filters-conv-01-f.svg = IMAGE+TEXT
2407
2408 // Need setPrinting.
2409 BUGWK20011 : printing/setPrinting.html = FAIL
2410
2411 // Needs V8 change.
2412 BUGCR49343 : fast/js/reserved-words-as-property.html = TEXT
2413
2414 BUGWK42598 : http/tests/misc/401-alternative-content.php = TEXT
2415 BUGWK42598 : http/tests/xmlhttprequest/failed-auth.html = TEXT
2416
2417 BUGWK42769 : http/tests/xmlhttprequest/remember-bad-password.html = TEXT
2418 BUGWK42769 : http/tests/security/401-logout/401-logout.php = TIMEOUT
2419
2420 // Flaky since at least chromium r52834, WebKit r63615.
2421 BUGCR49970 : platform/chromium/plugins/call-as-function.html = PASS TEXT
2422
2423 // Flaky since WebKit r63994
2424 BUGWK42964 WIN LINUX : tables/mozilla_expected_failures/bugs/bug89315.html = PASS FAIL
2425
2426 // Fails since WebKit r64156
2427 BUGWK43086 : fast/canvas/canvas-ImageData-behaviour.html = TEXT
2428
2429 // Application Cache Quotas
2430 BUGWK43459 : http/tests/appcache/origin-quota.html = TEXT MISSING
2431
2432 // Fixed only on Mac
2433 // This test has not landed yet, though the fix has.
2434 //BUGWK41968 LINUX WIN : svg/hittest/svg-rect-hit.html = TEXT
2435
2436 // Need to support DeviceMotion.
2437 BUGCR51416 : fast/dom/DeviceMotion/window-property.html = TEXT
2438
2439 // Slow test introduced in r64817
2440 BUGCR51571 WIN : http/tests/misc/bad-charset-alias.html = TIMEOUT PASS
2441
2442 BUGCR51869 : http/tests/websocket/tests/frame-length-overflow.html = TEXT PASS
2443
2444 BUGCR51854 WIN SLOW : http/tests/storage/callbacks-are-called-in-correct-context.html = PASS
2445
2446 // Regressions from r65229
2447 BUGWK43912 WIN LINUX : svg/batik/masking/maskRegions.svg = IMAGE
2448 BUGWK43912 WIN LINUX : svg/custom/grayscale-gradient-mask.svg = IMAGE
2449 BUGWK43912 WIN LINUX : svg/custom/absolute-sized-content-with-resources.xhtml = IMAGE
2450
2451 // Times out frequently since the test was added
2452 BUGCR52017 MAC LINUX : http/tests/misc/isindex-with-no-form.html = PASS TIMEOUT
2453
2454 // Probably http://trac.webkit.org/changeset/65381
2455 // This test causes the next one to run to ASSERT
2456 BUGWK44079 DEBUG SKIP : fast/events/popup-allowed-from-gesture-initiated-form-submit.html = PASS
2457
2458 // Flaky. Not sure when it started to fail.
2459 BUGCR52572 WIN LINUX DEBUG : http/tests/misc/image-blocked-src-change.html = PASS TEXT
2460
2461 // Started to crash around Chromium r56408.
2462 BUGCR52573 LINUX RELEASE : fast/js/array-every.html = PASS CRASH
2463
2464 BUGWK44199 : perf = PASS TEXT
2465 BUGWK44199 DEBUG : perf/array-binary-search.html = PASS TEXT TIMEOUT
2466
2467 // Failing after http://trac.webkit.org/changeset/65665/
2468 BUGWK44278 WIN LINUX : svg/transforms/text-with-mask-with-svg-transform.svg = IMAGE+TEXT
2469
2470 // Clip paths aren't working after http://trac.webkit.org/changeset/65729
2471 BUGWK44341 WIN LINUX : svg/clip-path/clip-path-pixelation.svg = IMAGE+TEXT
2472 BUGWK44341 WIN LINUX : svg/clip-path/clip-path-childs-clipped.svg = IMAGE
2473
2474 // Flaky on Linux
2475 BUGCR53131 LINUX : fast/js/array-iterate-backwards.html = CRASH PASS
2476
2477 // new or failing since WebKit rev. 65740:65800
2478 // This test causes the DRT to crash. 
2479 BUGCR53073 DEBUG SKIP : storage/change-version.html = CRASH PASS
2480 BUGCR53073 LINUX : svg/custom/clip-path-units-changes.svg = TEXT PASS
2481
2482 // r66144 added tests to test user scripts on special documents, and Linux can't
2483 // pass them because they rely on QuickTime being installed. We wontfix these
2484 // tests and let the Mac/Win coverage ensure that the (cross-platform)
2485 // special-document machinery still works.
2486 BUGCR53546 WONTFIX LINUX : userscripts/user-script-video-document.html = TEXT
2487
2488 // These tests are flaky on Mac and Linux.
2489 BUGCR53554 MAC LINUX : svg/W3C-SVG-1.1/fonts-elem-07-b.svg = PASS IMAGE
2490 BUGCR53554 MAC LINUX : svg/custom/svg-fonts-without-missing-glyph.xhtml = PASS IMAGE
2491
2492 // New test, need to verify if it's safe to rebaseline.
2493 BUGWK44770 WIN LINUX : svg/repaint/filter-repaint.svg = IMAGE+TEXT CRASH
2494
2495 // Full Screen JS API is not yet enabled.
2496 BUGWK44797 : fullscreen = FAIL
2497
2498 // Not focusing an anchor when tab is pressed.
2499 BUGWK45061 : fast/forms/focus2.html = FAIL
2500
2501 BUGCR54330 MAC : fast/forms/input-spinbutton-capturing.html = TEXT PASS
2502 BUGCR54331 MAC : fast/forms/input-number-events.html = TEXT PASS
2503 BUGCR54333 WIN LINUX : fast/replaced/embed-display-none.html = PASS TIMEOUT
2504 BUGCR54348 LINUX : http/tests/security/xssAuditor/dom-write-innerHTML.html = PASS TEXT
2505
2506 // New test in r66740
2507 BUGWK45193 LINUX : fast/text/decomposed-after-stacked-diacritics.html = TEXT CRASH
2508
2509 // WebKit r67068
2510 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-dom-azimuth-attr.html = IMAGE
2511 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-dom-elevation-attr.html = IMAGE
2512 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-svgdom-azimuth-prop.html = IMAGE
2513 BUGWK45450 WIN LINUX : svg/dynamic-updates/SVGFEDistantLightElement-svgdom-elevation-prop.html = IMAGE
2514
2515 // Regressions from webkit r67182
2516 BUGWK45527 WIN LINUX : fast/dom/replaceChild.html = IMAGE
2517 BUGWK45527 MAC RELEASE : fast/dom/replaceChild.html = IMAGE
2518
2519 // Regression from r67285
2520 BUGWK45623 WIN LINUX : fast/dynamic/first-letter-display-change.html = IMAGE
2521
2522 // New tests added in r67376
2523 BUGWK45652 : fast/viewport/ = TEXT
2524 BUGWK45652 SKIP : fast/viewport/viewport-65.html = TEXT
2525 BUGWK45652 SKIP : fast/viewport/viewport-82.html = TEXT
2526 BUGWK45652 SKIP : fast/viewport/viewport-84.html = TEXT
2527 BUGWK45652 SKIP : fast/viewport/viewport-87.html = TEXT
2528 BUGWK45652 SKIP : fast/viewport/viewport-126.html = TEXT
2529 BUGWK45652 SKIP : fast/viewport/viewport-127.html = TEXT
2530 BUGWK45652 SKIP : fast/viewport/viewport-128.html = TIMEOUT TEXT
2531
2532 BUGWK45667 : fast/files/read-file-async.html = CRASH PASS
2533 BUGWK45667 LINUX : fast/files/read-blob-async.html = CRASH PASS
2534
2535 BUGWK45737 DEBUG SLOW : fast/frames/frame-limit.html = PASS
2536
2537 // Regressions from webkit roll r67178:t67358
2538 BUGDPRANKE WIN LINUX DEBUG : fast/forms/select-set-length-with-mutation-remove.html = TIMEOUT PASS
2539 BUGDPRANKE LINUX DEBUG : http/tests/incremental/slow-utf8-text.pl = TIMEOUT PASS
2540
2541 // BUGCR60845 : Adding the sleep  may improves the stablility
2542 BUGDPRANKE BUGCR60845 WIN LINUX : media/video-poster.html = PASS TEXT
2543
2544 BUGWEBGL : fast/canvas/webgl/css-webkit-canvas-repaint.html = IMAGE
2545 BUGWEBGL : fast/canvas/webgl/css-webkit-canvas.html = IMAGE
2546 BUGWEBGL WIN : fast/canvas/webgl/tex-image-and-sub-image-2d-with-array-buffer-view.html = CRASH PASS
2547 BUGWEBGL WIN DEBUG : fast/canvas/webgl/texture-complete.html = PASS TEXT
2548 BUGWEBGL : fast/canvas/webgl/read-pixels-test.html = TIMEOUT
2549
2550 // These three failures are due to Mesa bugs
2551 BUGWEBGL : fast/canvas/webgl/gl-uniform-arrays.html = TEXT
2552 BUGWEBGL : fast/canvas/webgl/point-size.html = TEXT
2553
2554 // Failing after r75175
2555 BUGWEBGL : fast/canvas/webgl/glsl-conformance.html = CRASH
2556
2557 // These were not fixed by the Mesa 7.9 upgrade. Need to investigate.
2558 BUGCR60651 WIN : fast/canvas/webgl/gl-object-get-calls.html = TIMEOUT PASS
2559 // BUGCR60651 WIN : fast/canvas/webgl/glsl-conformance.html = TIMEOUT FAIL
2560 BUGCR60651 WIN : fast/canvas/webgl/uniform-location.html = TIMEOUT CRASH
2561 BUGCR60651 LINUX MAC : fast/canvas/webgl/uniform-location.html = TEXT
2562
2563 BUG_AUTO LINUX WIN DEBUG : animations/suspend-resume-animation.html = PASS TEXT
2564 BUG_AUTO LINUX RELEASE : animations/3d/transform-origin-vs-functions.html = PASS TEXT
2565 BUG_AUTO WIN DEBUG : animations/3d/transform-origin-vs-functions.html = PASS TEXT
2566 BUG_AUTO WIN DEBUG : animations/multiple-keyframes.html = PASS TEXT
2567
2568 // Seems to have been crashing intermittently for as long as we have test history.
2569 BUGCR62741 WIN LINUX DEBUG : svg/clip-path/clip-path-text-and-stroke.svg = CRASH PASS
2570
2571 // nodesFromRect() removed from Document.idl and test skipped on other platforms at r68345.
2572 BUGWK46596 : fast/dom/nodesFromRect-basic.html = TIMEOUT
2573
2574 // Possibly regressed within 68216:68246 (flakiness rate increased)
2575 BUGCR57056 LINUX : svg/custom/clip-path-referencing-use2.svg = PASS FAIL
2576 BUGCR57056 LINUX : svg/custom/circular-marker-reference-4.svg = PASS FAIL
2577
2578 // Flaky since http://trac.webkit.org/changeset/68440 (where this test added at).
2579 BUGWK46689 : fast/dom/HTMLElement/class-list.html = TEXT PASS
2580
2581 // Flaky since r68438:r68445 or before that.
2582 BUGWK46693 MAC : fast/repaint/repaint-svg-after-style-change.html = TEXT
2583
2584 // New test; was added in http://trac.webkit.org/changeset/68520
2585 BUGWK46735 WIN : platform/win/plugins/window-geometry-initialized-before-set-window.html = TEXT
2586
2587 // New failures introduced in 68854.
2588 BUGWK46951 : fast/url/segments-from-data-url.html = TEXT
2589 BUGWK46951 : fast/url/segments.html = TEXT
2590
2591 // New failure introduced in 68896.
2592 BUGWK44406 : http/tests/appcache/foreign-fallback.html = PASS FAIL CRASH
2593
2594 // This test starts to timeout during build bots were down between 68880:68920
2595 BUG_HCLAM WIN : fast/css/acid2-pixel.html = TIMEOUT PASS
2596
2597 BUGCR62738 BUGCR60845 WIN LINUX : media/video-size.html = PASS TEXT
2598
2599 // Unexpected timeout in these tests.
2600 BUG_HCLAM : http/tests/css/border-image-loading.html = TEXT TIMEOUT PASS
2601 BUG_HCLAM : http/tests/css/css-image-loading.html = TEXT TIMEOUT PASS
2602 BUG_HCLAM : http/tests/css/mask-image-loading.html = TEXT TIMEOUT PASS
2603 BUG_HCLAM : http/tests/css/reflection-mask-image-loading.html = TEXT TIMEOUT PASS
2604
2605 BUG_HCLAM LINUX : svg/text/text-intro-05-t.svg = IMAGE PASS
2606
2607 // Added by r69084
2608 BUGCR57934 WIN : http/tests/appcache/fail-on-update-2.html = PASS TEXT TIMEOUT
2609
2610 // Failing since r69181. Verified as legitimate by looking at the results
2611 // of the SVG rendering.
2612 BUGCR58194 LINUX : svg/filters/sourceAlpha.svg = IMAGE
2613 BUGCR58195 WIN LINUX : svg/filters/feDisplacementMap.svg = IMAGE
2614
2615 // Issues starting from
2616 // http://build.chromium.org/buildbot/waterfall.fyi/builders/Webkit%20%28webkit.org%29/builds/35997
2617 BUGCR58333 WIN LINUX : fast/css/font-face-download-error.html = TEXT PASS
2618
2619 // Flakiness first seen
2620 // http://build.chromium.org/buildbot/waterfall.fyi/builders/Webkit%20%28webkit.org%29/builds/35995
2621 BUGCR58212 WIN : http/tests/appcache/main-resource-redirect.html = TEXT TIMEOUT PASS
2622
2623 BUGCR58257 WIN : http/tests/misc/last-modified-parsing.html = PASS TEXT TIMEOUT
2624
2625 // Flaky because they snapshot and animation.
2626 // Started failing on Mac since 69314:69342.
2627 BUGCR10479 : svg/hixie/perf/001.xml = IMAGE PASS
2628 BUGCR10479 : svg/hixie/perf/002.xml = IMAGE PASS
2629
2630 // New test from Webkit r69326.
2631 BUGCR58337 : platform/gtk/fonts/fontconfig-synthetic-bold.html = MISSING
2632
2633 // From r69334. Mask seems broken on the reflected image.
2634 BUGCR58358 WIN LINUX : fast/css/transformed-mask.html = IMAGE+TEXT
2635
2636 // FileWriter isn't in TestShell yet.
2637 BUGCR58587 SKIP : fast/filesystem/file-writer-gc-blob.html = FAIL
2638
2639 // Failing somewhere between after Webkit r69367 and r69417.
2640 BUGCR58970 LINUX : svg/text/text-tselect-02-f.svg = IMAGE PASS
2641 BUGCR58931 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-17-b.svg = IMAGE PASS
2642
2643 // Failing from around r62021
2644 BUGCR15797 WIN : fast/dom/object-embed-plugin-scripting.html = TIMEOUT PASS
2645
2646 // Failing from r69420, mac failing from r71493:r71496
2647 BUGCR58735 SLOW : http/tests/misc/prefetch-purpose.html = PASS
2648
2649 // V8 does not implement ECMAScript strict mode
2650 BUGCR58936 : fast/js/basic-strict-mode.html = TEXT
2651 BUGCR58936 : fast/js/numeric-escapes-in-string-literals.html = TEXT
2652
2653 // Started failing around Webkit r69541 in this build.
2654 // http://build.chromium.org/buildbot/waterfall.fyi/builders/Webkit%20Linux%20%28webkit.org%29/builds/40424
2655 BUGCR58942 : fast/dom/prototype-inheritance.html = TEXT
2656
2657 // Started failing at Webkit r69628.
2658 BUGWK47578 : printing/simultaneous-position-float-change.html = IMAGE+TEXT
2659
2660
2661 // We don't support layoutTestController.nodesFromRect so this test just times out
2662 BUGWK46600 SKIP : fast/dom/nodesFromRect-links-and-text.html = TEXT
2663 BUGWK46600 SKIP : fast/dom/nodesFromRect-inner-documents.html = TEXT
2664
2665 // Many flaky SVG tests
2666 BUGCR59671 LINUX : svg/W3C-SVG-1.1-SE/pservers-grad-17-b.svg = IMAGE+TEXT PASS
2667 BUGCR59671 LINUX : svg/custom/convolution-crash.svg = PASS TEXT
2668 BUGCR59671 LINUX : svg/custom/focus-ring.svg = IMAGE+TEXT PASS
2669 BUGCR59671 LINUX : svg/custom/repaint-on-constant-size-change.svg = IMAGE PASS
2670 BUGCR59671 LINUX : svg/carto.net/slider.svg = IMAGE PASS
2671
2672 // Needs investigation
2673 BUGJAMESR LINUX WIN : fast/text/international/vertical-text-glyph-test.html = IMAGE+TEXT
2674 BUGJAMESR MAC : fast/text/international/vertical-text-glyph-test.html = IMAGE
2675 BUGJAMESR LINUX WIN : fast/text/international/vertical-text-metrics-test.html = TEXT
2676
2677 // Added in WebKit r69755, failed immediately.
2678 BUGJAPHET WIN LINUX : fast/canvas/canvas-currentColor.html = TEXT
2679
2680 // Added in WebKit r69749, failed immediately due to KURL/KURLGoogle differences.
2681 BUGJAPHET : fast/dom/anchor-getParameter.html = TEXT
2682
2683 // Added in Webkit r69707 without expected results.
2684 BUGJAPHET : platform/gtk/accessibility/aria-table-hierarchy.html = MISSING
2685
2686 // Added in WebKit r69824, failed immediately due to KURL/KURLGoogle differences.
2687 BUGJAPHET : fast/dom/HTMLAnchorElement/set-href-attribute-prevents-rebase.html = TEXT
2688
2689 // r69833, JSC/V8 Date parsing differences
2690 BUGJAPHET : fast/js/date-parse-test.html = TEXT
2691
2692 // Added in WebKit r70265
2693 BUGWK48034 : platform/win/plugins/npn-invalidate-rect-invalidates-window.html = TEXT
2694
2695 // Have been flaky for a long time.
2696 BUGWK48143 : svg/dom/altGlyph-dom.xhtml = CRASH PASS
2697 BUGWK48256 WIN LINUX : fast/multicol/float-multicol.html = IMAGE+TEXT PASS
2698 BUGWK48263 : media/adopt-node-crash.html = TIMEOUT PASS
2699 BUGWK48341 : svg/W3C-SVG-1.1/masking-intro-01-f.svg = CRASH PASS
2700 BUGWK48352 : fast/blockflow/block-level-images.html = IMAGE PASS
2701
2702 // Vertical text needs to be implemented in platforms other than OS X.
2703 BUGCR65877 LINUX WIN : fast/blockflow/border-vertical-lr.html = IMAGE+TEXT
2704 BUGCR65877 LINUX WIN : fast/blockflow/japanese-lr-selection.html = IMAGE+TEXT
2705 BUGCR65877 LINUX WIN : fast/blockflow/japanese-rl-selection.html = IMAGE+TEXT
2706 BUGCR65877 LINUX : fast/blockflow/japanese-lr-text.html = IMAGE+TEXT
2707 BUGCR65877 LINUX : fast/blockflow/japanese-rl-text.html = IMAGE+TEXT
2708 BUGCR65877 WIN : fast/blockflow/broken-ideographic-font.html = IMAGE
2709 BUGCR65877 LINUX : fast/blockflow/broken-ideographic-font.html = IMAGE+TEXT
2710 BUGCR65877 LINUX WIN : fast/blockflow/vertical-font-fallback.html = IMAGE+TEXT
2711 BUGCR65877 LINUX WIN : fast/blockflow/broken-ideograph-small-caps.html = IMAGE
2712 BUGCR65877 LINUX WIN : fast/blockflow/Kusa-Makura-background-canvas.html = IMAGE+TEXT
2713
2714 // New test, introduced by http://trac.webkit.org/changeset/70813 with only platform/mac baselines.
2715 BUGWK61161 LINUX WIN : fast/blockflow/border-image-horizontal-bt.html = IMAGE+TEXT
2716 BUGWK61161 LINUX WIN : fast/blockflow/border-image-vertical-lr.html = IMAGE+TEXT
2717 BUGWK61161 LINUX WIN : fast/blockflow/border-image-vertical-rl.html = IMAGE+TEXT
2718
2719 // New test, added in http://trac.webkit.org/changeset/70814.
2720 // This test was removed by revert of r70814, but keep it for now.
2721 //BUGWK61166 LINUX MAC WIN : media/video-seek-by-small-increment.html = TEXT
2722
2723 // These tests started failing presumably after r70850
2724 BUGWK48627 MAC : fast/invalid/missing-end-tag.xhtml = IMAGE
2725 BUGWK48627 MAC : svg/custom/createImageElement2.xhtml = IMAGE
2726
2727 // New test, seems V8 differs from JSC here.
2728 // Added by http://trac.webkit.org/changeset/70910
2729 BUGWK61246 : fast/js/interpreter-no-activation.html = TEXT
2730
2731 // Failures after WebKit roll 70949:71000
2732 BUGCR61406 : svg/dynamic-updates/SVGFEColorMatrixElement-svgdom-values-prop.html = IMAGE+TEXT
2733 BUGCR61406 : svg/dynamic-updates/SVGFEColorMatrixElement-svgdom-type-prop.html = IMAGE
2734 BUGCR61406 WIN LINUX : svg/dynamic-updates/SVGFETurbulenceElement-svgdom-baseFrequency-prop.html = IMAGE
2735 // from http://trac.webkit.org/changeset/53086 (expectation changed in above WK roll, was IMAGE+TEXT)
2736 BUGCR32153and61406 WIN LINUX : svg/dynamic-updates/SVGTextElement-svgdom-rotate-prop.html = IMAGE
2737
2738 // Flaky: fails about 5% of the time.
2739 BUGCR31342 WIN RELEASE : security/block-test-no-port.html = TEXT PASS
2740
2741 // See also https://webkit.org/b/49045
2742 BUGCR61978 : svg/animations/animate-path-nested-transforms.html = CRASH PASS TEXT
2743 BUGCR61978 : svg/animations/animate-text-nested-transforms.html = PASS TEXT
2744
2745 // Added in WK r71416, doesn't look like it's applicable to Chromium
2746 WONTFIX SKIP WIN : platform/win/plugins/window-region-is-set-to-clip-rect.html = TEXT
2747
2748 // Added in WK r71418, doesn't look like it's applicable to Chromium
2749 WONTFIX SKIP : platform/win/plugins/draws-gradient.html = IMAGE+TEXT
2750
2751 // Added in WK r71424
2752 BUGCR62138 : animations/stop-animation-on-suspend.html = TEXT PASS
2753
2754 // test_shell and DRT do not have LayoutTestController.pageSizeAndMarginsInPixels
2755 BUGCR62515 : printing/page-format-data-display-none.html = TEXT
2756
2757 BUGCR60393 MAC : fast/selectors/001.html = PASS TIMEOUT
2758
2759 BUGCR61739 MAC WIN DEBUG SLOW : animations/suspend-resume-animation-events.html = CRASH PASS
2760
2761 BUGWK49477 WIN LINUX : fast/canvas/canvas-arc-360-winding.html = TEXT
2762
2763 // New test added with http://trac.webkit.org/changeset/72472
2764 BUGCR63921 LINUX WIN : fast/canvas/canvas-fillPath-shadow.html = TEXT
2765
2766 BUGCR64129 MAC DEBUG : fast/files/revoke-blob-url.html = CRASH PASS
2767
2768 // Unknown reason. Was introduced at r72588
2769 BUG_LOISLO WIN LINUX : fast/canvas/canvas-drawImage-shadow.html = TEXT
2770
2771 BUGWK50112 WIN LINUX : fast/canvas/canvas-createPattern-fillRect-shadow.html = TEXT
2772
2773 BUGCR64647 WIN LINUX : fast/canvas/canvas-scale-drawImage-shadow.html = TEXT
2774
2775 BUGCR64672 : fast/regex/invalid-range-in-class.html = TEXT
2776
2777 BUGCR64733 : editing/text-iterator/findString.html = TEXT
2778
2779 // FIXME: Need to add tooling support for V8 bugs.
2780 BUGV8_953 : fast/regex/pcre-test-1.html = TIMEOUT
2781
2782 BUGCR50347 : plugins/get-user-agent-with-null-npp-from-npp-new.html = TEXT
2783
2784 BUGCR50282 MAC : fast/images/imagemap-case.html = IMAGE
2785 BUGCR50282 MAC : fast/images/imagemap-focus-ring-zoom.html = IMAGE
2786 BUGCR50282 MAC : fast/images/imagemap-focus-ring.html = IMAGE
2787 BUGCR50282 WIN LINUX : fast/images/imagemap-focus-ring-outline-color-explicitly-inherited-from-map.html = IMAGE+TEXT
2788 BUGCR50282 MAC : fast/images/imagemap-focus-ring-outline-color-explicitly-inherited-from-map.html = IMAGE
2789 BUGCR50282 WIN LINUX : fast/images/imagemap-focus-ring-outline-color-not-inherited-from-map.html = IMAGE+TEXT
2790 BUGCR50282 MAC : fast/images/imagemap-focus-ring-outline-color-not-inherited-from-map.html = IMAGE
2791 BUGCR50282 WIN LINUX : fast/images/imagemap-focus-ring-outline-color.html = IMAGE+TEXT
2792 BUGCR50282 MAC : fast/images/imagemap-focus-ring-outline-color.html = IMAGE
2793
2794 // Started to flake since http://src.chromium.org/viewvc/chrome?view=rev&revision=66937
2795 // (72440; 72514] range
2796 BUGCR64952 LINUX : fast/ruby/nested-ruby.html = IMAGE
2797
2798 // Selection is wrong.
2799 BUGCR64938 : editing/selection/5354455-1.html = TEXT
2800
2801 // New test in r73423.
2802 // Mac: Some image differences, and the message "scrolled to 3999,0" is missing.
2803 BUG_YUTAK MAC SLOW : fast/blockflow/Kusa-Makura-background-canvas.html = IMAGE+TEXT
2804
2805 // Regressed at r73423. All areas are painted green.
2806 BUGWK50734 : fast/repaint/positioned-document-element.html = IMAGE
2807
2808 // r73490. Win/Linux: Focus ring is not rendered. Mac: Just rebaseline?
2809 BUG_YUTAK WIN LINUX : fast/images/imagemap-circle-focus-ring.html = IMAGE+TEXT
2810 BUG_YUTAK MAC : fast/images/imagemap-circle-focus-ring.html = IMAGE
2811 BUG_YUTAK WIN LINUX : fast/images/imagemap-polygon-focus-ring.html = IMAGE+TEXT
2812 BUG_YUTAK MAC : fast/images/imagemap-polygon-focus-ring.html = IMAGE
2813
2814 // Started to produce text difference occasionally since r68528.
2815 BUGCR65279 LINUX DEBUG : fast/css/visited-link-hang.html = TEXT PASS
2816
2817 ///////////////////////////////////////////////////////////////////////////
2818 // Regressions caused by switching to DRT.
2819 ///////////////////////////////////////////////////////////////////////////
2820
2821 // DRT needs to schedule paints on invalidations like Chrome does.
2822 BUGCR62433 MAC LINUX : fast/backgrounds/animated-gif-as-background.html = IMAGE
2823 BUGCR62433 MAC LINUX : fast/images/gif-loop-count.html = IMAGE
2824
2825 // input-speech related failures
2826 BUG_DRT WIN MAC : fast/speech/input-appearance-numberandspeech.html = IMAGE
2827 BUG_DRT WIN MAC : fast/speech/input-appearance-searchandspeech.html = IMAGE
2828 BUG_DRT WIN MAC : fast/speech/input-appearance-speechbutton.html = IMAGE
2829
2830 // Similar to the above, input-search related failures
2831 BUG_DRT MAC : fast/css/input-search-padding.html = IMAGE
2832
2833 // Background color is wrong.
2834 BUG_DRT MAC : fast/backgrounds/solid-color-context-restore.html = IMAGE
2835 BUG_DRT MAC : fast/reflections/inline-crash.html = IMAGE
2836 // The background color of Apple Mac results also look wrong.
2837 BUG_DRT : http/tests/misc/slow-loading-image-in-pattern.html = IMAGE
2838
2839 // Extra didFinishDocumentLoadForFrame line.
2840 // The first didFinishDocumentLoadForFrame line is for the previous test document.
2841 BUG_DRT WIN MAC LINUX : http/tests/loading/preload-img-test.html = TEXT TIMEOUT PASS
2842
2843 // Font anti-aliasing issue
2844 BUG_DRT LINUX : fast/text/international/001.html = IMAGE
2845 BUG_DRT LINUX : fast/text/international/002.html = IMAGE
2846 BUG_DRT LINUX : fast/text/international/003.html = IMAGE
2847
2848 // CJK characters are not rotated.
2849 BUG_DRT LINUX : svg/batik/text/verticalText.svg = IMAGE+TEXT CRASH PASS
2850 // Flaky since 2010-09-17?
2851 BUGCR57950 WIN : svg/batik/text/verticalText.svg = CRASH PASS
2852
2853 // This is an error which test_shell can't find.
2854 BUGWK43960 WIN MAC LINUX : scrollbars/custom-scrollbar-with-incomplete-style.html = IMAGE
2855
2856 // media/video-* flakyness
2857 BUGCR59665 MAC : media/video-aspect-ratio.html = CRASH TIMEOUT PASS
2858 BUGCR59665 MAC : media/video-play-empty-events.html = CRASH TIMEOUT PASS
2859 BUGCR59665 MAC : media/video-src-change.html = CRASH TEXT PASS
2860 BUGCR59665 MAC : media/video-src.html = CRASH TIMEOUT PASS
2861 BUGCR59665 MAC : media/video-controls-rendering.html = CRASH FAIL TIMEOUT PASS
2862 BUGCR59665 MAC : media/video-delay-load-event.html = CRASH TIMEOUT PASS
2863 BUGCR59665 MAC : media/video-layer-crash.html = CRASH TIMEOUT PASS IMAGE
2864 // BUGCR59415 : setting SLOW in test_expectations.txt may fix the problem
2865 BUGCR59665 : media/video-loop.html = CRASH TIMEOUT PASS FAIL
2866 BUGCR59665 MAC : media/video-load-readyState.html = CRASH TIMEOUT PASS
2867 BUGCR59665 MAC : media/video-pause-immediately.html = CRASH PASS
2868 // This test needs enhanced eventSender.contextMenu() return value.
2869 // See https://bugs.webkit.org/show_bug.cgi?id=45021 for more info.
2870 // UNIMPLEMENTED for chrome
2871 BUGCR59665 BUGWK45021 SKIP : media/context-menu-actions.html = CRASH TIMEOUT PASS
2872 BUGCR54334 MAC LINUX DEBUG : media/video-timeupdate-during-playback.html = PASS TIMEOUT
2873 // Started flakily failing on win debug around r70597, WebKit r75136.
2874 BUGCR54334 WIN DEBUG : media/video-timeupdate-during-playback.html = PASS TEXT TIMEOUT
2875
2876 // Also fails on the mac port; see http://webkit.org/b/34331
2877 BUG_DRT : http/tests/media/video-referer.html = TEXT PASS
2878
2879 // Occasionally times out with, only under the DRT for Linux
2880 BUGCR58212 LINUX : http/tests/appcache/main-resource-redirect.html = PASS TIMEOUT
2881
2882 // Flaky on Linux with test_shell, fails consistently on Mac and Linux DRT
2883 BUGWK49265 MAC LINUX : svg/dynamic-updates/SVGFEConvolveMatrixElement-svgdom-edgeMode-prop.html = IMAGE PASS
2884
2885 BUGWK49406 MAC : svg/animations/animVal-basics.html = TIMEOUT
2886
2887 // Not investigated.
2888 BUG_DRT LINUX : animations/suspend-resume-animation-events.html = CRASH PASS
2889 BUG_DRT MAC LINUX : fast/css/line-height-determined-by-primary-font.html = IMAGE
2890 BUG_DRT MAC : fast/dom/Window/Plug-ins.html = TIMEOUT PASS
2891 BUG_DRT MAC : fast/dom/Window/alert-undefined.html = TIMEOUT PASS
2892 BUG_DRT MAC : fast/dom/beforeload/script-before-load-dynamic.html = TIMEOUT PASS
2893 BUG_DRT : fast/dynamic/window-resize-scrollbars-test.html = IMAGE+TEXT
2894 BUG_DRT LINUX : fast/events/select-onchange-crash.html = CRASH
2895 BUG_DRT DEBUG : fast/frames/calculate-round.html = TIMEOUT PASS
2896 BUG_DRT BUGCR43890 LINUX : fast/forms/implicit-submission.html = CRASH PASS TEXT
2897 BUG_DRT BUGCR21141 LINUX : fast/forms/select-double-onchange.html = CRASH FAIL
2898 BUG_DRT BUGCR21141 LINUX : fast/forms/select-script-onchange.html = CRASH FAIL
2899 BUG_DRT MAC : fast/images/extra-image-in-image-document.html = TIMEOUT PASS
2900 BUG_DRT MAC : fast/loader/font-face-empty.html = TIMEOUT PASS
2901 BUG_DRT MAC : fast/loader/for-window-event-onload-scripts.html = TIMEOUT PASS
2902 BUG_DRT MAC : fast/loader/fragment-after-redirect-gets-back-entry.html = TIMEOUT PASS
2903 BUG_DRT DEBUG : fast/loader/non-deferred-substitute-load.html = CRASH
2904 BUG_DRT WIN : fast/repaint/iframe-scroll-repaint.html = IMAGE
2905 BUG_DRT LINUX : fast/repaint/japanese-rl-selection-clear.html = IMAGE+TEXT
2906 BUG_DRT LINUX : fast/repaint/japanese-rl-selection-repaint.html = IMAGE+TEXT
2907 BUG_DRT LINUX : fast/repaint/repaint-across-writing-mode-boundary.html = IMAGE
2908 BUG_DRT LINUX : fast/table/border-changes.html = TIMEOUT PASS
2909 BUG_DRT LINUX : fast/text/backslash-to-yen-sign-euc.html = IMAGE
2910 BUG_DRT LINUX : fast/text/backslash-to-yen-sign.html = IMAGE
2911 BUG_DRT LINUX : fast/text/find-soft-hyphen.html = CRASH PASS
2912 BUG_DRT LINUX : fast/text/international/wrap-CJK-001.html = IMAGE
2913 BUG_DRT LINUX : fast/text/justification-padding-mid-word.html = PASS CRASH
2914 BUG_DRT MAC LINUX : http/tests/plugins/post-url-file.html = TIMEOUT
2915 BUG_DRT BUGCR8729 MAC LINUX : http/tests/multipart/invalid-image-data.html = IMAGE PASS
2916 BUG_DRT MAC : media/video-poster.html = TEXT PASS
2917 BUG_DRT LINUX : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = IMAGE+TEXT
2918 // Crashes with DRT and is a text failure with TestShell
2919 BUG_DRT : platform/gtk/fast/forms/menulist-typeahead-find.html = CRASH TEXT
2920 BUG_DRT : storage/domstorage/quota.html = TEXT
2921 BUG_DRT LINUX : svg/carto.net/selectionlist.svg = IMAGE PASS
2922 BUG_DRT WIN LINUX : svg/custom/use-instanceRoot-event-bubbling.xhtml = TIMEOUT PASS
2923 BUG_DRT MAC : svg/custom/clip-path-referencing-use2.svg = TEXT
2924 BUG_DRT : svg/custom/selectSubString.html = TIMEOUT
2925 BUG_DRT MAC : transforms/2d/zoom-menulist.html = IMAGE
2926
2927 // The test says you should see numbers, but we display letters.
2928 // It looks like we are missing the WebKit "WeightWatcher" fonts,
2929 // checked in as part of http://trac.webkit.org/changeset/34771.
2930 BUGCR10370 LINUX WIN : fast/css/font-weight-1.html = IMAGE+TEXT
2931
2932 // End DRT failures
2933 /////////////////////////////////////////////////////////////////////////////
2934
2935 BUGCR65012 LINUX : fast/dom/HTMLHeadElement/head-check.html = CRASH PASS
2936
2937 BUG_VITALYR : fast/images/gray-scale-jpeg-with-color-profile.html = MISSING
2938 BUG_VITALYR MAC : tables/mozilla/bugs/bug82946-2.html = IMAGE
2939
2940 // Mostly-flaky timeouts
2941 BUGCR66085 WIN LINUX : dom/html/level1/core/documentgetdoctypenodtd.html = PASS TIMEOUT
2942 BUGCR66085 LINUX : editing/selection/3690703-2.html = PASS TIMEOUT
2943 BUGCR66085 LINUX : fast/dom/Geolocation/disconnected-frame-permission-denied.html = PASS TIMEOUT
2944 BUGCR66085 WIN LINUX : fast/events/5056619.html = PASS TIMEOUT
2945 BUGCR66085 LINUX : fast/js/cyclic-proto.html = PASS TIMEOUT
2946 BUGCR66085 WIN LINUX : fast/replaced/css-content-and-webkit-mask-box-image-crash.html = PASS TIMEOUT
2947 BUGCR66085 WIN LINUX RELEASE : http/tests/media/reload-after-dialog.html = PASS TIMEOUT
2948 BUGCR66085 WIN DEBUG : http/tests/media/reload-after-dialog.html = PASS TIMEOUT
2949 BUGCR66085 LINUX DEBUG : http/tests/media/reload-after-dialog.html = CRASH
2950 BUGCR66085 LINUX : http/tests/media/video-cancel-load.html = PASS TIMEOUT
2951 BUGCR66085 LINUX : http/tests/xmlhttprequest/xmlhttprequest-test-send-flag.html = PASS TIMEOUT
2952 BUGCR66085 LINUX : media/constructors.html = PASS TIMEOUT
2953 BUGCR66085 : media/remove-from-document.html = PASS TIMEOUT
2954 BUGCR66085 : media/video-display-toggle.html = PASS TIMEOUT
2955 BUGCR66085 : media/video-play-pause-exception.html = PASS TIMEOUT
2956 BUGCR66085 : media/video-source.html = PASS TIMEOUT
2957 BUGCR66085 : media/video-source-moved.html = PASS TIMEOUT
2958 BUGCR66085 : media/video-source-type.html = PASS TIMEOUT
2959 BUGCR66085 LINUX : media/video-src-source.html = PASS TIMEOUT
2960
2961 // Flaky failures
2962 BUGCR66087 WIN : fast/dom/Geolocation/timestamp.html = PASS TEXT
2963 BUGCR66087 LINUX : http/tests/misc/iframe404.html = PASS TEXT
2964 BUGCR66087 WIN : http/tests/misc/no-last-modified.html = PASS TEXT
2965 BUGCR66087 WIN : http/tests/xmlhttprequest/open-async-overload.html = PASS TEXT
2966
2967 // Needs V8 investigation.  Skipped due to concern that this may be corrupting
2968 // memory and thus leading to unpredictable results.
2969 BUGCR66099 SKIP : fast/js/array-sort-modifying-tostring.html = TEXT CRASH TIMEOUT
2970
2971 BUGCR66466 MAC WIN DEBUG SLOW : perf/array-nested-loop.html = PASS TEXT
2972 BUGCR66554 WIN DEBUG : fast/js/kde/encode_decode_uri.html = CRASH PASS
2973
2974 BUGCR66683 WIN LINUX : fast/canvas/canvas-draw-canvas-on-canvas-shadow.html = TEXT
2975 BUGCR66682 WIN LINUX MAC : editing/spelling/spellcheck-paste.html = TEXT TIMEOUT
2976 BUGCR66686 : fast/loader/user-stylesheet-fast-path.html = TEXT
2977
2978 BUGCR66751 : http/tests/local/link-stylesheet-load-order-preload.html = TEXT TIMEOUT PASS
2979 BUGCR66751 : http/tests/local/link-stylesheet-load-order.html = TEXT TIMEOUT PASS
2980
2981 BUGCR66923 MAC : fast/css/focus-ring-detached.html = IMAGE
2982 BUGCR66923 MAC : fast/css/focus-ring-multiline.html = IMAGE
2983 BUGCR66979 WIN LINUX : fast/dom/global-constructors.html = TEXT PASS
2984
2985 // The test is just too slow and has never passed since on Dbg build.
2986 BUG_YURYS DEBUG SLOW : fast/overflow/lots-of-sibling-inline-boxes.html = PASS
2987 BUGCR67139 WIN MAC LINUX DEBUG : storage/close-during-stress-test.html = CRASH PASS
2988
2989 // These tests are flaky.
2990 BUGCR67209 WIN DEBUG : inspector/console-uncaught-exception-in-eval.html = CRASH TIMEOUT PASS
2991 BUGCR67209 WIN DEBUG : inspector/timeline-enum-stability.html = CRASH TIMEOUT PASS
2992 BUGCR67209 WIN DEBUG : inspector/console-clear.html = CRASH TIMEOUT PASS
2993 BUGCR67209 WIN DEBUG : inspector/styles-disable-then-delete.html = CRASH TIMEOUT PASS
2994
2995 // WebKit roll 74255:74308
2996 BUGCR67416 : fast/text/emphasis.html = FAIL
2997 BUGCR67416 : fast/text/emphasis-vertical.html = FAIL
2998 BUGCR67540 WIN LINUX : fast/text/emphasis-overlap.html = IMAGE+TEXT
2999 BUGCR67540 WIN LINUX : fast/text/emphasis-avoid-ruby.html = IMAGE
3000 BUGCR67540 WIN LINUX : fast/repaint/text-emphasis-h.html = IMAGE
3001 BUGCR67540 WIN LINUX : fast/repaint/text-emphasis-v.html = IMAGE
3002
3003 BUGCR67662 WIN RELEASE : http/tests/inspector/console-websocket-error.html = TEXT
3004 BUGCR67662 WIN DEBUG SLOW : http/tests/inspector/console-websocket-error.html = TEXT
3005 BUGCR68173 WIN RELEASE : http/tests/inspector/extensions-resources-redirect.html = TIMEOUT
3006 BUGCR68173 WIN DEBUG : http/tests/inspector/extensions-resources-redirect.html = CRASH TIMEOUT
3007
3008 BUGCR67442 WIN LINUX : fast/canvas/fillText-shadow.html = TEXT
3009
3010 BUGWK51398 MAC : inspector/console-dir-global.html = TIMEOUT
3011 BUGWK51398 MAC : inspector/debugger-expand-scope.html = TIMEOUT
3012
3013 // WebKit roll 74534:74545
3014 BUGWK51536 : fast/css/box-shadow.html = FAIL TIMEOUT
3015
3016 // WebKit roll 74667:74679
3017 BUGCR68067 LINUX DEBUG : fast/canvas/webgl/tex-image-with-format-and-type.html = TEXT PASS
3018
3019 BUGWK51720 DEBUG : http/tests/incremental/split-hex-entities.pl = CRASH PASS
3020 BUGCR64371 WIN RELEASE : http/tests/appcache/online-whitelist.html = TEXT
3021 BUGWK51721 DEBUG SLOW: fast/encoding/parser-tests.html = PASS
3022 BUGCR67463 MAC : editing/selection/caret-mode-paragraph-keys-navigation.html = TEXT
3023
3024 BUGCR68436 LINUX MAC DEBUG : fast/dom/DOMImplementation/createDocument-with-used-doctype.html = PASS TIMEOUT
3025 BUGCR68436 WIN DEBUG : fast/dom/DOMImplementation/createDocument-with-used-doctype.html = PASS TEXT TIMEOUT
3026 BUGCR68576 LINUX DEBUG : svg/batik/paints/patternPreserveAspectRatioA.svg = PASS TIMEOUT CRASH
3027 BUGCR68599 LINUX WIN : http/tests/security/mixedContent/insecure-css-in-main-frame.html = PASS TEXT
3028
3029 // Needs investigation after r74892 (simple removal of chromium-mac baselines
3030 // is not enough)
3031 BUG_MIHAIP MAC : fast/body-propagation/overflow/001-xhtml.xhtml = IMAGE
3032 BUG_MIHAIP MAC : fast/body-propagation/overflow/001.html = IMAGE
3033 BUG_MIHAIP MAC : fast/body-propagation/overflow/005-declarative.xhtml = IMAGE
3034 BUG_MIHAIP MAC : fast/body-propagation/overflow/005-xhtml.xhtml = IMAGE
3035 BUG_MIHAIP MAC : fast/body-propagation/overflow/005.html = IMAGE
3036 BUG_MIHAIP MAC : fast/overflow/006.html = IMAGE
3037 BUG_MIHAIP MAC : fast/overflow/overflow-x-y.html = IMAGE
3038 BUG_MIHAIP MAC : fast/text/international/thai-line-breaks.html = IMAGE
3039
3040 // Platforms that use Skia don't support elliptical gradients.
3041 BUGWK51841 : fast/gradients/css3-color-stop-units.html = IMAGE
3042 BUGWK51841 : fast/gradients/css3-color-stops.html = IMAGE
3043 BUGWK51841 : fast/gradients/css3-linear-angle-gradients.html = IMAGE
3044 BUGWK51841 : fast/gradients/css3-radial-gradients.html = IMAGE
3045 BUGWK51841 : fast/gradients/css3-radial-gradients2.html = IMAGE
3046 BUGWK51841 : fast/gradients/css3-radial-gradients3.html = IMAGE
3047 BUGWK51841 : fast/gradients/css3-repeating-radial-gradients.html = IMAGE
3048
3049 // This was introduced by r75077.
3050 BUGWK52082 LINUX MAC : fast/text/basic/014.html = IMAGE
3051 BUGWK52082 LINUX MAC : fast/text/midword-break-after-breakable-char.html = IMAGE
3052 BUGWK52082 LINUX : fast/text/capitalize-boundaries.html = IMAGE
3053 BUGWK52082 WIN : fast/text/basic/014.html = IMAGE+TEXT
3054 BUGWK52082 WIN : fast/text/midword-break-after-breakable-char.html = IMAGE+TEXT
3055
3056 // These were introduced by r75139
3057 BUGWK51989 WIN LINUX : fast/canvas/canvas-fillRect-gradient-shadow.html = TEXT
3058 BUGWK51989 MAC : svg/batik/text/textEffect.svg = IMAGE
3059 BUGWK51989 MAC : svg/batik/text/textEffect3.svg = IMAGE
3060 BUGWK51989 MAC : svg/css/composite-shadow-text.svg = IMAGE
3061 BUGWK51989 MAC : svg/custom/js-late-gradient-and-object-creation.svg = IMAGE
3062 BUGWK51989 MAC : svg/custom/js-late-gradient-creation.svg = IMAGE
3063 BUGWK51989 MAC : svg/text/selection-background-color.xhtml = IMAGE
3064 BUGWK51989 MAC : svg/text/selection-styles.xhtml = IMAGE
3065 BUGWK51989 MAC : svg/text/text-gradient-positioning.svg = IMAGE
3066
3067 // These have been flaky for as long as we have test history.
3068 BUGWK52064 WIN DEBUG : fast/events/overflow-events.html = PASS TEXT
3069 BUGWK52063 WIN DEBUG : http/tests/media/text-served-as-text.html = PASS TEXT TIMEOUT
3070 BUGWK52063 WIN : http/tests/navigation/ping-cross-origin.html = PASS TEXT TIMEOUT
3071 BUGWK52063 MAC SLOW : http/tests/navigation/ping-cross-origin.html = PASS
3072
3073 // These were flaky, now failing more consistently after r75169.
3074 BUGWK52061 DEBUG : transitions/suspend-transform-transition.html = IMAGE PASS
3075 BUGWK52061 DEBUG : transitions/change-values-during-transition.html = PASS TEXT
3076 BUGWK52061 DEBUG : transitions/interrupted-accelerated-transition.html = PASS TEXT
3077 BUGWK52061 DEBUG : transitions/transition-timing-function.html = PASS TEXT
3078
3079 // Failing since creation in http://trac.webkit.org/changeset/75308
3080 BUG_ABARTH : svg/text/caret-in-svg-text.xhtml = TEXT
3081
3082 // V8 test failures introduced by r75408
3083 BUGCR69181 : fast/js/exception-codegen-crash.html = FAIL
3084 BUGCR69181 : fast/js/kde/parse.html = FAIL
3085 BUGCR69181 : fast/js/large-expressions.html = FAIL
3086
3087 // Flaky on Linux since r75250
3088 BUGCR69300 LINUX : svg/batik/text/textOnPath.svg = IMAGE PASS
3089
3090 // Test added in r75567
3091 BUGWK52266 WIN : plugins/no-mime-with-valid-extension.html = TEXT
3092
3093 // Test added in r75064
3094 BUGCR69395 WIN : inspector/timeline-network-resource.html = TEXT
3095
3096 // Flaky since r75548; transformed character is occasionally corrupt
3097 BUGCR69411 LINUX : svg/custom/linking-a-03-b-transform.svg = IMAGE PASS
3098
3099 // Started failing after r75639 on everything except Snow Leopard
3100 BUGWK52341 : fast/canvas/canvas-large-dimensions.html = TEXT