2010-07-28 Victor Wang <victorw@chromium.org>
[WebKit-https.git] / LayoutTests / platform / chromium / test_expectations.txt
1 // This file consists of lines with specifications of what
2 // to expect from layout test cases. The test cases can be directories
3 // in which case the expectations apply to all test cases in that
4 // directory and any subdirectory. The format of the file is along the
5 // lines of:
6 //
7 // fast/js/fixme.js = FAIL
8 // fast/js/flaky.js = FAIL PASS
9 // fast/js/crash.js = CRASH TIMEOUT FAIL PASS
10 //
11 // The format of a test line is as follows:
12 // METADATA : relative/path/to/test.html = EXPECTATIONS
13 //
14 // Valid values for METADATA:
15 //
16 // BUG[0-9]+: See this bug for more information. Every test that isn't marked
17 //            WONTFIX should have a BUG annotation.
18 // SKIP: Doesn't run the test.
19 // SLOW: The test takes a long time to run, but does not timeout indefinitely.
20 // DEFER: For tests we'll fix in the future.
21 // WONTFIX: For tests that we never intend to pass on a given platform.
22 // DEBUG: Expectations apply only to the debug build.
23 // RELEASE: Expectations apply only to release build.
24 // LINUX/WIN/WIN-XP/WIN-VISTA/MAC: Expectations apply only to these platforms.
25 //
26 // Valid values for EXPECTATIONS:
27 //
28 // PASS: Test should pass
29 // CRASH: Test should crash
30 // TIMEOUT: Test should timeout
31 // IMAGE: Test will produce an incorrect image dump
32 // TEXT: Test will produce incorrect text output (either full or simplified)
33 // IMAGE+TEXT: Test will produce both incorrect text and images
34 // FAIL: Test will produce either incorrect text, images, or both
35 //
36 // If a line contains multiple expectations, it is considered "flakey",
37 // because it means that we're not producing consistent, reliable results.
38 //
39 // For example,
40 // LINUX : media = PASS FAIL
41 //
42 // The above means that all the media tests are flaky, but only on Linux.
43 //
44 // Other examples:
45 //
46 // SKIP : fast/js/no-good.js = TIMEOUT PASS
47 // DEBUG : fast/js/no-good.js = TIMEOUT PASS
48 // DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
49 // LINUX DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
50 // BUG1234 DEBUG MAC : fast/js/no-good.js = TIMEOUT PASS
51 //
52 // Notes:
53 // -A test cannot be both SLOW and TIMEOUT
54 // -A test can be included twice, but not via the same path.
55 // -If a test is included twice, then the more precise path wins.
56 // -CRASH tests cannot be WONTFIX
57
58 // -----------------------------------------------------------------
59 // SLOW TESTS
60 // -----------------------------------------------------------------
61
62 BUG24182 SLOW : fast/js/regexp-overflow.html = PASS
63 BUG24182 SLOW RELEASE : http/tests/misc/DOMContentLoaded-event.html = PASS
64 BUG24182 SLOW LINUX DEBUG : http/tests/misc/DOMContentLoaded-event.html = PASS
65 BUG24182 SLOW LINUX MAC RELEASE : http/tests/navigation/multiple-back-forward-entries.html = PASS
66 BUG24182 SLOW LINUX DEBUG : http/tests/navigation/multiple-back-forward-entries.html = PASS
67 BUG24182 SLOW : http/tests/xmlhttprequest/simple-cross-origin-progress-events.html = PASS
68 BUG24182 SLOW WIN MAC : svg/custom/invisible-text-after-scrolling.xhtml = PASS
69 BUG24182 SLOW WIN RELEASE : tables/mozilla/bugs/bug113235-1.html = PASS
70 BUG24182 SLOW DEBUG : fast/js/toString-and-valueOf-override.html = PASS
71
72 // This tests is normally <1 second, but occasionally takes >20s.
73 BUG24182 SLOW WIN RELEASE : fast/dom/Window/webkitConvertPoint.html = PASS
74
75 BUG24182 WIN RELEASE SLOW : http/tests/loading/redirect-methods.html = PASS
76 BUG24182 WIN SLOW : svg/hixie/perf/007.xml = PASS
77 BUG24182 SLOW MAC RELEASE : dom/html/level2/html/HTMLImageElement01.html = PASS
78 BUG24182 SLOW WIN RELEASE : http/tests/local/file-url-sent-as-referer.html = PASS
79 BUG24182 SLOW WIN DEBUG : svg/carto.net/window.svg = PASS
80 BUG24182 SLOW LINUX DEBUG : fast/xpath/4XPath/Borrowed/cz_20030217.html = PASS
81 BUG24182 SLOW WIN MAC DEBUG : tables/mozilla/bugs/45621.html = PASS
82 //BUG24852 started failing since webkit 49583
83 //BUG24182 SLOW WIN : css1/font_properties/font.html = PASS
84 BUG24182 SLOW WIN : http/tests/security/xssAuditor/meta-tag-http-refresh-javascript-url.html = PASS
85 BUG24182 SLOW WIN RELEASE : http/tests/security/cross-origin-css.html = PASS
86 BUG24182 SLOW WIN RELEASE : fast/loader/local-CSS-from-local.html = PASS
87 BUG24182 WIN RELEASE SLOW : http/tests/incremental/split-hex-entities.pl = PASS
88 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/XMLHttpRequestException.html = PASS
89 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/connection-error-sync.html = PASS
90 BUG24182 WIN RELEASE SLOW : http/tests/loading/onload-vs-immediate-refresh.pl = PASS
91 //BUG24182 WIN LINUX SLOW : editing/selection/extend-selection.html = PASS
92 BUG24182 SLOW WIN : fast/images/svg-as-background.html = PASS
93 BUG24182 SLOW WIN : fast/backgrounds/svg-as-background-5.html = PASS
94 BUG24182 WIN DEBUG SLOW: inspector/console-dirxml.html = PASS
95 BUG24182 DEBUG SLOW : fast/dom/Window/window-function-frame-getter-precedence.html = PASS
96 BUG24182 SLOW DEBUG : fast/frames/frame-limit.html = PASS
97 BUG24182 SLOW : http/tests/cache/subresource-failover-to-network.html = PASS
98 BUG24182 WIN DEBUG : animations/play-state.html = PASS TEXT
99 BUG24182 SLOW WIN RELEASE : animations/play-state.html = PASS TEXT
100 BUG24182 LINUX : animations/play-state.html = PASS TEXT
101
102 // Usually <1s in release, ~1s in debug, but occasionally >5s in release.
103 BUG27335 WIN RELEASE : plugins/embed-attributes-setting.html = PASS TIMEOUT
104 BUG27335 WIN DEBUG SLOW : plugins/embed-attributes-setting.html = PASS
105
106 // --- collecting results for supported-xml-content-types.html ---
107 // was slow, started to timeout
108 BUG18702 WIN : http/tests/xmlhttprequest/supported-xml-content-types.html = PASS TIMEOUT
109
110 BUG34759 WIN DEBUG SLOW : inspector/console-log-before-inspector-open.html = PASS
111
112 BUG36539 SLOW : http/tests/misc/uncacheable-script-repeated.html = PASS
113
114 BUG47937 WIN DEBUG SLOW : fast/parser/residual-style-hang.html = PASS
115
116 // -----------------------------------------------------------------
117 // SKIPPED TESTS
118 // -----------------------------------------------------------------
119
120 // Since V8 is more interruptible than other engines, they use the standard
121 // long-running-script mechanism to handle very-long-running regexps too.
122 // See http://code.google.com/p/v8/issues/detail?id=287
123 WONTFIX SKIP : fast/js/regexp-overflow-too-big.html = TIMEOUT
124
125 // XHTML tests.  These tests seem like they work, but only because the
126 // expected output expects to see JS errors.  There is no point in running
127 // these tests, because they are giving us a false sense of testing that isn't
128 // really happening.  Furthermore, since they appear to pass if we do try to
129 // run them, we can't even list them as permanently expected to fail.
130 BUG24185 WONTFIX SKIP : dom/xhtml = PASS
131
132 // We do not want to support Legacy mac encodings on Windows/Linux.
133 // On Mac, we can support them by building platform/text/mac, but
134 // probably we don't want there, either.
135 WONTFIX SKIP WIN LINUX : fast/encoding/char-encoding-mac.html = FAIL
136
137 // Fails due to different window.close() rules.  We need to decide whether we
138 // ever expect to pass this.  Now also timing out.
139 BUG24189 WONTFIX SKIP : fast/dom/open-and-close-by-DOM.html = FAIL
140
141 // Skip because of WebKit bug 18512. These bugs "poison" future tests, causing
142 // all SVG objects with fill="red" to be rendered in green.
143 WONTFIX SKIP : svg/custom/fill-SVGPaint-interface.svg = PASS
144 WONTFIX SKIP : svg/custom/getPresentationAttribute.svg = PASS
145
146 // WML is still an inprogress feature upstream. Chromium does not build
147 // with WML support, so skip its tests.
148 WONTFIX SKIP : wml = FAIL
149 WONTFIX SKIP : http/tests/wml = FAIL
150 WONTFIX SKIP : fast/wml = FAIL
151
152 // These tests are based on the JSC JavaScript profiler. The V8 JavaScript
153 // profiler is in development and will use a different approach than JSC and
154 // most likely these tests will always be JSC specific.
155 WONTFIX SKIP : fast/profiler = FAIL TIMEOUT
156
157 // This test doesn't terminate because it contains exponential
158 // regexps.  It is safe to disable because we run the same tests
159 // (sans the nonterminating ones) as part of the v8 tests.
160 WONTFIX SKIP : fast/regex/test1.html = PASS
161
162 // We use worker_uitests to run workers tests. Don't run them in test_shell.
163 WONTFIX SKIP : fast/workers = PASS TIMEOUT FAIL
164 WONTFIX SKIP : http/tests/workers = PASS TIMEOUT FAIL
165 WONTFIX SKIP : http/tests/xmlhttprequest/workers = PASS TIMEOUT FAIL
166 WONTFIX SKIP : http/tests/eventsource/workers = PASS TIMEOUT FAIL
167 WONTFIX SKIP : websocket/tests/workers/ = PASS TIMEOUT FAIL
168
169 // Page Cache - based tests. Chromium disables page cache because the WebKit page cache keeps previously
170 // loaded pages alive in memory to be able to quickly substitute them when user clicks History buttons.
171 // Chromium wants those to be separate navigations made via browser process to be able to make decision
172 // on which renderer process to use for each of them.
173 WONTFIX SKIP BUG19635 : fast/harness/use-page-cache.html = TIMEOUT FAIL
174 WONTFIX SKIP BUG19635 : fast/dom/Window/timer-resume-on-navigation-back.html = TIMEOUT FAIL
175 // Depends on page cache, as far as I can tell.
176 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached.html = TIMEOUT FAIL
177 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached-with-frames.html = TIMEOUT
178 WONTFIX SKIP BUG19635 : media/restore-from-page-cache.html = TIMEOUT
179 WONTFIX SKIP BUG19635 : loader/go-back-to-different-window-size.html = TIMEOUT TEXT
180 WONTFIX SKIP BUG19635 : fast/loader/crash-copying-backforwardlist.html = TEXT
181 WONTFIX SKIP BUG19635 : fast/frames/frame-crash-with-page-cache.html = TEXT
182 WONTFIX SKIP BUG19635 : fast/harness/page-cache-crash-on-data-urls.html = TEXT
183
184 // Tests that rely on cross-process MessagePorts.  No point in running them in
185 // test_shell, since we'd have to use a completely different implementation from
186 // what is used in the browser.
187 WONTFIX SKIP : fast/events/message-channel-gc-2.html = FAIL
188 WONTFIX SKIP : fast/events/message-channel-gc-3.html = FAIL
189 WONTFIX SKIP : fast/events/message-channel-gc-4.html = FAIL
190 WONTFIX SKIP : fast/events/message-channel-gc.html = FAIL
191 WONTFIX SKIP : fast/events/message-channel-listener-circular-ownership.html = FAIL
192 WONTFIX SKIP : fast/events/message-port-clone.html = FAIL
193 WONTFIX SKIP : fast/events/message-port-deleted-document.html = FAIL
194 WONTFIX SKIP : fast/events/message-port-deleted-frame.html = FAIL
195 WONTFIX SKIP : fast/events/message-port-inactive-document.html = FAIL
196 WONTFIX SKIP : fast/events/message-port-no-wrapper.html = FAIL
197 WONTFIX SKIP : fast/events/message-port.html = FAIL
198 WONTFIX SKIP : fast/events/message-port-multi.html = FAIL
199 WONTFIX SKIP : http/tests/security/MessagePort/event-listener-context.html = FAIL
200
201 // Implement java testing harness.
202 BUG36681 DEFER SKIP : java = TEXT
203 // Chrome does not support Java LiveConnect.
204 WONTFIX SKIP : java/lc3 = TEXT
205
206 // this test doesn't make sense on Win or Mac.
207 // TODO: move to platform/chromium-linux/.
208 WONTFIX SKIP MAC WIN : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = FAIL
209
210 // Needs DRT queueLoadHTMLString and setDeferMainResourceLoad-implementations
211 // See: https://bugs.webkit.org/show_bug.cgi?id=42151
212 BUGWK42151 SKIP : fast/loader/non-deferred-substitute-load.html = FAIL
213
214 // -----------------------------------------------------------------
215 // WONTFIX TESTS
216 // -----------------------------------------------------------------
217
218 // This test is completely timing dependent.  It is testing the time
219 // between a key event and a search event.  You cannot count on this
220 // always being exactly the same.
221 WONTFIX DEBUG : fast/forms/search-event-delay.html = PASS TEXT
222 WONTFIX SLOW WIN RELEASE : fast/forms/search-event-delay.html = FAIL PASS
223 WONTFIX SLOW MAC RELEASE : fast/forms/search-event-delay.html = FAIL PASS CRASH
224 WONTFIX LINUX RELEASE : fast/forms/search-event-delay.html = FAIL PASS
225
226 // Chrome uses different keyboard accelerators from those used by Safari, so
227 // these tests will always fail.
228 // TODO(pinkerton): these should probably pass on Mac since we want Emacs
229 // keybindings but they currently do not.
230 WONTFIX LINUX WIN DEBUG : editing/pasteboard/emacs-cntl-y-001.html = FAIL
231 WONTFIX LINUX RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
232 WONTFIX SLOW WIN RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
233 WONTFIX : editing/pasteboard/emacs-ctrl-a-k-y.html = FAIL
234 WONTFIX : editing/pasteboard/emacs-ctrl-k-y-001.html = FAIL
235 WONTFIX : editing/input/emacs-ctrl-o.html = FAIL
236
237 // Checks for very kjs-specific garbage collector behavior.
238 // Would have to be implemented much differently to work in v8.
239 WONTFIX : fast/dom/gc-10.html = FAIL
240
241 // This fails because we're missing various useless apple-specific
242 // properties on the window object.
243 // This test also timeouts in Debug mode.
244 BUG24187 WONTFIX SLOW DEBUG : fast/dom/Window/window-properties.html = FAIL
245 BUG24187 WONTFIX SLOW WIN RELEASE : fast/dom/Window/window-properties.html = FAIL
246 BUG24187 WONTFIX LINUX MAC RELEASE : fast/dom/Window/window-properties.html = FAIL
247
248 // Safari specific test to ensure that JavaScript errors aren't logged when in
249 // private browsing mode.
250 WONTFIX : http/tests/security/cross-frame-access-private-browsing.html = FAIL
251
252 // Chromium doesn't implement private browsing in the renderer.
253 WONTFIX : plugins/private-browsing-mode.html = FAIL
254 WONTFIX : plugins/private-browsing-mode-2.html = TEXT
255
256 // We don't let anyone set status in the browser.
257 WONTFIX : plugins/set-status.html = TEXT
258
259 // We don't care about dashboard compatibility mode.
260 WONTFIX SKIP : http/tests/xmlhttprequest/default-content-type-dashboard.html = FAIL
261 WONTFIX SKIP : http/tests/xmlhttprequest/svg-created-by-xhr-disallowed-in-dashboard.html = FAIL
262 WONTFIX : svg/custom/embedded-svg-disallowed-in-dashboard.xml = FAIL
263 WONTFIX : svg/custom/manually-parsed-embedded-svg-disallowed-in-dashboard.html = FAIL
264 WONTFIX : svg/custom/manually-parsed-svg-disallowed-in-dashboard.html = FAIL
265 WONTFIX SKIP : svg/custom/svg-disallowed-in-dashboard-object.html = FAIL
266 WONTFIX : fast/canvas/canvas-gradient-addStop-error.html = FAIL
267
268
269 // Chrome uses different keyboard accelerators from those used by Safari, so
270 // these tests will always fail.
271 // TODO(ericroman): can the following 2 tests be removed from this list, since they pass?
272 WONTFIX : fast/events/keydown-1.html = FAIL
273 WONTFIX LINUX WIN : fast/events/option-tab.html = FAIL CRASH
274
275 // Chrome does not support WebArchives.
276 BUG10395 WONTFIX SKIP : webarchive = FAIL PASS
277 BUG10395 WONTFIX SKIP : svg/webarchive = FAIL PASS
278 BUG10395 WONTFIX SKIP : svg/custom/image-with-prefix-in-webarchive.svg = FAIL PASS
279 BUG10395 WONTFIX SKIP : http/tests/webarchive = FAIL PASS
280
281 // We don't support ACCELERATED_COMPOSITING. Skipping because some tests in this
282 // directory don't have pixel results.
283 BUG15733 WONTFIX SKIP : compositing = FAIL PASS TIMEOUT
284
285 // Run the Mac-specific platform tests, but only to check for crashes.
286 WONTFIX : platform/gtk = FAIL PASS
287 WONTFIX : platform/mac = FAIL PASS TIMEOUT
288 WONTFIX : platform/mac-leopard = FAIL PASS
289 WONTFIX : platform/mac-tiger = FAIL PASS
290 WONTFIX : platform/qt = FAIL PASS
291 WONTFIX SKIP : platform/qt/plugins/qt-qwidget-plugin.html = FAIL
292 WONTFIX SKIP : platform/mac/fast/text/international/Geeza-Pro-vertical-metrics-adjustment.html = PASS
293
294 WONTFIX LINUX MAC : platform/win = FAIL PASS
295
296 // This is a Safari specific test to make WebKit behave like AppKit on the Mac.
297 // We do not support it because PLATFORM(MAC) is not defined for the mac version.
298 WONTFIX MAC : platform/mac/editing/deleting/backward-delete.html = FAIL
299
300 // Ignored because we do not have OBJC bindings
301 WONTFIX SKIP : editing/pasteboard/paste-RTFD.html = FAIL
302 WONTFIX SKIP : editing/pasteboard/paste-TIFF.html = FAIL
303 WONTFIX SKIP : platform/mac/plugins/root-object-premature-delete-crash.html = FAIL
304 WONTFIX SKIP : platform/mac/plugins/undefined-property-crash.html = FAIL
305
306 // Ignore test because it tries to load .pdf files in <img> tags.
307 WONTFIX LINUX WIN : fast/images/pdf-as-image-landscape.html = FAIL
308 WONTFIX LINUX WIN : fast/images/pdf-as-image.html = FAIL
309 WONTFIX LINUX WIN : fast/replaced/pdf-as-image.html = FAIL
310
311 // These tests try to print a PDF file as the expected result.  I don't think
312 // we plan on supporting this anytime soon.
313 WONTFIX SKIP : printing/compositing-layer-printing.html = PASS
314 WONTFIX SKIP : printing/media-queries-print.html = PASS
315 WONTFIX SKIP : printing/page-rule-in-media-query.html = PASS
316
317 // Chrome doesn't call the willCacheResponse callback (a method
318 // of ResourceHandleClient).  That function is Mac-specific.
319 WONTFIX SKIP : http/tests/misc/willCacheResponse-delegate-callback.html = FAIL
320
321 // Checks for very kjs-specific garbage collector
322 // behavior. Gc-9 is completely braindamaged; it tests that certain
323 // properties are reset by the garbage collector. It looks to pass recently.
324 WONTFIX : fast/dom/gc-9.html = FAIL
325
326 // This test checks that ((new Error()).message is undefined, which is
327 // a direct contradiction of the javascript spec 15.11.4.3 which
328 // says that it must be a string.
329 WONTFIX : fast/js/kde/evil-n.html = FAIL
330
331 // This test checks that properties of arguments arrays are non-enumerable
332 // which is incorrect according to the ES5 spec.
333 WONTFIX : fast/js/kde/function.html = FAIL
334
335 // This test is broken.  The regular expression used contains an error
336 // which kjs swallows and returns false, which is the expected result,
337 // but for which we issue a syntax error.
338 WONTFIX : fast/js/code-serialize-paren.html = FAIL
339
340 // These tests check for a kjs-specific extension, that source file
341 // name and line numbers are available as properties on exception
342 // objects.  We handle error positions differently.
343 WONTFIX : fast/js/exception-linenums-in-html-1.html = FAIL
344 WONTFIX : fast/js/exception-linenums-in-html-2.html = FAIL
345 WONTFIX : fast/js/exception-linenums.html = FAIL
346 WONTFIX : fast/js/exception-expression-offset.html = FAIL
347
348 // These tests rely on specific details of decompilation of
349 // functions. V8 always returns the source code as written; there's
350 // no decompilation or pretty printing involved except for
351 // certain "native" functions where the V8 output does not include
352 // newline characters. This is working as intended and we don't care
353 // if the tests pass or fail. (It should probably simply be re-baselined.)
354 WONTFIX : fast/js/function-names.html = FAIL
355
356 // This test relies on KJS specific implementation
357 // (window.GCController.getJSObjectCount), which we have no intention of
358 // supporting.
359 WONTFIX SKIP : fast/dom/Window/timeout-released-on-close.html = FAIL
360
361 // These tests expect a tiff decoder, which we don't have.
362 WONTFIX LINUX WIN : fast/images/embed-image.html = FAIL
363 WONTFIX LINUX WIN : fast/images/object-image.html = FAIL
364
365 // Safari has a unique handling of the BOM characters among browsers.
366 // There is a strong suspicion that this is a security problem, so we
367 // follow the rest of the browsers on this one.
368 WONTFIX : fast/js/removing-Cf-characters.html = FAIL
369
370 // These tests fail in all but the PST/PDT time zone.
371 // Another reason for failure is that, for compatability, we don't obey
372 // the ECMA standard on DST exactly.  We use the OS's facilities to
373 // convert to local time for dates within the UNIX 32-bit epoch,
374 // and follow the ECMA rules for dates outside that range.
375 // The ECMA rules say to use current DST rules for all dates,
376 // and that all dates that are separated by an exact multiple of
377 // 28 years must behave exactly the same.
378 // OS local time services are more accurate than this ECMA rule,
379 // which is a discrepancy.
380 WONTFIX SKIP : fast/js/date-DST-time-cusps.html = PASS FAIL
381 WONTFIX SKIP : fast/js/date-big-setdate.html = PASS FAIL
382
383 // The following tests fail because of difference in how the test shell
384 // navigation controller tracks navigations as compared to how the Mac
385 // implementation does it.
386 WONTFIX : http/tests/history/redirect-200-refresh-0-seconds.pl = FAIL
387 WONTFIX : http/tests/history/redirect-js-location-replace-0-seconds.html = FAIL
388 WONTFIX DEBUG : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
389 WONTFIX LINUX MAC RELEASE : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
390 WONTFIX SLOW WIN RELEASE : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
391 WONTFIX : http/tests/history/redirect-js-location-replace-before-load.html = FAIL
392 WONTFIX : http/tests/history/redirect-meta-refresh-0-seconds.html = FAIL
393
394 // This test expects weird behavior of __defineGetter__ on the
395 // window object.  It expects variables introduced with 'var x = value'
396 // to behave differently from variables introduced with 'y = value'.
397 // This just seems wrong and should have very low priority.
398 // Agreed, not required for Beta, we can debate this with WebKit post Beta
399 // (eseidel, 4/25)
400 // Ignore this until we see evidence that we need to support it.
401 WONTFIX : fast/dom/getter-on-window-object2.html = FAIL
402
403 // V8 doesn't stable sort and we currently have no intention of
404 // changing this.  The following tests only happen to pass due to
405 // the current algorithm used for sorting small arrays. If larger
406 // arrays were used in the tests, they would fail.
407 // It is tracked by: http://code.google.com/p/v8/issues/detail?id=90
408 WONTFIX : fast/js/comparefn-sort-stability.html = PASS
409 WONTFIX : fast/js/sort-stability.html = PASS
410
411 // We have no indication that anyone misses this and have currently no
412 // intention of implementing it.
413 WONTFIX : fast/js/function-dot-arguments.html = FAIL
414
415 // This is a Safari specific test used to document the set of global
416 // constructors they expose and the exact way they are printed.  Not
417 // important.
418 WONTFIX : fast/js/global-constructors.html = FAIL
419
420 // This test is not reliable.  The behavior depends on exactly how the
421 // stack limit is reached.  We're happy with our behavior on this test
422 // as long as we don't crash.
423 WONTFIX : fast/js/global-recursion-on-full-stack.html = FAIL
424
425 // Our DOM Storage implementation doesn't use WebKit's private browsing feature (even for incognito mode).
426 WONTFIX : storage/domstorage/localstorage/private-browsing-affects-storage.html = FAIL
427 WONTFIX : storage/domstorage/sessionstorage/private-browsing-affects-storage.html = FAIL
428
429 // These tests propagate auth credentials back to the renderer, which we
430 // don't want to do.
431 WONTFIX BUG21840 MAC LINUX DEBUG : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
432 WONTFIX BUG21840 LINUX RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
433 WONTFIX BUG21840 SLOW WIN RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
434 WONTFIX BUG21840 WIN DEBUG : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL CRASH
435 WONTFIX BUG21840 MAC RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL TIMEOUT
436
437 WONTFIX BUG21840 LINUX : http/tests/loading/basic-credentials-sent-automatically.html = FAIL CRASH
438 WONTFIX BUG21840 WIN : http/tests/loading/basic-credentials-sent-automatically.html = FAIL TIMEOUT
439 WONTFIX BUG21840 MAC : http/tests/loading/basic-credentials-sent-automatically.html = FAIL
440
441 // This checks the IDN behavior of WebKit/WebKit on Mac, not WebKit/WebCore or
442 // WebKit/JavaScriptCore. Chrome doesn't use WebKit/WebKit, and Chrome's IDN
443 // security model is different from it.
444 BUG21814 WONTFIX SKIP: fast/encoding/idn-security.html = FAIL
445
446 // Our implementation of global history is completely different, and
447 // these tests are irrelevant.
448 BUG23748 WONTFIX : http/tests/globalhistory = FAIL
449
450 // DataGrid was pulled from HTML5 spec, unlikely to re-emerge in the current form.
451 BUG17585 WONTFIX : fast/dom/HTMLDataGridElement = FAIL
452
453 // We are not going to support submitting a form to about:* pages.
454 // For more details, see discussions at issue 20570.
455 BUG20570 WONTFIX : fast/forms/get-forms-to-about-blank.html = FAIL
456
457 // xhtml mp tests were added in http://trac.webkit.org/changeset/43865 and are
458 // skipped on all platforms upstream.
459 // We are not planning to support these.
460 BUG12254 WONTFIX SKIP : fast/xhtmlmp = FAIL
461 BUG12254 WONTFIX SKIP : http/tests/xhtmlmp = FAIL
462
463 // This test requires LayoutTestController.setCacheModel, which we don't implement
464 // because we can't emulate the cahcing behaviors it expects.
465 WONTFIX : fast/dom/HTMLScriptElement/nested-execution.html = FAIL
466
467 // Deletion UI is a Mail-ism. We don't need to worry about this.
468 WONTFIX SKIP : editing/deleting/deletionUI-single-instance.html = FAIL IMAGE
469 WONTFIX SKIP : fast/dom/Element/id-in-deletebutton.html = TEXT
470
471 // Tests for FAST_MOBILE_SCROLLING. We don't use it.
472 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE+TEXT
473 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE+TEXT
474 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE PASS
475 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE PASS
476
477 // Tests for frameset flattening. Relevant only on mobile browsers.
478 WONTFIX SKIP : fast/frames/flattening = TIMEOUT
479
480 // This should be tested differently (see discussion on https://bugs.webkit.org/show_bug.cgi?id=35063).
481 // No need to waste cycles implementing harness support for this variant of the test.
482 WONTFIX SKIP : fast/loader/api-test-go-to-current-back-forward-item.html = TIMEOUT
483
484 // We're not planning to support rocker-based cursor navigation.
485 WONTFIX SKIP : fast/events/spatial-navigation = FAIL
486
487 // We're not planning to relax third-party cookie rules any time soon.
488 WONTFIX BUG37684 SKIP : http/tests/cookies/third-party-cookie-relaxing.html = FAIL
489
490 // <progress> on Mac is always animated.
491 WONTFIX MAC : fast/dom/HTMLProgressElement/progress-element.html = IMAGE PASS
492
493 // -----------------------------------------------------------------
494 // CHROME REWRITTEN TESTS
495 // -----------------------------------------------------------------
496
497 // These tests have been rewritten, with the original being ignored,
498 // because they rely on being able to shadow the 'top' variable on the
499 // global object.  For security we disallow shadowing of top.
500 WONTFIX : editing/selection/click-before-and-after-table.html = FAIL
501
502 // We're taking a different approach on this test than Webkit does, related to
503 // whether we create a window via a plugin when target is _blank.
504 BUG24186 WONTFIX SKIP : plugins/get-url-with-blank-target.html = FAIL
505
506 // Dashboard-related test
507 WONTFIX SKIP : platform/mac/fast/css/dashboard-region-parser.html = FAIL
508
509 // Not a test?
510 WONTFIX SKIP : http/tests/incremental/pause-in-script-element.pl = FAIL
511
512 // This tests for an arbitrary limit set in JSCRE to terminate regular
513 // expressions with an exponential matching behavior.  Since the V8
514 // regular expression engine can be preempted from the outside, we do not
515 // need to limit the execution this way.  Firefox also keeps running
516 // on this one.
517 WONTFIX : fast/regex/slow.html = TIMEOUT
518
519 // Test to verify legacy MAC encodings. We don't want to support them and
520 // have to skip this test.
521 WONTFIX SKIP : fast/encoding/char-decoding-mac.html = FAIL
522
523 // WebKit QT Build-specific tests
524 WONTFIX SKIP : platform/qt/view/fixed-layout-size.html = FAIL
525
526 // These don't have pixel results and rely on ObjC bindings. Don't run until they have pixel results.
527 WONTFIX SKIP : platform/mac/editing/pasteboard/dataTransfer-set-data-file-url.html = FAIL
528 WONTFIX SKIP : http/tests/security/dataTransfer-set-data-file-url.html = FAIL
529
530 // The issue is which global object to use as the implicit
531 // receiver for cross-frame calls.  Currently, IE, Firefox and Chrome
532 // agree and only Safari is doing it this way.
533 BUG5053 WONTFIX : fast/frames/cross-site-this.html = FAIL
534
535 // This tests a Safari incompatibility.  This test should fail since
536 // it contains syntax errors that JSC for some reason choose not to
537 // throw.  V8 follows the spec.
538 WONTFIX : fast/js/reparsing-semicolon-insertion.html = FAIL
539
540 // These tests relate to transform/3d which is a work in progress and is not
541 // even run by the WebKit folk. They should be enabled whenever WebKit begins
542 // testing them by default. The bug to re-enable is:
543 // http://code.google.com/p/chromium/issues/detail?id=8455
544 WONTFIX SKIP : transforms/3d = FAIL
545
546 // Copying with no selection is sometimes supposed to work
547 // Also skipped by Apple on Windows (rdar://problem/5015941)
548 BUG20404 : editing/execCommand/copy-without-selection.html = FAIL
549
550 // This is a faulty test and need to change so it works on Windows.
551 // onload race condition due to poorly designed test.
552 // Works fine when run stand-alone.  Not needed for Beta.
553 // Also skipped by Apple on Windows, due to intermittent failure
554 // (rdar://5313536)
555 // started WIN only, since r30442 fails on all platforms
556 BUG10270 : fast/dom/frame-loading-via-document-write.html = FAIL
557
558 // -----------------------------------------------------------------
559 // LIGHTTPD
560 // -----------------------------------------------------------------
561 // This are failing for different reasons under our new lighttpd configuration
562 // TODO(deanm): Address all of these via lighttpd if possible, otherwise fork.
563 // Maybe flaky and need to be forked?
564
565 // LightTPD doesn't accept unknown HTTP methods
566 BUG30536 SKIP : http/tests/xmlhttprequest/methods-lower-case.html = TIMEOUT CRASH
567 BUG30536 DEBUG : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
568 BUG30536 LINUX MAC RELEASE : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
569 BUG30536 WIN RELEASE : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
570 BUG30536 WIN SLOW : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-invalidation-by-method.html = FAIL
571 // LightTPD doesn't accept unknown HTTP methods and passes CGIs a Content-Type
572 // even when a request didn't send the header.
573 BUG30536 WIN SLOW : http/tests/xmlhttprequest/methods.html = FAIL
574 BUG30536 LINUX : http/tests/xmlhttprequest/methods.html = FAIL
575 BUG30536 MAC : http/tests/xmlhttprequest/methods.html = FAIL TIMEOUT
576 // Webkit 50667:50696 (Lighttpd related?)
577 BUG30536 WIN : http/tests/xmlhttprequest/xmlhttprequest-setrequestheader-no-value.html = TEXT
578
579 // Another lighttpd quirk.
580 BUG8941 WIN SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
581 BUG8941 LINUX SLOW : http/tests/xmlhttprequest/web-apps/013.html = PASS
582 BUG8941 MAC DEBUG SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
583 BUG8941 MAC RELEASE SLOW : http/tests/xmlhttprequest/web-apps/013.html = PASS
584 BUG8941 WIN : http/tests/xmlhttprequest/web-apps/012.html = FAIL
585
586 // -----------------------------------------------------------------
587 // TEXT
588 // -----------------------------------------------------------------
589
590 // This class of test fails because of size differences in text runs.
591 // Mostly this is because of international text rendering differences.
592
593 // Incrorect results, in incorrect international font metrics.
594 BUG20521 LINUX WIN : fast/text/atsui-multiple-renderers.html = FAIL
595 BUG20521 LINUX WIN : fast/text/atsui-pointtooffset-calls-cg.html = FAIL TIMEOUT
596 BUG20521 LINUX WIN : fast/text/atsui-rtl-override-selection.html = FAIL
597
598 // This test checks that we hack around a bug in helvetica.  We fail to.
599 BUG20519 LINUX WIN : fast/text/wide-zero-width-space.html = FAIL
600
601 // More missing international text overides, not needed for Beta.
602 // Capitalization results match Safari, even if "not fully correct"
603 BUG20547 LINUX WIN : fast/text/capitalize-boundaries.html = FAIL
604
605 // Different button line-heights, our behavior looks wrong.
606 BUG20551 LINUX WIN : fast/replaced/table-percent-height.html = FAIL
607 BUG20551 LINUX WIN : fast/replaced/table-percent-height-text-controls.html = FAIL
608
609
610 // -----------------------------------------------------------------
611 // URL
612 // -----------------------------------------------------------------
613
614 // Form submission (GET) on non-standard url does not append a query.
615 // Defering these tests as the expected behavior is wonky, and shouldn't affect
616 // existing apps one way or another.
617 // Implicit expectation in this test is that you can "set query" on a data URL,
618 // and it should replace the first "?" substring. This makes absolutely no
619 // sense.
620 BUG24203 : fast/events/stopPropagation-submit.html = FAIL
621
622 // -----------------------------------------------------------------
623 // PENDING TESTS (forked to pending/, need to be sent upstream)
624 // -----------------------------------------------------------------
625
626 // These tests don't work with fast timers due to setTimeout
627 // races. See https://bugs.webkit.org/show_bug.cgi?id=21536
628 BUG24195 WIN LINUX : fast/repaint/bugzilla-6473.html = IMAGE+TEXT
629 BUG24195 MAC : fast/repaint/bugzilla-6473.html = IMAGE
630
631 // -----------------------------------------------------------------
632 // Tests deferred until we provide support for a particular feature.
633 // -----------------------------------------------------------------
634
635 // -----------------------------------------------------------------
636 // Tests requiring features not currently in test_shell.
637 // -----------------------------------------------------------------
638
639 // Implement layoutTestController.display()
640 BUG8630 WIN LINUX : fast/repaint/body-background-image.html = FAIL
641
642 // Relies on text metrics to pass. Rework to be meaningful for ports other than platform/mac.
643 BUG8630 WIN LINUX : fast/repaint/overflow-outline-repaint.html = FAIL
644 BUG8630 WIN LINUX : fast/backgrounds/solid-color-context-restore.html = FAIL
645 BUG8630 WIN LINUX : fast/dynamic/containing-block-change.html = FAIL
646 BUG8630 LINUX : fast/forms/listbox-clip.html = IMAGE+TEXT
647 BUG8630 WIN LINUX : fast/overflow/hidden-scrollbar-resize.html = FAIL
648 BUG8630 WIN LINUX RELEASE : fast/reflections/inline-crash.html = FAIL
649 BUG8630 LINUX WIN DEBUG : fast/reflections/inline-crash.html = FAIL
650 BUG8630 WIN LINUX : fast/text/font-initial.html = FAIL
651 BUG8630 LINUX : svg/custom/use-detach.svg = FAIL PASS
652 BUG18772 LINUX : fast/backgrounds/001.html = FAIL
653
654 // Need a setAuthorAndUserStylesEnabled method in
655 // layoutTestController. Now we have preference to enable/disable user
656 // styles(not work now), we still need to add a preference to enable/disable
657 // styles of both author and user.
658 // Deferring, we don't support user-controlled UA stylesheets (in beta)
659 // Actually, gonna SKIP because it causes an additional error message in:
660 // fast/css/display-none-inline-style-change-crash.html   somehow
661 // the message is dumped after the #EOF, which causes an additional
662 // error in the header of the following test.
663 BUG24197 SKIP : fast/css/disabled-author-styles.html = FAIL
664
665 // Need to implement
666 // layoutTestController.setDomainRelaxationForbiddenForURLScheme()
667 BUG32674 WIN LINUX MAC : http/tests/security/setDomainRelaxationForbiddenForURLScheme.html = TEXT
668
669 // -----------------------------------------------------------------
670 // Other
671 // -----------------------------------------------------------------
672
673 // Pixeltest failure: Form control metrics incorrect
674 BUG10273 LINUX : http/tests/navigation/javascriptlink-frames.html = FAIL
675
676 // Mac Safari under certain circumstances automatically places
677 // a caret in editable document even when none was requested programatically.
678 // We don't intend to copy this feature (at least not for Beta).
679 BUG20844 LINUX WIN RELEASE : editing/selection/designmode-no-caret.html = FAIL
680 BUG20844 LINUX WIN DEBUG : editing/selection/designmode-no-caret.html = FAIL
681
682 // Directionality of mixed-direction text in selected choice should
683 // match that in the <select> option lists.
684 // Low priority, unclear if test expectations are correct (see bug)
685 BUG6139 : fast/forms/select-writing-direction-natural.html = FAIL
686
687 // We don't support NPN_Enumerate, but don't know of any plugin
688 // which depends on that functionality.  So we ignore this for beta.
689 BUG21901 : plugins/npruntime/enumerate.html = FAIL
690
691 // Expectations for this test changed upstream. We should fix this test, but
692 // it doesn't need to block the current release
693 BUG10275 : http/tests/security/cross-frame-access-put.html = FAIL
694
695 // Due to differences in error pages. Needs re-baselining.
696 BUG24208 WIN DEBUG : http/tests/navigation/post-goback1.html = FAIL
697 BUG24208 SLOW WIN RELEASE : http/tests/navigation/post-goback1.html = FAIL
698 BUG24208 LINUX MAC : http/tests/navigation/post-goback1.html = FAIL
699
700 // Requires layoutTestController.dispatchPendingLoadRequests
701 BUG33211 WIN RELEASE : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT CRASH
702 BUG33211 WIN DEBUG : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
703 BUG33211 MAC LINUX : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
704
705 // HTML5 DB layout tests
706 BUG27697 SKIP : storage/hash-change-with-xhr.html = PASS
707 // We do not use Safari's private browsing
708 WONTFIX SKIP : storage/private-browsing-readonly.html = PASS
709
710 // HTML5 datalist element. We don't enable it because WebKit implementation
711 // is incomplete.
712 BUG20226 DEFER : fast/forms/datalist-nonoption-child.html = TEXT
713 BUG20226 DEFER : fast/forms/datalist.html = TEXT
714 BUG20226 DEFER : fast/forms/input-list.html = FAIL
715 BUG20226 DEFER : fast/forms/input-selectedoption.html = FAIL
716
717 // Need to implement inner-spin-button or outer-spin-button
718 BUGWK38570 : fast/forms/input-appearance-spinbutton-disabled-readonly.html = FAIL
719 BUGWK38570 : fast/forms/input-number-events.html = FAIL
720
721 // The feature was disabled due to a compatibility issue.
722 BUGWK40520 DEFER : fast/forms/interactive-validation-lost-focusable.html = TEXT
723 BUGWK40520 DEFER : fast/forms/interactive-validation-prevented.html = TEXT
724
725 // Add support for inspector layout tests.
726 BUG26734 LINUX MAC SKIP : inspector = PASS
727 BUG26734 LINUX MAC SKIP : http/tests/inspector = PASS
728 BUG26734 LINUX MAC SKIP : http/tests/inspector-enabled = PASS
729 BUG26734 SKIP : inspector/console-format-collections.html = TEXT
730 BUG26734 SKIP : inspector/console-format.html = TEXT
731
732 // These tests need to be changed to be platform independent.
733 BUG13907 : http/tests/media/remove-while-loading.html = TIMEOUT
734 BUG13907 : http/tests/media/video-play-stall-seek.html = TIMEOUT
735 BUG13907 : http/tests/media/video-play-stall.html = TIMEOUT
736 BUG13907 : http/tests/media/video-referer.html = TIMEOUT
737 BUG13907 : http/tests/media/video-seekable-stall.html = TIMEOUT
738 BUG13907 : http/tests/security/local-video-poster-from-remote.html = PASS FAIL TIMEOUT
739 BUG13907 : http/tests/security/local-video-source-from-remote.html = PASS FAIL TIMEOUT
740 BUG13907 : http/tests/security/local-video-src-from-remote.html = PASS FAIL TIMEOUT
741 BUG13907 : media/video-display-aspect-ratio.html = PASS FAIL TIMEOUT
742 BUG13907 : media/video-loop.html = PASS FAIL TIMEOUT
743
744 // These tests need to be changed to not rely on setTimeout().
745 BUG13907 SLOW WIN DEBUG : media/video-played-collapse.html = PASS FAIL
746 BUG13907 SLOW WIN DEBUG : media/video-seek-past-end-playing.html = PASS FAIL
747
748 // We sometimes emit an error from the same source element twice.
749 BUG13907 : media/video-source-error.html = PASS FAIL
750
751 // Failing because we sometimes emit additional timeupdate events.
752 // Test may need to be rewritten or only log the first timeupdate event.
753 BUG13907 : media/audio-delete-while-slider-thumb-clicked.html = PASS FAIL
754
755 // Failing because we sometimes emit additional timeupdate events.
756 // Test might be WONTFIX because we don't export a step button in the first place.
757 BUG13907 BUG25375 SKIP : media/audio-delete-while-step-button-clicked.html = FAIL
758
759 // Seeks to the end of file, which results in ogg packets with no timestamps.
760 BUG13907 : media/event-attributes.html = PASS FAIL TIMEOUT
761
762 // The media time display isn't appearing.
763 BUG13907 : media/video-zoom-controls.html = PASS FAIL TIMEOUT
764
765 // Flaky because of our new seeking algorithm.
766 BUG50438 : media/controls-drag-timebar.html = PASS FAIL
767
768 // The media time display is getting styled when it shouldn't be.
769 BUG13907 : media/controls-styling.html = FAIL
770
771 // These tests are flaky with subtle pixel differences.
772 BUG13907 LINUX MAC : media/video-zoom.html = IMAGE PASS
773 BUG13907 LINUX MAC : media/video-layer-crash.html = IMAGE PASS
774 BUG13907 LINUX MAC : media/video-transformed.html = IMAGE PASS
775
776 // This is flaky with a subtle pixel difference in the bottom right corner,
777 // which I believe is due to new video scaling algorithm.
778 BUG13907 : media/video-replaces-poster.html = IMAGE PASS
779
780 // These tests are failing because they use position-dependent mouse clicks.
781 BUG13907 BUG25375 : media/video-controls-transformed.html = FAIL
782
783 // These tests are WONTFIX because they use codecs Chromium doesn't support.
784 BUG16779 WONTFIX SKIP : media/audio-mpeg-supported.html = FAIL TIMEOUT
785 BUG16779 WONTFIX SKIP : media/audio-data-url.html = FAIL TIMEOUT
786 BUG16779 WONTFIX SKIP : media/media-can-play-mpeg-audio.html = TEXT
787 BUG16779 WONTFIX SKIP : media/video-can-play-type.html = FAIL TIMEOUT
788 BUG16779 WONTFIX SKIP : media/video-document-types.html = FAIL TIMEOUT
789 BUG16779 WONTFIX SKIP : media/video-size-intrinsic-scale.html = FAIL TIMEOUT
790
791 // We haven't implemented the WebKit fullscreen extension.
792 BUG16735 : media/media-fullscreen-inline.html = TIMEOUT
793 BUG16735 : media/media-fullscreen-not-in-document.html = TIMEOUT
794
795 // We haven't implemented the WebKit captioning extension.
796 BUG28301 : media/media-captions.html = TIMEOUT
797
798 // We haven't implemented reverse audio/video playback.
799 BUG33099 : media/video-reverse-play-duration.html = TIMEOUT
800 BUG33099 : media/video-timeupdate-reverse-play.html = TIMEOUT
801
802 // We haven't implemented video preloading and it passing is a false positive.
803 BUG16482 : media/video-preload.html = PASS FAIL
804
805 // We don't support dynamic fonts on Linux.
806 // Once we have the sandbox working, we should re-evaluate this.
807 BUG10278 LINUX : fast/css/font-face-implicit-local-font.html = FAIL
808 BUG10278 LINUX : fast/css/font-face-unicode-range.html = FAIL
809
810 // The v8 bindings allow shadowing of all properties on the global
811 // object.  If you use 'var prop = value' you will get a new variable
812 // named prop that shadows builtin properties on the global object.
813 // This behavior is consistent and I'm reluctant to make the massive
814 // change that would be needed to implement the inconsistent handling
815 // of this that KJS has (some properties can be shadowed and others
816 // can't).  This should have low priority.
817 // We currently match IE and the plan was to convince KJS to change
818 // post-beta, but the bug is here:
819 // https://bugs.webkit.org/show_bug.cgi?id=16644 , and it's unclear
820 // what the resolution was.
821 BUG10279 : fast/js/var-declarations-shadowing.html = FAIL
822
823 // Implement full JSON support in V8
824 BUG14885 SLOW : fast/js/JSON-parse.html = FAIL
825 BUG14885 SLOW : fast/js/JSON-stringify.html = FAIL CRASH
826 BUG14885 : fast/js/JSON-parse-reviver.html = FAIL
827 BUG14885 : fast/js/JSON-stringify-replacer.html = FAIL
828
829 // User stylesheets not currently supported by chrome.
830 // Webkit supports them by doing filesystem operations directly.
831 // This is disallowed in a sandboxed renderer. The test fails in
832 // test_shell.exe because the necessary filesystem stubs are notImplemented(),
833 // and would need to be proxied through the browser
834 BUG24199 : http/tests/security/local-user-CSS-from-remote.html = FAIL
835
836 // Implement CSS -webkit-font-smoothing property support.
837 BUG23270 WIN LINUX : fast/css/font-smoothing.html = FAIL
838
839 // Make canvas shadow work with drawImage.
840 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint-2.html = FAIL
841 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint.html = FAIL
842
843 // Repaint issues are revealed by these tests.
844 BUG28183 LINUX WIN : fast/repaint/box-shadow-v.html = IMAGE
845 // The difference of positions of texts after the list markers is NOT
846 // an issue. The behavior of the expectations was wrong. The real
847 // problem is the change of the 'p' in italic "properly". Note that
848 // upstream expectation image has the same issue.
849 BUG28183 WIN LINUX : fast/repaint/list-marker.html = IMAGE
850
851 BUG20507 : http/tests/uri/resolve-encoding-relative.html = FAIL
852
853
854 // Flaky: fails about 5% of the time.
855 BUG31342 WIN RELEASE : security/block-test-no-port.html = TEXT PASS
856
857 // Fails in debug. Windows used to be only flaky, but now fails consistently
858 // starting with the 52554->52633 merge.
859 BUG31363 DEBUG WIN LINUX : platform/chromium/fast/dom/interval.html = TEXT PASS
860
861 // -----------------------------------------------------------------
862 // SVG TESTS
863 // -----------------------------------------------------------------
864
865 // These are regressions from 1.0, but deemed DEFERable for 2.0.
866
867 BUG8763 LINUX WIN MAC : svg/custom/use-on-g-containing-foreignObject-and-image.svg = IMAGE+TEXT IMAGE
868
869 // We show reduced version of the entire SVN image rather than an image
870 BUG23463 MAC : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE
871 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE+TEXT TEXT
872 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE+TEXT PASS
873 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE+TEXT
874
875 // Merge 39744:39829 - regression
876 BUG10284 MAC : svg/custom/path-bad-data.svg = FAIL
877
878 // Merge 39744:39913? - regressions
879 BUG10286 LINUX : svg/W3C-SVG-1.1/animate-elem-02-t.svg = FAIL
880
881
882 // Bug in Skia, see https://bugs.webkit.org/show_bug.cgi?id=24534 .
883
884 // -----------------------------------------------------------------
885 // End SVG Regressions
886 // -----------------------------------------------------------------
887
888 // Selection wrong.
889 BUG10292 MAC LINUX : editing/selection/5354455-1.html = FAIL
890
891 // Compact support was removed from WebKit by Hyatt and layout tests rebaselined in r40259.
892
893 BUG10295 MAC : fast/dom/prototype-chain.html = FAIL
894
895 // Font differences, requiring overriden metrics, not a real bug, not fixing for Beta
896 BUG10296 MAC : fast/text/international/bidi-menulist.html = FAIL
897 BUG10296 LINUX : fast/transforms/transform-on-inline.html = FAIL
898 BUG10296 LINUX : fast/transforms/transform-table-row.html = FAIL
899 BUG10296 LINUX : svg/batik/paints/patternPreserveAspectRatioA.svg = FAIL
900 // Maybe need to be rebaselined - should be looked at in more detail.
901 BUG10296 LINUX : svg/custom/foreign-object-skew.svg = FAIL
902 BUG10296 LINUX : svg/batik/text/textLength.svg = FAIL
903
904 // No anti-aliasing on the text.
905 BUG10298 LINUX : svg/custom/use-on-disallowed-foreign-object-3.svg = FAIL
906
907 // The failures listed below have never passed in Chromium and need to be
908 // investigated, categorized, and (one hopes) fixed.
909
910 // These test fail full text diff (but not simplified diff) most likely due
911 // to differing implementations of SVG fonts. They may or may not represent
912 // real bugs which need fixin'
913
914 // There's no baseline at all for this!
915 BUG32392 SKIP : svg/batik/text/smallFonts.svg = FAIL
916
917 // The test is flaky and maybe platform-dependent.
918 BUG32401 LINUX WIN : svg/custom/marker-changes.svg = IMAGE+TEXT IMAGE
919
920 BUG32444 LINUX WIN : svg/hixie/text/003.html = FAIL
921
922 // SVG masks aren't quite working yet.
923 // Might also be related to https://bugs.webkit.org/show_bug.cgi?id=21910
924 // New tests. We should fix these, but they don't need to block the current release
925 BUG3244 LINUX WIN : fast/backgrounds/svg-as-mask.html = FAIL
926 BUG3244 WIN DEBUG : fast/backgrounds/animated-svg-as-mask.html = FAIL
927 BUG3244 SLOW WIN RELEASE : fast/backgrounds/animated-svg-as-mask.html = FAIL
928 BUG3244 LINUX : fast/backgrounds/animated-svg-as-mask.html = FAIL
929 // More tests that fail because of masks not working properly.
930 // New tests. We should fix these, but they don't need to block the current release
931 BUG3244 WIN LINUX : fast/backgrounds/mask-composite.html = FAIL
932 BUG3244 WIN LINUX : fast/backgrounds/repeat/mask-negative-offset-repeat.html = FAIL
933 // Marking this again as failed. This test failed even after rebaseline due to
934 // the fact that the font is not specified in the test and it seems that the
935 // test falls back on a different font locally than on the buildbot so the
936 // baseline is invalid. This might indicate a failure in our font fallback code
937 // or might be expected and that we should either go with the buildbot output
938 // or change the test upstream to specify explicitly what font to use.
939 // The mask part of this test is totally wrong.
940 BUG3244 WIN LINUX : fast/backgrounds/svg-as-background-6.html = FAIL
941
942 BUG10302 LINUX : svg/W3C-SVG-1.1/pservers-grad-10-b.svg = FAIL
943
944 BUG10303 LINUX : svg/custom/pattern-rotate.svg = FAIL
945
946 // I find it hard to care too much about SVG failures.
947 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-04-t.svg = FAIL
948 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-05-t.svg = FAIL
949 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-06-t.svg = FAIL
950 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-07-t.svg = FAIL
951 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-desc-02-t.svg = FAIL
952 BUG10304 LINUX : svg/W3C-SVG-1.1/interact-zoom-01-t.svg = FAIL
953 BUG10304 LINUX : svg/W3C-SVG-1.1/text-spacing-01-b.svg = FAIL
954 BUG10304 LINUX : svg/W3C-SVG-1.1/text-text-01-b.svg = FAIL
955 BUG10304 LINUX : svg/carto.net/slider.svg = FAIL
956 BUG10304 LINUX : svg/carto.net/textbox.svg = FAIL
957 BUG10304 LINUX : svg/carto.net/window.svg = FAIL
958 BUG10304 LINUX : svg/custom/coords-relative-units-transforms.svg = FAIL
959 BUG10304 LINUX : svg/custom/use-referencing-nonexisting-symbol.svg = FAIL
960 BUG10304 LINUX RELEASE : svg/hixie/perf/003.xml = FAIL
961 BUG10304 LINUX DEBUG : svg/hixie/perf/003.xml = FAIL
962 BUG10304 LINUX : svg/hixie/perf/004.xml = FAIL
963 BUG10304 LINUX : svg/hixie/perf/005.xml = FAIL
964 BUG10304 LINUX RELEASE : svg/hixie/perf/006.xml = FAIL
965 BUG10304 LINUX DEBUG : svg/hixie/perf/006.xml = FAIL
966 BUG10304 LINUX : svg/hixie/text/003b.xml = FAIL
967 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-01-t.svg = FAIL
968 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-02-t.svg = FAIL
969 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-03-b.svg = FAIL
970 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-04-b.svg = FAIL
971 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-05-t.svg = FAIL
972 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-06-t.svg = FAIL
973 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-07-b.svg = FAIL
974 // Our gradients are wrong here.
975 BUG19559 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-08-b.svg = FAIL
976 BUG10304 LINUX : svg/carto.net/button.svg = FAIL
977
978 // Probably need to change the test upstream to describe it better and use no
979 // hard coded numbers.
980 BUG19897 WIN LINUX : svg/custom/getscreenctm-in-mixed-content2.xhtml = FAIL
981
982 BUG10306 LINUX : svg/carto.net/combobox.svg = FAIL
983
984 // Linux pixeltest failure: slightly different shade of composited
985 // alpha in bottom group.
986 BUG10310 LINUX : svg/W3C-SVG-1.1/masking-opacity-01-b.svg = FAIL
987
988 // Image mismatch since WebKit r49757.
989 // The difference is hard to tell, but our gradation is slightly different
990 // (blue is too strong on the gradation).
991 // Pixel dump was updated on upstream but our rendering did not change.
992 BUG25175 MAC : svg/custom/grayscale-gradient-mask.svg = IMAGE
993
994 // -----------------------------------------------------------------
995 // Accessibility layout tests
996 //
997 // In addition to WebCore, these are meant to exercise platform APIs
998 // (MSAA, NSAccessibility, ATK). Since we don't have access to these in the
999 // sandbox, making these tests pass involves faking interactions with these APIs
1000 // and doesn't seem like a good use of our time.
1001 // We DEFER or WONTFIX these, because we need to first identify a good
1002 // testing strategy for Chromium accessibility. It is possible we won't use
1003 // these at all.
1004
1005 BUG10322 DEFER SKIP : accessibility = PASS FAIL
1006 BUG10322 DEFER SKIP : platform/mac/accessibility = PASS FAIL
1007 BUG10322 DEFER SKIP : platform/win/accessibility = PASS FAIL
1008
1009 // -----------------------------------------------------------------
1010 // Other failures
1011 // -----------------------------------------------------------------
1012
1013 // These fail the pixel tests in debug mode because they have
1014 // unpainted space (filled red in Debug but not in Release).
1015 // https://bugs.webkit.org/show_bug.cgi?id=8423
1016 BUG24204 WIN LINUX : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE+TEXT TEXT
1017
1018 // Fails on webkit windows as well.
1019 BUG24207 : fast/events/attempt-scroll-with-no-scrollbars.html = FAIL
1020
1021 // The test may require a proper version of Java 6 RC 10 plugin
1022 // installed to run.
1023 BUG10313 : plugins/npruntime/bindings-test.html = FAIL
1024
1025 // No glyph for U+FFFD (Replacement Character : black diamond with
1026 // question mark) in them
1027 BUG10315 WIN : fast/encoding/invalid-UTF-8.html = FAIL
1028
1029 // V8 failures as a result of the WebKit merge.
1030 // http://code.google.com/p/v8/issues/detail?id=92
1031
1032 // v8: A setter that is added to a prototype after the inline cache is
1033 // recorded will not be called.
1034 BUG24209 : fast/js/pic/cached-prototype-setter.html = FAIL
1035
1036 // We have the wrong shadow for "This".
1037 // It appears we're not obeying the "transparent" fill color.
1038 BUG10317 LINUX : fast/css/shadow-multiple.html = FAIL
1039
1040 // Problems with getImageData and toDataURL.
1041 // This test requires us to do alpha blending exactly the way CG does it,
1042 // which Skia may never do (see bug).
1043 BUG22700 LINUX WIN : fast/canvas/canvas-getImageData.html = FAIL
1044
1045 // We're much closer now. To fully pass this we need encoders for jpg
1046 // and gif, which is a low priority.
1047 BUG10318 WIN LINUX : fast/canvas/toDataURL-supportedTypes.html = FAIL
1048
1049 // This test finishes while in the middle of a CSS animation. This is
1050 // intentional, but it makes pixel results unreliable.
1051 // http://bugs.webkit.org/show_bug.cgi?id=21491
1052 // CSS animations should not block our next release.
1053 BUG10320 WIN LINUX : transitions/opacity-transition-zindex.html = PASS FAIL
1054
1055 // Issue 3273: TextInputController::firstRectForCharacterRange not implemented.
1056 BUG3273 : editing/selection/move-left-right.html = FAIL
1057 BUG3273 MAC : platform/mac/editing/input/caret-primary-bidi.html = FAIL
1058 BUG3273 MAC : platform/mac/editing/input/firstrectforcharacterrange-plain.html = FAIL
1059 BUG3273 MAC : platform/mac/editing/input/range-for-empty-document.html = FAIL
1060 // WebKit 50358:50395
1061 BUG3273 : fast/text/international/thai-cursor-position.html = TEXT
1062 // WebKit roll 51512:51524
1063 BUG3273 : editing/selection/5825350-1.html = FAIL
1064 BUG3273 : editing/selection/5825350-2.html = FAIL
1065 BUG3273 : editing/selection/mixed-editability-10.html = FAIL
1066
1067 // Regression from the 41362:41402 merge.
1068 BUG8402 MAC : fast/forms/drag-out-of-textarea.html = FAIL
1069
1070 // GURL doesn't handle switching from standard URL to path URL correctly
1071 BUG27914 : fast/dom/HTMLAnchorElement/set-href-attribute-protocol.html = TEXT
1072
1073 // ----------------------------------------------------------------------------
1074 // NEW FOR THE MERGE
1075 //
1076 // These tests need to have their output inspected to make sure it's reasonable
1077 // and then baselined if necessary.
1078 // ----------------------------------------------------------------------------
1079
1080 // This test isn't hanging, it just takes 12-13 seconds to run.
1081 BUG30536 SLOW WIN LINUX : http/tests/misc/acid3.html = FAIL
1082 BUG30536 : http/tests/misc/favicon-as-image.html = FAIL
1083
1084 // Has failed for Chromium since it was first checked in.  (Lighttpd related?)
1085 BUG10323 WIN : http/tests/xmlhttprequest/xmlhttprequest-no-content-length-onProgress.html = FAIL
1086
1087 // Post-MERGE failures: these will all need to be fixed one day
1088
1089 // Linux pixeltest failure: caret is in the wrong place
1090 // Upstream WebKit also skips this test and Safari with latest WebKit shows
1091 // same behavior as Chromium. Not required for beta so marking as deferred.
1092 BUG10324 LINUX WIN : editing/selection/caret-rtl-2.html = IMAGE
1093
1094 // This test assumes we're using unix paths and looks for a file:///test
1095 // path.  We correctly return file:///C:/test on Windows.  We should fix
1096 // upstream
1097 // Expectations for this test changed upstream. We should fix this test, but
1098 // it doesn't need to block the current release
1099 BUG10325 WIN : fast/dom/resource-locations-in-created-html-document.html = FAIL
1100
1101 // GURL/KURL difference in handling of "http:".
1102 // New test. We should fix it, but it doesn't need to block the current release
1103 BUG7386 : http/tests/security/postMessage/invalid-origin-throws-exception.html = FAIL
1104
1105 // Linux pixeltest failure: Font mismatch
1106 BUG10327 LINUX : tables/mozilla_expected_failures/bugs/bug14007-2.html = FAIL
1107
1108 // On Linux, we don't seem to be getting Helvetica Bold for all cases.
1109 BUG10328 LINUX : fast/css/font-face-multiple-faces.html = FAIL
1110
1111 // Got flakey (both debug and release) around r3581 (ananta).
1112 // New test. We should fix it, but it doesn't need to block the current release
1113 BUG10329 WIN : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1114
1115 // Uses ahem font and expects line heights to match some pixel value.
1116 // We should be able to pass this -- not sure what's wrong.
1117 BUG10331 LINUX : css2.1/t1008-c44-ln-box-02-d-ag.html = FAIL
1118
1119 // Looks like we're failing the test -- there are red boogers in the box that should be all green.
1120 BUG10332 LINUX : css2.1/t1605-c545-txttrans-00-b-ag.html = FAIL
1121
1122 // Asks for "system" fonts, which we don't support at all.
1123 BUG10335 LINUX : fast/css/css2-system-fonts.html = FAIL
1124
1125 // Large fonts have different metrics.
1126 BUG10336 LINUX : fast/css/font-face-descriptor-multiple-values.html = FAIL
1127
1128 // Wants Helvetica, Monaco.  It's still testing something useful, but we may
1129 // need to check in a wrong-looking baseline.  Windows looks wrong too.
1130 BUG10337 LINUX : fast/css/font-face-locally-installed.html = FAIL
1131
1132 // Font metrics wrong, despite using Lucida Grande?
1133 BUG10338 LINUX : fast/events/updateLayoutForHitTest.html = FAIL
1134
1135 // Layout totally different -- wrong font selected?
1136 BUG10340 LINUX : fast/frames/viewsource-attribute.html = FAIL
1137
1138 // Linux flaky: sometimes I get scrollbars and sometimes not.
1139 BUG10341 LINUX : fast/lists/001.html = FAIL
1140
1141 // We fail to load a file URL with a port number -- how does this work on
1142 // Windows?
1143 BUG10342 LINUX MAC : fast/loader/file-URL-with-port-number.html = TIMEOUT
1144
1145 // Text doesn't display at all -- maybe we don't have the slow font
1146 // code enabled?
1147 BUG10343 LINUX : fast/text/atsui-kerning-and-ligatures.html = FAIL
1148 BUG10343 LINUX RELEASE : fast/text/atsui-partial-selection.html = FAIL
1149 BUG10343 LINUX : fast/text/atsui-small-caps-punctuation-size.html = FAIL
1150
1151 // Started timing out with agl's complext text change.  Page is verrry slow.
1152 BUG10343 SKIP LINUX : fast/text/large-text-composed-char.html = TIMEOUT FAIL
1153
1154 // Missing text -- slow font path unimplemented?
1155 BUG10344 LINUX : fast/text/should-use-atsui.html = FAIL
1156
1157 // We print to stderr when a failure happens while importing XSL;
1158 // should disable this in libxml.
1159 BUG10347 MAC : fast/xsl/transform-xhr-doc.xhtml = FAIL
1160
1161 // Linux pixeltest failure: Failing to apply style
1162 BUG10349 LINUX : fast/forms/select-style.html = FAIL
1163
1164 // Linux pixeltest failure: The text suggests that the radios should not
1165 // overlap, but it's very close and quite different from the Windows version
1166 BUG10350 LINUX : fast/replaced/width100percent-radio.html = FAIL
1167
1168 // These tests are marked as failing on Linux because they depend on QuickTime.
1169 // See the bug for more discussion.
1170 BUG15797 LINUX : fast/dom/object-embed-plugin-scripting.html = FAIL
1171 BUG15797 LINUX : plugins/embed-attributes-setting.html = FAIL
1172
1173 // Skip because we throw an exception before we get to dumpAsText.
1174 BUG10351 SKIP MAC : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1175 BUG10351 MAC : plugins/inner-html-display-none.html = FAIL
1176 BUG10351 MAC : plugins/mouse-events.html = FAIL
1177 // BUG10667 SLOW MAC RELEASE : plugins/iframe-shims.html = FAIL
1178
1179 // NEW FOR MERGE 36102:37604
1180
1181 BUG32184 : fast/js/arguments.html = FAIL
1182 // See bug http://code.google.com/p/chromium/issues/detail?id=7868,
1183 // not urgent for current release.
1184 BUG24227 : http/tests/plugins/local-geturl-from-remote.html = FAIL
1185
1186 // This test sometimes fails indefinitely, other times it takes 1-2 seconds.
1187 BUG14009 WIN : http/tests/misc/dns-prefetch-control.html = TIMEOUT PASS
1188
1189 // NEW FOR MERGE 37604:38097
1190 // This is a Safari specific test used to document the set of global
1191 // constructors they expose and the exact way they are printed.  Not
1192 // important - we might even want to ignore it.
1193 // New tests. We should fix these, but they doesn't need to block the current
1194 // release
1195 BUG10354 WIN LINUX : fast/layers/opacity-transforms.html = FAIL
1196
1197 // MERGE 38389:38450
1198 // Form submit causes invalid page reload/navigation when action is a named
1199 // anchor
1200 BUG10357 : fast/dom/cssTarget-crash.html = TIMEOUT PASS
1201
1202 // MERGE 38500:39550: New tests
1203 // Missing expected results
1204 BUG10358 SKIP MAC LINUX : animations/animation-drt-api.html = PASS
1205
1206 // New test. We should fix it, but it doesn't need to block the current release
1207 BUG10361 WIN : http/tests/misc/single-character-pi-stylesheet.xhtml = FAIL
1208
1209 // Windows is missing the green box. Started to pass in roll to WebKit r50313
1210 BUG8729 WIN DEBUG : http/tests/multipart/invalid-image-data.html = FAIL
1211 BUG8729 SLOW WIN RELEASE : http/tests/multipart/invalid-image-data.html = FAIL
1212 // Flaky on Linux dbg.
1213 BUG8729 LINUX DEBUG : http/tests/multipart/invalid-image-data.html = IMAGE PASS
1214
1215 // -----------------------------------------------------------------
1216 // MAC PORT TESTS
1217 // -----------------------------------------------------------------
1218
1219 //
1220 // *** TESTS TO WORK ON FIRST ***
1221 // These tests fail because of work that needs to be done in Mac TestShell to
1222 // bring it up to par with Win TestShell. These tests pass on Win and should
1223 // pass on Mac once we fix the bugs.
1224 //
1225
1226 // We've bucketed tests into groupings for why they're failing. Please try
1227 // to add new failures in the appropriate bucket.
1228
1229 // text fields wrong width
1230 BUG10363 MAC : tables/mozilla/bugs/bug53690-1.html = FAIL
1231 BUG10363 MAC : tables/mozilla/bugs/bug9024.html = FAIL
1232
1233 // we're waiting on upstreaming a change to how textarea padding works. rather
1234 // than rebasing, we'll wait for the upstream (which ojan said should happen
1235 // early in Jan 09).
1236 BUG10364 MAC : fast/css/resize-corner-tracking.html = FAIL
1237 BUG10364 MAC : http/tests/navigation/reload-subframe-object.html = FAIL
1238
1239 // bad key event handling
1240 BUG10366 MAC : fast/events/option-tab.html = FAIL CRASH
1241
1242 // selection
1243 BUG10369 MAC : editing/selection/5109817.html = FAIL
1244 BUG10369 LINUX : editing/selection/5354455-2.html = FAIL
1245
1246 // incorrect layout
1247 BUG10370 MAC : fast/css/font-weight-1.html = FAIL
1248
1249 // Not really sure why these are failing at the moment
1250 BUG10376 MAC : fast/dom/isindex-002.html = FAIL
1251
1252 // These two have a different object type in the dom dump. Plugin-related.
1253 // Ignored on Win/Linux because they rely on QT to provide a TIFF decoder.
1254 BUG10378 MAC : fast/images/embed-image.html = FAIL
1255 BUG10378 MAC : fast/images/object-image.html = FAIL
1256
1257 BUG10381 LINUX RELEASE : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1258 BUG10381 LINUX DEBUG : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1259
1260 // The following are flaky in that some times the timeout or crash, but we think
1261 // it is because of bugs in other parts of the code and not specific to what
1262 // these tests are doing.  The are being noted here so we can get the buildbots
1263 // green so new mac regressions are caught much quicker.
1264 // (there are a few others marked w/ multiple status like this in other parts of
1265 // the file, but they were left there as the comments in those areas are valid.)
1266 BUG10384 MAC SLOW : fast/dom/Window/new-window-opener.html = FAIL
1267 BUG10384 MAC : fast/forms/focus2.html = FAIL CRASH
1268
1269 BUG10399 MAC : fast/encoding/char-encoding-mac.html = FAIL
1270
1271 // Broken pixel tests
1272
1273 // Rebaselining needed because of scrollbars
1274 BUG23498 MAC : css1/cascade/cascade_order.html = IMAGE
1275 BUG23498 MAC : css1/classification/display.html = IMAGE
1276 BUG23498 MAC : css1/classification/list_style_type.html = IMAGE
1277 BUG23498 MAC : css1/classification/white_space.html = IMAGE
1278 BUG23498 MAC : css1/color_and_background/background.html = IMAGE
1279 BUG23498 MAC : css1/color_and_background/background_attachment.html = IMAGE
1280 BUG23498 MAC : css1/color_and_background/background_position.html = IMAGE
1281 BUG23498 MAC : css1/color_and_background/background_repeat.html = IMAGE
1282 BUG23498 MAC : css1/conformance/forward_compatible_parsing.html = IMAGE
1283 BUG23498 MAC : css1/font_properties/font.html = IMAGE
1284 // BUG23498 MAC : css1/font_properties/font_family.html = IMAGE
1285 BUG23498 MAC : css1/font_properties/font_size.html = IMAGE
1286 BUG23498 MAC : css1/font_properties/font_weight.html = IMAGE
1287 BUG23498 MAC : css1/formatting_model/floating_elements.html = IMAGE
1288 BUG23498 MAC : css1/formatting_model/height_of_lines.html = IMAGE
1289 BUG23498 MAC : css1/formatting_model/horizontal_formatting.html = IMAGE
1290 BUG23498 MAC : css1/formatting_model/inline_elements.html = IMAGE
1291 BUG23498 MAC : css1/formatting_model/replaced_elements.html = IMAGE
1292 BUG23498 MAC : css1/formatting_model/vertical_formatting.html = IMAGE
1293 BUG23498 MAC : css1/pseudo/anchor.html = IMAGE
1294 BUG23498 MAC : css1/pseudo/firstletter.html = IMAGE
1295 BUG23498 MAC : css1/pseudo/firstline.html = IMAGE
1296 BUG23498 MAC : css1/pseudo/multiple_pseudo_elements.html = IMAGE
1297 BUG23498 MAC : css1/text_properties/letter_spacing.html = IMAGE+TEXT IMAGE
1298 BUG23498 MAC : css1/text_properties/line_height.html = IMAGE
1299 BUG23498 MAC : css1/text_properties/text_decoration.html = IMAGE
1300 BUG23498 MAC : css1/text_properties/text_indent.html = IMAGE
1301 BUG23498 MAC : css1/text_properties/text_transform.html = IMAGE
1302 BUG23498 MAC : css1/text_properties/vertical_align.html = IMAGE
1303 BUG23498 MAC : css1/text_properties/word_spacing.html = IMAGE
1304 BUG23498 MAC : css1/units/color_units.html = IMAGE
1305 BUG23498 MAC : css1/units/length_units.html = IMAGE
1306 BUG23498 MAC : css2.1/t0803-c5502-mrgn-r-02-c.html = IMAGE
1307 BUG23498 MAC : css2.1/t0803-c5505-mrgn-02-c.html = IMAGE
1308 BUG23498 MAC : css2.1/t080301-c411-vt-mrgn-00-b.html = IMAGE
1309 BUG23498 MAC : css2.1/t0905-c5525-fltclr-00-c-ag.html = IMAGE
1310 BUG23498 MAC : css2.1/t0905-c5525-fltmrgn-00-c-ag.html = IMAGE
1311 BUG23498 MAC : css2.1/t0905-c5525-fltwidth-00-c-g.html = IMAGE
1312 BUG23498 MAC : css2.1/t0905-c5526-fltclr-00-c-ag.html = IMAGE
1313 BUG23498 MAC : css2.1/t1002-c5523-width-02-b-g.html = IMAGE
1314 BUG23498 MAC : css2.1/t1202-counters-08-b.html = IMAGE
1315 BUG23498 MAC : css2.1/t1202-counters-09-b.html = IMAGE
1316 BUG23498 MAC : css2.1/t140201-c535-bg-fixd-00-b-g.html = IMAGE
1317 BUG23498 MAC : css2.1/t140201-c537-bgfxps-00-c-ag.html = IMAGE
1318 BUG23498 MAC : css2.1/t1508-c527-font-07-b.html = IMAGE
1319 BUG23498 MAC : editing/deleting/delete-after-span-ws-001.html = IMAGE
1320 BUG23498 MAC : editing/deleting/delete-after-span-ws-002.html = IMAGE
1321 BUG23498 MAC : editing/deleting/delete-after-span-ws-003.html = IMAGE
1322 BUG23498 MAC : editing/deleting/delete-line-end-ws-001.html = IMAGE
1323 BUG23498 MAC : editing/deleting/delete-line-end-ws-002.html = IMAGE
1324 BUG23498 MAC : editing/inserting/insert-div-023.html = IMAGE
1325 BUG23498 MAC : editing/selection/focus_editable_html.html = IMAGE
1326 BUG23498 MAC : editing/selection/iframe.html = IMAGE
1327 BUG23498 MAC : editing/selection/select-all-001.html = IMAGE
1328 BUG23498 MAC : editing/selection/select-all-002.html = IMAGE
1329 BUG23498 MAC : editing/selection/select-all-003.html = IMAGE
1330 BUG23498 MAC : editing/selection/select-all-004.html = IMAGE
1331 BUG23498 MAC : editing/selection/unrendered-001.html = IMAGE
1332 // BUG23498 MAC : editing/selection/unrendered-002.html = IMAGE
1333 BUG23498 MAC : editing/selection/unrendered-003.html = IMAGE
1334 BUG23498 MAC : editing/selection/unrendered-004.html = IMAGE
1335 BUG23498 MAC : editing/selection/unrendered-005.html = IMAGE
1336 BUG23498 MAC : fast/backgrounds/background-inherit-color-bug.html = IMAGE
1337 BUG23498 MAC : fast/backgrounds/repeat/negative-offset-repeat-transformed.html = IMAGE
1338 BUG23498 MAC : fast/block/basic/016.html = IMAGE
1339 BUG23498 MAC : fast/block/basic/fieldset-stretch-to-legend.html = IMAGE
1340 BUG23498 MAC : fast/block/float/008.html = IMAGE
1341 BUG23498 MAC : fast/block/float/013.html = IMAGE
1342 BUG23498 MAC : fast/block/float/019.html = IMAGE
1343 BUG23498 MAC : fast/block/float/021.html = IMAGE
1344 BUG23498 MAC : fast/block/float/025.html = IMAGE
1345 BUG23498 MAC : fast/block/float/026.html = IMAGE
1346 BUG23498 MAC : fast/block/float/027.html = IMAGE
1347 BUG23498 MAC : fast/block/float/028.html = IMAGE
1348 BUG23498 MAC : fast/block/float/032.html = IMAGE
1349 BUG23498 MAC : fast/block/float/033.html = IMAGE
1350 BUG23498 MAC : fast/block/float/035.html = IMAGE
1351 // BUG23498 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1352 BUG23498 MAC : fast/block/float/br-with-clear-2.html = IMAGE
1353 // BUG23498 MAC : fast/block/float/float-avoidance.html = IMAGE
1354 BUG23498 MAC : fast/block/float/nested-clearance.html = IMAGE
1355 BUG23498 MAC : fast/block/float/relative-painted-twice.html = IMAGE
1356 BUG23498 MAC : fast/block/margin-collapse/103.html = IMAGE
1357 BUG23498 MAC : fast/block/margin-collapse/104.html = IMAGE
1358 BUG23498 MAC : fast/block/margin-collapse/empty-clear-blocks.html = IMAGE
1359 BUG23498 MAC : fast/block/positioning/047.html = IMAGE
1360 BUG23498 MAC : fast/block/positioning/051.html = IMAGE
1361 BUG23498 MAC : fast/block/positioning/055.html = IMAGE
1362 BUG23498 MAC : fast/block/positioning/auto/007.html = IMAGE
1363 BUG23498 MAC : fast/block/positioning/fixed-positioning-scrollbar-bug.html = IMAGE
1364 BUG23498 MAC : fast/block/positioning/negative-rel-position.html = IMAGE
1365 BUG23498 MAC : fast/block/positioning/relative-overflow-block.html = IMAGE
1366 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced-float.html = IMAGE
1367 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced.html = IMAGE
1368 BUG23498 MAC : fast/body-propagation/overflow/001-xhtml.xhtml = IMAGE
1369 BUG23498 MAC : fast/body-propagation/overflow/001.html = IMAGE
1370 BUG23498 MAC : fast/body-propagation/overflow/005-declarative.xhtml = IMAGE
1371 BUG23498 MAC : fast/body-propagation/overflow/005-xhtml.xhtml = IMAGE
1372 BUG23498 MAC : fast/body-propagation/overflow/005.html = IMAGE
1373 // BUG23498 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1374 // BUG23498 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1375 BUG23498 MAC : fast/box-sizing/box-sizing.html = IMAGE
1376 BUG23498 MAC : fast/canvas/canvas-bg.html = IMAGE
1377 BUG23498 MAC : fast/canvas/canvas-text-alignment.html = IMAGE
1378 BUG23498 MAC : fast/canvas/image-object-in-canvas.html = IMAGE
1379 BUG23498 MAC : fast/css/005.html = IMAGE
1380 BUG23498 MAC : fast/css/MarqueeLayoutTest.html = IMAGE
1381 BUG23498 MAC : fast/css/border-height.html = IMAGE
1382 BUG23498 MAC : fast/css/empty-pseudo-class.html = IMAGE
1383 BUG23498 MAC : fast/css/first-child-pseudo-class.html = IMAGE
1384 BUG23498 MAC : fast/css/first-of-type-pseudo-class.html = IMAGE
1385 BUG23498 MAC : fast/css/hsl-color.html = IMAGE
1386 BUG9798 BUG23498 MAC : fast/css/last-child-pseudo-class.html = IMAGE FAIL
1387 BUG23498 MAC : fast/css/line-height-overflow.html = IMAGE
1388 BUG23498 MAC : fast/css/nested-floating-relative-position-percentages.html = IMAGE
1389 BUG23498 MAC : fast/css/only-child-pseudo-class.html = IMAGE
1390 BUG23498 MAC : fast/css/only-of-type-pseudo-class.html = IMAGE
1391 BUG23498 MAC : fast/css/percentage-non-integer.html = IMAGE
1392 // BUG23498 MAC : fast/css/shadow-multiple.html = IMAGE
1393 BUG23498 MAC : fast/css/text-overflow-ellipsis-strict.html = IMAGE
1394 BUG23498 MAC : fast/css/text-overflow-ellipsis.html = IMAGE
1395 BUG23498 MAC : fast/css/word-space-extra.html = IMAGE
1396 BUG23498 MAC : fast/css-generated-content/014.html = IMAGE
1397 BUG23498 MAC : fast/dom/focus-contenteditable.html = IMAGE
1398 BUG23498 MAC : fast/dynamic/008.html = IMAGE
1399 BUG23498 MAC : fast/dynamic/anchor-lock.html = IMAGE
1400 BUG23498 MAC : fast/dynamic/insert-before-table-part-in-continuation.html = IMAGE
1401 BUG23498 MAC : fast/encoding/utf-16-big-endian.html = IMAGE
1402 BUG23498 MAC : fast/encoding/utf-16-little-endian.html = IMAGE
1403 BUG23498 MAC : fast/events/autoscroll.html = IMAGE
1404 BUG23498 MAC : fast/events/pointer-events-2.html = IMAGE
1405 BUG23498 MAC : fast/events/reveal-link-when-focused.html = IMAGE
1406 BUG23498 MAC : fast/flexbox/016.html = IMAGE
1407 BUG23498 MAC : fast/flexbox/flex-hang.html = IMAGE
1408 BUG23498 MAC : fast/forms/fieldset-align.html = IMAGE
1409 BUG23498 MAC : fast/forms/form-hides-table.html = IMAGE
1410 BUG23498 MAC : fast/forms/input-table.html = IMAGE
1411 BUG23498 MAC : fast/forms/textAreaLineHeight.html = IMAGE
1412
1413 BUG23498 MAC : fast/frames/frame-scrolling-attribute.html = IMAGE
1414
1415 BUG23498 MAC : fast/frames/iframe-scrolling-attribute.html = IMAGE
1416 BUG23498 BUG26044 MAC RELEASE : fast/frames/invalid.html = IMAGE CRASH
1417 BUG23498 BUG26044 SLOW MAC DEBUG : fast/frames/invalid.html = IMAGE
1418 // BUG23498 MAC : fast/frames/onlyCommentInIFrame.html = IMAGE
1419 BUG23498 MAC DEBUG : fast/frames/valid.html = IMAGE
1420 BUG23498 MAC RELEASE : fast/frames/valid.html = IMAGE CRASH
1421 BUG23498 MAC : fast/gradients/background-clipped.html = IMAGE
1422 BUG23498 MAC : fast/images/pdf-as-image-landscape.html = IMAGE
1423 BUG23498 MAC : fast/inline/inline-borders-with-bidi-override.html = IMAGE
1424 BUG23498 MAC : fast/inline/inline-continuation-borders.html = IMAGE
1425 BUG23498 MAC : fast/inline/long-wrapped-line.html = IMAGE
1426 BUG23498 MAC : fast/inline-block/inline-block-vertical-align.html = IMAGE
1427 BUG23498 MAC : fast/layers/scroll-rect-to-visible.html = IMAGE
1428 BUG23498 MAC : fast/lists/001.html = IMAGE
1429 BUG23498 MAC : fast/lists/008.html = IMAGE
1430 BUG23498 MAC : fast/lists/li-br.html = IMAGE
1431 // BUG23498 MAC : fast/lists/ol-start-parsing.html = IMAGE
1432 BUG23498 MAC : fast/lists/olstart.html = IMAGE
1433 BUG23498 MAC : fast/multicol/column-rules-stacking.html = IMAGE
1434 BUG23498 MAC : fast/multicol/columns-shorthand-parsing.html = IMAGE
1435 BUG23498 MAC : fast/multicol/float-multicol.html = IMAGE
1436 // BUG23498 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1437 // BUG23498 MAC : fast/overflow/004.html = IMAGE
1438 BUG23498 MAC : fast/overflow/006.html = IMAGE
1439 BUG23498 MAC : fast/overflow/clip-rects-fixed-ancestor.html = IMAGE
1440 BUG23498 MAC : fast/overflow/overflow-auto-table.html = IMAGE
1441 BUG23498 MAC : fast/overflow/overflow-stacking.html = IMAGE
1442 BUG23498 MAC : fast/overflow/overflow-x-y.html = IMAGE
1443 // BUG23498 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1444 BUG23498 MAC : fast/overflow/scrollRevealButton.html = IMAGE
1445 BUG23498 MAC : fast/reflections/reflection-direction.html = IMAGE
1446 BUG23498 MAC : fast/replaced/005.html = IMAGE
1447 BUG23498 MAC : fast/replaced/width100percent-image.html = IMAGE
1448 BUG23498 MAC : fast/selectors/166.html = IMAGE
1449 BUG23498 MAC : fast/table/023.html = IMAGE
1450 BUG23498 MAC : fast/table/034.html = IMAGE
1451 BUG23498 MAC : fast/table/040.html = IMAGE
1452 BUG23498 MAC : fast/table/border-collapsing/004.html = IMAGE
1453 BUG23498 MAC : fast/table/empty-cells.html = IMAGE
1454 BUG23498 MAC : fast/table/frame-and-rules.html = IMAGE
1455 BUG23498 MAC : fast/table/height-percent-test.html = IMAGE
1456 BUG23498 MAC : fast/table/overflowHidden.html = IMAGE
1457 BUG23498 MAC : fast/table/prepend-in-anonymous-table.html = IMAGE
1458 BUG23498 MAC : fast/table/wide-colspan.html = IMAGE
1459 BUG23498 MAC : fast/table/wide-column.html = IMAGE
1460 BUG23498 MAC : fast/text/capitalize-boundaries.html = IMAGE
1461 BUG23498 MAC : fast/text/international/bidi-neutral-run.html = IMAGE
1462 BUG23498 MAC : fast/text/international/thai-line-breaks.html = IMAGE
1463 BUG23498 MAC : fast/text/large-text-composed-char.html = IMAGE
1464 BUG23498 MAC : fast/text/softHyphen.html = IMAGE
1465 BUG23498 MAC : fast/text/wbr.html = IMAGE
1466 BUG23498 MAC : fast/text/whitespace/024.html = IMAGE
1467 BUG23498 MAC : fast/text/whitespace/pre-wrap-spaces-after-newline.html = IMAGE
1468 BUG23498 MAC : fast/text/word-break.html = IMAGE
1469 BUG23498 MAC DEBUG : fonts/cursive.html = IMAGE IMAGE+TEXT
1470 BUG23498 MAC RELEASE : fonts/cursive.html = IMAGE
1471 BUG23498 MAC : fonts/default.html = IMAGE
1472 BUG23498 MAC : fonts/fantasy.html = IMAGE
1473 BUG23498 MAC : fonts/monospace.html = IMAGE
1474 BUG23498 MAC : fonts/sans-serif.html = IMAGE
1475 BUG23498 MAC : fonts/serif.html = IMAGE
1476 BUG23498 MAC : http/tests/navigation/anchor-frames.html = IMAGE
1477 BUG9798 BUG23498 MAC DEBUG : http/tests/navigation/error404-frames.html = TIMEOUT IMAGE
1478 BUG9798 BUG23498 MAC RELEASE : http/tests/navigation/error404-frames.html = IMAGE
1479 BUG23498 MAC : http/tests/navigation/error404-subframeload.html = IMAGE
1480 // BUG23498 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1481 BUG23498 MAC DEBUG : http/tests/navigation/post-frames.html = IMAGE TIMEOUT
1482 BUG23498 MAC RELEASE : http/tests/navigation/post-frames.html = IMAGE
1483 BUG23498 MAC : http/tests/navigation/postredirect-frames.html = IMAGE
1484 BUG23498 MAC : svg/custom/altglyph.svg = IMAGE
1485 BUG23498 MAC : svg/hixie/links/003-broken.xml = IMAGE
1486 BUG23498 MAC : svg/text/multichar-glyph.svg = IMAGE
1487 BUG23498 MAC : tables/mozilla/bugs/bug101674.html = IMAGE
1488 BUG23498 MAC : tables/mozilla/bugs/bug10269-2.html = IMAGE
1489 BUG23498 MAC : tables/mozilla/bugs/bug10296-1.html = IMAGE
1490 BUG23498 MAC : tables/mozilla/bugs/bug1055-1.html = IMAGE
1491 BUG23498 MAC : tables/mozilla/bugs/bug113235-1.html = IMAGE
1492 BUG23498 MAC : tables/mozilla/bugs/bug113235-3.html = IMAGE
1493 BUG23498 MAC : tables/mozilla/bugs/bug11944.html = IMAGE
1494 BUG23498 MAC : tables/mozilla/bugs/bug120364.html = IMAGE
1495 BUG23498 MAC : tables/mozilla/bugs/bug1302.html = IMAGE
1496 BUG23498 MAC : tables/mozilla/bugs/bug131020.html = IMAGE
1497 BUG23498 MAC : tables/mozilla/bugs/bug131020_iframe.html = IMAGE
1498 BUG23498 MAC : tables/mozilla/bugs/bug137388-2.html = IMAGE
1499 BUG23498 MAC : tables/mozilla/bugs/bug22019.html = IMAGE
1500 BUG23498 MAC : tables/mozilla/bugs/bug23151.html = IMAGE
1501 BUG23498 MAC : tables/mozilla/bugs/bug2479-1.html = IMAGE
1502 BUG23498 MAC : tables/mozilla/bugs/bug2479-3.html = IMAGE
1503 BUG23498 MAC : tables/mozilla/bugs/bug2479-4.html = IMAGE
1504 BUG23498 MAC : tables/mozilla/bugs/bug27038-2.html = IMAGE
1505 BUG23498 MAC : tables/mozilla/bugs/bug29314.html = IMAGE
1506 BUG23498 MAC : tables/mozilla/bugs/bug2947.html = IMAGE
1507 BUG23498 MAC : tables/mozilla/bugs/bug32205-2.html = IMAGE
1508 BUG23498 MAC : tables/mozilla/bugs/bug38916.html = IMAGE
1509 BUG23498 MAC : tables/mozilla/bugs/bug3977.html = IMAGE
1510 BUG23498 MAC : tables/mozilla/bugs/bug43039.html = IMAGE
1511 BUG23498 MAC : tables/mozilla/bugs/bug43854-1.html = IMAGE
1512 BUG23498 MAC : tables/mozilla/bugs/bug44505.html = IMAGE
1513 BUG23498 MAC : tables/mozilla/bugs/bug46480-1.html = IMAGE
1514 BUG23498 MAC : tables/mozilla/bugs/bug46480-2.html = IMAGE
1515 BUG23498 MAC : tables/mozilla/bugs/bug50695-1.html = IMAGE
1516 BUG23498 MAC : tables/mozilla/bugs/bug56405.html = IMAGE
1517 BUG23498 MAC : tables/mozilla/bugs/bug5797.html = IMAGE
1518 BUG23498 MAC : tables/mozilla/bugs/bug5835.html = IMAGE
1519 BUG23498 MAC : tables/mozilla/bugs/bug625.html = IMAGE
1520 BUG23498 MAC : tables/mozilla/bugs/bug650.html = IMAGE
1521 BUG23498 MAC : tables/mozilla/bugs/bug67915-1.html = IMAGE
1522 BUG23498 MAC : tables/mozilla/bugs/bug7112-1.html = IMAGE
1523 BUG23498 MAC : tables/mozilla/bugs/bug7112-2.html = IMAGE
1524 BUG23498 MAC : tables/mozilla/bugs/bug73321.html = IMAGE
1525 BUG23498 MAC : tables/mozilla/bugs/bug92143.html = IMAGE
1526 BUG23498 MAC : tables/mozilla/bugs/bug96334.html = IMAGE
1527 BUG23498 MAC : tables/mozilla/bugs/bug96343.html = IMAGE
1528 BUG23498 MAC : tables/mozilla/collapsing_borders/bug41262-3.html = IMAGE
1529 BUG23498 MAC : tables/mozilla/core/bloomberg.html = IMAGE
1530 BUG23498 MAC : tables/mozilla/core/captions.html = IMAGE
1531 BUG23498 MAC : tables/mozilla/core/cell_heights.html = IMAGE
1532 BUG23498 MAC : tables/mozilla/core/col_widths_auto_fix.html = IMAGE
1533 BUG23498 MAC : tables/mozilla/core/col_widths_fix_fixPer.html = IMAGE
1534 BUG23498 MAC : tables/mozilla/core/nested1.html = IMAGE
1535 BUG23498 MAC : tables/mozilla/core/one_row.html = IMAGE
1536 BUG23498 MAC : tables/mozilla/core/row_span.html = IMAGE
1537 BUG23498 MAC : tables/mozilla/marvin/backgr_index.html = IMAGE
1538 BUG23498 MAC : tables/mozilla/marvin/backgr_layers-opacity.html = IMAGE
1539 BUG23498 MAC : tables/mozilla/marvin/backgr_position-table.html = IMAGE
1540 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-cell.html = IMAGE
1541 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column-group.html = IMAGE
1542 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
1543 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row-group.html = IMAGE
1544 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
1545 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table.html = IMAGE
1546 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_name.xml = IMAGE
1547 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
1548 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_name.xml = IMAGE
1549 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_rgb.xml = IMAGE
1550 BUG23498 MAC : tables/mozilla/marvin/x_td_height.xml = IMAGE
1551 BUG23498 MAC : tables/mozilla/marvin/x_td_nowrap.xml = IMAGE
1552 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_name.xml = IMAGE
1553 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_rgb.xml = IMAGE
1554 BUG23498 MAC : tables/mozilla/marvin/x_th_height.xml = IMAGE
1555 BUG23498 MAC : tables/mozilla/marvin/x_th_nowrap.xml = IMAGE
1556 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_name.xml = IMAGE
1557 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_rgb.xml = IMAGE
1558 BUG23498 MAC : tables/mozilla/other/cell_widths.html = IMAGE
1559 BUG23498 MAC : tables/mozilla/other/nestedTables.html = IMAGE
1560 BUG23498 MAC : tables/mozilla/other/test3.html = IMAGE
1561 BUG23498 MAC : tables/mozilla/other/test6.html = IMAGE
1562 BUG23498 MAC : tables/mozilla/other/wa_table_thtd_rowspan.html = IMAGE
1563 BUG23498 MAC : tables/mozilla/other/wa_table_tr_align.html = IMAGE
1564 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
1565 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug101759.html = IMAGE
1566 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10216.html = IMAGE
1567 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
1568 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
1569 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug131020-3.html = IMAGE
1570 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-1.html = IMAGE
1571 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-2.html = IMAGE
1572 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug19526.html = IMAGE
1573 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug220653.html = IMAGE
1574 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
1575 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
1576 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug32205-1.html = IMAGE
1577 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug67915-2.html = IMAGE
1578 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
1579 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug85016.html = IMAGE
1580 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug89315.html = IMAGE
1581 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
1582 BUG23498 BUG32193 MAC : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE IMAGE+TEXT
1583 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1584 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1585 BUG23498 MAC : tables/mozilla_expected_failures/core/captions3.html = IMAGE
1586 BUG23498 MAC : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
1587 BUG23498 MAC : tables/mozilla_expected_failures/core/columns.html = IMAGE
1588 BUG23498 MAC : tables/mozilla_expected_failures/core/conflicts.html = IMAGE
1589 BUG23498 MAC : tables/mozilla_expected_failures/core/standards1.html = IMAGE
1590 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-cell.html = IMAGE
1591 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column-group.html = IMAGE
1592 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column.html = IMAGE
1593 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-quirks.html = IMAGE
1594 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
1595 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row.html = IMAGE
1596 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table.html = IMAGE
1597 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_fixed-bg.html = IMAGE
1598 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-hide.html = IMAGE
1599 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-show.html = IMAGE
1600 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
1601 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
1602 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column.html = IMAGE
1603 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row-group.html = IMAGE
1604 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
1605 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
1606 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_tbody.html = IMAGE
1607 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_row_sibling.html = IMAGE
1608 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_tbody_sibling.html = IMAGE
1609 BUG23498 MAC : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
1610 BUG23498 MAC : tables/mozilla_expected_failures/other/test4.html = IMAGE+TEXT IMAGE
1611
1612 // Missing "misspelled-word" dotted underline
1613 BUG23497 MAC : editing/selection/unrendered-002.html = IMAGE
1614 BUG23497 MAC : editing/spelling/spellcheck-attribute.html = IMAGE
1615
1616 // Widget location is just slightly off
1617 BUG23496 MAC : css1/box_properties/acid_test.html = IMAGE
1618 BUG23496 MAC : css2.1/t09-c5526c-display-00-e.html = IMAGE
1619 BUG23496 MAC : fast/block/basic/011.html = IMAGE
1620 BUG23496 MAC : fast/forms/001.html = IMAGE
1621 BUG23496 MAC : fast/forms/basic-inputs.html = IMAGE
1622 // BUG23496 MAC : fast/forms/box-shadow-override.html = IMAGE
1623 BUG23496 MAC : fast/forms/checkbox-radio-onchange.html = IMAGE
1624 BUG23496 MAC : fast/forms/file-input-disabled.html = IMAGE+TEXT
1625 BUG23496 MAC : fast/forms/form-element-geometry.html = IMAGE+TEXT
1626 BUG23496 MAC : fast/forms/formmove.html = IMAGE
1627 // Recently became crashy. See http://crbug.com/24721
1628 BUG23496 MAC : fast/forms/formmove2.html = IMAGE
1629 BUG23496 MAC : fast/forms/indeterminate.html = IMAGE
1630 BUG23496 MAC : fast/forms/input-appearance-height.html = IMAGE+TEXT
1631 BUG23496 MAC : fast/forms/input-value.html = IMAGE+TEXT
1632 // BUG23496 MAC : fast/forms/menulist-narrow-width.html = IMAGE
1633 BUG23496 MAC : fast/forms/radio-attr-order.html = IMAGE
1634 BUG23496 MAC : fast/forms/radio-nested-labels.html = IMAGE
1635 BUG23496 MAC : fast/forms/radio_checked.html = IMAGE
1636 BUG23496 MAC : fast/forms/radio_checked_dynamic.html = IMAGE
1637 // BUG23496 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1638 BUG23496 MAC : fast/inline/positionedLifetime.html = IMAGE
1639 BUG23496 MAC : fast/parser/bad-xml-slash.html = IMAGE
1640 BUG23496 MAC : fast/replaced/replaced-breaking.html = IMAGE
1641 BUG23496 MAC DEBUG : fast/text/textIteratorNilRenderer.html = IMAGE
1642 BUG23496 SLOW MAC RELEASE : fast/text/textIteratorNilRenderer.html = IMAGE
1643 BUG23496 MAC : fast/text/whitespace/normal-after-nowrap-breaking.html = IMAGE
1644 BUG23496 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1645 BUG23496 MAC : tables/mozilla/bugs/bug1318.html = IMAGE
1646 BUG23496 MAC : tables/mozilla/bugs/bug4527.html = IMAGE
1647 BUG23496 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1648 BUG23496 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1649
1650 // Big button widgets are broken
1651 BUG23495 MAC : fast/forms/basic-buttons.html = IMAGE
1652 BUG23495 MAC : fast/forms/box-shadow-override.html = IMAGE+TEXT
1653
1654 // Text declared as "monospace" with no size is bigger in Chromium
1655 BUG23494 MAC : css1/font_properties/font_family.html = IMAGE
1656 BUG23494 MAC : css2.1/t1503-c522-font-family-00-b.html = IMAGE
1657 BUG23494 MAC : fast/text/monospace-width-cache.html = IMAGE
1658
1659 // Broken upstream? Layout test should write a "PASS" or "FAIL" line; upstream has neither (ours is "PASS")
1660 BUG23492 MAC : fast/frames/frame-src-attribute.html = IMAGE
1661
1662 // Actual is just slightly off in color than expected
1663 BUG23488 MAC RELEASE : fast/backgrounds/size/backgroundSize15.html = IMAGE
1664 BUG23488 MAC DEBUG SLOW : fast/backgrounds/size/backgroundSize15.html = IMAGE
1665 BUG23488 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1666 BUG23488 MAC : fast/block/float/float-avoidance.html = IMAGE
1667 BUG23488 MAC : fast/borders/border-image-rotate-transform.html = IMAGE
1668 BUG23488 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1669 BUG23488 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1670 BUG23488 MAC : fast/box-shadow/inset.html = IMAGE
1671 BUG23488 MAC : fast/canvas/canvas-incremental-repaint-2.html = IMAGE
1672 BUG23488 MAC : fast/css/shadow-multiple.html = IMAGE
1673 BUG23488 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1674 BUG23488 MAC : fast/frames/content-opacity-1.html = IMAGE
1675 BUG23488 MAC : fast/frames/content-opacity-2.html = IMAGE
1676 BUG23488 MAC : fast/layers/add-layer-with-nested-stacking.html = IMAGE
1677 BUG23488 MAC : fast/layers/inline-dirty-z-order-lists.html = IMAGE
1678 BUG23488 MAC : fast/layers/layer-content-visibility-change.html = IMAGE
1679 BUG23488 MAC : fast/layers/remove-layer-with-nested-stacking.html = IMAGE
1680 BUG23488 MAC : fast/lists/ol-start-parsing.html = IMAGE
1681 BUG23488 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1682 BUG23488 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1683 BUG23488 MAC : fast/text/shadow-no-blur.html = IMAGE
1684 BUG23488 MAC : fast/text/shadow-translucent-fill.html = IMAGE
1685 BUG23488 MAC : svg/transforms/animated-path-inside-transformed-html.xhtml = IMAGE
1686 BUG23488 MAC : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE
1687
1688 // Looks the same to me... huh. Variation of above?
1689 BUG23489 MAC : fast/table/empty-section-crash.html = IMAGE
1690
1691 // Various drawing tests that are broken
1692 BUG23477 MAC : fast/backgrounds/bgCompositeCopy.html = IMAGE
1693 BUG23477 MAC : fast/canvas/canvas-as-image-incremental-repaint.html = IMAGE
1694 BUG23477 MAC : fast/canvas/canvas-incremental-repaint.html = IMAGE
1695 BUG23477 MAC : fast/canvas/fill-stroke-clip-reset-path.html = IMAGE
1696 BUG23477 MAC : fast/dynamic/containing-block-change.html = IMAGE
1697
1698 // Unexpected gray
1699 BUG23476 MAC : fast/forms/listbox-clip.html = IMAGE
1700 BUG23476 MAC : fast/frames/inline-object-inside-frameset.html = IMAGE
1701 BUG23476 MAC : fast/text/font-initial.html = IMAGE
1702
1703 // Missing corner resize image
1704 BUG22777 MAC : fast/css/resize-corner-tracking-transformed.html = IMAGE+TEXT
1705 BUG22777 MAC : fast/overflow/hit-test-overflow-controls.html = IMAGE+TEXT
1706
1707 // Disagreeing XML parsing error messages
1708 BUG23475 MAC : fast/invalid/missing-end-tag.xhtml = IMAGE
1709 BUG23475 MAC : fast/parser/xhtml-alternate-entities.xml = IMAGE
1710 BUG23475 MAC : fast/xsl/xslt-extra-content-at-end.xml = IMAGE
1711
1712 // 116/136 of the repaint tests fail due to invalidation that doesn't match; further triage necessary
1713 BUG23473 MAC : fast/repaint = IMAGE
1714 BUG23473 MAC : fast/repaint/block-no-inflow-children.html = PASS
1715 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache.html = PASS
1716 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache-2.html = PASS
1717 BUG23473 MAC : fast/repaint/box-shadow-h.html = PASS
1718 BUG23473 MAC : fast/repaint/box-shadow-v.html = PASS
1719 BUG23473 MAC : fast/repaint/caret-outside-block.html = PASS
1720 BUG23473 MAC : fast/repaint/fixed.html = PASS
1721 BUG23473 MAC : fast/repaint/fixed-move-after-keyboard-scroll.html = PASS
1722 BUG23473 MAC : fast/repaint/fixed-tranformed.html = PASS
1723 BUG23473 MAC : fast/repaint/flexible-box-overflow.html = PASS
1724 BUG23473 MAC : fast/repaint/flexible-box-overflow-horizontal.html = PASS
1725 BUG23473 MAC : fast/repaint/float-new-in-block.html = PASS
1726 BUG23473 MAC : fast/repaint/focus-layers.html = PASS
1727 BUG23473 MAC : fast/repaint/focus-ring.html = PASS
1728 BUG23473 MAC : fast/repaint/inline-block-overflow.html = PASS
1729 BUG23473 MAC : fast/repaint/layer-child-outline.html = PASS
1730 BUG23473 MAC : fast/repaint/layer-outline.html = PASS
1731 BUG23473 MAC : fast/repaint/layer-outline-horizontal.html = PASS
1732 BUG23473 MAC : fast/repaint/layout-state-scrolloffset.html = PASS
1733 BUG23473 MAC : fast/repaint/layout-state-scrolloffset2.html = PASS
1734 BUG23473 MAC : fast/repaint/layout-state-scrolloffset3.html = PASS
1735 BUG23473 MAC : fast/repaint/line-flow-with-floats-1.html = PASS
1736 BUG23473 MAC : fast/repaint/line-flow-with-floats-10.html = PASS
1737 BUG23473 MAC : fast/repaint/line-flow-with-floats-2.html = PASS
1738 BUG23473 MAC : fast/repaint/line-flow-with-floats-3.html = PASS
1739 BUG23473 MAC : fast/repaint/line-flow-with-floats-4.html = PASS
1740 BUG23473 MAC : fast/repaint/line-flow-with-floats-5.html = PASS
1741 BUG23473 MAC : fast/repaint/line-flow-with-floats-6.html = PASS
1742 BUG23473 MAC : fast/repaint/line-flow-with-floats-7.html = PASS
1743 BUG23473 MAC : fast/repaint/line-flow-with-floats-8.html = PASS
1744 BUG23473 MAC : fast/repaint/line-flow-with-floats-9.html = PASS
1745 BUG23473 MAC : fast/repaint/list-marker.html = PASS
1746 BUG23473 MAC : fast/repaint/moving-shadow-on-path.html = PASS
1747 BUG23473 MAC : fast/repaint/overflow-scroll-body-appear.html = PASS
1748 BUG23473 MAC : fast/repaint/positioned-document-element.html = PASS
1749 BUG23473 MAC : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = PASS
1750 BUG23473 MAC : fast/repaint/repaint-during-scroll.html = PASS
1751 BUG23473 MAC : fast/repaint/selection-gap-overflow-scroll-2.html = PASS
1752 BUG23473 MAC : fast/repaint/shadow-multiple-horizontal.html = PASS
1753 BUG23473 MAC : fast/repaint/shadow-multiple-strict-horizontal.html = PASS
1754 BUG23473 MAC : fast/repaint/shadow-multiple-strict-vertical.html = PASS
1755 BUG23473 MAC : fast/repaint/shadow-multiple-vertical.html = PASS
1756 BUG23473 MAC : fast/repaint/svg-layout-root-style-attr-update.html = PASS
1757 BUG23473 MAC : fast/repaint/table-cell-vertical-overflow.html = PASS
1758 BUG23473 MAC : fast/repaint/text-shadow.html = PASS
1759 BUG23473 MAC : fast/repaint/text-shadow-horizontal.html = PASS
1760 BUG23473 MAC : fast/repaint/view-background-from-body-1.html = PASS
1761 BUG23473 MAC : fast/repaint/view-background-from-body-2.html = PASS
1762
1763 // Thicker shadow than expected
1764 BUG23471 MAC : fast/text/stroking.html = IMAGE
1765
1766 // Missing baselines
1767 // BUG23557 MAC : fast/text/text-letter-spacing.html = IMAGE
1768
1769 // Failing on the bots but not locally; need investigation
1770 BUG23560 MAC : fast/images/animated-svg-as-image.html = IMAGE PASS
1771
1772 // -----------------------------------------------------------------
1773 // END MAC PORT TESTS
1774 // -----------------------------------------------------------------
1775
1776 // Linux pixeltest failure: alpha=0.5 red (1,0,0) atop yellow (1,1,0) is
1777 // coming out with with a slightly-less-than-100% red channel. This test fails
1778 // because we enforce non-transparent color in Font::drawGlyphs.
1779 BUG24191 LINUX : fast/css/hsla-color.html = FAIL
1780
1781 // Linux checksum computation produces results, different from Windows or upstream.
1782 BUG21386 LINUX : fast/repaint/erase-overflow.html = FAIL
1783 BUG21386 LINUX : fast/repaint/inline-block-resize.html = FAIL
1784 BUG21386 LINUX : fast/repaint/inline-overflow.html = FAIL
1785 BUG21386 LINUX : fast/repaint/invisible-objects.html = FAIL
1786 BUG21386 LINUX : fast/repaint/layer-full-repaint.html = FAIL
1787 BUG21386 LINUX : fast/repaint/layer-hide-when-needs-layout.html = FAIL
1788 BUG21386 LINUX : fast/repaint/layer-visibility.html = FAIL
1789 BUG21386 LINUX : fast/repaint/overflow-clip-subtree-layout.html = FAIL
1790 BUG21386 LINUX : fast/repaint/subtree-root-clip-2.html = FAIL
1791 BUG21386 LINUX : fast/repaint/subtree-root-clip-3.html = FAIL
1792 BUG21386 LINUX : fast/repaint/subtree-root-clip.html = FAIL
1793 BUG21386 LINUX : fast/repaint/table-col-background.html = FAIL
1794 BUG21386 LINUX : fast/repaint/table-row.html = FAIL
1795 BUG21386 LINUX : fast/repaint/table-section-overflow.html = FAIL
1796 BUG21386 LINUX : fast/layers/layer-content-visibility-change.html = FAIL
1797 BUG21386 LINUX : fast/repaint/table-cell-overflow.html = FAIL
1798
1799 // TODO(tc): flaky.
1800 BUG10391 LINUX : fast/events/5056619.html = FAIL
1801
1802 // Failed with r6844 (dglazkov)
1803 BUG10392 LINUX MAC : http/tests/navigation/error404-goback.html = FAIL
1804
1805 // Skipped as this tests window.sessionStorage, which we don't
1806 // support. Enable once we turn on DOM_STORAGE.
1807 BUG4360 SKIP : http/tests/navigation/post-goback-repost-policy.html = TIMEOUT
1808
1809 // Merge 39309:39335 Regressions (RenderButton::setupInnerStyle regression).
1810 BUG5737 LINUX : fast/forms/001.html = FAIL
1811 BUG5737 LINUX : fast/forms/input-first-letter.html = FAIL
1812
1813 // The (x) in type=search inputs appears to be slightly broken.  This test will also need a rebaseline.
1814 BUG20439 WIN LINUX : fast/forms/search-transformed.html = FAIL
1815
1816 // Linux's rotated text output looks terrible.
1817 BUG10397 LINUX : fast/transforms/transformed-document-element.html = FAIL
1818
1819 // Merge 39744:39913? - regressions
1820 BUG10403 LINUX : svg/custom/animate-path-morphing.svg = FAIL
1821
1822 // might need to be rebaselined in win, 'DRAFT' rendering incorrect before
1823 BUG10405 WIN : svg/custom/struct-use-09-b.svg = FAIL
1824
1825 // New tests added in http://trac.webkit.org/changeset/40424
1826 // Renders the width of "600" off by 3.  Looks OK but could still be a bug
1827 // that we shouldn't rebaseline.
1828 BUG10417 LINUX : svg/W3C-SVG-1.1/text-fonts-02-t.svg = FAIL
1829
1830 // New test. We should fix it, but it doesn't need to block the current release
1831 BUG10418 SLOW MAC RELEASE : fast/events/click-count.html = PASS
1832 BUG10418 WIN DEBUG : animations/change-keyframes-name.html = FAIL PASS
1833
1834 // TODO(dsh): These started to fail after r9202.
1835 BUG10419 LINUX : svg/W3C-SVG-1.1/text-path-01-b.svg = FAIL
1836
1837 // We could fix this test for us and upstream it if the test shell user agent
1838 // would let us differentiate test_shell and WebKit DumpTreeNode.
1839 BUG7482 LINUX MAC : http/tests/misc/timer-vs-loading.html = TIMEOUT
1840 BUG7482 WIN : http/tests/misc/timer-vs-loading.html = PASS TIMEOUT
1841
1842 // Regressions from WebKit merge 40722:40785
1843 // Misc failures:
1844 // New test. We should fix it, but it doesn't need to block the current release
1845 BUG10420 LINUX : svg/W3C-SVG-1.1/types-basicDOM-01-b.svg = FAIL
1846 BUG10420 LINUX : svg/custom/use-transform.svg = FAIL
1847
1848 // Regressions from WebKit merge to 40864
1849 // Likely just needs a rebaseline.
1850 BUG10421 LINUX : fast/block/positioning/001.html = FAIL
1851
1852 // Selection highlight colors are wrong.
1853 BUG10426 LINUX : fast/lists/drag-into-marker.html = FAIL
1854
1855 // It's not clear that the test isn't wrong here. It believes that middle
1856 // aligning 15px Ahem should end up in a certain spot. But we have the
1857 // x-height correct and we're still one px off.
1858 BUG10429 LINUX : css2.1/t100801-c544-valgn-01-d-ag.html = FAIL
1859
1860 // New failures from Merge 41078:41149
1861 BUG10430 LINUX : svg/W3C-SVG-1.1/text-intro-05-t.svg = FAIL
1862
1863 // Regression from merge 41268:41286
1864 // See above comment about this test on linux/win.
1865 BUG10435 MAC : editing/selection/designmode-no-caret.html = FAIL
1866
1867 // Flakey. Not clear when it started, but it was before 3/9/09.
1868 // This test also started failing with the merge of March 25th 2009
1869 BUG10441 WIN DEBUG : transitions/transition-end-event-transform.html = FAIL PASS
1870 BUG10441 MAC WIN RELEASE : transitions/transition-end-event-transform.html = FAIL PASS
1871
1872 // This test hits a stack-overflow exception earlier in debug mode than in
1873 // release mode on Windows.
1874 //
1875 // Hits the stack overflow earlier than before the new compiler in both
1876 // release and debug mode on Linux and Mac.
1877 //
1878 //   http://code.google.com/p/v8/issues/detail?id=277
1879 BUG10457 RELEASE LINUX : fast/js/large-expressions.html = FAIL PASS
1880 BUG10457 RELEASE MAC : fast/js/large-expressions.html = FAIL
1881 BUG10457 DEBUG WIN SLOW : fast/js/large-expressions.html = FAIL
1882
1883
1884 // Merge 41768:41807
1885 // Perhaps just needs new baseline?
1886 // These tests were rebaselined with failure long ago. We shouldn't do this, and
1887 // instead work upstream to improve tests so that they don't fail.
1888 // Just need rebaseline
1889 BUG10458 LINUX : fast/forms/textarea-width.html = FAIL
1890
1891
1892 // New failures from merge
1893 BUG27486 WIN : fast/forms/listbox-hit-test-zoomed.html = FAIL
1894 BUG27486 RELEASE LINUX : fast/forms/listbox-hit-test-zoomed.html = FAIL
1895 BUG27486 LINUX DEBUG : fast/forms/listbox-hit-test-zoomed.html = FAIL
1896 BUG27486 WIN LINUX : fast/forms/slider-zoomed.html = FAIL
1897
1898 // See WebKit 41948
1899 // Regressed further at 57820, jamesr investigating
1900 BUG10468 MAC SKIP : fast/replaced/border-radius-clip.html = MISSING
1901
1902 // Mac flaky failures.
1903 BUG10472 MAC DEBUG : svg/css/glyph-orientation-rounding-test.xhtml = FAIL PASS
1904
1905 // <input type="search">; various failures, some tests may simply need new
1906 // baselines, others have more problems.
1907 BUG10473 LINUX : fast/forms/placeholder-set-value.html = FAIL
1908 BUG10473 LINUX : fast/forms/search-display-none-cancel-button.html = FAIL
1909 BUG10473 LINUX : fast/forms/search-placeholder-value-changed.html = FAIL
1910 BUG10473 LINUX : fast/replaced/width100percent-searchfield.html = FAIL
1911
1912 // This test isn't just slow -- sometimes it times out indefinitely.
1913 // r37311:r37313 started making the test fail with a text diff.
1914 BUG27569 BUG33316 LINUX MAC WIN : http/tests/xmlhttprequest/redirect-cross-origin-tripmine.html = TIMEOUT FAIL PASS
1915
1916 BUG9613 WIN LINUX : fast/dom/clientWidthAfterDocumentIsRemoved.html = IMAGE+TEXT TEXT
1917 BUG9613 MAC : fast/dom/clientWidthAfterDocumentIsRemoved.html = TEXT
1918
1919 // Merge WebKit 42133:42199 regressions
1920 BUG20570 LINUX : fast/events/context-no-deselect.html = FAIL
1921
1922 // These tests were affected by rolling out WebKit i8n patches.
1923 // Was only WIN, also fail on LINUX since merge 43346:43361
1924 BUG9768 LINUX WIN : fast/forms/select-initial-position.html = FAIL
1925 // Was only WIN, also fail on LINUX since merge 43346:43361
1926 BUG9768 LINUX WIN : fast/forms/select-visual-hebrew.html = FAIL
1927 // Was only WIN, also fail on LINUX since merge 43346:43361
1928 BUG9768 LINUX WIN : fast/forms/visual-hebrew-text-field.html = FAIL
1929 // Linux looks ok, rebaselined.
1930 BUG9768 WIN : fast/text/cg-fallback-bolding.html = FAIL
1931 BUG9768 WIN : fast/text/international/001.html = FAIL
1932 BUG9768 WIN : fast/text/international/002.html = FAIL
1933 BUG9768 WIN : fast/text/international/003.html = FAIL
1934 BUG9768 WIN : fast/text/international/wrap-CJK-001.html = FAIL
1935
1936 // Merge WebKit 42200:42244 regressions
1937 BUG9786 : fast/dom/Window/dom-access-from-closure-iframe.html = FAIL
1938 BUG9786 : fast/dom/Window/dom-access-from-closure-window.html = FAIL
1939 BUG9786 WIN DEBUG : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1940 BUG9786 SLOW WIN RELEASE : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1941 BUG9786 LINUX MAC : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1942 BUG9786 : http/tests/security/cross-frame-access-location-prototype.html = FAIL
1943 BUG9786 : http/tests/security/cross-frame-access-document-direct.html = TIMEOUT
1944 BUG10479 MAC : svg/hixie/perf/001.xml = FAIL
1945 BUG10479 MAC : svg/hixie/perf/002.xml = FAIL
1946
1947 BUG9798 SLOW WIN DEBUG : fast/dom/Window/slow-unload-handler.html = PASS
1948
1949 // Was flaky. Became a consistent failure.
1950 BUG9798 WIN : http/tests/loading/preload-img-test.html = TIMEOUT PASS
1951 BUG9798 WIN DEBUG : http/tests/local/style-access-before-stylesheet-loaded.html = FAIL PASS
1952 BUG9798 WIN DEBUG : http/tests/misc/redirect-with-quotes.php = TIMEOUT PASS
1953 BUG9798 WIN SLOW : http/tests/misc/refresh-headers.php = PASS
1954 BUG9798 WIN : http/tests/security/cross-frame-access-protocol-explicit-domain.html = FAIL PASS
1955 BUG9798 WIN DEBUG : http/tests/security/cross-frame-access-protocol.html = FAIL PASS
1956 BUG9798 RELEASE : http/tests/security/dataURL/xss-DENIED-from-data-url-in-foreign-domain-subframe.html = TIMEOUT PASS
1957 BUG9798 WIN : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-timeout.html = PASS TIMEOUT
1958 BUG9798 WIN : http/tests/xmlhttprequest/basic-auth.html = TIMEOUT PASS
1959 BUG9798 WIN DEBUG : http/tests/xmlhttprequest/encode-request-url-2.html = TIMEOUT PASS
1960 BUG9797 BUG9798 WIN RELEASE SLOW : http/tests/xmlhttprequest/state-after-network-error.html = PASS
1961 BUG9797 LINUX DEBUG : svg/carto.net/colourpicker.svg = FAIL
1962 BUG9798 LINUX RELEASE : svg/carto.net/colourpicker.svg = FAIL
1963 BUG9798 LINUX RELEASE : tables/mozilla/bugs/45621.html = FAIL
1964 BUG9798 LINUX DEBUG SLOW : tables/mozilla/bugs/45621.html = FAIL
1965 //also BUG24868 (crash)
1966 BUG9798 LINUX DEBUG : transitions/mask-transitions.html = FAIL PASS
1967 BUG9798 SLOW LINUX RELEASE : transitions/transition-timing-function.html = PASS
1968 // This test definitely times out (i.e. is not just slow).
1969 BUG9798 WIN RELEASE : http/tests/xmlhttprequest/small-chunks-response-text.html = PASS TIMEOUT
1970 BUG9798 LINUX DEBUG : fast/multicol/float-multicol.html = IMAGE PASS
1971 BUG9798 MAC RELEASE : editing/selection/drag-in-iframe.html = FAIL PASS
1972 BUG9798 LINUX : svg/custom/use-property-changes-through-svg-dom.svg = FAIL
1973 BUG9798 LINUX : svg/custom/js-update-transform-changes.svg = FAIL
1974 // Occasionally times out. Not just slow.
1975 BUG9798 WIN DEBUG : http/tests/loading/redirect-methods.html = TIMEOUT PASS
1976
1977 // New tests or failures from WebKit merge 42324:42364. Re-baselined on
1978 // Windows. Probably just need the same on other platforms.
1979 BUG9962 MAC : fast/js/function-apply-aliased.html = FAIL
1980
1981 // Regressions from WebKit merge 43264:42403, unknown cause(s)
1982 BUG10055 MAC : fast/events/updateLayoutForHitTest.html = FAIL
1983
1984 // New tests from WebKit Merge 42609:42671
1985 BUG10760 LINUX : fast/forms/input-text-scroll-left-on-blur.html = FAIL
1986 BUG10760 LINUX : fast/inline/25277-2.html = FAIL
1987 BUG10760 LINUX : fast/inline/25277.html = FAIL
1988 BUG10760 LINUX : svg/custom/marker-child-changes.svg = PASS FAIL
1989 BUG10760 LINUX : svg/custom/marker-viewBox-changes.svg = FAIL
1990
1991 // New failures from WebKit merge 42725:42805
1992 // WebKit change http://trac.webkit.org/changeset/42785
1993 // added a test which submits a form and then uses history.back()
1994 // to go back. in test_shell history.back() does not go back,
1995 // so the test timeouts.
1996 BUG11001 LINUX MAC WIN : http/tests/history/back-to-post.php = TIMEOUT
1997
1998 // Regressions from WebKit Merge 42932:42994 due to text metric changes.
1999 BUG11251 WIN DEBUG : fast/forms/textarea-width.html = FAIL
2000 BUG11251 SLOW WIN RELEASE : fast/forms/textarea-width.html = FAIL
2001 BUG11251 WIN LINUX RELEASE : fast/forms/text-control-intrinsic-widths.html = FAIL
2002 BUG11251 LINUX WIN DEBUG : fast/forms/text-control-intrinsic-widths.html = FAIL
2003 BUG11251 WIN LINUX : svg/custom/svg-fonts-in-text-controls.html = FAIL
2004 BUG11251 WIN LINUX : fast/forms/textarea-metrics.html = FAIL
2005
2006 // Unimplemented test shell features causing editing tests to fail
2007
2008 // We don't draw the spelling markers at all in test shell.
2009 BUG11577 WIN LINUX : editing/spelling/inline_spelling_markers.html = FAIL
2010 BUG11577 LINUX : editing/spelling/spellcheck-attribute.html = FAIL
2011 BUG11577 WIN LINUX : editing/spelling/spelling-linebreak.html = FAIL
2012
2013 // Regresssions from WebKit Merge 43114:43242 that just need to be re-baselined.
2014 BUG11483 LINUX : fast/forms/input-text-double-click.html = FAIL
2015 BUG11483 LINUX : svg/text/foreignObject-repaint.xml = FAIL
2016
2017 // Regressions from WebKit merge 43242:43321.  These just need to re-baselining:
2018 BUG24229 LINUX : fast/forms/select-dirty-parent-pref-widths.html = FAIL
2019 BUG24229 LINUX : svg/transforms/animated-path-inside-transformed-html.xhtml = FAIL
2020 BUG24229 LINUX : svg/transforms/text-with-pattern-inside-transformed-html.xhtml = FAIL
2021 BUG24229 LINUX : svg/transforms/text-with-pattern-with-svg-transform.svg = FAIL
2022
2023 // TODO(erg): Attempted to rebaseline these tests as part of the above
2024 // 43346:43361 rebaseling from http://trac.webkit.org/changeset/43355. Turned
2025 // tree red. May be more involved then just rebaselining.
2026 BUG11613 LINUX : editing/deleting/5168598.html = FAIL
2027 BUG11613 LINUX : editing/inserting/5607069-2.html = FAIL
2028
2029 // Already baselined for chromium-win, may need to be done for mac/linux as well.
2030 BUG11796 LINUX : fast/forms/search-styled.html = FAIL
2031
2032 // Details for all of these are in the bugs.
2033 BUG12361 WIN SLOW : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2034 BUG12361 LINUX MAC DEBUG : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2035 BUG12361 LINUX RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2036 BUG12361 SLOW MAC RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2037
2038 // WebKit 44438:44544
2039 BUG13721 LINUX : fast/dynamic/positioned-movement-with-positioned-children.html = FAIL
2040
2041 BUG14207 LINUX : tables/mozilla/bugs/bug28341.html = FAIL
2042 BUG32231 WIN DEBUG : tables/mozilla/bugs/bug28341.html = IMAGE PASS
2043
2044 // Newly added test http://trac.webkit.org/changeset/44816
2045 BUG18733 WIN SLOW : http/tests/xmlhttprequest/cross-origin-no-authorization.html = PASS
2046
2047 BUG14832 : editing/selection/user-drag-element-and-user-select-none.html = FAIL
2048
2049 // WebKit 45017:45086
2050 BUG15217 : fast/js/dictionary-no-cache.html = FAIL
2051
2052 // WebKit 45086:45111
2053 BUG15270 MAC LINUX RELEASE : fast/js/excessive-comma-usage.html = TEXT
2054 BUG15270 MAC LINUX DEBUG SLOW : fast/js/excessive-comma-usage.html = FAIL
2055 BUG15270 WIN : fast/js/excessive-comma-usage.html = CRASH FAIL
2056
2057
2058 // Flaky for a while; also related to BUG17974
2059 BUG15267 WIN LINUX : transitions/cancel-transition.html = PASS FAIL
2060
2061 // WebKit 45431:45444
2062 BUG10384 MAC : fast/events/frame-tab-focus.html = FAIL
2063 BUG11613 LINUX : fast/forms/tabbing-input-iframe.html = FAIL
2064 BUG11613 LINUX RELEASE : fast/overflow/scrollRevealButton.html = FAIL
2065 BUG11613 LINUX DEBUG : fast/overflow/scrollRevealButton.html = FAIL
2066
2067 // WebKit merge 42738:45840
2068 // New test, needs baseline.
2069 BUG16690 SKIP MAC : fast/text/international/khmer-selection.html = FAIL
2070
2071 // WebKit merge 42738:45840
2072 // New tests, need baseline.
2073 BUG16240 WIN DEBUG : http/tests/cache/subresource-expiration.html = TIMEOUT
2074 BUG16240 MAC WIN RELEASE : http/tests/cache/subresource-expiration.html = TIMEOUT
2075 BUG14752 LINUX SLOW : http/tests/cache/subresource-expiration.html = PASS
2076
2077 // New tests with WebKit merge 46288:46363
2078 BUG18116 : fast/dom/constructed-objects-prototypes.html = TEXT
2079 BUG18116 WIN RELEASE : fast/dom/prototype-inheritance-2.html = TEXT
2080 BUG18116 WIN DEBUG : fast/dom/prototype-inheritance-2.html = CRASH
2081 BUG18116 MAC LINUX : fast/dom/prototype-inheritance-2.html = TEXT CRASH
2082 // New in WebKit r52559
2083 BUG18116 : svg/custom/global-constructors.html = TEXT
2084
2085 // Flaky.  Timing?
2086 BUG18584 WIN DEBUG : animations/combo-transform-translate+scale.html = FAIL PASS
2087 BUG18584 WIN DEBUG : animations/change-one-anim.html = PASS TEXT
2088
2089 // Flaky crashes
2090 BUG18656 MAC RELEASE : fast/dom/Window/window-lookup-precedence.html = FAIL
2091 BUG18656 MAC DEBUG : fast/dom/Window/window-lookup-precedence.html = FAIL
2092
2093 // Test failures caused by re-enabling skia asserts.
2094 BUG18896 WIN LINUX DEBUG : svg/batik/paints/gradientLimit.svg = TIMEOUT FAIL
2095
2096 // Test failures from WebKit merge 46894 to 46977
2097 BUG26737 : fast/js/prototypes.html = FAIL
2098
2099 // WebKit roll r47417:47528
2100 BUG19766 LINUX : fast/replaced/width100percent-menulist.html = FAIL
2101
2102 // Fails due to textInputController.setInputMethod not implemented for Mac.
2103 BUG19665 MAC : platform/mac/editing/input/hangul-enter-confirms-and-sends-keypress.html = FAIL
2104 BUG19665 MAC : platform/mac/editing/input/kotoeri-enter-to-confirm-and-newline.html = FAIL
2105
2106 // WebKit 47777:47790 - getOwnPropertyDescriptor
2107 BUG20345 : fast/js/getOwnPropertyDescriptor.html = FAIL
2108 BUG20345 : fast/dom/Window/window-property-descriptors.html = TEXT
2109 // Failures from Webkit merger 51724 -> 51772
2110 BUG20345 : http/tests/security/cross-frame-access-getOwnPropertyDescriptor.html = TEXT
2111
2112 BUG10480 LINUX : editing/selection/move-by-line-001.html = FAIL
2113
2114 // The linux layout result in build bot shows the changed method does not
2115 // executed.
2116 BUG21141 LINUX : fast/forms/select-double-onchange.html = FAIL
2117 BUG21141 LINUX RELEASE : fast/forms/select-script-onchange.html = FAIL
2118 BUG21141 LINUX DEBUG : fast/forms/select-script-onchange.html = FAIL
2119
2120 // Flaky, not clear as of when.
2121 BUG21411 WIN LINUX DEBUG : svg/dom/SVGScriptElement/script-load-and-error-events.svg = TEXT PASS
2122
2123 // WK roll to 48371
2124 BUG21841 MAC DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2125 BUG21841 WIN DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2126
2127 BUG25616 WIN : fast/overflow/overflow-float-stacking.html = FAIL
2128
2129 // Flaky. The width of containing RenderBlocks sometimes becomes larger
2130 BUG21958 MAC : svg/hixie/error/012.xml = FAIL
2131
2132 // WebKit merge 48500:48585, newly implemented Object.defineProperty.
2133 BUG22526 WIN MAC: fast/js/Object-create.html = FAIL
2134 BUG22526 : fast/js/Object-defineProperties.html = FAIL CRASH
2135 BUG22526 : fast/js/Object-defineProperty.html = FAIL
2136 BUG22526 : http/tests/security/xss-DENIED-defineProperty.html = FAIL
2137
2138 // WebKit merge 48500:48585, due to newly added support for MathML.
2139 BUG22554 SKIP : mathml = FAIL
2140
2141 // WebKit update 48796:48820
2142 BUG23956 WIN LINUX : fast/dom/Element/getBoundingClientRect.html = FAIL
2143 BUG23956 WIN LINUX : fast/dom/Range/getBoundingClientRect.html = FAIL
2144 BUG23956 WIN LINUX : fast/dom/Range/getClientRects.html = FAIL
2145 BUG24126 : fast/dom/HTMLInputElement/size-attribute.html = FAIL
2146
2147 // Started happening somewhere around http://trac.webkit.org/changeset/48989.
2148 BUG23955 LINUX MAC : fast/css/last-of-type-pseudo-class.html = FAIL
2149
2150 // WebKit update: 49190:49206
2151 BUG_JPARENT LINUX DEBUG SLOW : fast/frames/calculate-fixed.html = PASS
2152
2153 // Started failing for no apparent reason at r28124, and IMAGE+TEXT diffs started at r51875
2154
2155 // Flaky timeouts first appearing at r27764 (webkit 48947)
2156 BUG9798 WIN : http/tests/cookies/multiple-cookies.html = TIMEOUT PASS
2157
2158 // WebKit update: 49213:49221
2159 BUG24063 : fast/dom/Window/window-postmessage-clone.html = FAIL
2160
2161 // Got slow with V8 update to 1.3.15. Debug logging perhaps?
2162 BUG24182 DEBUG SLOW : fast/forms/input-implicit-length-limit.html = PASS
2163 BUG24182 DEBUG SLOW : fast/forms/input-maxlength.html = PASS
2164
2165 // Failing at WebKit Linux (dbg)(3) build 7795
2166 BUG24119 LINUX DEBUG : tables/mozilla/bugs/bug1220.html = PASS FAIL
2167
2168 // WebKit roll 49405:49413
2169 BUG28409 : http/tests/xmlhttprequest/logout.html = FAIL
2170
2171 // WebKit Roll 49597:49640
2172 BUG24966 SLOW MAC DEBUG : fast/frames/calculate-fixed.html = PASS
2173
2174 // WebKit Roll 49640:49684
2175 BUG26253 SLOW WIN RELEASE : http/tests/navigation/reload-subframe-object.html = PASS
2176 BUG25202 LINUX WIN : svg/W3C-SVG-1.1/masking-path-02-b.svg = FAIL
2177 BUG25208 LINUX WIN : svg/W3C-SVG-1.1/masking-path-05-f.svg = FAIL
2178 BUG_JEREMY MAC : fast/frames/onlyCommentInIFrame.html = FAIL
2179
2180 // WebKit Roll 49684:49761
2181 BUG26042 DEBUG : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2182 BUG26042 LINUX RELEASE : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2183
2184 // Incorrect baseline removed.
2185 BUG25433 WIN LINUX : css2.1/t040103-ident-03-c.html = IMAGE
2186
2187 // WebKit roll 49961:49992
2188 // Added in http://trac.webkit.org/changeset/49990
2189 BUG25884 WIN LINUX : fast/dom/Document/CaretRangeFromPoint/caretRangeFromPoint-in-zoom-and-scroll.html = FAIL
2190
2191 BUG26344 LINUX DEBUG : fast/text/atsui-partial-selection.html = CRASH
2192 BUG26344 LINUX DEBUG : platform/mac/editing/deleting/backward-delete.html = CRASH
2193
2194 // More fallout from the above roll.
2195 BUG_JORLOW LINUX : fast/multicol/column-rules-stacking.html = FAIL
2196
2197 // ==== WebKit roll 50258:50313 ====
2198 BUG26291 MAC : fast/text/atsui-multiple-renderers.html = IMAGE
2199 BUG26291 MAC : transforms/2d/hindi-rotated.html = IMAGE
2200
2201 // Flaky since at least WebKit 50258.
2202 BUG32098 : fast/dom/defaultView.html = MISSING PASS
2203 BUG9798 WIN RELEASE : http/tests/navigation/no-referrer-reset.html = TIMEOUT PASS
2204
2205 // more test flakiness
2206 BUG27334 MAC : http/tests/security/xssAuditor/object-embed-tag.html = PASS
2207
2208 // more test flakiness
2209 BUG27418 SLOW WIN RELEASE : http/tests/cookies/simple-cookies-max-age.html = PASS
2210 BUG27418 SLOW WIN RELEASE : http/tests/misc/url-in-utf16le.html = PASS
2211 BUG27418 MAC DEBUG : http/tests/plugins/interrupted-get-url.html = PASS TEXT
2212 BUG27418 MAC RELEASE SLOW : http/tests/plugins/interrupted-get-url.html = PASS
2213
2214 // The following upstream patches add -Webkit-color-correction support:
2215 // http://trac.webkit.org/changeset/50760
2216 // http://trac.webkit.org/changeset/50852
2217 // The ColorSpace was only implemented for CG, more port implementation
2218 // required in order for Chromium to support color correction.
2219 BUG28005 : fast/css/color-correction-backgrounds-and-text.html = FAIL
2220 BUG28005 LINUX WIN : fast/css/color-correction-on-backgrounds.html = FAIL
2221 BUG28005 LINUX WIN : fast/css/color-correction-on-text.html = FAIL
2222 BUG28005 LINUX WIN : fast/css/color-correction.html = FAIL
2223 BUG28005 WIN LINUX : fast/css/color-correction-on-box-shadow.html = IMAGE+TEXT
2224 BUG28005 WIN LINUX : fast/css/color-correction-on-text-shadow.html = IMAGE+TEXT
2225 BUG28005 : fast/css/color-correction-on-background-image.html = FAIL
2226 BUG28005 LINUX WIN : fast/css/color-correction-untagged-images.html = FAIL
2227
2228 // May also be related to r50760, but not as confident.
2229 BUG27551 WIN : fast/css/shadow-multiple.html = IMAGE
2230
2231 // WebKit merge 50756:50820, possibly due to WebKit r50808/r50786 and Chromium r31715
2232 BUG27553 WIN : fast/text/atsui-partial-selection.html = IMAGE
2233
2234 BUG22700 WIN LINUX : fast/canvas/canvas-shadow.html = TEXT
2235
2236
2237 // Failures from merge 50972:51042
2238 // The test requires DRT/Test Shell to support error page handling.
2239 BUG27850 : fast/history/back-forward-reset-after-error-handling.html = TEXT
2240 // Need to update chromium so the web frame delegate is informed when window objects
2241 // in isolated worlds are cleared.
2242 BUG27849 : http/tests/security/isolatedWorld/didClearWindowObject.html = TEXT
2243
2244 BUG28040 WIN : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2245 BUG28040 MAC DEBUG : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2246
2247 BUG28040 WIN MAC DEBUG : fast/body-propagation/overflow/003-xhtml.xhtml = PASS IMAGE+TEXT
2248
2249 BUG28092 WIN : http/tests/xmlhttprequest/redirect-cross-origin-post.html = PASS FAIL
2250
2251 // Need to add Chromium localized strings for the feature. Upstream r51172
2252 BUG28264 : fast/forms/validationMessage.html = FAIL
2253
2254 // Started failing with move from Lighttpd to Apache.
2255 // Since we have some bots on Lighttpd and some on Apache, mark it as flaky for
2256 // now. Once we decide on one or the other, then we can address these tests.
2257 BUG_OJAN MAC LINUX : http/tests/loading/text-content-type-with-binary-extension.html = TEXT
2258 BUG_OJAN LINUX : http/tests/xmlhttprequest/cache-override.html = TEXT
2259
2260 // These tests time out *and* are slow. The test should be fixed to not timeout,
2261 // then should be marked as SLOW/PASS.
2262 BUG2844 WIN : http/tests/appcache/cyrillic-uri.html = TIMEOUT PASS CRASH
2263 BUG2844 WIN : http/tests/appcache/fail-on-update.html = TIMEOUT PASS TEXT CRASH
2264 BUG2844 WIN : http/tests/appcache/offline-access.html = TIMEOUT PASS
2265 BUG2844 WIN LINUX DEBUG : http/tests/appcache/update-cache.html = TIMEOUT PASS
2266 BUG2844 WIN RELEASE : http/tests/appcache/update-cache.html = TIMEOUT PASS
2267
2268 // These tests sometimes pass and sometimes have a text difference due
2269 // to chromium's appcache being async.
2270 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-3.html = TEXT PASS
2271 BUG2844 MAC LINUX : http/tests/appcache/top-frame-3.html = TEXT PASS
2272 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-4.html = TEXT PASS
2273 BUG2844 MAC LINUX : http/tests/appcache/top-frame-4.html = TEXT PASS
2274
2275 // These fail because chromium's appcache is async but webkit's is not.
2276 BUG2844 SKIP : http/tests/appcache/idempotent-update.html = FAIL
2277 BUG2844 SKIP : http/tests/appcache/top-frame-2.html = FAIL
2278
2279 // This test fails because there is no setAppCacheMaximumSize API yet.
2280 BUG2844 SKIP : http/tests/appcache/max-size.html = FAIL
2281
2282 // Flakiness documented around Webkit Roll 51681:51711
2283 BUG2844 SKIP : http/tests/appcache/404-manifest.html = TIMEOUT PASS
2284 BUG2844 SKIP : http/tests/appcache/404-resource.html = TIMEOUT PASS
2285 BUG2844 SKIP : http/tests/appcache/foreign-iframe-main.html = TIMEOUT PASS
2286 BUG2844 SKIP : http/tests/appcache/non-html.xhtml = TIMEOUT PASS
2287
2288 // New tests. Failures from merge 51253:51310.
2289 // Needs to implement NPN_reloadPlugins and add reloadPluginNoPages & reloadPluginAndPages
2290 // to plugin object.
2291 BUG29018 : plugins/reloadplugins-no-pages.html = TEXT
2292 BUG29018 : plugins/reloadplugins-and-pages.html = TIMEOUT
2293
2294 // New tests. Failures from merge 51210:51325.
2295 BUG28646 : editing/selection/transformed-selection-rects.html = FAIL
2296
2297 // New failures from merge 51412:51455.
2298 BUG28916 MAC : editing/pasteboard/paste-xml.xhtml = TEXT
2299
2300 // New failures from WebKit r51534:r51576
2301 BUG29157 WIN LINUX MAC :  svg/animations/animVal-basics.html = TIMEOUT
2302
2303 // New failures from WebKit r51577
2304 BUG29164 WIN LINUX MAC : fast/frames/sandboxed-iframe-plugins.html = TEXT
2305
2306 // New failures from WebKit merge 51581:51584
2307 BUG29167 MAC DEBUG : fast/dom/replaceChild.html = IMAGE PASS
2308
2309 // Failure from WebKit merge 51607:51613 (51608 is the cause)
2310 BUG29239 LINUX WIN : fast/css/variables/misplaced-import-test.html = FAIL
2311
2312 // Failures from WebKit merge 51642:51681
2313 BUG29393 : fast/loader/stateobjects/pushstate-object-types.html = TEXT
2314 BUG29393 : fast/loader/stateobjects/state-api-on-detached-frame-crash.html = TEXT
2315
2316 // Failures introduced by USE_NEW_BUILDER in Skia.
2317 BUG33287 WIN LINUX : fast/canvas/set-colors.html = TEXT
2318
2319 // Failures from WebKit merge 51711:51724
2320 BUG32003 : fast/js/string-property-deletion.html = TEXT
2321 BUG31998 LINUX : svg/carto.net/selectionlist.svg = IMAGE PASS
2322 BUG31997 DEBUG WIN : fast/body-propagation/overflow/004-xhtml.xhtml = IMAGE+TEXT PASS
2323
2324 // Regression from Webkit merge 51772 -> 51784
2325 BUG35329 WIN : http/tests/appcache/resource-redirect-2.html = TIMEOUT PASS
2326
2327 // Webkit Roll to r51875
2328 BUG29748 LINUX : css1/basic/containment.html = IMAGE
2329 BUG29748 LINUX : css1/box_properties/padding_right.html = IMAGE
2330 BUG29748 LINUX : css1/font_properties/font_size.html = IMAGE
2331 BUG29748 LINUX : fast/block/float/nested-clearance.html = IMAGE
2332 BUG29748 LINUX : fast/block/positioning/051.html = IMAGE
2333 BUG29748 LINUX : fast/block/positioning/055.html = IMAGE
2334 BUG29748 LINUX : fast/forms/select-change-listbox-size.html = IMAGE
2335 BUG29748 LINUX : fast/frames/iframe-scrolling-attribute.html = IMAGE
2336 BUG29748 LINUX : fast/frames/onlyCommentInIFrame.html = IMAGE
2337 BUG29748 LINUX : fast/multicol/positioned-with-constrained-height.html = IMAGE
2338 BUG29748 LINUX : fast/repaint/overflow-scroll-delete.html = IMAGE
2339 BUG29748 LINUX : http/tests/navigation/error404-frames.html = IMAGE
2340 BUG29748 LINUX : http/tests/navigation/post-frames.html = IMAGE
2341 BUG29748 LINUX : http/tests/navigation/postredirect-frames.html = IMAGE
2342 BUG29748 LINUX : tables/mozilla/bugs/bug137388-2.html = IMAGE
2343 BUG29748 LINUX : tables/mozilla/bugs/bug2479-1.html = IMAGE
2344 //BUG29748 LINUX : tables/mozilla/bugs/bug2479-4.html = IMAGE
2345 BUG29748 LINUX : tables/mozilla/bugs/bug29314.html = IMAGE
2346 BUG29748 LINUX : tables/mozilla/bugs/bug2997.html = IMAGE
2347 BUG29748 LINUX : tables/mozilla/bugs/bug32205-2.html = IMAGE
2348 BUG29748 LINUX : tables/mozilla/bugs/bug3977.html = IMAGE
2349 BUG29748 LINUX : tables/mozilla/bugs/bug43854-1.html = IMAGE
2350 //BUG29748 LINUX : tables/mozilla/bugs/bug44505.html = IMAGE
2351 BUG29748 LINUX : tables/mozilla/bugs/bug650.html = IMAGE
2352 BUG29748 LINUX : tables/mozilla/bugs/bug73321.html = IMAGE
2353 BUG29748 LINUX : tables/mozilla/bugs/bug96334.html = IMAGE
2354 BUG29748 LINUX : tables/mozilla/bugs/bug96343.html = IMAGE
2355 BUG29748 LINUX : tables/mozilla/core/captions.html = IMAGE
2356 BUG29748 LINUX : tables/mozilla/core/cell_heights.html = IMAGE
2357 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
2358 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
2359 BUG29748 LINUX : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
2360 BUG29748 LINUX : tables/mozilla/other/nestedTables.html = IMAGE
2361 BUG29748 LINUX : tables/mozilla/other/test3.html = IMAGE
2362 BUG29748 LINUX : tables/mozilla/other/wa_table_thtd_rowspan.html = IMAGE
2363 BUG29748 LINUX : tables/mozilla/other/wa_table_tr_align.html = IMAGE
2364 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
2365 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
2366 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
2367 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
2368 //BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
2369 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
2370 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
2371 BUG29748 LINUX : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE
2372 BUG29748 LINUX : tables/mozilla_expected_failures/core/captions1.html = IMAGE
2373 BUG29748 LINUX : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
2374 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
2375 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
2376 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
2377 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
2378 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
2379 BUG29748 LINUX : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
2380 BUG29748 LINUX : tables/mozilla_expected_failures/other/test4.html = IMAGE
2381 BUG29748 WIN DEBUG : fast/forms/input-align-image.html = IMAGE+TEXT PASS
2382
2383 // More Webkit Roll to r51875
2384 // Some of these went from IMAGE+TEXT to just IMAGE at r57886
2385 BUG29737 MAC : svg/W3C-SVG-1.1/filters-blend-01-b.svg = IMAGE
2386 BUG29737 MAC : svg/W3C-SVG-1.1/filters-color-01-b.svg = IMAGE
2387 BUG29737 MAC : svg/W3C-SVG-1.1/filters-comptran-01-b.svg = IMAGE
2388 BUG29737 MAC : svg/W3C-SVG-1.1/filters-gauss-01-b.svg = IMAGE
2389 BUG29737 MAC : svg/W3C-SVG-1.1/filters-morph-01-f.svg = IMAGE
2390 BUG29737 MAC : svg/W3C-SVG-1.1/filters-offset-01-b.svg = IMAGE
2391 BUG29737 MAC : svg/batik/filters/feTile.svg = IMAGE
2392 BUG29737 MAC : svg/custom/empty-merge.svg = IMAGE
2393 BUG29737 MAC : svg/custom/feComponentTransfer-Discrete.svg = IMAGE
2394 BUG29737 MAC : svg/custom/feComponentTransfer-Gamma.svg = IMAGE
2395 BUG29737 MAC : svg/custom/feComponentTransfer-Linear.svg = IMAGE
2396 BUG29737 MAC : svg/custom/feComponentTransfer-Table.svg = IMAGE
2397 BUG29737 MAC : svg/custom/text-filter.svg = IMAGE
2398 BUG29737 MAC : svg/filters/feComposite.svg = IMAGE
2399 BUG29737 MAC : svg/filters/feDisplacementMap.svg = IMAGE
2400 BUG29737 MAC : svg/filters/feGaussianBlur.svg = IMAGE
2401 BUG29737 MAC : svg/filters/feTile.svg = IMAGE
2402 BUG29737 MAC : svg/filters/shadow-on-filter.svg = IMAGE
2403 BUG29737 MAC : svg/custom/use-elementInstance-event-target.svg = IMAGE
2404 BUG29737 SLOW MAC : svg/filters/big-sized-filter.svg = IMAGE
2405 BUG29737 MAC : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE
2406 BUG29737 MAC : svg/filters/sourceAlpha.svg = IMAGE
2407
2408 // More Webkit Roll to r51875
2409
2410 // WebKit Roll to r51915
2411 BUG29930 : fast/loader/input-element-page-cache-crash.html = TIMEOUT PASS TEXT
2412
2413
2414 // New tests courtesy of: http://trac.webkit.org/changeset/51936:
2415 BUG30048 : svg/css/composite-shadow-example.html = IMAGE
2416 BUG30048 : svg/css/composite-shadow-with-opacity.html = IMAGE
2417
2418 // Broke with http://trac.webkit.org/changeset/51939
2419 BUG30049 : platform/win/editing/selection/doubleclick-should-not-expand-across-lines.html = TEXT MISSING
2420
2421 // evan's fix rolled out in http://trac.webkit.org/changeset/52071 due to compat issues.
2422 BUG30343 LINUX : fast/css/large-number-round-trip.html = TEXT
2423
2424 // These tests got very flaky (failing 8/10 runs!) after
2425 // http://src.chromium.org/viewvc/chrome?view=rev&revision=34610
2426 // The only relevant change there is that we now sort tests purely
2427 // lexicographically instead of putting the http tests first. This is a good
2428 // thing because it matches upstream. The regressions are likely due to timing
2429 // issues because the http tests moved from one debug shard to another.
2430 // Likely, moving Windows to using Apache2 will fix this as the Linux/Mac builds
2431 // did not get flaky here and moving to Apache made the appcache tests less
2432 // flaky on those platforms.
2433 BUG25977 WIN DEBUG : http/tests/appcache/access-via-redirect.php = TIMEOUT PASS
2434 BUG25977 WIN : http/tests/appcache/auth.html = TIMEOUT PASS
2435 BUG25977 WIN DEBUG : http/tests/appcache/crash-when-navigating-away-then-back.html = TIMEOUT PASS
2436 BUG25977 WIN DEBUG : http/tests/appcache/empty-manifest.html = TIMEOUT PASS
2437 // This test is slow on windows, but sometimes times out indefinitely.
2438 // See if this improves when we move to apache.
2439 BUG25977 WIN : http/tests/appcache/fallback.html = TIMEOUT PASS
2440 BUG25977 WIN DEBUG : http/tests/appcache/local-content.html = TIMEOUT PASS
2441 BUG25977 WIN DEBUG : http/tests/appcache/main-resource-hash.html = TIMEOUT PASS
2442 BUG25977 WIN DEBUG : http/tests/appcache/manifest-containing-itself.html = TIMEOUT PASS
2443 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect-2.html = TIMEOUT PASS
2444 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect.html = TIMEOUT PASS
2445 BUG25977 WIN DEBUG : http/tests/appcache/manifest-with-empty-file.html = TIMEOUT PASS
2446 BUG25977 WIN DEBUG : http/tests/appcache/wrong-content-type.html = TIMEOUT PASS
2447 BUG25977 WIN DEBUG : http/tests/appcache/online-whitelist.html = TIMEOUT PASS
2448 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-1.html = TIMEOUT PASS
2449 BUG25977 WIN DEBUG : http/tests/appcache/whitelist-wildcard.html = TIMEOUT PASS
2450 BUG25977 WIN DEBUG : http/tests/appcache/resource-redirect.html = TIMEOUT PASS
2451 BUG25977 WIN : http/tests/appcache/xhr-foreign-resource.html = TIMEOUT PASS
2452 BUG25977 WIN DEBUG : http/tests/appcache/simple.html = TIMEOUT PASS
2453 BUG25977 WIN DEBUG : http/tests/appcache/reload.html = TIMEOUT PASS
2454 BUG25977 WIN DEBUG : http/tests/appcache/wrong-signature-2.html = TIMEOUT PASS
2455 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-4.html = TIMEOUT TEXT PASS
2456 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-3.html = TIMEOUT TEXT PASS
2457
2458 // Flaky.
2459 BUG9798 WIN LINUX : fast/loader/javascript-url-encoding-2.html = TIMEOUT PASS
2460 BUG9798 WIN RELEASE : fast/loading/subframe-removes-itself.html = TEXT PASS
2461 BUG9798 LINUX MAC : fast/loader/invalid-charset-on-script-crashes-loader.html = TIMEOUT PASS
2462
2463 // WebKit update 52293->52323
2464 BUG31253 : http/tests/security/xss-DENIED-assign-location-href-javascript.html = TEXT
2465
2466 // WebKit update 52323->52366
2467 BUG30826 WIN : platform/win/fast/events/panScroll-imageMap-noHref-scroll.html = TEXT
2468 BUG30826 WIN DEBUG : platform/win/fast/events/panScroll-event-fired.html = PASS TEXT TIMEOUT
2469
2470 // Flaky
2471 BUG30930 LINUX DEBUG : tables/mozilla/bugs/bug15933.html = IMAGE PASS
2472
2473 // WebKit roll 52468->52535
2474 BUG31991 WIN LINUX : fast/text/international/bidi-layout-across-linebreak.html = TEXT
2475 BUG31252 : http/tests/security/listener/xss-inactive-closure.html = TEXT
2476
2477 BUG31623 WIN: http/tests/appcache/remove-cache.html = PASS TEXT TIMEOUT
2478
2479 // WebKit roll 52852 -> 52867
2480 BUG32018 : websocket/tests/frame-lengths.html = PASS TIMEOUT
2481 BUG32018 DEBUG : websocket/tests/simple-stress.html = PASS TEXT TIMEOUT
2482
2483 // Flaky
2484 BUG31803 MAC LINUX : editing/inserting/12882.html = IMAGE PASS
2485
2486 // from http://trac.webkit.org/changeset/53086
2487 BUG32153 : svg/dynamic-updates/SVGTextElement-svgdom-rotate-prop.html = TEXT
2488
2489 // a bunch of tests broken before the flakiness fix, i will deal with these
2490 // after the major flakiness goes away
2491 BUG32155 : fast/js/Object-getOwnPropertyNames.html = TEXT
2492
2493 // New flakiness?
2494 BUG32145 WIN : animations/3d/transform-origin-vs-functions.html = TEXT PASS
2495 BUG32149 WIN RELEASE : fast/dom/Document/early-document-access.html = TIMEOUT PASS
2496
2497 BUG32195 LINUX : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = IMAGE TEXT
2498 BUG32195 WIN : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = IMAGE+TEXT IMAGE
2499
2500 // Expectations from roll to 53171:53194
2501
2502 BUG32308 DEBUG : fast/frames/cached-frame-counter.html = TIMEOUT
2503
2504 // WebKit roll 53341:53451
2505 BUG32670 LINUX : fast/css/zoom-body-scroll.html = TEXT
2506 BUG32673 WIN LINUX : fast/forms/textarea-scrollbar-height.html = TEXT
2507 BUG32675 LINUX : fast/repaint/trailing-floats-root-line-box-overflow.html = IMAGE
2508
2509 // Flaky tests found during the roll.
2510 BUG32679 LINUX DEBUG : http/tests/navigation/lockedhistory-iframe.html = TEXT PASS
2511 BUG32684 WIN : inspector/timeline-layout.html = TEXT PASS
2512 BUG35519 WIN SKIP : http/tests/inspector/inspect-iframe-from-different-domain.html = PASS
2513 BUG32688 MAC DEBUG : fast/lists/inlineBoxWrapperNullCheck.html = TEXT PASS
2514 BUG32689 MAC LINUX DEBUG : http/tests/security/mixedContent/about-blank-iframe-in-main-frame.html = TEXT PASS
2515 BUG32693 MAC DEBUG : svg/dom/SVGRectElement/rect-modify-rx.svg = TEXT PASS
2516 BUG35773 WIN LINUX : inspector/console-dir.html = CRASH TEXT PASS
2517
2518 BUG33293 SKIP : fast/media/lifetime.html = TIMEOUT
2519
2520 // WebKit roll 53585 -> 53655
2521 BUG32864 WIN LINUX MAC : plugins/mouse-events-fixedpos.html = TEXT
2522
2523 // WebKit roll 53655 -> 53704
2524 BUG32900 WIN LINUX : http/tests/misc/slow-loading-mask.html = IMAGE+TEXT
2525
2526 // WebKit roll 53704 -> 53747
2527 BUG32949 WIN LINUX MAC : fast/dom/Window/invalid-protocol.html = TEXT
2528
2529 BUG21852 DEFER SKIP LINUX WIN : fast/canvas/webgl = CRASH
2530
2531 // Disabled until we get history.{back,forward,go} changed to always be
2532 // asynchronously again.
2533 BUG33350 : fast/dom/location-hash.html = TEXT
2534
2535 // WebKit roll 53941 -> 54015
2536 BUG33358 WIN LINUX : fast/dom/Window/window-postmessage-clone-frames.html = TEXT
2537
2538 // WebKit roll 54016 -> 54045
2539 BUG33486 WIN LINUX : fast/text/international/hebrew-vowels.html = IMAGE+TEXT
2540 BUG33486 LINUX : fast/text/international/thai-line-breaks.html = IMAGE
2541
2542 // WebKit roll 54059 -> 54075
2543 BUG33538 : fast/dom/Window/anonymous-slot-with-changes.html = TEXT
2544
2545 BUG35064 WIN : fast/forms/restore-selection-after-layout.html = TEXT PASS
2546
2547 // WebKit roll 54482 to 54493.
2548 BUG35242 WIN : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT TEXT
2549
2550 // WebKit roll 54493 to 54530: new tests.
2551 BUG35114 : fast/js/parser-syntax-check.html = TEXT
2552
2553 // WebKit roll 54530 to 54550
2554 BUG35238 MAC : fast/dom/clone-node-dynamic-style.html = IMAGE
2555
2556 // WebKit roll 54550 to 54559
2557 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-defaults.svg = IMAGE
2558 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-1.svg = IMAGE
2559 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-2.svg = IMAGE
2560 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-3.svg = IMAGE
2561 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-in-xhtml-defaults.xhtml = IMAGE
2562
2563 // WebKit roll 54559 to 54585
2564 BUG35237 : fast/events/multiline-link-arrow-navigation.html = TEXT
2565
2566 // Due to not building TestNetscapePlugin.cpp.
2567 BUG35387 : platform/win/plugins/plugin-delayed-destroy.html = TIMEOUT
2568 BUG35387 : plugins/reentrant-update-widget-positions.html = TIMEOUT
2569 BUG35387 : plugins/update-widgets-crash.html = TIMEOUT
2570
2571 // New test added in WebKit r54783
2572 BUG35822 : plugins/npruntime/browser-object-identity.html = TEXT
2573
2574 // Started failing during roll from 54848 -> 54898
2575 // Started failing with 54865. No rebaselines upstream but they don't run pixel tests.
2576 BUG36019 WIN LINUX : fast/images/svg-as-tiled-background.html = IMAGE
2577
2578 // WebKit roll 55250 to 55339
2579 BUG36966 : fast/loader/about-blank-hash-kept.html = FAIL
2580
2581 BUG37463 MAC DEBUG : svg/custom/transform-ignore-after-invalid.svg = PASS CRASH
2582
2583 // WebKit roll 55512:55584
2584 BUG37540 MAC SKIP : inspector/console-dir.html = CRASH TEXT PASS
2585
2586 // Bugs that went unreported when we upstreamed run_webkit_tests
2587 // New test, added http://trac.webkit.org/changeset/55737
2588 BUG37896 : fast/events/remove-child-onscroll.html = TIMEOUT
2589 // This one may be an actual regression! Started being flaky after
2590 // http://trac.webkit.org/log/?verbose=on&rev=55742&stop_rev=55710
2591 BUG37896 LINUX : fast/events/standalone-image-drag-to-editable.html = IMAGE IMAGE+TEXT PASS TEXT
2592 BUG37896 WIN : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT PASS TEXT
2593 BUG37896 MAC DEBUG : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT PASS
2594 // New test, added http://trac.webkit.org/changeset/55546
2595 BUG37896 WIN LINUX : fast/multicol/hit-test-above-or-below.html = TEXT
2596 // Added in http://trac.webkit.org/changeset/55669
2597 BUG37896 : fast/repaint/no-caret-repaint-in-non-content-editable-element.html = IMAGE+TEXT
2598 BUG37896 WIN DEBUG : fast/text/firstline/001.html = PASS CRASH
2599 BUG37896 LINUX MAC DEBUG : fast/text/firstline/001.html = PASS CRASH TIMEOUT
2600 // Added in http://trac.webkit.org/changeset/55587
2601 BUG37896 LINUX DEBUG : fast/images/svg-as-background.html = TIMEOUT
2602 BUG37869 MAC LINUX SKIP : inspector/timeline-network-resource.html = CRASH
2603 // Three flaky tests noticed during a sheriff rotation.
2604 BUG37962 MAC LINUX DEBUG : fast/dom/HTMLElement/bdo.html = CRASH PASS
2605 BUG37962 LINUX DEBUG : fast/forms/multiple-form-submission-protection-mouse.html = CRASH PASS
2606 BUG37962 MAC : plugins/iframe-shims.html = TEXT PASS
2607
2608 // WebKit roll r55853 -> 55940
2609 // Flaky test
2610 BUG_JIANLI MAC : fast/forms/select-style.html = IMAGE PASS
2611
2612 BUG38375 : plugins/npruntime/round-trip-npobject.html = TEXT
2613 BUG38376 WIN : editing/deleting/5390681-2.html = IMAGE+TEXT
2614
2615 // WebKit roll 56004 -> 56026
2616 BUG38278 : fast/events/continuous-platform-wheelevent-in-scrolling-div.html = TIMEOUT
2617 BUG38278 : fast/events/platform-wheelevent-in-scrolling-div.html = TIMEOUT
2618
2619 // The touch targeting logic was recently changed.
2620 BUG36415 : fast/events/touch/touch-target.html = TEXT
2621
2622 // Need to implement NPP_HandleEvent in the layout_test_plugin
2623 // WIN started failing during webkit roll 62670 -> 62844.
2624 BUG38353 WIN MAC LINUX : plugins/keyboard-events.html = TEXT
2625 BUG38353 WIN MAC LINUX : http/tests/plugins/plugin-document-has-focus.html = TEXT TIMEOUT
2626
2627 BUG38392 : plugins/resize-from-plugin.html = TEXT
2628
2629 // One pixel changes from gray 0x83 to gray 0x81. Valgrind is clean.
2630 BUG38534 LINUX : tables/mozilla/bugs/bug20804.html = IMAGE PASS
2631
2632 // WebKit roll 56165:56197.
2633 // New test (http://trac.webkit.org/changeset/56198), requires changes to PluginObject
2634 BUG38578 : plugins/override-node-method.html = TEXT
2635
2636 // WebKit roll 56197:56239.
2637 // Needs layoutTestController.setMediaType() (implemented on Qt only)
2638 BUG38653 MAC : editing/selection/find-yensign-and-backslash.html = TEXT
2639 BUG38656 : fast/media/print-restores-previous-mediatype.html = TEXT
2640
2641 // Needs layoutTestController.setViewModeMediaFeature() (implemented on Qt only)
2642 BUG40680 SKIP : fast/media/media-feature-wgt-view-mode.html = FAIL
2643
2644 // Unknown flakiness.
2645 BUG38706 : svg/custom/deep-dynamic-updates.svg = IMAGE+TEXT IMAGE PASS
2646
2647 // Caused by http://trac.webkit.org/changeset/56288/
2648 BUG_JSCHUH WIN LINUX : svg/filters/filterRes.svg = IMAGE+TEXT TEXT
2649 BUG_JSCHUH MAC : svg/filters/filterRes.svg = IMAGE
2650
2651 // Caused by http://trac.webkit.org/changeset/56394.
2652 BUG_JAPHET WIN : http/tests/xmlhttprequest/xmlhttprequest-50ms-download-dispatch.html = TEXT
2653
2654 // Due to the differences in iniialization checks in KURL and googleurl.
2655 // Note: this test was also marked as flaky on WIN RELEASE above, BUG31342.
2656 BUG_39423 : security/block-test.html = TIMEOUT
2657
2658 BUGWK36666 : storage/open-database-over-quota.html = TEXT
2659
2660 // Caused by http://trac.webkit.org/changeset/56795
2661 // These are new tests that are failing in Chromium because of a missing API.
2662 BUG39904 : svg/animations/animate-points.html = TIMEOUT
2663 BUG39904 : svg/animations/animate-keySplines.html = TIMEOUT
2664 BUG39904 : svg/animations/animate-gradient-transform.html = TIMEOUT
2665
2666 BUGWK37283 : fast/overflow/scrollbar-restored-and-then-locked.html = TEXT
2667
2668 BUGWK37297 : fast/history/nested-visited-test.html = TEXT
2669 BUGWK37297 : fast/history/self-is-visited.html = TEXT
2670 BUGWK37297 : fast/history/sibling-visited-test.html = TEXT
2671
2672 // These are failing due to new-run-webkit-tests's diff trimming line ends.
2673 BUGWK36983 MAC : fast/canvas/webgl/null-object-behaviour.html = TEXT
2674 BUGWK36983 MAC : fast/canvas/webgl/uniform-location.html = TEXT
2675
2676 // Added in http://trac.webkit.org/changeset/57476. Fails in Chromium because
2677 // LayoutTestController::computedStyleWithVisitedInfo() is missing.
2678 BUG41206 : fast/history/multiple-classes-visited.html = TEXT TIMEOUT
2679
2680 // Tests that work with KURL, but fail with GURL
2681 BUG41292 : fast/url/ipv4.html = TEXT TIMEOUT
2682 BUG41292 : fast/url/anchor.html = TEXT TIMEOUT
2683
2684 // Caused by r57695. Will investigate.
2685 BUG_JIANLI LINUX : http/tests/local/formdata/send-form-data-with-sliced-file.html = TEXT
2686
2687 BUG33812 SKIP : fast/dom/icon-url-property.html = FAIL
2688
2689 // Failing with webkit roll 57659 -> 57677.
2690 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-1.html = IMAGE PASS
2691 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-3.html = IMAGE PASS
2692 BUG41817 MAC : svg/text/text-intro-05-t.svg = IMAGE PASS
2693
2694 BUG42044 WIN : http/tests/security/xss-DENIED-mime-type-execute-as-html.html = PASS TIMEOUT
2695
2696 // might have been flaky
2697 BUGJAMESR MAC : svg/custom/resource-invalidate-on-target-update.svg = IMAGE PASS
2698 BUGJAMESR LINUX : svg/custom/resource-invalidate-on-target-update.svg = IMAGE
2699 BUGJAMESR : svg/filters/filter-clip.svg = IMAGE
2700 BUGJAMESR : svg/filters/filter-source-position.svg = IMAGE
2701 BUGJAMESR BUG30048 BUG29737 : svg/filters/shadow-on-rect-with-filter.svg = IMAGE
2702
2703 // New layoutTestController function added at r57986
2704 BUG42691 : fast/lists/ol-nested-items-dynamic-insert.html = TEXT
2705 BUG42691 : fast/lists/ol-nested-items-dynamic-remove.html = TEXT
2706 BUG42691 : fast/lists/ol-nested-items.html = TEXT
2707 BUG42691 : fast/lists/ol-nested-list-dynamic-insert.html = TEXT
2708 BUG42691 : fast/lists/ol-nested-list-dynamic-remove.html = TEXT
2709 BUG42691 : fast/lists/ol-nested-list.html = TEXT
2710
2711 // New layoutTestController function added at r57993
2712 BUG42696 : http/tests/xmlhttprequest/cross-origin-authorization-with-embedder.html = TIMEOUT
2713
2714 // Started failing at r57969
2715 BUG8729 MAC : http/tests/multipart/invalid-image-data.html = IMAGE
2716
2717 // Started failing at r58058
2718 BUGWK38020 WIN LINUX MAC : fast/events/touch/send-oncancel-event.html = TEXT
2719
2720 // Started failing at r58152
2721 BUGWK38038 WIN LINUX MAC : fast/url/file-http-base.html = TEXT
2722
2723 // Started failing at r58191
2724 BUGWK38100 WIN LINUX MAC : editing/inserting/caret-position.html = TEXT
2725
2726 // New test, may be safe to just rebaseline.
2727 BUGWK38099 WIN LINUX : svg/custom/broken-internal-references.svg = IMAGE+TEXT
2728
2729 // Started failing at 58212
2730 BUGWK38108 MAC : fast/backgrounds/size/contain-and-cover.html = IMAGE
2731
2732 // WebKit roll 58304:58400
2733 // Skip since not relevant
2734 BUGUKAI WIN MAC SKIP : fast/text/international/bold-bengali.html = FAIL
2735
2736 // WebKit roll 58400:58523
2737 // We probably don't want to run these massive amount of new ECMA script conformance tests:
2738 BUG42875 SKIP DEFER : fast/js/sputnik = TEXT
2739 // Other failing layout test
2740 BUGWK38360 WIN LINUX SKIP : fast/images/svg-background-partial-redraw.html = TEXT
2741 BUGWK38360 WIN LINUX SKIP : svg/carto.net/tabgroup.svg = TEXT
2742 BUGWK38360 SKIP : traversal/node-iterator-prototype.html = TEXT
2743 BUG42895 : media/audio-only-video-intrinsic-size.html = TIMEOUT
2744 BUG42895 : media/media-document-audio-size.html = TIMEOUT
2745 BUGYAAR MAC : svg/custom/dominant-baseline-hanging.svg = MISSING
2746
2747 BUG39855 SLOW DEBUG : editing/selection/extend-selection.html = PASS
2748
2749 // Failing a few times, flak dashboard seems to agree.
2750 BUG41973 MAC : svg/text/text-text-05-t.svg = IMAGE PASS
2751
2752 // Rolling Skia forward in Chrome tree to get new baselines to check
2753 // in upstream.
2754 BUGEVAN : svg/clip-path/clip-path-child-clipped.svg = PASS FAIL
2755
2756 // webkit roll 58541:58626
2757 BUG43084 MAC DEBUG : media/video-empty-source.html = IMAGE
2758
2759 // WebKit roll 58626:58719
2760 BUG43963 WIN : fast/forms/searchfield-heights.html = IMAGE
2761 BUG43963 LINUX : fast/forms/searchfield-heights.html = IMAGE+TEXT TEXT
2762 BUG43960 WIN LINUX : fast/css/input-search-padding.html = IMAGE+TEXT
2763 BUG43960 MAC : fast/css/input-search-padding.html = IMAGE
2764
2765 BUGWK38705 : http/tests/security/sandbox-inherit-to-initial-document-2.html = TEXT
2766
2767 // WebKit roll 58791:58807
2768 BUG43319 MAC : transforms/2d/zoom-menulist.html = IMAGE PASS
2769 BUG43319 MAC : fast/forms/select-empty-option-height.html = TIMEOUT IMAGE PASS
2770 BUG43319 WIN LINUX : http/tests/loading/307-after-303-after-post.html = TEXT PASS
2771 BUG43319 WIN LINUX : http/tests/loading/bad-server-subframe.html = TEXT PASS
2772
2773 BUG43496 LINUX : svg/custom/mask-changes.svg = IMAGE PASS
2774
2775 BUG43496 LINUX : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2776 BUG43497 MAC WIN : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2777
2778 // WebKit roll 58855:58878
2779 BUG43419: fast/wcss/wap-input-format.xhtml = TEXT
2780 BUG43419: fast/wcss/wap-input-required.xhtml = TEXT
2781
2782 // WebKit r59064 changes the behavior of javascript regexp literals
2783 BUGJOHNNYG : fast/js/regexp-literals-arent-constants.html = TEXT
2784
2785 // Flaky tests
2786 BUG43890 WIN : http/tests/loading/basic.html = TEXT PASS
2787 BUG43890 MAC LINUX : fast/forms/implicit-submission.html = TEXT PASS
2788
2789 // Flaky crashing test. Started crashing around Chromium r47220
2790 BUG44150 LINUX DEBUG : fast/forms/input-text-paste-maxlength.html = CRASH PASS
2791
2792 // New canvas test suite from http://philip.html5.org/tests/canvas/suite/tests/
2793 BUG20553 SKIP DEFER : canvas/philip = TEXT
2794 BUG20553 SKIP DEFER : http/tests/canvas/philip = TEXT
2795
2796 // Need to dump context menu items on eventSender.contextClick(true).
2797 BUGWK39105 : editing/spelling/context-menu-suggestions.html = TEXT
2798
2799 // Flaky tests
2800 BUG44229 WIN LINUX : fast/loader/recursive-before-unload-crash.html = PASS TEXT
2801
2802 // DeviceOrientation API not yet implemented.
2803 BUG44654 SKIP : fast/dom/DeviceOrientation = TEXT
2804 BUG44654 SKIP : fast/dom/Window/window-properties-device-orientation.html = TEXT
2805
2806 BUGWK39655 : fast/dom/prototype-property.html = FAIL
2807
2808 // These SVG tests have been flaky on Win from quite some time.
2809 // Hard to pin down which roll introduced the flakiness.
2810 BUG45106 WIN : svg/clip-path/clip-path-childs-clipped.svg = PASS CRASH
2811 BUG45106 WIN : svg/clip-path/clip-path-evenodd-nonzero.svg = PASS CRASH
2812 BUG45106 WIN : svg/text/text-text-05-t.svg = PASS CRASH
2813
2814 BUG45720 WIN LINUX : websocket/tests/reload-crash.html = PASS CRASH
2815
2816 // Failing since http://trac.webkit.org/changeset/60865
2817 // Need to add setEditingBehavior to layoutTestController.
2818 BUG46096 : editing/selection/extend-selection-after-double-click.html = TEXT
2819 BUG46096 : editing/selection/5195166-1.html = TEXT
2820
2821 // Flaky since at least r60276
2822 BUG46157 WIN RELEASE : transforms/2d/transform-value-types.html = PASS TEXT
2823
2824 // Chromium does not use the icon loader in WebCore for loading notifications.
2825 WONTFIX SKIP : http/tests/notifications = FAIL
2826
2827 // Chromium does not support cancel for notifications permissions.
2828 BUGWK42798 SKIP : fast/notifications/notifications-cancel-request-permission.html = FAIL
2829
2830 BUG46276 WIN : fast/text/international/khmer-selection.html = IMAGE+TEXT
2831
2832 // HTML5 Geolocation API does not use window.clientInformation.
2833 BUG11246 DEFER SKIP : fast/dom/Window/window-properties-geolocation.html = TEXT
2834
2835 // Re-enabled in http://trac.webkit.org/changeset/60983
2836 // Maybe we just need rebaseline.
2837 BUG_HAMAJI WIN LINUX : svg/W3C-SVG-1.1/fonts-glyph-02-t.svg = IMAGE+TEXT
2838
2839 // WebKit r60999 updated acid3.html, doesn't match expected on Chromium Mac.
2840 BUG46375 MAC : http/tests/misc/acid3.html = IMAGE
2841
2842 // Fails starting http://trac.webkit.org/changeset/61153
2843 // Needs update to test_shell.
2844 BUG46538 MAC WIN LINUX : editing/deleting/forward-delete-key.html = TEXT
2845
2846 BUG46603 : fast/frames/lots-of-iframes.html = PASS TIMEOUT
2847 BUG46603 : fast/frames/lots-of-objects.html = PASS TIMEOUT
2848
2849 // LayoutTestController::pageProperty is not implemented for Chromium yet.
2850 BUGWK35961 : printing/page-rule-selection.html = TEXT
2851
2852 // Needs to implement layoutTestController.dumpResourceResponseMIMETypes()
2853 BUG46872 : fast/preloader = TEXT
2854 BUG46872 : fast/dom/HTMLLinkElement/prefetch.html = TIMEOUT
2855 BUG46872 : http/tests/loading/preload-slow-loading.php = TEXT
2856
2857 // Became a flaky crash in http://trac.webkit.org/log/?verbose=on&rev=61417&stop_rev=61393
2858 BUG46974 WIN : inspector/audits-panel-functional.html = CRASH PASS
2859
2860 BUG47035 WIN DEBUG : fast/loader/stateobjects/document-destroyed-navigate-back-with-fragment-scroll.html = PASS TEXT
2861
2862 // CSS3 Hyphenation landed in http://trac.webkit.org/changeset/61548
2863 // We don't implement it yet.
2864 BUG47083 : fast/text/hyphenate-character.html = IMAGE+TEXT
2865 BUG47083 : fast/text/hyphens.html = IMAGE+TEXT
2866
2867 // Related to https://bugs.webkit.org/show_bug.cgi?id=35350
2868 BUG45048 LINUX MAC : fast/events/show-modal-dialog-onblur-onfocus.html = FAIL
2869 BUG45048 WIN : fast/events/show-modal-dialog-onblur-onfocus.html = TIMEOUT
2870 BUG45048 LINUX MAC : fast/harness/show-modal-dialog.html = FAIL
2871 BUG45048 WIN : fast/harness/show-modal-dialog.html = TIMEOUT
2872
2873 // WebKit roll 61547:61629. Still need to investigate.
2874 BUG_HCLAM : fast/js/script-line-number.html = TEXT
2875
2876 // LayoutTestController::isPageBoxVisible, pageAreaRectInPixels, and preferredPageSizeInPixels are not implemented yet for Chromium.
2877 BUGWK37538 : printing/page-format-data.html = TEXT
2878
2879 // First noticed on trybots after r61836, now in the tree.
2880 BUG_MNAGANOV LINUX : fast/js/Object-create.html = CRASH FAIL
2881
2882 // Produces different results on Mac dbg.
2883 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-appearances-capacity.html = FAIL
2884 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-element.html = FAIL
2885 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-optimums.html = FAIL
2886 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles.html = FAIL
2887 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles-changing-pseudo.html = FAIL
2888
2889
2890 BUGWK41311 WIN LINUX : fast/borders/border-radius-circle.html = IMAGE
2891 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-01.html = IMAGE
2892 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-02.html = IMAGE
2893 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-03.html = IMAGE
2894 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-01.html = IMAGE
2895 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-02.html = IMAGE
2896 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-03.html = IMAGE
2897 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-04.html = IMAGE
2898 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed04.html = IMAGE
2899 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed05.html = IMAGE
2900 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed06.html = IMAGE
2901 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted04.html = IMAGE
2902 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted05.html = IMAGE
2903 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted06.html = IMAGE
2904 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble04.html = IMAGE
2905 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble05.html = IMAGE
2906 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble06.html = IMAGE
2907 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble07.html = IMAGE
2908 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble08.html = IMAGE
2909 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble09.html = IMAGE
2910
2911 // Speech input is not yet enabled.
2912 BUG44844: fast/forms/input-appearance-numberandspeech.html = IMAGE+TEXT
2913 BUG44844: fast/forms/input-appearance-searchandspeech.html = IMAGE+TEXT
2914 BUG44844: fast/forms/input-appearance-speechbutton.html = IMAGE+TEXT
2915
2916 // v8 bindings for dataset need to be implemented.
2917 BUG48133 :  fast/dom/dataset-xhtml.xhtml = TEXT
2918 BUG48133 :  fast/dom/dataset.html = TEXT
2919
2920 // Flaky tests.
2921 BUG44345 LINUX : svg/zoom/text/zoom-hixie-mixed-009.xml = IMAGE PASS
2922 BUG44346 LINUX : svg/zoom/page/zoom-hixie-mixed-009.xml = IMAGE PASS
2923 BUG44347 LINUX : svg/hixie/mixed/009.xml = IMAGE PASS
2924 BUG48110 WIN LINUX : fast/dom/HTMLDocument/activeElement.html = PASS TEXT
2925 BUG48139 LINUX : fast/js/comparison-operators-less.html = CRASH PASS
2926 BUG48144 LINUX : fast/js/activation-object-function-lifetime.html = CRASH PASS
2927
2928 // Failing/flaky.
2929 BUG48239 : fast/js/function-apply.html = TEXT
2930 BUG48239 WIN LINUX : fast/js/function-apply-aliased.html = TEXT PASS
2931 BUG48239 : fast/js/function-apply-many-args.html = TEXT
2932
2933 // Needs rebaselining after http://trac.webkit.org/changeset/62662/
2934 BUG48452 LINUX MAC : svg/custom/use-font-face-crash.svg = IMAGE+TEXT IMAGE
2935
2936 // Times out after http://trac.webkit.org/changeset/62739/
2937 BUG48550 SKIP : plugins/return-negative-one-from-write.html = TIMEOUT
2938
2939 BUG48668 MAC : svg/W3C-SVG-1.1/struct-use-01-t.svg = FAIL
2940
2941 // These ietestcenter tests still don't pass. Careful before removing these
2942 // that the baselines aren't incorrect
2943 // (like in: https://bugs.webkit.org/show_bug.cgi?id=42215)
2944 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-1.html = TEXT
2945 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-2.html = TEXT
2946 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-1.html = TEXT
2947 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-2.html = TEXT
2948 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-1.html = TEXT
2949 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-2.html = TEXT
2950 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-3.html = TEXT
2951 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-4.html = TEXT
2952 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-5.html = TEXT
2953 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-7.html = TEXT
2954 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-178.html = TEXT
2955 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-179.html = TEXT
2956 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-180.html = TEXT
2957 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-12.html = TEXT
2958 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-13.html = TEXT
2959 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-14.html = TEXT
2960 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-24.html = TEXT
2961 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-25.html = TEXT
2962 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-28.html = TEXT
2963 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-29.html = TEXT
2964 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-7.html = TEXT
2965 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-3-8.html = TEXT
2966 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-4-9.html = TEXT
2967 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-9-b-i-6.html = TEXT
2968 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-3-12.html = TEXT
2969 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-3-13.html = TEXT
2970 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-3-24.html = TEXT
2971 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-3-25.html = TEXT
2972 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-3-28.html = TEXT
2973 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-3-7.html = TEXT
2974 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-8-b-i-6.html = TEXT
2975 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-10.html = TEXT
2976 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-18.html = TEXT
2977 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-34.html = TEXT
2978 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.6.html = TEXT
2979 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.1-1.html = TEXT
2980 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.2-1.html = TEXT
2981 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.3-1.html = TEXT
2982 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.4-1.html = TEXT
2983 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.5-1.html = TEXT
2984 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-212.html = TEXT
2985 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-213.html = TEXT
2986 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-214.html = TEXT
2987 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-215.html = TEXT
2988 BUG48737 WIN LINUX MAC SKIP : ietestcenter/Javascript/15.4.4.15-3-14.html = TIMEOUT
2989 BUG48737 WIN LINUX MAC SKIP : ietestcenter/Javascript/15.4.4.15-3-29.html = TIMEOUT
2990 BUG48737 WIN LINUX MAC SKIP : ietestcenter/Javascript/15.4.4.15-3-8.html = TIMEOUT
2991
2992 // Broken prior to r62921.
2993 BUG48696 WIN LINUX : fast/forms/focus2.html = CRASH
2994 BUG48696 WIN LINUX MAC : fast/forms/tabs-with-modifiers.html = CRASH
2995
2996 BUG49029 WIN LINUX MAC : fast/js/object-literal-syntax.html = TEXT
2997
2998 BUG48859 WIN : fast/inline/continuation-outlines-with-layers-2.html = IMAGE+TEXT
2999
3000 // Somehow rebaseline in http://trac.webkit.org/changeset/63196 failed.
3001 // Need investigation.
3002 BUGWK38016 WIN : svg/custom/foreign-object-skew.svg = FAIL
3003
3004 BUG49031 WIN LINUX MAC : http/tests/mime/uppercase-mime-type.html = MISSING
3005 BUG24233 WIN : editing/selection/drag-in-iframe.html = IMAGE+TEXT PASS
3006
3007 BUG49021 : userscripts/simple-stylesheet.html = TEXT
3008 BUG49021 : userscripts/user-style-all-frames.html = TEXT
3009 BUG49021 : userscripts/user-style-top-frame-only.html = TEXT
3010
3011 BUGWK42241 LINUX : svg/custom/text-rotated-gradient.svg = IMAGE PASS
3012
3013 BUGWK42249 MAC : fast/repaint/moving-shadow-on-container.html = IMAGE
3014
3015 // These tests all fail because the expected output is wrong. The
3016 // reason is that JSC does not currently implement Object.freeze and
3017 // Object.isFrozen. These test has intentionally been marked as FAIL,
3018 // which makes it easy to fix this when webkit implements these ES5 features.
3019 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-21.html = FAIL
3020 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-24.html = FAIL
3021 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-1.html = FAIL
3022 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-2.html = FAIL
3023 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-1.html = FAIL
3024 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-1.html = FAIL
3025 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-2.html = FAIL
3026 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-1.html = FAIL
3027 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-1.html = FAIL
3028 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-2.html = FAIL
3029 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-3.html = FAIL
3030 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-4.html = FAIL
3031 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-5.html = FAIL
3032 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-6.html = FAIL
3033 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-7.html = FAIL
3034 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-8.html = FAIL
3035 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-9.html = FAIL
3036 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-10.html = FAIL
3037 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-11.html = FAIL
3038 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-12.html = FAIL
3039 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-13.html = FAIL
3040 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-14.html = FAIL
3041 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-15.html = FAIL
3042 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-16.html = FAIL
3043 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-17.html = FAIL
3044 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-18.html = FAIL
3045 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-19.html = FAIL
3046 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-20.html = FAIL
3047 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-21.html = FAIL
3048 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-22.html = FAIL
3049 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-23.html = FAIL
3050 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-24.html = FAIL
3051 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-25.html = FAIL
3052 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-26.html = FAIL
3053 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-27.html = FAIL
3054 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-6.html = FAIL
3055
3056 // These tests all fail because the expected output is wrong. The
3057 // reason is that JSC does not currently implement Object.seal and
3058 // Object.isSealed. These test has intentionally been marked as FAIL,
3059 // which makes it easy to fix this when webkit implements these ES5 features.
3060 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-1.html = FAIL
3061 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-2.html = FAIL
3062 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-1.html = FAIL
3063 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-1.html = FAIL
3064 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-10.html = FAIL
3065 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-11.html = FAIL
3066 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-12.html = FAIL
3067 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-13.html = FAIL
3068 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-14.html = FAIL
3069 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-15.html = FAIL
3070 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-16.html = FAIL
3071 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-17.html = FAIL
3072 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-18.html = FAIL
3073 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-19.html = FAIL
3074 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-2.html = FAIL
3075 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-20.html = FAIL
3076 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-21.html = FAIL
3077 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-22.html = FAIL
3078 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-23.html = FAIL
3079 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-24.html = FAIL
3080 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-25.html = FAIL
3081 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-26.html = FAIL
3082 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-27.html = FAIL
3083 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-3.html = FAIL
3084 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-4.html = FAIL
3085 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-5.html = FAIL
3086 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-6.html = FAIL
3087 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-7.html = FAIL
3088 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-8.html = FAIL
3089 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-9.html = FAIL
3090 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-5.html = FAIL
3091 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-20.html = FAIL
3092 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-23.html = FAIL
3093 BUGWK42371 : ietestcenter/Javascript/15.2.3.4-4-2.html = FAIL
3094 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-1.html = FAIL
3095 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-2.html = FAIL
3096 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-1.html = FAIL
3097
3098 BUGWK42403 LINUX WIN : svg/W3C-SVG-1.1/masking-intro-01-f.svg = IMAGE
3099 BUGWK42403 LINUX WIN : svg/css/circle-in-mask-with-shadow.svg = IMAGE
3100 BUGWK42403 LINUX WIN : svg/custom/grayscale-gradient-mask.svg = IMAGE
3101 BUGWK42403 : svg/custom/mask-colorspace.svg = IMAGE
3102
3103 BUGWK42428 : svg/custom/convolution-crash.svg = IMAGE
3104 BUGWK42428 LINUX WIN : svg/W3C-SVG-1.1/filters-conv-01-f.svg = IMAGE+TEXT
3105
3106 // Need setPrinting.
3107 BUGWK20011 : printing/setPrinting.html = FAIL
3108
3109 // Needs V8 change.
3110 BUG49343 : fast/js/reserved-words-as-property.html = TEXT
3111
3112 BUG42486 MAC DEBUG : svg/filters/filter-empty-g.svg = CRASH
3113
3114 BUG42598 : http/tests/misc/401-alternative-content.php = TEXT
3115 BUG42598 : http/tests/xmlhttprequest/failed-auth.html = TEXT
3116
3117 // This one started failing at r63728.
3118 BUGWK42845 : html5lib/runner.html = TEXT
3119
3120 BUGWK42769 : http/tests/xmlhttprequest/remember-bad-password.html = TEXT
3121 BUGWK42769 : http/tests/security/401-logout/401-logout.php = TIMEOUT
3122
3123 // Flaky since at least chromium r52834, WebKit r63615.
3124 BUG49970 : platform/chromium/plugins/call-as-function.html = PASS TEXT
3125
3126 // Need rebaseline
3127 BUGWK24906 : fast/text/backslash-to-yen-sign-euc.html = FAIL
3128
3129 // Fails since WebKit r63994
3130 BUGWK42964 SLOW : tables/mozilla/other/slashlogo.html = FAIL
3131 // Flaky since WebKit r63994
3132 BUGWK42964 WIN LINUX : tables/mozilla_expected_failures/bugs/bug89315.html = PASS FAIL
3133
3134 // Fails since WebKit r64156
3135 BUGWK43086 : fast/canvas/canvas-ImageData-behaviour.html = TEXT
3136
3137 // Fails because of http://trac.webkit.org/changeset/64186/
3138 BUG42691 : fast/lists/alpha-boundary-values.html = TEXT
3139 BUG42691 : fast/lists/alpha-list-wrap.html = TEXT
3140 BUG42691 : fast/lists/decimal-leading-zero.html = TEXT
3141 BUG42691 : fast/lists/list-style-type-dynamic-change.html = TEXT
3142 BUG42691 : fast/lists/w3-css3-list-styles-alphabetic.html = TEXT
3143 BUG42691 : fast/lists/w3-css3-list-styles-numeric.html = TEXT
3144 BUG42691 : fast/lists/w3-list-styles.html = TEXT
3145 BUG42691 : fast/lists/li-values.html = TIMEOUT
3146