2010-05-03 Yaar Schnitman <yaar@chromium.org>
[WebKit-https.git] / LayoutTests / platform / chromium / test_expectations.txt
1 // This file consists of lines with specifications of what
2 // to expect from layout test cases. The test cases can be directories
3 // in which case the expectations apply to all test cases in that
4 // directory and any subdirectory. The format of the file is along the
5 // lines of:
6 //
7 // fast/js/fixme.js = FAIL
8 // fast/js/flaky.js = FAIL PASS
9 // fast/js/crash.js = CRASH TIMEOUT FAIL PASS
10 //
11 // The format of a test line is as follows:
12 // METADATA : relative/path/to/test.html = EXPECTATIONS
13 //
14 // Valid values for METADATA:
15 //
16 // BUG[0-9]+: See this bug for more information. Every test that isn't marked
17 //            WONTFIX should have a BUG annotation.
18 // SKIP: Doesn't run the test.
19 // SLOW: The test takes a long time to run, but does not timeout indefinitely.
20 // DEFER: For tests we'll fix in the future.
21 // WONTFIX: For tests that we never intend to pass on a given platform.
22 // DEBUG: Expectations apply only to the debug build.
23 // RELEASE: Expectations apply only to release build.
24 // LINUX/WIN/WIN-XP/WIN-VISTA/MAC: Expectations apply only to these platforms.
25 //
26 // Valid values for EXPECTATIONS:
27 //
28 // PASS: Test should pass
29 // CRASH: Test should crash
30 // TIMEOUT: Test should timeout
31 // IMAGE: Test will produce an incorrect image dump
32 // TEXT: Test will produce incorrect text output (either full or simplified)
33 // IMAGE+TEXT: Test will produce both incorrect text and images
34 // FAIL: Test will produce either incorrect text, images, or both
35 //
36 // If a line contains multiple expectations, it is considered "flakey",
37 // because it means that we're not producing consistent, reliable results.
38 //
39 // For example,
40 // LINUX : media = PASS FAIL
41 //
42 // The above means that all the media tests are flaky, but only on Linux.
43 //
44 // Other examples:
45 //
46 // SKIP : fast/js/no-good.js = TIMEOUT PASS
47 // DEBUG : fast/js/no-good.js = TIMEOUT PASS
48 // DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
49 // LINUX DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
50 // BUG1234 DEBUG MAC : fast/js/no-good.js = TIMEOUT PASS
51 //
52 // Notes:
53 // -A test cannot be both SLOW and TIMEOUT
54 // -A test can be included twice, but not via the same path.
55 // -If a test is included twice, then the more precise path wins.
56 // -CRASH tests cannot be WONTFIX
57
58 // -----------------------------------------------------------------
59 // SLOW TESTS
60 // -----------------------------------------------------------------
61
62 BUG24182 SLOW : fast/js/regexp-overflow.html = PASS
63 BUG24182 SLOW RELEASE : http/tests/misc/DOMContentLoaded-event.html = PASS
64 BUG24182 SLOW LINUX DEBUG : http/tests/misc/DOMContentLoaded-event.html = PASS
65 BUG24182 SLOW LINUX MAC RELEASE : http/tests/navigation/multiple-back-forward-entries.html = PASS
66 BUG24182 SLOW LINUX DEBUG : http/tests/navigation/multiple-back-forward-entries.html = PASS
67 BUG24182 SLOW : http/tests/xmlhttprequest/simple-cross-origin-progress-events.html = PASS
68 BUG24182 SLOW WIN MAC : svg/custom/invisible-text-after-scrolling.xhtml = PASS
69 BUG24182 SLOW : tables/mozilla/other/slashlogo.html = PASS
70 BUG24182 SLOW WIN RELEASE : tables/mozilla/bugs/bug113235-1.html = PASS
71 BUG24182 SLOW DEBUG : fast/js/toString-and-valueOf-override.html = PASS
72
73 // This tests is normally <1 second, but occasionally takes >20s.
74 BUG24182 SLOW WIN RELEASE : fast/dom/Window/webkitConvertPoint.html = PASS
75
76 BUG24182 WIN RELEASE SLOW : http/tests/loading/redirect-methods.html = PASS
77 BUG24182 WIN SLOW : svg/hixie/perf/007.xml = PASS
78 BUG24182 SLOW MAC RELEASE : dom/html/level2/html/HTMLImageElement01.html = PASS
79 BUG24182 SLOW WIN RELEASE : http/tests/local/file-url-sent-as-referer.html = PASS
80 BUG24182 SLOW WIN DEBUG : svg/carto.net/window.svg = PASS
81 BUG24182 SLOW LINUX DEBUG : fast/xpath/4XPath/Borrowed/cz_20030217.html = PASS
82 BUG24182 SLOW WIN MAC DEBUG : tables/mozilla/bugs/45621.html = PASS
83 //BUG24852 started failing since webkit 49583
84 //BUG24182 SLOW WIN : css1/font_properties/font.html = PASS
85 BUG24182 SLOW WIN : http/tests/security/xssAuditor/meta-tag-http-refresh-javascript-url.html = PASS
86 BUG24182 SLOW WIN RELEASE : http/tests/security/cross-origin-css.html = PASS
87 BUG24182 SLOW WIN RELEASE : fast/loader/local-CSS-from-local.html = PASS
88 BUG24182 WIN RELEASE SLOW : http/tests/incremental/split-hex-entities.pl = PASS
89 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/XMLHttpRequestException.html = PASS
90 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/connection-error-sync.html = PASS
91 BUG24182 WIN RELEASE SLOW : http/tests/loading/onload-vs-immediate-refresh.pl = PASS
92 //BUG24182 WIN LINUX SLOW : editing/selection/extend-selection.html = PASS
93 BUG24182 SLOW WIN : fast/images/svg-as-background.html = PASS
94 BUG24182 SLOW WIN : fast/backgrounds/svg-as-background-5.html = PASS
95 BUG24182 WIN DEBUG SLOW: inspector/console-dirxml.html = PASS
96 BUG24182 DEBUG SLOW : fast/dom/Window/window-function-frame-getter-precedence.html = PASS
97 BUG24182 SLOW DEBUG : fast/frames/frame-limit.html = PASS
98 BUG24182 SLOW : http/tests/cache/subresource-failover-to-network.html = PASS
99 BUG24182 WIN DEBUG : animations/play-state.html = PASS TEXT
100 BUG24182 SLOW WIN RELEASE : animations/play-state.html = PASS
101
102 // Usually <1s in release, ~1s in debug, but occasionally >5s in release.
103 BUG27335 WIN RELEASE : plugins/embed-attributes-setting.html = PASS TIMEOUT
104 BUG27335 WIN DEBUG SLOW : plugins/embed-attributes-setting.html = PASS
105
106 // --- collecting results for supported-xml-content-types.html ---
107 // was slow, started to timeout
108 BUG18702 WIN : http/tests/xmlhttprequest/supported-xml-content-types.html = PASS TIMEOUT
109
110 BUG34759 WIN DEBUG SLOW : inspector/console-log-before-inspector-open.html = PASS
111
112 BUG36539 SLOW : http/tests/misc/uncacheable-script-repeated.html = PASS
113
114 // -----------------------------------------------------------------
115 // SKIPPED TESTS
116 // -----------------------------------------------------------------
117
118 // Since V8 is more interruptible than other engines, they use the standard
119 // long-running-script mechanism to handle very-long-running regexps too.
120 // See http://code.google.com/p/v8/issues/detail?id=287
121 WONTFIX SKIP : fast/js/regexp-overflow-too-big.html = TIMEOUT
122
123 // XHTML tests.  These tests seem like they work, but only because the
124 // expected output expects to see JS errors.  There is no point in running
125 // these tests, because they are giving us a false sense of testing that isn't
126 // really happening.  Furthermore, since they appear to pass if we do try to
127 // run them, we can't even list them as permanently expected to fail.
128 BUG24185 WONTFIX SKIP : dom/xhtml = PASS
129
130 // We do not want to support Legacy mac encodings on Windows/Linux.
131 // On Mac, we can support them by building platform/text/mac, but
132 // probably we don't want there, either.
133 WONTFIX SKIP WIN LINUX : fast/encoding/char-encoding-mac.html = FAIL
134
135 // Fails due to different window.close() rules.  We need to decide whether we
136 // ever expect to pass this.  Now also timing out.
137 BUG24189 WONTFIX SKIP : fast/dom/open-and-close-by-DOM.html = FAIL
138
139 // Skip because of WebKit bug 18512. These bugs "poison" future tests, causing
140 // all SVG objects with fill="red" to be rendered in green.
141 WONTFIX SKIP : svg/custom/fill-SVGPaint-interface.svg = PASS
142 WONTFIX SKIP : svg/custom/getPresentationAttribute.svg = PASS
143
144 // WML is still an inprogress feature upstream. Chromium does not build
145 // with WML support, so skip its tests.
146 WONTFIX SKIP : wml = FAIL
147 WONTFIX SKIP : http/tests/wml = FAIL
148 WONTFIX SKIP : fast/wml = FAIL
149
150 // These tests are based on the JSC JavaScript profiler. The V8 JavaScript
151 // profiler is in development and will use a different approach than JSC and
152 // most likely these tests will always be JSC specific.
153 WONTFIX SKIP : fast/profiler = FAIL TIMEOUT
154
155 // This test doesn't terminate because it contains exponential
156 // regexps.  It is safe to disable because we run the same tests
157 // (sans the nonterminating ones) as part of the v8 tests.
158 WONTFIX SKIP : fast/regex/test1.html = PASS
159
160 // We use worker_uitests to run workers tests. Don't run them in test_shell.
161 WONTFIX SKIP : fast/workers = PASS TIMEOUT FAIL
162 WONTFIX SKIP : http/tests/workers = PASS TIMEOUT FAIL
163 WONTFIX SKIP : http/tests/xmlhttprequest/workers = PASS TIMEOUT FAIL
164 WONTFIX SKIP : http/tests/eventsource/workers = PASS TIMEOUT FAIL
165 WONTFIX SKIP : websocket/tests/workers/ = PASS TIMEOUT FAIL
166
167 // Page Cache - based tests. Chromium disables page cache because the WebKit page cache keeps previously
168 // loaded pages alive in memory to be able to quickly substitute them when user clicks History buttons.
169 // Chromium wants those to be separate navigations made via browser process to be able to make decision
170 // on which renderer process to use for each of them.
171 WONTFIX SKIP BUG19635 : fast/harness/use-page-cache.html = TIMEOUT FAIL
172 WONTFIX SKIP BUG19635 : fast/dom/Window/timer-resume-on-navigation-back.html = TIMEOUT FAIL
173 // Depends on page cache, as far as I can tell.
174 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached.html = TIMEOUT FAIL
175 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached-with-frames.html = TIMEOUT
176 WONTFIX SKIP BUG19635 : media/restore-from-page-cache.html = TIMEOUT
177 WONTFIX SKIP BUG19635 : loader/go-back-to-different-window-size.html = TIMEOUT TEXT
178 WONTFIX SKIP BUG19635 : fast/loader/crash-copying-backforwardlist.html = TEXT
179 WONTFIX SKIP BUG19635 : fast/frames/frame-crash-with-page-cache.html = TEXT
180 WONTFIX SKIP BUG19635 : fast/harness/page-cache-crash-on-data-urls.html = TEXT
181
182 // Tests that rely on cross-process MessagePorts.  No point in running them in
183 // test_shell, since we'd have to use a completely different implementation from
184 // what is used in the browser.
185 WONTFIX SKIP : fast/events/message-channel-gc-2.html = FAIL
186 WONTFIX SKIP : fast/events/message-channel-gc-3.html = FAIL
187 WONTFIX SKIP : fast/events/message-channel-gc-4.html = FAIL
188 WONTFIX SKIP : fast/events/message-channel-gc.html = FAIL
189 WONTFIX SKIP : fast/events/message-channel-listener-circular-ownership.html = FAIL
190 WONTFIX SKIP : fast/events/message-port-clone.html = FAIL
191 WONTFIX SKIP : fast/events/message-port-deleted-document.html = FAIL
192 WONTFIX SKIP : fast/events/message-port-deleted-frame.html = FAIL
193 WONTFIX SKIP : fast/events/message-port-inactive-document.html = FAIL
194 WONTFIX SKIP : fast/events/message-port-no-wrapper.html = FAIL
195 WONTFIX SKIP : fast/events/message-port.html = FAIL
196 WONTFIX SKIP : fast/events/message-port-multi.html = FAIL
197 WONTFIX SKIP : http/tests/security/MessagePort/event-listener-context.html = FAIL
198
199 // Implement java testing harness.
200 BUG36681 DEFER SKIP : java = TEXT
201 // Chrome does not support Java LiveConnect.
202 WONTFIX SKIP : java/lc3 = TEXT
203
204 // this test doesn't make sense on Win or Mac.
205 // TODO: move to platform/chromium-linux/.
206 WONTFIX SKIP MAC WIN : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = FAIL
207
208 // -----------------------------------------------------------------
209 // WONTFIX TESTS
210 // -----------------------------------------------------------------
211
212 // This test is completely timing dependent.  It is testing the time
213 // between a key event and a search event.  You cannot count on this
214 // always being exactly the same.
215 WONTFIX DEBUG : fast/forms/search-event-delay.html = PASS TEXT
216 WONTFIX SLOW WIN RELEASE : fast/forms/search-event-delay.html = FAIL PASS
217 WONTFIX SLOW MAC RELEASE : fast/forms/search-event-delay.html = FAIL PASS CRASH
218 WONTFIX LINUX RELEASE : fast/forms/search-event-delay.html = FAIL PASS
219
220 // Chrome uses different keyboard accelerators from those used by Safari, so
221 // these tests will always fail.
222 // TODO(pinkerton): these should probably pass on Mac since we want Emacs
223 // keybindings but they currently do not.
224 WONTFIX LINUX WIN DEBUG : editing/pasteboard/emacs-cntl-y-001.html = FAIL
225 WONTFIX LINUX RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
226 WONTFIX SLOW WIN RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
227 WONTFIX : editing/pasteboard/emacs-ctrl-a-k-y.html = FAIL
228 WONTFIX : editing/pasteboard/emacs-ctrl-k-y-001.html = FAIL
229 WONTFIX : editing/input/emacs-ctrl-o.html = FAIL
230
231 // Checks for very kjs-specific garbage collector behavior.
232 // Would have to be implemented much differently to work in v8.
233 WONTFIX : fast/dom/gc-10.html = FAIL
234
235 // This fails because we're missing various useless apple-specific
236 // properties on the window object.
237 // This test also timeouts in Debug mode.
238 BUG24187 WONTFIX SLOW DEBUG : fast/dom/Window/window-properties.html = FAIL
239 BUG24187 WONTFIX SLOW WIN RELEASE : fast/dom/Window/window-properties.html = FAIL
240 BUG24187 WONTFIX LINUX MAC RELEASE : fast/dom/Window/window-properties.html = FAIL
241
242 // Safari specific test to ensure that JavaScript errors aren't logged when in
243 // private browsing mode.
244 WONTFIX : http/tests/security/cross-frame-access-private-browsing.html = FAIL
245
246 // Chromium doesn't implement private browsing in the renderer.
247 WONTFIX : plugins/private-browsing-mode.html = FAIL
248 WONTFIX : plugins/private-browsing-mode-2.html = TEXT
249
250 // We don't let anyone set status in the browser.
251 WONTFIX : plugins/set-status.html = TEXT
252
253 // We don't care about dashboard compatibility mode.
254 WONTFIX SKIP : http/tests/xmlhttprequest/default-content-type-dashboard.html = FAIL
255 WONTFIX SKIP : http/tests/xmlhttprequest/svg-created-by-xhr-disallowed-in-dashboard.html = FAIL
256 WONTFIX : svg/custom/embedded-svg-disallowed-in-dashboard.xml = FAIL
257 WONTFIX : svg/custom/manually-parsed-embedded-svg-disallowed-in-dashboard.html = FAIL
258 WONTFIX : svg/custom/manually-parsed-svg-disallowed-in-dashboard.html = FAIL
259 WONTFIX SKIP : svg/custom/svg-disallowed-in-dashboard-object.html = FAIL
260 WONTFIX : fast/canvas/canvas-gradient-addStop-error.html = FAIL
261
262
263 // Chrome uses different keyboard accelerators from those used by Safari, so
264 // these tests will always fail.
265 // TODO(ericroman): can the following 2 tests be removed from this list, since they pass?
266 WONTFIX : fast/events/keydown-1.html = FAIL
267 WONTFIX LINUX WIN : fast/events/option-tab.html = FAIL
268
269 // Chrome does not support WebArchives.
270 BUG10395 WONTFIX SKIP : webarchive = FAIL PASS
271 BUG10395 WONTFIX SKIP : svg/webarchive = FAIL PASS
272 BUG10395 WONTFIX SKIP : svg/custom/image-with-prefix-in-webarchive.svg = FAIL PASS
273 BUG10395 WONTFIX SKIP : http/tests/webarchive = FAIL PASS
274
275 // We don't support ACCELERATED_COMPOSITING. Skipping because some tests in this
276 // directory don't have pixel results.
277 BUG15733 WONTFIX SKIP : compositing = FAIL PASS TIMEOUT
278
279 // Run the Mac-specific platform tests, but only to check for crashes.
280 WONTFIX : platform/gtk = FAIL PASS
281 WONTFIX : platform/mac = FAIL PASS TIMEOUT
282 WONTFIX : platform/mac-leopard = FAIL PASS
283 WONTFIX : platform/mac-tiger = FAIL PASS
284 WONTFIX : platform/qt = FAIL PASS
285 WONTFIX SKIP : plugins/qt-qwidget-plugin.html = FAIL
286 WONTFIX SKIP : platform/mac/fast/text/international/Geeza-Pro-vertical-metrics-adjustment.html = PASS
287
288 WONTFIX LINUX MAC : platform/win = FAIL PASS
289
290 // This is a Safari specific test to make WebKit behave like AppKit on the Mac.
291 // We do not support it because PLATFORM(MAC) is not defined for the mac version.
292 WONTFIX MAC : platform/mac/editing/deleting/backward-delete.html = FAIL
293
294 // Ignored because we do not have OBJC bindings
295 WONTFIX SKIP : editing/pasteboard/paste-RTFD.html = FAIL
296 WONTFIX SKIP : editing/pasteboard/paste-TIFF.html = FAIL
297 WONTFIX SKIP : plugins/jsobjc-dom-wrappers.html = FAIL
298 WONTFIX SKIP : plugins/jsobjc-simple.html = FAIL
299 WONTFIX SKIP : plugins/root-object-premature-delete-crash.html = FAIL
300 WONTFIX SKIP : plugins/throw-on-dealloc.html = FAIL
301 WONTFIX SKIP : plugins/undefined-property-crash.html = FAIL
302
303 // Uses __apple_runtime_object
304 WONTFIX SKIP : plugins/call-as-function-test.html = FAIL
305
306 // Ignore test because it tries to load .pdf files in <img> tags.
307 WONTFIX LINUX WIN : fast/images/pdf-as-image-landscape.html = FAIL
308 WONTFIX LINUX WIN : fast/images/pdf-as-image.html = FAIL
309 WONTFIX LINUX WIN : fast/replaced/pdf-as-image.html = FAIL
310
311 // These tests try to print a PDF file as the expected result.  I don't think
312 // we plan on supporting this anytime soon.
313 WONTFIX SKIP : printing/media-queries-print.html = PASS
314 WONTFIX SKIP : printing/compositing-layer-printing.html = PASS
315
316 // Chrome doesn't call the willCacheResponse callback (a method
317 // of ResourceHandleClient).  That function is Mac-specific.
318 WONTFIX SKIP : http/tests/misc/willCacheResponse-delegate-callback.html = FAIL
319
320 // Checks for very kjs-specific garbage collector
321 // behavior. Gc-9 is completely braindamaged; it tests that certain
322 // properties are reset by the garbage collector. It looks to pass recently.
323 WONTFIX : fast/dom/gc-9.html = FAIL
324
325 // This test checks that ((new Error()).message is undefined, which is
326 // a direct contradiction of the javascript spec 15.11.4.3 which
327 // says that it must be a string.
328 WONTFIX : fast/js/kde/evil-n.html = FAIL
329
330 // This test checks that properties of arguments arrays are non-enumerable
331 // which is incorrect according to the ES5 spec.
332 WONTFIX : fast/js/kde/function.html = FAIL
333
334 // This test is broken.  The regular expression used contains an error
335 // which kjs swallows and returns false, which is the expected result,
336 // but for which we issue a syntax error.
337 WONTFIX : fast/js/code-serialize-paren.html = FAIL
338
339 // These tests check for a kjs-specific extension, that source file
340 // name and line numbers are available as properties on exception
341 // objects.  We handle error positions differently.
342 WONTFIX : fast/js/exception-linenums-in-html-1.html = FAIL
343 WONTFIX : fast/js/exception-linenums-in-html-2.html = FAIL
344 WONTFIX : fast/js/exception-linenums.html = FAIL
345 WONTFIX : fast/js/exception-expression-offset.html = FAIL
346
347 // These tests rely on specific details of decompilation of
348 // functions. V8 always returns the source code as written; there's
349 // no decompilation or pretty printing involved except for
350 // certain "native" functions where the V8 output does not include
351 // newline characters. This is working as intended and we don't care
352 // if the tests pass or fail. (It should probably simply be re-baselined.)
353 WONTFIX : fast/js/function-names.html = FAIL
354
355 // This test relies on KJS specific implementation
356 // (window.GCController.getJSObjectCount), which we have no intention of
357 // supporting.
358 WONTFIX SKIP : fast/dom/Window/timeout-released-on-close.html = FAIL
359
360 // These tests expect a tiff decoder, which we don't have.
361 WONTFIX LINUX WIN : fast/images/embed-image.html = FAIL
362 WONTFIX LINUX WIN : fast/images/object-image.html = FAIL
363
364 // Safari has a unique handling of the BOM characters among browsers.
365 // There is a strong suspicion that this is a security problem, so we
366 // follow the rest of the browsers on this one.
367 WONTFIX : fast/js/removing-Cf-characters.html = FAIL
368
369 // These tests fail in all but the PST/PDT time zone.
370 // Another reason for failure is that, for compatability, we don't obey
371 // the ECMA standard on DST exactly.  We use the OS's facilities to
372 // convert to local time for dates within the UNIX 32-bit epoch,
373 // and follow the ECMA rules for dates outside that range.
374 // The ECMA rules say to use current DST rules for all dates,
375 // and that all dates that are separated by an exact multiple of
376 // 28 years must behave exactly the same.
377 // OS local time services are more accurate than this ECMA rule,
378 // which is a discrepancy.
379 WONTFIX SKIP : fast/js/date-DST-time-cusps.html = PASS FAIL
380 WONTFIX SKIP : fast/js/date-big-setdate.html = PASS FAIL
381
382 // The following tests fail because of difference in how the test shell
383 // navigation controller tracks navigations as compared to how the Mac
384 // implementation does it.
385 WONTFIX : http/tests/history/redirect-200-refresh-0-seconds.pl = FAIL
386 WONTFIX : http/tests/history/redirect-js-location-replace-0-seconds.html = FAIL
387 WONTFIX DEBUG : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
388 WONTFIX LINUX MAC RELEASE : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
389 WONTFIX SLOW WIN RELEASE : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
390 WONTFIX : http/tests/history/redirect-js-location-replace-before-load.html = FAIL
391 WONTFIX : http/tests/history/redirect-meta-refresh-0-seconds.html = FAIL
392
393 // This test expects weird behavior of __defineGetter__ on the
394 // window object.  It expects variables introduced with 'var x = value'
395 // to behave differently from variables introduced with 'y = value'.
396 // This just seems wrong and should have very low priority.
397 // Agreed, not required for Beta, we can debate this with WebKit post Beta
398 // (eseidel, 4/25)
399 // Ignore this until we see evidence that we need to support it.
400 WONTFIX : fast/dom/getter-on-window-object2.html = FAIL
401
402 // V8 doesn't stable sort and we currently have no intention of
403 // changing this.  The following tests only happen to pass due to
404 // the current algorithm used for sorting small arrays. If larger
405 // arrays were used in the tests, they would fail.
406 // It is tracked by: http://code.google.com/p/v8/issues/detail?id=90
407 WONTFIX : fast/js/comparefn-sort-stability.html = PASS
408 WONTFIX : fast/js/sort-stability.html = PASS
409
410 // We have no indication that anyone misses this and have currently no
411 // intention of implementing it.
412 WONTFIX : fast/js/function-dot-arguments.html = FAIL
413
414 // This is a Safari specific test used to document the set of global
415 // constructors they expose and the exact way they are printed.  Not
416 // important.
417 WONTFIX : fast/js/global-constructors.html = FAIL
418
419 // This test is not reliable.  The behavior depends on exactly how the
420 // stack limit is reached.  We're happy with our behavior on this test
421 // as long as we don't crash.
422 WONTFIX : fast/js/global-recursion-on-full-stack.html = FAIL
423
424 // Our DOM Storage implementation doesn't use WebKit's private browsing feature (even for incognito mode).
425 WONTFIX : storage/domstorage/localstorage/private-browsing-affects-storage.html = FAIL
426 WONTFIX : storage/domstorage/sessionstorage/private-browsing-affects-storage.html = FAIL
427
428 // These tests propagate auth credentials back to the renderer, which we
429 // don't want to do.
430 WONTFIX BUG21840 MAC LINUX DEBUG : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
431 WONTFIX BUG21840 LINUX RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
432 WONTFIX BUG21840 SLOW WIN RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
433 WONTFIX BUG21840 WIN DEBUG : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL CRASH
434 WONTFIX BUG21840 MAC RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL TIMEOUT
435
436 WONTFIX BUG21840 LINUX : http/tests/loading/basic-credentials-sent-automatically.html = FAIL CRASH
437 WONTFIX BUG21840 WIN : http/tests/loading/basic-credentials-sent-automatically.html = FAIL TIMEOUT
438 WONTFIX BUG21840 MAC : http/tests/loading/basic-credentials-sent-automatically.html = FAIL
439
440 // This checks the IDN behavior of WebKit/WebKit on Mac, not WebKit/WebCore or
441 // WebKit/JavaScriptCore. Chrome doesn't use WebKit/WebKit, and Chrome's IDN
442 // security model is different from it.
443 BUG21814 WONTFIX SKIP: fast/encoding/idn-security.html = FAIL
444
445 // Our implementation of global history is completely different, and
446 // these tests are irrelevant.
447 BUG23748 WONTFIX : http/tests/globalhistory = FAIL
448
449 // DataGrid was pulled from HTML5 spec, unlikely to re-emerge in the current form.
450 BUG17585 WONTFIX : fast/dom/HTMLDataGridElement = FAIL
451
452 // We are not going to support submitting a form to about:* pages.
453 // For more details, see discussions at issue 20570.
454 BUG20570 WONTFIX : fast/forms/get-forms-to-about-blank.html = FAIL
455
456 // xhtml mp tests were added in http://trac.webkit.org/changeset/43865 and are
457 // skipped on all platforms upstream.
458 // We are not planning to support these.
459 BUG12254 WONTFIX SKIP : fast/xhtmlmp = FAIL
460 BUG12254 WONTFIX SKIP : http/tests/xhtmlmp = FAIL
461
462 // This test requires LayoutTestController.setCacheModel, which we don't implement
463 // because we can't emulate the cahcing behaviors it expects.
464 WONTFIX : fast/dom/HTMLScriptElement/nested-execution.html = FAIL
465
466 // Deletion UI is a Mail-ism. We don't need to worry about this.
467 WONTFIX SKIP : editing/deleting/deletionUI-single-instance.html = FAIL IMAGE
468 WONTFIX SKIP : fast/dom/Element/id-in-deletebutton.html = TEXT
469
470 // Tests for FAST_MOBILE_SCROLLING. We don't use it.
471 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE+TEXT
472 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE+TEXT
473 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE
474 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE
475
476 // Tests for frameset flattening. Relevant only on mobile browsers.
477 WONTFIX SKIP : fast/frames/flattening = TIMEOUT
478
479 // This should be tested differently (see discussion on https://bugs.webkit.org/show_bug.cgi?id=35063).
480 // No need to waste cycles implementing harness support for this variant of the test.
481 WONTFIX SKIP : fast/loader/api-test-go-to-current-back-forward-item.html = TIMEOUT
482
483 // We're not planning to support rocker-based cursor navigation.
484 WONTFIX SKIP : fast/events/spatial-navigation = FAIL
485
486 // We're not planning to relax third-party cookie rules any time soon.
487 WONTFIX BUG37684 SKIP : http/tests/cookies/third-party-cookie-relaxing.html = FAIL
488
489 // -----------------------------------------------------------------
490 // CHROME REWRITTEN TESTS
491 // -----------------------------------------------------------------
492
493 // These tests have been rewritten, with the original being ignored,
494 // because they rely on being able to shadow the 'top' variable on the
495 // global object.  For security we disallow shadowing of top.
496 WONTFIX : editing/selection/click-before-and-after-table.html = FAIL
497
498 // We're taking a different approach on this test than Webkit does, related to
499 // whether we create a window via a plugin when target is _blank.
500 BUG24186 WONTFIX SKIP : plugins/get-url-with-blank-target.html = FAIL
501
502 // Dashboard-related test
503 WONTFIX SKIP : platform/mac/fast/css/dashboard-region-parser.html = FAIL
504
505 // Not a test?
506 WONTFIX SKIP : http/tests/incremental/pause-in-script-element.pl = FAIL
507
508 // This tests for an arbitrary limit set in JSCRE to terminate regular
509 // expressions with an exponential matching behavior.  Since the V8
510 // regular expression engine can be preempted from the outside, we do not
511 // need to limit the execution this way.  Firefox also keeps running
512 // on this one.
513 WONTFIX : fast/regex/slow.html = TIMEOUT
514
515 // Test to verify legacy MAC encodings. We don't want to support them and
516 // have to skip this test.
517 WONTFIX SKIP : fast/encoding/char-decoding-mac.html = FAIL
518
519 // WebKit QT Build-specific tests
520 WONTFIX SKIP : platform/qt/view/fixed-layout-size.html = FAIL
521
522 // These don't have pixel results and rely on ObjC bindings. Don't run until they have pixel results.
523 WONTFIX SKIP : platform/mac/editing/pasteboard/dataTransfer-set-data-file-url.html = FAIL
524 WONTFIX SKIP : http/tests/security/dataTransfer-set-data-file-url.html = FAIL
525
526 // The issue is which global object to use as the implicit
527 // receiver for cross-frame calls.  Currently, IE, Firefox and Chrome
528 // agree and only Safari is doing it this way.
529 BUG5053 WONTFIX : fast/frames/cross-site-this.html = FAIL
530
531 // This tests a Safari incompatibility.  This test should fail since
532 // it contains syntax errors that JSC for some reason choose not to
533 // throw.  V8 follows the spec.
534 WONTFIX : fast/js/reparsing-semicolon-insertion.html = FAIL
535
536 // These tests relate to transform/3d which is a work in progress and is not
537 // even run by the WebKit folk. They should be enabled whenever WebKit begins
538 // testing them by default. The bug to re-enable is:
539 // http://code.google.com/p/chromium/issues/detail?id=8455
540 WONTFIX SKIP : transforms/3d = FAIL
541
542 // Copying with no selection is sometimes supposed to work
543 // Also skipped by Apple on Windows (rdar://problem/5015941)
544 BUG20404 : editing/execCommand/copy-without-selection.html = FAIL
545
546 // This is a faulty test and need to change so it works on Windows.
547 // onload race condition due to poorly designed test.
548 // Works fine when run stand-alone.  Not needed for Beta.
549 // Also skipped by Apple on Windows, due to intermittent failure
550 // (rdar://5313536)
551 // started WIN only, since r30442 fails on all platforms
552 BUG10270 : fast/dom/frame-loading-via-document-write.html = FAIL
553
554 // -----------------------------------------------------------------
555 // LIGHTTPD
556 // -----------------------------------------------------------------
557 // This are failing for different reasons under our new lighttpd configuration
558 // TODO(deanm): Address all of these via lighttpd if possible, otherwise fork.
559 // Maybe flaky and need to be forked?
560
561 // LightTPD doesn't accept unknown HTTP methods
562 BUG30536 SKIP : http/tests/xmlhttprequest/methods-lower-case.html = TIMEOUT CRASH
563 BUG30536 DEBUG : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
564 BUG30536 LINUX MAC RELEASE : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
565 BUG30536 WIN RELEASE : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
566 BUG30536 WIN SLOW : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-invalidation-by-method.html = FAIL
567 // LightTPD doesn't accept unknown HTTP methods and passes CGIs a Content-Type
568 // even when a request didn't send the header.
569 BUG30536 WIN SLOW : http/tests/xmlhttprequest/methods.html = FAIL
570 BUG30536 LINUX : http/tests/xmlhttprequest/methods.html = FAIL
571 BUG30536 MAC : http/tests/xmlhttprequest/methods.html = FAIL TIMEOUT
572 // Webkit 50667:50696 (Lighttpd related?)
573 BUG30536 WIN : http/tests/xmlhttprequest/xmlhttprequest-setrequestheader-no-value.html = TEXT
574
575 // Another lighttpd quirk.
576 BUG8941 WIN SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
577 BUG8941 LINUX SLOW : http/tests/xmlhttprequest/web-apps/013.html = PASS
578 BUG8941 MAC DEBUG SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
579 BUG8941 MAC RELEASE SLOW : http/tests/xmlhttprequest/web-apps/013.html = PASS
580 BUG8941 WIN : http/tests/xmlhttprequest/web-apps/012.html = FAIL
581
582 // -----------------------------------------------------------------
583 // TEXT
584 // -----------------------------------------------------------------
585
586 // This class of test fails because of size differences in text runs.
587 // Mostly this is because of international text rendering differences.
588
589 // Incrorect results, in incorrect international font metrics.
590 BUG20521 LINUX WIN : fast/text/atsui-multiple-renderers.html = FAIL
591 BUG20521 LINUX WIN : fast/text/atsui-pointtooffset-calls-cg.html = FAIL TIMEOUT
592 BUG20521 LINUX WIN : fast/text/atsui-rtl-override-selection.html = FAIL
593
594 // This test checks that we hack around a bug in helvetica.  We fail to.
595 BUG20519 LINUX WIN : fast/text/wide-zero-width-space.html = FAIL
596
597 // More missing international text overides, not needed for Beta.
598 // Capitalization results match Safari, even if "not fully correct"
599 BUG20547 LINUX WIN : fast/text/capitalize-boundaries.html = FAIL
600
601 // Different button line-heights, our behavior looks wrong.
602 BUG20551 LINUX WIN : fast/replaced/table-percent-height.html = FAIL
603 BUG20551 LINUX WIN : fast/replaced/table-percent-height-text-controls.html = FAIL
604
605
606 // -----------------------------------------------------------------
607 // URL
608 // -----------------------------------------------------------------
609
610 // Form submission (GET) on non-standard url does not append a query.
611 // Defering these tests as the expected behavior is wonky, and shouldn't affect
612 // existing apps one way or another.
613 // Implicit expectation in this test is that you can "set query" on a data URL,
614 // and it should replace the first "?" substring. This makes absolutely no
615 // sense.
616 BUG24203 : fast/events/stopPropagation-submit.html = FAIL
617
618 // -----------------------------------------------------------------
619 // PENDING TESTS (forked to pending/, need to be sent upstream)
620 // -----------------------------------------------------------------
621
622 // These tests don't work with fast timers due to setTimeout
623 // races. See https://bugs.webkit.org/show_bug.cgi?id=21536
624 BUG24195 WIN LINUX : fast/repaint/bugzilla-6473.html = IMAGE+TEXT
625 BUG24195 MAC : fast/repaint/bugzilla-6473.html = IMAGE
626
627 // -----------------------------------------------------------------
628 // Tests deferred until we provide support for a particular feature.
629 // -----------------------------------------------------------------
630
631 // -----------------------------------------------------------------
632 // Tests requiring features not currently in test_shell.
633 // -----------------------------------------------------------------
634
635 // Implement layoutTestController.display()
636 BUG8630 WIN LINUX : fast/repaint/body-background-image.html = FAIL
637
638 // Relies on text metrics to pass. Rework to be meaningful for ports other than platform/mac.
639 BUG8630 WIN LINUX : fast/repaint/overflow-outline-repaint.html = FAIL
640 BUG8630 WIN LINUX : fast/backgrounds/solid-color-context-restore.html = FAIL
641 BUG8630 WIN LINUX : fast/dynamic/containing-block-change.html = FAIL
642 BUG8630 LINUX : fast/forms/listbox-clip.html = IMAGE+TEXT
643 BUG8630 WIN LINUX RELEASE : fast/overflow/hidden-scrollbar-resize.html = FAIL
644 BUG8630 LINUX WIN DEBUG : fast/overflow/hidden-scrollbar-resize.html = FAIL
645 BUG8630 WIN LINUX RELEASE : fast/reflections/inline-crash.html = FAIL
646 BUG8630 LINUX WIN DEBUG : fast/reflections/inline-crash.html = FAIL
647 BUG8630 WIN LINUX : fast/text/font-initial.html = FAIL
648 BUG8630 LINUX : svg/custom/use-detach.svg = FAIL PASS
649 BUG18772 LINUX : fast/backgrounds/001.html = FAIL
650
651 // Need a setAuthorAndUserStylesEnabled method in
652 // layoutTestController. Now we have preference to enable/disable user
653 // styles(not work now), we still need to add a preference to enable/disable
654 // styles of both author and user.
655 // Deferring, we don't support user-controlled UA stylesheets (in beta)
656 // Actually, gonna SKIP because it causes an additional error message in:
657 // fast/css/display-none-inline-style-change-crash.html   somehow
658 // the message is dumped after the #EOF, which causes an additional
659 // error in the header of the following test.
660 BUG24197 SKIP : fast/css/disabled-author-styles.html = FAIL
661
662 // Need to implement
663 // layoutTestController.setDomainRelaxationForbiddenForURLScheme()
664 BUG32674 WIN LINUX MAC : http/tests/security/setDomainRelaxationForbiddenForURLScheme.html = TEXT
665
666 // -----------------------------------------------------------------
667 // Other
668 // -----------------------------------------------------------------
669
670 // Pixeltest failure: Form control metrics incorrect
671 BUG10273 LINUX : http/tests/navigation/javascriptlink-frames.html = FAIL
672
673 // Mac Safari under certain circumstances automatically places
674 // a caret in editable document even when none was requested programatically.
675 // We don't intend to copy this feature (at least not for Beta).
676 BUG20844 LINUX WIN RELEASE : editing/selection/designmode-no-caret.html = FAIL
677 BUG20844 LINUX WIN DEBUG : editing/selection/designmode-no-caret.html = FAIL
678
679 // Directionality of mixed-direction text in selected choice should
680 // match that in the <select> option lists.
681 // Low priority, unclear if test expectations are correct (see bug)
682 BUG6139 : fast/forms/select-writing-direction-natural.html = FAIL
683
684 // We don't support NPN_Enumerate, but don't know of any plugin
685 // which depends on that functionality.  So we ignore this for beta.
686 BUG21901 : plugins/netscape-enumerate.html = FAIL
687
688 // Expectations for this test changed upstream. We should fix this test, but
689 // it doesn't need to block the current release
690 BUG10275 : http/tests/security/cross-frame-access-put.html = FAIL
691
692 // Due to differences in error pages. Needs re-baselining.
693 BUG24208 WIN DEBUG : http/tests/navigation/post-goback1.html = FAIL
694 BUG24208 SLOW WIN RELEASE : http/tests/navigation/post-goback1.html = FAIL
695 BUG24208 LINUX MAC : http/tests/navigation/post-goback1.html = FAIL
696
697 // Requires layoutTestController.dispatchPendingLoadRequests
698 BUG33211 : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
699
700 // HTML5 DB layout tests
701 BUG27697 SKIP : storage/hash-change-with-xhr.html = PASS
702 // We do not use Safari's private browsing
703 WONTFIX SKIP : storage/private-browsing-readonly.html = PASS
704
705 // Implement HTML5 Geolocation API.
706 BUG11246 DEFER SKIP : fast/dom/Geolocation = FAIL
707 BUG11246 DEFER SKIP : fast/dom/Window/window-properties-geolocation.html = TEXT
708
709 // HTML5 datalist element. We don't enable it because WebKit implementation
710 // is incomplete.
711 BUG20226 DEFER : fast/forms/datalist-nonoption-child.html = TEXT
712 BUG20226 DEFER : fast/forms/datalist.html = TEXT
713 BUG20226 DEFER : fast/forms/input-list.html = FAIL
714 BUG20226 DEFER : fast/forms/input-selectedoption.html = FAIL
715
716 // Add support for inspector layout tests.
717 BUG26734 LINUX MAC SKIP : inspector = PASS
718 BUG26734 LINUX MAC SKIP : http/tests/inspector = PASS
719 BUG26734 LINUX MAC SKIP : http/tests/inspector-enabled = PASS
720 BUG26734 SKIP : inspector/console-format-collections.html = TEXT
721 BUG26734 SKIP : inspector/console-format.html = TEXT
722
723 // These tests need to be changed to be platform independent.
724 BUG13907 : http/tests/media/remove-while-loading.html = TIMEOUT
725 BUG13907 : http/tests/media/video-play-stall-seek.html = TIMEOUT
726 BUG13907 : http/tests/media/video-play-stall.html = TIMEOUT
727 BUG13907 : http/tests/media/video-referer.html = TIMEOUT
728 BUG13907 : http/tests/media/video-seekable-stall.html = TIMEOUT
729 BUG13907 : http/tests/security/local-video-poster-from-remote.html = PASS FAIL TIMEOUT
730 BUG13907 : http/tests/security/local-video-source-from-remote.html = PASS FAIL TIMEOUT
731 BUG13907 : http/tests/security/local-video-src-from-remote.html = PASS FAIL TIMEOUT
732 BUG13907 : media/video-display-aspect-ratio.html = PASS FAIL TIMEOUT
733 BUG13907 : media/video-loop.html = PASS FAIL TIMEOUT
734
735 // These tests need to be changed to not rely on setTimeout().
736 BUG13907 SLOW WIN DEBUG : media/video-played-collapse.html = PASS FAIL
737 BUG13907 SLOW WIN DEBUG : media/video-seek-past-end-playing.html = PASS FAIL
738
739 // We sometimes emit an error from the same source element twice.
740 BUG13907 : media/video-source-error.html = PASS FAIL
741
742 // Failing because we sometimes emit additional timeupdate events.
743 // Test may need to be rewritten or only log the first timeupdate event.
744 BUG13907 : media/audio-delete-while-slider-thumb-clicked.html = PASS FAIL
745
746 // Failing because we sometimes emit additional timeupdate events.
747 // Test might be WONTFIX because we don't export a step button in the first place.
748 BUG13907 BUG25375 SKIP : media/audio-delete-while-step-button-clicked.html = FAIL
749
750 // Seeks to the end of file, which results in ogg packets with no timestamps.
751 BUG13907 : media/event-attributes.html = PASS FAIL TIMEOUT
752
753 // The media time display isn't appearing.
754 BUG13907 : media/video-zoom-controls.html = PASS FAIL TIMEOUT
755
756 // The media time display is getting styled when it shouldn't be.
757 BUG13907 : media/controls-styling.html = FAIL
758
759 // These tests are flaky with subtle pixel differences.
760 BUG13907 LINUX MAC : media/video-zoom.html = IMAGE PASS
761 BUG13907 LINUX MAC : media/video-layer-crash.html = IMAGE PASS
762 BUG13907 LINUX MAC : media/video-transformed.html = IMAGE PASS
763
764 // This is flaky with a subtle pixel difference in the bottom right corner,
765 // which I believe is due to new video scaling algorithm.
766 BUG13907 : media/video-replaces-poster.html = IMAGE PASS
767
768 // These tests are failing because they use position-dependent mouse clicks.
769 BUG13907 BUG25375 : media/video-controls-transformed.html = FAIL
770
771 // These tests are WONTFIX because they use codecs Chromium doesn't support.
772 BUG16779 WONTFIX SKIP : media/video-can-play-type.html = FAIL TIMEOUT
773 BUG16779 WONTFIX SKIP : media/video-document-types.html = FAIL TIMEOUT
774 BUG16779 WONTFIX SKIP : media/audio-mpeg-supported.html = FAIL TIMEOUT
775 BUG16779 WONTFIX SKIP : media/audio-data-url.html = FAIL TIMEOUT
776 BUG16779 WONTFIX SKIP : media/video-size-intrinsic-scale.html = FAIL TIMEOUT
777
778 // We haven't implemented the WebKit fullscreen extension.
779 BUG16735 : media/media-fullscreen-inline.html = TIMEOUT
780 BUG16735 : media/media-fullscreen-not-in-document.html = TIMEOUT
781
782 // We haven't implemented the WebKit captioning extension.
783 BUG28301 : media/media-captions.html = TIMEOUT
784
785 // We haven't implemented reverse audio/video playback.
786 BUG33099 : media/video-reverse-play-duration.html = TIMEOUT
787 BUG33099 : media/video-timeupdate-reverse-play.html = TIMEOUT
788
789 // We haven't implemented video preloading and it passing is a false positive.
790 BUG16482 : media/video-preload.html = PASS FAIL
791
792 // Function arguments object is copied for each access.
793 BUG24194 : fast/js/kde/function_arguments.html = FAIL
794
795 // We don't support dynamic fonts on Linux.
796 // Once we have the sandbox working, we should re-evaluate this.
797 BUG10278 LINUX : fast/css/font-face-implicit-local-font.html = FAIL
798 BUG10278 LINUX : fast/css/font-face-unicode-range.html = FAIL
799
800 // The v8 bindings allow shadowing of all properties on the global
801 // object.  If you use 'var prop = value' you will get a new variable
802 // named prop that shadows builtin properties on the global object.
803 // This behavior is consistent and I'm reluctant to make the massive
804 // change that would be needed to implement the inconsistent handling
805 // of this that KJS has (some properties can be shadowed and others
806 // can't).  This should have low priority.
807 // We currently match IE and the plan was to convince KJS to change
808 // post-beta, but the bug is here:
809 // https://bugs.webkit.org/show_bug.cgi?id=16644 , and it's unclear
810 // what the resolution was.
811 BUG10279 : fast/js/var-declarations-shadowing.html = FAIL
812
813 // Implement full JSON support in V8
814 BUG14885 SLOW : fast/js/JSON-parse.html = FAIL
815 BUG14885 SLOW : fast/js/JSON-stringify.html = FAIL
816 BUG14885 : fast/js/JSON-parse-reviver.html = FAIL
817 BUG14885 : fast/js/JSON-stringify-replacer.html = FAIL
818
819 // User stylesheets not currently supported by chrome.
820 // Webkit supports them by doing filesystem operations directly.
821 // This is disallowed in a sandboxed renderer. The test fails in
822 // test_shell.exe because the necessary filesystem stubs are notImplemented(),
823 // and would need to be proxied through the browser
824 BUG24199 : http/tests/security/local-user-CSS-from-remote.html = FAIL
825
826 // Implement CSS -webkit-font-smoothing property support.
827 BUG23270 WIN LINUX : fast/css/font-smoothing.html = FAIL
828
829 // Make canvas shadow work with drawImage.
830 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint-2.html = FAIL
831 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint.html = FAIL
832
833 // Repaint issues are revealed by these tests.
834 BUG28183 LINUX WIN : fast/repaint/box-shadow-v.html = IMAGE
835 // The difference of positions of texts after the list markers is NOT
836 // an issue. The behavior of the expectations was wrong. The real
837 // problem is the change of the 'p' in italic "properly". Note that
838 // upstream expectation image has the same issue.
839 BUG28183 WIN LINUX : fast/repaint/list-marker.html = IMAGE
840
841 BUG20507 : http/tests/uri/resolve-encoding-relative.html = FAIL
842
843
844 // Flaky: fails about 5% of the time.
845 BUG31342 WIN RELEASE : security/block-test-no-port.html = TEXT PASS
846
847 // Fails in debug. Windows used to be only flaky, but now fails consistently
848 // starting with the 52554->52633 merge.
849 BUG31363 DEBUG WIN LINUX : platform/chromium/fast/dom/interval.html = TEXT PASS
850
851 // -----------------------------------------------------------------
852 // SVG TESTS
853 // -----------------------------------------------------------------
854
855 // These are regressions from 1.0, but deemed DEFERable for 2.0.
856
857 BUG8763 LINUX WIN MAC : svg/custom/use-on-g-containing-foreignObject-and-image.svg = IMAGE
858
859 // We show reduced version of the entire SVN image rather than an image
860 BUG23463 MAC : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE
861 BUG23463 MAC : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE
862 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE+TEXT
863 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE+TEXT
864 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE+TEXT
865
866 // Merge 39744:39829 - regression
867 BUG10284 MAC : svg/custom/path-bad-data.svg = FAIL
868
869 // Merge 39744:39913? - regressions
870 BUG10286 LINUX : svg/W3C-SVG-1.1/animate-elem-02-t.svg = FAIL
871
872
873 // Bug in Skia, see https://bugs.webkit.org/show_bug.cgi?id=24534 .
874
875 // -----------------------------------------------------------------
876 // End SVG Regressions
877 // -----------------------------------------------------------------
878
879 // Selection wrong.
880 BUG10292 MAC LINUX : editing/selection/5354455-1.html = FAIL
881
882 // Compact support was removed from WebKit by Hyatt and layout tests rebaselined in r40259.
883
884 BUG10295 MAC : fast/dom/prototype-chain.html = FAIL
885
886 // Font differences, requiring overriden metrics, not a real bug, not fixing for Beta
887 BUG10296 MAC : fast/text/international/bidi-menulist.html = FAIL
888 BUG10296 LINUX : fast/transforms/transform-on-inline.html = FAIL
889 BUG10296 LINUX : fast/transforms/transform-table-row.html = FAIL
890 BUG10296 LINUX : svg/batik/paints/patternPreserveAspectRatioA.svg = FAIL
891 // Maybe need to be rebaselined - should be looked at in more detail.
892 BUG10296 LINUX : svg/custom/foreign-object-skew.svg = FAIL
893 BUG10296 LINUX : svg/batik/text/textLength.svg = FAIL
894
895 // No anti-aliasing on the text.
896 BUG10298 LINUX : svg/custom/use-on-disallowed-foreign-object-3.svg = FAIL
897
898 // The failures listed below have never passed in Chromium and need to be
899 // investigated, categorized, and (one hopes) fixed.
900
901 // These test fail full text diff (but not simplified diff) most likely due
902 // to differing implementations of SVG fonts. They may or may not represent
903 // real bugs which need fixin'
904
905 // There's no baseline at all for this!
906 BUG32392 SKIP : svg/batik/text/smallFonts.svg = FAIL
907
908 // The test is flaky and maybe platform-dependent.
909 BUG32401 LINUX WIN : svg/custom/marker-changes.svg = IMAGE+TEXT IMAGE
910
911 BUG32444 LINUX WIN : svg/hixie/text/003.html = FAIL
912
913 // SVG combined with font metrics.
914 BUG24198 LINUX : svg/hixie/text/001-broken.xml = FAIL
915
916 // SVG masks aren't quite working yet.
917 // Might also be related to https://bugs.webkit.org/show_bug.cgi?id=21910
918 // New tests. We should fix these, but they don't need to block the current release
919 BUG3244 LINUX WIN : fast/backgrounds/svg-as-mask.html = FAIL
920 BUG3244 WIN DEBUG : fast/backgrounds/animated-svg-as-mask.html = FAIL
921 BUG3244 SLOW WIN RELEASE : fast/backgrounds/animated-svg-as-mask.html = FAIL
922 BUG3244 LINUX : fast/backgrounds/animated-svg-as-mask.html = FAIL
923 // More tests that fail because of masks not working properly.
924 // New tests. We should fix these, but they don't need to block the current release
925 BUG3244 WIN LINUX : fast/backgrounds/mask-composite.html = FAIL
926 BUG3244 WIN LINUX : fast/backgrounds/repeat/mask-negative-offset-repeat.html = FAIL
927 // Marking this again as failed. This test failed even after rebaseline due to
928 // the fact that the font is not specified in the test and it seems that the
929 // test falls back on a different font locally than on the buildbot so the
930 // baseline is invalid. This might indicate a failure in our font fallback code
931 // or might be expected and that we should either go with the buildbot output
932 // or change the test upstream to specify explicitly what font to use.
933 // The mask part of this test is totally wrong.
934 BUG3244 WIN LINUX : fast/backgrounds/svg-as-background-6.html = FAIL
935
936 BUG10302 LINUX : svg/W3C-SVG-1.1/pservers-grad-10-b.svg = FAIL
937
938 BUG10303 LINUX : svg/custom/pattern-rotate.svg = FAIL
939
940 // I find it hard to care too much about SVG failures.
941 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-04-t.svg = FAIL
942 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-05-t.svg = FAIL
943 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-06-t.svg = FAIL
944 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-07-t.svg = FAIL
945 BUG10304 LINUX RELEASE: svg/W3C-SVG-1.1/animate-elem-30-t.svg = IMAGE
946 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-desc-02-t.svg = FAIL
947 BUG10304 LINUX : svg/W3C-SVG-1.1/interact-zoom-01-t.svg = FAIL
948 BUG10304 LINUX : svg/W3C-SVG-1.1/text-spacing-01-b.svg = FAIL
949 BUG10304 LINUX : svg/W3C-SVG-1.1/text-text-01-b.svg = FAIL
950 BUG10304 LINUX : svg/carto.net/slider.svg = FAIL
951 BUG10304 LINUX : svg/carto.net/textbox.svg = FAIL
952 BUG10304 LINUX : svg/carto.net/window.svg = FAIL
953 BUG10304 LINUX : svg/custom/coords-relative-units-transforms.svg = FAIL
954 BUG10304 LINUX : svg/custom/use-referencing-nonexisting-symbol.svg = FAIL
955 BUG10304 LINUX RELEASE : svg/hixie/perf/003.xml = FAIL
956 BUG10304 LINUX DEBUG : svg/hixie/perf/003.xml = FAIL
957 BUG10304 LINUX : svg/hixie/perf/004.xml = FAIL
958 BUG10304 LINUX : svg/hixie/perf/005.xml = FAIL
959 BUG10304 LINUX RELEASE : svg/hixie/perf/006.xml = FAIL
960 BUG10304 LINUX DEBUG : svg/hixie/perf/006.xml = FAIL
961 BUG10304 LINUX : svg/hixie/text/003b.xml = FAIL
962 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-01-t.svg = FAIL
963 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-02-t.svg = FAIL
964 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-03-b.svg = FAIL
965 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-04-b.svg = FAIL
966 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-05-t.svg = FAIL
967 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-06-t.svg = FAIL
968 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-07-b.svg = FAIL
969 // Our gradients are wrong here.
970 BUG19559 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-08-b.svg = FAIL
971 BUG10304 LINUX : svg/carto.net/button.svg = FAIL
972
973 // Probably need to change the test upstream to describe it better and use no
974 // hard coded numbers.
975 BUG19897 WIN LINUX : svg/custom/getscreenctm-in-mixed-content2.xhtml = FAIL
976
977 BUG10306 LINUX : svg/carto.net/combobox.svg = FAIL
978
979 // Linux pixeltest failure: slightly different shade of composited
980 // alpha in bottom group.
981 BUG10310 LINUX : svg/W3C-SVG-1.1/masking-opacity-01-b.svg = FAIL
982
983 // Image mismatch since WebKit r49757.
984 // The difference is hard to tell, but our gradation is slightly different
985 // (blue is too strong on the gradation).
986 // Pixel dump was updated on upstream but our rendering did not change.
987 BUG25175 MAC : svg/custom/grayscale-gradient-mask.svg = IMAGE
988
989 // -----------------------------------------------------------------
990 // Accessibility layout tests
991 //
992 // In addition to WebCore, these are meant to exercise platform APIs
993 // (MSAA, NSAccessibility, ATK). Since we don't have access to these in the
994 // sandbox, making these tests pass involves faking interactions with these APIs
995 // and doesn't seem like a good use of our time.
996 // We DEFER or WONTFIX these, because we need to first identify a good
997 // testing strategy for Chromium accessibility. It is possible we won't use
998 // these at all.
999
1000 BUG10322 DEFER SKIP : accessibility = PASS FAIL
1001 BUG10322 DEFER SKIP : platform/mac/accessibility = PASS FAIL
1002 BUG10322 DEFER SKIP : platform/win/accessibility = PASS FAIL
1003
1004 // -----------------------------------------------------------------
1005 // Other failures
1006 // -----------------------------------------------------------------
1007
1008 // These fail the pixel tests in debug mode because they have
1009 // unpainted space (filled red in Debug but not in Release).
1010 // https://bugs.webkit.org/show_bug.cgi?id=8423
1011 BUG24204 WIN LINUX : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE+TEXT
1012
1013 // Fails on webkit windows as well.
1014 BUG24207 : fast/events/attempt-scroll-with-no-scrollbars.html = FAIL
1015
1016 // The test may require a proper version of Java 6 RC 10 plugin
1017 // installed to run.
1018 BUG10313 : plugins/bindings-test.html = FAIL
1019
1020 // No glyph for U+FFFD (Replacement Character : black diamond with
1021 // question mark) in them
1022 BUG10315 WIN : fast/encoding/invalid-UTF-8.html = FAIL
1023
1024 // V8 failures as a result of the WebKit merge.
1025 // http://code.google.com/p/v8/issues/detail?id=92
1026
1027 // v8: A setter that is added to a prototype after the inline cache is
1028 // recorded will not be called.
1029 BUG24209 : fast/js/pic/cached-prototype-setter.html = FAIL
1030
1031 // We have the wrong shadow for "This".
1032 // It appears we're not obeying the "transparent" fill color.
1033 BUG10317 LINUX : fast/css/shadow-multiple.html = FAIL
1034
1035 // Problems with getImageData and toDataURL.
1036 // This test requires us to do alpha blending exactly the way CG does it,
1037 // which Skia may never do (see bug).
1038 BUG22700 LINUX WIN : fast/canvas/canvas-getImageData.html = FAIL
1039
1040 // We're much closer now. To fully pass this we need encoders for jpg
1041 // and gif, which is a low priority.
1042 BUG10318 WIN LINUX : fast/canvas/toDataURL-supportedTypes.html = FAIL
1043
1044 // This test finishes while in the middle of a CSS animation. This is
1045 // intentional, but it makes pixel results unreliable.
1046 // http://bugs.webkit.org/show_bug.cgi?id=21491
1047 // CSS animations should not block our next release.
1048 BUG10320 WIN LINUX : transitions/opacity-transition-zindex.html = PASS FAIL
1049
1050 // Issue 3273: TextInputController::firstRectForCharacterRange not implemented.
1051 BUG3273 : editing/selection/move-left-right.html = FAIL
1052 BUG3273 MAC : platform/mac/editing/input/caret-primary-bidi.html = FAIL
1053 BUG3273 MAC : platform/mac/editing/input/firstrectforcharacterrange-plain.html = FAIL
1054 BUG3273 MAC : platform/mac/editing/input/range-for-empty-document.html = FAIL
1055 // WebKit 50358:50395
1056 BUG3273 : fast/text/international/thai-cursor-position.html = TEXT
1057 // WebKit roll 51512:51524
1058 BUG3273 : editing/selection/5825350-1.html = FAIL
1059 BUG3273 : editing/selection/5825350-2.html = FAIL
1060 BUG3273 : editing/selection/mixed-editability-10.html = FAIL
1061
1062 // Regression from the 41362:41402 merge.
1063 BUG8402 MAC : fast/forms/drag-out-of-textarea.html = FAIL
1064
1065 // GURL doesn't handle switching from standard URL to path URL correctly
1066 BUG27914 : fast/dom/HTMLAnchorElement/set-href-attribute-protocol.html = TEXT
1067
1068 // ----------------------------------------------------------------------------
1069 // NEW FOR THE MERGE
1070 //
1071 // These tests need to have their output inspected to make sure it's reasonable
1072 // and then baselined if necessary.
1073 // ----------------------------------------------------------------------------
1074
1075 // This test isn't hanging, it just takes 12-13 seconds to run.
1076 BUG30536 SLOW WIN LINUX : http/tests/misc/acid3.html = FAIL
1077 BUG30536 : http/tests/misc/favicon-as-image.html = FAIL
1078
1079 // Has failed for Chromium since it was first checked in.  (Lighttpd related?)
1080 BUG10323 WIN : http/tests/xmlhttprequest/xmlhttprequest-no-content-length-onProgress.html = FAIL
1081
1082 // Post-MERGE failures: these will all need to be fixed one day
1083
1084 // Linux pixeltest failure: caret is in the wrong place
1085 // Upstream WebKit also skips this test and Safari with latest WebKit shows
1086 // same behavior as Chromium. Not required for beta so marking as deferred.
1087 BUG10324 LINUX WIN : editing/selection/caret-rtl-2.html = IMAGE
1088
1089 // This test assumes we're using unix paths and looks for a file:///test
1090 // path.  We correctly return file:///C:/test on Windows.  We should fix
1091 // upstream
1092 // Expectations for this test changed upstream. We should fix this test, but
1093 // it doesn't need to block the current release
1094 BUG10325 WIN : fast/dom/resource-locations-in-created-html-document.html = FAIL
1095
1096 // GURL/KURL difference in handling of "http:".
1097 // New test. We should fix it, but it doesn't need to block the current release
1098 BUG7386 : http/tests/security/postMessage/invalid-origin-throws-exception.html = FAIL
1099
1100 // Linux pixeltest failure: Font mismatch
1101 BUG10327 LINUX : tables/mozilla_expected_failures/bugs/bug14007-2.html = FAIL
1102
1103 // On Linux, we don't seem to be getting Helvetica Bold for all cases.
1104 BUG10328 LINUX : fast/css/font-face-multiple-faces.html = FAIL
1105
1106 // Got flakey (both debug and release) around r3581 (ananta).
1107 // New test. We should fix it, but it doesn't need to block the current release
1108 BUG10329 WIN : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1109
1110 // Uses ahem font and expects line heights to match some pixel value.
1111 // We should be able to pass this -- not sure what's wrong.
1112 BUG10331 LINUX : css2.1/t1008-c44-ln-box-02-d-ag.html = FAIL
1113
1114 // Looks like we're failing the test -- there are red boogers in the box that should be all green.
1115 BUG10332 LINUX : css2.1/t1605-c545-txttrans-00-b-ag.html = FAIL
1116
1117 // Asks for "system" fonts, which we don't support at all.
1118 BUG10335 LINUX : fast/css/css2-system-fonts.html = FAIL
1119
1120 // Large fonts have different metrics.
1121 BUG10336 LINUX : fast/css/font-face-descriptor-multiple-values.html = FAIL
1122
1123 // Wants Helvetica, Monaco.  It's still testing something useful, but we may
1124 // need to check in a wrong-looking baseline.  Windows looks wrong too.
1125 BUG10337 LINUX : fast/css/font-face-locally-installed.html = FAIL
1126
1127 // Font metrics wrong, despite using Lucida Grande?
1128 BUG10338 LINUX : fast/events/updateLayoutForHitTest.html = FAIL
1129
1130 // Layout totally different -- wrong font selected?
1131 BUG10340 LINUX : fast/frames/viewsource-attribute.html = FAIL
1132
1133 // Linux flaky: sometimes I get scrollbars and sometimes not.
1134 BUG10341 LINUX : fast/lists/001.html = FAIL
1135
1136 // We fail to load a file URL with a port number -- how does this work on
1137 // Windows?
1138 BUG10342 LINUX MAC : fast/loader/file-URL-with-port-number.html = TIMEOUT
1139
1140 // Text doesn't display at all -- maybe we don't have the slow font
1141 // code enabled?
1142 BUG10343 LINUX : fast/text/atsui-kerning-and-ligatures.html = FAIL
1143 BUG10343 LINUX RELEASE : fast/text/atsui-partial-selection.html = FAIL
1144 BUG10343 LINUX : fast/text/atsui-small-caps-punctuation-size.html = FAIL
1145
1146 // Started timing out with agl's complext text change.  Page is verrry slow.
1147 BUG10343 SKIP LINUX : fast/text/large-text-composed-char.html = TIMEOUT FAIL
1148
1149 // Missing text -- slow font path unimplemented?
1150 BUG10344 LINUX : fast/text/should-use-atsui.html = FAIL
1151
1152 // We print to stderr when a failure happens while importing XSL;
1153 // should disable this in libxml.
1154 BUG10347 MAC : fast/xsl/transform-xhr-doc.xhtml = FAIL
1155
1156 // Linux pixeltest failure: Failing to apply style
1157 BUG10349 LINUX : fast/forms/select-style.html = FAIL
1158
1159 // Linux pixeltest failure: The text suggests that the radios should not
1160 // overlap, but it's very close and quite different from the Windows version
1161 BUG10350 LINUX : fast/replaced/width100percent-radio.html = FAIL
1162
1163 // These tests are marked as failing on Linux because they depend on QuickTime.
1164 // See the bug for more discussion.
1165 BUG15797 LINUX : fast/dom/object-embed-plugin-scripting.html = FAIL
1166 BUG15797 LINUX : plugins/embed-attributes-setting.html = FAIL
1167
1168 // Skip because we throw an exception before we get to dumpAsText.
1169 BUG10351 SKIP MAC : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1170 BUG10351 MAC : plugins/inner-html-display-none.html = FAIL
1171 BUG10351 MAC : plugins/mouse-events.html = FAIL
1172 // BUG10667 SLOW MAC RELEASE : plugins/iframe-shims.html = FAIL
1173
1174 // NEW FOR MERGE 36102:37604
1175
1176 BUG32184 : fast/js/arguments.html = FAIL
1177 // See bug http://code.google.com/p/chromium/issues/detail?id=7868,
1178 // not urgent for current release.
1179 BUG24227 : http/tests/plugins/local-geturl-from-remote.html = FAIL
1180
1181 // This test sometimes fails indefinitely, other times it takes 1-2 seconds.
1182 BUG14009 WIN : http/tests/misc/dns-prefetch-control.html = TIMEOUT PASS
1183
1184 // NEW FOR MERGE 37604:38097
1185 // This is a Safari specific test used to document the set of global
1186 // constructors they expose and the exact way they are printed.  Not
1187 // important - we might even want to ignore it.
1188 // New tests. We should fix these, but they doesn't need to block the current
1189 // release
1190 BUG10354 WIN LINUX : fast/layers/opacity-transforms.html = FAIL
1191
1192 // MERGE 38389:38450
1193 // Form submit causes invalid page reload/navigation when action is a named
1194 // anchor
1195 BUG10357 : fast/dom/cssTarget-crash.html = TIMEOUT PASS
1196
1197 // MERGE 38500:39550: New tests
1198 // Missing expected results
1199 BUG10358 SKIP MAC LINUX : animations/animation-drt-api.html = PASS
1200
1201 // New test. We should fix it, but it doesn't need to block the current release
1202 BUG10361 WIN : http/tests/misc/single-character-pi-stylesheet.xhtml = FAIL
1203
1204 // Windows is missing the green box. Started to pass in roll to WebKit r50313
1205 BUG8729 WIN DEBUG : http/tests/multipart/invalid-image-data.html = FAIL
1206 BUG8729 SLOW WIN RELEASE : http/tests/multipart/invalid-image-data.html = FAIL
1207
1208 // -----------------------------------------------------------------
1209 // MAC PORT TESTS
1210 // -----------------------------------------------------------------
1211
1212 //
1213 // *** TESTS TO WORK ON FIRST ***
1214 // These tests fail because of work that needs to be done in Mac TestShell to
1215 // bring it up to par with Win TestShell. These tests pass on Win and should
1216 // pass on Mac once we fix the bugs.
1217 //
1218
1219 // We've bucketed tests into groupings for why they're failing. Please try
1220 // to add new failures in the appropriate bucket.
1221
1222 // text fields wrong width
1223 BUG10363 MAC : tables/mozilla/bugs/bug53690-1.html = FAIL
1224 BUG10363 MAC : tables/mozilla/bugs/bug9024.html = FAIL
1225
1226 // we're waiting on upstreaming a change to how textarea padding works. rather
1227 // than rebasing, we'll wait for the upstream (which ojan said should happen
1228 // early in Jan 09).
1229 BUG10364 MAC : fast/css/resize-corner-tracking.html = FAIL
1230 BUG10364 MAC : http/tests/navigation/reload-subframe-object.html = FAIL
1231
1232 // bad key event handling
1233 BUG10366 MAC : fast/events/option-tab.html = FAIL
1234
1235 // selection
1236 BUG10369 MAC : editing/selection/5109817.html = FAIL
1237 BUG10369 LINUX : editing/selection/5354455-2.html = FAIL
1238
1239 // incorrect layout
1240 BUG10370 MAC : fast/css/font-weight-1.html = FAIL
1241
1242 // Not really sure why these are failing at the moment
1243 BUG10376 MAC : fast/dom/isindex-002.html = FAIL
1244
1245 // These two have a different object type in the dom dump. Plugin-related.
1246 // Ignored on Win/Linux because they rely on QT to provide a TIFF decoder.
1247 BUG10378 MAC : fast/images/embed-image.html = FAIL
1248 BUG10378 MAC : fast/images/object-image.html = FAIL
1249
1250 BUG10381 LINUX RELEASE : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1251 BUG10381 LINUX DEBUG : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1252
1253 // The following are flaky in that some times the timeout or crash, but we think
1254 // it is because of bugs in other parts of the code and not specific to what
1255 // these tests are doing.  The are being noted here so we can get the buildbots
1256 // green so new mac regressions are caught much quicker.
1257 // (there are a few others marked w/ multiple status like this in other parts of
1258 // the file, but they were left there as the comments in those areas are valid.)
1259 BUG10384 MAC SLOW : fast/dom/Window/new-window-opener.html = FAIL
1260 BUG10384 MAC : fast/forms/focus2.html = FAIL
1261
1262 BUG10399 MAC : fast/encoding/char-encoding-mac.html = FAIL
1263
1264 // Broken pixel tests
1265
1266 // Rebaselining needed because of scrollbars
1267 BUG23498 MAC : css1/cascade/cascade_order.html = IMAGE
1268 BUG23498 MAC : css1/classification/display.html = IMAGE
1269 BUG23498 MAC : css1/classification/list_style_type.html = IMAGE
1270 BUG23498 MAC : css1/classification/white_space.html = IMAGE
1271 BUG23498 MAC : css1/color_and_background/background.html = IMAGE
1272 BUG23498 MAC : css1/color_and_background/background_attachment.html = IMAGE
1273 BUG23498 MAC : css1/color_and_background/background_position.html = IMAGE
1274 BUG23498 MAC : css1/color_and_background/background_repeat.html = IMAGE
1275 BUG23498 MAC : css1/conformance/forward_compatible_parsing.html = IMAGE
1276 BUG23498 MAC : css1/font_properties/font.html = IMAGE
1277 // BUG23498 MAC : css1/font_properties/font_family.html = IMAGE
1278 BUG23498 MAC : css1/font_properties/font_size.html = IMAGE
1279 BUG23498 MAC : css1/font_properties/font_weight.html = IMAGE
1280 BUG23498 MAC : css1/formatting_model/floating_elements.html = IMAGE
1281 BUG23498 MAC : css1/formatting_model/height_of_lines.html = IMAGE
1282 BUG23498 MAC : css1/formatting_model/horizontal_formatting.html = IMAGE
1283 BUG23498 MAC : css1/formatting_model/inline_elements.html = IMAGE
1284 BUG23498 MAC : css1/formatting_model/replaced_elements.html = IMAGE
1285 BUG23498 MAC : css1/formatting_model/vertical_formatting.html = IMAGE
1286 BUG23498 MAC : css1/pseudo/anchor.html = IMAGE
1287 BUG23498 MAC : css1/pseudo/firstletter.html = IMAGE
1288 BUG23498 MAC : css1/pseudo/firstline.html = IMAGE
1289 BUG23498 MAC : css1/pseudo/multiple_pseudo_elements.html = IMAGE
1290 BUG23498 MAC : css1/text_properties/letter_spacing.html = IMAGE+TEXT IMAGE
1291 BUG23498 MAC : css1/text_properties/line_height.html = IMAGE
1292 BUG23498 MAC : css1/text_properties/text_decoration.html = IMAGE
1293 BUG23498 MAC : css1/text_properties/text_indent.html = IMAGE
1294 BUG23498 MAC : css1/text_properties/text_transform.html = IMAGE
1295 BUG23498 MAC : css1/text_properties/vertical_align.html = IMAGE
1296 BUG23498 MAC : css1/text_properties/word_spacing.html = IMAGE
1297 BUG23498 MAC : css1/units/color_units.html = IMAGE
1298 BUG23498 MAC : css1/units/length_units.html = IMAGE
1299 BUG23498 MAC : css2.1/t0803-c5502-mrgn-r-02-c.html = IMAGE
1300 BUG23498 MAC : css2.1/t0803-c5505-mrgn-02-c.html = IMAGE
1301 BUG23498 MAC : css2.1/t080301-c411-vt-mrgn-00-b.html = IMAGE
1302 BUG23498 MAC : css2.1/t0905-c5525-fltclr-00-c-ag.html = IMAGE
1303 BUG23498 MAC : css2.1/t0905-c5525-fltmrgn-00-c-ag.html = IMAGE
1304 BUG23498 MAC : css2.1/t0905-c5525-fltwidth-00-c-g.html = IMAGE
1305 BUG23498 MAC : css2.1/t0905-c5526-fltclr-00-c-ag.html = IMAGE
1306 BUG23498 MAC : css2.1/t1002-c5523-width-02-b-g.html = IMAGE
1307 BUG23498 MAC : css2.1/t1202-counters-08-b.html = IMAGE
1308 BUG23498 MAC : css2.1/t1202-counters-09-b.html = IMAGE
1309 BUG23498 MAC : css2.1/t140201-c535-bg-fixd-00-b-g.html = IMAGE
1310 BUG23498 MAC : css2.1/t140201-c537-bgfxps-00-c-ag.html = IMAGE
1311 BUG23498 MAC : css2.1/t1508-c527-font-07-b.html = IMAGE
1312 BUG23498 MAC : editing/deleting/delete-after-span-ws-001.html = IMAGE
1313 BUG23498 MAC : editing/deleting/delete-after-span-ws-002.html = IMAGE
1314 BUG23498 MAC : editing/deleting/delete-after-span-ws-003.html = IMAGE
1315 BUG23498 MAC : editing/deleting/delete-line-end-ws-001.html = IMAGE
1316 BUG23498 MAC : editing/deleting/delete-line-end-ws-002.html = IMAGE
1317 BUG23498 MAC : editing/inserting/insert-div-023.html = IMAGE
1318 BUG23498 MAC : editing/selection/focus_editable_html.html = IMAGE
1319 BUG23498 MAC : editing/selection/iframe.html = IMAGE
1320 BUG23498 MAC : editing/selection/select-all-001.html = IMAGE
1321 BUG23498 MAC : editing/selection/select-all-002.html = IMAGE
1322 BUG23498 MAC : editing/selection/select-all-003.html = IMAGE
1323 BUG23498 MAC : editing/selection/select-all-004.html = IMAGE
1324 BUG23498 MAC : editing/selection/unrendered-001.html = IMAGE
1325 // BUG23498 MAC : editing/selection/unrendered-002.html = IMAGE
1326 BUG23498 MAC : editing/selection/unrendered-003.html = IMAGE
1327 BUG23498 MAC : editing/selection/unrendered-004.html = IMAGE
1328 BUG23498 MAC : editing/selection/unrendered-005.html = IMAGE
1329 BUG23498 MAC : fast/backgrounds/background-inherit-color-bug.html = IMAGE
1330 BUG23498 MAC : fast/backgrounds/repeat/negative-offset-repeat-transformed.html = IMAGE
1331 BUG23498 MAC : fast/block/basic/016.html = IMAGE
1332 BUG23498 MAC : fast/block/basic/fieldset-stretch-to-legend.html = IMAGE
1333 BUG23498 MAC : fast/block/float/008.html = IMAGE
1334 BUG23498 MAC : fast/block/float/013.html = IMAGE
1335 BUG23498 MAC : fast/block/float/019.html = IMAGE
1336 BUG23498 MAC : fast/block/float/021.html = IMAGE
1337 BUG23498 MAC : fast/block/float/025.html = IMAGE
1338 BUG23498 MAC : fast/block/float/026.html = IMAGE
1339 BUG23498 MAC : fast/block/float/027.html = IMAGE
1340 BUG23498 MAC : fast/block/float/028.html = IMAGE
1341 BUG23498 MAC : fast/block/float/032.html = IMAGE
1342 BUG23498 MAC : fast/block/float/033.html = IMAGE
1343 BUG23498 MAC : fast/block/float/035.html = IMAGE
1344 // BUG23498 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1345 BUG23498 MAC : fast/block/float/br-with-clear-2.html = IMAGE
1346 // BUG23498 MAC : fast/block/float/float-avoidance.html = IMAGE
1347 BUG23498 MAC : fast/block/float/nested-clearance.html = IMAGE
1348 BUG23498 MAC : fast/block/float/relative-painted-twice.html = IMAGE
1349 BUG23498 MAC : fast/block/margin-collapse/103.html = IMAGE
1350 BUG23498 MAC : fast/block/margin-collapse/104.html = IMAGE
1351 BUG23498 MAC : fast/block/margin-collapse/empty-clear-blocks.html = IMAGE
1352 BUG23498 MAC : fast/block/positioning/047.html = IMAGE
1353 BUG23498 MAC : fast/block/positioning/051.html = IMAGE
1354 BUG23498 MAC : fast/block/positioning/055.html = IMAGE
1355 BUG23498 MAC : fast/block/positioning/auto/007.html = IMAGE
1356 BUG23498 MAC : fast/block/positioning/fixed-positioning-scrollbar-bug.html = IMAGE
1357 BUG23498 MAC : fast/block/positioning/negative-rel-position.html = IMAGE
1358 BUG23498 MAC : fast/block/positioning/relative-overflow-block.html = IMAGE
1359 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced-float.html = IMAGE
1360 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced.html = IMAGE
1361 BUG23498 MAC : fast/body-propagation/overflow/001-xhtml.xhtml = IMAGE
1362 BUG23498 MAC : fast/body-propagation/overflow/001.html = IMAGE
1363 BUG23498 MAC : fast/body-propagation/overflow/005-declarative.xhtml = IMAGE
1364 BUG23498 MAC : fast/body-propagation/overflow/005-xhtml.xhtml = IMAGE
1365 BUG23498 MAC : fast/body-propagation/overflow/005.html = IMAGE
1366 // BUG23498 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1367 // BUG23498 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1368 BUG23498 MAC : fast/box-sizing/box-sizing.html = IMAGE
1369 BUG23498 MAC : fast/canvas/canvas-bg.html = IMAGE
1370 BUG23498 MAC : fast/canvas/canvas-text-alignment.html = IMAGE
1371 BUG23498 MAC : fast/canvas/image-object-in-canvas.html = IMAGE
1372 BUG23498 MAC : fast/css/005.html = IMAGE
1373 BUG23498 MAC : fast/css/MarqueeLayoutTest.html = IMAGE
1374 BUG23498 MAC : fast/css/border-height.html = IMAGE
1375 BUG23498 MAC : fast/css/empty-pseudo-class.html = IMAGE
1376 BUG23498 MAC : fast/css/first-child-pseudo-class.html = IMAGE
1377 BUG23498 MAC : fast/css/first-of-type-pseudo-class.html = IMAGE
1378 BUG23498 MAC : fast/css/hsl-color.html = IMAGE
1379 BUG9798 BUG23498 MAC : fast/css/last-child-pseudo-class.html = IMAGE FAIL
1380 BUG23498 MAC : fast/css/line-height-overflow.html = IMAGE
1381 BUG23498 MAC : fast/css/nested-floating-relative-position-percentages.html = IMAGE
1382 BUG23498 MAC : fast/css/only-child-pseudo-class.html = IMAGE
1383 BUG23498 MAC : fast/css/only-of-type-pseudo-class.html = IMAGE
1384 BUG23498 MAC : fast/css/percentage-non-integer.html = IMAGE
1385 // BUG23498 MAC : fast/css/shadow-multiple.html = IMAGE
1386 BUG23498 MAC : fast/css/text-overflow-ellipsis-strict.html = IMAGE
1387 BUG23498 MAC : fast/css/text-overflow-ellipsis.html = IMAGE
1388 BUG23498 MAC : fast/css/word-space-extra.html = IMAGE
1389 BUG23498 MAC : fast/css-generated-content/014.html = IMAGE
1390 BUG23498 MAC : fast/dom/focus-contenteditable.html = IMAGE
1391 BUG23498 MAC : fast/dom/stripNullFromTextNodes.html = IMAGE
1392 BUG23498 MAC : fast/dynamic/008.html = IMAGE
1393 BUG23498 MAC : fast/dynamic/anchor-lock.html = IMAGE
1394 BUG23498 MAC : fast/dynamic/insert-before-table-part-in-continuation.html = IMAGE
1395 BUG23498 MAC : fast/encoding/utf-16-big-endian.html = IMAGE
1396 BUG23498 MAC : fast/encoding/utf-16-little-endian.html = IMAGE
1397 BUG23498 MAC : fast/events/autoscroll.html = IMAGE
1398 BUG23498 MAC : fast/events/pointer-events-2.html = IMAGE
1399 BUG23498 MAC : fast/events/reveal-link-when-focused.html = IMAGE
1400 BUG23498 MAC : fast/flexbox/016.html = IMAGE
1401 BUG23498 MAC : fast/flexbox/flex-hang.html = IMAGE
1402 BUG23498 MAC : fast/forms/fieldset-align.html = IMAGE
1403 BUG23498 MAC : fast/forms/form-hides-table.html = IMAGE
1404 BUG23498 MAC : fast/forms/input-table.html = IMAGE
1405 BUG23498 MAC : fast/forms/textAreaLineHeight.html = IMAGE
1406
1407 BUG23498 MAC : fast/frames/frame-scrolling-attribute.html = IMAGE
1408
1409 BUG23498 MAC : fast/frames/iframe-scrolling-attribute.html = IMAGE
1410 BUG23498 BUG26044 MAC RELEASE : fast/frames/invalid.html = IMAGE CRASH
1411 BUG23498 BUG26044 SLOW MAC DEBUG : fast/frames/invalid.html = IMAGE
1412 // BUG23498 MAC : fast/frames/onlyCommentInIFrame.html = IMAGE
1413 BUG23498 MAC DEBUG : fast/frames/valid.html = IMAGE
1414 BUG23498 MAC RELEASE : fast/frames/valid.html = IMAGE CRASH
1415 BUG23498 MAC : fast/gradients/background-clipped.html = IMAGE
1416 BUG23498 MAC : fast/images/pdf-as-image-landscape.html = IMAGE
1417 BUG23498 MAC : fast/inline/inline-borders-with-bidi-override.html = IMAGE
1418 BUG23498 MAC : fast/inline/inline-continuation-borders.html = IMAGE
1419 BUG23498 MAC : fast/inline/long-wrapped-line.html = IMAGE
1420 BUG23498 MAC : fast/inline-block/inline-block-vertical-align.html = IMAGE
1421 BUG23498 MAC : fast/layers/scroll-rect-to-visible.html = IMAGE
1422 BUG23498 MAC : fast/lists/001.html = IMAGE
1423 BUG23498 MAC : fast/lists/008.html = IMAGE
1424 BUG23498 MAC : fast/lists/alpha-list-wrap.html = IMAGE
1425 BUG23498 MAC : fast/lists/li-br.html = IMAGE
1426 // BUG23498 MAC : fast/lists/ol-start-parsing.html = IMAGE
1427 BUG23498 MAC : fast/lists/olstart.html = IMAGE
1428 BUG23498 MAC : fast/lists/w3-list-styles.html = IMAGE
1429 BUG23498 MAC : fast/multicol/column-rules-stacking.html = IMAGE
1430 BUG23498 MAC : fast/multicol/columns-shorthand-parsing.html = IMAGE
1431 BUG23498 MAC : fast/multicol/float-multicol.html = IMAGE
1432 // BUG23498 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1433 // BUG23498 MAC : fast/overflow/004.html = IMAGE
1434 BUG23498 MAC : fast/overflow/006.html = IMAGE
1435 BUG23498 MAC : fast/overflow/clip-rects-fixed-ancestor.html = IMAGE
1436 BUG23498 MAC : fast/overflow/overflow-auto-table.html = IMAGE
1437 BUG23498 MAC : fast/overflow/overflow-stacking.html = IMAGE
1438 BUG23498 MAC : fast/overflow/overflow-x-y.html = IMAGE
1439 // BUG23498 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1440 BUG23498 MAC : fast/overflow/scrollRevealButton.html = IMAGE
1441 BUG23498 MAC : fast/reflections/reflection-direction.html = IMAGE
1442 BUG23498 MAC : fast/replaced/005.html = IMAGE
1443 BUG23498 MAC : fast/replaced/width100percent-image.html = IMAGE
1444 BUG23498 MAC : fast/selectors/166.html = IMAGE
1445 BUG23498 MAC : fast/table/023.html = IMAGE
1446 BUG23498 MAC : fast/table/034.html = IMAGE
1447 BUG23498 MAC : fast/table/040.html = IMAGE
1448 BUG23498 MAC : fast/table/border-collapsing/004.html = IMAGE
1449 BUG23498 MAC : fast/table/empty-cells.html = IMAGE
1450 BUG23498 MAC : fast/table/frame-and-rules.html = IMAGE
1451 BUG23498 MAC : fast/table/height-percent-test.html = IMAGE
1452 BUG23498 MAC : fast/table/overflowHidden.html = IMAGE
1453 BUG23498 MAC : fast/table/prepend-in-anonymous-table.html = IMAGE
1454 BUG23498 MAC : fast/table/wide-colspan.html = IMAGE
1455 BUG23498 MAC : fast/table/wide-column.html = IMAGE
1456 BUG23498 MAC : fast/text/capitalize-boundaries.html = IMAGE
1457 BUG23498 MAC : fast/text/international/bidi-neutral-run.html = IMAGE
1458 BUG23498 MAC : fast/text/international/thai-line-breaks.html = IMAGE
1459 BUG23498 MAC : fast/text/large-text-composed-char.html = IMAGE
1460 BUG23498 MAC : fast/text/softHyphen.html = IMAGE
1461 BUG23498 MAC : fast/text/wbr.html = IMAGE
1462 BUG23498 MAC : fast/text/whitespace/024.html = IMAGE
1463 BUG23498 MAC : fast/text/whitespace/pre-wrap-spaces-after-newline.html = IMAGE
1464 BUG23498 MAC : fast/text/word-break.html = IMAGE
1465 BUG23498 MAC DEBUG : fonts/cursive.html = IMAGE IMAGE+TEXT
1466 BUG23498 MAC RELEASE : fonts/cursive.html = IMAGE
1467 BUG23498 MAC : fonts/default.html = IMAGE
1468 BUG23498 MAC : fonts/fantasy.html = IMAGE
1469 BUG23498 MAC : fonts/monospace.html = IMAGE
1470 BUG23498 MAC : fonts/sans-serif.html = IMAGE
1471 BUG23498 MAC : fonts/serif.html = IMAGE
1472 BUG23498 MAC : http/tests/navigation/anchor-frames.html = IMAGE
1473 BUG9798 BUG23498 MAC DEBUG : http/tests/navigation/error404-frames.html = TIMEOUT IMAGE
1474 BUG9798 BUG23498 MAC RELEASE : http/tests/navigation/error404-frames.html = IMAGE
1475 BUG23498 MAC : http/tests/navigation/error404-subframeload.html = IMAGE
1476 // BUG23498 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1477 BUG23498 MAC DEBUG : http/tests/navigation/post-frames.html = IMAGE TIMEOUT
1478 BUG23498 MAC RELEASE : http/tests/navigation/post-frames.html = IMAGE
1479 BUG23498 MAC : http/tests/navigation/postredirect-frames.html = IMAGE
1480 BUG23498 MAC : svg/custom/altglyph.svg = IMAGE
1481 BUG23498 MAC : svg/hixie/links/003-broken.xml = IMAGE
1482 BUG23498 MAC : svg/text/kerning.svg = IMAGE
1483 BUG23498 MAC : svg/text/multichar-glyph.svg = IMAGE
1484 BUG23498 MAC : tables/mozilla/bugs/bug101674.html = IMAGE
1485 BUG23498 MAC : tables/mozilla/bugs/bug10269-2.html = IMAGE
1486 BUG23498 MAC : tables/mozilla/bugs/bug10296-1.html = IMAGE
1487 BUG23498 MAC : tables/mozilla/bugs/bug1055-1.html = IMAGE
1488 BUG23498 MAC : tables/mozilla/bugs/bug113235-1.html = IMAGE
1489 BUG23498 MAC : tables/mozilla/bugs/bug113235-3.html = IMAGE
1490 BUG23498 MAC : tables/mozilla/bugs/bug11944.html = IMAGE
1491 BUG23498 MAC : tables/mozilla/bugs/bug120364.html = IMAGE
1492 BUG23498 MAC : tables/mozilla/bugs/bug1302.html = IMAGE
1493 BUG23498 MAC : tables/mozilla/bugs/bug131020.html = IMAGE
1494 BUG23498 MAC : tables/mozilla/bugs/bug131020_iframe.html = IMAGE
1495 BUG23498 MAC : tables/mozilla/bugs/bug137388-2.html = IMAGE
1496 BUG23498 MAC : tables/mozilla/bugs/bug22019.html = IMAGE
1497 BUG23498 MAC : tables/mozilla/bugs/bug23151.html = IMAGE
1498 BUG23498 MAC : tables/mozilla/bugs/bug2479-1.html = IMAGE
1499 BUG23498 MAC : tables/mozilla/bugs/bug2479-3.html = IMAGE
1500 BUG23498 MAC : tables/mozilla/bugs/bug2479-4.html = IMAGE
1501 BUG23498 MAC : tables/mozilla/bugs/bug27038-2.html = IMAGE
1502 BUG23498 MAC : tables/mozilla/bugs/bug29314.html = IMAGE
1503 BUG23498 MAC : tables/mozilla/bugs/bug2947.html = IMAGE
1504 BUG23498 MAC : tables/mozilla/bugs/bug32205-2.html = IMAGE
1505 BUG23498 MAC : tables/mozilla/bugs/bug38916.html = IMAGE
1506 BUG23498 MAC : tables/mozilla/bugs/bug3977.html = IMAGE
1507 BUG23498 MAC : tables/mozilla/bugs/bug43039.html = IMAGE
1508 BUG23498 MAC : tables/mozilla/bugs/bug43854-1.html = IMAGE
1509 BUG23498 MAC : tables/mozilla/bugs/bug44505.html = IMAGE
1510 BUG23498 MAC : tables/mozilla/bugs/bug46480-1.html = IMAGE
1511 BUG23498 MAC : tables/mozilla/bugs/bug46480-2.html = IMAGE
1512 BUG23498 MAC : tables/mozilla/bugs/bug50695-1.html = IMAGE
1513 BUG23498 MAC : tables/mozilla/bugs/bug56405.html = IMAGE
1514 BUG23498 MAC : tables/mozilla/bugs/bug5797.html = IMAGE
1515 BUG23498 MAC : tables/mozilla/bugs/bug5835.html = IMAGE
1516 BUG23498 MAC : tables/mozilla/bugs/bug625.html = IMAGE
1517 BUG23498 MAC : tables/mozilla/bugs/bug650.html = IMAGE
1518 BUG23498 MAC : tables/mozilla/bugs/bug67915-1.html = IMAGE
1519 BUG23498 MAC : tables/mozilla/bugs/bug7112-1.html = IMAGE
1520 BUG23498 MAC : tables/mozilla/bugs/bug7112-2.html = IMAGE
1521 BUG23498 MAC : tables/mozilla/bugs/bug73321.html = IMAGE
1522 BUG23498 MAC : tables/mozilla/bugs/bug92143.html = IMAGE
1523 BUG23498 MAC : tables/mozilla/bugs/bug96334.html = IMAGE
1524 BUG23498 MAC : tables/mozilla/bugs/bug96343.html = IMAGE
1525 BUG23498 MAC : tables/mozilla/collapsing_borders/bug41262-3.html = IMAGE
1526 BUG23498 MAC : tables/mozilla/core/bloomberg.html = IMAGE
1527 BUG23498 MAC : tables/mozilla/core/captions.html = IMAGE
1528 BUG23498 MAC : tables/mozilla/core/cell_heights.html = IMAGE
1529 BUG23498 MAC : tables/mozilla/core/col_widths_auto_fix.html = IMAGE
1530 BUG23498 MAC : tables/mozilla/core/col_widths_fix_fixPer.html = IMAGE
1531 BUG23498 MAC : tables/mozilla/core/nested1.html = IMAGE
1532 BUG23498 MAC : tables/mozilla/core/one_row.html = IMAGE
1533 BUG23498 MAC : tables/mozilla/core/row_span.html = IMAGE
1534 BUG23498 MAC : tables/mozilla/marvin/backgr_index.html = IMAGE
1535 BUG23498 MAC : tables/mozilla/marvin/backgr_layers-opacity.html = IMAGE
1536 BUG23498 MAC : tables/mozilla/marvin/backgr_position-table.html = IMAGE
1537 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-cell.html = IMAGE
1538 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column-group.html = IMAGE
1539 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
1540 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row-group.html = IMAGE
1541 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
1542 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table.html = IMAGE
1543 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_name.xml = IMAGE
1544 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
1545 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_name.xml = IMAGE
1546 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_rgb.xml = IMAGE
1547 BUG23498 MAC : tables/mozilla/marvin/x_td_height.xml = IMAGE
1548 BUG23498 MAC : tables/mozilla/marvin/x_td_nowrap.xml = IMAGE
1549 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_name.xml = IMAGE
1550 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_rgb.xml = IMAGE
1551 BUG23498 MAC : tables/mozilla/marvin/x_th_height.xml = IMAGE
1552 BUG23498 MAC : tables/mozilla/marvin/x_th_nowrap.xml = IMAGE
1553 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_name.xml = IMAGE
1554 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_rgb.xml = IMAGE
1555 BUG23498 MAC : tables/mozilla/other/cell_widths.html = IMAGE
1556 BUG23498 MAC : tables/mozilla/other/nestedTables.html = IMAGE
1557 BUG23498 MAC : tables/mozilla/other/test3.html = IMAGE
1558 BUG23498 MAC : tables/mozilla/other/test6.html = IMAGE
1559 BUG23498 MAC : tables/mozilla/other/wa_table_thtd_rowspan.html = IMAGE
1560 BUG23498 MAC : tables/mozilla/other/wa_table_tr_align.html = IMAGE
1561 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
1562 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug101759.html = IMAGE
1563 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10216.html = IMAGE
1564 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
1565 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
1566 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug131020-3.html = IMAGE
1567 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-1.html = IMAGE
1568 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-2.html = IMAGE
1569 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug19526.html = IMAGE
1570 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug220653.html = IMAGE
1571 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
1572 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
1573 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug32205-1.html = IMAGE
1574 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug67915-2.html = IMAGE
1575 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
1576 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug85016.html = IMAGE
1577 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug89315.html = IMAGE
1578 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
1579 BUG23498 BUG32193 MAC : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE IMAGE+TEXT
1580 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1581 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1582 BUG23498 MAC : tables/mozilla_expected_failures/core/captions3.html = IMAGE
1583 BUG23498 MAC : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
1584 BUG23498 MAC : tables/mozilla_expected_failures/core/columns.html = IMAGE
1585 BUG23498 MAC : tables/mozilla_expected_failures/core/conflicts.html = IMAGE
1586 BUG23498 MAC : tables/mozilla_expected_failures/core/standards1.html = IMAGE
1587 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-cell.html = IMAGE
1588 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column-group.html = IMAGE
1589 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column.html = IMAGE
1590 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-quirks.html = IMAGE
1591 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
1592 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row.html = IMAGE
1593 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table.html = IMAGE
1594 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_fixed-bg.html = IMAGE
1595 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-hide.html = IMAGE
1596 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-show.html = IMAGE
1597 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
1598 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
1599 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column.html = IMAGE
1600 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row-group.html = IMAGE
1601 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
1602 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
1603 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_tbody.html = IMAGE
1604 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_row_sibling.html = IMAGE
1605 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_tbody_sibling.html = IMAGE
1606 BUG23498 MAC : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
1607 BUG23498 MAC : tables/mozilla_expected_failures/other/test4.html = IMAGE+TEXT IMAGE
1608
1609 // Missing "misspelled-word" dotted underline
1610 BUG23497 MAC : editing/selection/unrendered-002.html = IMAGE
1611 BUG23497 MAC : editing/spelling/spellcheck-attribute.html = IMAGE
1612
1613 // Widget location is just slightly off
1614 BUG23496 MAC : css1/box_properties/acid_test.html = IMAGE
1615 BUG23496 MAC : css2.1/t09-c5526c-display-00-e.html = IMAGE
1616 BUG23496 MAC : fast/block/basic/011.html = IMAGE
1617 BUG23496 MAC : fast/forms/001.html = IMAGE
1618 BUG23496 MAC : fast/forms/basic-inputs.html = IMAGE
1619 // BUG23496 MAC : fast/forms/box-shadow-override.html = IMAGE
1620 BUG23496 MAC : fast/forms/checkbox-radio-onchange.html = IMAGE
1621 BUG23496 MAC : fast/forms/file-input-disabled.html = IMAGE+TEXT
1622 BUG23496 MAC : fast/forms/form-element-geometry.html = IMAGE+TEXT
1623 BUG23496 MAC : fast/forms/formmove.html = IMAGE
1624 // Recently became crashy. See http://crbug.com/24721
1625 BUG23496 MAC : fast/forms/formmove2.html = IMAGE
1626 BUG23496 MAC : fast/forms/indeterminate.html = IMAGE
1627 BUG23496 MAC : fast/forms/input-appearance-height.html = IMAGE+TEXT
1628 BUG23496 MAC : fast/forms/input-value.html = IMAGE+TEXT
1629 // BUG23496 MAC : fast/forms/menulist-narrow-width.html = IMAGE
1630 BUG23496 MAC : fast/forms/menulist-no-overflow.html = IMAGE
1631 BUG23496 MAC : fast/forms/radio-attr-order.html = IMAGE
1632 BUG23496 MAC : fast/forms/radio-nested-labels.html = IMAGE
1633 BUG23496 MAC : fast/forms/radio_checked.html = IMAGE
1634 BUG23496 MAC : fast/forms/radio_checked_dynamic.html = IMAGE
1635 // BUG23496 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1636 BUG23496 MAC : fast/inline/positionedLifetime.html = IMAGE
1637 BUG23496 MAC : fast/parser/bad-xml-slash.html = IMAGE
1638 BUG23496 MAC : fast/replaced/replaced-breaking.html = IMAGE
1639 BUG23496 MAC : fast/replaced/width100percent-checkbox.html = IMAGE
1640 BUG23496 MAC : fast/replaced/width100percent-radio.html = IMAGE
1641 BUG23496 MAC DEBUG : fast/text/textIteratorNilRenderer.html = IMAGE
1642 BUG23496 SLOW MAC RELEASE : fast/text/textIteratorNilRenderer.html = IMAGE
1643 BUG23496 MAC : fast/text/whitespace/normal-after-nowrap-breaking.html = IMAGE
1644 BUG23496 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1645 BUG23496 MAC : tables/mozilla/bugs/bug1318.html = IMAGE
1646 BUG23496 MAC : tables/mozilla/bugs/bug4527.html = IMAGE
1647 BUG23496 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1648 BUG23496 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1649
1650 // Big button widgets are broken
1651 BUG23495 MAC : fast/forms/basic-buttons.html = IMAGE
1652 BUG23495 MAC : fast/forms/box-shadow-override.html = IMAGE+TEXT
1653 BUG23495 MAC : fast/forms/button-sizes.html = IMAGE
1654
1655 // Text declared as "monospace" with no size is bigger in Chromium
1656 BUG23494 MAC : css1/font_properties/font_family.html = IMAGE
1657 BUG23494 MAC : css2.1/t1503-c522-font-family-00-b.html = IMAGE
1658 BUG23494 MAC : fast/text/monospace-width-cache.html = IMAGE
1659
1660 // Broken upstream? Layout test should write a "PASS" or "FAIL" line; upstream has neither (ours is "PASS")
1661 BUG23492 MAC : fast/frames/frame-src-attribute.html = IMAGE
1662
1663 // Actual is just slightly off in color than expected
1664 BUG23488 MAC RELEASE : fast/backgrounds/size/backgroundSize15.html = IMAGE
1665 BUG23488 MAC DEBUG SLOW : fast/backgrounds/size/backgroundSize15.html = IMAGE
1666 BUG23488 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1667 BUG23488 MAC : fast/block/float/float-avoidance.html = IMAGE
1668 BUG23488 MAC : fast/borders/border-image-rotate-transform.html = IMAGE
1669 BUG23488 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1670 BUG23488 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1671 BUG23488 MAC : fast/box-shadow/inset.html = IMAGE
1672 BUG23488 MAC : fast/canvas/canvas-incremental-repaint-2.html = IMAGE
1673 BUG23488 MAC : fast/css/shadow-multiple.html = IMAGE
1674 BUG23488 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1675 BUG23488 MAC : fast/frames/content-opacity-1.html = IMAGE
1676 BUG23488 MAC : fast/frames/content-opacity-2.html = IMAGE
1677 BUG23488 MAC : fast/layers/add-layer-with-nested-stacking.html = IMAGE
1678 BUG23488 MAC : fast/layers/inline-dirty-z-order-lists.html = IMAGE
1679 BUG23488 MAC : fast/layers/layer-content-visibility-change.html = IMAGE
1680 BUG23488 MAC : fast/layers/remove-layer-with-nested-stacking.html = IMAGE
1681 BUG23488 MAC : fast/lists/ol-start-parsing.html = IMAGE
1682 BUG23488 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1683 BUG23488 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1684 BUG23488 MAC : fast/text/shadow-no-blur.html = IMAGE
1685 BUG23488 MAC : fast/text/shadow-translucent-fill.html = IMAGE
1686 BUG23488 MAC : svg/transforms/animated-path-inside-transformed-html.xhtml = IMAGE
1687 BUG23488 MAC : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE
1688
1689 // Looks the same to me... huh. Variation of above?
1690 BUG23489 MAC : fast/table/empty-section-crash.html = IMAGE
1691
1692 // Various drawing tests that are broken
1693 BUG23477 MAC : fast/backgrounds/bgCompositeCopy.html = IMAGE
1694 BUG23477 MAC : fast/canvas/canvas-as-image-incremental-repaint.html = IMAGE
1695 BUG23477 MAC : fast/canvas/canvas-incremental-repaint.html = IMAGE
1696 BUG23477 MAC : fast/canvas/fill-stroke-clip-reset-path.html = IMAGE
1697 BUG23477 MAC : fast/dynamic/containing-block-change.html = IMAGE
1698
1699 // Unexpected gray
1700 BUG23476 MAC : fast/forms/hidden-listbox.html = IMAGE
1701 BUG23476 MAC : fast/forms/listbox-clip.html = IMAGE
1702 BUG23476 MAC : fast/frames/inline-object-inside-frameset.html = IMAGE
1703 BUG23476 MAC : fast/overflow/hidden-scrollbar-resize.html = IMAGE
1704 BUG23476 MAC : fast/text/font-initial.html = IMAGE
1705
1706 // Missing corner resize image
1707 BUG22777 MAC : fast/css/resize-corner-tracking-transformed.html = IMAGE+TEXT
1708 BUG22777 MAC : fast/overflow/hit-test-overflow-controls.html = IMAGE+TEXT
1709
1710 // Disagreeing XML parsing error messages
1711 BUG23475 MAC : fast/invalid/missing-end-tag.xhtml = IMAGE
1712 BUG23475 MAC : fast/parser/xhtml-alternate-entities.xml = IMAGE
1713 BUG23475 MAC : fast/xsl/xslt-extra-content-at-end.xml = IMAGE
1714 BUG23475 MAC : svg/custom/junk-data.svg = IMAGE
1715
1716 // 116/136 of the repaint tests fail due to invalidation that doesn't match; further triage necessary
1717 BUG23473 MAC : fast/repaint = IMAGE
1718 BUG23473 MAC : fast/repaint/block-no-inflow-children.html = PASS
1719 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache.html = PASS
1720 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache-2.html = PASS
1721 BUG23473 MAC : fast/repaint/box-shadow-h.html = PASS
1722 BUG23473 MAC : fast/repaint/box-shadow-v.html = PASS
1723 BUG23473 MAC : fast/repaint/caret-outside-block.html = PASS
1724 BUG23473 MAC : fast/repaint/fixed.html = PASS
1725 BUG23473 MAC : fast/repaint/fixed-tranformed.html = PASS
1726 BUG23473 MAC : fast/repaint/flexible-box-overflow.html = PASS
1727 BUG23473 MAC : fast/repaint/flexible-box-overflow-horizontal.html = PASS
1728 BUG23473 MAC : fast/repaint/float-new-in-block.html = PASS
1729 BUG23473 MAC : fast/repaint/focus-layers.html = PASS
1730 BUG23473 MAC : fast/repaint/focus-ring.html = PASS
1731 BUG23473 MAC : fast/repaint/inline-block-overflow.html = PASS
1732 BUG23473 MAC : fast/repaint/layer-child-outline.html = PASS
1733 BUG23473 MAC : fast/repaint/layer-outline.html = PASS
1734 BUG23473 MAC : fast/repaint/layer-outline-horizontal.html = PASS
1735 BUG23473 MAC : fast/repaint/line-flow-with-floats-1.html = PASS
1736 BUG23473 MAC : fast/repaint/line-flow-with-floats-6.html = PASS
1737 BUG23473 MAC : fast/repaint/list-marker.html = PASS
1738 BUG23473 MAC : fast/repaint/overflow-scroll-body-appear.html = PASS
1739 BUG23473 MAC : fast/repaint/repaint-during-scroll.html = PASS
1740 BUG23473 MAC : fast/repaint/selection-gap-overflow-scroll-2.html = PASS
1741 BUG23473 MAC : fast/repaint/shadow-multiple-horizontal.html = PASS
1742 BUG23473 MAC : fast/repaint/shadow-multiple-strict-horizontal.html = PASS
1743 BUG23473 MAC : fast/repaint/shadow-multiple-strict-vertical.html = PASS
1744 BUG23473 MAC : fast/repaint/shadow-multiple-vertical.html = PASS
1745 BUG23473 MAC : fast/repaint/table-cell-vertical-overflow.html = PASS
1746 BUG23473 MAC : fast/repaint/text-shadow.html = PASS
1747 BUG23473 MAC : fast/repaint/text-shadow-horizontal.html = PASS
1748
1749 // Thicker shadow than expected
1750 BUG23471 MAC : fast/text/stroking.html = IMAGE
1751
1752 // SVG foreign object skew off by a lot
1753 BUG23466 MAC : svg/custom/foreign-object-skew.svg = IMAGE
1754
1755 // Missing baselines
1756 // BUG23557 MAC : fast/text/text-letter-spacing.html = IMAGE
1757
1758 // Failing on the bots but not locally; need investigation
1759 BUG23560 MAC : fast/images/animated-svg-as-image.html = IMAGE PASS
1760
1761 // -----------------------------------------------------------------
1762 // END MAC PORT TESTS
1763 // -----------------------------------------------------------------
1764
1765 // Linux pixeltest failure: alpha=0.5 red (1,0,0) atop yellow (1,1,0) is
1766 // coming out with with a slightly-less-than-100% red channel. This test fails
1767 // because we enforce non-transparent color in Font::drawGlyphs.
1768 BUG24191 LINUX : fast/css/hsla-color.html = FAIL
1769
1770 // Linux checksum computation produces results, different from Windows or upstream.
1771 BUG21386 LINUX : fast/repaint/erase-overflow.html = FAIL
1772 BUG21386 LINUX : fast/repaint/inline-block-resize.html = FAIL
1773 BUG21386 LINUX : fast/repaint/inline-overflow.html = FAIL
1774 BUG21386 LINUX : fast/repaint/invisible-objects.html = FAIL
1775 BUG21386 LINUX : fast/repaint/layer-full-repaint.html = FAIL
1776 BUG21386 LINUX : fast/repaint/layer-hide-when-needs-layout.html = FAIL
1777 BUG21386 LINUX : fast/repaint/layer-visibility.html = FAIL
1778 BUG21386 LINUX : fast/repaint/overflow-clip-subtree-layout.html = FAIL
1779 BUG21386 LINUX : fast/repaint/subtree-root-clip-2.html = FAIL
1780 BUG21386 LINUX : fast/repaint/subtree-root-clip-3.html = FAIL
1781 BUG21386 LINUX : fast/repaint/subtree-root-clip.html = FAIL
1782 BUG21386 LINUX : fast/repaint/table-col-background.html = FAIL
1783 BUG21386 LINUX : fast/repaint/table-row.html = FAIL
1784 BUG21386 LINUX : fast/repaint/table-section-overflow.html = FAIL
1785 BUG21386 LINUX : fast/layers/layer-content-visibility-change.html = FAIL
1786 BUG21386 LINUX : fast/repaint/table-cell-overflow.html = FAIL
1787
1788 // TODO(tc): flaky.
1789 BUG10391 LINUX : fast/events/5056619.html = FAIL
1790
1791 // Failed with r6844 (dglazkov)
1792 BUG10392 LINUX MAC : http/tests/navigation/error404-goback.html = FAIL
1793
1794 // Skipped as this tests window.sessionStorage, which we don't
1795 // support. Enable once we turn on DOM_STORAGE.
1796 BUG4360 SKIP : http/tests/navigation/post-goback-repost-policy.html = TIMEOUT
1797
1798 // Merge 39309:39335 Regressions (RenderButton::setupInnerStyle regression).
1799 BUG5737 LINUX : fast/forms/001.html = FAIL
1800 BUG5737 LINUX : fast/forms/input-first-letter.html = FAIL
1801
1802 // The (x) in type=search inputs appears to be slightly broken.  This test will also need a rebaseline.
1803 BUG20439 WIN LINUX : fast/forms/search-transformed.html = FAIL
1804
1805 // Linux's rotated text output looks terrible.
1806 BUG10397 LINUX : fast/transforms/transformed-document-element.html = FAIL
1807
1808 // Merge 39744:39913? - regressions
1809 BUG10403 LINUX : svg/custom/animate-path-morphing.svg = FAIL
1810
1811 // might need to be rebaselined in win, 'DRAFT' rendering incorrect before
1812 BUG10405 WIN : svg/custom/struct-use-09-b.svg = FAIL
1813
1814 // New tests added in http://trac.webkit.org/changeset/40424
1815 // Renders the width of "600" off by 3.  Looks OK but could still be a bug
1816 // that we shouldn't rebaseline.
1817 BUG10417 LINUX : svg/W3C-SVG-1.1/text-fonts-02-t.svg = FAIL
1818
1819 // New test. We should fix it, but it doesn't need to block the current release
1820 BUG10418 SLOW MAC RELEASE : fast/events/click-count.html = PASS
1821 BUG10418 WIN DEBUG : animations/change-keyframes-name.html = FAIL PASS
1822
1823 // TODO(dsh): These started to fail after r9202.
1824 BUG10419 LINUX : svg/W3C-SVG-1.1/text-path-01-b.svg = FAIL
1825
1826 // We could fix this test for us and upstream it if the test shell user agent
1827 // would let us differentiate test_shell and WebKit DumpTreeNode.
1828 BUG7482 LINUX MAC : http/tests/misc/timer-vs-loading.html = TIMEOUT
1829 BUG7482 WIN : http/tests/misc/timer-vs-loading.html = PASS TIMEOUT
1830
1831 // Regressions from WebKit merge 40722:40785
1832 // Misc failures:
1833 // New test. We should fix it, but it doesn't need to block the current release
1834 BUG10420 LINUX : svg/W3C-SVG-1.1/types-basicDOM-01-b.svg = FAIL
1835 BUG10420 LINUX : svg/custom/use-transform.svg = FAIL
1836
1837 // Regressions from WebKit merge to 40864
1838 // Likely just needs a rebaseline.
1839 BUG10421 LINUX : fast/block/positioning/001.html = FAIL
1840
1841 // Selection highlight colors are wrong.
1842 BUG10426 LINUX : fast/lists/drag-into-marker.html = FAIL
1843
1844 // It's not clear that the test isn't wrong here. It believes that middle
1845 // aligning 15px Ahem should end up in a certain spot. But we have the
1846 // x-height correct and we're still one px off.
1847 BUG10429 LINUX : css2.1/t100801-c544-valgn-01-d-ag.html = FAIL
1848
1849 // New failures from Merge 41078:41149
1850 BUG10430 LINUX : svg/W3C-SVG-1.1/text-intro-05-t.svg = FAIL
1851
1852 // Regression from merge 41268:41286
1853 // See above comment about this test on linux/win.
1854 BUG10435 MAC : editing/selection/designmode-no-caret.html = FAIL
1855
1856 // Flakey. Not clear when it started, but it was before 3/9/09.
1857 // This test also started failing with the merge of March 25th 2009
1858 BUG10441 WIN DEBUG : transitions/transition-end-event-transform.html = FAIL PASS
1859 BUG10441 MAC WIN RELEASE : transitions/transition-end-event-transform.html = FAIL PASS
1860
1861 // This test hits a stack-overflow exception earlier in debug mode than in
1862 // release mode on Windows.
1863 //
1864 // Hits the stack overflow earlier than before the new compiler in both
1865 // release and debug mode on Linux and Mac.
1866 //
1867 //   http://code.google.com/p/v8/issues/detail?id=277
1868 BUG10457 RELEASE LINUX : fast/js/large-expressions.html = FAIL PASS
1869 BUG10457 MAC : fast/js/large-expressions.html = FAIL
1870 BUG10457 DEBUG WIN SLOW : fast/js/large-expressions.html = FAIL
1871
1872
1873 // Merge 41768:41807
1874 // Perhaps just needs new baseline?
1875 // These tests were rebaselined with failure long ago. We shouldn't do this, and
1876 // instead work upstream to improve tests so that they don't fail.
1877 // Just need rebaseline
1878 BUG10458 LINUX : fast/forms/textarea-width.html = FAIL
1879
1880
1881 // New failures from merge
1882 BUG27486 WIN : fast/forms/listbox-hit-test-zoomed.html = FAIL
1883 BUG27486 RELEASE LINUX : fast/forms/listbox-hit-test-zoomed.html = FAIL
1884 BUG27486 LINUX DEBUG : fast/forms/listbox-hit-test-zoomed.html = FAIL
1885 BUG27486 WIN LINUX : fast/forms/slider-zoomed.html = FAIL
1886
1887 // See WebKit 41948
1888 // Regressed further at 57820, jamesr investigating
1889 BUG10468 MAC SKIP : fast/replaced/border-radius-clip.html = MISSING
1890
1891 // Mac flaky failures.
1892 BUG10472 MAC DEBUG : svg/css/glyph-orientation-rounding-test.xhtml = FAIL PASS
1893
1894 // <input type="search">; various failures, some tests may simply need new
1895 // baselines, others have more problems.
1896 BUG10473 LINUX : fast/forms/placeholder-pseudo-style.html = FAIL
1897 BUG10473 LINUX : fast/forms/placeholder-set-value.html = FAIL
1898 BUG10473 LINUX : fast/forms/search-display-none-cancel-button.html = FAIL
1899 BUG10473 LINUX : fast/forms/search-placeholder-value-changed.html = FAIL
1900 BUG10473 LINUX : fast/forms/searchfield-heights.html = FAIL
1901 BUG10473 LINUX : fast/replaced/width100percent-searchfield.html = FAIL
1902
1903 // This test isn't just slow -- sometimes it times out indefinitely.
1904 // r37311:r37313 started making the test fail with a text diff.
1905 BUG27569 BUG33316 LINUX MAC WIN : http/tests/xmlhttprequest/redirect-cross-origin-tripmine.html = TIMEOUT FAIL PASS
1906
1907 BUG9613 WIN LINUX : fast/dom/clientWidthAfterDocumentIsRemoved.html = IMAGE+TEXT
1908 BUG9613 MAC : fast/dom/clientWidthAfterDocumentIsRemoved.html = TEXT
1909
1910 // Merge WebKit 42133:42199 regressions
1911 BUG20570 LINUX : fast/events/context-no-deselect.html = FAIL
1912
1913 // These tests were affected by rolling out WebKit i8n patches.
1914 // Was only WIN, also fail on LINUX since merge 43346:43361
1915 BUG9768 LINUX WIN : fast/forms/select-initial-position.html = FAIL
1916 // Was only WIN, also fail on LINUX since merge 43346:43361
1917 BUG9768 LINUX WIN : fast/forms/select-visual-hebrew.html = FAIL
1918 // Was only WIN, also fail on LINUX since merge 43346:43361
1919 BUG9768 LINUX WIN : fast/forms/visual-hebrew-text-field.html = FAIL
1920 // Linux looks ok, rebaselined.
1921 BUG9768 WIN : fast/text/cg-fallback-bolding.html = FAIL
1922 BUG9768 WIN : fast/text/international/001.html = FAIL
1923 BUG9768 WIN : fast/text/international/002.html = FAIL
1924 BUG9768 WIN : fast/text/international/003.html = FAIL
1925 BUG9768 WIN : fast/text/international/wrap-CJK-001.html = FAIL
1926
1927 // Merge WebKit 42200:42244 regressions
1928 BUG9786 : fast/dom/Window/dom-access-from-closure-iframe.html = FAIL
1929 BUG9786 : fast/dom/Window/dom-access-from-closure-window.html = FAIL
1930 BUG9786 WIN DEBUG : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1931 BUG9786 SLOW WIN RELEASE : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1932 BUG9786 LINUX MAC : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1933 BUG9786 : http/tests/security/cross-frame-access-location-prototype.html = FAIL
1934 BUG9786 : http/tests/security/cross-frame-access-document-direct.html = TIMEOUT
1935 BUG10479 MAC : svg/hixie/perf/001.xml = FAIL
1936 BUG10479 MAC : svg/hixie/perf/002.xml = FAIL
1937
1938 BUG9798 SLOW WIN DEBUG : fast/dom/Window/slow-unload-handler.html = PASS
1939
1940 // Was flaky. Became a consistent failure.
1941 BUG9798 WIN : http/tests/loading/preload-img-test.html = TIMEOUT PASS
1942 BUG9798 WIN DEBUG : http/tests/local/style-access-before-stylesheet-loaded.html = FAIL PASS
1943 BUG9798 WIN DEBUG : http/tests/misc/redirect-with-quotes.php = TIMEOUT PASS
1944 BUG9798 WIN SLOW : http/tests/misc/refresh-headers.php = PASS
1945 BUG9798 WIN : http/tests/security/cross-frame-access-protocol-explicit-domain.html = FAIL PASS
1946 BUG9798 WIN DEBUG : http/tests/security/cross-frame-access-protocol.html = FAIL PASS
1947 BUG9798 RELEASE : http/tests/security/dataURL/xss-DENIED-from-data-url-in-foreign-domain-subframe.html = TIMEOUT PASS
1948 BUG9798 WIN : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-timeout.html = PASS TIMEOUT
1949 BUG9798 WIN : http/tests/xmlhttprequest/basic-auth.html = TIMEOUT PASS
1950 BUG9798 WIN DEBUG : http/tests/xmlhttprequest/encode-request-url-2.html = TIMEOUT PASS
1951 BUG9797 BUG9798 WIN RELEASE SLOW : http/tests/xmlhttprequest/state-after-network-error.html = PASS
1952 BUG9797 LINUX DEBUG : svg/carto.net/colourpicker.svg = FAIL
1953 BUG9798 LINUX RELEASE : svg/carto.net/colourpicker.svg = FAIL
1954 BUG9798 LINUX : svg/custom/invisible-text-after-scrolling.xhtml = IMAGE
1955 BUG9798 LINUX RELEASE : tables/mozilla/bugs/45621.html = FAIL
1956 BUG9798 LINUX DEBUG SLOW : tables/mozilla/bugs/45621.html = FAIL
1957 //also BUG24868 (crash)
1958 BUG9798 LINUX DEBUG : transitions/mask-transitions.html = FAIL PASS
1959 BUG9798 SLOW LINUX RELEASE : transitions/transition-timing-function.html = PASS
1960 // This test definitely times out (i.e. is not just slow).
1961 BUG9798 WIN RELEASE : http/tests/xmlhttprequest/small-chunks-response-text.html = PASS TIMEOUT
1962 BUG9798 LINUX DEBUG : fast/multicol/float-multicol.html = IMAGE PASS
1963 BUG9798 MAC RELEASE : editing/selection/drag-in-iframe.html = FAIL PASS
1964 BUG9798 LINUX : svg/custom/use-property-changes-through-svg-dom.svg = FAIL
1965 BUG9798 LINUX : svg/custom/js-update-transform-changes.svg = FAIL
1966 // Occasionally times out. Not just slow.
1967 BUG9798 WIN DEBUG : http/tests/loading/redirect-methods.html = TIMEOUT PASS
1968
1969 // New tests or failures from WebKit merge 42324:42364. Re-baselined on
1970 // Windows. Probably just need the same on other platforms.
1971 BUG9962 MAC : fast/js/function-apply-aliased.html = FAIL
1972
1973 // Regressions from WebKit merge 43264:42403, unknown cause(s)
1974 BUG10055 MAC : fast/events/updateLayoutForHitTest.html = FAIL
1975
1976 // New tests from WebKit Merge 42609:42671
1977 BUG10760 LINUX : fast/forms/input-text-scroll-left-on-blur.html = FAIL
1978 BUG10760 LINUX : fast/inline/25277-2.html = FAIL
1979 BUG10760 LINUX : fast/inline/25277.html = FAIL
1980 BUG10760 LINUX : svg/custom/marker-child-changes.svg = PASS FAIL
1981 BUG10760 LINUX : svg/custom/marker-viewBox-changes.svg = FAIL
1982
1983 // New failures from WebKit merge 42725:42805
1984 // WebKit change http://trac.webkit.org/changeset/42785
1985 // added a test which submits a form and then uses history.back()
1986 // to go back. in test_shell history.back() does not go back,
1987 // so the test timeouts.
1988 BUG11001 LINUX MAC WIN : http/tests/history/back-to-post.php = TIMEOUT
1989
1990 // Regressions from WebKit Merge 42932:42994 due to text metric changes.
1991 BUG11251 WIN DEBUG : fast/forms/textarea-width.html = FAIL
1992 BUG11251 SLOW WIN RELEASE : fast/forms/textarea-width.html = FAIL
1993 BUG11251 WIN LINUX RELEASE : fast/forms/text-control-intrinsic-widths.html = FAIL
1994 BUG11251 LINUX WIN DEBUG : fast/forms/text-control-intrinsic-widths.html = FAIL
1995 BUG11251 WIN LINUX : svg/custom/svg-fonts-in-text-controls.html = FAIL
1996 BUG11251 WIN LINUX : fast/forms/textarea-metrics.html = FAIL
1997
1998 // Unimplemented test shell features causing editing tests to fail
1999
2000 // We don't draw the spelling markers at all in test shell.
2001 BUG11577 WIN LINUX : editing/spelling/inline_spelling_markers.html = FAIL
2002 BUG11577 LINUX : editing/spelling/spellcheck-attribute.html = FAIL
2003 BUG11577 WIN LINUX : editing/spelling/spelling-linebreak.html = FAIL
2004
2005 // Regresssions from WebKit Merge 43114:43242 that just need to be re-baselined.
2006 BUG11483 LINUX : fast/forms/input-text-double-click.html = FAIL
2007 BUG11483 LINUX : svg/text/foreignObject-repaint.xml = FAIL
2008
2009 // Regressions from WebKit merge 43242:43321.  These just need to re-baselining:
2010 BUG24229 LINUX : fast/forms/select-dirty-parent-pref-widths.html = FAIL
2011 BUG24229 LINUX : svg/transforms/animated-path-inside-transformed-html.xhtml = FAIL
2012 BUG24229 LINUX : svg/transforms/text-with-pattern-inside-transformed-html.xhtml = FAIL
2013 BUG24229 LINUX : svg/transforms/text-with-pattern-with-svg-transform.svg = FAIL
2014
2015 // TODO(erg): Attempted to rebaseline these tests as part of the above
2016 // 43346:43361 rebaseling from http://trac.webkit.org/changeset/43355. Turned
2017 // tree red. May be more involved then just rebaselining.
2018 BUG11613 LINUX : editing/deleting/5168598.html = FAIL
2019 BUG11613 LINUX : editing/inserting/5607069-2.html = FAIL
2020
2021 // Already baselined for chromium-win, may need to be done for mac/linux as well.
2022 BUG11796 LINUX : fast/forms/search-styled.html = FAIL
2023
2024 // Details for all of these are in the bugs.
2025 BUG12361 WIN SLOW : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2026 BUG12361 LINUX MAC DEBUG : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2027 BUG12361 LINUX RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2028 BUG12361 SLOW MAC RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2029
2030 // WebKit 44438:44544
2031 BUG13721 LINUX : fast/dynamic/positioned-movement-with-positioned-children.html = FAIL
2032
2033 BUG14207 LINUX : tables/mozilla/bugs/bug28341.html = FAIL
2034 BUG32231 WIN DEBUG : tables/mozilla/bugs/bug28341.html = IMAGE PASS
2035
2036 // Newly added test http://trac.webkit.org/changeset/44816
2037 BUG18733 WIN SLOW : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL
2038 BUG18733 MAC DEBUG : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL TIMEOUT
2039 BUG18733 LINUX MAC RELEASE : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL
2040 BUG18733 LINUX DEBUG : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL
2041
2042 BUG14832 : editing/selection/user-drag-element-and-user-select-none.html = FAIL
2043
2044 // WebKit 45017:45086
2045 BUG15217 : fast/js/dictionary-no-cache.html = FAIL
2046 BUG15217 MAC : fast/js/switch-behaviour.html = FAIL
2047
2048 // WebKit 45086:45111
2049 BUG15270 MAC LINUX RELEASE : fast/js/excessive-comma-usage.html = TEXT
2050 BUG15270 MAC LINUX DEBUG SLOW : fast/js/excessive-comma-usage.html = FAIL
2051 BUG15270 WIN : fast/js/excessive-comma-usage.html = CRASH FAIL
2052
2053
2054 // Flaky for a while; also related to BUG17974
2055 BUG15267 WIN LINUX : transitions/cancel-transition.html = PASS FAIL
2056
2057 // WebKit 45431:45444
2058 BUG10384 MAC : fast/events/frame-tab-focus.html = FAIL
2059 BUG11613 LINUX : fast/forms/tabbing-input-iframe.html = FAIL
2060 BUG11613 LINUX RELEASE : fast/overflow/scrollRevealButton.html = FAIL
2061 BUG11613 LINUX DEBUG : fast/overflow/scrollRevealButton.html = FAIL
2062
2063 // WebKit tests regressions 20529:20532
2064 BUG16675 MAC : fast/dynamic/flash-replacement-test.html = FAIL
2065
2066 // WebKit merge 42738:45840
2067 // New test, needs baseline.
2068 BUG16690 SKIP MAC : fast/text/international/khmer-selection.html = FAIL
2069
2070 // WebKit merge 42738:45840
2071 // New tests, need baseline.
2072 BUG16240 WIN DEBUG : http/tests/cache/subresource-expiration.html = TIMEOUT
2073 BUG16240 MAC WIN RELEASE : http/tests/cache/subresource-expiration.html = TIMEOUT
2074 BUG14752 LINUX SLOW : http/tests/cache/subresource-expiration.html = PASS
2075
2076 // New tests with WebKit merge 46288:46363
2077 BUG18116 : fast/dom/constructed-objects-prototypes.html = TEXT
2078 BUG18116 : fast/dom/prototype-inheritance-2.html = TEXT
2079 // New in WebKit r52559
2080 BUG18116 : svg/custom/global-constructors.html = TEXT
2081
2082 // Flaky.  Timing?
2083 BUG18584 WIN DEBUG : animations/combo-transform-translate+scale.html = FAIL PASS
2084 BUG18584 WIN DEBUG : animations/change-one-anim.html = PASS TEXT
2085
2086 // Flaky crashes
2087 BUG18656 MAC RELEASE : fast/dom/Window/window-lookup-precedence.html = FAIL
2088 BUG18656 MAC DEBUG : fast/dom/Window/window-lookup-precedence.html = FAIL
2089
2090 // Test failures caused by re-enabling skia asserts.
2091 BUG18896 LINUX WIN DEBUG : svg/batik/paints/gradientLimit.svg = TIMEOUT FAIL
2092
2093 // Test failures from WebKit merge 46894 to 46977
2094 BUG26737 : fast/js/prototypes.html = FAIL
2095
2096 // WebKit roll r47417:47528
2097 BUG19766 LINUX : fast/replaced/width100percent-menulist.html = FAIL
2098
2099 // Fails due to textInputController.setInputMethod not implemented for Mac.
2100 BUG19665 MAC : platform/mac/editing/input/hangul-enter-confirms-and-sends-keypress.html = FAIL
2101 BUG19665 MAC : platform/mac/editing/input/kotoeri-enter-to-confirm-and-newline.html = FAIL
2102
2103 // WebKit 47777:47790 - getOwnPropertyDescriptor
2104 BUG20345 : fast/js/getOwnPropertyDescriptor.html = FAIL
2105 BUG20345 : fast/dom/Window/window-property-descriptors.html = TEXT
2106 // Failures from Webkit merger 51724 -> 51772
2107 BUG20345 : http/tests/security/cross-frame-access-getOwnPropertyDescriptor.html = TEXT
2108
2109 BUG10480 LINUX : editing/selection/move-by-line-001.html = FAIL
2110
2111 // The linux layout result in build bot shows the changed method does not
2112 // executed.
2113 BUG21141 LINUX : fast/forms/select-double-onchange.html = FAIL
2114 BUG21141 LINUX RELEASE : fast/forms/select-script-onchange.html = FAIL
2115 BUG21141 LINUX DEBUG : fast/forms/select-script-onchange.html = FAIL
2116
2117 // Flaky, not clear as of when.
2118 BUG21411 WIN LINUX DEBUG : svg/dom/SVGScriptElement/script-load-and-error-events.svg = TEXT PASS
2119
2120 // WK roll to 48371
2121 BUG21841 MAC DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2122 BUG21841 WIN DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2123
2124 BUG25616 WIN : fast/overflow/overflow-float-stacking.html = FAIL
2125
2126 // Flaky. The width of containing RenderBlocks sometimes becomes larger
2127 BUG21958 MAC : svg/hixie/error/012.xml = FAIL
2128
2129 // WebKit merge 48500:48585, newly implemented Object.defineProperty.
2130 BUG22526 : fast/js/Object-create.html = FAIL
2131 BUG22526 : fast/js/Object-defineProperties.html = FAIL
2132 BUG22526 : fast/js/Object-defineProperty.html = FAIL
2133 BUG22526 : http/tests/security/xss-DENIED-defineProperty.html = FAIL
2134
2135 // WebKit merge 48500:48585, due to newly added support for MathML.
2136 BUG22554 SKIP : mathml = FAIL
2137
2138 // WebKit update 48796:48820
2139 BUG23956 WIN LINUX : fast/dom/Element/getBoundingClientRect.html = FAIL
2140 BUG23956 WIN LINUX : fast/dom/Range/getBoundingClientRect.html = FAIL
2141 BUG23956 WIN LINUX : fast/dom/Range/getClientRects.html = FAIL
2142 BUG24126 : fast/dom/HTMLInputElement/size-attribute.html = FAIL
2143
2144 // Started happening somewhere around http://trac.webkit.org/changeset/48989.
2145 BUG23955 LINUX MAC : fast/css/last-of-type-pseudo-class.html = FAIL
2146
2147 // WebKit update: 49190:49206
2148 BUG_JPARENT LINUX DEBUG SLOW : fast/frames/calculate-fixed.html = PASS
2149
2150 // Started failing for no apparent reason at r28124, and IMAGE+TEXT diffs started at r51875
2151
2152 // Flaky timeouts first appearing at r27764 (webkit 48947)
2153 BUG9798 WIN : http/tests/cookies/multiple-cookies.html = TIMEOUT PASS
2154
2155 // WebKit update: 49213:49221
2156 BUG24063 : fast/dom/Window/window-postmessage-clone.html = FAIL
2157
2158 // Got slow with V8 update to 1.3.15. Debug logging perhaps?
2159 BUG24182 DEBUG SLOW : fast/forms/input-implicit-length-limit.html = PASS
2160 BUG24182 DEBUG SLOW : fast/forms/input-maxlength.html = PASS
2161
2162 // Failing at WebKit Linux (dbg)(3) build 7795
2163 BUG24119 LINUX DEBUG : tables/mozilla/bugs/bug1220.html = PASS FAIL
2164
2165 // WebKit roll 49405:49413
2166 BUG28409 : http/tests/xmlhttprequest/logout.html = FAIL
2167
2168 // WebKit Roll 49597:49640
2169 BUG24966 SLOW MAC DEBUG : fast/frames/calculate-fixed.html = PASS
2170
2171 // WebKit Roll 49640:49684
2172 BUG26253 SLOW WIN RELEASE : http/tests/navigation/reload-subframe-object.html = PASS
2173 BUG25202 LINUX WIN : svg/W3C-SVG-1.1/masking-path-02-b.svg = FAIL
2174 BUG25208 LINUX WIN : svg/W3C-SVG-1.1/masking-path-05-f.svg = FAIL
2175 BUG_JEREMY MAC : fast/frames/onlyCommentInIFrame.html = FAIL
2176
2177 // WebKit Roll 49684:49761
2178 BUG26042 DEBUG : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2179 BUG26042 LINUX RELEASE : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2180
2181 // Incorrect baseline removed.
2182 BUG25433 WIN LINUX : css2.1/t040103-ident-03-c.html = IMAGE
2183
2184 // WebKit roll 49961:49992
2185 // Added in http://trac.webkit.org/changeset/49990
2186 BUG25884 WIN LINUX : fast/dom/Document/CaretRangeFromPoint/caretRangeFromPoint-in-zoom-and-scroll.html = FAIL
2187
2188 BUG26344 LINUX DEBUG : fast/text/atsui-partial-selection.html = CRASH
2189 BUG26344 LINUX DEBUG : platform/mac/editing/deleting/backward-delete.html = CRASH
2190
2191 // More fallout from the above roll.
2192 BUG_JORLOW LINUX : fast/multicol/column-rules-stacking.html = FAIL
2193
2194 // ==== WebKit roll 50258:50313 ====
2195 BUG26291 MAC : fast/text/atsui-multiple-renderers.html = IMAGE
2196 BUG26291 MAC : transforms/2d/hindi-rotated.html = IMAGE
2197
2198 // Flaky since at least WebKit 50258.
2199 BUG32098 : fast/dom/defaultView.html = MISSING PASS
2200 BUG9798 WIN RELEASE : http/tests/navigation/no-referrer-reset.html = TIMEOUT PASS
2201
2202 // more test flakiness
2203 BUG27334 MAC : http/tests/security/xssAuditor/object-embed-tag.html = PASS
2204
2205 // more test flakiness
2206 BUG27418 SLOW WIN RELEASE : http/tests/cookies/simple-cookies-max-age.html = PASS
2207 BUG27418 SLOW WIN RELEASE : http/tests/misc/url-in-utf16le.html = PASS
2208 BUG27418 MAC DEBUG : http/tests/plugins/interrupted-get-url.html = PASS TEXT
2209 BUG27418 MAC RELEASE SLOW : http/tests/plugins/interrupted-get-url.html = PASS
2210
2211 // The following upstream patches add -Webkit-color-correction support:
2212 // http://trac.webkit.org/changeset/50760
2213 // http://trac.webkit.org/changeset/50852
2214 // The ColorSpace was only implemented for CG, more port implementation
2215 // required in order for Chromium to support color correction.
2216 BUG28005 : fast/css/color-correction-backgrounds-and-text.html = FAIL
2217 BUG28005 LINUX WIN : fast/css/color-correction-on-backgrounds.html = FAIL
2218 BUG28005 LINUX WIN : fast/css/color-correction-on-text.html = FAIL
2219 BUG28005 LINUX WIN : fast/css/color-correction.html = FAIL
2220 BUG28005 WIN LINUX : fast/css/color-correction-on-box-shadow.html = IMAGE+TEXT
2221 BUG28005 WIN LINUX : fast/css/color-correction-on-text-shadow.html = IMAGE+TEXT
2222 BUG28005 : fast/css/color-correction-on-background-image.html = FAIL
2223 BUG28005 LINUX WIN : fast/css/color-correction-untagged-images.html = FAIL
2224
2225 // May also be related to r50760, but not as confident.
2226 BUG27551 WIN : fast/css/shadow-multiple.html = IMAGE
2227
2228 // WebKit merge 50756:50820, possibly due to WebKit r50808/r50786 and Chromium r31715
2229 BUG27553 WIN : fast/text/atsui-partial-selection.html = IMAGE
2230
2231 BUG22700 WIN LINUX : fast/canvas/canvas-shadow.html = TEXT
2232
2233
2234 // Failures from merge 50972:51042
2235 // The test requires DRT/Test Shell to support error page handling.
2236 BUG27850 : fast/history/back-forward-reset-after-error-handling.html = TEXT
2237 // Need to update chromium so the web frame delegate is informed when window objects
2238 // in isolated worlds are cleared.
2239 BUG27849 : http/tests/security/isolatedWorld/didClearWindowObject.html = TEXT
2240
2241 BUG28040 WIN : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2242 BUG28040 MAC DEBUG : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2243
2244 BUG28040 WIN MAC DEBUG : fast/body-propagation/overflow/003-xhtml.xhtml = PASS IMAGE+TEXT
2245
2246 BUG28092 WIN : http/tests/xmlhttprequest/redirect-cross-origin-post.html = PASS FAIL
2247
2248 // Need to add Chromium localized strings for the feature. Upstream r51172
2249 BUG28264 : fast/forms/validationMessage.html = FAIL
2250
2251 // Started failing with move from Lighttpd to Apache.
2252 // Since we have some bots on Lighttpd and some on Apache, mark it as flaky for
2253 // now. Once we decide on one or the other, then we can address these tests.
2254 BUG_OJAN MAC LINUX : http/tests/loading/text-content-type-with-binary-extension.html = TEXT
2255 BUG_OJAN LINUX : http/tests/xmlhttprequest/cache-override.html = TEXT
2256
2257 // These tests time out *and* are slow. The test should be fixed to not timeout,
2258 // then should be marked as SLOW/PASS.
2259 BUG2844 WIN : http/tests/appcache/cyrillic-uri.html = TIMEOUT PASS CRASH
2260 BUG2844 WIN : http/tests/appcache/fail-on-update.html = TIMEOUT PASS TEXT CRASH
2261 BUG2844 WIN : http/tests/appcache/offline-access.html = TIMEOUT PASS
2262 BUG2844 WIN LINUX DEBUG : http/tests/appcache/update-cache.html = TIMEOUT PASS
2263 BUG2844 WIN RELEASE : http/tests/appcache/update-cache.html = TIMEOUT PASS
2264
2265 // These tests sometimes pass and sometimes have a text difference due
2266 // to chromium's appcache being async.
2267 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-3.html = TEXT PASS
2268 BUG2844 MAC LINUX : http/tests/appcache/top-frame-3.html = TEXT PASS
2269 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-4.html = TEXT PASS
2270 BUG2844 MAC LINUX : http/tests/appcache/top-frame-4.html = TEXT PASS
2271
2272 // These fail because chromium's appcache is async but webkit's is not.
2273 BUG2844 SKIP : http/tests/appcache/idempotent-update.html = FAIL
2274 BUG2844 SKIP : http/tests/appcache/top-frame-2.html = FAIL
2275
2276 // This test fails because there is no setAppCacheMaximumSize API yet.
2277 BUG2844 SKIP : http/tests/appcache/max-size.html = FAIL
2278
2279 // Flakiness documented around Webkit Roll 51681:51711
2280 BUG2844 SKIP : http/tests/appcache/404-manifest.html = TIMEOUT PASS
2281 BUG2844 SKIP : http/tests/appcache/404-resource.html = TIMEOUT PASS
2282 BUG2844 SKIP : http/tests/appcache/foreign-iframe-main.html = TIMEOUT PASS
2283 BUG2844 SKIP : http/tests/appcache/non-html.xhtml = TIMEOUT PASS
2284
2285 // New tests. Failures from merge 51253:51310.
2286 // Needs to implement NPN_reloadPlugins and add reloadPluginNoPages & reloadPluginAndPages
2287 // to plugin object.
2288 BUG29018 : plugins/reloadplugins-no-pages.html = TEXT
2289 BUG29018 : plugins/reloadplugins-and-pages.html = TIMEOUT
2290
2291 // New tests. Failures from merge 51210:51325.
2292 BUG28646 : editing/selection/transformed-selection-rects.html = FAIL
2293
2294 // New failures from merge 51412:51455.
2295 BUG28916 MAC : editing/pasteboard/paste-xml.xhtml = TEXT
2296
2297 // New failures from WebKit r51534:r51576
2298 BUG29157 WIN LINUX MAC :  svg/animations/animVal-basics.html = TIMEOUT
2299
2300 // New failures from WebKit r51577
2301 BUG29164 WIN LINUX MAC : fast/frames/sandboxed-iframe-plugins.html = TEXT
2302
2303 // New failures from WebKit merge 51581:51584
2304 BUG29167 MAC DEBUG : fast/dom/replaceChild.html = IMAGE PASS
2305
2306 // Failure from WebKit merge 51607:51613 (51608 is the cause)
2307 BUG29239 LINUX WIN : fast/css/variables/misplaced-import-test.html = FAIL
2308
2309 // Failures from WebKit merge 51642:51681
2310 BUG29393 : fast/loader/stateobjects/pushstate-object-types.html = TEXT
2311 BUG29393 : fast/loader/stateobjects/state-api-on-detached-frame-crash.html = TEXT
2312
2313 BUG29944 WIN : websocket/tests/unicode.html = TEXT PASS
2314
2315 // Failures introduced by USE_NEW_BUILDER in Skia.
2316 BUG33287 WIN LINUX : fast/canvas/set-colors.html = TEXT
2317
2318 // Failures from WebKit merge 51711:51724
2319 BUG32003 : fast/js/string-property-deletion.html = TEXT
2320 BUG31998 LINUX : svg/carto.net/selectionlist.svg = IMAGE PASS
2321 BUG31997 DEBUG WIN : fast/body-propagation/overflow/004-xhtml.xhtml = IMAGE+TEXT PASS
2322 BUG29943 WIN : websocket/tests/send.html = TEXT PASS
2323
2324 // Regression from Webkit merge 51772 -> 51784
2325 BUG35329 WIN : http/tests/appcache/resource-redirect-2.html = TIMEOUT PASS
2326
2327 // Webkit Roll to r51875
2328 BUG29748 LINUX : css1/basic/containment.html = IMAGE
2329 BUG29748 LINUX : css1/box_properties/padding_right.html = IMAGE
2330 BUG29748 LINUX : css1/font_properties/font_size.html = IMAGE
2331 BUG29748 LINUX : fast/block/float/nested-clearance.html = IMAGE
2332 BUG29748 LINUX : fast/block/positioning/051.html = IMAGE
2333 BUG29748 LINUX : fast/block/positioning/055.html = IMAGE
2334 BUG29748 LINUX : fast/forms/select-change-listbox-size.html = IMAGE
2335 BUG29748 LINUX : fast/frames/iframe-scrolling-attribute.html = IMAGE
2336 BUG29748 LINUX : fast/frames/onlyCommentInIFrame.html = IMAGE
2337 BUG29748 LINUX : fast/multicol/positioned-with-constrained-height.html = IMAGE
2338 BUG29748 LINUX : fast/repaint/overflow-scroll-delete.html = IMAGE
2339 BUG29748 LINUX : http/tests/navigation/error404-frames.html = IMAGE
2340 BUG29748 LINUX : http/tests/navigation/post-frames.html = IMAGE
2341 BUG29748 LINUX : http/tests/navigation/postredirect-frames.html = IMAGE
2342 BUG29748 LINUX : tables/mozilla/bugs/bug137388-2.html = IMAGE
2343 BUG29748 LINUX : tables/mozilla/bugs/bug2479-1.html = IMAGE
2344 BUG29748 LINUX : tables/mozilla/bugs/bug2479-4.html = IMAGE
2345 BUG29748 LINUX : tables/mozilla/bugs/bug29314.html = IMAGE
2346 BUG29748 LINUX : tables/mozilla/bugs/bug2997.html = IMAGE
2347 BUG29748 LINUX : tables/mozilla/bugs/bug32205-2.html = IMAGE
2348 BUG29748 LINUX : tables/mozilla/bugs/bug3977.html = IMAGE
2349 BUG29748 LINUX : tables/mozilla/bugs/bug43854-1.html = IMAGE
2350 BUG29748 LINUX : tables/mozilla/bugs/bug44505.html = IMAGE
2351 BUG29748 LINUX : tables/mozilla/bugs/bug650.html = IMAGE
2352 BUG29748 LINUX : tables/mozilla/bugs/bug73321.html = IMAGE
2353 BUG29748 LINUX : tables/mozilla/bugs/bug96334.html = IMAGE
2354 BUG29748 LINUX : tables/mozilla/bugs/bug96343.html = IMAGE
2355 BUG29748 LINUX : tables/mozilla/core/captions.html = IMAGE
2356 BUG29748 LINUX : tables/mozilla/core/cell_heights.html = IMAGE
2357 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
2358 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
2359 BUG29748 LINUX : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
2360 BUG29748 LINUX : tables/mozilla/other/nestedTables.html = IMAGE
2361 BUG29748 LINUX : tables/mozilla/other/test3.html = IMAGE
2362 BUG29748 LINUX : tables/mozilla/other/wa_table_thtd_rowspan.html = IMAGE
2363 BUG29748 LINUX : tables/mozilla/other/wa_table_tr_align.html = IMAGE
2364 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
2365 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
2366 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
2367 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
2368 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
2369 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
2370 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug89315.html = IMAGE
2371 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
2372 BUG29748 LINUX : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE
2373 BUG29748 LINUX : tables/mozilla_expected_failures/core/captions1.html = IMAGE
2374 BUG29748 LINUX : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
2375 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
2376 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
2377 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
2378 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
2379 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
2380 BUG29748 LINUX : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
2381 BUG29748 LINUX : tables/mozilla_expected_failures/other/test4.html = IMAGE
2382 BUG29748 WIN DEBUG : fast/forms/input-align-image.html = IMAGE+TEXT PASS
2383
2384 // More Webkit Roll to r51875
2385 // Some of these went from IMAGE+TEXT to just IMAGE at r57886
2386 BUG29737 MAC : svg/W3C-SVG-1.1/filters-blend-01-b.svg = IMAGE
2387 BUG29737 MAC : svg/W3C-SVG-1.1/filters-color-01-b.svg = IMAGE
2388 BUG29737 MAC : svg/W3C-SVG-1.1/filters-comptran-01-b.svg = IMAGE
2389 BUG29737 MAC : svg/W3C-SVG-1.1/filters-gauss-01-b.svg = IMAGE
2390 BUG29737 MAC : svg/W3C-SVG-1.1/filters-morph-01-f.svg = IMAGE
2391 BUG29737 MAC : svg/W3C-SVG-1.1/filters-offset-01-b.svg = IMAGE
2392 BUG29737 MAC : svg/batik/filters/feTile.svg = IMAGE
2393 BUG29737 MAC : svg/custom/empty-merge.svg = IMAGE
2394 BUG29737 MAC : svg/custom/feComponentTransfer-Discrete.svg = IMAGE
2395 BUG29737 MAC : svg/custom/feComponentTransfer-Gamma.svg = IMAGE
2396 BUG29737 MAC : svg/custom/feComponentTransfer-Linear.svg = IMAGE
2397 BUG29737 MAC : svg/custom/feComponentTransfer-Table.svg = IMAGE
2398 BUG29737 MAC : svg/custom/text-filter.svg = IMAGE
2399 BUG29737 MAC : svg/filters/feComposite.svg = IMAGE
2400 BUG29737 MAC : svg/filters/feDisplacementMap.svg = IMAGE
2401 BUG29737 MAC : svg/filters/feGaussianBlur.svg = IMAGE
2402 BUG29737 MAC : svg/filters/feTile.svg = IMAGE
2403 BUG29737 MAC : svg/filters/shadow-on-filter.svg = IMAGE
2404 BUG29737 MAC : svg/custom/use-elementInstance-event-target.svg = IMAGE
2405 BUG29737 SLOW MAC : svg/filters/big-sized-filter.svg = IMAGE
2406 BUG29737 MAC : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE
2407 BUG29737 MAC : svg/filters/sourceAlpha.svg = IMAGE
2408
2409 // More Webkit Roll to r51875
2410
2411 // WebKit Roll to r51915
2412 BUG29930 : fast/loader/input-element-page-cache-crash.html = TIMEOUT PASS TEXT
2413
2414
2415 // New tests courtesy of: http://trac.webkit.org/changeset/51936:
2416 BUG30048 : svg/css/composite-shadow-example.html = IMAGE
2417 BUG30048 : svg/css/composite-shadow-with-opacity.html = IMAGE
2418
2419 // Broke with http://trac.webkit.org/changeset/51939
2420 BUG30049 : platform/win/editing/selection/doubleclick-should-not-expand-across-lines.html = TEXT MISSING
2421
2422 // evan's fix rolled out in http://trac.webkit.org/changeset/52071 due to compat issues.
2423 BUG30343 LINUX : fast/css/large-number-round-trip.html = TEXT
2424
2425 // These tests got very flaky (failing 8/10 runs!) after
2426 // http://src.chromium.org/viewvc/chrome?view=rev&revision=34610
2427 // The only relevant change there is that we now sort tests purely
2428 // lexicographically instead of putting the http tests first. This is a good
2429 // thing because it matches upstream. The regressions are likely due to timing
2430 // issues because the http tests moved from one debug shard to another.
2431 // Likely, moving Windows to using Apache2 will fix this as the Linux/Mac builds
2432 // did not get flaky here and moving to Apache made the appcache tests less
2433 // flaky on those platforms.
2434 BUG25977 WIN DEBUG : http/tests/appcache/access-via-redirect.php = TIMEOUT PASS
2435 BUG25977 WIN DEBUG : http/tests/appcache/auth.html = TIMEOUT PASS
2436 BUG25977 WIN DEBUG : http/tests/appcache/crash-when-navigating-away-then-back.html = TIMEOUT PASS
2437 BUG25977 WIN DEBUG : http/tests/appcache/empty-manifest.html = TIMEOUT PASS
2438 // This test is slow on windows, but sometimes times out indefinitely.
2439 // See if this improves when we move to apache.
2440 BUG25977 WIN : http/tests/appcache/fallback.html = TIMEOUT PASS
2441 BUG25977 WIN DEBUG : http/tests/appcache/local-content.html = TIMEOUT PASS
2442 BUG25977 WIN DEBUG : http/tests/appcache/main-resource-hash.html = TIMEOUT PASS
2443 BUG25977 WIN DEBUG : http/tests/appcache/manifest-containing-itself.html = TIMEOUT PASS
2444 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect-2.html = TIMEOUT PASS
2445 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect.html = TIMEOUT PASS
2446 BUG25977 WIN DEBUG : http/tests/appcache/manifest-with-empty-file.html = TIMEOUT PASS
2447 BUG25977 WIN DEBUG : http/tests/appcache/wrong-content-type.html = TIMEOUT PASS
2448 BUG25977 WIN DEBUG : http/tests/appcache/online-whitelist.html = TIMEOUT PASS
2449 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-1.html = TIMEOUT PASS
2450 BUG25977 WIN DEBUG : http/tests/appcache/whitelist-wildcard.html = TIMEOUT PASS
2451 BUG25977 WIN DEBUG : http/tests/appcache/resource-redirect.html = TIMEOUT PASS
2452 BUG25977 WIN : http/tests/appcache/xhr-foreign-resource.html = TIMEOUT PASS
2453 BUG25977 WIN DEBUG : http/tests/appcache/simple.html = TIMEOUT PASS
2454 BUG25977 WIN DEBUG : http/tests/appcache/reload.html = TIMEOUT PASS
2455 BUG25977 WIN DEBUG : http/tests/appcache/wrong-signature-2.html = TIMEOUT PASS
2456 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-4.html = TIMEOUT TEXT PASS
2457 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-3.html = TIMEOUT TEXT PASS
2458
2459 // Flaky.
2460 BUG9798 WIN LINUX : fast/loader/javascript-url-encoding-2.html = TIMEOUT PASS
2461 BUG9798 WIN RELEASE : fast/loading/subframe-removes-itself.html = TEXT PASS
2462 BUG9798 LINUX MAC : fast/loader/invalid-charset-on-script-crashes-loader.html = TIMEOUT PASS
2463
2464 // WebKit update 52293->52323
2465 BUG31253 : http/tests/security/xss-DENIED-assign-location-href-javascript.html = TEXT
2466
2467 // WebKit update 52323->52366
2468 BUG30826 WIN : platform/win/fast/events/panScroll-imageMap-noHref-scroll.html = TEXT
2469 BUG30826 WIN DEBUG : platform/win/fast/events/panScroll-event-fired.html = PASS TEXT TIMEOUT
2470
2471 // Flaky
2472 BUG30930 LINUX DEBUG : tables/mozilla/bugs/bug15933.html = IMAGE PASS
2473
2474 // WebKit roll 52468->52535
2475 BUG31991 WIN LINUX : fast/text/international/bidi-layout-across-linebreak.html = TEXT
2476 BUG31252 : http/tests/security/listener/xss-inactive-closure.html = TEXT
2477
2478 BUG31623 WIN: http/tests/appcache/remove-cache.html = PASS TEXT TIMEOUT
2479
2480 // WebKit roll 52769 -> 52793
2481 BUG31642 LINUX DEBUG: svg/W3C-SVG-1.1/animate-elem-30-t.svg = IMAGE CRASH
2482
2483 // WebKit roll 52852 -> 52867
2484 BUG32018 : websocket/tests/frame-lengths.html = PASS TIMEOUT
2485 BUG32018 DEBUG : websocket/tests/simple-stress.html = PASS TEXT
2486
2487 // Flaky
2488 BUG31803 MAC LINUX : editing/inserting/12882.html = IMAGE PASS
2489
2490 // from http://trac.webkit.org/changeset/53078
2491 BUG32154 LINUX DEBUG : fast/text/find-kana.html = CRASH
2492
2493 // from http://trac.webkit.org/changeset/53086
2494 BUG32153 : svg/dynamic-updates/SVGTextElement-svgdom-rotate-prop.html = TEXT
2495
2496 // a bunch of tests broken before the flakiness fix, i will deal with these
2497 // after the major flakiness goes away
2498 BUG32155 : fast/js/Object-getOwnPropertyNames.html = TEXT
2499
2500 // New flakiness?
2501 BUG32145 WIN : animations/3d/transform-origin-vs-functions.html = TEXT PASS
2502 BUG32149 WIN RELEASE : fast/dom/Document/early-document-access.html = TIMEOUT PASS
2503
2504 BUG32195 : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = IMAGE+TEXT PASS
2505
2506 // Expectations from roll to 53171:53194
2507 BUG32235 LINUX DEBUG : svg/W3C-SVG-1.1/filters-diffuse-01-f.svg = PASS TEXT
2508
2509 BUG32308 DEBUG : fast/frames/cached-frame-counter.html = TIMEOUT
2510
2511 // WebKit roll 53341:53451
2512 BUG32670 LINUX : fast/css/zoom-body-scroll.html = TEXT
2513 BUG32673 WIN LINUX : fast/forms/textarea-scrollbar-height.html = TEXT
2514 BUG32675 LINUX : fast/repaint/trailing-floats-root-line-box-overflow.html = IMAGE
2515
2516 // Flaky tests found during the roll.
2517 BUG32679 LINUX DEBUG : http/tests/navigation/lockedhistory-iframe.html = TEXT PASS
2518 BUG32682 LINUX : svg/W3C-SVG-1.1/filters-conv-01-f.svg = TEXT PASS
2519 BUG32684 WIN : inspector/timeline-layout.html = TEXT PASS
2520 BUG35519 WIN SKIP : http/tests/inspector/inspect-iframe-from-different-domain.html = PASS
2521 BUG32688 MAC DEBUG : fast/lists/inlineBoxWrapperNullCheck.html = TEXT PASS
2522 BUG32689 MAC LINUX DEBUG : http/tests/security/mixedContent/about-blank-iframe-in-main-frame.html = TEXT PASS
2523 BUG32693 MAC DEBUG : svg/dom/SVGRectElement/rect-modify-rx.svg = TEXT PASS
2524 BUG35773 WIN LINUX : inspector/console-dir.html = CRASH TEXT PASS
2525
2526 BUG33293 SKIP : fast/media/lifetime.html = TIMEOUT
2527
2528 // WebKit roll 53585 -> 53655
2529 BUG32864 WIN LINUX MAC : plugins/mouse-events-fixedpos.html = TEXT
2530
2531 // WebKit roll 53655 -> 53704
2532 BUG32900 WIN LINUX : http/tests/misc/slow-loading-mask.html = IMAGE+TEXT
2533
2534 // WebKit roll 53704 -> 53747
2535 BUG32949 WIN LINUX MAC : fast/dom/Window/invalid-protocol.html = TEXT
2536
2537 BUG21852 DEFER SKIP LINUX WIN : fast/canvas/webgl = CRASH
2538
2539 // Disabled until we get history.{back,forward,go} changed to always be
2540 // asynchronously again.
2541 BUG33350 : fast/dom/location-hash.html = TEXT
2542
2543 // WebKit roll 53941 -> 54015
2544 BUG33358 WIN LINUX : fast/dom/Window/window-postmessage-clone-frames.html = TEXT
2545
2546 // WebKit roll 54016 -> 54045
2547 BUG33486 WIN LINUX : fast/text/international/hebrew-vowels.html = IMAGE+TEXT
2548 BUG33486 LINUX : fast/text/international/thai-baht-space.html = IMAGE
2549 BUG33486 LINUX : fast/text/international/thai-line-breaks.html = IMAGE
2550
2551 // WebKit roll 54059 -> 54075
2552 BUG33538 : fast/dom/Window/anonymous-slot-with-changes.html = TEXT
2553
2554 // Flaky test
2555 BUG35064 WIN DEBUG : fast/forms/restore-selection-after-layout.html = TEXT PASS
2556
2557 // WebKit roll 54482 to 54493.
2558 BUG35242 WIN : svg/W3C-SVG-1.1/filters-conv-01-f.svg = TEXT
2559 BUG35242 WIN : svg/W3C-SVG-1.1/text-intro-05-t.svg = TEXT
2560 BUG35240 MAC : svg/custom/use-clipped-hit.svg = IMAGE
2561
2562 // WebKit roll 54493 to 54530: new tests.
2563 BUG35114 : fast/js/parser-syntax-check.html = TEXT
2564
2565 // WebKit roll 54530 to 54550
2566 BUG35238 MAC : fast/dom/clone-node-dynamic-style.html = IMAGE
2567
2568 // WebKit roll 54550 to 54559
2569 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-defaults.svg = IMAGE
2570 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-1.svg = IMAGE
2571 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-2.svg = IMAGE
2572 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-3.svg = IMAGE
2573 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-in-xhtml-defaults.xhtml = IMAGE
2574
2575 // WebKit roll 54559 to 54585
2576 BUG35237 : fast/events/multiline-link-arrow-navigation.html = TEXT
2577
2578 // Due to not building TestNetscapePlugin.cpp.
2579 BUG35387 : platform/win/plugins/plugin-delayed-destroy.html = TIMEOUT
2580 BUG35387 : plugins/reentrant-update-widget-positions.html = TIMEOUT
2581 BUG35387 : plugins/update-widgets-crash.html = TIMEOUT
2582
2583 // New test added in WebKit r54783
2584 BUG35822 : plugins/netscape-browser-object-identity.html = TEXT
2585
2586 // Started failing during roll from 54848 -> 54898
2587 // Started failing with 54865. No rebaselines upstream but they don't run pixel tests.
2588 BUG36019 WIN LINUX : fast/images/svg-as-tiled-background.html = IMAGE
2589
2590 // WebKit roll 55250 to 55339
2591 BUG36966 : fast/loader/about-blank-hash-kept.html = FAIL
2592
2593 BUG37463 MAC DEBUG : svg/custom/transform-ignore-after-invalid.svg = PASS CRASH
2594
2595 // WebKit roll 55512:55584
2596 BUG37540 MAC SKIP : inspector/console-dir.html = CRASH TEXT PASS
2597
2598 // Bugs that went unreported when we upstreamed run_webkit_tests
2599 // New test, added http://trac.webkit.org/changeset/55737
2600 BUG37896 : fast/events/remove-child-onscroll.html = TIMEOUT
2601 // This one may be an actual regression! Started being flaky after
2602 // http://trac.webkit.org/log/?verbose=on&rev=55742&stop_rev=55710
2603 BUG37896 LINUX WIN : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT
2604 // New test, added http://trac.webkit.org/changeset/55546
2605 BUG37896 WIN LINUX : fast/multicol/hit-test-above-or-below.html = TEXT
2606 // Added in http://trac.webkit.org/changeset/55669
2607 BUG37896 : fast/repaint/no-caret-repaint-in-non-content-editable-element.html = IMAGE+TEXT
2608 BUG37896 WIN DEBUG : fast/text/firstline/001.html = PASS CRASH
2609 BUG37896 LINUX MAC DEBUG : fast/text/firstline/001.html = PASS CRASH TIMEOUT
2610 // Added in http://trac.webkit.org/changeset/55587
2611 BUG37896 LINUX DEBUG : fast/images/svg-as-background.html = TIMEOUT
2612 BUG37869 MAC LINUX SKIP : inspector/timeline-network-resource.html = CRASH
2613 // Three flaky tests noticed during a sheriff rotation.
2614 BUG37962 MAC LINUX DEBUG : fast/dom/HTMLElement/bdo.html = CRASH PASS
2615 BUG37962 LINUX DEBUG : fast/forms/multiple-form-submission-protection-mouse.html = CRASH PASS
2616 BUG37962 MAC : plugins/iframe-shims.html = TEXT PASS
2617
2618 // WebKit roll r55853 -> 55940
2619 // Flaky test
2620 BUG_JIANLI MAC : fast/forms/select-style.html = IMAGE PASS
2621
2622 BUG38375 : plugins/round-trip-npobject.html = TEXT
2623 BUG38376 WIN : editing/deleting/5390681-2.html = IMAGE+TEXT
2624
2625 // HTMLProgressElement related tests deferred due to r55980.
2626 BUG38227 DEFER : fast/dom/HTMLProgressElement/progress-element.html = MISSING
2627 BUG38227 DEFER : fast/dom/HTMLProgressElement/set-progress-properties.html = TEXT
2628 BUG38227 SKIP : fast/dom/HTMLProgressElement/progress-bar-value-pseudo-element.html = FAIL
2629
2630 // WebKit roll 56004 -> 56026
2631 BUG38278 : fast/events/continuous-platform-wheelevent-in-scrolling-div.html = TIMEOUT
2632 BUG38278 : fast/events/platform-wheelevent-in-scrolling-div.html = TIMEOUT
2633
2634 // The touch targeting logic was recently changed.
2635 BUG36415 : fast/events/touch/touch-target.html = TEXT
2636
2637 // Need to implement NPP_HandleEvent in the layout_test_plugin
2638 BUG38353 MAC LINUX : plugins/keyboard-events.html = TEXT
2639 BUG38353 MAC LINUX : http/tests/plugins/plugin-document-has-focus.html = TIMEOUT
2640
2641 BUG38392 : plugins/resize-from-plugin.html = TEXT
2642
2643 // One pixel changes from gray 0x83 to gray 0x81. Valgrind is clean.
2644 BUG38534 LINUX : tables/mozilla/bugs/bug20804.html = IMAGE PASS
2645
2646 // This runs correctly on the builder, using the builder's working directory.
2647 // I can only assume that the Gods are Making Merriment at my expense. --agl
2648 BUG_AGL LINUX : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = IMAGE
2649
2650 // WebKit roll 56165:56197.
2651 // New test (http://trac.webkit.org/changeset/56198), requires changes to PluginObject
2652 BUG38578 : plugins/override-node-method.html = TEXT
2653
2654 // WebKit roll 56197:56239.
2655 // Needs layoutTestController.setMediaType() (implemented on Qt only)
2656 BUG38653 MAC : editing/selection/find-yensign-and-backslash.html = TEXT
2657 BUG38656 : fast/media/print-restores-previous-mediatype.html = TEXT
2658
2659 // Needs layoutTestController.setViewModeMediaFeature() (implemented on Qt only)
2660 BUG40680 SKIP : fast/media/media-feature-wgt-view-mode.html = FAIL
2661
2662 // Unknown flakiness.
2663 BUG38704 WIN RELEASE: svg/text/text-text-06-t.svg = CRASH PASS
2664 BUG38706 : svg/custom/deep-dynamic-updates.svg = IMAGE+TEXT PASS
2665
2666 // Caused by http://trac.webkit.org/changeset/56288/
2667 BUG_JSCHUH WIN LINUX : svg/filters/filterRes.svg = IMAGE+TEXT
2668 BUG_JSCHUH MAC : svg/filters/filterRes.svg = IMAGE
2669
2670 // Caused by http://trac.webkit.org/changeset/56394.
2671 BUG_JAPHET WIN : http/tests/xmlhttprequest/xmlhttprequest-50ms-download-dispatch.html = TEXT
2672
2673 // Due to the differences in iniialization checks in KURL and googleurl.
2674 // Note: this test was also marked as flaky on WIN RELEASE above, BUG31342.
2675 BUG_39423 : security/block-test.html = TIMEOUT
2676
2677 BUGWK36666 : storage/open-database-over-quota.html = TEXT
2678
2679 // Caused by http://trac.webkit.org/changeset/56795
2680 // These are new tests that are failing in Chromium because of a missing API.
2681 BUG39904 : svg/animations/animate-points.html = TEXT TIMEOUT
2682 BUG39904 : svg/animations/animate-keySplines.html = TEXT TIMEOUT
2683
2684 // Caused by http://trac.webkit.org/changeset/56824
2685 // This test generate strange result on Linux, the resulted image is too small.
2686 BUG40027 LINUX : fast/forms/input-file-re-render.html = TEXT IMAGE
2687
2688 BUGWK37283 : fast/overflow/scrollbar-restored-and-then-locked.html = TEXT
2689
2690 BUGWK37297 : fast/history/nested-visited-test.html = TEXT
2691 BUGWK37297 : fast/history/self-is-visited.html = TEXT
2692 BUGWK37297 : fast/history/sibling-visited-test.html = TEXT
2693
2694 // These are failing due to new-run-webkit-tests's diff trimming line ends.
2695 BUGWK36983 MAC : fast/canvas/webgl/null-object-behaviour.html = TEXT
2696 BUGWK36983 MAC : fast/canvas/webgl/uniform-location.html = TEXT
2697
2698 // Added in http://trac.webkit.org/changeset/57476. Fails in Chromium because
2699 // LayoutTestController::computedStyleWithVisitedInfo() is missing.
2700 BUG41206 : fast/history/multiple-classes-visited.html = TEXT TIMEOUT
2701
2702 // Tests that work with KURL, but fail with GURL
2703 BUG41292 : fast/url/ipv4.html = TEXT TIMEOUT
2704 BUG41292 : fast/url/anchor.html = TEXT TIMEOUT
2705
2706 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-all.html = TIMEOUT
2707 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-exact-match.html = TIMEOUT
2708 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-https.html = TIMEOUT
2709 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-ip-addresses-with-subdomains.html = TIMEOUT
2710 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-ip-addresses.html = TIMEOUT
2711 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-subdomains.html = TIMEOUT
2712 BUG41455 SKIP : http/tests/xmlhttprequest/origin-whitelisting-removal.html = TIMEOUT
2713 BUG41455 SKIP : http/tests/security/local-image-from-remote-whitelisted.html = TIMEOUT
2714
2715 // Caused by r57695. Will investigate.
2716 BUG_JIANLI LINUX : http/tests/local/formdata/send-form-data-with-sliced-file.html = TEXT
2717
2718 BUG33812 SKIP : fast/dom/icon-url-property.html = FAIL
2719
2720 // Failing with webkit roll 57659 -> 57677.
2721 BUG42230 LINUX DEBUG : fast/canvas/toDataURL-noData.html = CRASH
2722 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-1.html = IMAGE PASS
2723 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-3.html = IMAGE PASS
2724 BUG41817 MAC LINUX : svg/text/text-intro-05-t.svg = IMAGE PASS
2725 BUG41817 LINUX : svg/text/text-text-07-t.svg = IMAGE PASS
2726 BUG41817 LINUX : svg/text/text-tselect-02-f.svg = IMAGE PASS
2727
2728 BUG42044 WIN : http/tests/security/xss-DENIED-mime-type-execute-as-html.html = PASS TIMEOUT
2729
2730 // might have been flaky
2731 BUGJAMESR MAC : svg/custom/resource-invalidate-on-target-update.svg = IMAGE PASS
2732 BUGJAMESR LINUX : svg/custom/resource-invalidate-on-target-update.svg = IMAGE
2733 BUGJAMESR : svg/filters/filter-clip.svg = IMAGE
2734 BUGJAMESR : svg/filters/filter-source-position.svg = IMAGE
2735 BUGJAMESR BUG30048 BUG29737 : svg/filters/shadow-on-rect-with-filter.svg = IMAGE
2736
2737 // New layoutTestController function added at r57986
2738 BUG42691 : fast/lists/ol-nested-items-dynamic-insert.html = TEXT
2739 BUG42691 : fast/lists/ol-nested-items-dynamic-remove.html = TEXT
2740 BUG42691 : fast/lists/ol-nested-items.html = TEXT
2741 BUG42691 : fast/lists/ol-nested-list-dynamic-insert.html = TEXT
2742 BUG42691 : fast/lists/ol-nested-list-dynamic-remove.html = TEXT
2743 BUG42691 : fast/lists/ol-nested-list.html = TEXT
2744
2745 // New layoutTestController function added at r57993
2746 BUG42696 : http/tests/xmlhttprequest/cross-origin-authorization-with-embedder.html = TIMEOUT
2747
2748 // Started failing at r57969
2749 BUG8729 MAC : http/tests/multipart/invalid-image-data.html = IMAGE
2750
2751 // Started failing at r58058
2752 BUGWK38020 WIN LINUX MAC : fast/events/touch/send-oncancel-event.html = TEXT
2753
2754 // Started failing at r58152
2755 BUGWK38038 WIN LINUX MAC : fast/url/file-http-base.html = TEXT
2756
2757 // Started failing at r58191
2758 BUGWK38100 WIN LINUX MAC : editing/inserting/caret-position.html = TEXT
2759
2760 // New test, may be safe to just rebaseline.
2761 BUGWK38099 WIN LINUX : svg/custom/broken-internal-references.svg = IMAGE+TEXT
2762
2763 // Started failing at 58212
2764 BUGWK38108 MAC : fast/backgrounds/size/contain-and-cover.html = IMAGE
2765
2766 // WebKit roll 58304:58400
2767 // We're reverting the patch that fixed this test on Linux due to
2768 // the perf regression described in the bug.
2769 BUG42760 LINUX : fast/text/international/bold-bengali.html = FAIL
2770 // Skip since not relevant
2771 BUGUKAI WIN MAC SKIP : fast/text/international/bold-bengali.html = FAIL
2772
2773 // WebKit roll 58400:58523
2774 BUGWK38349 SKIP : fast/css/font-face-woff.html = IMAGE+TEXT
2775 // We probably don't want to run these massive amount of new ECMA script conformance tests:
2776 BUG42875 SKIP DEFER : fast/js/sputnik = TEXT
2777 // Other failing layout test
2778 BUGWK38360 WIN LINUX SKIP : fast/images/svg-background-partial-redraw.html = TEXT
2779 BUGWK38360 WIN LINUX SKIP : svg/carto.net/tabgroup.svg = TEXT
2780 BUGWK38360 SKIP : traversal/node-iterator-prototype.html = TEXT
2781 BUG42895 : media/audio-only-video-intrinsic-size.html = TIMEOUT
2782 BUG42895 : media/media-document-audio-size.html = TIMEOUT
2783 BUGYAAR MAC : svg/custom/dominant-baseline-hanging.svg = MISSING
2784
2785 // WebKit roll 58626:TBD:
2786
2787 // Might revert these:
2788 BUGYAAR : fast/css/input-search-padding.html = IMAGE+TEXT
2789 BUGYAAR : fast/css/text-input-with-webkit-border-radius.html = IMAGE+TEXT
2790 BUGYAAR : fast/forms/control-restrict-line-height.html = IMAGE+TEXT
2791 BUGYAAR WIN LINUX : fast/forms/search-vertical-alignment.html = IMAGE+TEXT
2792 BUGYAAR : fast/forms/search-cancel-button-style-sharing.html = IMAGE+TEXT
2793 BUGYAAR : fast/forms/search-rtl.html = IMAGE+TEXT
2794
2795 // GStreamer - disabled in Chromium
2796 WONTFIX : media/video-duration-known-after-eos.html = TEXT TIMEOUT