2010-09-03 Mihai Parparita <mihaip@chromium.org>
[WebKit-https.git] / LayoutTests / platform / chromium / test_expectations.txt
1 // This file consists of lines with specifications of what
2 // to expect from layout test cases. The test cases can be directories
3 // in which case the expectations apply to all test cases in that
4 // directory and any subdirectory. The format of the file is along the
5 // lines of:
6 //
7 // fast/js/fixme.js = FAIL
8 // fast/js/flaky.js = FAIL PASS
9 // fast/js/crash.js = CRASH TIMEOUT FAIL PASS
10 //
11 // The format of a test line is as follows:
12 // METADATA : relative/path/to/test.html = EXPECTATIONS
13 //
14 // Valid values for METADATA:
15 //
16 // BUG[0-9]+: See this bug for more information. Every test that isn't marked
17 //            WONTFIX should have a BUG annotation.
18 // SKIP: Doesn't run the test.
19 // SLOW: The test takes a long time to run, but does not timeout indefinitely.
20 // DEFER: For tests we'll fix in the future.
21 // WONTFIX: For tests that we never intend to pass on a given platform.
22 // DEBUG: Expectations apply only to the debug build.
23 // RELEASE: Expectations apply only to release build.
24 // LINUX/WIN/WIN-XP/WIN-VISTA/MAC: Expectations apply only to these platforms.
25 //
26 // Valid values for EXPECTATIONS:
27 //
28 // PASS: Test should pass
29 // CRASH: Test should crash
30 // TIMEOUT: Test should timeout
31 // IMAGE: Test will produce an incorrect image dump
32 // TEXT: Test will produce incorrect text output (either full or simplified)
33 // IMAGE+TEXT: Test will produce both incorrect text and images
34 // FAIL: Test will produce either incorrect text, images, or both
35 //
36 // If a line contains multiple expectations, it is considered "flakey",
37 // because it means that we're not producing consistent, reliable results.
38 //
39 // For example,
40 // LINUX : media = PASS FAIL
41 //
42 // The above means that all the media tests are flaky, but only on Linux.
43 //
44 // Other examples:
45 //
46 // SKIP : fast/js/no-good.js = TIMEOUT PASS
47 // DEBUG : fast/js/no-good.js = TIMEOUT PASS
48 // DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
49 // LINUX DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
50 // BUG1234 DEBUG MAC : fast/js/no-good.js = TIMEOUT PASS
51 //
52 // Notes:
53 // -A test cannot be both SLOW and TIMEOUT
54 // -A test can be included twice, but not via the same path.
55 // -If a test is included twice, then the more precise path wins.
56 // -CRASH tests cannot be WONTFIX
57
58 // -----------------------------------------------------------------
59 // SLOW TESTS
60 // -----------------------------------------------------------------
61
62 BUG24182 SLOW : fast/js/regexp-overflow.html = PASS
63 BUG24182 SLOW RELEASE : http/tests/misc/DOMContentLoaded-event.html = PASS
64 BUG24182 SLOW LINUX DEBUG : http/tests/misc/DOMContentLoaded-event.html = PASS
65 BUG24182 SLOW LINUX MAC RELEASE : http/tests/navigation/multiple-back-forward-entries.html = PASS
66 BUG24182 SLOW LINUX DEBUG : http/tests/navigation/multiple-back-forward-entries.html = PASS
67 BUG24182 SLOW : http/tests/xmlhttprequest/simple-cross-origin-progress-events.html = PASS
68 BUG24182 SLOW WIN MAC : svg/custom/invisible-text-after-scrolling.xhtml = PASS
69 BUG24182 SLOW : tables/mozilla/other/slashlogo.html = PASS
70 BUG24182 SLOW WIN RELEASE : tables/mozilla/bugs/bug113235-1.html = PASS
71 BUG24182 SLOW DEBUG : fast/js/toString-and-valueOf-override.html = PASS
72
73 // This tests is normally <1 second, but occasionally takes >20s.
74 BUG24182 SLOW WIN RELEASE : fast/dom/Window/webkitConvertPoint.html = PASS
75
76 BUG24182 WIN RELEASE SLOW : http/tests/loading/redirect-methods.html = PASS
77 BUG24182 WIN SLOW : svg/hixie/perf/007.xml = PASS
78 BUG24182 SLOW MAC RELEASE : dom/html/level2/html/HTMLImageElement01.html = PASS
79 BUG24182 SLOW WIN RELEASE : http/tests/local/file-url-sent-as-referer.html = PASS
80 BUG24182 SLOW WIN DEBUG : svg/carto.net/window.svg = PASS
81 BUG24182 SLOW LINUX DEBUG : fast/xpath/4XPath/Borrowed/cz_20030217.html = PASS
82 BUG24182 SLOW WIN MAC DEBUG : tables/mozilla/bugs/45621.html = PASS
83 //BUG24852 started failing since webkit 49583
84 //BUG24182 SLOW WIN : css1/font_properties/font.html = PASS
85 BUG24182 SLOW WIN : http/tests/security/xssAuditor/meta-tag-http-refresh-javascript-url.html = PASS
86 BUG24182 SLOW WIN RELEASE : http/tests/security/cross-origin-css.html = PASS
87 BUG24182 SLOW WIN RELEASE : fast/loader/local-CSS-from-local.html = PASS
88 BUG24182 WIN RELEASE SLOW : http/tests/incremental/split-hex-entities.pl = PASS
89 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/XMLHttpRequestException.html = PASS
90 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/connection-error-sync.html = PASS
91 BUG24182 WIN RELEASE SLOW : http/tests/loading/onload-vs-immediate-refresh.pl = PASS
92 //BUG24182 WIN LINUX SLOW : editing/selection/extend-selection.html = PASS
93 BUG24182 SLOW WIN : fast/images/svg-as-background.html = PASS
94 BUG24182 SLOW WIN : fast/backgrounds/svg-as-background-5.html = PASS
95 BUG24182 WIN DEBUG SLOW: inspector/console-dirxml.html = PASS
96 BUG24182 DEBUG SLOW : fast/dom/Window/window-function-frame-getter-precedence.html = PASS
97 BUG24182 SLOW DEBUG : fast/frames/frame-limit.html = PASS
98 BUG24182 SLOW : http/tests/cache/subresource-failover-to-network.html = PASS
99
100 // Usually <1s in release, ~1s in debug, but occasionally >5s in release.
101 BUG27335 WIN RELEASE : plugins/embed-attributes-setting.html = PASS TIMEOUT
102 BUG27335 WIN DEBUG SLOW : plugins/embed-attributes-setting.html = PASS
103
104 // --- collecting results for supported-xml-content-types.html ---
105 // was slow, started to timeout
106 BUG18702 WIN : http/tests/xmlhttprequest/supported-xml-content-types.html = PASS TIMEOUT
107
108 BUG34759 WIN DEBUG SLOW : inspector/console-log-before-inspector-open.html = PASS
109
110 BUG36539 SLOW : http/tests/misc/uncacheable-script-repeated.html = PASS
111
112 BUG47937 WIN DEBUG : fast/parser/residual-style-hang.html = PASS TIMEOUT
113 BUG47937 LINUX DEBUG SLOW : fast/parser/residual-style-hang.html = PASS
114 BUG47937 MAC DEBUG : fast/parser/residual-style-hang.html = TIMEOUT
115
116 // -----------------------------------------------------------------
117 // SKIPPED TESTS
118 // -----------------------------------------------------------------
119
120 // Since V8 is more interruptible than other engines, they use the standard
121 // long-running-script mechanism to handle very-long-running regexps too.
122 // See http://code.google.com/p/v8/issues/detail?id=287
123 WONTFIX SKIP : fast/js/regexp-overflow-too-big.html = TIMEOUT
124
125 // XHTML tests.  These tests seem like they work, but only because the
126 // expected output expects to see JS errors.  There is no point in running
127 // these tests, because they are giving us a false sense of testing that isn't
128 // really happening.  Furthermore, since they appear to pass if we do try to
129 // run them, we can't even list them as permanently expected to fail.
130 BUG24185 WONTFIX SKIP : dom/xhtml = PASS
131
132 // We do not want to support Legacy mac encodings on Windows/Linux.
133 // On Mac, we can support them by building platform/text/mac, but
134 // probably we don't want there, either.
135 WONTFIX SKIP WIN LINUX : fast/encoding/char-encoding-mac.html = FAIL
136
137 // Fails due to different window.close() rules.  We need to decide whether we
138 // ever expect to pass this.  Now also timing out.
139 BUG24189 WONTFIX SKIP : fast/dom/open-and-close-by-DOM.html = FAIL
140
141 // Skip because of WebKit bug 18512. These bugs "poison" future tests, causing
142 // all SVG objects with fill="red" to be rendered in green.
143 WONTFIX SKIP : svg/custom/fill-SVGPaint-interface.svg = PASS
144 WONTFIX SKIP : svg/custom/getPresentationAttribute.svg = PASS
145
146 // WML is still an inprogress feature upstream. Chromium does not build
147 // with WML support, so skip its tests.
148 WONTFIX SKIP : wml = FAIL
149 WONTFIX SKIP : http/tests/wml = FAIL
150 WONTFIX SKIP : fast/wml = FAIL
151
152 // These tests are based on the JSC JavaScript profiler. The V8 JavaScript
153 // profiler is in development and will use a different approach than JSC and
154 // most likely these tests will always be JSC specific.
155 WONTFIX SKIP : fast/profiler = FAIL TIMEOUT
156
157 // This test doesn't terminate because it contains exponential
158 // regexps.  It is safe to disable because we run the same tests
159 // (sans the nonterminating ones) as part of the v8 tests.
160 WONTFIX SKIP : fast/regex/test1.html = PASS
161
162 // We use worker_uitests to run workers tests. Don't run them in test_shell.
163 WONTFIX SKIP : fast/workers = PASS TIMEOUT FAIL
164 WONTFIX SKIP : fast/files/workers = PASS TIMEOUT FAIL
165 WONTFIX SKIP : http/tests/workers = PASS TIMEOUT FAIL
166 WONTFIX SKIP : http/tests/xmlhttprequest/workers = PASS TIMEOUT FAIL
167 WONTFIX SKIP : http/tests/eventsource/workers = PASS TIMEOUT FAIL
168 WONTFIX SKIP : websocket/tests/workers/ = PASS TIMEOUT FAIL
169
170 // Page Cache - based tests. Chromium disables page cache because the WebKit page cache keeps previously
171 // loaded pages alive in memory to be able to quickly substitute them when user clicks History buttons.
172 // Chromium wants those to be separate navigations made via browser process to be able to make decision
173 // on which renderer process to use for each of them.
174 WONTFIX SKIP BUG19635 : fast/harness/use-page-cache.html = TIMEOUT FAIL
175 WONTFIX SKIP BUG19635 : fast/dom/Window/timer-resume-on-navigation-back.html = TIMEOUT FAIL
176 // Depends on page cache, as far as I can tell.
177 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached.html = TIMEOUT FAIL
178 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached-with-frames.html = TIMEOUT
179 WONTFIX SKIP BUG19635 : media/restore-from-page-cache.html = TIMEOUT
180 WONTFIX SKIP BUG19635 : loader/go-back-to-different-window-size.html = TIMEOUT TEXT
181 WONTFIX SKIP BUG19635 : fast/loader/crash-copying-backforwardlist.html = TEXT
182 WONTFIX SKIP BUG19635 : fast/harness/page-cache-crash-on-data-urls.html = TEXT
183
184 // Tests that rely on cross-process MessagePorts.  No point in running them in
185 // test_shell, since we'd have to use a completely different implementation from
186 // what is used in the browser.
187 WONTFIX SKIP : fast/events/message-channel-gc-2.html = FAIL
188 WONTFIX SKIP : fast/events/message-channel-gc-3.html = FAIL
189 WONTFIX SKIP : fast/events/message-channel-gc-4.html = FAIL
190 WONTFIX SKIP : fast/events/message-channel-gc.html = FAIL
191 WONTFIX SKIP : fast/events/message-channel-listener-circular-ownership.html = FAIL
192 WONTFIX SKIP : fast/events/message-port-clone.html = FAIL
193 WONTFIX SKIP : fast/events/message-port-deleted-document.html = FAIL
194 WONTFIX SKIP : fast/events/message-port-deleted-frame.html = FAIL
195 WONTFIX SKIP : fast/events/message-port-inactive-document.html = FAIL
196 WONTFIX SKIP : fast/events/message-port-no-wrapper.html = FAIL
197 WONTFIX SKIP : fast/events/message-port.html = FAIL
198 WONTFIX SKIP : fast/events/message-port-multi.html = FAIL
199 WONTFIX SKIP : http/tests/security/MessagePort/event-listener-context.html = FAIL
200 WONTFIX SKIP : inspector/extensions.html = FAIL
201 WONTFIX SKIP : inspector/extensions-api.html = FAIL
202 WONTFIX SKIP : inspector/extensions-audits.html = FAIL
203 WONTFIX SKIP : inspector/extensions-audits-api.html = FAIL
204 WONTFIX SKIP : inspector/extensions-events.html = FAIL
205 WONTFIX SKIP : inspector/extensions-eval.html = FAIL
206
207 // Implement java testing harness.
208 BUG36681 DEFER SKIP : java = TEXT
209 // Chrome does not support Java LiveConnect.
210 WONTFIX SKIP : java/lc3 = TEXT
211
212 // this test doesn't make sense on Win or Mac.
213 // TODO: move to platform/chromium-linux/.
214 WONTFIX SKIP MAC WIN : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = FAIL
215
216 // Needs DRT queueLoadHTMLString and setDeferMainResourceLoad-implementations
217 // See: https://bugs.webkit.org/show_bug.cgi?id=42151
218 BUGWK42151 SKIP : fast/loader/non-deferred-substitute-load.html = FAIL
219
220 // -----------------------------------------------------------------
221 // WONTFIX TESTS
222 // -----------------------------------------------------------------
223
224 // This test is completely timing dependent.  It is testing the time
225 // between a key event and a search event.  You cannot count on this
226 // always being exactly the same.
227 WONTFIX DEBUG : fast/forms/search-event-delay.html = PASS TEXT
228 WONTFIX SLOW WIN RELEASE : fast/forms/search-event-delay.html = FAIL PASS
229 WONTFIX SLOW MAC RELEASE : fast/forms/search-event-delay.html = FAIL PASS CRASH
230 WONTFIX LINUX RELEASE : fast/forms/search-event-delay.html = FAIL PASS
231
232 // Chrome uses different keyboard accelerators from those used by Safari, so
233 // these tests will always fail.
234 // TODO(pinkerton): these should probably pass on Mac since we want Emacs
235 // keybindings but they currently do not.
236 WONTFIX LINUX WIN DEBUG : editing/pasteboard/emacs-cntl-y-001.html = FAIL
237 WONTFIX LINUX RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
238 WONTFIX SLOW WIN RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
239 WONTFIX : editing/pasteboard/emacs-ctrl-a-k-y.html = FAIL
240 WONTFIX : editing/pasteboard/emacs-ctrl-k-y-001.html = FAIL
241 WONTFIX : editing/input/emacs-ctrl-o.html = FAIL
242
243 // Checks for very kjs-specific garbage collector behavior.
244 // Would have to be implemented much differently to work in v8.
245 WONTFIX : fast/dom/gc-10.html = FAIL
246
247 // This fails because we're missing various useless apple-specific
248 // properties on the window object.
249 // This test also timeouts in Debug mode.
250 BUG24187 WONTFIX SLOW DEBUG : fast/dom/Window/window-properties.html = FAIL
251 BUG24187 WONTFIX SLOW WIN RELEASE : fast/dom/Window/window-properties.html = FAIL
252 BUG24187 WONTFIX LINUX MAC RELEASE : fast/dom/Window/window-properties.html = FAIL
253
254 // Safari specific test to ensure that JavaScript errors aren't logged when in
255 // private browsing mode.
256 WONTFIX : http/tests/security/cross-frame-access-private-browsing.html = FAIL
257
258 // Chromium doesn't implement private browsing in the renderer.
259 WONTFIX : plugins/private-browsing-mode.html = FAIL
260 WONTFIX : plugins/private-browsing-mode-2.html = TEXT
261
262 // We don't let anyone set status in the browser.
263 WONTFIX : plugins/set-status.html = TEXT
264
265 // We don't care about dashboard compatibility mode.
266 WONTFIX SKIP : http/tests/xmlhttprequest/default-content-type-dashboard.html = FAIL
267 WONTFIX SKIP : http/tests/xmlhttprequest/svg-created-by-xhr-disallowed-in-dashboard.html = FAIL
268 WONTFIX : svg/custom/embedded-svg-disallowed-in-dashboard.xml = FAIL
269 WONTFIX : svg/custom/manually-parsed-embedded-svg-disallowed-in-dashboard.html = FAIL
270 WONTFIX : svg/custom/manually-parsed-svg-disallowed-in-dashboard.html = FAIL
271 WONTFIX SKIP : svg/custom/svg-disallowed-in-dashboard-object.html = FAIL
272 WONTFIX : fast/canvas/canvas-gradient-addStop-error.html = FAIL
273
274
275 // Chrome uses different keyboard accelerators from those used by Safari, so
276 // these tests will always fail.
277 // TODO(ericroman): can the following 2 tests be removed from this list, since they pass?
278 WONTFIX : fast/events/keydown-1.html = FAIL
279 WONTFIX LINUX WIN : fast/events/option-tab.html = FAIL
280
281 // Chrome does not support WebArchives.
282 BUG10395 WONTFIX SKIP : webarchive = FAIL PASS
283 BUG10395 WONTFIX SKIP : svg/webarchive = FAIL PASS
284 BUG10395 WONTFIX SKIP : svg/custom/image-with-prefix-in-webarchive.svg = FAIL PASS
285 BUG10395 WONTFIX SKIP : http/tests/webarchive = FAIL PASS
286
287 // We don't support ACCELERATED_COMPOSITING. Skipping because some tests in this
288 // directory don't have pixel results.
289 BUG15733 WONTFIX SKIP : compositing = FAIL PASS TIMEOUT
290
291 // Run the Mac-specific platform tests, but only to check for crashes.
292 WONTFIX : platform/gtk = FAIL PASS
293 WONTFIX : platform/mac = FAIL PASS TIMEOUT
294 WONTFIX : platform/mac-leopard = FAIL PASS
295 WONTFIX : platform/mac-tiger = FAIL PASS
296 WONTFIX : platform/qt = FAIL PASS
297 WONTFIX SKIP : platform/qt/plugins/qt-qwidget-plugin.html = FAIL
298 WONTFIX SKIP : platform/mac/fast/text/international/Geeza-Pro-vertical-metrics-adjustment.html = PASS
299
300 WONTFIX LINUX MAC : platform/win = FAIL PASS
301
302 // This is a Safari specific test to make WebKit behave like AppKit on the Mac.
303 // We do not support it because PLATFORM(MAC) is not defined for the mac version.
304 WONTFIX MAC : platform/mac/editing/deleting/backward-delete.html = FAIL
305
306 // Ignored because we do not have OBJC bindings
307 WONTFIX SKIP : editing/pasteboard/paste-RTFD.html = FAIL
308 WONTFIX SKIP : editing/pasteboard/paste-TIFF.html = FAIL
309 WONTFIX SKIP : platform/mac/plugins/root-object-premature-delete-crash.html = FAIL
310 WONTFIX SKIP : platform/mac/plugins/undefined-property-crash.html = FAIL
311
312 // Ignore test because it tries to load .pdf files in <img> tags.
313 WONTFIX LINUX WIN : fast/images/pdf-as-image-landscape.html = FAIL
314 WONTFIX LINUX WIN : fast/images/pdf-as-image.html = FAIL
315 WONTFIX LINUX WIN : fast/replaced/pdf-as-image.html = FAIL
316
317 // These tests try to print a PDF file as the expected result.  I don't think
318 // we plan on supporting this anytime soon.
319 WONTFIX SKIP : printing/compositing-layer-printing.html = PASS
320 WONTFIX SKIP : printing/media-queries-print.html = PASS
321 WONTFIX SKIP : printing/page-rule-in-media-query.html = PASS
322
323 // Chrome doesn't call the willCacheResponse callback (a method
324 // of ResourceHandleClient).  That function is Mac-specific.
325 WONTFIX SKIP : http/tests/misc/willCacheResponse-delegate-callback.html = FAIL
326
327 // Checks for very kjs-specific garbage collector
328 // behavior. Gc-9 is completely braindamaged; it tests that certain
329 // properties are reset by the garbage collector. It looks to pass recently.
330 WONTFIX : fast/dom/gc-9.html = FAIL
331
332 // This test checks that ((new Error()).message is undefined, which is
333 // a direct contradiction of the javascript spec 15.11.4.3 which
334 // says that it must be a string.
335 WONTFIX : fast/js/kde/evil-n.html = FAIL
336
337 // This test checks that properties of arguments arrays are non-enumerable
338 // which is incorrect according to the ES5 spec.
339 WONTFIX : fast/js/kde/function.html = FAIL
340
341 // This test is broken.  The regular expression used contains an error
342 // which kjs swallows and returns false, which is the expected result,
343 // but for which we issue a syntax error.
344 WONTFIX : fast/js/code-serialize-paren.html = FAIL
345
346 // These tests check for a kjs-specific extension, that source file
347 // name and line numbers are available as properties on exception
348 // objects.  We handle error positions differently.
349 WONTFIX : fast/js/exception-linenums-in-html-1.html = FAIL
350 WONTFIX : fast/js/exception-linenums-in-html-2.html = FAIL
351 WONTFIX : fast/js/exception-linenums.html = FAIL
352 WONTFIX : fast/js/exception-expression-offset.html = FAIL
353
354 // These tests rely on specific details of decompilation of
355 // functions. V8 always returns the source code as written; there's
356 // no decompilation or pretty printing involved except for
357 // certain "native" functions where the V8 output does not include
358 // newline characters. This is working as intended and we don't care
359 // if the tests pass or fail. (It should probably simply be re-baselined.)
360 WONTFIX : fast/js/function-names.html = FAIL
361
362 // This test relies on KJS specific implementation
363 // (window.GCController.getJSObjectCount), which we have no intention of
364 // supporting.
365 WONTFIX SKIP : fast/dom/Window/timeout-released-on-close.html = FAIL
366
367 // These tests expect a tiff decoder, which we don't have.
368 WONTFIX LINUX WIN : fast/images/embed-image.html = FAIL
369 WONTFIX LINUX WIN : fast/images/object-image.html = FAIL
370
371 // Safari has a unique handling of the BOM characters among browsers.
372 // There is a strong suspicion that this is a security problem, so we
373 // follow the rest of the browsers on this one.
374 WONTFIX : fast/js/removing-Cf-characters.html = FAIL
375
376 // These tests fail in all but the PST/PDT time zone.
377 // Another reason for failure is that, for compatability, we don't obey
378 // the ECMA standard on DST exactly.  We use the OS's facilities to
379 // convert to local time for dates within the UNIX 32-bit epoch,
380 // and follow the ECMA rules for dates outside that range.
381 // The ECMA rules say to use current DST rules for all dates,
382 // and that all dates that are separated by an exact multiple of
383 // 28 years must behave exactly the same.
384 // OS local time services are more accurate than this ECMA rule,
385 // which is a discrepancy.
386 WONTFIX SKIP : fast/js/date-DST-time-cusps.html = PASS FAIL
387 WONTFIX SKIP : fast/js/date-big-setdate.html = PASS FAIL
388
389 // This test expects weird behavior of __defineGetter__ on the
390 // window object.  It expects variables introduced with 'var x = value'
391 // to behave differently from variables introduced with 'y = value'.
392 // This just seems wrong and should have very low priority.
393 // Agreed, not required for Beta, we can debate this with WebKit post Beta
394 // (eseidel, 4/25)
395 // Ignore this until we see evidence that we need to support it.
396 WONTFIX : fast/dom/getter-on-window-object2.html = FAIL
397
398 // V8 doesn't stable sort and we currently have no intention of
399 // changing this.  The following tests only happen to pass due to
400 // the current algorithm used for sorting small arrays. If larger
401 // arrays were used in the tests, they would fail.
402 // It is tracked by: http://code.google.com/p/v8/issues/detail?id=90
403 WONTFIX : fast/js/comparefn-sort-stability.html = PASS
404 WONTFIX : fast/js/sort-stability.html = PASS
405
406 // We have no indication that anyone misses this and have currently no
407 // intention of implementing it.
408 WONTFIX : fast/js/function-dot-arguments.html = FAIL
409
410 // This is a Safari specific test used to document the set of global
411 // constructors they expose and the exact way they are printed.  Not
412 // important.
413 WONTFIX : fast/js/global-constructors.html = FAIL
414
415 // This test is not reliable.  The behavior depends on exactly how the
416 // stack limit is reached.  We're happy with our behavior on this test
417 // as long as we don't crash.
418 WONTFIX : fast/js/global-recursion-on-full-stack.html = FAIL
419
420 // Our DOM Storage implementation doesn't use WebKit's private browsing feature (even for incognito mode).
421 WONTFIX : storage/domstorage/localstorage/private-browsing-affects-storage.html = FAIL
422 WONTFIX : storage/domstorage/sessionstorage/private-browsing-affects-storage.html = FAIL
423
424 // These tests propagate auth credentials back to the renderer, which we
425 // don't want to do.
426 WONTFIX BUG21840 MAC LINUX : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
427 WONTFIX BUG21840 WIN : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL TIMEOUT
428 WONTFIX BUG21840 : http/tests/loading/basic-credentials-sent-automatically.html = FAIL
429
430 // This checks the IDN behavior of WebKit/WebKit on Mac, not WebKit/WebCore or
431 // WebKit/JavaScriptCore. Chrome doesn't use WebKit/WebKit, and Chrome's IDN
432 // security model is different from it.
433 BUG21814 WONTFIX SKIP: fast/encoding/idn-security.html = FAIL
434
435 // Our implementation of global history is completely different, and
436 // these tests are irrelevant.
437 BUG23748 WONTFIX : http/tests/globalhistory = FAIL
438
439 // DataGrid was pulled from HTML5 spec, unlikely to re-emerge in the current form.
440 BUG17585 WONTFIX : fast/dom/HTMLDataGridElement = FAIL
441
442 // We are not going to support submitting a form to about:* pages.
443 // For more details, see discussions at issue 20570.
444 BUG20570 WONTFIX : fast/forms/get-forms-to-about-blank.html = FAIL
445
446 // xhtml mp tests were added in http://trac.webkit.org/changeset/43865 and are
447 // skipped on all platforms upstream.
448 // We are not planning to support these.
449 BUG12254 WONTFIX SKIP : fast/xhtmlmp = FAIL
450 BUG12254 WONTFIX SKIP : http/tests/xhtmlmp = FAIL
451
452 // This test requires LayoutTestController.setCacheModel, which we don't implement
453 // because we can't emulate the cahcing behaviors it expects.
454 WONTFIX : fast/dom/HTMLScriptElement/nested-execution.html = FAIL
455
456 // Deletion UI is a Mail-ism. We don't need to worry about this.
457 WONTFIX SKIP : editing/deleting/deletionUI-single-instance.html = FAIL IMAGE
458 WONTFIX SKIP : fast/dom/Element/id-in-deletebutton.html = TEXT
459
460 // Tests for FAST_MOBILE_SCROLLING. We don't use it.
461 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE+TEXT
462 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE+TEXT
463 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE PASS
464 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE PASS
465
466 // Tests for frameset flattening. Relevant only on mobile browsers.
467 WONTFIX SKIP : fast/frames/flattening = TIMEOUT
468
469 // This should be tested differently (see discussion on https://bugs.webkit.org/show_bug.cgi?id=35063).
470 // No need to waste cycles implementing harness support for this variant of the test.
471 WONTFIX SKIP : fast/loader/api-test-go-to-current-back-forward-item.html = TIMEOUT
472
473 // We're not planning to support rocker-based cursor navigation.
474 WONTFIX SKIP : fast/events/spatial-navigation = FAIL
475
476 // We're not planning to relax third-party cookie rules any time soon.
477 WONTFIX BUG37684 SKIP : http/tests/cookies/third-party-cookie-relaxing.html = FAIL
478
479 // <progress> on Mac is always animated.
480 WONTFIX MAC : fast/dom/HTMLProgressElement/progress-element.html = IMAGE PASS
481
482 // -----------------------------------------------------------------
483 // CHROME REWRITTEN TESTS
484 // -----------------------------------------------------------------
485
486 // These tests have been rewritten, with the original being ignored,
487 // because they rely on being able to shadow the 'top' variable on the
488 // global object.  For security we disallow shadowing of top.
489 WONTFIX : editing/selection/click-before-and-after-table.html = FAIL
490
491 // We're taking a different approach on this test than Webkit does, related to
492 // whether we create a window via a plugin when target is _blank.
493 BUG24186 WONTFIX SKIP : plugins/get-url-with-blank-target.html = FAIL
494
495 // Dashboard-related test
496 WONTFIX SKIP : platform/mac/fast/css/dashboard-region-parser.html = FAIL
497
498 // Not a test?
499 WONTFIX SKIP : http/tests/incremental/pause-in-script-element.pl = FAIL
500
501 // This tests for an arbitrary limit set in JSCRE to terminate regular
502 // expressions with an exponential matching behavior.  Since the V8
503 // regular expression engine can be preempted from the outside, we do not
504 // need to limit the execution this way.  Firefox also keeps running
505 // on this one.
506 WONTFIX : fast/regex/slow.html = TIMEOUT
507
508 // Test to verify legacy MAC encodings. We don't want to support them and
509 // have to skip this test.
510 WONTFIX SKIP : fast/encoding/char-decoding-mac.html = FAIL
511
512 // WebKit QT Build-specific tests
513 WONTFIX SKIP : platform/qt/view/fixed-layout-size.html = FAIL
514
515 // These don't have pixel results and rely on ObjC bindings. Don't run until they have pixel results.
516 WONTFIX SKIP : platform/mac/editing/pasteboard/dataTransfer-set-data-file-url.html = FAIL
517 WONTFIX SKIP : http/tests/security/dataTransfer-set-data-file-url.html = FAIL
518
519 // The issue is which global object to use as the implicit
520 // receiver for cross-frame calls.  Currently, IE, Firefox and Chrome
521 // agree and only Safari is doing it this way.
522 BUG5053 WONTFIX : fast/frames/cross-site-this.html = FAIL
523
524 // This tests a Safari incompatibility.  This test should fail since
525 // it contains syntax errors that JSC for some reason choose not to
526 // throw.  V8 follows the spec.
527 WONTFIX : fast/js/reparsing-semicolon-insertion.html = FAIL
528
529 // These tests relate to transform/3d which is a work in progress and is not
530 // even run by the WebKit folk. They should be enabled whenever WebKit begins
531 // testing them by default. The bug to re-enable is:
532 // http://code.google.com/p/chromium/issues/detail?id=8455
533 WONTFIX SKIP : transforms/3d = FAIL
534
535 // Copying with no selection is sometimes supposed to work
536 // Also skipped by Apple on Windows (rdar://problem/5015941)
537 BUG20404 : editing/execCommand/copy-without-selection.html = FAIL
538
539 // -----------------------------------------------------------------
540 // LIGHTTPD
541 // -----------------------------------------------------------------
542 // This are failing for different reasons under our lighttpd configuration.
543 // (Note that lighttpd is only used on Windows at this point.)
544
545 // LightTPD doesn't accept unknown HTTP methods
546 BUG30536 SKIP : http/tests/xmlhttprequest/methods-lower-case.html = TIMEOUT CRASH
547 BUG30536 LINUX MAC : http/tests/xmlhttprequest/methods-async.html = TEXT
548 BUG30536 WIN       : http/tests/xmlhttprequest/methods-async.html = TIMEOUT
549 BUG30536 WIN SLOW : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-invalidation-by-method.html = FAIL
550 // LightTPD doesn't accept unknown HTTP methods and passes CGIs a Content-Type
551 // even when a request didn't send the header.
552 BUG30536 WIN SLOW : http/tests/xmlhttprequest/methods.html = FAIL
553 BUG30536 MAC LINUX : http/tests/xmlhttprequest/methods.html = FAIL
554 // Webkit 50667:50696 (Lighttpd related?)
555 BUG30536 WIN : http/tests/xmlhttprequest/xmlhttprequest-setrequestheader-no-value.html = TEXT
556
557 // Another lighttpd quirk.
558 BUG8941 WIN SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
559 BUG8941 WIN : http/tests/xmlhttprequest/web-apps/012.html = FAIL
560
561 // -----------------------------------------------------------------
562 // TEXT
563 // -----------------------------------------------------------------
564
565 // This class of test fails because of size differences in text runs.
566 // Mostly this is because of international text rendering differences.
567
568 // Incrorect results, in incorrect international font metrics.
569 BUG20521 LINUX WIN : fast/text/atsui-multiple-renderers.html = FAIL
570 BUG20521 LINUX WIN : fast/text/atsui-pointtooffset-calls-cg.html = FAIL TIMEOUT
571 BUG20521 LINUX WIN : fast/text/atsui-rtl-override-selection.html = FAIL
572
573 // This test checks that we hack around a bug in helvetica.  We fail to.
574 BUG20519 LINUX WIN : fast/text/wide-zero-width-space.html = FAIL
575
576 // There's a missing glyph box in "full-time".
577 BUG20547 WIN : fast/text/capitalize-boundaries.html = FAIL
578
579 // Different button line-heights, our behavior looks wrong.
580 BUG20551 LINUX WIN : fast/replaced/table-percent-height.html = FAIL
581 BUG20551 LINUX WIN : fast/replaced/table-percent-height-text-controls.html = FAIL
582
583
584 // -----------------------------------------------------------------
585 // URL
586 // -----------------------------------------------------------------
587
588 // Form submission (GET) on non-standard url does not append a query.
589 // Defering these tests as the expected behavior is wonky, and shouldn't affect
590 // existing apps one way or another.
591 // Implicit expectation in this test is that you can "set query" on a data URL,
592 // and it should replace the first "?" substring. This makes absolutely no
593 // sense.
594 BUG24203 : fast/events/stopPropagation-submit.html = FAIL
595
596 // -----------------------------------------------------------------
597 // PENDING TESTS (forked to pending/, need to be sent upstream)
598 // -----------------------------------------------------------------
599
600 // These tests don't work with fast timers due to setTimeout
601 // races. See https://bugs.webkit.org/show_bug.cgi?id=21536
602 BUG24195 WIN LINUX : fast/repaint/bugzilla-6473.html = IMAGE+TEXT
603 BUG24195 MAC : fast/repaint/bugzilla-6473.html = IMAGE
604
605 // -----------------------------------------------------------------
606 // Tests deferred until we provide support for a particular feature.
607 // -----------------------------------------------------------------
608
609 // -----------------------------------------------------------------
610 // Tests requiring features not currently in test_shell.
611 // -----------------------------------------------------------------
612
613 // Implement layoutTestController.display()
614 BUG8630 WIN LINUX : fast/repaint/body-background-image.html = FAIL
615
616 // Relies on text metrics to pass. Rework to be meaningful for ports other than platform/mac.
617 BUG8630 WIN LINUX : fast/repaint/overflow-outline-repaint.html = FAIL
618 BUG8630 WIN LINUX : fast/backgrounds/solid-color-context-restore.html = FAIL
619 BUG8630 WIN LINUX : fast/dynamic/containing-block-change.html = FAIL
620 BUG8630 LINUX : fast/forms/listbox-clip.html = IMAGE+TEXT
621 BUG8630 WIN LINUX : fast/overflow/hidden-scrollbar-resize.html = FAIL
622 BUG8630 WIN LINUX RELEASE : fast/reflections/inline-crash.html = FAIL
623 BUG8630 LINUX WIN DEBUG : fast/reflections/inline-crash.html = FAIL
624 BUG8630 WIN LINUX : fast/text/font-initial.html = FAIL
625 BUG8630 LINUX : svg/custom/use-detach.svg = FAIL PASS
626
627 // Need a setAuthorAndUserStylesEnabled method in
628 // layoutTestController. Now we have preference to enable/disable user
629 // styles(not work now), we still need to add a preference to enable/disable
630 // styles of both author and user.
631 // Deferring, we don't support user-controlled UA stylesheets (in beta)
632 // Actually, gonna SKIP because it causes an additional error message in:
633 // fast/css/display-none-inline-style-change-crash.html   somehow
634 // the message is dumped after the #EOF, which causes an additional
635 // error in the header of the following test.
636 BUG24197 SKIP : fast/css/disabled-author-styles.html = FAIL
637
638 // Need to implement
639 // layoutTestController.setDomainRelaxationForbiddenForURLScheme()
640 BUG32674 WIN LINUX MAC : http/tests/security/setDomainRelaxationForbiddenForURLScheme.html = TEXT
641
642 // -----------------------------------------------------------------
643 // Other
644 // -----------------------------------------------------------------
645
646 // Pixeltest failure: Form control metrics incorrect
647 BUG10273 LINUX : http/tests/navigation/javascriptlink-frames.html = FAIL
648
649 // Mac Safari under certain circumstances automatically places
650 // a caret in editable document even when none was requested programatically.
651 // We don't intend to copy this feature (at least not for Beta).
652 BUG20844 LINUX WIN RELEASE : editing/selection/designmode-no-caret.html = FAIL
653 BUG20844 LINUX WIN DEBUG : editing/selection/designmode-no-caret.html = FAIL
654
655 // Directionality of mixed-direction text in selected choice should
656 // match that in the <select> option lists.
657 // Low priority, unclear if test expectations are correct (see bug)
658 BUG6139 : fast/forms/select-writing-direction-natural.html = FAIL
659
660 // We don't support NPN_Enumerate, but don't know of any plugin
661 // which depends on that functionality.  So we ignore this for beta.
662 BUG21901 : plugins/npruntime/enumerate.html = FAIL
663
664 // Expectations for this test changed upstream. We should fix this test, but
665 // it doesn't need to block the current release
666 BUG10275 : http/tests/security/cross-frame-access-put.html = FAIL
667
668 // Due to differences in error pages. Needs re-baselining.
669 BUG24208 WIN DEBUG : http/tests/navigation/post-goback1.html = FAIL
670 BUG24208 SLOW WIN RELEASE : http/tests/navigation/post-goback1.html = FAIL
671 BUG24208 LINUX MAC : http/tests/navigation/post-goback1.html = FAIL
672
673 // Requires layoutTestController.dispatchPendingLoadRequests
674 BUG33211 WIN RELEASE : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT CRASH
675 BUG33211 WIN DEBUG : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
676 BUG33211 MAC LINUX : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
677
678 // HTML5 DB layout tests
679 BUG27697 SKIP : storage/hash-change-with-xhr.html = PASS
680 // We do not use Safari's private browsing
681 WONTFIX SKIP : storage/private-browsing-readonly.html = PASS
682
683 // HTML5 datalist element. We don't enable it because WebKit implementation
684 // is incomplete.
685 BUG20226 DEFER : fast/forms/datalist.html = TEXT
686 BUG20226 DEFER : fast/forms/input-list.html = FAIL
687 BUG20226 DEFER : fast/forms/input-selectedoption.html = FAIL
688
689 // Generic theme in test_shell doesn't have inner-spin-button support.
690 // We need to do rebaseline when we switch to DRT.
691 BUGWK38570 WIN : fast/forms/input-appearance-spinbutton-disabled-readonly.html = IMAGE+TEXT
692
693 // The feature was disabled due to a compatibility issue.
694 BUGWK40520 DEFER : fast/forms/interactive-validation-lost-focusable.html = TEXT
695 BUGWK40520 DEFER : fast/forms/interactive-validation-prevented.html = TEXT
696
697 // Add support for inspector layout tests.
698 BUG26734 LINUX MAC SKIP : inspector = PASS
699 BUG26734 LINUX MAC SKIP : http/tests/inspector = PASS
700 BUG26734 LINUX MAC SKIP : http/tests/inspector-enabled = PASS
701
702 // These tests need to be changed to be platform independent.
703 BUG13907 : http/tests/media/remove-while-loading.html = TIMEOUT
704 BUG13907 : http/tests/media/video-play-stall-seek.html = TIMEOUT
705 BUG13907 : http/tests/media/video-play-stall.html = TIMEOUT
706 BUG13907 : http/tests/media/video-referer.html = TIMEOUT
707 BUG13907 : http/tests/media/video-seekable-stall.html = TIMEOUT
708 BUG13907 : http/tests/security/local-video-poster-from-remote.html = PASS FAIL TIMEOUT
709 BUG13907 : http/tests/security/local-video-source-from-remote.html = PASS FAIL TIMEOUT
710 BUG13907 : http/tests/security/local-video-src-from-remote.html = PASS FAIL TIMEOUT
711 BUG13907 : media/video-display-aspect-ratio.html = PASS FAIL TIMEOUT
712 BUG13907 : media/video-loop.html = PASS FAIL TIMEOUT
713
714 // These tests need to be changed to not rely on setTimeout().
715 BUG13907 SLOW WIN DEBUG : media/video-played-collapse.html = PASS FAIL
716 BUG13907 SLOW WIN DEBUG : media/video-seek-past-end-playing.html = PASS FAIL
717
718 // We sometimes emit an error from the same source element twice.
719 BUG13907 : media/video-source-error.html = PASS FAIL TIMEOUT
720
721 // Failing because we sometimes emit additional timeupdate events.
722 // Test may need to be rewritten or only log the first timeupdate event.
723 BUG13907 : media/audio-delete-while-slider-thumb-clicked.html = PASS FAIL
724
725 // Failing because we sometimes emit additional timeupdate events.
726 // Test might be WONTFIX because we don't export a step button in the first place.
727 BUG13907 BUG25375 SKIP : media/audio-delete-while-step-button-clicked.html = FAIL
728
729 // Seeks to the end of file, which results in ogg packets with no timestamps.
730 BUG13907 : media/event-attributes.html = PASS FAIL TIMEOUT
731
732 // The media time display isn't appearing.
733 BUG13907 : media/video-zoom-controls.html = PASS FAIL TIMEOUT
734
735 // Flaky because of our new seeking algorithm.
736 BUG50438 : media/controls-drag-timebar.html = PASS FAIL
737
738 // The media time display is getting styled when it shouldn't be.
739 BUG13907 : media/controls-styling.html = FAIL
740
741 // These tests are flaky with subtle pixel differences.
742 BUG13907 LINUX MAC : media/video-zoom.html = IMAGE PASS
743 BUG13907 LINUX MAC : media/video-layer-crash.html = IMAGE PASS
744
745 // These two tests started timing out after r66110.
746 BUG13907 : media/video-controls-rendering.html = PASS FAIL TIMEOUT
747 BUG13907 RELEASE : media/video-transformed.html = IMAGE PASS TIMEOUT
748 // Started failing in roll 66079:66240.
749 BUG53660 DEBUG : media/video-transformed.html = IMAGE+TEXT TIMEOUT
750
751 // This is flaky with a subtle pixel difference in the bottom right corner,
752 // which I believe is due to new video scaling algorithm.
753 BUG13907 : media/video-replaces-poster.html = IMAGE PASS
754
755 // These tests are failing because they use position-dependent mouse clicks.
756 BUG13907 BUG25375 : media/video-controls-transformed.html = FAIL
757
758 // These tests are WONTFIX because they use codecs Chromium doesn't support.
759 BUG16779 WONTFIX SKIP : media/audio-mpeg-supported.html = FAIL TIMEOUT
760 BUG16779 WONTFIX SKIP : media/audio-data-url.html = FAIL TIMEOUT
761 BUG16779 WONTFIX SKIP : media/media-can-play-mpeg-audio.html = TEXT
762 BUG16779 WONTFIX SKIP : media/video-can-play-type.html = FAIL TIMEOUT
763 BUG16779 WONTFIX SKIP : media/video-document-types.html = FAIL TIMEOUT
764 BUG16779 WONTFIX SKIP : media/video-size-intrinsic-scale.html = FAIL TIMEOUT
765
766 // We haven't implemented the WebKit fullscreen extension.
767 BUG16735 : media/media-fullscreen-inline.html = TIMEOUT
768 BUG16735 : media/media-fullscreen-not-in-document.html = TIMEOUT
769
770 // We haven't implemented the WebKit captioning extension.
771 BUG28301 : media/media-captions.html = TIMEOUT
772
773 // We haven't implemented reverse audio/video playback.
774 BUG33099 : media/video-reverse-play-duration.html = TIMEOUT
775 BUG33099 : media/video-timeupdate-reverse-play.html = TIMEOUT
776
777 // We haven't implemented video preloading and it passing is a false positive.
778 BUG16482 : media/video-preload.html = PASS FAIL
779
780 // Does not display courier for the letters, as the test requests.
781 BUG10278 LINUX : fast/css/font-face-implicit-local-font.html = FAIL
782 BUG10278 LINUX : fast/css/font-face-unicode-range.html = FAIL
783
784 // The v8 bindings allow shadowing of all properties on the global
785 // object.  If you use 'var prop = value' you will get a new variable
786 // named prop that shadows builtin properties on the global object.
787 // This behavior is consistent and I'm reluctant to make the massive
788 // change that would be needed to implement the inconsistent handling
789 // of this that KJS has (some properties can be shadowed and others
790 // can't).  This should have low priority.
791 // We currently match IE and the plan was to convince KJS to change
792 // post-beta, but the bug is here:
793 // https://bugs.webkit.org/show_bug.cgi?id=16644 , and it's unclear
794 // what the resolution was.
795 BUG10279 : fast/js/var-declarations-shadowing.html = FAIL
796
797 // Implement full JSON support in V8
798 BUG14885 SLOW : fast/js/JSON-parse.html = FAIL
799 BUG14885 SLOW : fast/js/JSON-stringify.html = FAIL CRASH
800 BUG14885 : fast/js/JSON-parse-reviver.html = FAIL
801 BUG14885 : fast/js/JSON-stringify-replacer.html = FAIL
802
803 // User stylesheets not currently supported by chrome.
804 // Webkit supports them by doing filesystem operations directly.
805 // This is disallowed in a sandboxed renderer. The test fails in
806 // test_shell.exe because the necessary filesystem stubs are notImplemented(),
807 // and would need to be proxied through the browser
808 BUG24199 : http/tests/security/local-user-CSS-from-remote.html = FAIL
809
810 // Implement CSS -webkit-font-smoothing property support.
811 BUG23270 WIN LINUX : fast/css/font-smoothing.html = FAIL
812
813 // Make canvas shadow work with drawImage.
814 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint-2.html = FAIL
815 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint.html = FAIL
816
817 // Repaint issues are revealed by these tests.
818 BUG28183 LINUX WIN : fast/repaint/box-shadow-v.html = IMAGE
819 // The difference of positions of texts after the list markers is NOT
820 // an issue. The behavior of the expectations was wrong. The real
821 // problem is the change of the 'p' in italic "properly". Note that
822 // upstream expectation image has the same issue.
823 BUG28183 WIN LINUX : fast/repaint/list-marker.html = IMAGE
824
825 BUG20507 : http/tests/uri/resolve-encoding-relative.html = FAIL
826
827
828 // Flaky: fails about 5% of the time.
829 BUG31342 WIN RELEASE : security/block-test-no-port.html = TEXT PASS
830
831 // -----------------------------------------------------------------
832 // SVG TESTS
833 // -----------------------------------------------------------------
834
835 // These are regressions from 1.0, but deemed DEFERable for 2.0.
836
837 BUG8763 LINUX WIN MAC : svg/custom/use-on-g-containing-foreignObject-and-image.svg = IMAGE+TEXT IMAGE
838
839 // We show reduced version of the entire SVN image rather than an image
840 BUG23463 MAC : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE
841 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE+TEXT TEXT
842 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE IMAGE+TEXT PASS
843 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE+TEXT
844
845 // Merge 39744:39829 - regression
846 BUG10284 MAC : svg/custom/path-bad-data.svg = FAIL
847
848 // Text mismatch since r65370.
849 // There was also an unnoticed image mismatch before this revision
850 // (wrong baseline was committed). No idea about when it really started to fail.
851 BUG52692 WIN LINUX : svg/W3C-SVG-1.1/animate-elem-80-t.svg = IMAGE+TEXT
852
853 // -----------------------------------------------------------------
854 // End SVG Regressions
855 // -----------------------------------------------------------------
856
857 // Selection wrong.
858 BUG10292 MAC LINUX : editing/selection/5354455-1.html = FAIL
859
860 // Compact support was removed from WebKit by Hyatt and layout tests rebaselined in r40259.
861
862 BUG10295 MAC : fast/dom/prototype-chain.html = FAIL
863
864 // Font differences, requiring overriden metrics, not a real bug, not fixing for Beta
865 BUG10296 MAC : fast/text/international/bidi-menulist.html = FAIL
866 BUG10296 LINUX : fast/transforms/transform-on-inline.html = FAIL
867 BUG10296 LINUX : fast/transforms/transform-table-row.html = FAIL
868 BUG10296 LINUX : svg/batik/paints/patternPreserveAspectRatioA.svg = FAIL
869 // Maybe need to be rebaselined - should be looked at in more detail.
870 BUG10296 LINUX : svg/custom/foreign-object-skew.svg = FAIL
871 BUG10296 LINUX : svg/batik/text/textLength.svg = FAIL
872
873 // No anti-aliasing on the text.
874 BUG10298 LINUX : svg/custom/use-on-disallowed-foreign-object-3.svg = FAIL
875
876 // The failures listed below have never passed in Chromium and need to be
877 // investigated, categorized, and (one hopes) fixed.
878
879 // These test fail full text diff (but not simplified diff) most likely due
880 // to differing implementations of SVG fonts. They may or may not represent
881 // real bugs which need fixin'
882
883 // There's no baseline at all for this!
884 BUG32392 SKIP : svg/batik/text/smallFonts.svg = FAIL
885
886 // The test is flaky and maybe platform-dependent.
887 BUG32401 LINUX WIN : svg/custom/marker-changes.svg = IMAGE+TEXT IMAGE
888
889 BUG32444 LINUX WIN : svg/hixie/text/003.html = FAIL
890
891 // SVG masks aren't quite working yet.
892 // Might also be related to https://bugs.webkit.org/show_bug.cgi?id=21910
893 // New tests. We should fix these, but they don't need to block the current release
894 BUG3244 LINUX WIN : fast/backgrounds/svg-as-mask.html = FAIL
895 BUG3244 WIN DEBUG : fast/backgrounds/animated-svg-as-mask.html = FAIL
896 BUG3244 SLOW WIN RELEASE : fast/backgrounds/animated-svg-as-mask.html = FAIL
897 BUG3244 LINUX : fast/backgrounds/animated-svg-as-mask.html = FAIL
898 // More tests that fail because of masks not working properly.
899 // New tests. We should fix these, but they don't need to block the current release
900 BUG3244 WIN LINUX : fast/backgrounds/mask-composite.html = FAIL
901 BUG3244 WIN LINUX : fast/backgrounds/repeat/mask-negative-offset-repeat.html = FAIL
902 // Marking this again as failed. This test failed even after rebaseline due to
903 // the fact that the font is not specified in the test and it seems that the
904 // test falls back on a different font locally than on the buildbot so the
905 // baseline is invalid. This might indicate a failure in our font fallback code
906 // or might be expected and that we should either go with the buildbot output
907 // or change the test upstream to specify explicitly what font to use.
908 // The mask part of this test is totally wrong.
909 BUG3244 WIN LINUX : fast/backgrounds/svg-as-background-6.html = FAIL
910
911 // Our gradients are wrong here.
912 BUG19559 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-08-b.svg = FAIL
913 BUG10304 LINUX : svg/carto.net/button.svg = FAIL
914
915 // Probably need to change the test upstream to describe it better and use no
916 // hard coded numbers.
917 BUG19897 WIN LINUX : svg/custom/getscreenctm-in-mixed-content2.xhtml = FAIL
918
919 BUG10306 LINUX : svg/carto.net/combobox.svg = FAIL
920
921 // Linux pixeltest failure: slightly different shade of composited
922 // alpha in bottom group.
923 BUG10310 LINUX : svg/W3C-SVG-1.1/masking-opacity-01-b.svg = FAIL
924
925 // -----------------------------------------------------------------
926 // Accessibility layout tests
927 //
928 // In addition to WebCore, these are meant to exercise platform APIs
929 // (MSAA, NSAccessibility, ATK). Since we don't have access to these in the
930 // sandbox, making these tests pass involves faking interactions with these APIs
931 // and doesn't seem like a good use of our time.
932 // We DEFER or WONTFIX these, because we need to first identify a good
933 // testing strategy for Chromium accessibility. It is possible we won't use
934 // these at all.
935
936 BUG10322 DEFER SKIP : accessibility = PASS FAIL
937 BUG10322 DEFER SKIP : platform/mac/accessibility = PASS FAIL
938 BUG10322 DEFER SKIP : platform/win/accessibility = PASS FAIL
939
940 // Functionality is supported in DRT but not TestShell
941 WONTFIX SKIP : platform/chromium/accessibility/children-changed-notification.html = FAIL
942
943 // -----------------------------------------------------------------
944 // Other failures
945 // -----------------------------------------------------------------
946
947 // These fail the pixel tests in debug mode because they have
948 // unpainted space (filled red in Debug but not in Release).
949 // https://bugs.webkit.org/show_bug.cgi?id=8423
950 BUG24204 WIN LINUX : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE+TEXT TEXT
951
952 // Fails on webkit windows as well.
953 BUG24207 : fast/events/attempt-scroll-with-no-scrollbars.html = FAIL
954
955 // No glyph for U+FFFD (Replacement Character : black diamond with
956 // question mark) in them
957 BUG10315 WIN : fast/encoding/invalid-UTF-8.html = FAIL
958
959 // V8 failures as a result of the WebKit merge.
960 // http://code.google.com/p/v8/issues/detail?id=92
961
962 // v8: A setter that is added to a prototype after the inline cache is
963 // recorded will not be called.
964 BUG24209 : fast/js/pic/cached-prototype-setter.html = FAIL
965
966 // We have the wrong shadow for "This".
967 // It appears we're not obeying the "transparent" fill color.
968 BUG10317 LINUX : fast/css/shadow-multiple.html = FAIL
969
970 // Problems with getImageData and toDataURL.
971 // This test requires us to do alpha blending exactly the way CG does it,
972 // which Skia may never do (see bug).
973 BUG22700 LINUX WIN : fast/canvas/canvas-getImageData.html = FAIL
974
975 // We're much closer now. To fully pass this we need encoders for jpg
976 // and gif, which is a low priority.
977 BUG10318 WIN LINUX : fast/canvas/toDataURL-supportedTypes.html = FAIL
978
979 // This test finishes while in the middle of a CSS animation. This is
980 // intentional, but it makes pixel results unreliable.
981 // http://bugs.webkit.org/show_bug.cgi?id=21491
982 // CSS animations should not block our next release.
983 BUG10320 WIN LINUX : transitions/opacity-transition-zindex.html = PASS FAIL
984
985 // Issue 3273: TextInputController::firstRectForCharacterRange not implemented.
986 BUG3273 : editing/selection/move-left-right.html = FAIL
987 BUG3273 MAC : platform/mac/editing/input/caret-primary-bidi.html = FAIL
988 BUG3273 MAC : platform/mac/editing/input/firstrectforcharacterrange-plain.html = FAIL
989 BUG3273 MAC : platform/mac/editing/input/range-for-empty-document.html = FAIL
990 // WebKit 50358:50395
991 BUG3273 : fast/text/international/thai-cursor-position.html = TEXT
992 // WebKit roll 51512:51524
993 BUG3273 : editing/selection/5825350-1.html = FAIL
994 BUG3273 : editing/selection/5825350-2.html = FAIL
995 BUG3273 : editing/selection/mixed-editability-10.html = FAIL
996
997 // Regression from the 41362:41402 merge.
998 BUG8402 MAC : fast/forms/drag-out-of-textarea.html = FAIL
999
1000 // GURL doesn't handle switching from standard URL to path URL correctly
1001 BUG27914 : fast/dom/HTMLAnchorElement/set-href-attribute-protocol.html = TEXT
1002
1003 // ----------------------------------------------------------------------------
1004 // NEW FOR THE MERGE
1005 //
1006 // These tests need to have their output inspected to make sure it's reasonable
1007 // and then baselined if necessary.
1008 // ----------------------------------------------------------------------------
1009
1010 // This test isn't hanging, it just takes 12-13 seconds to run.
1011 BUG30536 SLOW WIN LINUX : http/tests/misc/acid3.html = FAIL
1012 BUG30536 : http/tests/misc/favicon-as-image.html = FAIL
1013
1014 // Has failed for Chromium since it was first checked in.  (Lighttpd related?)
1015 BUG10323 WIN : http/tests/xmlhttprequest/xmlhttprequest-no-content-length-onProgress.html = FAIL
1016
1017 // Post-MERGE failures: these will all need to be fixed one day
1018
1019 // Linux pixeltest failure: caret is in the wrong place
1020 // Upstream WebKit also skips this test and Safari with latest WebKit shows
1021 // same behavior as Chromium. Not required for beta so marking as deferred.
1022 BUG10324 LINUX WIN : editing/selection/caret-rtl-2.html = IMAGE
1023
1024 // This test assumes we're using unix paths and looks for a file:///test
1025 // path.  We correctly return file:///C:/test on Windows.  We should fix
1026 // upstream
1027 // Expectations for this test changed upstream. We should fix this test, but
1028 // it doesn't need to block the current release
1029 BUG10325 WIN : fast/dom/resource-locations-in-created-html-document.html = FAIL
1030
1031 // GURL/KURL difference in handling of "http:".
1032 // New test. We should fix it, but it doesn't need to block the current release
1033 BUG7386 : http/tests/security/postMessage/invalid-origin-throws-exception.html = FAIL
1034
1035 // Linux pixeltest failure: Font mismatch
1036 BUG10327 LINUX : tables/mozilla_expected_failures/bugs/bug14007-2.html = FAIL
1037
1038 // On Linux, we don't seem to be getting Helvetica Bold for all cases.
1039 BUG10328 LINUX : fast/css/font-face-multiple-faces.html = FAIL
1040
1041 // Got flakey (both debug and release) around r3581 (ananta).
1042 // New test. We should fix it, but it doesn't need to block the current release
1043 BUG10329 WIN : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1044
1045 // Uses ahem font and expects line heights to match some pixel value.
1046 // We should be able to pass this -- not sure what's wrong.
1047 BUG10331 LINUX : css2.1/t1008-c44-ln-box-02-d-ag.html = FAIL
1048
1049 // Looks like we're failing the test -- there are red boogers in the box that should be all green.
1050 BUG10332 LINUX : css2.1/t1605-c545-txttrans-00-b-ag.html = FAIL
1051
1052 // Asks for "system" fonts, which we don't support at all.
1053 BUG10335 LINUX : fast/css/css2-system-fonts.html = FAIL
1054
1055 // Large fonts have different metrics.
1056 BUG10336 LINUX : fast/css/font-face-descriptor-multiple-values.html = FAIL
1057
1058 // Wants Helvetica, Monaco.  It's still testing something useful, but we may
1059 // need to check in a wrong-looking baseline.  Windows looks wrong too.
1060 BUG10337 LINUX : fast/css/font-face-locally-installed.html = FAIL
1061
1062 // Font metrics wrong, despite using Lucida Grande?
1063 BUG10338 LINUX : fast/events/updateLayoutForHitTest.html = FAIL
1064
1065 // Layout totally different -- wrong font selected?
1066 BUG10340 LINUX : fast/frames/viewsource-attribute.html = FAIL
1067
1068 // Linux flaky: sometimes I get scrollbars and sometimes not.
1069 BUG10341 LINUX : fast/lists/001.html = FAIL
1070
1071 // We fail to load a file URL with a port number -- how does this work on
1072 // Windows?
1073 BUG10342 LINUX MAC : fast/loader/file-URL-with-port-number.html = TIMEOUT
1074
1075 // Text doesn't display at all -- maybe we don't have the slow font
1076 // code enabled?
1077 BUG10343 LINUX : fast/text/atsui-kerning-and-ligatures.html = FAIL
1078 BUG10343 LINUX RELEASE : fast/text/atsui-partial-selection.html = FAIL
1079 BUG10343 LINUX : fast/text/atsui-small-caps-punctuation-size.html = FAIL
1080
1081 // Started timing out with agl's complext text change.  Page is verrry slow.
1082 BUG10343 SKIP LINUX : fast/text/large-text-composed-char.html = TIMEOUT FAIL
1083
1084 // Missing text -- slow font path unimplemented?
1085 BUG10344 LINUX : fast/text/should-use-atsui.html = FAIL
1086
1087 // We print to stderr when a failure happens while importing XSL;
1088 // should disable this in libxml.
1089 BUG10347 MAC : fast/xsl/transform-xhr-doc.xhtml = FAIL
1090
1091 // Linux pixeltest failure: Failing to apply style
1092 BUG10349 LINUX : fast/forms/select-style.html = FAIL
1093
1094 // Linux pixeltest failure: The text suggests that the radios should not
1095 // overlap, but it's very close and quite different from the Windows version
1096 BUG10350 LINUX : fast/replaced/width100percent-radio.html = FAIL
1097
1098 // These tests are marked as failing on Linux because they depend on QuickTime.
1099 // See the bug for more discussion.
1100 BUG15797 LINUX : fast/dom/object-embed-plugin-scripting.html = FAIL
1101 BUG15797 LINUX : plugins/embed-attributes-setting.html = FAIL
1102
1103 // Skip because we throw an exception before we get to dumpAsText.
1104 BUG10351 SKIP MAC : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1105 BUG10351 MAC : plugins/inner-html-display-none.html = FAIL
1106 BUG10351 MAC : plugins/mouse-events.html = FAIL
1107 // BUG10667 SLOW MAC RELEASE : plugins/iframe-shims.html = FAIL
1108
1109 // NEW FOR MERGE 36102:37604
1110
1111 BUG32184 : fast/js/arguments.html = FAIL
1112 // See bug http://code.google.com/p/chromium/issues/detail?id=7868,
1113 // not urgent for current release.
1114 BUG24227 : http/tests/plugins/local-geturl-from-remote.html = FAIL
1115
1116 // This test sometimes fails indefinitely, other times it takes 1-2 seconds.
1117 BUG14009 WIN : http/tests/misc/dns-prefetch-control.html = TIMEOUT PASS
1118
1119 // NEW FOR MERGE 37604:38097
1120 // This is a Safari specific test used to document the set of global
1121 // constructors they expose and the exact way they are printed.  Not
1122 // important - we might even want to ignore it.
1123 // New tests. We should fix these, but they doesn't need to block the current
1124 // release
1125 BUG10354 WIN LINUX : fast/layers/opacity-transforms.html = FAIL
1126
1127 // MERGE 38389:38450
1128 // Form submit causes invalid page reload/navigation when action is a named
1129 // anchor
1130 BUG10357 : fast/dom/cssTarget-crash.html = TIMEOUT PASS
1131
1132 // MERGE 38500:39550: New tests
1133 // Missing expected results
1134 BUG10358 SKIP MAC LINUX : animations/animation-drt-api.html = PASS
1135
1136 // New test. We should fix it, but it doesn't need to block the current release
1137 BUG10361 WIN : http/tests/misc/single-character-pi-stylesheet.xhtml = FAIL
1138
1139 // Windows is missing the green box. Started to pass in roll to WebKit r50313
1140 BUG8729 WIN DEBUG : http/tests/multipart/invalid-image-data.html = FAIL
1141 BUG8729 SLOW WIN RELEASE : http/tests/multipart/invalid-image-data.html = FAIL
1142 // Flaky on Linux dbg.
1143 BUG8729 LINUX DEBUG : http/tests/multipart/invalid-image-data.html = IMAGE PASS
1144
1145 // -----------------------------------------------------------------
1146 // MAC PORT TESTS
1147 // -----------------------------------------------------------------
1148
1149 //
1150 // *** TESTS TO WORK ON FIRST ***
1151 // These tests fail because of work that needs to be done in Mac TestShell to
1152 // bring it up to par with Win TestShell. These tests pass on Win and should
1153 // pass on Mac once we fix the bugs.
1154 //
1155
1156 // We've bucketed tests into groupings for why they're failing. Please try
1157 // to add new failures in the appropriate bucket.
1158
1159 // text fields wrong width
1160 BUG10363 MAC : tables/mozilla/bugs/bug53690-1.html = FAIL
1161 BUG10363 MAC : tables/mozilla/bugs/bug9024.html = FAIL
1162
1163 // we're waiting on upstreaming a change to how textarea padding works. rather
1164 // than rebasing, we'll wait for the upstream (which ojan said should happen
1165 // early in Jan 09).
1166 BUG10364 MAC : fast/css/resize-corner-tracking.html = FAIL
1167 BUG10364 MAC : http/tests/navigation/reload-subframe-object.html = FAIL
1168
1169 // bad key event handling
1170 BUG10366 MAC : fast/events/option-tab.html = FAIL CRASH
1171
1172 // selection
1173 BUG10369 MAC : editing/selection/5109817.html = FAIL
1174 BUG10369 LINUX : editing/selection/5354455-2.html = FAIL
1175
1176 // The test says you should see numbers, but we display letters.
1177 // It looks like we are missing the WebKit "WeightWatcher" fonts,
1178 // checked in as part of http://trac.webkit.org/changeset/34771 .
1179 BUG10370 : fast/css/font-weight-1.html = FAIL
1180
1181 // Not really sure why these are failing at the moment
1182 BUG10376 MAC : fast/dom/isindex-002.html = FAIL
1183
1184 // These two have a different object type in the dom dump. Plugin-related.
1185 // Ignored on Win/Linux because they rely on QT to provide a TIFF decoder.
1186 BUG10378 MAC : fast/images/embed-image.html = FAIL
1187 BUG10378 MAC : fast/images/object-image.html = FAIL
1188
1189 BUG10381 LINUX RELEASE : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1190 BUG10381 LINUX DEBUG : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1191
1192 // The following are flaky in that some times the timeout or crash, but we think
1193 // it is because of bugs in other parts of the code and not specific to what
1194 // these tests are doing.  The are being noted here so we can get the buildbots
1195 // green so new mac regressions are caught much quicker.
1196 // (there are a few others marked w/ multiple status like this in other parts of
1197 // the file, but they were left there as the comments in those areas are valid.)
1198 BUG10384 MAC SLOW : fast/dom/Window/new-window-opener.html = FAIL
1199
1200
1201 BUG10399 MAC : fast/encoding/char-encoding-mac.html = FAIL
1202
1203 // Broken pixel tests
1204
1205 // Rebaselining needed because of scrollbars
1206 BUG23498 MAC : css1/cascade/cascade_order.html = IMAGE
1207 BUG23498 MAC : css1/classification/display.html = IMAGE
1208 BUG23498 MAC : css1/classification/list_style_type.html = IMAGE
1209 BUG23498 MAC : css1/classification/white_space.html = IMAGE
1210 BUG23498 MAC : css1/color_and_background/background.html = IMAGE
1211 BUG23498 MAC : css1/color_and_background/background_attachment.html = IMAGE
1212 BUG23498 MAC : css1/color_and_background/background_position.html = IMAGE
1213 BUG23498 MAC : css1/color_and_background/background_repeat.html = IMAGE
1214 BUG23498 MAC : css1/conformance/forward_compatible_parsing.html = IMAGE
1215 BUG23498 MAC : css1/font_properties/font.html = IMAGE
1216 // BUG23498 MAC : css1/font_properties/font_family.html = IMAGE
1217 BUG23498 MAC : css1/font_properties/font_size.html = IMAGE
1218 BUG23498 MAC : css1/font_properties/font_weight.html = IMAGE
1219 BUG23498 MAC : css1/formatting_model/floating_elements.html = IMAGE
1220 BUG23498 MAC : css1/formatting_model/height_of_lines.html = IMAGE
1221 BUG23498 MAC : css1/formatting_model/horizontal_formatting.html = IMAGE
1222 BUG23498 MAC : css1/formatting_model/inline_elements.html = IMAGE
1223 BUG23498 MAC : css1/formatting_model/replaced_elements.html = IMAGE
1224 BUG23498 MAC : css1/formatting_model/vertical_formatting.html = IMAGE
1225 BUG23498 MAC : css1/pseudo/anchor.html = IMAGE
1226 BUG23498 MAC : css1/pseudo/firstletter.html = IMAGE
1227 BUG23498 MAC : css1/pseudo/firstline.html = IMAGE
1228 BUG23498 MAC : css1/pseudo/multiple_pseudo_elements.html = IMAGE
1229 BUG23498 MAC : css1/text_properties/letter_spacing.html = IMAGE+TEXT IMAGE
1230 BUG23498 MAC : css1/text_properties/line_height.html = IMAGE
1231 BUG23498 MAC : css1/text_properties/text_decoration.html = IMAGE
1232 BUG23498 MAC : css1/text_properties/text_indent.html = IMAGE
1233 BUG23498 MAC : css1/text_properties/text_transform.html = IMAGE
1234 BUG23498 MAC : css1/text_properties/vertical_align.html = IMAGE
1235 BUG23498 MAC : css1/text_properties/word_spacing.html = IMAGE
1236 BUG23498 MAC : css1/units/color_units.html = IMAGE
1237 BUG23498 MAC : css1/units/length_units.html = IMAGE
1238 BUG23498 MAC : css2.1/t0803-c5502-mrgn-r-02-c.html = IMAGE
1239 BUG23498 MAC : css2.1/t0803-c5505-mrgn-02-c.html = IMAGE
1240 BUG23498 MAC : css2.1/t080301-c411-vt-mrgn-00-b.html = IMAGE
1241 BUG23498 MAC : css2.1/t0905-c5525-fltclr-00-c-ag.html = IMAGE
1242 BUG23498 MAC : css2.1/t0905-c5525-fltmrgn-00-c-ag.html = IMAGE
1243 BUG23498 MAC : css2.1/t0905-c5525-fltwidth-00-c-g.html = IMAGE
1244 BUG23498 MAC : css2.1/t0905-c5526-fltclr-00-c-ag.html = IMAGE
1245 BUG23498 MAC : css2.1/t1002-c5523-width-02-b-g.html = IMAGE
1246 BUG23498 MAC : css2.1/t1202-counters-08-b.html = IMAGE
1247 BUG23498 MAC : css2.1/t1202-counters-09-b.html = IMAGE
1248 BUG23498 MAC : css2.1/t140201-c535-bg-fixd-00-b-g.html = IMAGE
1249 BUG23498 MAC : css2.1/t140201-c537-bgfxps-00-c-ag.html = IMAGE
1250 BUG23498 MAC : css2.1/t1508-c527-font-07-b.html = IMAGE
1251 BUG23498 MAC : editing/deleting/delete-after-span-ws-001.html = IMAGE
1252 BUG23498 MAC : editing/deleting/delete-after-span-ws-002.html = IMAGE
1253 BUG23498 MAC : editing/deleting/delete-after-span-ws-003.html = IMAGE
1254 BUG23498 MAC : editing/deleting/delete-line-end-ws-001.html = IMAGE
1255 BUG23498 MAC : editing/deleting/delete-line-end-ws-002.html = IMAGE
1256 BUG23498 MAC : editing/inserting/insert-div-023.html = IMAGE
1257 BUG23498 MAC : editing/selection/focus_editable_html.html = IMAGE
1258 BUG23498 MAC : editing/selection/iframe.html = IMAGE
1259 BUG23498 MAC : editing/selection/select-all-001.html = IMAGE
1260 BUG23498 MAC : editing/selection/select-all-002.html = IMAGE
1261 BUG23498 MAC : editing/selection/select-all-003.html = IMAGE
1262 BUG23498 MAC : editing/selection/select-all-004.html = IMAGE
1263 BUG23498 MAC : editing/selection/unrendered-001.html = IMAGE
1264 // BUG23498 MAC : editing/selection/unrendered-002.html = IMAGE
1265 BUG23498 MAC : editing/selection/unrendered-003.html = IMAGE
1266 BUG23498 MAC : editing/selection/unrendered-004.html = IMAGE
1267 BUG23498 MAC : editing/selection/unrendered-005.html = IMAGE
1268 BUG23498 MAC : fast/backgrounds/background-inherit-color-bug.html = IMAGE
1269 BUG23498 MAC : fast/backgrounds/repeat/negative-offset-repeat-transformed.html = IMAGE
1270 BUG23498 MAC : fast/block/basic/016.html = IMAGE
1271 BUG23498 MAC : fast/block/basic/fieldset-stretch-to-legend.html = IMAGE
1272 BUG23498 MAC : fast/block/float/008.html = IMAGE
1273 BUG23498 MAC : fast/block/float/013.html = IMAGE
1274 BUG23498 MAC : fast/block/float/019.html = IMAGE
1275 BUG23498 MAC : fast/block/float/021.html = IMAGE
1276 BUG23498 MAC : fast/block/float/025.html = IMAGE
1277 BUG23498 MAC : fast/block/float/026.html = IMAGE
1278 BUG23498 MAC : fast/block/float/027.html = IMAGE
1279 BUG23498 MAC : fast/block/float/028.html = IMAGE
1280 BUG23498 MAC : fast/block/float/032.html = IMAGE
1281 BUG23498 MAC : fast/block/float/033.html = IMAGE
1282 BUG23498 MAC : fast/block/float/035.html = IMAGE
1283 // BUG23498 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1284 BUG23498 MAC : fast/block/float/br-with-clear-2.html = IMAGE
1285 // BUG23498 MAC : fast/block/float/float-avoidance.html = IMAGE
1286 BUG23498 MAC : fast/block/float/nested-clearance.html = IMAGE
1287 BUG23498 MAC : fast/block/float/relative-painted-twice.html = IMAGE
1288 BUG23498 MAC : fast/block/margin-collapse/103.html = IMAGE
1289 BUG23498 MAC : fast/block/margin-collapse/104.html = IMAGE
1290 BUG23498 MAC : fast/block/margin-collapse/empty-clear-blocks.html = IMAGE
1291 BUG23498 MAC : fast/block/positioning/047.html = IMAGE
1292 BUG23498 MAC : fast/block/positioning/051.html = IMAGE
1293 BUG23498 MAC : fast/block/positioning/055.html = IMAGE
1294 BUG23498 MAC : fast/block/positioning/auto/007.html = IMAGE
1295 BUG23498 MAC : fast/block/positioning/fixed-positioning-scrollbar-bug.html = IMAGE
1296 BUG23498 MAC : fast/block/positioning/negative-rel-position.html = IMAGE
1297 BUG23498 MAC : fast/block/positioning/relative-overflow-block.html = IMAGE
1298 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced-float.html = IMAGE
1299 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced.html = IMAGE
1300 BUG23498 MAC : fast/body-propagation/overflow/001-xhtml.xhtml = IMAGE
1301 BUG23498 MAC : fast/body-propagation/overflow/001.html = IMAGE
1302 BUG23498 MAC : fast/body-propagation/overflow/005-declarative.xhtml = IMAGE
1303 BUG23498 MAC : fast/body-propagation/overflow/005-xhtml.xhtml = IMAGE
1304 BUG23498 MAC : fast/body-propagation/overflow/005.html = IMAGE
1305 // BUG23498 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1306 // BUG23498 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1307 BUG23498 MAC : fast/box-sizing/box-sizing.html = IMAGE
1308 BUG23498 MAC : fast/canvas/canvas-bg.html = IMAGE
1309 BUG23498 MAC : fast/canvas/canvas-text-alignment.html = IMAGE
1310 BUG23498 MAC : fast/canvas/image-object-in-canvas.html = IMAGE
1311 BUG23498 MAC : fast/css/005.html = IMAGE
1312 BUG23498 MAC : fast/css/MarqueeLayoutTest.html = IMAGE
1313 BUG23498 MAC : fast/css/border-height.html = IMAGE
1314 BUG23498 MAC : fast/css/empty-pseudo-class.html = IMAGE
1315 BUG23498 MAC : fast/css/first-child-pseudo-class.html = IMAGE
1316 BUG23498 MAC : fast/css/first-of-type-pseudo-class.html = IMAGE
1317 BUG23498 MAC : fast/css/hsl-color.html = IMAGE
1318 BUG9798 BUG23498 MAC : fast/css/last-child-pseudo-class.html = IMAGE FAIL
1319 BUG23498 MAC : fast/css/line-height-overflow.html = IMAGE
1320 BUG23498 MAC : fast/css/nested-floating-relative-position-percentages.html = IMAGE
1321 BUG23498 MAC : fast/css/only-child-pseudo-class.html = IMAGE
1322 BUG23498 MAC : fast/css/only-of-type-pseudo-class.html = IMAGE
1323 BUG23498 MAC : fast/css/percentage-non-integer.html = IMAGE
1324 // BUG23498 MAC : fast/css/shadow-multiple.html = IMAGE
1325 BUG23498 MAC : fast/css/text-overflow-ellipsis-strict.html = IMAGE
1326 BUG23498 MAC : fast/css/text-overflow-ellipsis.html = IMAGE
1327 BUG23498 MAC : fast/css/word-space-extra.html = IMAGE
1328 BUG23498 MAC : fast/css-generated-content/014.html = IMAGE
1329 BUG23498 MAC : fast/dom/focus-contenteditable.html = IMAGE
1330 BUG23498 MAC : fast/dynamic/008.html = IMAGE
1331 BUG23498 MAC : fast/dynamic/anchor-lock.html = IMAGE
1332 BUG23498 MAC : fast/dynamic/insert-before-table-part-in-continuation.html = IMAGE
1333 BUG23498 MAC : fast/encoding/utf-16-big-endian.html = IMAGE
1334 BUG23498 MAC : fast/encoding/utf-16-little-endian.html = IMAGE
1335 BUG23498 MAC : fast/events/autoscroll.html = IMAGE
1336 BUG23498 MAC : fast/events/pointer-events-2.html = IMAGE
1337 BUG23498 MAC : fast/events/reveal-link-when-focused.html = IMAGE
1338 BUG23498 MAC : fast/flexbox/016.html = IMAGE
1339 BUG23498 MAC : fast/flexbox/flex-hang.html = IMAGE
1340 BUG23498 MAC : fast/forms/fieldset-align.html = IMAGE
1341 BUG23498 MAC : fast/forms/form-hides-table.html = IMAGE
1342 BUG23498 MAC : fast/forms/input-table.html = IMAGE
1343 BUG23498 MAC : fast/forms/textAreaLineHeight.html = IMAGE
1344
1345 BUG23498 MAC : fast/frames/frame-scrolling-attribute.html = IMAGE
1346
1347 BUG23498 MAC : fast/frames/iframe-scrolling-attribute.html = IMAGE
1348 BUG23498 BUG26044 MAC RELEASE : fast/frames/invalid.html = IMAGE CRASH
1349 BUG23498 BUG26044 SLOW MAC DEBUG : fast/frames/invalid.html = IMAGE
1350 // BUG23498 MAC : fast/frames/onlyCommentInIFrame.html = IMAGE
1351 BUG23498 MAC DEBUG : fast/frames/valid.html = IMAGE
1352 BUG23498 MAC RELEASE : fast/frames/valid.html = IMAGE CRASH
1353 BUG23498 MAC : fast/gradients/background-clipped.html = IMAGE
1354 BUG23498 MAC : fast/images/pdf-as-image-landscape.html = IMAGE
1355 BUG23498 MAC : fast/inline/inline-borders-with-bidi-override.html = IMAGE
1356 BUG23498 MAC : fast/inline/inline-continuation-borders.html = IMAGE
1357 BUG23498 MAC : fast/inline/long-wrapped-line.html = IMAGE
1358 BUG23498 MAC : fast/inline-block/inline-block-vertical-align.html = IMAGE
1359 BUG23498 MAC : fast/layers/scroll-rect-to-visible.html = IMAGE
1360 BUG23498 MAC : fast/lists/001.html = IMAGE
1361 BUG23498 MAC : fast/lists/008.html = IMAGE
1362 BUG23498 MAC : fast/lists/li-br.html = IMAGE
1363 // BUG23498 MAC : fast/lists/ol-start-parsing.html = IMAGE
1364 BUG23498 MAC : fast/lists/olstart.html = IMAGE
1365 BUG23498 MAC : fast/multicol/column-rules-stacking.html = IMAGE
1366 BUG23498 MAC : fast/multicol/columns-shorthand-parsing.html = IMAGE
1367 BUG23498 MAC : fast/multicol/float-multicol.html = IMAGE
1368 // BUG23498 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1369 // BUG23498 MAC : fast/overflow/004.html = IMAGE
1370 BUG23498 MAC : fast/overflow/006.html = IMAGE
1371 BUG23498 MAC : fast/overflow/clip-rects-fixed-ancestor.html = IMAGE
1372 BUG23498 MAC : fast/overflow/overflow-auto-table.html = IMAGE
1373 BUG23498 MAC : fast/overflow/overflow-stacking.html = IMAGE
1374 BUG23498 MAC : fast/overflow/overflow-x-y.html = IMAGE
1375 // BUG23498 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1376 BUG23498 MAC : fast/overflow/scrollRevealButton.html = IMAGE
1377 BUG23498 MAC : fast/reflections/reflection-direction.html = IMAGE
1378 BUG23498 MAC : fast/replaced/005.html = IMAGE
1379 BUG23498 MAC : fast/replaced/width100percent-image.html = IMAGE
1380 BUG23498 MAC : fast/selectors/166.html = IMAGE
1381 BUG23498 MAC : fast/table/023.html = IMAGE
1382 BUG23498 MAC : fast/table/034.html = IMAGE
1383 BUG23498 MAC : fast/table/040.html = IMAGE
1384 BUG23498 MAC : fast/table/border-collapsing/004.html = IMAGE
1385 BUG23498 MAC : fast/table/empty-cells.html = IMAGE
1386 BUG23498 MAC : fast/table/frame-and-rules.html = IMAGE
1387 BUG23498 MAC : fast/table/height-percent-test.html = IMAGE
1388 BUG23498 MAC : fast/table/overflowHidden.html = IMAGE
1389 BUG23498 MAC : fast/table/prepend-in-anonymous-table.html = IMAGE
1390 BUG23498 MAC : fast/table/wide-colspan.html = IMAGE
1391 BUG23498 MAC : fast/table/wide-column.html = IMAGE
1392 BUG23498 MAC : fast/text/capitalize-boundaries.html = IMAGE
1393 BUG23498 MAC : fast/text/international/bidi-neutral-run.html = IMAGE
1394 BUG23498 MAC : fast/text/international/thai-line-breaks.html = IMAGE
1395 BUG23498 MAC : fast/text/large-text-composed-char.html = IMAGE
1396 BUG23498 MAC : fast/text/softHyphen.html = IMAGE
1397 BUG23498 MAC : fast/text/wbr.html = IMAGE
1398 BUG23498 MAC : fast/text/whitespace/024.html = IMAGE
1399 BUG23498 MAC : fast/text/whitespace/pre-wrap-spaces-after-newline.html = IMAGE
1400 BUG23498 MAC : fast/text/word-break.html = IMAGE
1401 BUG23498 MAC DEBUG : fonts/cursive.html = IMAGE IMAGE+TEXT
1402 BUG23498 MAC RELEASE : fonts/cursive.html = IMAGE
1403 BUG23498 MAC : fonts/default.html = IMAGE
1404 BUG23498 MAC : fonts/fantasy.html = IMAGE
1405 BUG23498 MAC : fonts/monospace.html = IMAGE
1406 BUG23498 MAC : fonts/sans-serif.html = IMAGE
1407 BUG23498 MAC : fonts/serif.html = IMAGE
1408 BUG23498 MAC : http/tests/navigation/anchor-frames.html = IMAGE
1409 BUG9798 BUG23498 MAC DEBUG : http/tests/navigation/error404-frames.html = TIMEOUT IMAGE
1410 BUG9798 BUG23498 MAC RELEASE : http/tests/navigation/error404-frames.html = IMAGE
1411 BUG23498 MAC : http/tests/navigation/error404-subframeload.html = IMAGE
1412 // BUG23498 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1413 BUG23498 MAC DEBUG : http/tests/navigation/post-frames.html = IMAGE TIMEOUT
1414 BUG23498 MAC RELEASE : http/tests/navigation/post-frames.html = IMAGE
1415 BUG23498 MAC : http/tests/navigation/postredirect-frames.html = IMAGE
1416 BUG23498 MAC : svg/custom/altglyph.svg = IMAGE
1417 BUG23498 MAC : svg/hixie/links/003-broken.xml = IMAGE
1418 BUG23498 MAC : svg/text/multichar-glyph.svg = IMAGE
1419 BUG23498 MAC : tables/mozilla/bugs/bug101674.html = IMAGE
1420 BUG23498 MAC : tables/mozilla/bugs/bug10269-2.html = IMAGE
1421 BUG23498 MAC : tables/mozilla/bugs/bug10296-1.html = IMAGE
1422 BUG23498 MAC : tables/mozilla/bugs/bug1055-1.html = IMAGE
1423 BUG23498 MAC : tables/mozilla/bugs/bug113235-1.html = IMAGE
1424 BUG23498 MAC : tables/mozilla/bugs/bug113235-3.html = IMAGE
1425 BUG23498 MAC : tables/mozilla/bugs/bug11944.html = IMAGE
1426 BUG23498 MAC : tables/mozilla/bugs/bug120364.html = IMAGE
1427 BUG23498 MAC : tables/mozilla/bugs/bug1302.html = IMAGE
1428 BUG23498 MAC : tables/mozilla/bugs/bug131020.html = IMAGE
1429 BUG23498 MAC : tables/mozilla/bugs/bug131020_iframe.html = IMAGE
1430 BUG23498 MAC : tables/mozilla/bugs/bug137388-2.html = IMAGE
1431 BUG23498 MAC : tables/mozilla/bugs/bug22019.html = IMAGE
1432 BUG23498 MAC : tables/mozilla/bugs/bug23151.html = IMAGE
1433 BUG23498 MAC : tables/mozilla/bugs/bug2479-1.html = IMAGE
1434 BUG23498 MAC : tables/mozilla/bugs/bug2479-3.html = IMAGE
1435 BUG23498 MAC : tables/mozilla/bugs/bug2479-4.html = IMAGE
1436 BUG23498 MAC : tables/mozilla/bugs/bug27038-2.html = IMAGE
1437 BUG23498 MAC : tables/mozilla/bugs/bug29314.html = IMAGE
1438 BUG23498 MAC : tables/mozilla/bugs/bug2947.html = IMAGE
1439 BUG23498 MAC : tables/mozilla/bugs/bug32205-2.html = IMAGE
1440 BUG23498 MAC : tables/mozilla/bugs/bug38916.html = IMAGE
1441 BUG23498 MAC : tables/mozilla/bugs/bug3977.html = IMAGE
1442 BUG23498 MAC : tables/mozilla/bugs/bug43039.html = IMAGE
1443 BUG23498 MAC : tables/mozilla/bugs/bug43854-1.html = IMAGE
1444 BUG23498 MAC : tables/mozilla/bugs/bug44505.html = IMAGE
1445 BUG23498 MAC : tables/mozilla/bugs/bug46480-1.html = IMAGE
1446 BUG23498 MAC : tables/mozilla/bugs/bug46480-2.html = IMAGE
1447 BUG23498 MAC : tables/mozilla/bugs/bug50695-1.html = IMAGE
1448 BUG23498 MAC : tables/mozilla/bugs/bug56405.html = IMAGE
1449 BUG23498 MAC : tables/mozilla/bugs/bug5797.html = IMAGE
1450 BUG23498 MAC : tables/mozilla/bugs/bug5835.html = IMAGE
1451 BUG23498 MAC : tables/mozilla/bugs/bug625.html = IMAGE
1452 BUG23498 MAC : tables/mozilla/bugs/bug650.html = IMAGE
1453 BUG23498 MAC : tables/mozilla/bugs/bug67915-1.html = IMAGE
1454 BUG23498 MAC : tables/mozilla/bugs/bug7112-1.html = IMAGE
1455 BUG23498 MAC : tables/mozilla/bugs/bug7112-2.html = IMAGE
1456 BUG23498 MAC : tables/mozilla/bugs/bug73321.html = IMAGE
1457 BUG23498 MAC : tables/mozilla/bugs/bug92143.html = IMAGE
1458 BUG23498 MAC : tables/mozilla/collapsing_borders/bug41262-3.html = IMAGE
1459 BUG23498 MAC : tables/mozilla/core/bloomberg.html = IMAGE
1460 BUG23498 MAC : tables/mozilla/core/captions.html = IMAGE
1461 BUG23498 MAC : tables/mozilla/core/cell_heights.html = IMAGE
1462 BUG23498 MAC : tables/mozilla/core/col_widths_auto_fix.html = IMAGE
1463 BUG23498 MAC : tables/mozilla/core/col_widths_fix_fixPer.html = IMAGE
1464 BUG23498 MAC : tables/mozilla/core/nested1.html = IMAGE
1465 BUG23498 MAC : tables/mozilla/core/one_row.html = IMAGE
1466 BUG23498 MAC : tables/mozilla/core/row_span.html = IMAGE
1467 BUG23498 MAC : tables/mozilla/marvin/backgr_index.html = IMAGE
1468 BUG23498 MAC : tables/mozilla/marvin/backgr_layers-opacity.html = IMAGE
1469 BUG23498 MAC : tables/mozilla/marvin/backgr_position-table.html = IMAGE
1470 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-cell.html = IMAGE
1471 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column-group.html = IMAGE
1472 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
1473 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row-group.html = IMAGE
1474 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
1475 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table.html = IMAGE
1476 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_name.xml = IMAGE
1477 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
1478 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_name.xml = IMAGE
1479 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_rgb.xml = IMAGE
1480 BUG23498 MAC : tables/mozilla/marvin/x_td_height.xml = IMAGE
1481 BUG23498 MAC : tables/mozilla/marvin/x_td_nowrap.xml = IMAGE
1482 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_name.xml = IMAGE
1483 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_rgb.xml = IMAGE
1484 BUG23498 MAC : tables/mozilla/marvin/x_th_height.xml = IMAGE
1485 BUG23498 MAC : tables/mozilla/marvin/x_th_nowrap.xml = IMAGE
1486 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_name.xml = IMAGE
1487 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_rgb.xml = IMAGE
1488 BUG23498 MAC : tables/mozilla/other/cell_widths.html = IMAGE
1489 BUG23498 MAC : tables/mozilla/other/nestedTables.html = IMAGE
1490 BUG23498 MAC : tables/mozilla/other/test3.html = IMAGE
1491 BUG23498 MAC : tables/mozilla/other/test6.html = IMAGE
1492 BUG23498 MAC : tables/mozilla/other/wa_table_tr_align.html = IMAGE
1493 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
1494 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug101759.html = IMAGE
1495 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10216.html = IMAGE
1496 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
1497 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
1498 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug131020-3.html = IMAGE
1499 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-1.html = IMAGE
1500 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-2.html = IMAGE
1501 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug19526.html = IMAGE
1502 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug220653.html = IMAGE
1503 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
1504 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
1505 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug32205-1.html = IMAGE
1506 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug67915-2.html = IMAGE
1507 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
1508 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug85016.html = IMAGE
1509 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug89315.html = IMAGE
1510 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
1511 BUG23498 BUG32193 MAC : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE IMAGE+TEXT
1512 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1513 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1514 BUG23498 MAC : tables/mozilla_expected_failures/core/captions3.html = IMAGE
1515 BUG23498 MAC : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
1516 BUG23498 MAC : tables/mozilla_expected_failures/core/columns.html = IMAGE
1517 BUG23498 MAC : tables/mozilla_expected_failures/core/conflicts.html = IMAGE
1518 BUG23498 MAC : tables/mozilla_expected_failures/core/standards1.html = IMAGE
1519 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-cell.html = IMAGE
1520 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column-group.html = IMAGE
1521 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column.html = IMAGE
1522 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-quirks.html = IMAGE
1523 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
1524 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row.html = IMAGE
1525 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table.html = IMAGE
1526 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_fixed-bg.html = IMAGE
1527 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-hide.html = IMAGE
1528 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-show.html = IMAGE
1529 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
1530 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
1531 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column.html = IMAGE
1532 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row-group.html = IMAGE
1533 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
1534 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
1535 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_tbody.html = IMAGE
1536 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_row_sibling.html = IMAGE
1537 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_tbody_sibling.html = IMAGE
1538 BUG23498 MAC : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
1539 BUG23498 MAC : tables/mozilla_expected_failures/other/test4.html = IMAGE+TEXT IMAGE
1540
1541 // Missing "misspelled-word" dotted underline
1542 BUG23497 MAC : editing/selection/unrendered-002.html = IMAGE
1543 BUG23497 MAC : editing/spelling/spellcheck-attribute.html = IMAGE
1544
1545 // Widget location is just slightly off
1546 BUG23496 MAC : css1/box_properties/acid_test.html = IMAGE
1547 BUG23496 MAC : css2.1/t09-c5526c-display-00-e.html = IMAGE
1548 BUG23496 MAC : fast/block/basic/011.html = IMAGE
1549 BUG23496 MAC : fast/forms/001.html = IMAGE
1550 BUG23496 MAC : fast/forms/basic-inputs.html = IMAGE
1551 // BUG23496 MAC : fast/forms/box-shadow-override.html = IMAGE
1552 BUG23496 MAC : fast/forms/checkbox-radio-onchange.html = IMAGE
1553 BUG23496 MAC : fast/forms/file-input-disabled.html = IMAGE+TEXT
1554 BUG23496 MAC : fast/forms/form-element-geometry.html = IMAGE+TEXT
1555 BUG23496 MAC : fast/forms/formmove.html = IMAGE
1556 // Recently became crashy. See http://crbug.com/24721
1557 BUG23496 MAC : fast/forms/formmove2.html = IMAGE
1558 BUG23496 MAC : fast/forms/indeterminate.html = IMAGE
1559 BUG23496 MAC : fast/forms/input-appearance-height.html = IMAGE+TEXT
1560 BUG23496 MAC : fast/forms/input-value.html = IMAGE+TEXT
1561 // BUG23496 MAC : fast/forms/menulist-narrow-width.html = IMAGE
1562 BUG23496 MAC : fast/forms/radio-attr-order.html = IMAGE
1563 BUG23496 MAC : fast/forms/radio-nested-labels.html = IMAGE
1564 BUG23496 MAC : fast/forms/radio_checked.html = IMAGE
1565 BUG23496 MAC : fast/forms/radio_checked_dynamic.html = IMAGE
1566 // BUG23496 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1567 BUG23496 MAC : fast/inline/positionedLifetime.html = IMAGE
1568 BUG23496 MAC : fast/parser/bad-xml-slash.html = IMAGE
1569 BUG23496 MAC : fast/replaced/replaced-breaking.html = IMAGE
1570 BUG23496 MAC DEBUG : fast/text/textIteratorNilRenderer.html = IMAGE
1571 BUG23496 SLOW MAC RELEASE : fast/text/textIteratorNilRenderer.html = IMAGE
1572 BUG23496 MAC : fast/text/whitespace/normal-after-nowrap-breaking.html = IMAGE
1573 BUG23496 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1574 BUG23496 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1575 BUG23496 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1576
1577 // Big button widgets are broken
1578 BUG23495 MAC : fast/forms/basic-buttons.html = IMAGE
1579 BUG23495 MAC : fast/forms/box-shadow-override.html = IMAGE+TEXT
1580
1581 // Text declared as "monospace" with no size is bigger in Chromium
1582 BUG23494 MAC : css1/font_properties/font_family.html = IMAGE
1583 BUG23494 MAC : css2.1/t1503-c522-font-family-00-b.html = IMAGE
1584 BUG23494 MAC : fast/text/monospace-width-cache.html = IMAGE
1585
1586 // Broken upstream? Layout test should write a "PASS" or "FAIL" line; upstream has neither (ours is "PASS")
1587 BUG23492 MAC : fast/frames/frame-src-attribute.html = IMAGE
1588
1589 // Actual is just slightly off in color than expected
1590 BUG23488 MAC RELEASE : fast/backgrounds/size/backgroundSize15.html = IMAGE
1591 BUG23488 MAC DEBUG SLOW : fast/backgrounds/size/backgroundSize15.html = IMAGE
1592 BUG23488 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1593 BUG23488 MAC : fast/block/float/float-avoidance.html = IMAGE
1594 BUG23488 MAC : fast/borders/border-image-rotate-transform.html = IMAGE
1595 BUG23488 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1596 BUG23488 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1597 BUG23488 MAC : fast/box-shadow/inset.html = IMAGE
1598 BUG23488 MAC : fast/canvas/canvas-incremental-repaint-2.html = IMAGE
1599 BUG23488 MAC : fast/css/shadow-multiple.html = IMAGE
1600 BUG23488 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1601 BUG23488 MAC : fast/frames/content-opacity-1.html = IMAGE
1602 BUG23488 MAC : fast/frames/content-opacity-2.html = IMAGE
1603 BUG23488 MAC : fast/layers/add-layer-with-nested-stacking.html = IMAGE
1604 BUG23488 MAC : fast/layers/inline-dirty-z-order-lists.html = IMAGE
1605 BUG23488 MAC : fast/layers/layer-content-visibility-change.html = IMAGE
1606 BUG23488 MAC : fast/layers/remove-layer-with-nested-stacking.html = IMAGE
1607 BUG23488 MAC : fast/lists/ol-start-parsing.html = IMAGE
1608 BUG23488 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1609 BUG23488 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1610 BUG23488 MAC : fast/text/shadow-no-blur.html = IMAGE
1611 BUG23488 MAC : fast/text/shadow-translucent-fill.html = IMAGE
1612 BUG23488 MAC : svg/transforms/animated-path-inside-transformed-html.xhtml = IMAGE
1613 BUG23488 MAC : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE
1614
1615 // Looks the same to me... huh. Variation of above?
1616 BUG23489 MAC : fast/table/empty-section-crash.html = IMAGE
1617
1618 // Various drawing tests that are broken
1619 BUG23477 MAC : fast/backgrounds/bgCompositeCopy.html = IMAGE
1620 BUG23477 MAC : fast/canvas/canvas-as-image-incremental-repaint.html = IMAGE
1621 BUG23477 MAC : fast/canvas/canvas-incremental-repaint.html = IMAGE
1622 BUG23477 MAC : fast/canvas/fill-stroke-clip-reset-path.html = IMAGE
1623 BUG23477 MAC : fast/dynamic/containing-block-change.html = IMAGE
1624
1625 // Unexpected gray
1626 BUG23476 MAC : fast/forms/listbox-clip.html = IMAGE
1627 BUG23476 MAC : fast/frames/inline-object-inside-frameset.html = IMAGE
1628 BUG23476 MAC : fast/text/font-initial.html = IMAGE
1629
1630 // Missing corner resize image
1631 BUG22777 MAC : fast/css/resize-corner-tracking-transformed.html = IMAGE+TEXT
1632 BUG22777 MAC : fast/overflow/hit-test-overflow-controls.html = IMAGE+TEXT
1633
1634 // Disagreeing XML parsing error messages
1635 BUG23475 MAC : fast/invalid/missing-end-tag.xhtml = IMAGE
1636 BUG23475 MAC : fast/parser/xhtml-alternate-entities.xml = IMAGE
1637 BUG23475 MAC : fast/xsl/xslt-extra-content-at-end.xml = IMAGE
1638
1639 // 116/136 of the repaint tests fail due to invalidation that doesn't match; further triage necessary
1640 BUG23473 MAC : fast/repaint = IMAGE
1641 BUG23473 MAC : fast/repaint/block-no-inflow-children.html = PASS
1642 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache.html = PASS
1643 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache-2.html = PASS
1644 BUG23473 MAC : fast/repaint/box-shadow-h.html = PASS
1645 BUG23473 MAC : fast/repaint/box-shadow-v.html = PASS
1646 BUG23473 MAC : fast/repaint/caret-outside-block.html = PASS
1647 BUG23473 MAC : fast/repaint/fixed.html = PASS
1648 BUG23473 MAC : fast/repaint/fixed-move-after-keyboard-scroll.html = PASS
1649 BUG23473 MAC : fast/repaint/fixed-tranformed.html = PASS
1650 BUG23473 MAC : fast/repaint/flexible-box-overflow.html = PASS
1651 BUG23473 MAC : fast/repaint/flexible-box-overflow-horizontal.html = PASS
1652 BUG23473 MAC : fast/repaint/float-new-in-block.html = PASS
1653 BUG23473 MAC : fast/repaint/focus-layers.html = PASS
1654 BUG23473 MAC : fast/repaint/focus-ring.html = PASS
1655 BUG23473 MAC : fast/repaint/inline-block-overflow.html = PASS
1656 BUG23473 MAC : fast/repaint/layer-child-outline.html = PASS
1657 BUG23473 MAC : fast/repaint/layer-outline.html = PASS
1658 BUG23473 MAC : fast/repaint/layer-outline-horizontal.html = PASS
1659 BUG23473 MAC : fast/repaint/layout-state-scrolloffset.html = PASS
1660 BUG23473 MAC : fast/repaint/layout-state-scrolloffset2.html = PASS
1661 BUG23473 MAC : fast/repaint/layout-state-scrolloffset3.html = PASS
1662 BUG23473 MAC : fast/repaint/line-flow-with-floats-1.html = PASS
1663 BUG23473 MAC : fast/repaint/line-flow-with-floats-10.html = PASS
1664 BUG23473 MAC : fast/repaint/line-flow-with-floats-2.html = PASS
1665 BUG23473 MAC : fast/repaint/line-flow-with-floats-3.html = PASS
1666 BUG23473 MAC : fast/repaint/line-flow-with-floats-4.html = PASS
1667 BUG23473 MAC : fast/repaint/line-flow-with-floats-5.html = PASS
1668 BUG23473 MAC : fast/repaint/line-flow-with-floats-6.html = PASS
1669 BUG23473 MAC : fast/repaint/line-flow-with-floats-7.html = PASS
1670 BUG23473 MAC : fast/repaint/line-flow-with-floats-8.html = PASS
1671 BUG23473 MAC : fast/repaint/line-flow-with-floats-9.html = PASS
1672 BUG23473 MAC : fast/repaint/list-marker.html = PASS
1673 BUG23473 MAC : fast/repaint/moving-shadow-on-path.html = PASS
1674 BUG23473 MAC : fast/repaint/overflow-scroll-body-appear.html = PASS
1675 BUG23473 MAC : fast/repaint/positioned-document-element.html = PASS
1676 BUG23473 MAC : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = PASS
1677 BUG23473 MAC : fast/repaint/repaint-during-scroll.html = PASS
1678 BUG23473 MAC : fast/repaint/selection-gap-overflow-scroll-2.html = PASS
1679 BUG23473 MAC : fast/repaint/shadow-multiple-horizontal.html = PASS
1680 BUG23473 MAC : fast/repaint/shadow-multiple-strict-horizontal.html = PASS
1681 BUG23473 MAC : fast/repaint/shadow-multiple-strict-vertical.html = PASS
1682 BUG23473 MAC : fast/repaint/shadow-multiple-vertical.html = PASS
1683 BUG23473 MAC : fast/repaint/svg-layout-root-style-attr-update.html = PASS
1684 BUG23473 MAC : fast/repaint/table-cell-vertical-overflow.html = PASS
1685 BUG23473 MAC : fast/repaint/text-shadow.html = PASS
1686 BUG23473 MAC : fast/repaint/text-shadow-horizontal.html = PASS
1687 BUG23473 MAC : fast/repaint/view-background-from-body-1.html = PASS
1688 BUG23473 MAC : fast/repaint/view-background-from-body-2.html = PASS
1689
1690 // Thicker shadow than expected
1691 BUG23471 MAC : fast/text/stroking.html = IMAGE
1692
1693 // Missing baselines
1694 // BUG23557 MAC : fast/text/text-letter-spacing.html = IMAGE
1695
1696 // Failing on the bots but not locally; need investigation
1697 BUG23560 MAC : fast/images/animated-svg-as-image.html = IMAGE PASS
1698
1699 // -----------------------------------------------------------------
1700 // END MAC PORT TESTS
1701 // -----------------------------------------------------------------
1702
1703 // Linux pixeltest failure: alpha=0.5 red (1,0,0) atop yellow (1,1,0) is
1704 // coming out with with a slightly-less-than-100% red channel. This test fails
1705 // because we enforce non-transparent color in Font::drawGlyphs.
1706 BUG24191 LINUX : fast/css/hsla-color.html = FAIL
1707
1708 // Linux checksum computation produces results, different from Windows or upstream.
1709 BUG21386 LINUX : fast/repaint/erase-overflow.html = FAIL
1710 BUG21386 LINUX : fast/repaint/inline-block-resize.html = FAIL
1711 BUG21386 LINUX : fast/repaint/inline-overflow.html = FAIL
1712 BUG21386 LINUX : fast/repaint/invisible-objects.html = FAIL
1713 BUG21386 LINUX : fast/repaint/layer-full-repaint.html = FAIL
1714 BUG21386 LINUX : fast/repaint/layer-hide-when-needs-layout.html = FAIL
1715 BUG21386 LINUX : fast/repaint/layer-visibility.html = FAIL
1716 BUG21386 LINUX : fast/repaint/overflow-clip-subtree-layout.html = FAIL
1717 BUG21386 LINUX : fast/repaint/subtree-root-clip-2.html = FAIL
1718 BUG21386 LINUX : fast/repaint/subtree-root-clip-3.html = FAIL
1719 BUG21386 LINUX : fast/repaint/subtree-root-clip.html = FAIL
1720 BUG21386 LINUX : fast/repaint/table-col-background.html = FAIL
1721 BUG21386 LINUX : fast/repaint/table-row.html = FAIL
1722 BUG21386 LINUX : fast/repaint/table-section-overflow.html = FAIL
1723 BUG21386 LINUX : fast/layers/layer-content-visibility-change.html = FAIL
1724 BUG21386 LINUX : fast/repaint/table-cell-overflow.html = FAIL
1725
1726 // TODO(tc): flaky.
1727 BUG10391 LINUX : fast/events/5056619.html = FAIL
1728
1729 // Failed with r6844 (dglazkov)
1730 BUG10392 LINUX MAC : http/tests/navigation/error404-goback.html = FAIL
1731
1732 // Skipped as this tests window.sessionStorage, which we don't
1733 // support. Enable once we turn on DOM_STORAGE.
1734 BUG4360 SKIP : http/tests/navigation/post-goback-repost-policy.html = TIMEOUT
1735
1736 // Merge 39309:39335 Regressions (RenderButton::setupInnerStyle regression).
1737 BUG5737 LINUX : fast/forms/001.html = FAIL
1738 BUG5737 LINUX : fast/forms/input-first-letter.html = FAIL
1739
1740 // The (x) in type=search inputs appears to be slightly broken.  This test will also need a rebaseline.
1741 BUG20439 WIN LINUX : fast/forms/search-transformed.html = FAIL
1742
1743 // Linux's rotated text output looks terrible.
1744 BUG10397 LINUX : fast/transforms/transformed-document-element.html = FAIL
1745
1746 // might need to be rebaselined in win, 'DRAFT' rendering incorrect before
1747 BUG10405 WIN : svg/custom/struct-use-09-b.svg = FAIL
1748
1749 // New test. We should fix it, but it doesn't need to block the current release
1750 BUG10418 SLOW MAC RELEASE : fast/events/click-count.html = PASS
1751 BUG10418 WIN DEBUG : animations/change-keyframes-name.html = FAIL PASS
1752
1753 // We could fix this test for us and upstream it if the test shell user agent
1754 // would let us differentiate test_shell and WebKit DumpTreeNode.
1755 BUG7482 LINUX MAC : http/tests/misc/timer-vs-loading.html = TIMEOUT
1756 BUG7482 WIN : http/tests/misc/timer-vs-loading.html = PASS TIMEOUT
1757
1758 // Regressions from WebKit merge to 40864
1759 // Likely just needs a rebaseline.
1760 BUG10421 LINUX : fast/block/positioning/001.html = FAIL
1761
1762 // Selection highlight colors are wrong.
1763 BUG10426 LINUX : fast/lists/drag-into-marker.html = FAIL
1764
1765 // It's not clear that the test isn't wrong here. It believes that middle
1766 // aligning 15px Ahem should end up in a certain spot. But we have the
1767 // x-height correct and we're still one px off.
1768 BUG10429 LINUX : css2.1/t100801-c544-valgn-01-d-ag.html = FAIL
1769
1770 // New failures from Merge 41078:41149
1771 BUG10430 LINUX : svg/W3C-SVG-1.1/text-intro-05-t.svg = FAIL
1772
1773 // Regression from merge 41268:41286
1774 // See above comment about this test on linux/win.
1775 BUG10435 MAC : editing/selection/designmode-no-caret.html = FAIL
1776
1777 // Flakey. Not clear when it started, but it was before 3/9/09.
1778 // This test also started failing with the merge of March 25th 2009
1779 BUG10441 WIN DEBUG : transitions/transition-end-event-transform.html = FAIL PASS
1780 BUG10441 MAC WIN RELEASE : transitions/transition-end-event-transform.html = FAIL PASS
1781
1782 // This test hits a stack-overflow exception earlier in debug mode than in
1783 // release mode on Windows.
1784 //
1785 // Hits the stack overflow earlier than before the new compiler in both
1786 // release and debug mode on Linux and Mac.
1787 //
1788 //   http://code.google.com/p/v8/issues/detail?id=277
1789 BUG10457 RELEASE LINUX : fast/js/large-expressions.html = FAIL PASS
1790 BUG10457 RELEASE MAC : fast/js/large-expressions.html = FAIL
1791 BUG10457 DEBUG WIN SLOW : fast/js/large-expressions.html = FAIL
1792
1793
1794 // Merge 41768:41807
1795 // Perhaps just needs new baseline?
1796 // These tests were rebaselined with failure long ago. We shouldn't do this, and
1797 // instead work upstream to improve tests so that they don't fail.
1798 // Just need rebaseline
1799 BUG10458 LINUX : fast/forms/textarea-width.html = FAIL
1800
1801
1802 // New failures from merge
1803 BUG27486 WIN : fast/forms/listbox-hit-test-zoomed.html = FAIL
1804 BUG27486 RELEASE LINUX : fast/forms/listbox-hit-test-zoomed.html = FAIL
1805 BUG27486 LINUX DEBUG : fast/forms/listbox-hit-test-zoomed.html = FAIL
1806 BUG27486 WIN LINUX : fast/forms/slider-zoomed.html = FAIL
1807
1808 // See WebKit 41948
1809 // Regressed further at 57820, jamesr investigating
1810 BUG10468 MAC SKIP : fast/replaced/border-radius-clip.html = MISSING
1811
1812 // Mac flaky failures.
1813 BUG10472 MAC DEBUG : svg/css/glyph-orientation-rounding-test.xhtml = FAIL PASS
1814
1815 // <input type="search">; various failures, some tests may simply need new
1816 // baselines, others have more problems.
1817 BUG10473 LINUX : fast/forms/placeholder-set-value.html = FAIL
1818 BUG10473 LINUX : fast/forms/search-display-none-cancel-button.html = FAIL
1819 BUG10473 LINUX : fast/forms/search-placeholder-value-changed.html = FAIL
1820 BUG10473 LINUX : fast/replaced/width100percent-searchfield.html = FAIL
1821
1822 // This test isn't just slow -- sometimes it times out indefinitely.
1823 BUG27569 LINUX MAC WIN : http/tests/xmlhttprequest/redirect-cross-origin-tripmine.html = TIMEOUT PASS
1824
1825 BUG9613 WIN LINUX : fast/dom/clientWidthAfterDocumentIsRemoved.html = IMAGE+TEXT TEXT
1826 BUG9613 MAC : fast/dom/clientWidthAfterDocumentIsRemoved.html = TEXT
1827
1828 // Merge WebKit 42133:42199 regressions
1829 BUG20570 LINUX : fast/events/context-no-deselect.html = FAIL
1830
1831 // These tests were affected by rolling out WebKit i8n patches.
1832 // Was only WIN, also fail on LINUX since merge 43346:43361
1833 BUG9768 LINUX WIN : fast/forms/select-initial-position.html = FAIL
1834 // Was only WIN, also fail on LINUX since merge 43346:43361
1835 BUG9768 LINUX WIN : fast/forms/select-visual-hebrew.html = FAIL
1836 // Was only WIN, also fail on LINUX since merge 43346:43361
1837 BUG9768 LINUX WIN : fast/forms/visual-hebrew-text-field.html = FAIL
1838 // Linux looks ok, rebaselined.
1839 BUG9768 WIN : fast/text/cg-fallback-bolding.html = FAIL
1840 BUG9768 WIN : fast/text/international/001.html = FAIL
1841 BUG9768 WIN : fast/text/international/002.html = FAIL
1842 BUG9768 WIN : fast/text/international/003.html = FAIL
1843 BUG9768 WIN : fast/text/international/wrap-CJK-001.html = FAIL
1844
1845 // Merge WebKit 42200:42244 regressions
1846 BUG9786 : fast/dom/Window/dom-access-from-closure-iframe.html = FAIL
1847 BUG9786 : fast/dom/Window/dom-access-from-closure-window.html = FAIL
1848 BUG9786 WIN DEBUG : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1849 BUG9786 SLOW WIN RELEASE : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1850 BUG9786 LINUX MAC : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1851 BUG9786 : http/tests/security/cross-frame-access-location-prototype.html = FAIL
1852 BUG9786 : http/tests/security/cross-frame-access-document-direct.html = TIMEOUT
1853 BUG10479 MAC : svg/hixie/perf/001.xml = FAIL
1854 BUG10479 MAC : svg/hixie/perf/002.xml = FAIL
1855
1856 BUG9798 SLOW WIN DEBUG : fast/dom/Window/slow-unload-handler.html = PASS
1857
1858 // Was flaky. Became a consistent failure.
1859 BUG9798 WIN : http/tests/loading/preload-img-test.html = TIMEOUT PASS
1860 BUG9798 WIN DEBUG : http/tests/local/style-access-before-stylesheet-loaded.html = FAIL PASS
1861 BUG9798 WIN DEBUG : http/tests/misc/redirect-with-quotes.php = TIMEOUT PASS
1862 BUG9798 WIN SLOW : http/tests/misc/refresh-headers.php = PASS
1863 BUG9798 WIN : http/tests/security/cross-frame-access-protocol-explicit-domain.html = FAIL PASS
1864 BUG9798 WIN DEBUG : http/tests/security/cross-frame-access-protocol.html = FAIL PASS
1865 BUG9798 RELEASE : http/tests/security/dataURL/xss-DENIED-from-data-url-in-foreign-domain-subframe.html = TIMEOUT PASS
1866 BUG9798 WIN : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-timeout.html = PASS TIMEOUT
1867 BUG9798 WIN : http/tests/xmlhttprequest/basic-auth.html = TIMEOUT PASS
1868 BUG9798 WIN DEBUG : http/tests/xmlhttprequest/encode-request-url-2.html = TIMEOUT PASS
1869 BUG9797 BUG9798 WIN RELEASE SLOW : http/tests/xmlhttprequest/state-after-network-error.html = PASS
1870 BUG9797 LINUX DEBUG : svg/carto.net/colourpicker.svg = FAIL
1871 BUG9798 LINUX RELEASE : svg/carto.net/colourpicker.svg = FAIL
1872 BUG9798 LINUX RELEASE : tables/mozilla/bugs/45621.html = FAIL
1873 BUG9798 LINUX DEBUG SLOW : tables/mozilla/bugs/45621.html = FAIL
1874 //also BUG24868 (crash)
1875 BUG9798 LINUX DEBUG : transitions/mask-transitions.html = FAIL PASS
1876 BUG9798 SLOW LINUX RELEASE : transitions/transition-timing-function.html = PASS
1877 // This test definitely times out (i.e. is not just slow).
1878 BUG9798 WIN RELEASE : http/tests/xmlhttprequest/small-chunks-response-text.html = PASS TIMEOUT
1879 BUG9798 LINUX DEBUG : fast/multicol/float-multicol.html = IMAGE PASS
1880 BUG9798 LINUX : svg/custom/use-property-changes-through-svg-dom.svg = FAIL
1881 BUG9798 LINUX : svg/custom/js-update-transform-changes.svg = FAIL
1882 // Occasionally times out. Not just slow.
1883 BUG9798 WIN DEBUG : http/tests/loading/redirect-methods.html = TIMEOUT PASS
1884
1885 // New tests or failures from WebKit merge 42324:42364. Re-baselined on
1886 // Windows. Probably just need the same on other platforms.
1887 BUG9962 MAC : fast/js/function-apply-aliased.html = FAIL
1888
1889 // Regressions from WebKit merge 43264:42403, unknown cause(s)
1890 BUG10055 MAC : fast/events/updateLayoutForHitTest.html = FAIL
1891
1892 // New tests from WebKit Merge 42609:42671
1893 BUG10760 LINUX : fast/forms/input-text-scroll-left-on-blur.html = FAIL
1894 BUG10760 LINUX : fast/inline/25277-2.html = FAIL
1895 BUG10760 LINUX : fast/inline/25277.html = FAIL
1896 BUG10760 LINUX : svg/custom/marker-child-changes.svg = PASS FAIL
1897 BUG10760 LINUX : svg/custom/marker-viewBox-changes.svg = FAIL
1898
1899 // New failures from WebKit merge 42725:42805
1900 // WebKit change http://trac.webkit.org/changeset/42785
1901 // added a test which submits a form and then uses history.back()
1902 // to go back. in test_shell history.back() does not go back,
1903 // so the test timeouts.
1904 BUG11001 LINUX MAC WIN : http/tests/history/back-to-post.php = TIMEOUT
1905
1906 // Regressions from WebKit Merge 42932:42994 due to text metric changes.
1907 BUG11251 WIN DEBUG : fast/forms/textarea-width.html = FAIL
1908 BUG11251 SLOW WIN RELEASE : fast/forms/textarea-width.html = FAIL
1909 BUG11251 WIN LINUX RELEASE : fast/forms/text-control-intrinsic-widths.html = FAIL
1910 BUG11251 LINUX WIN DEBUG : fast/forms/text-control-intrinsic-widths.html = FAIL
1911 BUG11251 WIN LINUX : svg/custom/svg-fonts-in-text-controls.html = FAIL
1912 BUG11251 WIN LINUX : fast/forms/textarea-metrics.html = FAIL
1913
1914 // Unimplemented test shell features causing editing tests to fail
1915
1916 // We don't draw the spelling markers at all in test shell.
1917 BUG11577 WIN LINUX : editing/spelling/inline_spelling_markers.html = FAIL
1918 BUG11577 LINUX : editing/spelling/spellcheck-attribute.html = FAIL
1919 BUG11577 WIN LINUX : editing/spelling/spelling-linebreak.html = FAIL
1920
1921 // Regresssions from WebKit Merge 43114:43242 that just need to be re-baselined.
1922 BUG11483 LINUX : fast/forms/input-text-double-click.html = FAIL
1923 BUG11483 LINUX : svg/text/foreignObject-repaint.xml = FAIL
1924
1925 // Regressions from WebKit merge 43242:43321.  These just need to re-baselining:
1926 BUG24229 LINUX : fast/forms/select-dirty-parent-pref-widths.html = FAIL
1927 BUG24229 LINUX : svg/transforms/animated-path-inside-transformed-html.xhtml = FAIL
1928
1929 // TODO(erg): Attempted to rebaseline these tests as part of the above
1930 // 43346:43361 rebaseling from http://trac.webkit.org/changeset/43355. Turned
1931 // tree red. May be more involved then just rebaselining.
1932 BUG11613 LINUX : editing/deleting/5168598.html = FAIL
1933 BUG11613 LINUX : editing/inserting/5607069-2.html = FAIL
1934
1935 // Already baselined for chromium-win, may need to be done for mac/linux as well.
1936 BUG11796 LINUX : fast/forms/search-styled.html = FAIL
1937
1938 // Details for all of these are in the bugs.
1939 BUG12361 WIN SLOW : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1940 BUG12361 LINUX MAC DEBUG : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1941 BUG12361 LINUX RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1942 BUG12361 SLOW MAC RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
1943
1944 // WebKit 44438:44544
1945 BUG13721 LINUX : fast/dynamic/positioned-movement-with-positioned-children.html = FAIL
1946
1947 BUG14207 LINUX : tables/mozilla/bugs/bug28341.html = FAIL
1948 BUG32231 WIN DEBUG : tables/mozilla/bugs/bug28341.html = IMAGE PASS
1949
1950 // Newly added test http://trac.webkit.org/changeset/44816
1951 BUG18733 WIN SLOW : http/tests/xmlhttprequest/cross-origin-no-authorization.html = PASS
1952
1953 BUG14832 : editing/selection/user-drag-element-and-user-select-none.html = FAIL
1954
1955 // WebKit 45017:45086
1956 BUG15217 : fast/js/dictionary-no-cache.html = FAIL
1957
1958 // WebKit 45086:45111
1959 BUG15270 MAC LINUX RELEASE : fast/js/excessive-comma-usage.html = TEXT
1960 BUG15270 MAC LINUX DEBUG SLOW : fast/js/excessive-comma-usage.html = FAIL
1961 BUG15270 WIN : fast/js/excessive-comma-usage.html = CRASH FAIL
1962
1963
1964 // Flaky for a while; also related to BUG17974
1965 BUG15267 WIN LINUX : transitions/cancel-transition.html = PASS FAIL
1966
1967 // WebKit 45431:45444
1968 BUG10384 MAC : fast/events/frame-tab-focus.html = FAIL
1969 BUG11613 LINUX : fast/forms/tabbing-input-iframe.html = FAIL
1970 BUG11613 LINUX RELEASE : fast/overflow/scrollRevealButton.html = FAIL
1971 BUG11613 LINUX DEBUG : fast/overflow/scrollRevealButton.html = FAIL
1972
1973 // WebKit merge 42738:45840
1974 // New test, needs baseline.
1975 BUG16690 SKIP MAC : fast/text/international/khmer-selection.html = FAIL
1976
1977 // WebKit merge 42738:45840
1978 // New tests, need baseline.
1979 BUG16240 WIN DEBUG : http/tests/cache/subresource-expiration.html = TIMEOUT
1980 BUG16240 MAC WIN RELEASE : http/tests/cache/subresource-expiration.html = TIMEOUT
1981 BUG14752 LINUX SLOW : http/tests/cache/subresource-expiration.html = PASS
1982
1983 // New tests with WebKit merge 46288:46363
1984 BUG18116 : fast/dom/constructed-objects-prototypes.html = TEXT
1985 BUG18116 WIN RELEASE : fast/dom/prototype-inheritance-2.html = TEXT
1986 BUG18116 WIN DEBUG : fast/dom/prototype-inheritance-2.html = CRASH
1987 BUG18116 MAC LINUX : fast/dom/prototype-inheritance-2.html = TEXT CRASH
1988 // New in WebKit r52559
1989 BUG18116 : svg/custom/global-constructors.html = TEXT
1990
1991 // Flaky.  Timing?
1992 BUG18584 WIN DEBUG : animations/combo-transform-translate+scale.html = FAIL PASS
1993 BUG18584 WIN DEBUG : animations/change-one-anim.html = PASS TEXT
1994
1995 // Flaky crashes
1996 BUG18656 MAC RELEASE : fast/dom/Window/window-lookup-precedence.html = FAIL
1997 BUG18656 MAC DEBUG : fast/dom/Window/window-lookup-precedence.html = FAIL
1998
1999 // Test failures caused by re-enabling skia asserts.
2000 BUG18896 WIN LINUX DEBUG : svg/batik/paints/gradientLimit.svg = TIMEOUT FAIL
2001
2002 // Test failures from WebKit merge 46894 to 46977
2003 BUG26737 : fast/js/prototypes.html = FAIL
2004
2005 // WebKit roll r47417:47528
2006 BUG19766 LINUX : fast/replaced/width100percent-menulist.html = FAIL
2007
2008 // Fails due to textInputController.setInputMethod not implemented for Mac.
2009 BUG19665 MAC : platform/mac/editing/input/hangul-enter-confirms-and-sends-keypress.html = FAIL
2010 BUG19665 MAC : platform/mac/editing/input/kotoeri-enter-to-confirm-and-newline.html = FAIL
2011
2012 // WebKit 47777:47790 - getOwnPropertyDescriptor
2013 BUG20345 : fast/js/getOwnPropertyDescriptor.html = FAIL
2014 BUG20345 : fast/dom/Window/window-property-descriptors.html = TEXT
2015 // Failures from Webkit merger 51724 -> 51772
2016 BUG20345 : http/tests/security/cross-frame-access-getOwnPropertyDescriptor.html = TEXT
2017
2018 BUG10480 LINUX : editing/selection/move-by-line-001.html = FAIL
2019
2020 // The linux layout result in build bot shows the changed method does not
2021 // executed.
2022 BUG21141 LINUX : fast/forms/select-double-onchange.html = FAIL
2023 BUG21141 LINUX RELEASE : fast/forms/select-script-onchange.html = FAIL
2024 BUG21141 LINUX DEBUG : fast/forms/select-script-onchange.html = FAIL
2025
2026 // Flaky, not clear as of when.
2027 BUG21411 WIN LINUX DEBUG : svg/dom/SVGScriptElement/script-load-and-error-events.svg = TEXT PASS
2028
2029 // WK roll to 48371
2030 BUG21841 MAC DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2031 BUG21841 WIN DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2032
2033 BUG25616 WIN : fast/overflow/overflow-float-stacking.html = FAIL
2034
2035 // Flaky. The width of containing RenderBlocks sometimes becomes larger
2036 BUG21958 MAC : svg/hixie/error/012.xml = FAIL
2037
2038 // WebKit merge 48500:48585, newly implemented Object.defineProperty.
2039 BUG22526 WIN MAC: fast/js/Object-create.html = FAIL
2040 BUG22526 : fast/js/Object-defineProperties.html = FAIL CRASH
2041 BUG22526 : fast/js/Object-defineProperty.html = FAIL CRASH
2042 BUG22526 : http/tests/security/xss-DENIED-defineProperty.html = FAIL
2043
2044 // WebKit merge 48500:48585, due to newly added support for MathML.
2045 BUG22554 SKIP : mathml = FAIL
2046
2047 // WebKit update 48796:48820
2048 BUG23956 WIN LINUX : fast/dom/Element/getBoundingClientRect.html = FAIL
2049 BUG23956 WIN LINUX : fast/dom/Range/getBoundingClientRect.html = FAIL
2050 BUG23956 WIN LINUX : fast/dom/Range/getClientRects.html = FAIL
2051 BUG24126 : fast/dom/HTMLInputElement/size-attribute.html = FAIL
2052
2053 // Started happening somewhere around http://trac.webkit.org/changeset/48989.
2054 BUG23955 LINUX MAC : fast/css/last-of-type-pseudo-class.html = FAIL
2055
2056 // WebKit update: 49190:49206
2057 BUG_JPARENT LINUX DEBUG SLOW : fast/frames/calculate-fixed.html = PASS
2058
2059 // Started failing for no apparent reason at r28124, and IMAGE+TEXT diffs started at r51875
2060
2061 // Flaky timeouts first appearing at r27764 (webkit 48947)
2062 BUG9798 WIN : http/tests/cookies/multiple-cookies.html = TIMEOUT PASS
2063
2064 // WebKit update: 49213:49221
2065 BUG24063 : fast/dom/Window/window-postmessage-clone.html = FAIL
2066
2067 // Got slow with V8 update to 1.3.15. Debug logging perhaps?
2068 BUG24182 DEBUG SLOW : fast/forms/input-implicit-length-limit.html = PASS
2069 BUG24182 DEBUG SLOW : fast/forms/input-maxlength.html = PASS
2070
2071 // Failing at WebKit Linux (dbg)(3) build 7795
2072 BUG24119 LINUX DEBUG : tables/mozilla/bugs/bug1220.html = PASS FAIL
2073
2074 // WebKit roll 49405:49413
2075 BUG28409 : http/tests/xmlhttprequest/logout.html = FAIL
2076
2077 // WebKit Roll 49597:49640
2078 BUG24966 SLOW MAC DEBUG : fast/frames/calculate-fixed.html = PASS
2079
2080 // WebKit Roll 49640:49684
2081 BUG26253 SLOW WIN RELEASE : http/tests/navigation/reload-subframe-object.html = PASS
2082 BUG25202 LINUX WIN : svg/W3C-SVG-1.1/masking-path-02-b.svg = FAIL
2083 BUG25208 LINUX WIN : svg/W3C-SVG-1.1/masking-path-05-f.svg = FAIL
2084 BUG_JEREMY MAC : fast/frames/onlyCommentInIFrame.html = FAIL
2085
2086 // WebKit Roll 49684:49761
2087 BUG26042 DEBUG : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2088 BUG26042 LINUX RELEASE : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2089
2090 // Incorrect baseline removed.
2091 BUG25433 WIN LINUX : css2.1/t040103-ident-03-c.html = IMAGE
2092
2093 // WebKit roll 49961:49992
2094 // Added in http://trac.webkit.org/changeset/49990
2095 BUG25884 WIN LINUX : fast/dom/Document/CaretRangeFromPoint/caretRangeFromPoint-in-zoom-and-scroll.html = FAIL
2096
2097 BUG26344 LINUX DEBUG : fast/text/atsui-partial-selection.html = CRASH
2098 BUG26344 LINUX DEBUG : platform/mac/editing/deleting/backward-delete.html = CRASH
2099
2100 // More fallout from the above roll.
2101 BUG_JORLOW LINUX : fast/multicol/column-rules-stacking.html = FAIL
2102
2103 // ==== WebKit roll 50258:50313 ====
2104 BUG26291 MAC : fast/text/atsui-multiple-renderers.html = IMAGE
2105 BUG26291 MAC : transforms/2d/hindi-rotated.html = IMAGE
2106
2107 // Flaky since at least WebKit 50258.
2108 BUG32098 : fast/dom/defaultView.html = MISSING PASS
2109 BUG9798 WIN RELEASE : http/tests/navigation/no-referrer-reset.html = TIMEOUT PASS
2110
2111 // more test flakiness
2112 BUG27334 MAC : http/tests/security/xssAuditor/object-embed-tag.html = PASS
2113
2114 // more test flakiness
2115 BUG27418 SLOW WIN RELEASE : http/tests/cookies/simple-cookies-max-age.html = PASS
2116 BUG27418 SLOW WIN RELEASE : http/tests/misc/url-in-utf16le.html = PASS
2117 BUG27418 MAC DEBUG : http/tests/plugins/interrupted-get-url.html = PASS TEXT
2118 BUG27418 MAC RELEASE SLOW : http/tests/plugins/interrupted-get-url.html = PASS
2119
2120 // The following upstream patches add -Webkit-color-correction support:
2121 // http://trac.webkit.org/changeset/50760
2122 // http://trac.webkit.org/changeset/50852
2123 // The ColorSpace was only implemented for CG, more port implementation
2124 // required in order for Chromium to support color correction.
2125 BUG28005 : fast/css/color-correction-backgrounds-and-text.html = FAIL
2126 BUG28005 LINUX WIN : fast/css/color-correction-on-backgrounds.html = FAIL
2127 BUG28005 LINUX WIN : fast/css/color-correction-on-text.html = FAIL
2128 BUG28005 LINUX WIN : fast/css/color-correction.html = FAIL
2129 BUG28005 WIN LINUX : fast/css/color-correction-on-box-shadow.html = IMAGE+TEXT
2130 BUG28005 WIN LINUX : fast/css/color-correction-on-text-shadow.html = IMAGE+TEXT
2131 BUG28005 : fast/css/color-correction-on-background-image.html = FAIL
2132 BUG28005 LINUX WIN : fast/css/color-correction-untagged-images.html = FAIL
2133
2134 // May also be related to r50760, but not as confident.
2135 BUG27551 WIN : fast/css/shadow-multiple.html = IMAGE
2136
2137 // WebKit merge 50756:50820, possibly due to WebKit r50808/r50786 and Chromium r31715
2138 BUG27553 WIN : fast/text/atsui-partial-selection.html = IMAGE
2139
2140 BUG22700 WIN LINUX : fast/canvas/canvas-shadow.html = TEXT
2141
2142
2143 // Failures from merge 50972:51042
2144 // The test requires DRT/Test Shell to support error page handling.
2145 BUG27850 : fast/history/back-forward-reset-after-error-handling.html = TEXT
2146 // Need to update chromium so the web frame delegate is informed when window objects
2147 // in isolated worlds are cleared.
2148 BUG27849 : http/tests/security/isolatedWorld/didClearWindowObject.html = TEXT
2149
2150 BUG28040 WIN : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2151 BUG28040 MAC DEBUG : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2152
2153 BUG28040 WIN MAC DEBUG : fast/body-propagation/overflow/003-xhtml.xhtml = PASS IMAGE+TEXT
2154
2155 BUG28092 WIN : http/tests/xmlhttprequest/redirect-cross-origin-post.html = PASS FAIL
2156
2157 // Need to add Chromium localized strings for the feature. Upstream r51172
2158 BUG28264 : fast/forms/validationMessage.html = FAIL
2159
2160 // Started failing with move from Lighttpd to Apache.
2161 // Since we have some bots on Lighttpd and some on Apache, mark it as flaky for
2162 // now. Once we decide on one or the other, then we can address these tests.
2163 BUG_OJAN MAC LINUX : http/tests/loading/text-content-type-with-binary-extension.html = TEXT
2164 BUG_OJAN LINUX : http/tests/xmlhttprequest/cache-override.html = TEXT
2165
2166 // These tests time out *and* are slow. The test should be fixed to not timeout,
2167 // then should be marked as SLOW/PASS.
2168 BUG2844 WIN : http/tests/appcache/cyrillic-uri.html = TIMEOUT PASS CRASH
2169 BUG2844 WIN : http/tests/appcache/fail-on-update.html = TIMEOUT PASS TEXT CRASH
2170 BUG2844 WIN : http/tests/appcache/offline-access.html = TIMEOUT PASS
2171 BUG2844 WIN LINUX DEBUG : http/tests/appcache/update-cache.html = TIMEOUT PASS
2172 BUG2844 WIN RELEASE : http/tests/appcache/update-cache.html = TIMEOUT PASS
2173
2174 // These tests sometimes pass and sometimes have a text difference due
2175 // to chromium's appcache being async.
2176 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-3.html = TEXT PASS
2177 BUG2844 MAC LINUX : http/tests/appcache/top-frame-3.html = TEXT PASS
2178 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-4.html = TEXT PASS
2179 BUG2844 MAC LINUX : http/tests/appcache/top-frame-4.html = TEXT PASS
2180
2181 // These fail because chromium's appcache is async but webkit's is not.
2182 BUG2844 SKIP : http/tests/appcache/idempotent-update.html = FAIL
2183 BUG2844 SKIP : http/tests/appcache/top-frame-2.html = FAIL
2184
2185 // This test fails because there is no setAppCacheMaximumSize API yet.
2186 BUG2844 SKIP : http/tests/appcache/max-size.html = FAIL
2187
2188 // Flakiness documented around Webkit Roll 51681:51711
2189 BUG2844 SKIP : http/tests/appcache/404-manifest.html = TIMEOUT PASS
2190 BUG2844 SKIP : http/tests/appcache/404-resource.html = TIMEOUT PASS
2191 BUG2844 SKIP : http/tests/appcache/foreign-iframe-main.html = TIMEOUT PASS
2192 BUG2844 SKIP : http/tests/appcache/non-html.xhtml = TIMEOUT PASS
2193
2194 // New tests. Failures from merge 51253:51310.
2195 // Needs to implement NPN_reloadPlugins and add reloadPluginNoPages & reloadPluginAndPages
2196 // to plugin object.
2197 BUG29018 : plugins/reloadplugins-no-pages.html = TEXT
2198 BUG29018 : plugins/reloadplugins-and-pages.html = TIMEOUT
2199
2200 // New tests. Failures from merge 51210:51325.
2201 BUG28646 : editing/selection/transformed-selection-rects.html = FAIL
2202
2203 // New failures from merge 51412:51455.
2204 BUG28916 MAC : editing/pasteboard/paste-xml.xhtml = TEXT
2205
2206 // New failures from WebKit r51534:r51576
2207 BUG29157 WIN LINUX MAC :  svg/animations/animVal-basics.html = TIMEOUT
2208
2209 // New failures from WebKit r51577
2210 BUG29164 WIN LINUX MAC : fast/frames/sandboxed-iframe-plugins.html = TEXT
2211
2212 // New failures from WebKit merge 51581:51584
2213 BUG29167 MAC DEBUG : fast/dom/replaceChild.html = IMAGE PASS
2214
2215 // Failure from WebKit merge 51607:51613 (51608 is the cause)
2216 BUG29239 LINUX WIN : fast/css/variables/misplaced-import-test.html = FAIL
2217
2218 // Failures from WebKit merge 51642:51681
2219 BUG29393 : fast/loader/stateobjects/pushstate-object-types.html = TEXT
2220 BUG29393 : fast/loader/stateobjects/state-api-on-detached-frame-crash.html = TEXT
2221
2222 // Failures introduced by USE_NEW_BUILDER in Skia.
2223 BUG33287 WIN LINUX : fast/canvas/set-colors.html = TEXT
2224
2225 // Failures from WebKit merge 51711:51724
2226 BUG32003 : fast/js/string-property-deletion.html = TEXT
2227 BUG31998 LINUX : svg/carto.net/selectionlist.svg = IMAGE PASS
2228 BUG31997 DEBUG WIN : fast/body-propagation/overflow/004-xhtml.xhtml = IMAGE+TEXT PASS
2229
2230 // Regression from Webkit merge 51772 -> 51784
2231 BUG35329 WIN : http/tests/appcache/resource-redirect-2.html = TIMEOUT PASS
2232
2233 // Webkit Roll to r51875
2234 BUG29748 LINUX : css1/basic/containment.html = IMAGE
2235 BUG29748 LINUX : css1/box_properties/padding_right.html = IMAGE
2236 BUG29748 LINUX : css1/font_properties/font_size.html = IMAGE
2237 BUG29748 LINUX : fast/block/float/nested-clearance.html = IMAGE
2238 BUG29748 LINUX : fast/block/positioning/051.html = IMAGE
2239 BUG29748 LINUX : fast/block/positioning/055.html = IMAGE
2240 BUG29748 LINUX : fast/forms/select-change-listbox-size.html = IMAGE
2241 BUG29748 LINUX : fast/frames/iframe-scrolling-attribute.html = IMAGE
2242 BUG29748 LINUX : fast/frames/onlyCommentInIFrame.html = IMAGE
2243 BUG29748 LINUX : fast/multicol/positioned-with-constrained-height.html = IMAGE
2244 BUG29748 LINUX : fast/repaint/overflow-scroll-delete.html = IMAGE
2245 BUG29748 LINUX : http/tests/navigation/error404-frames.html = IMAGE
2246 BUG29748 LINUX : http/tests/navigation/post-frames.html = IMAGE
2247 BUG29748 LINUX : http/tests/navigation/postredirect-frames.html = IMAGE
2248 BUG29748 LINUX : tables/mozilla/bugs/bug137388-2.html = IMAGE
2249 BUG29748 LINUX : tables/mozilla/bugs/bug2479-1.html = IMAGE
2250 //BUG29748 LINUX : tables/mozilla/bugs/bug2479-4.html = IMAGE
2251 BUG29748 LINUX : tables/mozilla/bugs/bug29314.html = IMAGE
2252 BUG29748 LINUX : tables/mozilla/bugs/bug2997.html = IMAGE
2253 BUG29748 LINUX : tables/mozilla/bugs/bug32205-2.html = IMAGE
2254 BUG29748 LINUX : tables/mozilla/bugs/bug3977.html = IMAGE
2255 BUG29748 LINUX : tables/mozilla/bugs/bug43854-1.html = IMAGE
2256 //BUG29748 LINUX : tables/mozilla/bugs/bug44505.html = IMAGE
2257 BUG29748 LINUX : tables/mozilla/bugs/bug650.html = IMAGE
2258 BUG29748 LINUX : tables/mozilla/bugs/bug73321.html = IMAGE
2259 BUG29748 LINUX : tables/mozilla/core/captions.html = IMAGE
2260 BUG29748 LINUX : tables/mozilla/core/cell_heights.html = IMAGE
2261 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
2262 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
2263 BUG29748 LINUX : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
2264 BUG29748 LINUX : tables/mozilla/other/nestedTables.html = IMAGE
2265 BUG29748 LINUX : tables/mozilla/other/test3.html = IMAGE
2266 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
2267 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
2268 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
2269 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
2270 //BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
2271 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
2272 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
2273 BUG29748 LINUX : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE
2274 BUG29748 LINUX : tables/mozilla_expected_failures/core/captions1.html = IMAGE
2275 BUG29748 LINUX : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
2276 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
2277 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
2278 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
2279 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
2280 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
2281 BUG29748 LINUX : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
2282 BUG29748 LINUX : tables/mozilla_expected_failures/other/test4.html = IMAGE
2283 BUG29748 WIN DEBUG : fast/forms/input-align-image.html = IMAGE+TEXT PASS
2284
2285 // More Webkit Roll to r51875
2286 // Some of these went from IMAGE+TEXT to just IMAGE at r57886
2287 BUG29737 MAC : svg/custom/use-elementInstance-event-target.svg = IMAGE
2288 BUG29737 MAC : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE
2289 BUG29737 MAC : svg/filters/sourceAlpha.svg = IMAGE
2290
2291 // New tests courtesy of: http://trac.webkit.org/changeset/51936:
2292 BUG30048 : svg/css/composite-shadow-example.html = IMAGE
2293 BUG30048 : svg/css/composite-shadow-with-opacity.html = IMAGE
2294
2295 // evan's fix rolled out in http://trac.webkit.org/changeset/52071 due to compat issues.
2296 BUG30343 LINUX : fast/css/large-number-round-trip.html = TEXT
2297
2298 // These tests got very flaky (failing 8/10 runs!) after
2299 // http://src.chromium.org/viewvc/chrome?view=rev&revision=34610
2300 // The only relevant change there is that we now sort tests purely
2301 // lexicographically instead of putting the http tests first. This is a good
2302 // thing because it matches upstream. The regressions are likely due to timing
2303 // issues because the http tests moved from one debug shard to another.
2304 // Likely, moving Windows to using Apache2 will fix this as the Linux/Mac builds
2305 // did not get flaky here and moving to Apache made the appcache tests less
2306 // flaky on those platforms.
2307 BUG25977 WIN DEBUG : http/tests/appcache/access-via-redirect.php = TIMEOUT PASS
2308 BUG25977 WIN : http/tests/appcache/auth.html = TIMEOUT PASS
2309 BUG25977 WIN DEBUG : http/tests/appcache/crash-when-navigating-away-then-back.html = TIMEOUT PASS
2310 BUG25977 WIN DEBUG : http/tests/appcache/empty-manifest.html = TIMEOUT PASS
2311 // This test is slow on windows, but sometimes times out indefinitely.
2312 // See if this improves when we move to apache.
2313 BUG25977 WIN : http/tests/appcache/fallback.html = TIMEOUT PASS
2314 BUG25977 WIN DEBUG : http/tests/appcache/local-content.html = TIMEOUT PASS
2315 BUG25977 WIN DEBUG : http/tests/appcache/main-resource-hash.html = TIMEOUT PASS
2316 BUG25977 WIN DEBUG : http/tests/appcache/manifest-containing-itself.html = TIMEOUT PASS
2317 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect-2.html = TIMEOUT PASS
2318 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect.html = TIMEOUT PASS
2319 BUG25977 WIN DEBUG : http/tests/appcache/manifest-with-empty-file.html = TIMEOUT PASS
2320 BUG25977 WIN DEBUG : http/tests/appcache/wrong-content-type.html = TIMEOUT PASS
2321 BUG25977 WIN DEBUG : http/tests/appcache/online-whitelist.html = TIMEOUT PASS
2322 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-1.html = TIMEOUT PASS
2323 BUG25977 WIN DEBUG : http/tests/appcache/whitelist-wildcard.html = TIMEOUT PASS
2324 BUG25977 WIN DEBUG : http/tests/appcache/resource-redirect.html = TIMEOUT PASS
2325 BUG25977 WIN : http/tests/appcache/xhr-foreign-resource.html = TIMEOUT PASS
2326 BUG25977 WIN DEBUG : http/tests/appcache/simple.html = TIMEOUT PASS
2327 BUG25977 WIN DEBUG : http/tests/appcache/reload.html = TIMEOUT PASS
2328 BUG25977 WIN DEBUG : http/tests/appcache/wrong-signature-2.html = TIMEOUT PASS
2329 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-4.html = TIMEOUT TEXT PASS
2330 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-3.html = TIMEOUT TEXT PASS
2331
2332 // Flaky.
2333 BUG9798 WIN LINUX : fast/loader/javascript-url-encoding-2.html = TIMEOUT PASS
2334 BUG9798 WIN RELEASE : fast/loading/subframe-removes-itself.html = TEXT PASS
2335 BUG9798 LINUX MAC : fast/loader/invalid-charset-on-script-crashes-loader.html = TIMEOUT PASS
2336
2337 // WebKit update 52293->52323
2338 BUG31253 : http/tests/security/xss-DENIED-assign-location-href-javascript.html = TEXT
2339
2340 // WebKit update 52323->52366
2341 BUG30826 WIN : platform/win/fast/events/panScroll-imageMap-noHref-scroll.html = TEXT
2342 BUG30826 WIN DEBUG : platform/win/fast/events/panScroll-event-fired.html = PASS TEXT TIMEOUT
2343
2344 // Flaky
2345 BUG30930 LINUX DEBUG : tables/mozilla/bugs/bug15933.html = IMAGE PASS
2346
2347 // WebKit roll 52468->52535
2348 BUG31991 WIN LINUX : fast/text/international/bidi-layout-across-linebreak.html = TEXT
2349 BUG31252 : http/tests/security/listener/xss-inactive-closure.html = TEXT
2350
2351 BUG31623 WIN: http/tests/appcache/remove-cache.html = PASS TEXT TIMEOUT
2352
2353 // WebKit roll 52852 -> 52867
2354 BUG32018 : websocket/tests/frame-lengths.html = PASS TIMEOUT
2355 BUG32018 DEBUG : websocket/tests/simple-stress.html = PASS TEXT TIMEOUT
2356
2357 // Flaky
2358 BUG31803 MAC LINUX : editing/inserting/12882.html = IMAGE PASS
2359
2360 // from http://trac.webkit.org/changeset/53086
2361 BUG32153 : svg/dynamic-updates/SVGTextElement-svgdom-rotate-prop.html = TEXT
2362
2363 // a bunch of tests broken before the flakiness fix, i will deal with these
2364 // after the major flakiness goes away
2365 BUG32155 : fast/js/Object-getOwnPropertyNames.html = TEXT
2366
2367 // New flakiness?
2368 BUG32145 WIN : animations/3d/transform-origin-vs-functions.html = TEXT PASS
2369 BUG32149 WIN RELEASE : fast/dom/Document/early-document-access.html = TIMEOUT PASS
2370
2371 BUG32195 LINUX : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = IMAGE TEXT
2372 BUG32195 WIN : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = IMAGE+TEXT IMAGE
2373
2374 // Expectations from roll to 53171:53194
2375
2376 BUG32308 DEBUG : fast/frames/cached-frame-counter.html = TIMEOUT
2377
2378 // WebKit roll 53341:53451
2379 BUG32670 LINUX : fast/css/zoom-body-scroll.html = TEXT
2380 BUG32673 WIN LINUX : fast/forms/textarea-scrollbar-height.html = TEXT
2381 BUG32675 LINUX : fast/repaint/trailing-floats-root-line-box-overflow.html = IMAGE
2382
2383 // Flaky tests found during the roll.
2384 BUG32679 LINUX DEBUG : http/tests/navigation/lockedhistory-iframe.html = TEXT PASS
2385 BUG32688 MAC DEBUG : fast/lists/inlineBoxWrapperNullCheck.html = TEXT PASS
2386 BUG32689 MAC LINUX DEBUG : http/tests/security/mixedContent/about-blank-iframe-in-main-frame.html = TEXT PASS
2387 BUG32693 MAC DEBUG : svg/dom/SVGRectElement/rect-modify-rx.svg = TEXT PASS
2388
2389 BUG33293 SKIP : fast/media/lifetime.html = TIMEOUT
2390
2391 // WebKit roll 53585 -> 53655
2392 BUG32864 WIN LINUX MAC : plugins/mouse-events-fixedpos.html = TEXT
2393
2394 // WebKit roll 53655 -> 53704
2395 BUG32900 WIN LINUX : http/tests/misc/slow-loading-mask.html = IMAGE+TEXT
2396
2397 // WebKit roll 53704 -> 53747
2398 BUG32949 WIN LINUX MAC : fast/dom/Window/invalid-protocol.html = TEXT
2399
2400 BUG21852 DEFER SKIP LINUX WIN : fast/canvas/webgl = CRASH
2401
2402 // WebKit roll 53941 -> 54015
2403 BUG33358 WIN LINUX : fast/dom/Window/window-postmessage-clone-frames.html = TEXT
2404
2405 // WebKit roll 54016 -> 54045
2406 BUG33486 WIN LINUX : fast/text/international/hebrew-vowels.html = IMAGE+TEXT
2407 BUG33486 LINUX : fast/text/international/thai-line-breaks.html = IMAGE
2408
2409 // WebKit roll 54059 -> 54075
2410 BUG33538 : fast/dom/Window/anonymous-slot-with-changes.html = TEXT
2411
2412 BUG35064 WIN : fast/forms/restore-selection-after-layout.html = TEXT PASS
2413
2414 // WebKit roll 54482 to 54493.
2415 BUG35242 WIN : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT TEXT
2416
2417 // WebKit roll 54493 to 54530: new tests.
2418 BUG35114 : fast/js/parser-syntax-check.html = TEXT
2419
2420 // WebKit roll 54530 to 54550
2421 BUG35238 MAC : fast/dom/clone-node-dynamic-style.html = IMAGE
2422
2423 // WebKit roll 54550 to 54559
2424 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-defaults.svg = IMAGE
2425 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-1.svg = IMAGE
2426 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-2.svg = IMAGE
2427 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-3.svg = IMAGE
2428 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-in-xhtml-defaults.xhtml = IMAGE
2429
2430 // WebKit roll 54559 to 54585
2431 BUG35237 : fast/events/multiline-link-arrow-navigation.html = TEXT
2432
2433 // Due to not building TestNetscapePlugin.cpp.
2434 BUG35387 : platform/win/plugins/plugin-delayed-destroy.html = TIMEOUT
2435 BUG35387 : plugins/reentrant-update-widget-positions.html = TIMEOUT
2436 BUG35387 : plugins/update-widgets-crash.html = TIMEOUT
2437
2438 // New test added in WebKit r54783
2439 BUG35822 : plugins/npruntime/browser-object-identity.html = TEXT
2440
2441 // Started failing during roll from 54848 -> 54898
2442 // Started failing with 54865. No rebaselines upstream but they don't run pixel tests.
2443 BUG36019 WIN LINUX : fast/images/svg-as-tiled-background.html = IMAGE
2444
2445 // WebKit roll 55250 to 55339
2446 BUG36966 : fast/loader/about-blank-hash-kept.html = FAIL
2447
2448 BUG37463 MAC DEBUG : svg/custom/transform-ignore-after-invalid.svg = PASS CRASH
2449
2450 // Bugs that went unreported when we upstreamed run_webkit_tests
2451 // New test, added http://trac.webkit.org/changeset/55737
2452 BUG37896 : fast/events/remove-child-onscroll.html = TIMEOUT
2453 // This one may be an actual regression! Started being flaky after
2454 // http://trac.webkit.org/log/?verbose=on&rev=55742&stop_rev=55710
2455 BUG37896 LINUX : fast/events/standalone-image-drag-to-editable.html = IMAGE IMAGE+TEXT PASS TEXT
2456 BUG37896 WIN : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT PASS TEXT
2457 BUG37896 MAC DEBUG : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT PASS
2458 // New test, added http://trac.webkit.org/changeset/55546
2459 BUG37896 WIN LINUX : fast/multicol/hit-test-above-or-below.html = TEXT
2460 // Added in http://trac.webkit.org/changeset/55669
2461 BUG37896 : fast/repaint/no-caret-repaint-in-non-content-editable-element.html = IMAGE+TEXT
2462 BUG37896 WIN DEBUG : fast/text/firstline/001.html = PASS CRASH
2463 BUG37896 LINUX MAC DEBUG : fast/text/firstline/001.html = PASS CRASH TIMEOUT
2464 // Added in http://trac.webkit.org/changeset/55587
2465 BUG37896 LINUX DEBUG : fast/images/svg-as-background.html = TIMEOUT
2466 // Three flaky tests noticed during a sheriff rotation.
2467 BUG37962 MAC LINUX DEBUG : fast/dom/HTMLElement/bdo.html = CRASH PASS
2468 BUG37962 LINUX DEBUG : fast/forms/multiple-form-submission-protection-mouse.html = CRASH PASS
2469 BUG37962 MAC : plugins/iframe-shims.html = TEXT PASS
2470
2471 // WebKit roll r55853 -> 55940
2472 // Flaky test
2473 BUG_JIANLI MAC : fast/forms/select-style.html = IMAGE PASS
2474
2475 BUG38375 : plugins/npruntime/round-trip-npobject.html = TEXT
2476 BUG38376 WIN : editing/deleting/5390681-2.html = IMAGE+TEXT
2477
2478 // The touch targeting logic was recently changed.
2479 BUG36415 : fast/events/touch/touch-target.html = TEXT
2480
2481 // Need to implement NPP_HandleEvent in the layout_test_plugin
2482 // WIN started failing during webkit roll 62670 -> 62844.
2483 BUG38353 WIN MAC LINUX : plugins/keyboard-events.html = TEXT
2484 BUG38353 WIN MAC LINUX : http/tests/plugins/plugin-document-has-focus.html = TEXT TIMEOUT
2485
2486 BUG38392 : plugins/resize-from-plugin.html = TEXT
2487
2488 // One pixel changes from gray 0x83 to gray 0x81. Valgrind is clean.
2489 BUG38534 LINUX : tables/mozilla/bugs/bug20804.html = IMAGE PASS
2490
2491 // WebKit roll 56165:56197.
2492 // New test (http://trac.webkit.org/changeset/56198), requires changes to PluginObject
2493 BUG38578 : plugins/override-node-method.html = TEXT
2494
2495 // WebKit roll 56197:56239.
2496 // Needs layoutTestController.setMediaType() (implemented on Qt only)
2497 BUG38653 MAC : editing/selection/find-yensign-and-backslash.html = TEXT
2498 BUG38656 : fast/media/print-restores-previous-mediatype.html = TEXT
2499
2500 // Needs layoutTestController.setViewModeMediaFeature() (implemented on Qt only)
2501 BUG40680 SKIP : fast/media/view-mode-media-feature.html = FAIL
2502
2503 // Unknown flakiness.
2504 BUG38706 : svg/custom/deep-dynamic-updates.svg = IMAGE+TEXT IMAGE PASS
2505
2506 // Caused by http://trac.webkit.org/changeset/56288/
2507 BUG_JSCHUH WIN LINUX : svg/filters/filterRes.svg = IMAGE+TEXT TEXT
2508
2509 // Caused by http://trac.webkit.org/changeset/56394.
2510 BUG_JAPHET WIN : http/tests/xmlhttprequest/xmlhttprequest-50ms-download-dispatch.html = TEXT
2511
2512 // Due to the differences in iniialization checks in KURL and googleurl.
2513 // Note: this test was also marked as flaky on WIN RELEASE above, BUG31342.
2514 BUG_39423 : security/block-test.html = TIMEOUT
2515
2516 BUGWK36666 : storage/open-database-over-quota.html = TEXT
2517
2518 // Caused by http://trac.webkit.org/changeset/56795
2519 // These are new tests that are failing in Chromium because of a missing API.
2520 BUG39904 : svg/animations/animate-points.html = TIMEOUT
2521 BUG39904 : svg/animations/animate-keySplines.html = TIMEOUT
2522 BUG39904 : svg/animations/animate-gradient-transform.html = TIMEOUT
2523
2524 BUGWK37283 : fast/overflow/scrollbar-restored-and-then-locked.html = TEXT
2525
2526 BUGWK37297 : fast/history/nested-visited-test.html = TEXT
2527 BUGWK37297 : fast/history/self-is-visited.html = TEXT
2528 BUGWK37297 : fast/history/sibling-visited-test.html = TEXT
2529
2530 // These are failing due to new-run-webkit-tests's diff trimming line ends.
2531 BUGWK36983 MAC : fast/canvas/webgl/null-object-behaviour.html = TEXT
2532 BUGWK36983 MAC : fast/canvas/webgl/uniform-location.html = TEXT
2533
2534 // Added in http://trac.webkit.org/changeset/57476. Fails in Chromium because
2535 // LayoutTestController::computedStyleWithVisitedInfo() is missing.
2536 BUG41206 : fast/history/multiple-classes-visited.html = TEXT TIMEOUT
2537
2538 // Tests that work with KURL, but fail with GURL
2539 BUG41292 : fast/url/ipv4.html = TEXT TIMEOUT
2540 BUG41292 : fast/url/anchor.html = TEXT TIMEOUT
2541
2542 // Caused by r57695. Will investigate.
2543 BUG_JIANLI LINUX : http/tests/local/formdata/send-form-data-with-sliced-file.html = TEXT
2544
2545 BUG33812 SKIP : fast/dom/icon-url-property.html = FAIL
2546
2547 // Failing with webkit roll 57659 -> 57677.
2548 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-1.html = IMAGE PASS
2549 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-3.html = IMAGE PASS
2550 BUG41817 MAC : svg/text/text-intro-05-t.svg = IMAGE PASS
2551
2552 BUG42044 WIN : http/tests/security/xss-DENIED-mime-type-execute-as-html.html = PASS TIMEOUT
2553
2554 // might have been flaky
2555 BUGJAMESR MAC : svg/custom/resource-invalidate-on-target-update.svg = IMAGE PASS
2556 BUGJAMESR LINUX : svg/custom/resource-invalidate-on-target-update.svg = IMAGE
2557 BUGJAMESR WIN LINUX : svg/filters/filter-clip.svg = IMAGE
2558 BUGJAMESR : svg/filters/filter-source-position.svg = IMAGE
2559 BUGJAMESR BUG30048 BUG29737 WIN LINUX : svg/filters/shadow-on-rect-with-filter.svg = IMAGE
2560
2561 // New layoutTestController function added at r57993
2562 BUG42696 : http/tests/xmlhttprequest/cross-origin-authorization-with-embedder.html = TIMEOUT
2563
2564 // Started failing at r57969
2565 BUG8729 MAC : http/tests/multipart/invalid-image-data.html = IMAGE
2566
2567 // Started failing at r58058
2568 BUGWK38020 WIN LINUX MAC : fast/events/touch/send-oncancel-event.html = TEXT
2569
2570 // Started failing at r58152
2571 BUGWK38038 WIN LINUX MAC : fast/url/file-http-base.html = TEXT
2572
2573 // Started failing at r58191
2574 BUGWK38100 WIN LINUX MAC : editing/inserting/caret-position.html = TEXT
2575
2576 // New test, may be safe to just rebaseline.
2577 BUGWK38099 WIN LINUX : svg/custom/broken-internal-references.svg = IMAGE+TEXT
2578
2579 // Started failing at 58212
2580 BUGWK38108 MAC : fast/backgrounds/size/contain-and-cover.html = IMAGE
2581
2582 // WebKit roll 58304:58400
2583 // Skip since not relevant
2584 BUGUKAI WIN MAC SKIP : fast/text/international/bold-bengali.html = FAIL
2585
2586 // WebKit roll 58400:58523
2587 // We probably don't want to run these massive amount of new ECMA script conformance tests:
2588 BUG42875 SKIP DEFER : fast/js/sputnik = TEXT
2589 // Other failing layout test
2590 BUGWK38360 WIN LINUX SKIP : fast/images/svg-background-partial-redraw.html = TEXT
2591 BUGWK38360 WIN LINUX SKIP : svg/carto.net/tabgroup.svg = TEXT
2592 BUGWK38360 SKIP : traversal/node-iterator-prototype.html = TEXT
2593 BUG42895 : media/audio-only-video-intrinsic-size.html = TIMEOUT
2594 BUG42895 : media/media-document-audio-size.html = TIMEOUT
2595 BUGYAAR MAC : svg/custom/dominant-baseline-hanging.svg = MISSING
2596
2597 BUG39855 SLOW DEBUG : editing/selection/extend-selection.html = PASS
2598 BUG39855 LINUX RELEASE : editing/selection/extend-selection.html = PASS TIMEOUT
2599
2600 // Failing a few times, flak dashboard seems to agree.
2601 BUG41973 MAC : svg/text/text-text-05-t.svg = IMAGE PASS
2602
2603 // Rolling Skia forward in Chrome tree to get new baselines to check
2604 // in upstream.
2605 BUGEVAN : svg/clip-path/clip-path-child-clipped.svg = PASS FAIL
2606
2607 // WebKit roll 58626:58719
2608 BUG43963 WIN : fast/forms/searchfield-heights.html = IMAGE
2609 BUG43963 LINUX : fast/forms/searchfield-heights.html = IMAGE+TEXT TEXT
2610 BUG43960 WIN LINUX : fast/css/input-search-padding.html = IMAGE+TEXT
2611 BUG43960 MAC : fast/css/input-search-padding.html = IMAGE
2612
2613 BUGWK38705 : http/tests/security/sandbox-inherit-to-initial-document-2.html = TEXT
2614
2615 // WebKit roll 58791:58807
2616 BUG43319 MAC : transforms/2d/zoom-menulist.html = IMAGE PASS
2617 BUG43319 MAC : fast/forms/select-empty-option-height.html = TIMEOUT IMAGE PASS
2618 BUG43319 WIN LINUX : http/tests/loading/bad-server-subframe.html = TEXT PASS
2619
2620 BUG43496 LINUX : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2621 BUG43497 MAC WIN : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2622
2623 // WebKit roll 58855:58878
2624 BUG43419: fast/wcss/wap-input-format.xhtml = TEXT
2625 BUG43419: fast/wcss/wap-input-required.xhtml = TEXT
2626
2627 // Flaky tests
2628 BUG43890 WIN : http/tests/loading/basic.html = TEXT PASS
2629 BUG43890 MAC LINUX : fast/forms/implicit-submission.html = TEXT PASS
2630
2631 // Flaky crashing test. Started crashing around Chromium r47220
2632 BUG44150 LINUX DEBUG : fast/forms/input-text-paste-maxlength.html = CRASH PASS
2633
2634 // New canvas test suite from http://philip.html5.org/tests/canvas/suite/tests/
2635 BUG20553 SKIP DEFER : canvas/philip = TEXT
2636 BUG20553 SKIP DEFER : http/tests/canvas/philip = TEXT
2637
2638 // Need to dump context menu items on eventSender.contextClick(true).
2639 BUGWK39105 : editing/spelling/context-menu-suggestions.html = TEXT
2640
2641 // Flaky tests
2642 BUG44229 WIN LINUX : fast/loader/recursive-before-unload-crash.html = PASS TEXT
2643
2644 // DeviceOrientation API not yet implemented.
2645 BUG44654 SKIP : fast/dom/DeviceOrientation = TEXT
2646 BUG44654 SKIP : fast/dom/Window/window-properties-device-orientation.html = TEXT
2647
2648 BUGWK39655 : fast/dom/prototype-property.html = FAIL
2649
2650 // These SVG tests have been flaky on Win from quite some time.
2651 // Hard to pin down which roll introduced the flakiness.
2652 BUG45106 WIN : svg/clip-path/clip-path-evenodd-nonzero.svg = PASS CRASH
2653 BUG45106 WIN : svg/text/text-text-05-t.svg = PASS CRASH
2654
2655 BUG45720 WIN LINUX : websocket/tests/reload-crash.html = PASS CRASH
2656
2657 // Failing since http://trac.webkit.org/changeset/60865
2658 // Need to add setEditingBehavior to layoutTestController.
2659 BUG46096 : editing/selection/extend-selection-after-double-click.html = TEXT
2660 BUG46096 : editing/selection/5195166-1.html = TEXT
2661
2662 // Flaky since at least r60276
2663 BUG46157 WIN RELEASE : transforms/2d/transform-value-types.html = PASS TEXT
2664
2665 // Chromium does not use the icon loader in WebCore for loading notifications.
2666 WONTFIX SKIP : http/tests/notifications = FAIL
2667
2668 // Chromium does not support cancel for notifications permissions.
2669 BUGWK42798 SKIP : fast/notifications/notifications-cancel-request-permission.html = FAIL
2670
2671 BUG46276 WIN : fast/text/international/khmer-selection.html = IMAGE+TEXT
2672
2673 // HTML5 Geolocation API does not use window.clientInformation.
2674 BUG11246 DEFER SKIP : fast/dom/Window/window-properties-geolocation.html = TEXT
2675
2676 // Re-enabled in http://trac.webkit.org/changeset/60983
2677 // Maybe we just need rebaseline.
2678 BUG_HAMAJI WIN LINUX : svg/W3C-SVG-1.1/fonts-glyph-02-t.svg = IMAGE+TEXT
2679
2680 // WebKit r60999 updated acid3.html, doesn't match expected on Chromium Mac.
2681 BUG46375 MAC : http/tests/misc/acid3.html = IMAGE
2682
2683 // Fails starting http://trac.webkit.org/changeset/61153
2684 // Needs update to test_shell.
2685 BUG46538 MAC WIN LINUX : editing/deleting/forward-delete-key.html = TEXT
2686
2687 BUG46603 : fast/frames/lots-of-iframes.html = PASS TIMEOUT
2688 BUG46603 : fast/frames/lots-of-objects.html = PASS TIMEOUT
2689
2690 // LayoutTestController::pageProperty is not implemented for Chromium yet.
2691 BUGWK35961 : printing/page-rule-selection.html = TEXT
2692
2693 // Needs to implement layoutTestController.dumpResourceResponseMIMETypes()
2694 BUG46872 : fast/preloader = TEXT
2695 BUG46872 : fast/dom/HTMLLinkElement/prefetch.html = TIMEOUT
2696 BUG46872 : http/tests/loading/preload-slow-loading.php = TEXT
2697
2698 BUG47035 WIN DEBUG : fast/loader/stateobjects/document-destroyed-navigate-back-with-fragment-scroll.html = PASS TEXT
2699
2700 // CSS3 Hyphenation landed in http://trac.webkit.org/changeset/61548
2701 // We don't implement it yet.
2702 BUG47083 : fast/text/hyphenate-character.html = IMAGE+TEXT
2703 BUG47083 : fast/text/hyphens.html = IMAGE+TEXT
2704 BUG47083 : fast/text/hyphenate-locale.html = IMAGE+TEXT
2705 BUG47083 : fast/text/hyphenate-first-word.html = IMAGE+TEXT
2706
2707 // Related to https://bugs.webkit.org/show_bug.cgi?id=35350
2708 BUG45048 LINUX MAC : fast/events/show-modal-dialog-onblur-onfocus.html = FAIL
2709 BUG45048 WIN : fast/events/show-modal-dialog-onblur-onfocus.html = TIMEOUT
2710 BUG45048 LINUX MAC : fast/harness/show-modal-dialog.html = FAIL
2711 BUG45048 WIN : fast/harness/show-modal-dialog.html = TIMEOUT
2712
2713 // WebKit roll 61547:61629. Still need to investigate.
2714 BUG_HCLAM : fast/js/script-line-number.html = TEXT
2715
2716 // LayoutTestController::isPageBoxVisible, pageAreaRectInPixels, and preferredPageSizeInPixels are not implemented yet for Chromium.
2717 BUGWK37538 : printing/page-format-data.html = TEXT
2718
2719 // First noticed on trybots after r61836, now in the tree.
2720 BUG_MNAGANOV LINUX : fast/js/Object-create.html = CRASH FAIL
2721
2722 // Produces different results on Mac dbg.
2723 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-appearances-capacity.html = FAIL
2724 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-element.html = FAIL
2725 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-optimums.html = FAIL
2726 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles.html = FAIL
2727 BUG47826 MAC SKIP : fast/dom/HTMLMeterElement/meter-styles-changing-pseudo.html = FAIL
2728
2729
2730 BUGWK41311 WIN LINUX : fast/borders/border-radius-circle.html = IMAGE
2731 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-01.html = IMAGE
2732 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-02.html = IMAGE
2733 BUGWK41311 WIN LINUX : fast/borders/border-radius-groove-03.html = IMAGE
2734 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-01.html = IMAGE
2735 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-02.html = IMAGE
2736 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-03.html = IMAGE
2737 BUGWK41311 WIN LINUX : fast/borders/border-radius-wide-border-04.html = IMAGE
2738 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed04.html = IMAGE
2739 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed05.html = IMAGE
2740 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDashed06.html = IMAGE
2741 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted04.html = IMAGE
2742 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted05.html = IMAGE
2743 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDotted06.html = IMAGE
2744 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble04.html = IMAGE
2745 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble05.html = IMAGE
2746 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble06.html = IMAGE
2747 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble07.html = IMAGE
2748 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble08.html = IMAGE
2749 BUGWK41311 WIN LINUX : fast/borders/borderRadiusDouble09.html = IMAGE
2750
2751 // Need to implement textInputController.hasSpellingMarkers().
2752 BUGWK41832 : editing/spelling/spelling-textarea.html = FAIL
2753 BUGWK41832 : editing/spelling/spelling-contenteditable.html = FAIL
2754
2755 // Flaky tests.
2756 BUG44345 LINUX : svg/zoom/text/zoom-hixie-mixed-009.xml = IMAGE PASS
2757 BUG44346 LINUX : svg/zoom/page/zoom-hixie-mixed-009.xml = IMAGE PASS
2758 BUG44347 LINUX : svg/hixie/mixed/009.xml = IMAGE PASS
2759 BUG48110 WIN LINUX : fast/dom/HTMLDocument/activeElement.html = PASS TEXT
2760 BUG48139 LINUX : fast/js/comparison-operators-less.html = CRASH PASS
2761 BUG48144 LINUX : fast/js/activation-object-function-lifetime.html = CRASH PASS
2762
2763 // Failing/flaky.
2764 BUG48239 : fast/js/function-apply.html = TEXT
2765 BUG48239 WIN LINUX : fast/js/function-apply-aliased.html = TEXT PASS
2766 BUG48239 : fast/js/function-apply-many-args.html = TEXT
2767
2768 // Needs rebaselining after http://trac.webkit.org/changeset/62662/
2769 BUG48452 LINUX MAC : svg/custom/use-font-face-crash.svg = IMAGE+TEXT IMAGE
2770
2771 // Times out after http://trac.webkit.org/changeset/62739/
2772 BUG48550 SKIP : plugins/return-negative-one-from-write.html = TIMEOUT
2773
2774 BUG48668 MAC : svg/W3C-SVG-1.1/struct-use-01-t.svg = FAIL
2775
2776 // These ietestcenter tests still don't pass. Careful before removing these
2777 // that the baselines aren't incorrect
2778 // (like in: https://bugs.webkit.org/show_bug.cgi?id=42215)
2779 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-1.html = TEXT
2780 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-b-2.html = TEXT
2781 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-1.html = TEXT
2782 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-c-2.html = TEXT
2783 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-1.html = TEXT
2784 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-2.html = TEXT
2785 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-3.html = TEXT
2786 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.1.5_4-4-d-4.html = TEXT
2787 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-5.html = TEXT
2788 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/11.4.1-4.a-7.html = TEXT
2789 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-178.html = TEXT
2790 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-179.html = TEXT
2791 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-180.html = TEXT
2792 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.14-9-b-i-6.html = TEXT
2793 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.4.4.15-8-b-i-6.html = TEXT
2794 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-10.html = TEXT
2795 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-18.html = TEXT
2796 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.5.4.20-4-34.html = TEXT
2797 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.6.html = TEXT
2798 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.1-1.html = TEXT
2799 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.2-1.html = TEXT
2800 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.3-1.html = TEXT
2801 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.4-1.html = TEXT
2802 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.10.7.5-1.html = TEXT
2803 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-212.html = TEXT
2804 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-213.html = TEXT
2805 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-214.html = TEXT
2806 BUG48737 WIN LINUX MAC : ietestcenter/Javascript/15.2.3.3-4-215.html = TEXT
2807 BUG48737 WIN LINUX MAC SKIP : ietestcenter/Javascript/15.4.4.15-3-14.html = TIMEOUT
2808 BUG48737 WIN LINUX MAC SKIP : ietestcenter/Javascript/15.4.4.15-3-29.html = TIMEOUT
2809 BUG48737 WIN LINUX MAC SKIP : ietestcenter/Javascript/15.4.4.15-3-8.html = TIMEOUT
2810
2811 BUG49029 WIN LINUX MAC : fast/js/object-literal-syntax.html = TEXT
2812
2813 BUG48859 WIN : fast/inline/continuation-outlines-with-layers-2.html = IMAGE+TEXT
2814
2815 // Somehow rebaseline in http://trac.webkit.org/changeset/63196 failed.
2816 // Need investigation.
2817 BUGWK38016 WIN : svg/custom/foreign-object-skew.svg = FAIL
2818
2819 BUG49031 WIN LINUX MAC : http/tests/mime/uppercase-mime-type.html = MISSING
2820
2821 BUG49021 : userscripts/mixed-case-stylesheet.html = TEXT
2822 BUG49021 : userscripts/simple-stylesheet.html = TEXT
2823 BUG49021 : userscripts/user-style-all-frames.html = TEXT
2824 BUG49021 : userscripts/user-style-top-frame-only.html = TEXT
2825
2826 BUGWK42241 LINUX : svg/custom/text-rotated-gradient.svg = IMAGE PASS
2827
2828 BUGWK42249 MAC : fast/repaint/moving-shadow-on-container.html = IMAGE
2829
2830 // These tests all fail because the expected output is wrong. The
2831 // reason is that JSC does not currently implement Object.freeze and
2832 // Object.isFrozen. These test has intentionally been marked as FAIL,
2833 // which makes it easy to fix this when webkit implements these ES5 features.
2834 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-21.html = FAIL
2835 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-24.html = FAIL
2836 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-1.html = FAIL
2837 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-0-2.html = FAIL
2838 BUGWK42371 : ietestcenter/Javascript/15.2.3.9-1.html = FAIL
2839 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-1.html = FAIL
2840 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-0-2.html = FAIL
2841 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-1.html = FAIL
2842 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-1.html = FAIL
2843 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-2.html = FAIL
2844 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-3.html = FAIL
2845 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-4.html = FAIL
2846 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-5.html = FAIL
2847 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-6.html = FAIL
2848 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-7.html = FAIL
2849 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-8.html = FAIL
2850 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-9.html = FAIL
2851 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-10.html = FAIL
2852 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-11.html = FAIL
2853 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-12.html = FAIL
2854 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-13.html = FAIL
2855 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-14.html = FAIL
2856 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-15.html = FAIL
2857 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-16.html = FAIL
2858 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-17.html = FAIL
2859 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-18.html = FAIL
2860 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-19.html = FAIL
2861 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-20.html = FAIL
2862 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-21.html = FAIL
2863 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-22.html = FAIL
2864 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-23.html = FAIL
2865 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-24.html = FAIL
2866 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-25.html = FAIL
2867 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-26.html = FAIL
2868 BUGWK42371 : ietestcenter/Javascript/15.2.3.12-3-27.html = FAIL
2869 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-6.html = FAIL
2870
2871 // These tests all fail because the expected output is wrong. The
2872 // reason is that JSC does not currently implement Object.seal and
2873 // Object.isSealed. These test has intentionally been marked as FAIL,
2874 // which makes it easy to fix this when webkit implements these ES5 features.
2875 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-1.html = FAIL
2876 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-0-2.html = FAIL
2877 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-1.html = FAIL
2878 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-1.html = FAIL
2879 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-10.html = FAIL
2880 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-11.html = FAIL
2881 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-12.html = FAIL
2882 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-13.html = FAIL
2883 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-14.html = FAIL
2884 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-15.html = FAIL
2885 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-16.html = FAIL
2886 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-17.html = FAIL
2887 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-18.html = FAIL
2888 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-19.html = FAIL
2889 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-2.html = FAIL
2890 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-20.html = FAIL
2891 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-21.html = FAIL
2892 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-22.html = FAIL
2893 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-23.html = FAIL
2894 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-24.html = FAIL
2895 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-25.html = FAIL
2896 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-26.html = FAIL
2897 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-27.html = FAIL
2898 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-3.html = FAIL
2899 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-4.html = FAIL
2900 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-5.html = FAIL
2901 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-6.html = FAIL
2902 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-7.html = FAIL
2903 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-8.html = FAIL
2904 BUGWK42371 : ietestcenter/Javascript/15.2.3.11-4-9.html = FAIL
2905 BUGWK42371 : ietestcenter/Javascript/15.2.3.14-2-5.html = FAIL
2906 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-20.html = FAIL
2907 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-23.html = FAIL
2908 BUGWK42371 : ietestcenter/Javascript/15.2.3.4-4-2.html = FAIL
2909 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-1.html = FAIL
2910 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-0-2.html = FAIL
2911 BUGWK42371 : ietestcenter/Javascript/15.2.3.8-1.html = FAIL
2912
2913 // These tests all fail because the expected output is wrong. The
2914 // reason is that JSC does not currently implement Function.prototype.bind
2915 // These test has intentionally been marked as FAIL, which makes it easy
2916 // to fix this when webkit implements this ES5 feature.
2917 BUGWK42371 : ietestcenter/Javascript/15.2.3.3-4-38.html = FAIL
2918 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-0-1.html = FAIL
2919 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-0-2.html = FAIL
2920 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-1.html = FAIL
2921 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-2.html = FAIL
2922 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-3.html = FAIL
2923 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-4.html = FAIL
2924 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-13.b-5.html = FAIL
2925 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-15-1.html = FAIL
2926 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-15-2.html = FAIL
2927 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-16-1.html = FAIL
2928 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-1.html = FAIL
2929 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-2.html = FAIL
2930 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-3.html = FAIL
2931 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-4.html = FAIL
2932 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-5.html = FAIL
2933 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-6.html = FAIL
2934 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-7.html = FAIL
2935 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-8.html = FAIL
2936 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-2-9.html = FAIL
2937 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-8-1.html = FAIL
2938 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-8-2.html = FAIL
2939 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-9-1.html = FAIL
2940 BUGWK42371 : ietestcenter/Javascript/15.3.4.5-9-2.html = FAIL
2941
2942 BUGWK42428 LINUX WIN : svg/W3C-SVG-1.1/filters-conv-01-f.svg = IMAGE+TEXT
2943
2944 // Need setPrinting.
2945 BUGWK20011 : printing/setPrinting.html = FAIL
2946
2947 // Needs V8 change.
2948 BUG49343 : fast/js/reserved-words-as-property.html = TEXT
2949
2950 BUG42486 MAC DEBUG : svg/filters/filter-empty-g.svg = CRASH
2951
2952 BUG42598 : http/tests/misc/401-alternative-content.php = TEXT
2953 BUG42598 : http/tests/xmlhttprequest/failed-auth.html = TEXT
2954
2955 // This one started failing at r63728.
2956 BUGWK42845 : html5lib/runner.html = TEXT
2957
2958 BUGWK42769 : http/tests/xmlhttprequest/remember-bad-password.html = TEXT
2959 BUGWK42769 : http/tests/security/401-logout/401-logout.php = TIMEOUT
2960
2961 // Flaky since at least chromium r52834, WebKit r63615.
2962 BUG49970 : platform/chromium/plugins/call-as-function.html = PASS TEXT
2963
2964 // Need rebaseline
2965 BUGWK24906 : fast/text/backslash-to-yen-sign-euc.html = FAIL
2966
2967 // Flaky since WebKit r63994
2968 BUGWK42964 WIN LINUX : tables/mozilla_expected_failures/bugs/bug89315.html = PASS FAIL
2969
2970 // Fails since WebKit r64156
2971 BUGWK43086 : fast/canvas/canvas-ImageData-behaviour.html = TEXT
2972
2973 // Webkit patch http://trac.webkit.org/changeset/64323 modify the test
2974 // Need to change chromium TestNetscape plugin.
2975 BUG50704 : plugins/document-open.html = TIMEOUT
2976 // New plugin test added in r64359 which fails in Chromium.
2977 BUG50787 : plugins/npruntime/plugin-scriptable-object-invoke-default.html = TEXT
2978 // New plugin test added in r64444
2979 BUG50910 : plugins/npruntime/remove-property.html = TEXT
2980
2981 // New test added in r64409 fails in Chromium.
2982 BUG50832 : printing/stretch-to-view-height.html = TEXT
2983
2984 // New test added in r64470 fails on Chromium.
2985 BUG50969 : fast/events/keydown-numpad-keys.html = TEXT
2986
2987 // This test fails because the expected output is wrong.
2988 // The reason is the device orientation runtime feature
2989 // switch had to be switched off for test_shell until
2990 // it provides a mock DeviceOrientationClient.
2991 // See crbug.com/50637.
2992 BUG50637 : fast/dom/prototype-inheritance.html = FAIL
2993
2994 // Application Cache Quotas
2995 BUGWK43459 : http/tests/appcache/origin-quota.html = TEXT MISSING
2996
2997 // Missing LayoutTestController harness.
2998 BUGWK43480 SKIP : fast/dom/Geolocation/delayed-permission-allowed.html = TEXT TIMEOUT PASS
2999 BUGWK43480 SKIP : fast/dom/Geolocation/delayed-permission-denied.html = TEXT TIMEOUT PASS
3000
3001 BUG51161 LINUX DEBUG : svg/W3C-SVG-1.1/masking-mask-01-b.svg = CRASH
3002 BUG51161 LINUX DEBUG : svg/clip-path/clip-path-text.svg = CRASH
3003
3004 // Fixed only on Mac
3005 // This test has not landed yet, though the fix has.
3006 //BUG41968 LINUX WIN : svg/hittest/svg-rect-hit.html = TEXT
3007
3008 // Failure caused by r64749
3009 BUGSATISH: fast/speech/input-text-speechbutton.html = TIMEOUT
3010
3011 // Need to support DeviceMotion.
3012 BUG51416 : fast/dom/DeviceMotion/window-property.html = TEXT
3013
3014 // Slow test introduced in r64817
3015 BUG51571 WIN : http/tests/misc/bad-charset-alias.html = TIMEOUT
3016
3017 // Probably rebaseline, but want to make sure before doing so
3018 BUGJAPHET WIN : svg/custom/resource-invalidate-on-target-update.svg = IMAGE
3019
3020 BUG51869 : websocket/tests/frame-length-overflow.html = TEXT PASS
3021
3022 BUG51854 WIN SLOW : http/tests/storage/callbacks-are-called-in-correct-context.html = PASS
3023
3024 // Regressions from r65229
3025 BUGWK43912 WIN LINUX : svg/W3C-SVG-1.1/masking-intro-01-f.svg = IMAGE
3026 BUGWK43912 WIN : svg/W3C-SVG-1.1/masking-mask-01-b.svg = IMAGE
3027 BUGWK43912 LINUX RELEASE : svg/W3C-SVG-1.1/masking-mask-01-b.svg = IMAGE
3028 BUGWK43912 WIN LINUX : svg/batik/masking/maskRegions.svg = IMAGE
3029 BUGWK43912 WIN LINUX : svg/css/circle-in-mask-with-shadow.svg = IMAGE
3030 BUGWK43912 WIN LINUX : svg/css/mask-with-shadow.svg = IMAGE
3031 BUGWK43912 WIN LINUX : svg/custom/grayscale-gradient-mask.svg = IMAGE
3032 BUGWK43912 WIN LINUX : svg/custom/js-late-mask-and-object-creation.svg = IMAGE
3033 BUGWK43912 WIN LINUX : svg/custom/js-late-mask-creation.svg = IMAGE
3034 BUGWK43912 WIN LINUX : svg/custom/mask-changes.svg = IMAGE
3035 //BUG43496 LINUX : svg/custom/mask-changes.svg = IMAGE PASS
3036 BUGWK43912 WIN LINUX : svg/custom/mask-child-changes.svg = IMAGE
3037 BUGWK43912 WIN LINUX : svg/custom/mask-colorspace.svg = IMAGE
3038 BUGWK43912 WIN LINUX : svg/custom/mask-on-multiple-objects.svg = IMAGE
3039 BUGWK43912 WIN LINUX : svg/custom/mask-with-all-units.svg = IMAGE
3040 BUGWK43912 WIN LINUX : svg/custom/mask-with-default-value.svg = IMAGE
3041 BUGWK43912 WIN LINUX : svg/zoom/page/zoom-mask-with-percentages.svg = IMAGE
3042 BUGWK43912 WIN LINUX : svg/custom/absolute-sized-content-with-resources.xhtml = IMAGE
3043
3044 // Same symptoms, failing as of r65449
3045 BUGWK43912 : svg/W3C-SVG-1.1/filters-color-01-b.svg = IMAGE
3046 BUGWK43912 : svg/W3C-SVG-1.1/filters-composite-02-b.svg = IMAGE
3047 BUGWK43912 : svg/W3C-SVG-1.1/filters-offset-01-b.svg = IMAGE
3048
3049 // Times out frequently since the test was added
3050 BUG52017 MAC LINUX : http/tests/misc/isindex-with-no-form.html = PASS TIMEOUT
3051
3052 // Probably due to http://trac.webkit.org/changeset/65279/
3053 BUGJAPHET MAC : fast/canvas/webgl/texture-npot.html = TEXT
3054
3055 // Probably http://trac.webkit.org/changeset/65381
3056 // This test causes the next one to run to ASSERT
3057 BUGWK44079 DEBUG SKIP : fast/events/popup-allowed-from-gesture-initiated-form-submit.html = PASS
3058
3059 // Due to http://trac.webkit.org/changeset/65511
3060 BUGWK44118 : fast/dom/Geolocation/delayed-permission-allowed-for-multiple-requests.html = TEXT
3061 BUGWK44118 : fast/dom/Geolocation/delayed-permission-denied-for-multiple-requests.html = TIMEOUT
3062
3063 // Flaky. Not sure when it started to fail.
3064 BUG52572 WIN LINUX DEBUG : http/tests/misc/image-blocked-src-change.html = PASS TEXT
3065
3066 // Started to crash around Chromium r56408.
3067 BUG52573 LINUX RELEASE : fast/js/array-every.html = PASS CRASH
3068
3069 BUGWK44199 : perf = PASS TEXT
3070
3071 // Tests are failing after http://trac.webkit.org/changeset/65665/
3072 // Does not seem to be just a rebaseline situation.
3073 BUGWK44278 WIN LINUX : svg/batik/paints/patternRegions-positioned-objects.svg = IMAGE+TEXT
3074 BUGWK44278 WIN LINUX : svg/custom/pattern-incorrect-tiling.svg = IMAGE+TEXT
3075 BUGWK44278 WIN LINUX : svg/transforms/text-with-mask-with-svg-transform.svg = IMAGE+TEXT
3076 BUGWK44278 WIN LINUX : svg/batik/paints/patternRegions.svg = IMAGE
3077 BUGWK44278 WIN LINUX : svg/custom/js-late-pattern-and-object-creation.svg = IMAGE
3078 BUGWK44278 WIN LINUX : svg/custom/js-late-pattern-creation.svg = IMAGE
3079 BUGWK44278 WIN LINUX : svg/custom/non-scaling-stroke.svg = IMAGE
3080 BUGWK44278 WIN LINUX : svg/custom/pattern-no-pixelation.svg = IMAGE
3081 BUGWK44278 WIN LINUX : svg/custom/stroked-pattern.svg = IMAGE
3082
3083 // r65723 updated the text output. The results of Chromium-win and
3084 // Chromium-linux since r65723 have unexpected "FAIL" line.
3085 BUG52810 WIN LINUX : fast/forms/listbox-selection.html = TEXT
3086
3087 // Tests are failing after http://trac.webkit.org/changeset/65681/
3088 // due to pixel results not having a caret visible.
3089 BUGWK44290 WIN MAC : fast/forms/input-text-scroll-left-on-blur.html = IMAGE
3090
3091 // Clip paths aren't working after http://trac.webkit.org/changeset/65729
3092 BUGWK44341 WIN LINUX : svg/clip-path/clip-path-pixelation.svg = IMAGE+TEXT
3093 BUGWK44341 WIN LINUX : svg/batik/text/textProperties.svg = IMAGE
3094 BUGWK44341 WIN LINUX : svg/clip-path/clip-path-childs-clipped.svg = IMAGE
3095
3096 // Flaky on Linux
3097 BUG53131 LINUX : fast/js/array-iterate-backwards.html = CRASH PASS
3098
3099 // new or failing since WebKit rev. 65740:65800
3100 BUG21852 MAC : fast/canvas/webgl/tex-image-and-sub-image-2d-with-video.html = TEXT
3101 BUG53073 DEBUG : storage/change-version.html = CRASH PASS
3102 BUG53073 LINUX : svg/custom/clip-path-units-changes.svg = TEXT
3103
3104 // Failing after r66144
3105 BUG53546 LINUX : userscripts/user-script-audio-document.html = TEXT
3106 BUG53546 LINUX : userscripts/user-script-video-document.html = TEXT
3107
3108 // Added in r66135, failing since then.
3109 BUG53548 MAC WIN LINUX : fast/js/parser-xml-close-comment.html = TEXT
3110
3111 // These tests are flaky on Mac and Linux.
3112 BUG53554 MAC LINUX : svg/W3C-SVG-1.1/fonts-elem-07-b.svg = PASS IMAGE
3113 BUG53554 MAC LINUX : svg/custom/svg-fonts-without-missing-glyph.xhtml = PASS IMAGE
3114
3115 // New test, need to verify if it's safe to rebaseline.
3116 BUGWK44770 WIN LINUX : svg/repaint/filter-repaint.svg = IMAGE+TEXT
3117
3118 // New tests in r66258
3119 BUGWK44909 MAC : fast/canvas/webgl/css-webkit-canvas-repaint.html = IMAGE
3120 BUGWK44909 MAC : fast/canvas/webgl/css-webkit-canvas.html = IMAGE
3121
3122 // Full Screen JS API is not yet enabled.
3123 BUGWK44797 : fullscreen = FAIL
3124
3125 // Need rebasline to pick the results.
3126 BUG47946 WIN LINUX MAC : scrollbars/custom-scrollbar-with-incomplete-style.html = MISSING
3127
3128 // Doesn't apply to Chromium (QuickTime-specific behavior)
3129 WONTFIX SKIP : media/video-does-not-loop.html = TIMEOUT
3130
3131 // Passes in Chromium DRT.
3132 BUGWK44961 : fast/notifications/notifications-click-event.html = TIMEOUT
3133
3134 // These might just need a new baseline.
3135 BUGWK44967 MAC : fast/multicol/paginate-block-replaced.html = IMAGE
3136 BUGWK44967 MAC : fast/multicol/float-paginate.html = IMAGE
3137
3138 // New tests in r66523 and r66516
3139 BUGWK44996 WIN : inspector/report-API-errors.html = TEXT
3140 BUGWK44996 WIN : inspector/report-protocol-errors.html = TEXT
3141
3142 // Not focusing an anchor when tab is pressed.
3143 BUGWK45061 : fast/forms/focus2.html = FAIL
3144
3145 // Flaky tests
3146 BUG54329 MAC : fast/forms/select-baseline.html = IMAGE
3147 BUG54330 MAC : fast/forms/input-spinbutton-capturing.html = TEXT
3148 BUG54331 MAC : fast/forms/input-number-events.html = TEXT
3149 BUG54333 WIN LINUX : fast/replaced/embed-display-none.html = PASS TIMEOUT
3150 BUG54334 LINUX : media/video-timeupdate-during-playback.html = PASS TIMEOUT
3151 BUG54348 LINUX : http/tests/security/xssAuditor/dom-write-innerHTML.html = PASS TEXT
3152
3153 // Regressed in r66689
3154 BUGTONY LINUX : fast/text/atsui-spacing-features.html = IMAGE+TEXT