DumpRenderTree should allow tests with modal dialogs
[WebKit-https.git] / LayoutTests / platform / chromium / test_expectations.txt
1 // This file consists of lines with specifications of what
2 // to expect from layout test cases. The test cases can be directories
3 // in which case the expectations apply to all test cases in that
4 // directory and any subdirectory. The format of the file is along the
5 // lines of:
6 //
7 // fast/js/fixme.js = FAIL
8 // fast/js/flaky.js = FAIL PASS
9 // fast/js/crash.js = CRASH TIMEOUT FAIL PASS
10 //
11 // The format of a test line is as follows:
12 // METADATA : relative/path/to/test.html = EXPECTATIONS
13 //
14 // Valid values for METADATA:
15 //
16 // BUG[0-9]+: See this bug for more information. Every test that isn't marked
17 //            WONTFIX should have a BUG annotation.
18 // SKIP: Doesn't run the test.
19 // SLOW: The test takes a long time to run, but does not timeout indefinitely.
20 // DEFER: For tests we'll fix in the future.
21 // WONTFIX: For tests that we never intend to pass on a given platform.
22 // DEBUG: Expectations apply only to the debug build.
23 // RELEASE: Expectations apply only to release build.
24 // LINUX/WIN/WIN-XP/WIN-VISTA/MAC: Expectations apply only to these platforms.
25 //
26 // Valid values for EXPECTATIONS:
27 //
28 // PASS: Test should pass
29 // CRASH: Test should crash
30 // TIMEOUT: Test should timeout
31 // IMAGE: Test will produce an incorrect image dump
32 // TEXT: Test will produce incorrect text output (either full or simplified)
33 // IMAGE+TEXT: Test will produce both incorrect text and images
34 // FAIL: Test will produce either incorrect text, images, or both
35 //
36 // If a line contains multiple expectations, it is considered "flakey",
37 // because it means that we're not producing consistent, reliable results.
38 //
39 // For example,
40 // LINUX : media = PASS FAIL
41 //
42 // The above means that all the media tests are flaky, but only on Linux.
43 //
44 // Other examples:
45 //
46 // SKIP : fast/js/no-good.js = TIMEOUT PASS
47 // DEBUG : fast/js/no-good.js = TIMEOUT PASS
48 // DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
49 // LINUX DEBUG SKIP : fast/js/no-good.js = TIMEOUT PASS
50 // BUG1234 DEBUG MAC : fast/js/no-good.js = TIMEOUT PASS
51 //
52 // Notes:
53 // -A test cannot be both SLOW and TIMEOUT
54 // -A test can be included twice, but not via the same path.
55 // -If a test is included twice, then the more precise path wins.
56 // -CRASH tests cannot be WONTFIX
57
58 // -----------------------------------------------------------------
59 // SLOW TESTS
60 // -----------------------------------------------------------------
61
62 BUG24182 SLOW : fast/js/regexp-overflow.html = PASS
63 BUG24182 SLOW RELEASE : http/tests/misc/DOMContentLoaded-event.html = PASS
64 BUG24182 SLOW LINUX DEBUG : http/tests/misc/DOMContentLoaded-event.html = PASS
65 BUG24182 SLOW LINUX MAC RELEASE : http/tests/navigation/multiple-back-forward-entries.html = PASS
66 BUG24182 SLOW LINUX DEBUG : http/tests/navigation/multiple-back-forward-entries.html = PASS
67 BUG24182 SLOW : http/tests/xmlhttprequest/simple-cross-origin-progress-events.html = PASS
68 BUG24182 SLOW WIN MAC : svg/custom/invisible-text-after-scrolling.xhtml = PASS
69 BUG24182 SLOW : tables/mozilla/other/slashlogo.html = PASS
70 BUG24182 SLOW WIN RELEASE : tables/mozilla/bugs/bug113235-1.html = PASS
71 BUG24182 SLOW DEBUG : fast/js/toString-and-valueOf-override.html = PASS
72
73 // This tests is normally <1 second, but occasionally takes >20s.
74 BUG24182 SLOW WIN RELEASE : fast/dom/Window/webkitConvertPoint.html = PASS
75
76 BUG24182 WIN RELEASE SLOW : http/tests/loading/redirect-methods.html = PASS
77 BUG24182 WIN SLOW : svg/hixie/perf/007.xml = PASS
78 BUG24182 SLOW MAC RELEASE : dom/html/level2/html/HTMLImageElement01.html = PASS
79 BUG24182 SLOW WIN RELEASE : http/tests/local/file-url-sent-as-referer.html = PASS
80 BUG24182 SLOW WIN DEBUG : svg/carto.net/window.svg = PASS
81 BUG24182 SLOW LINUX DEBUG : fast/xpath/4XPath/Borrowed/cz_20030217.html = PASS
82 BUG24182 SLOW WIN MAC DEBUG : tables/mozilla/bugs/45621.html = PASS
83 //BUG24852 started failing since webkit 49583
84 //BUG24182 SLOW WIN : css1/font_properties/font.html = PASS
85 BUG24182 SLOW WIN : http/tests/security/xssAuditor/meta-tag-http-refresh-javascript-url.html = PASS
86 BUG24182 SLOW WIN RELEASE : http/tests/security/cross-origin-css.html = PASS
87 BUG24182 SLOW WIN RELEASE : fast/loader/local-CSS-from-local.html = PASS
88 BUG24182 WIN RELEASE SLOW : http/tests/incremental/split-hex-entities.pl = PASS
89 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/XMLHttpRequestException.html = PASS
90 BUG24182 WIN RELEASE SLOW : http/tests/xmlhttprequest/connection-error-sync.html = PASS
91 BUG24182 WIN RELEASE SLOW : http/tests/loading/onload-vs-immediate-refresh.pl = PASS
92 //BUG24182 WIN LINUX SLOW : editing/selection/extend-selection.html = PASS
93 BUG24182 SLOW WIN : fast/images/svg-as-background.html = PASS
94 BUG24182 SLOW WIN : fast/backgrounds/svg-as-background-5.html = PASS
95 BUG24182 WIN DEBUG SLOW: inspector/console-dirxml.html = PASS
96 BUG24182 DEBUG SLOW : fast/dom/Window/window-function-frame-getter-precedence.html = PASS
97 BUG24182 SLOW DEBUG : fast/frames/frame-limit.html = PASS
98 BUG24182 SLOW : http/tests/cache/subresource-failover-to-network.html = PASS
99 BUG24182 WIN DEBUG : animations/play-state.html = PASS TEXT
100 BUG24182 SLOW WIN RELEASE : animations/play-state.html = PASS
101
102 // Usually <1s in release, ~1s in debug, but occasionally >5s in release.
103 BUG27335 WIN RELEASE : plugins/embed-attributes-setting.html = PASS TIMEOUT
104 BUG27335 WIN DEBUG SLOW : plugins/embed-attributes-setting.html = PASS
105
106 // --- collecting results for supported-xml-content-types.html ---
107 // was slow, started to timeout
108 BUG18702 WIN : http/tests/xmlhttprequest/supported-xml-content-types.html = PASS TIMEOUT
109
110 BUG34759 WIN DEBUG SLOW : inspector/console-log-before-inspector-open.html = PASS
111
112 BUG36539 SLOW : http/tests/misc/uncacheable-script-repeated.html = PASS
113
114 // -----------------------------------------------------------------
115 // SKIPPED TESTS
116 // -----------------------------------------------------------------
117
118 // Since V8 is more interruptible than other engines, they use the standard
119 // long-running-script mechanism to handle very-long-running regexps too.
120 // See http://code.google.com/p/v8/issues/detail?id=287
121 WONTFIX SKIP : fast/js/regexp-overflow-too-big.html = TIMEOUT
122
123 // XHTML tests.  These tests seem like they work, but only because the
124 // expected output expects to see JS errors.  There is no point in running
125 // these tests, because they are giving us a false sense of testing that isn't
126 // really happening.  Furthermore, since they appear to pass if we do try to
127 // run them, we can't even list them as permanently expected to fail.
128 BUG24185 WONTFIX SKIP : dom/xhtml = PASS
129
130 // We do not want to support Legacy mac encodings on Windows/Linux.
131 // On Mac, we can support them by building platform/text/mac, but
132 // probably we don't want there, either.
133 WONTFIX SKIP WIN LINUX : fast/encoding/char-encoding-mac.html = FAIL
134
135 // Fails due to different window.close() rules.  We need to decide whether we
136 // ever expect to pass this.  Now also timing out.
137 BUG24189 WONTFIX SKIP : fast/dom/open-and-close-by-DOM.html = FAIL
138
139 // Skip because of WebKit bug 18512. These bugs "poison" future tests, causing
140 // all SVG objects with fill="red" to be rendered in green.
141 WONTFIX SKIP : svg/custom/fill-SVGPaint-interface.svg = PASS
142 WONTFIX SKIP : svg/custom/getPresentationAttribute.svg = PASS
143
144 // WML is still an inprogress feature upstream. Chromium does not build
145 // with WML support, so skip its tests.
146 WONTFIX SKIP : wml = FAIL
147 WONTFIX SKIP : http/tests/wml = FAIL
148 WONTFIX SKIP : fast/wml = FAIL
149
150 // These tests are based on the JSC JavaScript profiler. The V8 JavaScript
151 // profiler is in development and will use a different approach than JSC and
152 // most likely these tests will always be JSC specific.
153 WONTFIX SKIP : fast/profiler = FAIL TIMEOUT
154
155 // This test doesn't terminate because it contains exponential
156 // regexps.  It is safe to disable because we run the same tests
157 // (sans the nonterminating ones) as part of the v8 tests.
158 WONTFIX SKIP : fast/regex/test1.html = PASS
159
160 // We use worker_uitests to run workers tests. Don't run them in test_shell.
161 WONTFIX SKIP : fast/workers = PASS TIMEOUT FAIL
162 WONTFIX SKIP : http/tests/workers = PASS TIMEOUT FAIL
163 WONTFIX SKIP : http/tests/xmlhttprequest/workers = PASS TIMEOUT FAIL
164 WONTFIX SKIP : http/tests/eventsource/workers = PASS TIMEOUT FAIL
165 WONTFIX SKIP : websocket/tests/workers/ = PASS TIMEOUT FAIL
166
167 // Page Cache - based tests. Chromium disables page cache because the WebKit page cache keeps previously
168 // loaded pages alive in memory to be able to quickly substitute them when user clicks History buttons.
169 // Chromium wants those to be separate navigations made via browser process to be able to make decision
170 // on which renderer process to use for each of them.
171 WONTFIX SKIP BUG19635 : fast/harness/use-page-cache.html = TIMEOUT FAIL
172 WONTFIX SKIP BUG19635 : fast/dom/Window/timer-resume-on-navigation-back.html = TIMEOUT FAIL
173 // Depends on page cache, as far as I can tell.
174 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached.html = TIMEOUT FAIL
175 WONTFIX SKIP BUG19635 : fast/events/pageshow-pagehide-on-back-cached-with-frames.html = TIMEOUT
176 WONTFIX SKIP BUG19635 : media/restore-from-page-cache.html = TIMEOUT
177 WONTFIX SKIP BUG19635 : loader/go-back-to-different-window-size.html = TIMEOUT TEXT
178 WONTFIX SKIP BUG19635 : fast/loader/crash-copying-backforwardlist.html = TEXT
179 WONTFIX SKIP BUG19635 : fast/frames/frame-crash-with-page-cache.html = TEXT
180 WONTFIX SKIP BUG19635 : fast/harness/page-cache-crash-on-data-urls.html = TEXT
181
182 // Tests that rely on cross-process MessagePorts.  No point in running them in
183 // test_shell, since we'd have to use a completely different implementation from
184 // what is used in the browser.
185 WONTFIX SKIP : fast/events/message-channel-gc-2.html = FAIL
186 WONTFIX SKIP : fast/events/message-channel-gc-3.html = FAIL
187 WONTFIX SKIP : fast/events/message-channel-gc-4.html = FAIL
188 WONTFIX SKIP : fast/events/message-channel-gc.html = FAIL
189 WONTFIX SKIP : fast/events/message-channel-listener-circular-ownership.html = FAIL
190 WONTFIX SKIP : fast/events/message-port-clone.html = FAIL
191 WONTFIX SKIP : fast/events/message-port-deleted-document.html = FAIL
192 WONTFIX SKIP : fast/events/message-port-deleted-frame.html = FAIL
193 WONTFIX SKIP : fast/events/message-port-inactive-document.html = FAIL
194 WONTFIX SKIP : fast/events/message-port-no-wrapper.html = FAIL
195 WONTFIX SKIP : fast/events/message-port.html = FAIL
196 WONTFIX SKIP : fast/events/message-port-multi.html = FAIL
197 WONTFIX SKIP : http/tests/security/MessagePort/event-listener-context.html = FAIL
198
199 // Implement java testing harness.
200 BUG36681 DEFER SKIP : java = TEXT
201 // Chrome does not support Java LiveConnect.
202 WONTFIX SKIP : java/lc3 = TEXT
203
204 // this test doesn't make sense on Win or Mac.
205 // TODO: move to platform/chromium-linux/.
206 WONTFIX SKIP MAC WIN : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = FAIL
207
208 // -----------------------------------------------------------------
209 // WONTFIX TESTS
210 // -----------------------------------------------------------------
211
212 // This test is completely timing dependent.  It is testing the time
213 // between a key event and a search event.  You cannot count on this
214 // always being exactly the same.
215 WONTFIX DEBUG : fast/forms/search-event-delay.html = PASS TEXT
216 WONTFIX SLOW WIN RELEASE : fast/forms/search-event-delay.html = FAIL PASS
217 WONTFIX SLOW MAC RELEASE : fast/forms/search-event-delay.html = FAIL PASS CRASH
218 WONTFIX LINUX RELEASE : fast/forms/search-event-delay.html = FAIL PASS
219
220 // Chrome uses different keyboard accelerators from those used by Safari, so
221 // these tests will always fail.
222 // TODO(pinkerton): these should probably pass on Mac since we want Emacs
223 // keybindings but they currently do not.
224 WONTFIX LINUX WIN DEBUG : editing/pasteboard/emacs-cntl-y-001.html = FAIL
225 WONTFIX LINUX RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
226 WONTFIX SLOW WIN RELEASE : editing/pasteboard/emacs-cntl-y-001.html = FAIL
227 WONTFIX : editing/pasteboard/emacs-ctrl-a-k-y.html = FAIL
228 WONTFIX : editing/pasteboard/emacs-ctrl-k-y-001.html = FAIL
229 WONTFIX : editing/input/emacs-ctrl-o.html = FAIL
230
231 // Checks for very kjs-specific garbage collector behavior.
232 // Would have to be implemented much differently to work in v8.
233 WONTFIX : fast/dom/gc-10.html = FAIL
234
235 // This fails because we're missing various useless apple-specific
236 // properties on the window object.
237 // This test also timeouts in Debug mode.
238 BUG24187 WONTFIX SLOW DEBUG : fast/dom/Window/window-properties.html = FAIL
239 BUG24187 WONTFIX SLOW WIN RELEASE : fast/dom/Window/window-properties.html = FAIL
240 BUG24187 WONTFIX LINUX MAC RELEASE : fast/dom/Window/window-properties.html = FAIL
241
242 // Safari specific test to ensure that JavaScript errors aren't logged when in
243 // private browsing mode.
244 WONTFIX : http/tests/security/cross-frame-access-private-browsing.html = FAIL
245
246 // Chromium doesn't implement private browsing in the renderer.
247 WONTFIX : plugins/private-browsing-mode.html = FAIL
248 WONTFIX : plugins/private-browsing-mode-2.html = TEXT
249
250 // We don't let anyone set status in the browser.
251 WONTFIX : plugins/set-status.html = TEXT
252
253 // We don't care about dashboard compatibility mode.
254 WONTFIX SKIP : http/tests/xmlhttprequest/default-content-type-dashboard.html = FAIL
255 WONTFIX SKIP : http/tests/xmlhttprequest/svg-created-by-xhr-disallowed-in-dashboard.html = FAIL
256 WONTFIX : svg/custom/embedded-svg-disallowed-in-dashboard.xml = FAIL
257 WONTFIX : svg/custom/manually-parsed-embedded-svg-disallowed-in-dashboard.html = FAIL
258 WONTFIX : svg/custom/manually-parsed-svg-disallowed-in-dashboard.html = FAIL
259 WONTFIX SKIP : svg/custom/svg-disallowed-in-dashboard-object.html = FAIL
260 WONTFIX : fast/canvas/canvas-gradient-addStop-error.html = FAIL
261
262
263 // Chrome uses different keyboard accelerators from those used by Safari, so
264 // these tests will always fail.
265 // TODO(ericroman): can the following 2 tests be removed from this list, since they pass?
266 WONTFIX : fast/events/keydown-1.html = FAIL
267 WONTFIX LINUX WIN : fast/events/option-tab.html = FAIL
268
269 // Chrome does not support WebArchives.
270 BUG10395 WONTFIX SKIP : webarchive = FAIL PASS
271 BUG10395 WONTFIX SKIP : svg/webarchive = FAIL PASS
272 BUG10395 WONTFIX SKIP : svg/custom/image-with-prefix-in-webarchive.svg = FAIL PASS
273 BUG10395 WONTFIX SKIP : http/tests/webarchive = FAIL PASS
274
275 // We don't support ACCELERATED_COMPOSITING. Skipping because some tests in this
276 // directory don't have pixel results.
277 BUG15733 WONTFIX SKIP : compositing = FAIL PASS TIMEOUT
278
279 // Run the Mac-specific platform tests, but only to check for crashes.
280 WONTFIX : platform/gtk = FAIL PASS
281 WONTFIX : platform/mac = FAIL PASS TIMEOUT
282 WONTFIX : platform/mac-leopard = FAIL PASS
283 WONTFIX : platform/mac-tiger = FAIL PASS
284 WONTFIX : platform/qt = FAIL PASS
285 WONTFIX SKIP : plugins/qt-qwidget-plugin.html = FAIL
286 WONTFIX SKIP : platform/mac/fast/text/international/Geeza-Pro-vertical-metrics-adjustment.html = PASS
287
288 WONTFIX LINUX MAC : platform/win = FAIL PASS
289
290 // This is a Safari specific test to make WebKit behave like AppKit on the Mac.
291 // We do not support it because PLATFORM(MAC) is not defined for the mac version.
292 WONTFIX MAC : platform/mac/editing/deleting/backward-delete.html = FAIL
293
294 // Ignored because we do not have OBJC bindings
295 WONTFIX SKIP : editing/pasteboard/paste-RTFD.html = FAIL
296 WONTFIX SKIP : editing/pasteboard/paste-TIFF.html = FAIL
297 WONTFIX SKIP : plugins/jsobjc-dom-wrappers.html = FAIL
298 WONTFIX SKIP : plugins/jsobjc-simple.html = FAIL
299 WONTFIX SKIP : plugins/root-object-premature-delete-crash.html = FAIL
300 WONTFIX SKIP : plugins/throw-on-dealloc.html = FAIL
301 WONTFIX SKIP : plugins/undefined-property-crash.html = FAIL
302
303 // Uses __apple_runtime_object
304 WONTFIX SKIP : plugins/call-as-function-test.html = FAIL
305
306 // Ignore test because it tries to load .pdf files in <img> tags.
307 WONTFIX LINUX WIN : fast/images/pdf-as-image-landscape.html = FAIL
308 WONTFIX LINUX WIN : fast/images/pdf-as-image.html = FAIL
309 WONTFIX LINUX WIN : fast/replaced/pdf-as-image.html = FAIL
310
311 // These tests try to print a PDF file as the expected result.  I don't think
312 // we plan on supporting this anytime soon.
313 WONTFIX SKIP : printing/compositing-layer-printing.html = PASS
314 WONTFIX SKIP : printing/media-queries-print.html = PASS
315 WONTFIX SKIP : printing/page-rule-in-media-query.html = PASS
316
317 // Chrome doesn't call the willCacheResponse callback (a method
318 // of ResourceHandleClient).  That function is Mac-specific.
319 WONTFIX SKIP : http/tests/misc/willCacheResponse-delegate-callback.html = FAIL
320
321 // Checks for very kjs-specific garbage collector
322 // behavior. Gc-9 is completely braindamaged; it tests that certain
323 // properties are reset by the garbage collector. It looks to pass recently.
324 WONTFIX : fast/dom/gc-9.html = FAIL
325
326 // This test checks that ((new Error()).message is undefined, which is
327 // a direct contradiction of the javascript spec 15.11.4.3 which
328 // says that it must be a string.
329 WONTFIX : fast/js/kde/evil-n.html = FAIL
330
331 // This test checks that properties of arguments arrays are non-enumerable
332 // which is incorrect according to the ES5 spec.
333 WONTFIX : fast/js/kde/function.html = FAIL
334
335 // This test is broken.  The regular expression used contains an error
336 // which kjs swallows and returns false, which is the expected result,
337 // but for which we issue a syntax error.
338 WONTFIX : fast/js/code-serialize-paren.html = FAIL
339
340 // These tests check for a kjs-specific extension, that source file
341 // name and line numbers are available as properties on exception
342 // objects.  We handle error positions differently.
343 WONTFIX : fast/js/exception-linenums-in-html-1.html = FAIL
344 WONTFIX : fast/js/exception-linenums-in-html-2.html = FAIL
345 WONTFIX : fast/js/exception-linenums.html = FAIL
346 WONTFIX : fast/js/exception-expression-offset.html = FAIL
347
348 // These tests rely on specific details of decompilation of
349 // functions. V8 always returns the source code as written; there's
350 // no decompilation or pretty printing involved except for
351 // certain "native" functions where the V8 output does not include
352 // newline characters. This is working as intended and we don't care
353 // if the tests pass or fail. (It should probably simply be re-baselined.)
354 WONTFIX : fast/js/function-names.html = FAIL
355
356 // This test relies on KJS specific implementation
357 // (window.GCController.getJSObjectCount), which we have no intention of
358 // supporting.
359 WONTFIX SKIP : fast/dom/Window/timeout-released-on-close.html = FAIL
360
361 // These tests expect a tiff decoder, which we don't have.
362 WONTFIX LINUX WIN : fast/images/embed-image.html = FAIL
363 WONTFIX LINUX WIN : fast/images/object-image.html = FAIL
364
365 // Safari has a unique handling of the BOM characters among browsers.
366 // There is a strong suspicion that this is a security problem, so we
367 // follow the rest of the browsers on this one.
368 WONTFIX : fast/js/removing-Cf-characters.html = FAIL
369
370 // These tests fail in all but the PST/PDT time zone.
371 // Another reason for failure is that, for compatability, we don't obey
372 // the ECMA standard on DST exactly.  We use the OS's facilities to
373 // convert to local time for dates within the UNIX 32-bit epoch,
374 // and follow the ECMA rules for dates outside that range.
375 // The ECMA rules say to use current DST rules for all dates,
376 // and that all dates that are separated by an exact multiple of
377 // 28 years must behave exactly the same.
378 // OS local time services are more accurate than this ECMA rule,
379 // which is a discrepancy.
380 WONTFIX SKIP : fast/js/date-DST-time-cusps.html = PASS FAIL
381 WONTFIX SKIP : fast/js/date-big-setdate.html = PASS FAIL
382
383 // The following tests fail because of difference in how the test shell
384 // navigation controller tracks navigations as compared to how the Mac
385 // implementation does it.
386 WONTFIX : http/tests/history/redirect-200-refresh-0-seconds.pl = FAIL
387 WONTFIX : http/tests/history/redirect-js-location-replace-0-seconds.html = FAIL
388 WONTFIX DEBUG : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
389 WONTFIX LINUX MAC RELEASE : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
390 WONTFIX SLOW WIN RELEASE : http/tests/history/redirect-js-location-replace-2-seconds.html = FAIL
391 WONTFIX : http/tests/history/redirect-js-location-replace-before-load.html = FAIL
392 WONTFIX : http/tests/history/redirect-meta-refresh-0-seconds.html = FAIL
393
394 // This test expects weird behavior of __defineGetter__ on the
395 // window object.  It expects variables introduced with 'var x = value'
396 // to behave differently from variables introduced with 'y = value'.
397 // This just seems wrong and should have very low priority.
398 // Agreed, not required for Beta, we can debate this with WebKit post Beta
399 // (eseidel, 4/25)
400 // Ignore this until we see evidence that we need to support it.
401 WONTFIX : fast/dom/getter-on-window-object2.html = FAIL
402
403 // V8 doesn't stable sort and we currently have no intention of
404 // changing this.  The following tests only happen to pass due to
405 // the current algorithm used for sorting small arrays. If larger
406 // arrays were used in the tests, they would fail.
407 // It is tracked by: http://code.google.com/p/v8/issues/detail?id=90
408 WONTFIX : fast/js/comparefn-sort-stability.html = PASS
409 WONTFIX : fast/js/sort-stability.html = PASS
410
411 // We have no indication that anyone misses this and have currently no
412 // intention of implementing it.
413 WONTFIX : fast/js/function-dot-arguments.html = FAIL
414
415 // This is a Safari specific test used to document the set of global
416 // constructors they expose and the exact way they are printed.  Not
417 // important.
418 WONTFIX : fast/js/global-constructors.html = FAIL
419
420 // This test is not reliable.  The behavior depends on exactly how the
421 // stack limit is reached.  We're happy with our behavior on this test
422 // as long as we don't crash.
423 WONTFIX : fast/js/global-recursion-on-full-stack.html = FAIL
424
425 // Our DOM Storage implementation doesn't use WebKit's private browsing feature (even for incognito mode).
426 WONTFIX : storage/domstorage/localstorage/private-browsing-affects-storage.html = FAIL
427 WONTFIX : storage/domstorage/sessionstorage/private-browsing-affects-storage.html = FAIL
428
429 // These tests propagate auth credentials back to the renderer, which we
430 // don't want to do.
431 WONTFIX BUG21840 MAC LINUX DEBUG : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
432 WONTFIX BUG21840 LINUX RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
433 WONTFIX BUG21840 SLOW WIN RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL
434 WONTFIX BUG21840 WIN DEBUG : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL CRASH
435 WONTFIX BUG21840 MAC RELEASE : http/tests/loading/basic-auth-resend-wrong-credentials.html = FAIL TIMEOUT
436
437 WONTFIX BUG21840 LINUX : http/tests/loading/basic-credentials-sent-automatically.html = FAIL CRASH
438 WONTFIX BUG21840 WIN : http/tests/loading/basic-credentials-sent-automatically.html = FAIL TIMEOUT
439 WONTFIX BUG21840 MAC : http/tests/loading/basic-credentials-sent-automatically.html = FAIL
440
441 // This checks the IDN behavior of WebKit/WebKit on Mac, not WebKit/WebCore or
442 // WebKit/JavaScriptCore. Chrome doesn't use WebKit/WebKit, and Chrome's IDN
443 // security model is different from it.
444 BUG21814 WONTFIX SKIP: fast/encoding/idn-security.html = FAIL
445
446 // Our implementation of global history is completely different, and
447 // these tests are irrelevant.
448 BUG23748 WONTFIX : http/tests/globalhistory = FAIL
449
450 // DataGrid was pulled from HTML5 spec, unlikely to re-emerge in the current form.
451 BUG17585 WONTFIX : fast/dom/HTMLDataGridElement = FAIL
452
453 // We are not going to support submitting a form to about:* pages.
454 // For more details, see discussions at issue 20570.
455 BUG20570 WONTFIX : fast/forms/get-forms-to-about-blank.html = FAIL
456
457 // xhtml mp tests were added in http://trac.webkit.org/changeset/43865 and are
458 // skipped on all platforms upstream.
459 // We are not planning to support these.
460 BUG12254 WONTFIX SKIP : fast/xhtmlmp = FAIL
461 BUG12254 WONTFIX SKIP : http/tests/xhtmlmp = FAIL
462
463 // This test requires LayoutTestController.setCacheModel, which we don't implement
464 // because we can't emulate the cahcing behaviors it expects.
465 WONTFIX : fast/dom/HTMLScriptElement/nested-execution.html = FAIL
466
467 // Deletion UI is a Mail-ism. We don't need to worry about this.
468 WONTFIX SKIP : editing/deleting/deletionUI-single-instance.html = FAIL IMAGE
469 WONTFIX SKIP : fast/dom/Element/id-in-deletebutton.html = TEXT
470
471 // Tests for FAST_MOBILE_SCROLLING. We don't use it.
472 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE+TEXT
473 WONTFIX BUG32663 WIN LINUX : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE+TEXT
474 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/fixed-position-element.html = IMAGE PASS
475 WONTFIX BUG32663 MAC : fast/fast-mobile-scrolling/no-fixed-position-elements.html = IMAGE PASS
476
477 // Tests for frameset flattening. Relevant only on mobile browsers.
478 WONTFIX SKIP : fast/frames/flattening = TIMEOUT
479
480 // This should be tested differently (see discussion on https://bugs.webkit.org/show_bug.cgi?id=35063).
481 // No need to waste cycles implementing harness support for this variant of the test.
482 WONTFIX SKIP : fast/loader/api-test-go-to-current-back-forward-item.html = TIMEOUT
483
484 // We're not planning to support rocker-based cursor navigation.
485 WONTFIX SKIP : fast/events/spatial-navigation = FAIL
486
487 // We're not planning to relax third-party cookie rules any time soon.
488 WONTFIX BUG37684 SKIP : http/tests/cookies/third-party-cookie-relaxing.html = FAIL
489
490 // <progress> on Mac is always animated.
491 WONTFIX MAC : fast/dom/HTMLProgressElement/progress-element.html = IMAGE PASS
492
493 // -----------------------------------------------------------------
494 // CHROME REWRITTEN TESTS
495 // -----------------------------------------------------------------
496
497 // These tests have been rewritten, with the original being ignored,
498 // because they rely on being able to shadow the 'top' variable on the
499 // global object.  For security we disallow shadowing of top.
500 WONTFIX : editing/selection/click-before-and-after-table.html = FAIL
501
502 // We're taking a different approach on this test than Webkit does, related to
503 // whether we create a window via a plugin when target is _blank.
504 BUG24186 WONTFIX SKIP : plugins/get-url-with-blank-target.html = FAIL
505
506 // Dashboard-related test
507 WONTFIX SKIP : platform/mac/fast/css/dashboard-region-parser.html = FAIL
508
509 // Not a test?
510 WONTFIX SKIP : http/tests/incremental/pause-in-script-element.pl = FAIL
511
512 // This tests for an arbitrary limit set in JSCRE to terminate regular
513 // expressions with an exponential matching behavior.  Since the V8
514 // regular expression engine can be preempted from the outside, we do not
515 // need to limit the execution this way.  Firefox also keeps running
516 // on this one.
517 WONTFIX : fast/regex/slow.html = TIMEOUT
518
519 // Test to verify legacy MAC encodings. We don't want to support them and
520 // have to skip this test.
521 WONTFIX SKIP : fast/encoding/char-decoding-mac.html = FAIL
522
523 // WebKit QT Build-specific tests
524 WONTFIX SKIP : platform/qt/view/fixed-layout-size.html = FAIL
525
526 // These don't have pixel results and rely on ObjC bindings. Don't run until they have pixel results.
527 WONTFIX SKIP : platform/mac/editing/pasteboard/dataTransfer-set-data-file-url.html = FAIL
528 WONTFIX SKIP : http/tests/security/dataTransfer-set-data-file-url.html = FAIL
529
530 // The issue is which global object to use as the implicit
531 // receiver for cross-frame calls.  Currently, IE, Firefox and Chrome
532 // agree and only Safari is doing it this way.
533 BUG5053 WONTFIX : fast/frames/cross-site-this.html = FAIL
534
535 // This tests a Safari incompatibility.  This test should fail since
536 // it contains syntax errors that JSC for some reason choose not to
537 // throw.  V8 follows the spec.
538 WONTFIX : fast/js/reparsing-semicolon-insertion.html = FAIL
539
540 // These tests relate to transform/3d which is a work in progress and is not
541 // even run by the WebKit folk. They should be enabled whenever WebKit begins
542 // testing them by default. The bug to re-enable is:
543 // http://code.google.com/p/chromium/issues/detail?id=8455
544 WONTFIX SKIP : transforms/3d = FAIL
545
546 // Copying with no selection is sometimes supposed to work
547 // Also skipped by Apple on Windows (rdar://problem/5015941)
548 BUG20404 : editing/execCommand/copy-without-selection.html = FAIL
549
550 // This is a faulty test and need to change so it works on Windows.
551 // onload race condition due to poorly designed test.
552 // Works fine when run stand-alone.  Not needed for Beta.
553 // Also skipped by Apple on Windows, due to intermittent failure
554 // (rdar://5313536)
555 // started WIN only, since r30442 fails on all platforms
556 BUG10270 : fast/dom/frame-loading-via-document-write.html = FAIL
557
558 // -----------------------------------------------------------------
559 // LIGHTTPD
560 // -----------------------------------------------------------------
561 // This are failing for different reasons under our new lighttpd configuration
562 // TODO(deanm): Address all of these via lighttpd if possible, otherwise fork.
563 // Maybe flaky and need to be forked?
564
565 // LightTPD doesn't accept unknown HTTP methods
566 BUG30536 SKIP : http/tests/xmlhttprequest/methods-lower-case.html = TIMEOUT CRASH
567 BUG30536 DEBUG : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
568 BUG30536 LINUX MAC RELEASE : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
569 BUG30536 WIN RELEASE : http/tests/xmlhttprequest/methods-async.html = TIMEOUT TEXT
570 BUG30536 WIN SLOW : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-invalidation-by-method.html = FAIL
571 // LightTPD doesn't accept unknown HTTP methods and passes CGIs a Content-Type
572 // even when a request didn't send the header.
573 BUG30536 WIN SLOW : http/tests/xmlhttprequest/methods.html = FAIL
574 BUG30536 LINUX : http/tests/xmlhttprequest/methods.html = FAIL
575 BUG30536 MAC : http/tests/xmlhttprequest/methods.html = FAIL TIMEOUT
576 // Webkit 50667:50696 (Lighttpd related?)
577 BUG30536 WIN : http/tests/xmlhttprequest/xmlhttprequest-setrequestheader-no-value.html = TEXT
578
579 // Another lighttpd quirk.
580 BUG8941 WIN SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
581 BUG8941 LINUX SLOW : http/tests/xmlhttprequest/web-apps/013.html = PASS
582 BUG8941 MAC DEBUG SLOW : http/tests/xmlhttprequest/web-apps/013.html = FAIL
583 BUG8941 MAC RELEASE SLOW : http/tests/xmlhttprequest/web-apps/013.html = PASS
584 BUG8941 WIN : http/tests/xmlhttprequest/web-apps/012.html = FAIL
585
586 // -----------------------------------------------------------------
587 // TEXT
588 // -----------------------------------------------------------------
589
590 // This class of test fails because of size differences in text runs.
591 // Mostly this is because of international text rendering differences.
592
593 // Incrorect results, in incorrect international font metrics.
594 BUG20521 LINUX WIN : fast/text/atsui-multiple-renderers.html = FAIL
595 BUG20521 LINUX WIN : fast/text/atsui-pointtooffset-calls-cg.html = FAIL TIMEOUT
596 BUG20521 LINUX WIN : fast/text/atsui-rtl-override-selection.html = FAIL
597
598 // This test checks that we hack around a bug in helvetica.  We fail to.
599 BUG20519 LINUX WIN : fast/text/wide-zero-width-space.html = FAIL
600
601 // More missing international text overides, not needed for Beta.
602 // Capitalization results match Safari, even if "not fully correct"
603 BUG20547 LINUX WIN : fast/text/capitalize-boundaries.html = FAIL
604
605 // Different button line-heights, our behavior looks wrong.
606 BUG20551 LINUX WIN : fast/replaced/table-percent-height.html = FAIL
607 BUG20551 LINUX WIN : fast/replaced/table-percent-height-text-controls.html = FAIL
608
609
610 // -----------------------------------------------------------------
611 // URL
612 // -----------------------------------------------------------------
613
614 // Form submission (GET) on non-standard url does not append a query.
615 // Defering these tests as the expected behavior is wonky, and shouldn't affect
616 // existing apps one way or another.
617 // Implicit expectation in this test is that you can "set query" on a data URL,
618 // and it should replace the first "?" substring. This makes absolutely no
619 // sense.
620 BUG24203 : fast/events/stopPropagation-submit.html = FAIL
621
622 // -----------------------------------------------------------------
623 // PENDING TESTS (forked to pending/, need to be sent upstream)
624 // -----------------------------------------------------------------
625
626 // These tests don't work with fast timers due to setTimeout
627 // races. See https://bugs.webkit.org/show_bug.cgi?id=21536
628 BUG24195 WIN LINUX : fast/repaint/bugzilla-6473.html = IMAGE+TEXT
629 BUG24195 MAC : fast/repaint/bugzilla-6473.html = IMAGE
630
631 // -----------------------------------------------------------------
632 // Tests deferred until we provide support for a particular feature.
633 // -----------------------------------------------------------------
634
635 // -----------------------------------------------------------------
636 // Tests requiring features not currently in test_shell.
637 // -----------------------------------------------------------------
638
639 // Implement layoutTestController.display()
640 BUG8630 WIN LINUX : fast/repaint/body-background-image.html = FAIL
641
642 // Relies on text metrics to pass. Rework to be meaningful for ports other than platform/mac.
643 BUG8630 WIN LINUX : fast/repaint/overflow-outline-repaint.html = FAIL
644 BUG8630 WIN LINUX : fast/backgrounds/solid-color-context-restore.html = FAIL
645 BUG8630 WIN LINUX : fast/dynamic/containing-block-change.html = FAIL
646 BUG8630 LINUX : fast/forms/listbox-clip.html = IMAGE+TEXT
647 BUG8630 WIN LINUX RELEASE : fast/overflow/hidden-scrollbar-resize.html = FAIL
648 BUG8630 LINUX WIN DEBUG : fast/overflow/hidden-scrollbar-resize.html = FAIL
649 BUG8630 WIN LINUX RELEASE : fast/reflections/inline-crash.html = FAIL
650 BUG8630 LINUX WIN DEBUG : fast/reflections/inline-crash.html = FAIL
651 BUG8630 WIN LINUX : fast/text/font-initial.html = FAIL
652 BUG8630 LINUX : svg/custom/use-detach.svg = FAIL PASS
653 BUG18772 LINUX : fast/backgrounds/001.html = FAIL
654
655 // Need a setAuthorAndUserStylesEnabled method in
656 // layoutTestController. Now we have preference to enable/disable user
657 // styles(not work now), we still need to add a preference to enable/disable
658 // styles of both author and user.
659 // Deferring, we don't support user-controlled UA stylesheets (in beta)
660 // Actually, gonna SKIP because it causes an additional error message in:
661 // fast/css/display-none-inline-style-change-crash.html   somehow
662 // the message is dumped after the #EOF, which causes an additional
663 // error in the header of the following test.
664 BUG24197 SKIP : fast/css/disabled-author-styles.html = FAIL
665
666 // Need to implement
667 // layoutTestController.setDomainRelaxationForbiddenForURLScheme()
668 BUG32674 WIN LINUX MAC : http/tests/security/setDomainRelaxationForbiddenForURLScheme.html = TEXT
669
670 // -----------------------------------------------------------------
671 // Other
672 // -----------------------------------------------------------------
673
674 // Pixeltest failure: Form control metrics incorrect
675 BUG10273 LINUX : http/tests/navigation/javascriptlink-frames.html = FAIL
676
677 // Mac Safari under certain circumstances automatically places
678 // a caret in editable document even when none was requested programatically.
679 // We don't intend to copy this feature (at least not for Beta).
680 BUG20844 LINUX WIN RELEASE : editing/selection/designmode-no-caret.html = FAIL
681 BUG20844 LINUX WIN DEBUG : editing/selection/designmode-no-caret.html = FAIL
682
683 // Directionality of mixed-direction text in selected choice should
684 // match that in the <select> option lists.
685 // Low priority, unclear if test expectations are correct (see bug)
686 BUG6139 : fast/forms/select-writing-direction-natural.html = FAIL
687
688 // We don't support NPN_Enumerate, but don't know of any plugin
689 // which depends on that functionality.  So we ignore this for beta.
690 BUG21901 : plugins/netscape-enumerate.html = FAIL
691
692 // Expectations for this test changed upstream. We should fix this test, but
693 // it doesn't need to block the current release
694 BUG10275 : http/tests/security/cross-frame-access-put.html = FAIL
695
696 // Due to differences in error pages. Needs re-baselining.
697 BUG24208 WIN DEBUG : http/tests/navigation/post-goback1.html = FAIL
698 BUG24208 SLOW WIN RELEASE : http/tests/navigation/post-goback1.html = FAIL
699 BUG24208 LINUX MAC : http/tests/navigation/post-goback1.html = FAIL
700
701 // Requires layoutTestController.dispatchPendingLoadRequests
702 BUG33211 WIN RELEASE : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT CRASH
703 BUG33211 WIN DEBUG : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
704 BUG33211 MAC LINUX : http/tests/loading/deleted-host-in-resource-load-delegate-callback.html = TIMEOUT
705
706 // HTML5 DB layout tests
707 BUG27697 SKIP : storage/hash-change-with-xhr.html = PASS
708 // We do not use Safari's private browsing
709 WONTFIX SKIP : storage/private-browsing-readonly.html = PASS
710
711 // HTML5 datalist element. We don't enable it because WebKit implementation
712 // is incomplete.
713 BUG20226 DEFER : fast/forms/datalist-nonoption-child.html = TEXT
714 BUG20226 DEFER : fast/forms/datalist.html = TEXT
715 BUG20226 DEFER : fast/forms/input-list.html = FAIL
716 BUG20226 DEFER : fast/forms/input-selectedoption.html = FAIL
717
718 // Add support for inspector layout tests.
719 BUG26734 LINUX MAC SKIP : inspector = PASS
720 BUG26734 LINUX MAC SKIP : http/tests/inspector = PASS
721 BUG26734 LINUX MAC SKIP : http/tests/inspector-enabled = PASS
722 BUG26734 SKIP : inspector/console-format-collections.html = TEXT
723 BUG26734 SKIP : inspector/console-format.html = TEXT
724
725 // These tests need to be changed to be platform independent.
726 BUG13907 : http/tests/media/remove-while-loading.html = TIMEOUT
727 BUG13907 : http/tests/media/video-play-stall-seek.html = TIMEOUT
728 BUG13907 : http/tests/media/video-play-stall.html = TIMEOUT
729 BUG13907 : http/tests/media/video-referer.html = TIMEOUT
730 BUG13907 : http/tests/media/video-seekable-stall.html = TIMEOUT
731 BUG13907 : http/tests/security/local-video-poster-from-remote.html = PASS FAIL TIMEOUT
732 BUG13907 : http/tests/security/local-video-source-from-remote.html = PASS FAIL TIMEOUT
733 BUG13907 : http/tests/security/local-video-src-from-remote.html = PASS FAIL TIMEOUT
734 BUG13907 : media/video-display-aspect-ratio.html = PASS FAIL TIMEOUT
735 BUG13907 : media/video-loop.html = PASS FAIL TIMEOUT
736
737 // These tests need to be changed to not rely on setTimeout().
738 BUG13907 SLOW WIN DEBUG : media/video-played-collapse.html = PASS FAIL
739 BUG13907 SLOW WIN DEBUG : media/video-seek-past-end-playing.html = PASS FAIL
740
741 // We sometimes emit an error from the same source element twice.
742 BUG13907 : media/video-source-error.html = PASS FAIL
743
744 // Failing because we sometimes emit additional timeupdate events.
745 // Test may need to be rewritten or only log the first timeupdate event.
746 BUG13907 : media/audio-delete-while-slider-thumb-clicked.html = PASS FAIL
747
748 // Failing because we sometimes emit additional timeupdate events.
749 // Test might be WONTFIX because we don't export a step button in the first place.
750 BUG13907 BUG25375 SKIP : media/audio-delete-while-step-button-clicked.html = FAIL
751
752 // Seeks to the end of file, which results in ogg packets with no timestamps.
753 BUG13907 : media/event-attributes.html = PASS FAIL TIMEOUT
754
755 // The media time display isn't appearing.
756 BUG13907 : media/video-zoom-controls.html = PASS FAIL TIMEOUT
757
758 // The media time display is getting styled when it shouldn't be.
759 BUG13907 : media/controls-styling.html = FAIL
760
761 // These tests are flaky with subtle pixel differences.
762 BUG13907 LINUX MAC : media/video-zoom.html = IMAGE PASS
763 BUG13907 LINUX MAC : media/video-layer-crash.html = IMAGE PASS
764 BUG13907 LINUX MAC : media/video-transformed.html = IMAGE PASS
765
766 // This is flaky with a subtle pixel difference in the bottom right corner,
767 // which I believe is due to new video scaling algorithm.
768 BUG13907 : media/video-replaces-poster.html = IMAGE PASS
769
770 // These tests are failing because they use position-dependent mouse clicks.
771 BUG13907 BUG25375 : media/video-controls-transformed.html = FAIL
772
773 // These tests are WONTFIX because they use codecs Chromium doesn't support.
774 BUG16779 WONTFIX SKIP : media/audio-mpeg-supported.html = FAIL TIMEOUT
775 BUG16779 WONTFIX SKIP : media/audio-data-url.html = FAIL TIMEOUT
776 BUG16779 WONTFIX SKIP : media/media-can-play-mp3.html = TEXT
777 BUG16779 WONTFIX SKIP : media/video-can-play-type.html = FAIL TIMEOUT
778 BUG16779 WONTFIX SKIP : media/video-document-types.html = FAIL TIMEOUT
779 BUG16779 WONTFIX SKIP : media/video-size-intrinsic-scale.html = FAIL TIMEOUT
780 // GStreamer - disabled in Chromium
781 WONTFIX : media/video-duration-known-after-eos.html = TEXT TIMEOUT
782
783 // We haven't implemented the WebKit fullscreen extension.
784 BUG16735 : media/media-fullscreen-inline.html = TIMEOUT
785 BUG16735 : media/media-fullscreen-not-in-document.html = TIMEOUT
786
787 // We haven't implemented the WebKit captioning extension.
788 BUG28301 : media/media-captions.html = TIMEOUT
789
790 // We haven't implemented reverse audio/video playback.
791 BUG33099 : media/video-reverse-play-duration.html = TIMEOUT
792 BUG33099 : media/video-timeupdate-reverse-play.html = TIMEOUT
793
794 // We haven't implemented video preloading and it passing is a false positive.
795 BUG16482 : media/video-preload.html = PASS FAIL
796
797 // We don't support dynamic fonts on Linux.
798 // Once we have the sandbox working, we should re-evaluate this.
799 BUG10278 LINUX : fast/css/font-face-implicit-local-font.html = FAIL
800 BUG10278 LINUX : fast/css/font-face-unicode-range.html = FAIL
801
802 // The v8 bindings allow shadowing of all properties on the global
803 // object.  If you use 'var prop = value' you will get a new variable
804 // named prop that shadows builtin properties on the global object.
805 // This behavior is consistent and I'm reluctant to make the massive
806 // change that would be needed to implement the inconsistent handling
807 // of this that KJS has (some properties can be shadowed and others
808 // can't).  This should have low priority.
809 // We currently match IE and the plan was to convince KJS to change
810 // post-beta, but the bug is here:
811 // https://bugs.webkit.org/show_bug.cgi?id=16644 , and it's unclear
812 // what the resolution was.
813 BUG10279 : fast/js/var-declarations-shadowing.html = FAIL
814
815 // Implement full JSON support in V8
816 BUG14885 SLOW : fast/js/JSON-parse.html = FAIL
817 BUG14885 SLOW : fast/js/JSON-stringify.html = FAIL
818 BUG14885 : fast/js/JSON-parse-reviver.html = FAIL
819 BUG14885 : fast/js/JSON-stringify-replacer.html = FAIL
820
821 // User stylesheets not currently supported by chrome.
822 // Webkit supports them by doing filesystem operations directly.
823 // This is disallowed in a sandboxed renderer. The test fails in
824 // test_shell.exe because the necessary filesystem stubs are notImplemented(),
825 // and would need to be proxied through the browser
826 BUG24199 : http/tests/security/local-user-CSS-from-remote.html = FAIL
827
828 // Implement CSS -webkit-font-smoothing property support.
829 BUG23270 WIN LINUX : fast/css/font-smoothing.html = FAIL
830
831 // Make canvas shadow work with drawImage.
832 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint-2.html = FAIL
833 BUG11153 WIN LINUX : fast/canvas/canvas-incremental-repaint.html = FAIL
834
835 // Repaint issues are revealed by these tests.
836 BUG28183 LINUX WIN : fast/repaint/box-shadow-v.html = IMAGE
837 // The difference of positions of texts after the list markers is NOT
838 // an issue. The behavior of the expectations was wrong. The real
839 // problem is the change of the 'p' in italic "properly". Note that
840 // upstream expectation image has the same issue.
841 BUG28183 WIN LINUX : fast/repaint/list-marker.html = IMAGE
842
843 BUG20507 : http/tests/uri/resolve-encoding-relative.html = FAIL
844
845
846 // Flaky: fails about 5% of the time.
847 BUG31342 WIN RELEASE : security/block-test-no-port.html = TEXT PASS
848
849 // Fails in debug. Windows used to be only flaky, but now fails consistently
850 // starting with the 52554->52633 merge.
851 BUG31363 DEBUG WIN LINUX : platform/chromium/fast/dom/interval.html = TEXT PASS
852
853 // -----------------------------------------------------------------
854 // SVG TESTS
855 // -----------------------------------------------------------------
856
857 // These are regressions from 1.0, but deemed DEFERable for 2.0.
858
859 BUG8763 LINUX WIN MAC : svg/custom/use-on-g-containing-foreignObject-and-image.svg = IMAGE
860
861 // We show reduced version of the entire SVN image rather than an image
862 BUG23463 MAC : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE
863 BUG23463 MAC : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE
864 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-symbol-01-b.svg = IMAGE+TEXT
865 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-use-01-t.svg = IMAGE+TEXT
866 BUG23463 WIN LINUX : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE+TEXT
867
868 // Merge 39744:39829 - regression
869 BUG10284 MAC : svg/custom/path-bad-data.svg = FAIL
870
871 // Merge 39744:39913? - regressions
872 BUG10286 LINUX : svg/W3C-SVG-1.1/animate-elem-02-t.svg = FAIL
873
874
875 // Bug in Skia, see https://bugs.webkit.org/show_bug.cgi?id=24534 .
876
877 // -----------------------------------------------------------------
878 // End SVG Regressions
879 // -----------------------------------------------------------------
880
881 // Selection wrong.
882 BUG10292 MAC LINUX : editing/selection/5354455-1.html = FAIL
883
884 // Compact support was removed from WebKit by Hyatt and layout tests rebaselined in r40259.
885
886 BUG10295 MAC : fast/dom/prototype-chain.html = FAIL
887
888 // Font differences, requiring overriden metrics, not a real bug, not fixing for Beta
889 BUG10296 MAC : fast/text/international/bidi-menulist.html = FAIL
890 BUG10296 LINUX : fast/transforms/transform-on-inline.html = FAIL
891 BUG10296 LINUX : fast/transforms/transform-table-row.html = FAIL
892 BUG10296 LINUX : svg/batik/paints/patternPreserveAspectRatioA.svg = FAIL
893 // Maybe need to be rebaselined - should be looked at in more detail.
894 BUG10296 LINUX : svg/custom/foreign-object-skew.svg = FAIL
895 BUG10296 LINUX : svg/batik/text/textLength.svg = FAIL
896
897 // No anti-aliasing on the text.
898 BUG10298 LINUX : svg/custom/use-on-disallowed-foreign-object-3.svg = FAIL
899
900 // The failures listed below have never passed in Chromium and need to be
901 // investigated, categorized, and (one hopes) fixed.
902
903 // These test fail full text diff (but not simplified diff) most likely due
904 // to differing implementations of SVG fonts. They may or may not represent
905 // real bugs which need fixin'
906
907 // There's no baseline at all for this!
908 BUG32392 SKIP : svg/batik/text/smallFonts.svg = FAIL
909
910 // The test is flaky and maybe platform-dependent.
911 BUG32401 LINUX WIN : svg/custom/marker-changes.svg = IMAGE+TEXT IMAGE
912
913 BUG32444 LINUX WIN : svg/hixie/text/003.html = FAIL
914
915 // SVG masks aren't quite working yet.
916 // Might also be related to https://bugs.webkit.org/show_bug.cgi?id=21910
917 // New tests. We should fix these, but they don't need to block the current release
918 BUG3244 LINUX WIN : fast/backgrounds/svg-as-mask.html = FAIL
919 BUG3244 WIN DEBUG : fast/backgrounds/animated-svg-as-mask.html = FAIL
920 BUG3244 SLOW WIN RELEASE : fast/backgrounds/animated-svg-as-mask.html = FAIL
921 BUG3244 LINUX : fast/backgrounds/animated-svg-as-mask.html = FAIL
922 // More tests that fail because of masks not working properly.
923 // New tests. We should fix these, but they don't need to block the current release
924 BUG3244 WIN LINUX : fast/backgrounds/mask-composite.html = FAIL
925 BUG3244 WIN LINUX : fast/backgrounds/repeat/mask-negative-offset-repeat.html = FAIL
926 // Marking this again as failed. This test failed even after rebaseline due to
927 // the fact that the font is not specified in the test and it seems that the
928 // test falls back on a different font locally than on the buildbot so the
929 // baseline is invalid. This might indicate a failure in our font fallback code
930 // or might be expected and that we should either go with the buildbot output
931 // or change the test upstream to specify explicitly what font to use.
932 // The mask part of this test is totally wrong.
933 BUG3244 WIN LINUX : fast/backgrounds/svg-as-background-6.html = FAIL
934
935 BUG10302 LINUX : svg/W3C-SVG-1.1/pservers-grad-10-b.svg = FAIL
936
937 BUG10303 LINUX : svg/custom/pattern-rotate.svg = FAIL
938
939 // I find it hard to care too much about SVG failures.
940 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-04-t.svg = FAIL
941 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-05-t.svg = FAIL
942 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-06-t.svg = FAIL
943 BUG10304 LINUX : svg/W3C-SVG-1.1/animate-elem-07-t.svg = FAIL
944 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-desc-02-t.svg = FAIL
945 BUG10304 LINUX : svg/W3C-SVG-1.1/interact-zoom-01-t.svg = FAIL
946 BUG10304 LINUX : svg/W3C-SVG-1.1/text-spacing-01-b.svg = FAIL
947 BUG10304 LINUX : svg/W3C-SVG-1.1/text-text-01-b.svg = FAIL
948 BUG10304 LINUX : svg/carto.net/slider.svg = FAIL
949 BUG10304 LINUX : svg/carto.net/textbox.svg = FAIL
950 BUG10304 LINUX : svg/carto.net/window.svg = FAIL
951 BUG10304 LINUX : svg/custom/coords-relative-units-transforms.svg = FAIL
952 BUG10304 LINUX : svg/custom/use-referencing-nonexisting-symbol.svg = FAIL
953 BUG10304 LINUX RELEASE : svg/hixie/perf/003.xml = FAIL
954 BUG10304 LINUX DEBUG : svg/hixie/perf/003.xml = FAIL
955 BUG10304 LINUX : svg/hixie/perf/004.xml = FAIL
956 BUG10304 LINUX : svg/hixie/perf/005.xml = FAIL
957 BUG10304 LINUX RELEASE : svg/hixie/perf/006.xml = FAIL
958 BUG10304 LINUX DEBUG : svg/hixie/perf/006.xml = FAIL
959 BUG10304 LINUX : svg/hixie/text/003b.xml = FAIL
960 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-01-t.svg = FAIL
961 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-02-t.svg = FAIL
962 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-03-b.svg = FAIL
963 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-04-b.svg = FAIL
964 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-05-t.svg = FAIL
965 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-06-t.svg = FAIL
966 BUG10304 LINUX : svg/W3C-SVG-1.1/fonts-elem-07-b.svg = FAIL
967 // Our gradients are wrong here.
968 BUG19559 WIN LINUX : svg/W3C-SVG-1.1/pservers-grad-08-b.svg = FAIL
969 BUG10304 LINUX : svg/carto.net/button.svg = FAIL
970
971 // Probably need to change the test upstream to describe it better and use no
972 // hard coded numbers.
973 BUG19897 WIN LINUX : svg/custom/getscreenctm-in-mixed-content2.xhtml = FAIL
974
975 BUG10306 LINUX : svg/carto.net/combobox.svg = FAIL
976
977 // Linux pixeltest failure: slightly different shade of composited
978 // alpha in bottom group.
979 BUG10310 LINUX : svg/W3C-SVG-1.1/masking-opacity-01-b.svg = FAIL
980
981 // Image mismatch since WebKit r49757.
982 // The difference is hard to tell, but our gradation is slightly different
983 // (blue is too strong on the gradation).
984 // Pixel dump was updated on upstream but our rendering did not change.
985 BUG25175 MAC : svg/custom/grayscale-gradient-mask.svg = IMAGE
986
987 // -----------------------------------------------------------------
988 // Accessibility layout tests
989 //
990 // In addition to WebCore, these are meant to exercise platform APIs
991 // (MSAA, NSAccessibility, ATK). Since we don't have access to these in the
992 // sandbox, making these tests pass involves faking interactions with these APIs
993 // and doesn't seem like a good use of our time.
994 // We DEFER or WONTFIX these, because we need to first identify a good
995 // testing strategy for Chromium accessibility. It is possible we won't use
996 // these at all.
997
998 BUG10322 DEFER SKIP : accessibility = PASS FAIL
999 BUG10322 DEFER SKIP : platform/mac/accessibility = PASS FAIL
1000 BUG10322 DEFER SKIP : platform/win/accessibility = PASS FAIL
1001
1002 // -----------------------------------------------------------------
1003 // Other failures
1004 // -----------------------------------------------------------------
1005
1006 // These fail the pixel tests in debug mode because they have
1007 // unpainted space (filled red in Debug but not in Release).
1008 // https://bugs.webkit.org/show_bug.cgi?id=8423
1009 BUG24204 WIN LINUX : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE+TEXT
1010
1011 // Fails on webkit windows as well.
1012 BUG24207 : fast/events/attempt-scroll-with-no-scrollbars.html = FAIL
1013
1014 // The test may require a proper version of Java 6 RC 10 plugin
1015 // installed to run.
1016 BUG10313 : plugins/bindings-test.html = FAIL
1017
1018 // No glyph for U+FFFD (Replacement Character : black diamond with
1019 // question mark) in them
1020 BUG10315 WIN : fast/encoding/invalid-UTF-8.html = FAIL
1021
1022 // V8 failures as a result of the WebKit merge.
1023 // http://code.google.com/p/v8/issues/detail?id=92
1024
1025 // v8: A setter that is added to a prototype after the inline cache is
1026 // recorded will not be called.
1027 BUG24209 : fast/js/pic/cached-prototype-setter.html = FAIL
1028
1029 // We have the wrong shadow for "This".
1030 // It appears we're not obeying the "transparent" fill color.
1031 BUG10317 LINUX : fast/css/shadow-multiple.html = FAIL
1032
1033 // Problems with getImageData and toDataURL.
1034 // This test requires us to do alpha blending exactly the way CG does it,
1035 // which Skia may never do (see bug).
1036 BUG22700 LINUX WIN : fast/canvas/canvas-getImageData.html = FAIL
1037
1038 // We're much closer now. To fully pass this we need encoders for jpg
1039 // and gif, which is a low priority.
1040 BUG10318 WIN LINUX : fast/canvas/toDataURL-supportedTypes.html = FAIL
1041
1042 // This test finishes while in the middle of a CSS animation. This is
1043 // intentional, but it makes pixel results unreliable.
1044 // http://bugs.webkit.org/show_bug.cgi?id=21491
1045 // CSS animations should not block our next release.
1046 BUG10320 WIN LINUX : transitions/opacity-transition-zindex.html = PASS FAIL
1047
1048 // Issue 3273: TextInputController::firstRectForCharacterRange not implemented.
1049 BUG3273 : editing/selection/move-left-right.html = FAIL
1050 BUG3273 MAC : platform/mac/editing/input/caret-primary-bidi.html = FAIL
1051 BUG3273 MAC : platform/mac/editing/input/firstrectforcharacterrange-plain.html = FAIL
1052 BUG3273 MAC : platform/mac/editing/input/range-for-empty-document.html = FAIL
1053 // WebKit 50358:50395
1054 BUG3273 : fast/text/international/thai-cursor-position.html = TEXT
1055 // WebKit roll 51512:51524
1056 BUG3273 : editing/selection/5825350-1.html = FAIL
1057 BUG3273 : editing/selection/5825350-2.html = FAIL
1058 BUG3273 : editing/selection/mixed-editability-10.html = FAIL
1059
1060 // Regression from the 41362:41402 merge.
1061 BUG8402 MAC : fast/forms/drag-out-of-textarea.html = FAIL
1062
1063 // GURL doesn't handle switching from standard URL to path URL correctly
1064 BUG27914 : fast/dom/HTMLAnchorElement/set-href-attribute-protocol.html = TEXT
1065
1066 // ----------------------------------------------------------------------------
1067 // NEW FOR THE MERGE
1068 //
1069 // These tests need to have their output inspected to make sure it's reasonable
1070 // and then baselined if necessary.
1071 // ----------------------------------------------------------------------------
1072
1073 // This test isn't hanging, it just takes 12-13 seconds to run.
1074 BUG30536 SLOW WIN LINUX : http/tests/misc/acid3.html = FAIL
1075 BUG30536 : http/tests/misc/favicon-as-image.html = FAIL
1076
1077 // Has failed for Chromium since it was first checked in.  (Lighttpd related?)
1078 BUG10323 WIN : http/tests/xmlhttprequest/xmlhttprequest-no-content-length-onProgress.html = FAIL
1079
1080 // Post-MERGE failures: these will all need to be fixed one day
1081
1082 // Linux pixeltest failure: caret is in the wrong place
1083 // Upstream WebKit also skips this test and Safari with latest WebKit shows
1084 // same behavior as Chromium. Not required for beta so marking as deferred.
1085 BUG10324 LINUX WIN : editing/selection/caret-rtl-2.html = IMAGE
1086
1087 // This test assumes we're using unix paths and looks for a file:///test
1088 // path.  We correctly return file:///C:/test on Windows.  We should fix
1089 // upstream
1090 // Expectations for this test changed upstream. We should fix this test, but
1091 // it doesn't need to block the current release
1092 BUG10325 WIN : fast/dom/resource-locations-in-created-html-document.html = FAIL
1093
1094 // GURL/KURL difference in handling of "http:".
1095 // New test. We should fix it, but it doesn't need to block the current release
1096 BUG7386 : http/tests/security/postMessage/invalid-origin-throws-exception.html = FAIL
1097
1098 // Linux pixeltest failure: Font mismatch
1099 BUG10327 LINUX : tables/mozilla_expected_failures/bugs/bug14007-2.html = FAIL
1100
1101 // On Linux, we don't seem to be getting Helvetica Bold for all cases.
1102 BUG10328 LINUX : fast/css/font-face-multiple-faces.html = FAIL
1103
1104 // Got flakey (both debug and release) around r3581 (ananta).
1105 // New test. We should fix it, but it doesn't need to block the current release
1106 BUG10329 WIN : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1107
1108 // Uses ahem font and expects line heights to match some pixel value.
1109 // We should be able to pass this -- not sure what's wrong.
1110 BUG10331 LINUX : css2.1/t1008-c44-ln-box-02-d-ag.html = FAIL
1111
1112 // Looks like we're failing the test -- there are red boogers in the box that should be all green.
1113 BUG10332 LINUX : css2.1/t1605-c545-txttrans-00-b-ag.html = FAIL
1114
1115 // Asks for "system" fonts, which we don't support at all.
1116 BUG10335 LINUX : fast/css/css2-system-fonts.html = FAIL
1117
1118 // Large fonts have different metrics.
1119 BUG10336 LINUX : fast/css/font-face-descriptor-multiple-values.html = FAIL
1120
1121 // Wants Helvetica, Monaco.  It's still testing something useful, but we may
1122 // need to check in a wrong-looking baseline.  Windows looks wrong too.
1123 BUG10337 LINUX : fast/css/font-face-locally-installed.html = FAIL
1124
1125 // Font metrics wrong, despite using Lucida Grande?
1126 BUG10338 LINUX : fast/events/updateLayoutForHitTest.html = FAIL
1127
1128 // Layout totally different -- wrong font selected?
1129 BUG10340 LINUX : fast/frames/viewsource-attribute.html = FAIL
1130
1131 // Linux flaky: sometimes I get scrollbars and sometimes not.
1132 BUG10341 LINUX : fast/lists/001.html = FAIL
1133
1134 // We fail to load a file URL with a port number -- how does this work on
1135 // Windows?
1136 BUG10342 LINUX MAC : fast/loader/file-URL-with-port-number.html = TIMEOUT
1137
1138 // Text doesn't display at all -- maybe we don't have the slow font
1139 // code enabled?
1140 BUG10343 LINUX : fast/text/atsui-kerning-and-ligatures.html = FAIL
1141 BUG10343 LINUX RELEASE : fast/text/atsui-partial-selection.html = FAIL
1142 BUG10343 LINUX : fast/text/atsui-small-caps-punctuation-size.html = FAIL
1143
1144 // Started timing out with agl's complext text change.  Page is verrry slow.
1145 BUG10343 SKIP LINUX : fast/text/large-text-composed-char.html = TIMEOUT FAIL
1146
1147 // Missing text -- slow font path unimplemented?
1148 BUG10344 LINUX : fast/text/should-use-atsui.html = FAIL
1149
1150 // We print to stderr when a failure happens while importing XSL;
1151 // should disable this in libxml.
1152 BUG10347 MAC : fast/xsl/transform-xhr-doc.xhtml = FAIL
1153
1154 // Linux pixeltest failure: Failing to apply style
1155 BUG10349 LINUX : fast/forms/select-style.html = FAIL
1156
1157 // Linux pixeltest failure: The text suggests that the radios should not
1158 // overlap, but it's very close and quite different from the Windows version
1159 BUG10350 LINUX : fast/replaced/width100percent-radio.html = FAIL
1160
1161 // These tests are marked as failing on Linux because they depend on QuickTime.
1162 // See the bug for more discussion.
1163 BUG15797 LINUX : fast/dom/object-embed-plugin-scripting.html = FAIL
1164 BUG15797 LINUX : plugins/embed-attributes-setting.html = FAIL
1165
1166 // Skip because we throw an exception before we get to dumpAsText.
1167 BUG10351 SKIP MAC : http/tests/plugins/geturlnotify-from-npp-destroystream.html = FAIL
1168 BUG10351 MAC : plugins/inner-html-display-none.html = FAIL
1169 BUG10351 MAC : plugins/mouse-events.html = FAIL
1170 // BUG10667 SLOW MAC RELEASE : plugins/iframe-shims.html = FAIL
1171
1172 // NEW FOR MERGE 36102:37604
1173
1174 BUG32184 : fast/js/arguments.html = FAIL
1175 // See bug http://code.google.com/p/chromium/issues/detail?id=7868,
1176 // not urgent for current release.
1177 BUG24227 : http/tests/plugins/local-geturl-from-remote.html = FAIL
1178
1179 // This test sometimes fails indefinitely, other times it takes 1-2 seconds.
1180 BUG14009 WIN : http/tests/misc/dns-prefetch-control.html = TIMEOUT PASS
1181
1182 // NEW FOR MERGE 37604:38097
1183 // This is a Safari specific test used to document the set of global
1184 // constructors they expose and the exact way they are printed.  Not
1185 // important - we might even want to ignore it.
1186 // New tests. We should fix these, but they doesn't need to block the current
1187 // release
1188 BUG10354 WIN LINUX : fast/layers/opacity-transforms.html = FAIL
1189
1190 // MERGE 38389:38450
1191 // Form submit causes invalid page reload/navigation when action is a named
1192 // anchor
1193 BUG10357 : fast/dom/cssTarget-crash.html = TIMEOUT PASS
1194
1195 // MERGE 38500:39550: New tests
1196 // Missing expected results
1197 BUG10358 SKIP MAC LINUX : animations/animation-drt-api.html = PASS
1198
1199 // New test. We should fix it, but it doesn't need to block the current release
1200 BUG10361 WIN : http/tests/misc/single-character-pi-stylesheet.xhtml = FAIL
1201
1202 // Windows is missing the green box. Started to pass in roll to WebKit r50313
1203 BUG8729 WIN DEBUG : http/tests/multipart/invalid-image-data.html = FAIL
1204 BUG8729 SLOW WIN RELEASE : http/tests/multipart/invalid-image-data.html = FAIL
1205 // Flaky on Linux dbg.
1206 BUG8729 LINUX DEBUG : http/tests/multipart/invalid-image-data.html = IMAGE PASS
1207
1208 // -----------------------------------------------------------------
1209 // MAC PORT TESTS
1210 // -----------------------------------------------------------------
1211
1212 //
1213 // *** TESTS TO WORK ON FIRST ***
1214 // These tests fail because of work that needs to be done in Mac TestShell to
1215 // bring it up to par with Win TestShell. These tests pass on Win and should
1216 // pass on Mac once we fix the bugs.
1217 //
1218
1219 // We've bucketed tests into groupings for why they're failing. Please try
1220 // to add new failures in the appropriate bucket.
1221
1222 // text fields wrong width
1223 BUG10363 MAC : tables/mozilla/bugs/bug53690-1.html = FAIL
1224 BUG10363 MAC : tables/mozilla/bugs/bug9024.html = FAIL
1225
1226 // we're waiting on upstreaming a change to how textarea padding works. rather
1227 // than rebasing, we'll wait for the upstream (which ojan said should happen
1228 // early in Jan 09).
1229 BUG10364 MAC : fast/css/resize-corner-tracking.html = FAIL
1230 BUG10364 MAC : http/tests/navigation/reload-subframe-object.html = FAIL
1231
1232 // bad key event handling
1233 BUG10366 MAC : fast/events/option-tab.html = FAIL
1234
1235 // selection
1236 BUG10369 MAC : editing/selection/5109817.html = FAIL
1237 BUG10369 LINUX : editing/selection/5354455-2.html = FAIL
1238
1239 // incorrect layout
1240 BUG10370 MAC : fast/css/font-weight-1.html = FAIL
1241
1242 // Not really sure why these are failing at the moment
1243 BUG10376 MAC : fast/dom/isindex-002.html = FAIL
1244
1245 // These two have a different object type in the dom dump. Plugin-related.
1246 // Ignored on Win/Linux because they rely on QT to provide a TIFF decoder.
1247 BUG10378 MAC : fast/images/embed-image.html = FAIL
1248 BUG10378 MAC : fast/images/object-image.html = FAIL
1249
1250 BUG10381 LINUX RELEASE : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1251 BUG10381 LINUX DEBUG : svg/W3C-SVG-1.1/animate-elem-03-t.svg = FAIL
1252
1253 // The following are flaky in that some times the timeout or crash, but we think
1254 // it is because of bugs in other parts of the code and not specific to what
1255 // these tests are doing.  The are being noted here so we can get the buildbots
1256 // green so new mac regressions are caught much quicker.
1257 // (there are a few others marked w/ multiple status like this in other parts of
1258 // the file, but they were left there as the comments in those areas are valid.)
1259 BUG10384 MAC SLOW : fast/dom/Window/new-window-opener.html = FAIL
1260 BUG10384 MAC : fast/forms/focus2.html = FAIL
1261
1262 BUG10399 MAC : fast/encoding/char-encoding-mac.html = FAIL
1263
1264 // Broken pixel tests
1265
1266 // Rebaselining needed because of scrollbars
1267 BUG23498 MAC : css1/cascade/cascade_order.html = IMAGE
1268 BUG23498 MAC : css1/classification/display.html = IMAGE
1269 BUG23498 MAC : css1/classification/list_style_type.html = IMAGE
1270 BUG23498 MAC : css1/classification/white_space.html = IMAGE
1271 BUG23498 MAC : css1/color_and_background/background.html = IMAGE
1272 BUG23498 MAC : css1/color_and_background/background_attachment.html = IMAGE
1273 BUG23498 MAC : css1/color_and_background/background_position.html = IMAGE
1274 BUG23498 MAC : css1/color_and_background/background_repeat.html = IMAGE
1275 BUG23498 MAC : css1/conformance/forward_compatible_parsing.html = IMAGE
1276 BUG23498 MAC : css1/font_properties/font.html = IMAGE
1277 // BUG23498 MAC : css1/font_properties/font_family.html = IMAGE
1278 BUG23498 MAC : css1/font_properties/font_size.html = IMAGE
1279 BUG23498 MAC : css1/font_properties/font_weight.html = IMAGE
1280 BUG23498 MAC : css1/formatting_model/floating_elements.html = IMAGE
1281 BUG23498 MAC : css1/formatting_model/height_of_lines.html = IMAGE
1282 BUG23498 MAC : css1/formatting_model/horizontal_formatting.html = IMAGE
1283 BUG23498 MAC : css1/formatting_model/inline_elements.html = IMAGE
1284 BUG23498 MAC : css1/formatting_model/replaced_elements.html = IMAGE
1285 BUG23498 MAC : css1/formatting_model/vertical_formatting.html = IMAGE
1286 BUG23498 MAC : css1/pseudo/anchor.html = IMAGE
1287 BUG23498 MAC : css1/pseudo/firstletter.html = IMAGE
1288 BUG23498 MAC : css1/pseudo/firstline.html = IMAGE
1289 BUG23498 MAC : css1/pseudo/multiple_pseudo_elements.html = IMAGE
1290 BUG23498 MAC : css1/text_properties/letter_spacing.html = IMAGE+TEXT IMAGE
1291 BUG23498 MAC : css1/text_properties/line_height.html = IMAGE
1292 BUG23498 MAC : css1/text_properties/text_decoration.html = IMAGE
1293 BUG23498 MAC : css1/text_properties/text_indent.html = IMAGE
1294 BUG23498 MAC : css1/text_properties/text_transform.html = IMAGE
1295 BUG23498 MAC : css1/text_properties/vertical_align.html = IMAGE
1296 BUG23498 MAC : css1/text_properties/word_spacing.html = IMAGE
1297 BUG23498 MAC : css1/units/color_units.html = IMAGE
1298 BUG23498 MAC : css1/units/length_units.html = IMAGE
1299 BUG23498 MAC : css2.1/t0803-c5502-mrgn-r-02-c.html = IMAGE
1300 BUG23498 MAC : css2.1/t0803-c5505-mrgn-02-c.html = IMAGE
1301 BUG23498 MAC : css2.1/t080301-c411-vt-mrgn-00-b.html = IMAGE
1302 BUG23498 MAC : css2.1/t0905-c5525-fltclr-00-c-ag.html = IMAGE
1303 BUG23498 MAC : css2.1/t0905-c5525-fltmrgn-00-c-ag.html = IMAGE
1304 BUG23498 MAC : css2.1/t0905-c5525-fltwidth-00-c-g.html = IMAGE
1305 BUG23498 MAC : css2.1/t0905-c5526-fltclr-00-c-ag.html = IMAGE
1306 BUG23498 MAC : css2.1/t1002-c5523-width-02-b-g.html = IMAGE
1307 BUG23498 MAC : css2.1/t1202-counters-08-b.html = IMAGE
1308 BUG23498 MAC : css2.1/t1202-counters-09-b.html = IMAGE
1309 BUG23498 MAC : css2.1/t140201-c535-bg-fixd-00-b-g.html = IMAGE
1310 BUG23498 MAC : css2.1/t140201-c537-bgfxps-00-c-ag.html = IMAGE
1311 BUG23498 MAC : css2.1/t1508-c527-font-07-b.html = IMAGE
1312 BUG23498 MAC : editing/deleting/delete-after-span-ws-001.html = IMAGE
1313 BUG23498 MAC : editing/deleting/delete-after-span-ws-002.html = IMAGE
1314 BUG23498 MAC : editing/deleting/delete-after-span-ws-003.html = IMAGE
1315 BUG23498 MAC : editing/deleting/delete-line-end-ws-001.html = IMAGE
1316 BUG23498 MAC : editing/deleting/delete-line-end-ws-002.html = IMAGE
1317 BUG23498 MAC : editing/inserting/insert-div-023.html = IMAGE
1318 BUG23498 MAC : editing/selection/focus_editable_html.html = IMAGE
1319 BUG23498 MAC : editing/selection/iframe.html = IMAGE
1320 BUG23498 MAC : editing/selection/select-all-001.html = IMAGE
1321 BUG23498 MAC : editing/selection/select-all-002.html = IMAGE
1322 BUG23498 MAC : editing/selection/select-all-003.html = IMAGE
1323 BUG23498 MAC : editing/selection/select-all-004.html = IMAGE
1324 BUG23498 MAC : editing/selection/unrendered-001.html = IMAGE
1325 // BUG23498 MAC : editing/selection/unrendered-002.html = IMAGE
1326 BUG23498 MAC : editing/selection/unrendered-003.html = IMAGE
1327 BUG23498 MAC : editing/selection/unrendered-004.html = IMAGE
1328 BUG23498 MAC : editing/selection/unrendered-005.html = IMAGE
1329 BUG23498 MAC : fast/backgrounds/background-inherit-color-bug.html = IMAGE
1330 BUG23498 MAC : fast/backgrounds/repeat/negative-offset-repeat-transformed.html = IMAGE
1331 BUG23498 MAC : fast/block/basic/016.html = IMAGE
1332 BUG23498 MAC : fast/block/basic/fieldset-stretch-to-legend.html = IMAGE
1333 BUG23498 MAC : fast/block/float/008.html = IMAGE
1334 BUG23498 MAC : fast/block/float/013.html = IMAGE
1335 BUG23498 MAC : fast/block/float/019.html = IMAGE
1336 BUG23498 MAC : fast/block/float/021.html = IMAGE
1337 BUG23498 MAC : fast/block/float/025.html = IMAGE
1338 BUG23498 MAC : fast/block/float/026.html = IMAGE
1339 BUG23498 MAC : fast/block/float/027.html = IMAGE
1340 BUG23498 MAC : fast/block/float/028.html = IMAGE
1341 BUG23498 MAC : fast/block/float/032.html = IMAGE
1342 BUG23498 MAC : fast/block/float/033.html = IMAGE
1343 BUG23498 MAC : fast/block/float/035.html = IMAGE
1344 // BUG23498 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1345 BUG23498 MAC : fast/block/float/br-with-clear-2.html = IMAGE
1346 // BUG23498 MAC : fast/block/float/float-avoidance.html = IMAGE
1347 BUG23498 MAC : fast/block/float/nested-clearance.html = IMAGE
1348 BUG23498 MAC : fast/block/float/relative-painted-twice.html = IMAGE
1349 BUG23498 MAC : fast/block/margin-collapse/103.html = IMAGE
1350 BUG23498 MAC : fast/block/margin-collapse/104.html = IMAGE
1351 BUG23498 MAC : fast/block/margin-collapse/empty-clear-blocks.html = IMAGE
1352 BUG23498 MAC : fast/block/positioning/047.html = IMAGE
1353 BUG23498 MAC : fast/block/positioning/051.html = IMAGE
1354 BUG23498 MAC : fast/block/positioning/055.html = IMAGE
1355 BUG23498 MAC : fast/block/positioning/auto/007.html = IMAGE
1356 BUG23498 MAC : fast/block/positioning/fixed-positioning-scrollbar-bug.html = IMAGE
1357 BUG23498 MAC : fast/block/positioning/negative-rel-position.html = IMAGE
1358 BUG23498 MAC : fast/block/positioning/relative-overflow-block.html = IMAGE
1359 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced-float.html = IMAGE
1360 BUG23498 MAC : fast/block/positioning/relative-overflow-replaced.html = IMAGE
1361 BUG23498 MAC : fast/body-propagation/overflow/001-xhtml.xhtml = IMAGE
1362 BUG23498 MAC : fast/body-propagation/overflow/001.html = IMAGE
1363 BUG23498 MAC : fast/body-propagation/overflow/005-declarative.xhtml = IMAGE
1364 BUG23498 MAC : fast/body-propagation/overflow/005-xhtml.xhtml = IMAGE
1365 BUG23498 MAC : fast/body-propagation/overflow/005.html = IMAGE
1366 // BUG23498 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1367 // BUG23498 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1368 BUG23498 MAC : fast/box-sizing/box-sizing.html = IMAGE
1369 BUG23498 MAC : fast/canvas/canvas-bg.html = IMAGE
1370 BUG23498 MAC : fast/canvas/canvas-text-alignment.html = IMAGE
1371 BUG23498 MAC : fast/canvas/image-object-in-canvas.html = IMAGE
1372 BUG23498 MAC : fast/css/005.html = IMAGE
1373 BUG23498 MAC : fast/css/MarqueeLayoutTest.html = IMAGE
1374 BUG23498 MAC : fast/css/border-height.html = IMAGE
1375 BUG23498 MAC : fast/css/empty-pseudo-class.html = IMAGE
1376 BUG23498 MAC : fast/css/first-child-pseudo-class.html = IMAGE
1377 BUG23498 MAC : fast/css/first-of-type-pseudo-class.html = IMAGE
1378 BUG23498 MAC : fast/css/hsl-color.html = IMAGE
1379 BUG9798 BUG23498 MAC : fast/css/last-child-pseudo-class.html = IMAGE FAIL
1380 BUG23498 MAC : fast/css/line-height-overflow.html = IMAGE
1381 BUG23498 MAC : fast/css/nested-floating-relative-position-percentages.html = IMAGE
1382 BUG23498 MAC : fast/css/only-child-pseudo-class.html = IMAGE
1383 BUG23498 MAC : fast/css/only-of-type-pseudo-class.html = IMAGE
1384 BUG23498 MAC : fast/css/percentage-non-integer.html = IMAGE
1385 // BUG23498 MAC : fast/css/shadow-multiple.html = IMAGE
1386 BUG23498 MAC : fast/css/text-overflow-ellipsis-strict.html = IMAGE
1387 BUG23498 MAC : fast/css/text-overflow-ellipsis.html = IMAGE
1388 BUG23498 MAC : fast/css/word-space-extra.html = IMAGE
1389 BUG23498 MAC : fast/css-generated-content/014.html = IMAGE
1390 BUG23498 MAC : fast/dom/focus-contenteditable.html = IMAGE
1391 BUG23498 MAC : fast/dynamic/008.html = IMAGE
1392 BUG23498 MAC : fast/dynamic/anchor-lock.html = IMAGE
1393 BUG23498 MAC : fast/dynamic/insert-before-table-part-in-continuation.html = IMAGE
1394 BUG23498 MAC : fast/encoding/utf-16-big-endian.html = IMAGE
1395 BUG23498 MAC : fast/encoding/utf-16-little-endian.html = IMAGE
1396 BUG23498 MAC : fast/events/autoscroll.html = IMAGE
1397 BUG23498 MAC : fast/events/pointer-events-2.html = IMAGE
1398 BUG23498 MAC : fast/events/reveal-link-when-focused.html = IMAGE
1399 BUG23498 MAC : fast/flexbox/016.html = IMAGE
1400 BUG23498 MAC : fast/flexbox/flex-hang.html = IMAGE
1401 BUG23498 MAC : fast/forms/fieldset-align.html = IMAGE
1402 BUG23498 MAC : fast/forms/form-hides-table.html = IMAGE
1403 BUG23498 MAC : fast/forms/input-table.html = IMAGE
1404 BUG23498 MAC : fast/forms/textAreaLineHeight.html = IMAGE
1405
1406 BUG23498 MAC : fast/frames/frame-scrolling-attribute.html = IMAGE
1407
1408 BUG23498 MAC : fast/frames/iframe-scrolling-attribute.html = IMAGE
1409 BUG23498 BUG26044 MAC RELEASE : fast/frames/invalid.html = IMAGE CRASH
1410 BUG23498 BUG26044 SLOW MAC DEBUG : fast/frames/invalid.html = IMAGE
1411 // BUG23498 MAC : fast/frames/onlyCommentInIFrame.html = IMAGE
1412 BUG23498 MAC DEBUG : fast/frames/valid.html = IMAGE
1413 BUG23498 MAC RELEASE : fast/frames/valid.html = IMAGE CRASH
1414 BUG23498 MAC : fast/gradients/background-clipped.html = IMAGE
1415 BUG23498 MAC : fast/images/pdf-as-image-landscape.html = IMAGE
1416 BUG23498 MAC : fast/inline/inline-borders-with-bidi-override.html = IMAGE
1417 BUG23498 MAC : fast/inline/inline-continuation-borders.html = IMAGE
1418 BUG23498 MAC : fast/inline/long-wrapped-line.html = IMAGE
1419 BUG23498 MAC : fast/inline-block/inline-block-vertical-align.html = IMAGE
1420 BUG23498 MAC : fast/layers/scroll-rect-to-visible.html = IMAGE
1421 BUG23498 MAC : fast/lists/001.html = IMAGE
1422 BUG23498 MAC : fast/lists/008.html = IMAGE
1423 BUG23498 MAC : fast/lists/alpha-list-wrap.html = IMAGE
1424 BUG23498 MAC : fast/lists/li-br.html = IMAGE
1425 // BUG23498 MAC : fast/lists/ol-start-parsing.html = IMAGE
1426 BUG23498 MAC : fast/lists/olstart.html = IMAGE
1427 BUG23498 MAC : fast/lists/w3-list-styles.html = IMAGE
1428 BUG23498 MAC : fast/multicol/column-rules-stacking.html = IMAGE
1429 BUG23498 MAC : fast/multicol/columns-shorthand-parsing.html = IMAGE
1430 BUG23498 MAC : fast/multicol/float-multicol.html = IMAGE
1431 // BUG23498 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1432 // BUG23498 MAC : fast/overflow/004.html = IMAGE
1433 BUG23498 MAC : fast/overflow/006.html = IMAGE
1434 BUG23498 MAC : fast/overflow/clip-rects-fixed-ancestor.html = IMAGE
1435 BUG23498 MAC : fast/overflow/overflow-auto-table.html = IMAGE
1436 BUG23498 MAC : fast/overflow/overflow-stacking.html = IMAGE
1437 BUG23498 MAC : fast/overflow/overflow-x-y.html = IMAGE
1438 // BUG23498 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1439 BUG23498 MAC : fast/overflow/scrollRevealButton.html = IMAGE
1440 BUG23498 MAC : fast/reflections/reflection-direction.html = IMAGE
1441 BUG23498 MAC : fast/replaced/005.html = IMAGE
1442 BUG23498 MAC : fast/replaced/width100percent-image.html = IMAGE
1443 BUG23498 MAC : fast/selectors/166.html = IMAGE
1444 BUG23498 MAC : fast/table/023.html = IMAGE
1445 BUG23498 MAC : fast/table/034.html = IMAGE
1446 BUG23498 MAC : fast/table/040.html = IMAGE
1447 BUG23498 MAC : fast/table/border-collapsing/004.html = IMAGE
1448 BUG23498 MAC : fast/table/empty-cells.html = IMAGE
1449 BUG23498 MAC : fast/table/frame-and-rules.html = IMAGE
1450 BUG23498 MAC : fast/table/height-percent-test.html = IMAGE
1451 BUG23498 MAC : fast/table/overflowHidden.html = IMAGE
1452 BUG23498 MAC : fast/table/prepend-in-anonymous-table.html = IMAGE
1453 BUG23498 MAC : fast/table/wide-colspan.html = IMAGE
1454 BUG23498 MAC : fast/table/wide-column.html = IMAGE
1455 BUG23498 MAC : fast/text/capitalize-boundaries.html = IMAGE
1456 BUG23498 MAC : fast/text/international/bidi-neutral-run.html = IMAGE
1457 BUG23498 MAC : fast/text/international/thai-line-breaks.html = IMAGE
1458 BUG23498 MAC : fast/text/large-text-composed-char.html = IMAGE
1459 BUG23498 MAC : fast/text/softHyphen.html = IMAGE
1460 BUG23498 MAC : fast/text/wbr.html = IMAGE
1461 BUG23498 MAC : fast/text/whitespace/024.html = IMAGE
1462 BUG23498 MAC : fast/text/whitespace/pre-wrap-spaces-after-newline.html = IMAGE
1463 BUG23498 MAC : fast/text/word-break.html = IMAGE
1464 BUG23498 MAC DEBUG : fonts/cursive.html = IMAGE IMAGE+TEXT
1465 BUG23498 MAC RELEASE : fonts/cursive.html = IMAGE
1466 BUG23498 MAC : fonts/default.html = IMAGE
1467 BUG23498 MAC : fonts/fantasy.html = IMAGE
1468 BUG23498 MAC : fonts/monospace.html = IMAGE
1469 BUG23498 MAC : fonts/sans-serif.html = IMAGE
1470 BUG23498 MAC : fonts/serif.html = IMAGE
1471 BUG23498 MAC : http/tests/navigation/anchor-frames.html = IMAGE
1472 BUG9798 BUG23498 MAC DEBUG : http/tests/navigation/error404-frames.html = TIMEOUT IMAGE
1473 BUG9798 BUG23498 MAC RELEASE : http/tests/navigation/error404-frames.html = IMAGE
1474 BUG23498 MAC : http/tests/navigation/error404-subframeload.html = IMAGE
1475 // BUG23498 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1476 BUG23498 MAC DEBUG : http/tests/navigation/post-frames.html = IMAGE TIMEOUT
1477 BUG23498 MAC RELEASE : http/tests/navigation/post-frames.html = IMAGE
1478 BUG23498 MAC : http/tests/navigation/postredirect-frames.html = IMAGE
1479 BUG23498 MAC : svg/custom/altglyph.svg = IMAGE
1480 BUG23498 MAC : svg/hixie/links/003-broken.xml = IMAGE
1481 BUG23498 MAC : svg/text/multichar-glyph.svg = IMAGE
1482 BUG23498 MAC : tables/mozilla/bugs/bug101674.html = IMAGE
1483 BUG23498 MAC : tables/mozilla/bugs/bug10269-2.html = IMAGE
1484 BUG23498 MAC : tables/mozilla/bugs/bug10296-1.html = IMAGE
1485 BUG23498 MAC : tables/mozilla/bugs/bug1055-1.html = IMAGE
1486 BUG23498 MAC : tables/mozilla/bugs/bug113235-1.html = IMAGE
1487 BUG23498 MAC : tables/mozilla/bugs/bug113235-3.html = IMAGE
1488 BUG23498 MAC : tables/mozilla/bugs/bug11944.html = IMAGE
1489 BUG23498 MAC : tables/mozilla/bugs/bug120364.html = IMAGE
1490 BUG23498 MAC : tables/mozilla/bugs/bug1302.html = IMAGE
1491 BUG23498 MAC : tables/mozilla/bugs/bug131020.html = IMAGE
1492 BUG23498 MAC : tables/mozilla/bugs/bug131020_iframe.html = IMAGE
1493 BUG23498 MAC : tables/mozilla/bugs/bug137388-2.html = IMAGE
1494 BUG23498 MAC : tables/mozilla/bugs/bug22019.html = IMAGE
1495 BUG23498 MAC : tables/mozilla/bugs/bug23151.html = IMAGE
1496 BUG23498 MAC : tables/mozilla/bugs/bug2479-1.html = IMAGE
1497 BUG23498 MAC : tables/mozilla/bugs/bug2479-3.html = IMAGE
1498 BUG23498 MAC : tables/mozilla/bugs/bug2479-4.html = IMAGE
1499 BUG23498 MAC : tables/mozilla/bugs/bug27038-2.html = IMAGE
1500 BUG23498 MAC : tables/mozilla/bugs/bug29314.html = IMAGE
1501 BUG23498 MAC : tables/mozilla/bugs/bug2947.html = IMAGE
1502 BUG23498 MAC : tables/mozilla/bugs/bug32205-2.html = IMAGE
1503 BUG23498 MAC : tables/mozilla/bugs/bug38916.html = IMAGE
1504 BUG23498 MAC : tables/mozilla/bugs/bug3977.html = IMAGE
1505 BUG23498 MAC : tables/mozilla/bugs/bug43039.html = IMAGE
1506 BUG23498 MAC : tables/mozilla/bugs/bug43854-1.html = IMAGE
1507 BUG23498 MAC : tables/mozilla/bugs/bug44505.html = IMAGE
1508 BUG23498 MAC : tables/mozilla/bugs/bug46480-1.html = IMAGE
1509 BUG23498 MAC : tables/mozilla/bugs/bug46480-2.html = IMAGE
1510 BUG23498 MAC : tables/mozilla/bugs/bug50695-1.html = IMAGE
1511 BUG23498 MAC : tables/mozilla/bugs/bug56405.html = IMAGE
1512 BUG23498 MAC : tables/mozilla/bugs/bug5797.html = IMAGE
1513 BUG23498 MAC : tables/mozilla/bugs/bug5835.html = IMAGE
1514 BUG23498 MAC : tables/mozilla/bugs/bug625.html = IMAGE
1515 BUG23498 MAC : tables/mozilla/bugs/bug650.html = IMAGE
1516 BUG23498 MAC : tables/mozilla/bugs/bug67915-1.html = IMAGE
1517 BUG23498 MAC : tables/mozilla/bugs/bug7112-1.html = IMAGE
1518 BUG23498 MAC : tables/mozilla/bugs/bug7112-2.html = IMAGE
1519 BUG23498 MAC : tables/mozilla/bugs/bug73321.html = IMAGE
1520 BUG23498 MAC : tables/mozilla/bugs/bug92143.html = IMAGE
1521 BUG23498 MAC : tables/mozilla/bugs/bug96334.html = IMAGE
1522 BUG23498 MAC : tables/mozilla/bugs/bug96343.html = IMAGE
1523 BUG23498 MAC : tables/mozilla/collapsing_borders/bug41262-3.html = IMAGE
1524 BUG23498 MAC : tables/mozilla/core/bloomberg.html = IMAGE
1525 BUG23498 MAC : tables/mozilla/core/captions.html = IMAGE
1526 BUG23498 MAC : tables/mozilla/core/cell_heights.html = IMAGE
1527 BUG23498 MAC : tables/mozilla/core/col_widths_auto_fix.html = IMAGE
1528 BUG23498 MAC : tables/mozilla/core/col_widths_fix_fixPer.html = IMAGE
1529 BUG23498 MAC : tables/mozilla/core/nested1.html = IMAGE
1530 BUG23498 MAC : tables/mozilla/core/one_row.html = IMAGE
1531 BUG23498 MAC : tables/mozilla/core/row_span.html = IMAGE
1532 BUG23498 MAC : tables/mozilla/marvin/backgr_index.html = IMAGE
1533 BUG23498 MAC : tables/mozilla/marvin/backgr_layers-opacity.html = IMAGE
1534 BUG23498 MAC : tables/mozilla/marvin/backgr_position-table.html = IMAGE
1535 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-cell.html = IMAGE
1536 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column-group.html = IMAGE
1537 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
1538 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row-group.html = IMAGE
1539 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
1540 BUG23498 MAC : tables/mozilla/marvin/backgr_simple-table.html = IMAGE
1541 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_name.xml = IMAGE
1542 BUG23498 MAC : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
1543 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_name.xml = IMAGE
1544 BUG23498 MAC : tables/mozilla/marvin/x_td_bgcolor_rgb.xml = IMAGE
1545 BUG23498 MAC : tables/mozilla/marvin/x_td_height.xml = IMAGE
1546 BUG23498 MAC : tables/mozilla/marvin/x_td_nowrap.xml = IMAGE
1547 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_name.xml = IMAGE
1548 BUG23498 MAC : tables/mozilla/marvin/x_th_bgcolor_rgb.xml = IMAGE
1549 BUG23498 MAC : tables/mozilla/marvin/x_th_height.xml = IMAGE
1550 BUG23498 MAC : tables/mozilla/marvin/x_th_nowrap.xml = IMAGE
1551 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_name.xml = IMAGE
1552 BUG23498 MAC : tables/mozilla/marvin/x_tr_bgcolor_rgb.xml = IMAGE
1553 BUG23498 MAC : tables/mozilla/other/cell_widths.html = IMAGE
1554 BUG23498 MAC : tables/mozilla/other/nestedTables.html = IMAGE
1555 BUG23498 MAC : tables/mozilla/other/test3.html = IMAGE
1556 BUG23498 MAC : tables/mozilla/other/test6.html = IMAGE
1557 BUG23498 MAC : tables/mozilla/other/wa_table_thtd_rowspan.html = IMAGE
1558 BUG23498 MAC : tables/mozilla/other/wa_table_tr_align.html = IMAGE
1559 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
1560 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug101759.html = IMAGE
1561 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug10216.html = IMAGE
1562 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
1563 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
1564 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug131020-3.html = IMAGE
1565 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-1.html = IMAGE
1566 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug14007-2.html = IMAGE
1567 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug19526.html = IMAGE
1568 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug220653.html = IMAGE
1569 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
1570 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
1571 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug32205-1.html = IMAGE
1572 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug67915-2.html = IMAGE
1573 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
1574 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug85016.html = IMAGE
1575 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug89315.html = IMAGE
1576 BUG23498 MAC : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
1577 BUG23498 BUG32193 MAC : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE IMAGE+TEXT
1578 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1579 // BUG23498 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1580 BUG23498 MAC : tables/mozilla_expected_failures/core/captions3.html = IMAGE
1581 BUG23498 MAC : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
1582 BUG23498 MAC : tables/mozilla_expected_failures/core/columns.html = IMAGE
1583 BUG23498 MAC : tables/mozilla_expected_failures/core/conflicts.html = IMAGE
1584 BUG23498 MAC : tables/mozilla_expected_failures/core/standards1.html = IMAGE
1585 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-cell.html = IMAGE
1586 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column-group.html = IMAGE
1587 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-column.html = IMAGE
1588 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-quirks.html = IMAGE
1589 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
1590 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table-row.html = IMAGE
1591 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_border-table.html = IMAGE
1592 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_fixed-bg.html = IMAGE
1593 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-hide.html = IMAGE
1594 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_layers-show.html = IMAGE
1595 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
1596 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
1597 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-column.html = IMAGE
1598 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row-group.html = IMAGE
1599 BUG23498 MAC : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
1600 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
1601 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_tbody.html = IMAGE
1602 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_row_sibling.html = IMAGE
1603 BUG23498 MAC : tables/mozilla_expected_failures/marvin/table_overflow_style_reflow_tbody_sibling.html = IMAGE
1604 BUG23498 MAC : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
1605 BUG23498 MAC : tables/mozilla_expected_failures/other/test4.html = IMAGE+TEXT IMAGE
1606
1607 // Missing "misspelled-word" dotted underline
1608 BUG23497 MAC : editing/selection/unrendered-002.html = IMAGE
1609 BUG23497 MAC : editing/spelling/spellcheck-attribute.html = IMAGE
1610
1611 // Widget location is just slightly off
1612 BUG23496 MAC : css1/box_properties/acid_test.html = IMAGE
1613 BUG23496 MAC : css2.1/t09-c5526c-display-00-e.html = IMAGE
1614 BUG23496 MAC : fast/block/basic/011.html = IMAGE
1615 BUG23496 MAC : fast/forms/001.html = IMAGE
1616 BUG23496 MAC : fast/forms/basic-inputs.html = IMAGE
1617 // BUG23496 MAC : fast/forms/box-shadow-override.html = IMAGE
1618 BUG23496 MAC : fast/forms/checkbox-radio-onchange.html = IMAGE
1619 BUG23496 MAC : fast/forms/file-input-disabled.html = IMAGE+TEXT
1620 BUG23496 MAC : fast/forms/form-element-geometry.html = IMAGE+TEXT
1621 BUG23496 MAC : fast/forms/formmove.html = IMAGE
1622 // Recently became crashy. See http://crbug.com/24721
1623 BUG23496 MAC : fast/forms/formmove2.html = IMAGE
1624 BUG23496 MAC : fast/forms/indeterminate.html = IMAGE
1625 BUG23496 MAC : fast/forms/input-appearance-height.html = IMAGE+TEXT
1626 BUG23496 MAC : fast/forms/input-value.html = IMAGE+TEXT
1627 // BUG23496 MAC : fast/forms/menulist-narrow-width.html = IMAGE
1628 BUG23496 MAC : fast/forms/menulist-no-overflow.html = IMAGE
1629 BUG23496 MAC : fast/forms/radio-attr-order.html = IMAGE
1630 BUG23496 MAC : fast/forms/radio-nested-labels.html = IMAGE
1631 BUG23496 MAC : fast/forms/radio_checked.html = IMAGE
1632 BUG23496 MAC : fast/forms/radio_checked_dynamic.html = IMAGE
1633 // BUG23496 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1634 BUG23496 MAC : fast/inline/positionedLifetime.html = IMAGE
1635 BUG23496 MAC : fast/parser/bad-xml-slash.html = IMAGE
1636 BUG23496 MAC : fast/replaced/replaced-breaking.html = IMAGE
1637 BUG23496 MAC : fast/replaced/width100percent-checkbox.html = IMAGE
1638 BUG23496 MAC : fast/replaced/width100percent-radio.html = IMAGE
1639 BUG23496 MAC DEBUG : fast/text/textIteratorNilRenderer.html = IMAGE
1640 BUG23496 SLOW MAC RELEASE : fast/text/textIteratorNilRenderer.html = IMAGE
1641 BUG23496 MAC : fast/text/whitespace/normal-after-nowrap-breaking.html = IMAGE
1642 BUG23496 MAC : http/tests/navigation/javascriptlink-frames.html = IMAGE
1643 BUG23496 MAC : tables/mozilla/bugs/bug1318.html = IMAGE
1644 BUG23496 MAC : tables/mozilla/bugs/bug4527.html = IMAGE
1645 BUG23496 MAC : tables/mozilla_expected_failures/core/captions1.html = IMAGE
1646 BUG23496 MAC : tables/mozilla_expected_failures/core/captions2.html = IMAGE
1647
1648 // Big button widgets are broken
1649 BUG23495 MAC : fast/forms/basic-buttons.html = IMAGE
1650 BUG23495 MAC : fast/forms/box-shadow-override.html = IMAGE+TEXT
1651 BUG23495 MAC : fast/forms/button-sizes.html = IMAGE
1652
1653 // Text declared as "monospace" with no size is bigger in Chromium
1654 BUG23494 MAC : css1/font_properties/font_family.html = IMAGE
1655 BUG23494 MAC : css2.1/t1503-c522-font-family-00-b.html = IMAGE
1656 BUG23494 MAC : fast/text/monospace-width-cache.html = IMAGE
1657
1658 // Broken upstream? Layout test should write a "PASS" or "FAIL" line; upstream has neither (ours is "PASS")
1659 BUG23492 MAC : fast/frames/frame-src-attribute.html = IMAGE
1660
1661 // Actual is just slightly off in color than expected
1662 BUG23488 MAC RELEASE : fast/backgrounds/size/backgroundSize15.html = IMAGE
1663 BUG23488 MAC DEBUG SLOW : fast/backgrounds/size/backgroundSize15.html = IMAGE
1664 BUG23488 MAC : fast/block/float/avoidance-percent-width-strict.html = IMAGE
1665 BUG23488 MAC : fast/block/float/float-avoidance.html = IMAGE
1666 BUG23488 MAC : fast/borders/border-image-rotate-transform.html = IMAGE
1667 BUG23488 MAC : fast/borders/inline-mask-overlay-image.html = IMAGE
1668 BUG23488 MAC : fast/box-shadow/basic-shadows.html = IMAGE
1669 BUG23488 MAC : fast/box-shadow/inset.html = IMAGE
1670 BUG23488 MAC : fast/canvas/canvas-incremental-repaint-2.html = IMAGE
1671 BUG23488 MAC : fast/css/shadow-multiple.html = IMAGE
1672 BUG23488 MAC : fast/forms/search-vertical-alignment.html = IMAGE
1673 BUG23488 MAC : fast/frames/content-opacity-1.html = IMAGE
1674 BUG23488 MAC : fast/frames/content-opacity-2.html = IMAGE
1675 BUG23488 MAC : fast/layers/add-layer-with-nested-stacking.html = IMAGE
1676 BUG23488 MAC : fast/layers/inline-dirty-z-order-lists.html = IMAGE
1677 BUG23488 MAC : fast/layers/layer-content-visibility-change.html = IMAGE
1678 BUG23488 MAC : fast/layers/remove-layer-with-nested-stacking.html = IMAGE
1679 BUG23488 MAC : fast/lists/ol-start-parsing.html = IMAGE
1680 BUG23488 MAC : fast/multicol/positioned-with-constrained-height.html = IMAGE
1681 BUG23488 MAC : fast/overflow/position-fixed-transform-clipping.html = IMAGE
1682 BUG23488 MAC : fast/text/shadow-no-blur.html = IMAGE
1683 BUG23488 MAC : fast/text/shadow-translucent-fill.html = IMAGE
1684 BUG23488 MAC : svg/transforms/animated-path-inside-transformed-html.xhtml = IMAGE
1685 BUG23488 MAC : tables/mozilla_expected_failures/bugs/bug178855.xml = IMAGE
1686
1687 // Looks the same to me... huh. Variation of above?
1688 BUG23489 MAC : fast/table/empty-section-crash.html = IMAGE
1689
1690 // Various drawing tests that are broken
1691 BUG23477 MAC : fast/backgrounds/bgCompositeCopy.html = IMAGE
1692 BUG23477 MAC : fast/canvas/canvas-as-image-incremental-repaint.html = IMAGE
1693 BUG23477 MAC : fast/canvas/canvas-incremental-repaint.html = IMAGE
1694 BUG23477 MAC : fast/canvas/fill-stroke-clip-reset-path.html = IMAGE
1695 BUG23477 MAC : fast/dynamic/containing-block-change.html = IMAGE
1696
1697 // Unexpected gray
1698 BUG23476 MAC : fast/forms/hidden-listbox.html = IMAGE
1699 BUG23476 MAC : fast/forms/listbox-clip.html = IMAGE
1700 BUG23476 MAC : fast/frames/inline-object-inside-frameset.html = IMAGE
1701 BUG23476 MAC : fast/overflow/hidden-scrollbar-resize.html = IMAGE
1702 BUG23476 MAC : fast/text/font-initial.html = IMAGE
1703
1704 // Missing corner resize image
1705 BUG22777 MAC : fast/css/resize-corner-tracking-transformed.html = IMAGE+TEXT
1706 BUG22777 MAC : fast/overflow/hit-test-overflow-controls.html = IMAGE+TEXT
1707
1708 // Disagreeing XML parsing error messages
1709 BUG23475 MAC : fast/invalid/missing-end-tag.xhtml = IMAGE
1710 BUG23475 MAC : fast/parser/xhtml-alternate-entities.xml = IMAGE
1711 BUG23475 MAC : fast/xsl/xslt-extra-content-at-end.xml = IMAGE
1712
1713 // 116/136 of the repaint tests fail due to invalidation that doesn't match; further triage necessary
1714 BUG23473 MAC : fast/repaint = IMAGE
1715 BUG23473 MAC : fast/repaint/block-no-inflow-children.html = PASS
1716 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache.html = PASS
1717 BUG23473 MAC : fast/repaint/block-selection-gap-stale-cache-2.html = PASS
1718 BUG23473 MAC : fast/repaint/box-shadow-h.html = PASS
1719 BUG23473 MAC : fast/repaint/box-shadow-v.html = PASS
1720 BUG23473 MAC : fast/repaint/caret-outside-block.html = PASS
1721 BUG23473 MAC : fast/repaint/fixed.html = PASS
1722 BUG23473 MAC : fast/repaint/fixed-move-after-keyboard-scroll.html = PASS
1723 BUG23473 MAC : fast/repaint/fixed-tranformed.html = PASS
1724 BUG23473 MAC : fast/repaint/flexible-box-overflow.html = PASS
1725 BUG23473 MAC : fast/repaint/flexible-box-overflow-horizontal.html = PASS
1726 BUG23473 MAC : fast/repaint/float-new-in-block.html = PASS
1727 BUG23473 MAC : fast/repaint/focus-layers.html = PASS
1728 BUG23473 MAC : fast/repaint/focus-ring.html = PASS
1729 BUG23473 MAC : fast/repaint/inline-block-overflow.html = PASS
1730 BUG23473 MAC : fast/repaint/layer-child-outline.html = PASS
1731 BUG23473 MAC : fast/repaint/layer-outline.html = PASS
1732 BUG23473 MAC : fast/repaint/layer-outline-horizontal.html = PASS
1733 BUG23473 MAC : fast/repaint/layout-state-scrolloffset.html = PASS
1734 BUG23473 MAC : fast/repaint/layout-state-scrolloffset2.html = PASS
1735 BUG23473 MAC : fast/repaint/layout-state-scrolloffset3.html = PASS
1736 BUG23473 MAC : fast/repaint/line-flow-with-floats-1.html = PASS
1737 BUG23473 MAC : fast/repaint/line-flow-with-floats-10.html = PASS
1738 BUG23473 MAC : fast/repaint/line-flow-with-floats-2.html = PASS
1739 BUG23473 MAC : fast/repaint/line-flow-with-floats-3.html = PASS
1740 BUG23473 MAC : fast/repaint/line-flow-with-floats-4.html = PASS
1741 BUG23473 MAC : fast/repaint/line-flow-with-floats-5.html = PASS
1742 BUG23473 MAC : fast/repaint/line-flow-with-floats-6.html = PASS
1743 BUG23473 MAC : fast/repaint/line-flow-with-floats-7.html = PASS
1744 BUG23473 MAC : fast/repaint/line-flow-with-floats-8.html = PASS
1745 BUG23473 MAC : fast/repaint/line-flow-with-floats-9.html = PASS
1746 BUG23473 MAC : fast/repaint/list-marker.html = PASS
1747 BUG23473 MAC : fast/repaint/moving-shadow-on-path.html = PASS
1748 BUG23473 MAC : fast/repaint/overflow-scroll-body-appear.html = PASS
1749 BUG23473 MAC : fast/repaint/positioned-document-element.html = PASS
1750 BUG23473 MAC : fast/repaint/repaint-during-scroll.html = PASS
1751 BUG23473 MAC : fast/repaint/selection-gap-overflow-scroll-2.html = PASS
1752 BUG23473 MAC : fast/repaint/shadow-multiple-horizontal.html = PASS
1753 BUG23473 MAC : fast/repaint/shadow-multiple-strict-horizontal.html = PASS
1754 BUG23473 MAC : fast/repaint/shadow-multiple-strict-vertical.html = PASS
1755 BUG23473 MAC : fast/repaint/shadow-multiple-vertical.html = PASS
1756 BUG23473 MAC : fast/repaint/table-cell-vertical-overflow.html = PASS
1757 BUG23473 MAC : fast/repaint/text-shadow.html = PASS
1758 BUG23473 MAC : fast/repaint/text-shadow-horizontal.html = PASS
1759
1760 // Thicker shadow than expected
1761 BUG23471 MAC : fast/text/stroking.html = IMAGE
1762
1763 // SVG foreign object skew off by a lot
1764 BUG23466 MAC : svg/custom/foreign-object-skew.svg = IMAGE
1765
1766 // Missing baselines
1767 // BUG23557 MAC : fast/text/text-letter-spacing.html = IMAGE
1768
1769 // Failing on the bots but not locally; need investigation
1770 BUG23560 MAC : fast/images/animated-svg-as-image.html = IMAGE PASS
1771
1772 // -----------------------------------------------------------------
1773 // END MAC PORT TESTS
1774 // -----------------------------------------------------------------
1775
1776 // Linux pixeltest failure: alpha=0.5 red (1,0,0) atop yellow (1,1,0) is
1777 // coming out with with a slightly-less-than-100% red channel. This test fails
1778 // because we enforce non-transparent color in Font::drawGlyphs.
1779 BUG24191 LINUX : fast/css/hsla-color.html = FAIL
1780
1781 // Linux checksum computation produces results, different from Windows or upstream.
1782 BUG21386 LINUX : fast/repaint/erase-overflow.html = FAIL
1783 BUG21386 LINUX : fast/repaint/inline-block-resize.html = FAIL
1784 BUG21386 LINUX : fast/repaint/inline-overflow.html = FAIL
1785 BUG21386 LINUX : fast/repaint/invisible-objects.html = FAIL
1786 BUG21386 LINUX : fast/repaint/layer-full-repaint.html = FAIL
1787 BUG21386 LINUX : fast/repaint/layer-hide-when-needs-layout.html = FAIL
1788 BUG21386 LINUX : fast/repaint/layer-visibility.html = FAIL
1789 BUG21386 LINUX : fast/repaint/overflow-clip-subtree-layout.html = FAIL
1790 BUG21386 LINUX : fast/repaint/subtree-root-clip-2.html = FAIL
1791 BUG21386 LINUX : fast/repaint/subtree-root-clip-3.html = FAIL
1792 BUG21386 LINUX : fast/repaint/subtree-root-clip.html = FAIL
1793 BUG21386 LINUX : fast/repaint/table-col-background.html = FAIL
1794 BUG21386 LINUX : fast/repaint/table-row.html = FAIL
1795 BUG21386 LINUX : fast/repaint/table-section-overflow.html = FAIL
1796 BUG21386 LINUX : fast/layers/layer-content-visibility-change.html = FAIL
1797 BUG21386 LINUX : fast/repaint/table-cell-overflow.html = FAIL
1798
1799 // TODO(tc): flaky.
1800 BUG10391 LINUX : fast/events/5056619.html = FAIL
1801
1802 // Failed with r6844 (dglazkov)
1803 BUG10392 LINUX MAC : http/tests/navigation/error404-goback.html = FAIL
1804
1805 // Skipped as this tests window.sessionStorage, which we don't
1806 // support. Enable once we turn on DOM_STORAGE.
1807 BUG4360 SKIP : http/tests/navigation/post-goback-repost-policy.html = TIMEOUT
1808
1809 // Merge 39309:39335 Regressions (RenderButton::setupInnerStyle regression).
1810 BUG5737 LINUX : fast/forms/001.html = FAIL
1811 BUG5737 LINUX : fast/forms/input-first-letter.html = FAIL
1812
1813 // The (x) in type=search inputs appears to be slightly broken.  This test will also need a rebaseline.
1814 BUG20439 WIN LINUX : fast/forms/search-transformed.html = FAIL
1815
1816 // Linux's rotated text output looks terrible.
1817 BUG10397 LINUX : fast/transforms/transformed-document-element.html = FAIL
1818
1819 // Merge 39744:39913? - regressions
1820 BUG10403 LINUX : svg/custom/animate-path-morphing.svg = FAIL
1821
1822 // might need to be rebaselined in win, 'DRAFT' rendering incorrect before
1823 BUG10405 WIN : svg/custom/struct-use-09-b.svg = FAIL
1824
1825 // New tests added in http://trac.webkit.org/changeset/40424
1826 // Renders the width of "600" off by 3.  Looks OK but could still be a bug
1827 // that we shouldn't rebaseline.
1828 BUG10417 LINUX : svg/W3C-SVG-1.1/text-fonts-02-t.svg = FAIL
1829
1830 // New test. We should fix it, but it doesn't need to block the current release
1831 BUG10418 SLOW MAC RELEASE : fast/events/click-count.html = PASS
1832 BUG10418 WIN DEBUG : animations/change-keyframes-name.html = FAIL PASS
1833
1834 // TODO(dsh): These started to fail after r9202.
1835 BUG10419 LINUX : svg/W3C-SVG-1.1/text-path-01-b.svg = FAIL
1836
1837 // We could fix this test for us and upstream it if the test shell user agent
1838 // would let us differentiate test_shell and WebKit DumpTreeNode.
1839 BUG7482 LINUX MAC : http/tests/misc/timer-vs-loading.html = TIMEOUT
1840 BUG7482 WIN : http/tests/misc/timer-vs-loading.html = PASS TIMEOUT
1841
1842 // Regressions from WebKit merge 40722:40785
1843 // Misc failures:
1844 // New test. We should fix it, but it doesn't need to block the current release
1845 BUG10420 LINUX : svg/W3C-SVG-1.1/types-basicDOM-01-b.svg = FAIL
1846 BUG10420 LINUX : svg/custom/use-transform.svg = FAIL
1847
1848 // Regressions from WebKit merge to 40864
1849 // Likely just needs a rebaseline.
1850 BUG10421 LINUX : fast/block/positioning/001.html = FAIL
1851
1852 // Selection highlight colors are wrong.
1853 BUG10426 LINUX : fast/lists/drag-into-marker.html = FAIL
1854
1855 // It's not clear that the test isn't wrong here. It believes that middle
1856 // aligning 15px Ahem should end up in a certain spot. But we have the
1857 // x-height correct and we're still one px off.
1858 BUG10429 LINUX : css2.1/t100801-c544-valgn-01-d-ag.html = FAIL
1859
1860 // New failures from Merge 41078:41149
1861 BUG10430 LINUX : svg/W3C-SVG-1.1/text-intro-05-t.svg = FAIL
1862
1863 // Regression from merge 41268:41286
1864 // See above comment about this test on linux/win.
1865 BUG10435 MAC : editing/selection/designmode-no-caret.html = FAIL
1866
1867 // Flakey. Not clear when it started, but it was before 3/9/09.
1868 // This test also started failing with the merge of March 25th 2009
1869 BUG10441 WIN DEBUG : transitions/transition-end-event-transform.html = FAIL PASS
1870 BUG10441 MAC WIN RELEASE : transitions/transition-end-event-transform.html = FAIL PASS
1871
1872 // This test hits a stack-overflow exception earlier in debug mode than in
1873 // release mode on Windows.
1874 //
1875 // Hits the stack overflow earlier than before the new compiler in both
1876 // release and debug mode on Linux and Mac.
1877 //
1878 //   http://code.google.com/p/v8/issues/detail?id=277
1879 BUG10457 RELEASE LINUX : fast/js/large-expressions.html = FAIL PASS
1880 BUG10457 RELEASE MAC : fast/js/large-expressions.html = FAIL
1881 BUG10457 DEBUG WIN SLOW : fast/js/large-expressions.html = FAIL
1882
1883
1884 // Merge 41768:41807
1885 // Perhaps just needs new baseline?
1886 // These tests were rebaselined with failure long ago. We shouldn't do this, and
1887 // instead work upstream to improve tests so that they don't fail.
1888 // Just need rebaseline
1889 BUG10458 LINUX : fast/forms/textarea-width.html = FAIL
1890
1891
1892 // New failures from merge
1893 BUG27486 WIN : fast/forms/listbox-hit-test-zoomed.html = FAIL
1894 BUG27486 RELEASE LINUX : fast/forms/listbox-hit-test-zoomed.html = FAIL
1895 BUG27486 LINUX DEBUG : fast/forms/listbox-hit-test-zoomed.html = FAIL
1896 BUG27486 WIN LINUX : fast/forms/slider-zoomed.html = FAIL
1897
1898 // See WebKit 41948
1899 // Regressed further at 57820, jamesr investigating
1900 BUG10468 MAC SKIP : fast/replaced/border-radius-clip.html = MISSING
1901
1902 // Mac flaky failures.
1903 BUG10472 MAC DEBUG : svg/css/glyph-orientation-rounding-test.xhtml = FAIL PASS
1904
1905 // <input type="search">; various failures, some tests may simply need new
1906 // baselines, others have more problems.
1907 BUG10473 LINUX : fast/forms/placeholder-set-value.html = FAIL
1908 BUG10473 LINUX : fast/forms/search-display-none-cancel-button.html = FAIL
1909 BUG10473 LINUX : fast/forms/search-placeholder-value-changed.html = FAIL
1910 BUG10473 LINUX : fast/replaced/width100percent-searchfield.html = FAIL
1911
1912 // This test isn't just slow -- sometimes it times out indefinitely.
1913 // r37311:r37313 started making the test fail with a text diff.
1914 BUG27569 BUG33316 LINUX MAC WIN : http/tests/xmlhttprequest/redirect-cross-origin-tripmine.html = TIMEOUT FAIL PASS
1915
1916 BUG9613 WIN LINUX : fast/dom/clientWidthAfterDocumentIsRemoved.html = IMAGE+TEXT
1917 BUG9613 MAC : fast/dom/clientWidthAfterDocumentIsRemoved.html = TEXT
1918
1919 // Merge WebKit 42133:42199 regressions
1920 BUG20570 LINUX : fast/events/context-no-deselect.html = FAIL
1921
1922 // These tests were affected by rolling out WebKit i8n patches.
1923 // Was only WIN, also fail on LINUX since merge 43346:43361
1924 BUG9768 LINUX WIN : fast/forms/select-initial-position.html = FAIL
1925 // Was only WIN, also fail on LINUX since merge 43346:43361
1926 BUG9768 LINUX WIN : fast/forms/select-visual-hebrew.html = FAIL
1927 // Was only WIN, also fail on LINUX since merge 43346:43361
1928 BUG9768 LINUX WIN : fast/forms/visual-hebrew-text-field.html = FAIL
1929 // Linux looks ok, rebaselined.
1930 BUG9768 WIN : fast/text/cg-fallback-bolding.html = FAIL
1931 BUG9768 WIN : fast/text/international/001.html = FAIL
1932 BUG9768 WIN : fast/text/international/002.html = FAIL
1933 BUG9768 WIN : fast/text/international/003.html = FAIL
1934 BUG9768 WIN : fast/text/international/wrap-CJK-001.html = FAIL
1935
1936 // Merge WebKit 42200:42244 regressions
1937 BUG9786 : fast/dom/Window/dom-access-from-closure-iframe.html = FAIL
1938 BUG9786 : fast/dom/Window/dom-access-from-closure-window.html = FAIL
1939 BUG9786 WIN DEBUG : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1940 BUG9786 SLOW WIN RELEASE : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1941 BUG9786 LINUX MAC : http/tests/security/cross-frame-access-history-prototype.html = FAIL
1942 BUG9786 : http/tests/security/cross-frame-access-location-prototype.html = FAIL
1943 BUG9786 : http/tests/security/cross-frame-access-document-direct.html = TIMEOUT
1944 BUG10479 MAC : svg/hixie/perf/001.xml = FAIL
1945 BUG10479 MAC : svg/hixie/perf/002.xml = FAIL
1946
1947 BUG9798 SLOW WIN DEBUG : fast/dom/Window/slow-unload-handler.html = PASS
1948
1949 // Was flaky. Became a consistent failure.
1950 BUG9798 WIN : http/tests/loading/preload-img-test.html = TIMEOUT PASS
1951 BUG9798 WIN DEBUG : http/tests/local/style-access-before-stylesheet-loaded.html = FAIL PASS
1952 BUG9798 WIN DEBUG : http/tests/misc/redirect-with-quotes.php = TIMEOUT PASS
1953 BUG9798 WIN SLOW : http/tests/misc/refresh-headers.php = PASS
1954 BUG9798 WIN : http/tests/security/cross-frame-access-protocol-explicit-domain.html = FAIL PASS
1955 BUG9798 WIN DEBUG : http/tests/security/cross-frame-access-protocol.html = FAIL PASS
1956 BUG9798 RELEASE : http/tests/security/dataURL/xss-DENIED-from-data-url-in-foreign-domain-subframe.html = TIMEOUT PASS
1957 BUG9798 WIN : http/tests/xmlhttprequest/access-control-basic-allow-preflight-cache-timeout.html = PASS TIMEOUT
1958 BUG9798 WIN : http/tests/xmlhttprequest/basic-auth.html = TIMEOUT PASS
1959 BUG9798 WIN DEBUG : http/tests/xmlhttprequest/encode-request-url-2.html = TIMEOUT PASS
1960 BUG9797 BUG9798 WIN RELEASE SLOW : http/tests/xmlhttprequest/state-after-network-error.html = PASS
1961 BUG9797 LINUX DEBUG : svg/carto.net/colourpicker.svg = FAIL
1962 BUG9798 LINUX RELEASE : svg/carto.net/colourpicker.svg = FAIL
1963 BUG9798 LINUX RELEASE : tables/mozilla/bugs/45621.html = FAIL
1964 BUG9798 LINUX DEBUG SLOW : tables/mozilla/bugs/45621.html = FAIL
1965 //also BUG24868 (crash)
1966 BUG9798 LINUX DEBUG : transitions/mask-transitions.html = FAIL PASS
1967 BUG9798 SLOW LINUX RELEASE : transitions/transition-timing-function.html = PASS
1968 // This test definitely times out (i.e. is not just slow).
1969 BUG9798 WIN RELEASE : http/tests/xmlhttprequest/small-chunks-response-text.html = PASS TIMEOUT
1970 BUG9798 LINUX DEBUG : fast/multicol/float-multicol.html = IMAGE PASS
1971 BUG9798 MAC RELEASE : editing/selection/drag-in-iframe.html = FAIL PASS
1972 BUG9798 LINUX : svg/custom/use-property-changes-through-svg-dom.svg = FAIL
1973 BUG9798 LINUX : svg/custom/js-update-transform-changes.svg = FAIL
1974 // Occasionally times out. Not just slow.
1975 BUG9798 WIN DEBUG : http/tests/loading/redirect-methods.html = TIMEOUT PASS
1976
1977 // New tests or failures from WebKit merge 42324:42364. Re-baselined on
1978 // Windows. Probably just need the same on other platforms.
1979 BUG9962 MAC : fast/js/function-apply-aliased.html = FAIL
1980
1981 // Regressions from WebKit merge 43264:42403, unknown cause(s)
1982 BUG10055 MAC : fast/events/updateLayoutForHitTest.html = FAIL
1983
1984 // New tests from WebKit Merge 42609:42671
1985 BUG10760 LINUX : fast/forms/input-text-scroll-left-on-blur.html = FAIL
1986 BUG10760 LINUX : fast/inline/25277-2.html = FAIL
1987 BUG10760 LINUX : fast/inline/25277.html = FAIL
1988 BUG10760 LINUX : svg/custom/marker-child-changes.svg = PASS FAIL
1989 BUG10760 LINUX : svg/custom/marker-viewBox-changes.svg = FAIL
1990
1991 // New failures from WebKit merge 42725:42805
1992 // WebKit change http://trac.webkit.org/changeset/42785
1993 // added a test which submits a form and then uses history.back()
1994 // to go back. in test_shell history.back() does not go back,
1995 // so the test timeouts.
1996 BUG11001 LINUX MAC WIN : http/tests/history/back-to-post.php = TIMEOUT
1997
1998 // Regressions from WebKit Merge 42932:42994 due to text metric changes.
1999 BUG11251 WIN DEBUG : fast/forms/textarea-width.html = FAIL
2000 BUG11251 SLOW WIN RELEASE : fast/forms/textarea-width.html = FAIL
2001 BUG11251 WIN LINUX RELEASE : fast/forms/text-control-intrinsic-widths.html = FAIL
2002 BUG11251 LINUX WIN DEBUG : fast/forms/text-control-intrinsic-widths.html = FAIL
2003 BUG11251 WIN LINUX : svg/custom/svg-fonts-in-text-controls.html = FAIL
2004 BUG11251 WIN LINUX : fast/forms/textarea-metrics.html = FAIL
2005
2006 // Unimplemented test shell features causing editing tests to fail
2007
2008 // We don't draw the spelling markers at all in test shell.
2009 BUG11577 WIN LINUX : editing/spelling/inline_spelling_markers.html = FAIL
2010 BUG11577 LINUX : editing/spelling/spellcheck-attribute.html = FAIL
2011 BUG11577 WIN LINUX : editing/spelling/spelling-linebreak.html = FAIL
2012
2013 // Regresssions from WebKit Merge 43114:43242 that just need to be re-baselined.
2014 BUG11483 LINUX : fast/forms/input-text-double-click.html = FAIL
2015 BUG11483 LINUX : svg/text/foreignObject-repaint.xml = FAIL
2016
2017 // Regressions from WebKit merge 43242:43321.  These just need to re-baselining:
2018 BUG24229 LINUX : fast/forms/select-dirty-parent-pref-widths.html = FAIL
2019 BUG24229 LINUX : svg/transforms/animated-path-inside-transformed-html.xhtml = FAIL
2020 BUG24229 LINUX : svg/transforms/text-with-pattern-inside-transformed-html.xhtml = FAIL
2021 BUG24229 LINUX : svg/transforms/text-with-pattern-with-svg-transform.svg = FAIL
2022
2023 // TODO(erg): Attempted to rebaseline these tests as part of the above
2024 // 43346:43361 rebaseling from http://trac.webkit.org/changeset/43355. Turned
2025 // tree red. May be more involved then just rebaselining.
2026 BUG11613 LINUX : editing/deleting/5168598.html = FAIL
2027 BUG11613 LINUX : editing/inserting/5607069-2.html = FAIL
2028
2029 // Already baselined for chromium-win, may need to be done for mac/linux as well.
2030 BUG11796 LINUX : fast/forms/search-styled.html = FAIL
2031
2032 // Details for all of these are in the bugs.
2033 BUG12361 WIN SLOW : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2034 BUG12361 LINUX MAC DEBUG : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2035 BUG12361 LINUX RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2036 BUG12361 SLOW MAC RELEASE : http/tests/cookies/double-quoted-value-with-semi-colon.html = FAIL
2037
2038 // WebKit 44438:44544
2039 BUG13721 LINUX : fast/dynamic/positioned-movement-with-positioned-children.html = FAIL
2040
2041 BUG14207 LINUX : tables/mozilla/bugs/bug28341.html = FAIL
2042 BUG32231 WIN DEBUG : tables/mozilla/bugs/bug28341.html = IMAGE PASS
2043
2044 // Newly added test http://trac.webkit.org/changeset/44816
2045 BUG18733 WIN SLOW : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL
2046 BUG18733 MAC DEBUG : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL TIMEOUT
2047 BUG18733 LINUX MAC RELEASE : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL
2048 BUG18733 LINUX DEBUG : http/tests/xmlhttprequest/cross-origin-no-authorization.html = FAIL
2049
2050 BUG14832 : editing/selection/user-drag-element-and-user-select-none.html = FAIL
2051
2052 // WebKit 45017:45086
2053 BUG15217 : fast/js/dictionary-no-cache.html = FAIL
2054 BUG15217 MAC : fast/js/switch-behaviour.html = FAIL
2055
2056 // WebKit 45086:45111
2057 BUG15270 MAC LINUX RELEASE : fast/js/excessive-comma-usage.html = TEXT
2058 BUG15270 MAC LINUX DEBUG SLOW : fast/js/excessive-comma-usage.html = FAIL
2059 BUG15270 WIN : fast/js/excessive-comma-usage.html = CRASH FAIL
2060
2061
2062 // Flaky for a while; also related to BUG17974
2063 BUG15267 WIN LINUX : transitions/cancel-transition.html = PASS FAIL
2064
2065 // WebKit 45431:45444
2066 BUG10384 MAC : fast/events/frame-tab-focus.html = FAIL
2067 BUG11613 LINUX : fast/forms/tabbing-input-iframe.html = FAIL
2068 BUG11613 LINUX RELEASE : fast/overflow/scrollRevealButton.html = FAIL
2069 BUG11613 LINUX DEBUG : fast/overflow/scrollRevealButton.html = FAIL
2070
2071 // WebKit tests regressions 20529:20532
2072 BUG16675 MAC : fast/dynamic/flash-replacement-test.html = FAIL
2073
2074 // WebKit merge 42738:45840
2075 // New test, needs baseline.
2076 BUG16690 SKIP MAC : fast/text/international/khmer-selection.html = FAIL
2077
2078 // WebKit merge 42738:45840
2079 // New tests, need baseline.
2080 BUG16240 WIN DEBUG : http/tests/cache/subresource-expiration.html = TIMEOUT
2081 BUG16240 MAC WIN RELEASE : http/tests/cache/subresource-expiration.html = TIMEOUT
2082 BUG14752 LINUX SLOW : http/tests/cache/subresource-expiration.html = PASS
2083
2084 // New tests with WebKit merge 46288:46363
2085 BUG18116 : fast/dom/constructed-objects-prototypes.html = TEXT
2086 BUG18116 : fast/dom/prototype-inheritance-2.html = TEXT
2087 // New in WebKit r52559
2088 BUG18116 : svg/custom/global-constructors.html = TEXT
2089
2090 // Flaky.  Timing?
2091 BUG18584 WIN DEBUG : animations/combo-transform-translate+scale.html = FAIL PASS
2092 BUG18584 WIN DEBUG : animations/change-one-anim.html = PASS TEXT
2093
2094 // Flaky crashes
2095 BUG18656 MAC RELEASE : fast/dom/Window/window-lookup-precedence.html = FAIL
2096 BUG18656 MAC DEBUG : fast/dom/Window/window-lookup-precedence.html = FAIL
2097
2098 // Test failures caused by re-enabling skia asserts.
2099 BUG18896 WIN LINUX DEBUG : svg/batik/paints/gradientLimit.svg = TIMEOUT FAIL
2100
2101 // Test failures from WebKit merge 46894 to 46977
2102 BUG26737 : fast/js/prototypes.html = FAIL
2103
2104 // WebKit roll r47417:47528
2105 BUG19766 LINUX : fast/replaced/width100percent-menulist.html = FAIL
2106
2107 // Fails due to textInputController.setInputMethod not implemented for Mac.
2108 BUG19665 MAC : platform/mac/editing/input/hangul-enter-confirms-and-sends-keypress.html = FAIL
2109 BUG19665 MAC : platform/mac/editing/input/kotoeri-enter-to-confirm-and-newline.html = FAIL
2110
2111 // WebKit 47777:47790 - getOwnPropertyDescriptor
2112 BUG20345 : fast/js/getOwnPropertyDescriptor.html = FAIL
2113 BUG20345 : fast/dom/Window/window-property-descriptors.html = TEXT
2114 // Failures from Webkit merger 51724 -> 51772
2115 BUG20345 : http/tests/security/cross-frame-access-getOwnPropertyDescriptor.html = TEXT
2116
2117 BUG10480 LINUX : editing/selection/move-by-line-001.html = FAIL
2118
2119 // The linux layout result in build bot shows the changed method does not
2120 // executed.
2121 BUG21141 LINUX : fast/forms/select-double-onchange.html = FAIL
2122 BUG21141 LINUX RELEASE : fast/forms/select-script-onchange.html = FAIL
2123 BUG21141 LINUX DEBUG : fast/forms/select-script-onchange.html = FAIL
2124
2125 // Flaky, not clear as of when.
2126 BUG21411 WIN LINUX DEBUG : svg/dom/SVGScriptElement/script-load-and-error-events.svg = TEXT PASS
2127
2128 // WK roll to 48371
2129 BUG21841 MAC DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2130 BUG21841 WIN DEBUG : plugins/destroy-during-npp-new.html = CRASH PASS
2131
2132 BUG25616 WIN : fast/overflow/overflow-float-stacking.html = FAIL
2133
2134 // Flaky. The width of containing RenderBlocks sometimes becomes larger
2135 BUG21958 MAC : svg/hixie/error/012.xml = FAIL
2136
2137 // WebKit merge 48500:48585, newly implemented Object.defineProperty.
2138 BUG22526 : fast/js/Object-create.html = FAIL
2139 BUG22526 : fast/js/Object-defineProperties.html = FAIL
2140 BUG22526 : fast/js/Object-defineProperty.html = FAIL
2141 BUG22526 : http/tests/security/xss-DENIED-defineProperty.html = FAIL
2142
2143 // WebKit merge 48500:48585, due to newly added support for MathML.
2144 BUG22554 SKIP : mathml = FAIL
2145
2146 // WebKit update 48796:48820
2147 BUG23956 WIN LINUX : fast/dom/Element/getBoundingClientRect.html = FAIL
2148 BUG23956 WIN LINUX : fast/dom/Range/getBoundingClientRect.html = FAIL
2149 BUG23956 WIN LINUX : fast/dom/Range/getClientRects.html = FAIL
2150 BUG24126 : fast/dom/HTMLInputElement/size-attribute.html = FAIL
2151
2152 // Started happening somewhere around http://trac.webkit.org/changeset/48989.
2153 BUG23955 LINUX MAC : fast/css/last-of-type-pseudo-class.html = FAIL
2154
2155 // WebKit update: 49190:49206
2156 BUG_JPARENT LINUX DEBUG SLOW : fast/frames/calculate-fixed.html = PASS
2157
2158 // Started failing for no apparent reason at r28124, and IMAGE+TEXT diffs started at r51875
2159
2160 // Flaky timeouts first appearing at r27764 (webkit 48947)
2161 BUG9798 WIN : http/tests/cookies/multiple-cookies.html = TIMEOUT PASS
2162
2163 // WebKit update: 49213:49221
2164 BUG24063 : fast/dom/Window/window-postmessage-clone.html = FAIL
2165
2166 // Got slow with V8 update to 1.3.15. Debug logging perhaps?
2167 BUG24182 DEBUG SLOW : fast/forms/input-implicit-length-limit.html = PASS
2168 BUG24182 DEBUG SLOW : fast/forms/input-maxlength.html = PASS
2169
2170 // Failing at WebKit Linux (dbg)(3) build 7795
2171 BUG24119 LINUX DEBUG : tables/mozilla/bugs/bug1220.html = PASS FAIL
2172
2173 // WebKit roll 49405:49413
2174 BUG28409 : http/tests/xmlhttprequest/logout.html = FAIL
2175
2176 // WebKit Roll 49597:49640
2177 BUG24966 SLOW MAC DEBUG : fast/frames/calculate-fixed.html = PASS
2178
2179 // WebKit Roll 49640:49684
2180 BUG26253 SLOW WIN RELEASE : http/tests/navigation/reload-subframe-object.html = PASS
2181 BUG25202 LINUX WIN : svg/W3C-SVG-1.1/masking-path-02-b.svg = FAIL
2182 BUG25208 LINUX WIN : svg/W3C-SVG-1.1/masking-path-05-f.svg = FAIL
2183 BUG_JEREMY MAC : fast/frames/onlyCommentInIFrame.html = FAIL
2184
2185 // WebKit Roll 49684:49761
2186 BUG26042 DEBUG : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2187 BUG26042 LINUX RELEASE : http/tests/security/mixedContent/insecure-plugin-in-iframe.html = PASS TEXT
2188
2189 // Incorrect baseline removed.
2190 BUG25433 WIN LINUX : css2.1/t040103-ident-03-c.html = IMAGE
2191
2192 // WebKit roll 49961:49992
2193 // Added in http://trac.webkit.org/changeset/49990
2194 BUG25884 WIN LINUX : fast/dom/Document/CaretRangeFromPoint/caretRangeFromPoint-in-zoom-and-scroll.html = FAIL
2195
2196 BUG26344 LINUX DEBUG : fast/text/atsui-partial-selection.html = CRASH
2197 BUG26344 LINUX DEBUG : platform/mac/editing/deleting/backward-delete.html = CRASH
2198
2199 // More fallout from the above roll.
2200 BUG_JORLOW LINUX : fast/multicol/column-rules-stacking.html = FAIL
2201
2202 // ==== WebKit roll 50258:50313 ====
2203 BUG26291 MAC : fast/text/atsui-multiple-renderers.html = IMAGE
2204 BUG26291 MAC : transforms/2d/hindi-rotated.html = IMAGE
2205
2206 // Flaky since at least WebKit 50258.
2207 BUG32098 : fast/dom/defaultView.html = MISSING PASS
2208 BUG9798 WIN RELEASE : http/tests/navigation/no-referrer-reset.html = TIMEOUT PASS
2209
2210 // more test flakiness
2211 BUG27334 MAC : http/tests/security/xssAuditor/object-embed-tag.html = PASS
2212
2213 // more test flakiness
2214 BUG27418 SLOW WIN RELEASE : http/tests/cookies/simple-cookies-max-age.html = PASS
2215 BUG27418 SLOW WIN RELEASE : http/tests/misc/url-in-utf16le.html = PASS
2216 BUG27418 MAC DEBUG : http/tests/plugins/interrupted-get-url.html = PASS TEXT
2217 BUG27418 MAC RELEASE SLOW : http/tests/plugins/interrupted-get-url.html = PASS
2218
2219 // The following upstream patches add -Webkit-color-correction support:
2220 // http://trac.webkit.org/changeset/50760
2221 // http://trac.webkit.org/changeset/50852
2222 // The ColorSpace was only implemented for CG, more port implementation
2223 // required in order for Chromium to support color correction.
2224 BUG28005 : fast/css/color-correction-backgrounds-and-text.html = FAIL
2225 BUG28005 LINUX WIN : fast/css/color-correction-on-backgrounds.html = FAIL
2226 BUG28005 LINUX WIN : fast/css/color-correction-on-text.html = FAIL
2227 BUG28005 LINUX WIN : fast/css/color-correction.html = FAIL
2228 BUG28005 WIN LINUX : fast/css/color-correction-on-box-shadow.html = IMAGE+TEXT
2229 BUG28005 WIN LINUX : fast/css/color-correction-on-text-shadow.html = IMAGE+TEXT
2230 BUG28005 : fast/css/color-correction-on-background-image.html = FAIL
2231 BUG28005 LINUX WIN : fast/css/color-correction-untagged-images.html = FAIL
2232
2233 // May also be related to r50760, but not as confident.
2234 BUG27551 WIN : fast/css/shadow-multiple.html = IMAGE
2235
2236 // WebKit merge 50756:50820, possibly due to WebKit r50808/r50786 and Chromium r31715
2237 BUG27553 WIN : fast/text/atsui-partial-selection.html = IMAGE
2238
2239 BUG22700 WIN LINUX : fast/canvas/canvas-shadow.html = TEXT
2240
2241
2242 // Failures from merge 50972:51042
2243 // The test requires DRT/Test Shell to support error page handling.
2244 BUG27850 : fast/history/back-forward-reset-after-error-handling.html = TEXT
2245 // Need to update chromium so the web frame delegate is informed when window objects
2246 // in isolated worlds are cleared.
2247 BUG27849 : http/tests/security/isolatedWorld/didClearWindowObject.html = TEXT
2248
2249 BUG28040 WIN : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2250 BUG28040 MAC DEBUG : fast/body-propagation/overflow/004.html = PASS IMAGE+TEXT
2251
2252 BUG28040 WIN MAC DEBUG : fast/body-propagation/overflow/003-xhtml.xhtml = PASS IMAGE+TEXT
2253
2254 BUG28092 WIN : http/tests/xmlhttprequest/redirect-cross-origin-post.html = PASS FAIL
2255
2256 // Need to add Chromium localized strings for the feature. Upstream r51172
2257 BUG28264 : fast/forms/validationMessage.html = FAIL
2258
2259 // Started failing with move from Lighttpd to Apache.
2260 // Since we have some bots on Lighttpd and some on Apache, mark it as flaky for
2261 // now. Once we decide on one or the other, then we can address these tests.
2262 BUG_OJAN MAC LINUX : http/tests/loading/text-content-type-with-binary-extension.html = TEXT
2263 BUG_OJAN LINUX : http/tests/xmlhttprequest/cache-override.html = TEXT
2264
2265 // These tests time out *and* are slow. The test should be fixed to not timeout,
2266 // then should be marked as SLOW/PASS.
2267 BUG2844 WIN : http/tests/appcache/cyrillic-uri.html = TIMEOUT PASS CRASH
2268 BUG2844 WIN : http/tests/appcache/fail-on-update.html = TIMEOUT PASS TEXT CRASH
2269 BUG2844 WIN : http/tests/appcache/offline-access.html = TIMEOUT PASS
2270 BUG2844 WIN LINUX DEBUG : http/tests/appcache/update-cache.html = TIMEOUT PASS
2271 BUG2844 WIN RELEASE : http/tests/appcache/update-cache.html = TIMEOUT PASS
2272
2273 // These tests sometimes pass and sometimes have a text difference due
2274 // to chromium's appcache being async.
2275 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-3.html = TEXT PASS
2276 BUG2844 MAC LINUX : http/tests/appcache/top-frame-3.html = TEXT PASS
2277 BUG2844 WIN RELEASE : http/tests/appcache/top-frame-4.html = TEXT PASS
2278 BUG2844 MAC LINUX : http/tests/appcache/top-frame-4.html = TEXT PASS
2279
2280 // These fail because chromium's appcache is async but webkit's is not.
2281 BUG2844 SKIP : http/tests/appcache/idempotent-update.html = FAIL
2282 BUG2844 SKIP : http/tests/appcache/top-frame-2.html = FAIL
2283
2284 // This test fails because there is no setAppCacheMaximumSize API yet.
2285 BUG2844 SKIP : http/tests/appcache/max-size.html = FAIL
2286
2287 // Flakiness documented around Webkit Roll 51681:51711
2288 BUG2844 SKIP : http/tests/appcache/404-manifest.html = TIMEOUT PASS
2289 BUG2844 SKIP : http/tests/appcache/404-resource.html = TIMEOUT PASS
2290 BUG2844 SKIP : http/tests/appcache/foreign-iframe-main.html = TIMEOUT PASS
2291 BUG2844 SKIP : http/tests/appcache/non-html.xhtml = TIMEOUT PASS
2292
2293 // New tests. Failures from merge 51253:51310.
2294 // Needs to implement NPN_reloadPlugins and add reloadPluginNoPages & reloadPluginAndPages
2295 // to plugin object.
2296 BUG29018 : plugins/reloadplugins-no-pages.html = TEXT
2297 BUG29018 : plugins/reloadplugins-and-pages.html = TIMEOUT
2298
2299 // New tests. Failures from merge 51210:51325.
2300 BUG28646 : editing/selection/transformed-selection-rects.html = FAIL
2301
2302 // New failures from merge 51412:51455.
2303 BUG28916 MAC : editing/pasteboard/paste-xml.xhtml = TEXT
2304
2305 // New failures from WebKit r51534:r51576
2306 BUG29157 WIN LINUX MAC :  svg/animations/animVal-basics.html = TIMEOUT
2307
2308 // New failures from WebKit r51577
2309 BUG29164 WIN LINUX MAC : fast/frames/sandboxed-iframe-plugins.html = TEXT
2310
2311 // New failures from WebKit merge 51581:51584
2312 BUG29167 MAC DEBUG : fast/dom/replaceChild.html = IMAGE PASS
2313
2314 // Failure from WebKit merge 51607:51613 (51608 is the cause)
2315 BUG29239 LINUX WIN : fast/css/variables/misplaced-import-test.html = FAIL
2316
2317 // Failures from WebKit merge 51642:51681
2318 BUG29393 : fast/loader/stateobjects/pushstate-object-types.html = TEXT
2319 BUG29393 : fast/loader/stateobjects/state-api-on-detached-frame-crash.html = TEXT
2320
2321 // Failures introduced by USE_NEW_BUILDER in Skia.
2322 BUG33287 WIN LINUX : fast/canvas/set-colors.html = TEXT
2323
2324 // Failures from WebKit merge 51711:51724
2325 BUG32003 : fast/js/string-property-deletion.html = TEXT
2326 BUG31998 LINUX : svg/carto.net/selectionlist.svg = IMAGE PASS
2327 BUG31997 DEBUG WIN : fast/body-propagation/overflow/004-xhtml.xhtml = IMAGE+TEXT PASS
2328
2329 // Regression from Webkit merge 51772 -> 51784
2330 BUG35329 WIN : http/tests/appcache/resource-redirect-2.html = TIMEOUT PASS
2331
2332 // Webkit Roll to r51875
2333 BUG29748 LINUX : css1/basic/containment.html = IMAGE
2334 BUG29748 LINUX : css1/box_properties/padding_right.html = IMAGE
2335 BUG29748 LINUX : css1/font_properties/font_size.html = IMAGE
2336 BUG29748 LINUX : fast/block/float/nested-clearance.html = IMAGE
2337 BUG29748 LINUX : fast/block/positioning/051.html = IMAGE
2338 BUG29748 LINUX : fast/block/positioning/055.html = IMAGE
2339 BUG29748 LINUX : fast/forms/select-change-listbox-size.html = IMAGE
2340 BUG29748 LINUX : fast/frames/iframe-scrolling-attribute.html = IMAGE
2341 BUG29748 LINUX : fast/frames/onlyCommentInIFrame.html = IMAGE
2342 BUG29748 LINUX : fast/multicol/positioned-with-constrained-height.html = IMAGE
2343 BUG29748 LINUX : fast/repaint/overflow-scroll-delete.html = IMAGE
2344 BUG29748 LINUX : http/tests/navigation/error404-frames.html = IMAGE
2345 BUG29748 LINUX : http/tests/navigation/post-frames.html = IMAGE
2346 BUG29748 LINUX : http/tests/navigation/postredirect-frames.html = IMAGE
2347 BUG29748 LINUX : tables/mozilla/bugs/bug137388-2.html = IMAGE
2348 BUG29748 LINUX : tables/mozilla/bugs/bug2479-1.html = IMAGE
2349 BUG29748 LINUX : tables/mozilla/bugs/bug2479-4.html = IMAGE
2350 BUG29748 LINUX : tables/mozilla/bugs/bug29314.html = IMAGE
2351 BUG29748 LINUX : tables/mozilla/bugs/bug2997.html = IMAGE
2352 BUG29748 LINUX : tables/mozilla/bugs/bug32205-2.html = IMAGE
2353 BUG29748 LINUX : tables/mozilla/bugs/bug3977.html = IMAGE
2354 BUG29748 LINUX : tables/mozilla/bugs/bug43854-1.html = IMAGE
2355 BUG29748 LINUX : tables/mozilla/bugs/bug44505.html = IMAGE
2356 BUG29748 LINUX : tables/mozilla/bugs/bug650.html = IMAGE
2357 BUG29748 LINUX : tables/mozilla/bugs/bug73321.html = IMAGE
2358 BUG29748 LINUX : tables/mozilla/bugs/bug96334.html = IMAGE
2359 BUG29748 LINUX : tables/mozilla/bugs/bug96343.html = IMAGE
2360 BUG29748 LINUX : tables/mozilla/core/captions.html = IMAGE
2361 BUG29748 LINUX : tables/mozilla/core/cell_heights.html = IMAGE
2362 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-column.html = IMAGE
2363 BUG29748 LINUX : tables/mozilla/marvin/backgr_simple-table-row.html = IMAGE
2364 BUG29748 LINUX : tables/mozilla/marvin/x_table_bgcolor_rgb.xml = IMAGE
2365 BUG29748 LINUX : tables/mozilla/other/nestedTables.html = IMAGE
2366 BUG29748 LINUX : tables/mozilla/other/test3.html = IMAGE
2367 BUG29748 LINUX : tables/mozilla/other/wa_table_thtd_rowspan.html = IMAGE
2368 BUG29748 LINUX : tables/mozilla/other/wa_table_tr_align.html = IMAGE
2369 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug10140.html = IMAGE
2370 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug1055-2.html = IMAGE
2371 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug106966.html = IMAGE
2372 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug22122.html = IMAGE
2373 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug2479-5.html = IMAGE
2374 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug80762-2.html = IMAGE
2375 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug89315.html = IMAGE
2376 BUG29748 LINUX : tables/mozilla_expected_failures/bugs/bug91057.html = IMAGE
2377 BUG29748 LINUX : tables/mozilla_expected_failures/core/backgrounds.html = IMAGE
2378 BUG29748 LINUX : tables/mozilla_expected_failures/core/captions1.html = IMAGE
2379 BUG29748 LINUX : tables/mozilla_expected_failures/core/col_span2.html = IMAGE
2380 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_border-table-row-group.html = IMAGE
2381 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-cell.html = IMAGE
2382 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-column-group.html = IMAGE
2383 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/backgr_position-table-row.html = IMAGE
2384 BUG29748 LINUX : tables/mozilla_expected_failures/marvin/table_overflow_dirty_reflow_row.html = IMAGE
2385 BUG29748 LINUX : tables/mozilla_expected_failures/other/empty_cells.html = IMAGE
2386 BUG29748 LINUX : tables/mozilla_expected_failures/other/test4.html = IMAGE
2387 BUG29748 WIN DEBUG : fast/forms/input-align-image.html = IMAGE+TEXT PASS
2388
2389 // More Webkit Roll to r51875
2390 // Some of these went from IMAGE+TEXT to just IMAGE at r57886
2391 BUG29737 MAC : svg/W3C-SVG-1.1/filters-blend-01-b.svg = IMAGE
2392 BUG29737 MAC : svg/W3C-SVG-1.1/filters-color-01-b.svg = IMAGE
2393 BUG29737 MAC : svg/W3C-SVG-1.1/filters-comptran-01-b.svg = IMAGE
2394 BUG29737 MAC : svg/W3C-SVG-1.1/filters-gauss-01-b.svg = IMAGE
2395 BUG29737 MAC : svg/W3C-SVG-1.1/filters-morph-01-f.svg = IMAGE
2396 BUG29737 MAC : svg/W3C-SVG-1.1/filters-offset-01-b.svg = IMAGE
2397 BUG29737 MAC : svg/batik/filters/feTile.svg = IMAGE
2398 BUG29737 MAC : svg/custom/empty-merge.svg = IMAGE
2399 BUG29737 MAC : svg/custom/feComponentTransfer-Discrete.svg = IMAGE
2400 BUG29737 MAC : svg/custom/feComponentTransfer-Gamma.svg = IMAGE
2401 BUG29737 MAC : svg/custom/feComponentTransfer-Linear.svg = IMAGE
2402 BUG29737 MAC : svg/custom/feComponentTransfer-Table.svg = IMAGE
2403 BUG29737 MAC : svg/custom/text-filter.svg = IMAGE
2404 BUG29737 MAC : svg/filters/feComposite.svg = IMAGE
2405 BUG29737 MAC : svg/filters/feDisplacementMap.svg = IMAGE
2406 BUG29737 MAC : svg/filters/feGaussianBlur.svg = IMAGE
2407 BUG29737 MAC : svg/filters/feTile.svg = IMAGE
2408 BUG29737 MAC : svg/filters/shadow-on-filter.svg = IMAGE
2409 BUG29737 MAC : svg/custom/use-elementInstance-event-target.svg = IMAGE
2410 BUG29737 SLOW MAC : svg/filters/big-sized-filter.svg = IMAGE
2411 BUG29737 MAC : svg/W3C-SVG-1.1/struct-image-02-b.svg = IMAGE
2412 BUG29737 MAC : svg/filters/sourceAlpha.svg = IMAGE
2413
2414 // More Webkit Roll to r51875
2415
2416 // WebKit Roll to r51915
2417 BUG29930 : fast/loader/input-element-page-cache-crash.html = TIMEOUT PASS TEXT
2418
2419
2420 // New tests courtesy of: http://trac.webkit.org/changeset/51936:
2421 BUG30048 : svg/css/composite-shadow-example.html = IMAGE
2422 BUG30048 : svg/css/composite-shadow-with-opacity.html = IMAGE
2423
2424 // Broke with http://trac.webkit.org/changeset/51939
2425 BUG30049 : platform/win/editing/selection/doubleclick-should-not-expand-across-lines.html = TEXT MISSING
2426
2427 // evan's fix rolled out in http://trac.webkit.org/changeset/52071 due to compat issues.
2428 BUG30343 LINUX : fast/css/large-number-round-trip.html = TEXT
2429
2430 // These tests got very flaky (failing 8/10 runs!) after
2431 // http://src.chromium.org/viewvc/chrome?view=rev&revision=34610
2432 // The only relevant change there is that we now sort tests purely
2433 // lexicographically instead of putting the http tests first. This is a good
2434 // thing because it matches upstream. The regressions are likely due to timing
2435 // issues because the http tests moved from one debug shard to another.
2436 // Likely, moving Windows to using Apache2 will fix this as the Linux/Mac builds
2437 // did not get flaky here and moving to Apache made the appcache tests less
2438 // flaky on those platforms.
2439 BUG25977 WIN DEBUG : http/tests/appcache/access-via-redirect.php = TIMEOUT PASS
2440 BUG25977 WIN : http/tests/appcache/auth.html = TIMEOUT PASS
2441 BUG25977 WIN DEBUG : http/tests/appcache/crash-when-navigating-away-then-back.html = TIMEOUT PASS
2442 BUG25977 WIN DEBUG : http/tests/appcache/empty-manifest.html = TIMEOUT PASS
2443 // This test is slow on windows, but sometimes times out indefinitely.
2444 // See if this improves when we move to apache.
2445 BUG25977 WIN : http/tests/appcache/fallback.html = TIMEOUT PASS
2446 BUG25977 WIN DEBUG : http/tests/appcache/local-content.html = TIMEOUT PASS
2447 BUG25977 WIN DEBUG : http/tests/appcache/main-resource-hash.html = TIMEOUT PASS
2448 BUG25977 WIN DEBUG : http/tests/appcache/manifest-containing-itself.html = TIMEOUT PASS
2449 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect-2.html = TIMEOUT PASS
2450 BUG25977 WIN DEBUG : http/tests/appcache/manifest-redirect.html = TIMEOUT PASS
2451 BUG25977 WIN DEBUG : http/tests/appcache/manifest-with-empty-file.html = TIMEOUT PASS
2452 BUG25977 WIN DEBUG : http/tests/appcache/wrong-content-type.html = TIMEOUT PASS
2453 BUG25977 WIN DEBUG : http/tests/appcache/online-whitelist.html = TIMEOUT PASS
2454 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-1.html = TIMEOUT PASS
2455 BUG25977 WIN DEBUG : http/tests/appcache/whitelist-wildcard.html = TIMEOUT PASS
2456 BUG25977 WIN DEBUG : http/tests/appcache/resource-redirect.html = TIMEOUT PASS
2457 BUG25977 WIN : http/tests/appcache/xhr-foreign-resource.html = TIMEOUT PASS
2458 BUG25977 WIN DEBUG : http/tests/appcache/simple.html = TIMEOUT PASS
2459 BUG25977 WIN DEBUG : http/tests/appcache/reload.html = TIMEOUT PASS
2460 BUG25977 WIN DEBUG : http/tests/appcache/wrong-signature-2.html = TIMEOUT PASS
2461 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-4.html = TIMEOUT TEXT PASS
2462 BUG25977 WIN DEBUG : http/tests/appcache/top-frame-3.html = TIMEOUT TEXT PASS
2463
2464 // Flaky.
2465 BUG9798 WIN LINUX : fast/loader/javascript-url-encoding-2.html = TIMEOUT PASS
2466 BUG9798 WIN RELEASE : fast/loading/subframe-removes-itself.html = TEXT PASS
2467 BUG9798 LINUX MAC : fast/loader/invalid-charset-on-script-crashes-loader.html = TIMEOUT PASS
2468
2469 // WebKit update 52293->52323
2470 BUG31253 : http/tests/security/xss-DENIED-assign-location-href-javascript.html = TEXT
2471
2472 // WebKit update 52323->52366
2473 BUG30826 WIN : platform/win/fast/events/panScroll-imageMap-noHref-scroll.html = TEXT
2474 BUG30826 WIN DEBUG : platform/win/fast/events/panScroll-event-fired.html = PASS TEXT TIMEOUT
2475
2476 // Flaky
2477 BUG30930 LINUX DEBUG : tables/mozilla/bugs/bug15933.html = IMAGE PASS
2478
2479 // WebKit roll 52468->52535
2480 BUG31991 WIN LINUX : fast/text/international/bidi-layout-across-linebreak.html = TEXT
2481 BUG31252 : http/tests/security/listener/xss-inactive-closure.html = TEXT
2482
2483 BUG31623 WIN: http/tests/appcache/remove-cache.html = PASS TEXT TIMEOUT
2484
2485 // WebKit roll 52852 -> 52867
2486 BUG32018 : websocket/tests/frame-lengths.html = PASS TIMEOUT
2487 BUG32018 DEBUG : websocket/tests/simple-stress.html = PASS TEXT TIMEOUT
2488
2489 // Flaky
2490 BUG31803 MAC LINUX : editing/inserting/12882.html = IMAGE PASS
2491
2492 // from http://trac.webkit.org/changeset/53086
2493 BUG32153 : svg/dynamic-updates/SVGTextElement-svgdom-rotate-prop.html = TEXT
2494
2495 // a bunch of tests broken before the flakiness fix, i will deal with these
2496 // after the major flakiness goes away
2497 BUG32155 : fast/js/Object-getOwnPropertyNames.html = TEXT
2498
2499 // New flakiness?
2500 BUG32145 WIN : animations/3d/transform-origin-vs-functions.html = TEXT PASS
2501 BUG32149 WIN RELEASE : fast/dom/Document/early-document-access.html = TIMEOUT PASS
2502
2503 BUG32195 : fast/repaint/renderer-destruction-by-invalidateSelection-crash.html = IMAGE+TEXT IMAGE PASS
2504
2505 // Expectations from roll to 53171:53194
2506
2507 BUG32308 DEBUG : fast/frames/cached-frame-counter.html = TIMEOUT
2508
2509 // WebKit roll 53341:53451
2510 BUG32670 LINUX : fast/css/zoom-body-scroll.html = TEXT
2511 BUG32673 WIN LINUX : fast/forms/textarea-scrollbar-height.html = TEXT
2512 BUG32675 LINUX : fast/repaint/trailing-floats-root-line-box-overflow.html = IMAGE
2513
2514 // Flaky tests found during the roll.
2515 BUG32679 LINUX DEBUG : http/tests/navigation/lockedhistory-iframe.html = TEXT PASS
2516 BUG32682 LINUX : svg/W3C-SVG-1.1/filters-conv-01-f.svg = IMAGE+TEXT TEXT PASS
2517 BUG32684 WIN : inspector/timeline-layout.html = TEXT PASS
2518 BUG35519 WIN SKIP : http/tests/inspector/inspect-iframe-from-different-domain.html = PASS
2519 BUG32688 MAC DEBUG : fast/lists/inlineBoxWrapperNullCheck.html = TEXT PASS
2520 BUG32689 MAC LINUX DEBUG : http/tests/security/mixedContent/about-blank-iframe-in-main-frame.html = TEXT PASS
2521 BUG32693 MAC DEBUG : svg/dom/SVGRectElement/rect-modify-rx.svg = TEXT PASS
2522 BUG35773 WIN LINUX : inspector/console-dir.html = CRASH TEXT PASS
2523
2524 BUG33293 SKIP : fast/media/lifetime.html = TIMEOUT
2525
2526 // WebKit roll 53585 -> 53655
2527 BUG32864 WIN LINUX MAC : plugins/mouse-events-fixedpos.html = TEXT
2528
2529 // WebKit roll 53655 -> 53704
2530 BUG32900 WIN LINUX : http/tests/misc/slow-loading-mask.html = IMAGE+TEXT
2531
2532 // WebKit roll 53704 -> 53747
2533 BUG32949 WIN LINUX MAC : fast/dom/Window/invalid-protocol.html = TEXT
2534
2535 BUG21852 DEFER SKIP LINUX WIN : fast/canvas/webgl = CRASH
2536
2537 // Disabled until we get history.{back,forward,go} changed to always be
2538 // asynchronously again.
2539 BUG33350 : fast/dom/location-hash.html = TEXT
2540
2541 // WebKit roll 53941 -> 54015
2542 BUG33358 WIN LINUX : fast/dom/Window/window-postmessage-clone-frames.html = TEXT
2543
2544 // WebKit roll 54016 -> 54045
2545 BUG33486 WIN LINUX : fast/text/international/hebrew-vowels.html = IMAGE+TEXT
2546 BUG33486 LINUX : fast/text/international/thai-line-breaks.html = IMAGE
2547
2548 // WebKit roll 54059 -> 54075
2549 BUG33538 : fast/dom/Window/anonymous-slot-with-changes.html = TEXT
2550
2551 // Flaky test
2552 BUG35064 WIN DEBUG : fast/forms/restore-selection-after-layout.html = TEXT PASS
2553
2554 // WebKit roll 54482 to 54493.
2555 BUG35242 WIN : svg/W3C-SVG-1.1/filters-conv-01-f.svg = IMAGE+TEXT TEXT
2556 BUG35242 WIN : svg/W3C-SVG-1.1/text-intro-05-t.svg = IMAGE+TEXT TEXT
2557
2558 // WebKit roll 54493 to 54530: new tests.
2559 BUG35114 : fast/js/parser-syntax-check.html = TEXT
2560
2561 // WebKit roll 54530 to 54550
2562 BUG35238 MAC : fast/dom/clone-node-dynamic-style.html = IMAGE
2563
2564 // WebKit roll 54550 to 54559
2565 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-defaults.svg = IMAGE
2566 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-1.svg = IMAGE
2567 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-2.svg = IMAGE
2568 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-ignore-attribute-3.svg = IMAGE
2569 BUG35238 MAC : svg/overflow/overflow-on-outermost-svg-element-in-xhtml-defaults.xhtml = IMAGE
2570
2571 // WebKit roll 54559 to 54585
2572 BUG35237 : fast/events/multiline-link-arrow-navigation.html = TEXT
2573
2574 // Due to not building TestNetscapePlugin.cpp.
2575 BUG35387 : platform/win/plugins/plugin-delayed-destroy.html = TIMEOUT
2576 BUG35387 : plugins/reentrant-update-widget-positions.html = TIMEOUT
2577 BUG35387 : plugins/update-widgets-crash.html = TIMEOUT
2578
2579 // New test added in WebKit r54783
2580 BUG35822 : plugins/netscape-browser-object-identity.html = TEXT
2581
2582 // Started failing during roll from 54848 -> 54898
2583 // Started failing with 54865. No rebaselines upstream but they don't run pixel tests.
2584 BUG36019 WIN LINUX : fast/images/svg-as-tiled-background.html = IMAGE
2585
2586 // WebKit roll 55250 to 55339
2587 BUG36966 : fast/loader/about-blank-hash-kept.html = FAIL
2588
2589 BUG37463 MAC DEBUG : svg/custom/transform-ignore-after-invalid.svg = PASS CRASH
2590
2591 // WebKit roll 55512:55584
2592 BUG37540 MAC SKIP : inspector/console-dir.html = CRASH TEXT PASS
2593
2594 // Bugs that went unreported when we upstreamed run_webkit_tests
2595 // New test, added http://trac.webkit.org/changeset/55737
2596 BUG37896 : fast/events/remove-child-onscroll.html = TIMEOUT
2597 // This one may be an actual regression! Started being flaky after
2598 // http://trac.webkit.org/log/?verbose=on&rev=55742&stop_rev=55710
2599 BUG37896 LINUX WIN : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT
2600 BUG37896 MAC DEBUG : fast/events/standalone-image-drag-to-editable.html = IMAGE+TEXT PASS
2601 // New test, added http://trac.webkit.org/changeset/55546
2602 BUG37896 WIN LINUX : fast/multicol/hit-test-above-or-below.html = TEXT
2603 // Added in http://trac.webkit.org/changeset/55669
2604 BUG37896 : fast/repaint/no-caret-repaint-in-non-content-editable-element.html = IMAGE+TEXT
2605 BUG37896 WIN DEBUG : fast/text/firstline/001.html = PASS CRASH
2606 BUG37896 LINUX MAC DEBUG : fast/text/firstline/001.html = PASS CRASH TIMEOUT
2607 // Added in http://trac.webkit.org/changeset/55587
2608 BUG37896 LINUX DEBUG : fast/images/svg-as-background.html = TIMEOUT
2609 BUG37869 MAC LINUX SKIP : inspector/timeline-network-resource.html = CRASH
2610 // Three flaky tests noticed during a sheriff rotation.
2611 BUG37962 MAC LINUX DEBUG : fast/dom/HTMLElement/bdo.html = CRASH PASS
2612 BUG37962 LINUX DEBUG : fast/forms/multiple-form-submission-protection-mouse.html = CRASH PASS
2613 BUG37962 MAC : plugins/iframe-shims.html = TEXT PASS
2614
2615 // WebKit roll r55853 -> 55940
2616 // Flaky test
2617 BUG_JIANLI MAC : fast/forms/select-style.html = IMAGE PASS
2618
2619 BUG38375 : plugins/round-trip-npobject.html = TEXT
2620 BUG38376 WIN : editing/deleting/5390681-2.html = IMAGE+TEXT
2621
2622 // WebKit roll 56004 -> 56026
2623 BUG38278 : fast/events/continuous-platform-wheelevent-in-scrolling-div.html = TIMEOUT
2624 BUG38278 : fast/events/platform-wheelevent-in-scrolling-div.html = TIMEOUT
2625
2626 // The touch targeting logic was recently changed.
2627 BUG36415 : fast/events/touch/touch-target.html = TEXT
2628
2629 // Need to implement NPP_HandleEvent in the layout_test_plugin
2630 BUG38353 MAC LINUX : plugins/keyboard-events.html = TEXT
2631 BUG38353 MAC LINUX : http/tests/plugins/plugin-document-has-focus.html = TIMEOUT
2632
2633 BUG38392 : plugins/resize-from-plugin.html = TEXT
2634
2635 // One pixel changes from gray 0x83 to gray 0x81. Valgrind is clean.
2636 BUG38534 LINUX : tables/mozilla/bugs/bug20804.html = IMAGE PASS
2637
2638 // This runs correctly on the builder, using the builder's working directory.
2639 // I can only assume that the Gods are Making Merriment at my expense. --agl
2640 BUG_AGL LINUX : platform/chromium/fast/text/chromium-linux-fontconfig-renderstyle.html = IMAGE
2641
2642 // WebKit roll 56165:56197.
2643 // New test (http://trac.webkit.org/changeset/56198), requires changes to PluginObject
2644 BUG38578 : plugins/override-node-method.html = TEXT
2645
2646 // WebKit roll 56197:56239.
2647 // Needs layoutTestController.setMediaType() (implemented on Qt only)
2648 BUG38653 MAC : editing/selection/find-yensign-and-backslash.html = TEXT
2649 BUG38656 : fast/media/print-restores-previous-mediatype.html = TEXT
2650
2651 // Needs layoutTestController.setViewModeMediaFeature() (implemented on Qt only)
2652 BUG40680 SKIP : fast/media/media-feature-wgt-view-mode.html = FAIL
2653
2654 // Unknown flakiness.
2655 BUG38706 : svg/custom/deep-dynamic-updates.svg = IMAGE+TEXT IMAGE PASS
2656
2657 // Caused by http://trac.webkit.org/changeset/56288/
2658 BUG_JSCHUH WIN LINUX : svg/filters/filterRes.svg = IMAGE+TEXT
2659 BUG_JSCHUH MAC : svg/filters/filterRes.svg = IMAGE
2660
2661 // Caused by http://trac.webkit.org/changeset/56394.
2662 BUG_JAPHET WIN : http/tests/xmlhttprequest/xmlhttprequest-50ms-download-dispatch.html = TEXT
2663
2664 // Due to the differences in iniialization checks in KURL and googleurl.
2665 // Note: this test was also marked as flaky on WIN RELEASE above, BUG31342.
2666 BUG_39423 : security/block-test.html = TIMEOUT
2667
2668 BUGWK36666 : storage/open-database-over-quota.html = TEXT
2669
2670 // Caused by http://trac.webkit.org/changeset/56795
2671 // These are new tests that are failing in Chromium because of a missing API.
2672 BUG39904 : svg/animations/animate-points.html = TIMEOUT
2673 BUG39904 : svg/animations/animate-keySplines.html = TIMEOUT
2674 BUG39904 : svg/animations/animate-gradient-transform.html = TIMEOUT
2675
2676 BUGWK37283 : fast/overflow/scrollbar-restored-and-then-locked.html = TEXT
2677
2678 BUGWK37297 : fast/history/nested-visited-test.html = TEXT
2679 BUGWK37297 : fast/history/self-is-visited.html = TEXT
2680 BUGWK37297 : fast/history/sibling-visited-test.html = TEXT
2681
2682 // These are failing due to new-run-webkit-tests's diff trimming line ends.
2683 BUGWK36983 MAC : fast/canvas/webgl/null-object-behaviour.html = TEXT
2684 BUGWK36983 MAC : fast/canvas/webgl/uniform-location.html = TEXT
2685
2686 // Added in http://trac.webkit.org/changeset/57476. Fails in Chromium because
2687 // LayoutTestController::computedStyleWithVisitedInfo() is missing.
2688 BUG41206 : fast/history/multiple-classes-visited.html = TEXT TIMEOUT
2689
2690 // Tests that work with KURL, but fail with GURL
2691 BUG41292 : fast/url/ipv4.html = TEXT TIMEOUT
2692 BUG41292 : fast/url/anchor.html = TEXT TIMEOUT
2693
2694 // Caused by r57695. Will investigate.
2695 BUG_JIANLI LINUX : http/tests/local/formdata/send-form-data-with-sliced-file.html = TEXT
2696
2697 BUG33812 SKIP : fast/dom/icon-url-property.html = FAIL
2698
2699 // Failing with webkit roll 57659 -> 57677.
2700 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-1.html = IMAGE PASS
2701 BUG41817 WIN LINUX : fast/backgrounds/svg-as-background-3.html = IMAGE PASS
2702 BUG41817 MAC : svg/text/text-intro-05-t.svg = IMAGE PASS
2703
2704 BUG42044 WIN : http/tests/security/xss-DENIED-mime-type-execute-as-html.html = PASS TIMEOUT
2705
2706 // might have been flaky
2707 BUGJAMESR MAC : svg/custom/resource-invalidate-on-target-update.svg = IMAGE PASS
2708 BUGJAMESR LINUX : svg/custom/resource-invalidate-on-target-update.svg = IMAGE
2709 BUGJAMESR : svg/filters/filter-clip.svg = IMAGE
2710 BUGJAMESR : svg/filters/filter-source-position.svg = IMAGE
2711 BUGJAMESR BUG30048 BUG29737 : svg/filters/shadow-on-rect-with-filter.svg = IMAGE
2712
2713 // New layoutTestController function added at r57986
2714 BUG42691 : fast/lists/ol-nested-items-dynamic-insert.html = TEXT
2715 BUG42691 : fast/lists/ol-nested-items-dynamic-remove.html = TEXT
2716 BUG42691 : fast/lists/ol-nested-items.html = TEXT
2717 BUG42691 : fast/lists/ol-nested-list-dynamic-insert.html = TEXT
2718 BUG42691 : fast/lists/ol-nested-list-dynamic-remove.html = TEXT
2719 BUG42691 : fast/lists/ol-nested-list.html = TEXT
2720
2721 // New layoutTestController function added at r57993
2722 BUG42696 : http/tests/xmlhttprequest/cross-origin-authorization-with-embedder.html = TIMEOUT
2723
2724 // Started failing at r57969
2725 BUG8729 MAC : http/tests/multipart/invalid-image-data.html = IMAGE
2726
2727 // Started failing at r58058
2728 BUGWK38020 WIN LINUX MAC : fast/events/touch/send-oncancel-event.html = TEXT
2729
2730 // Started failing at r58152
2731 BUGWK38038 WIN LINUX MAC : fast/url/file-http-base.html = TEXT
2732
2733 // Started failing at r58191
2734 BUGWK38100 WIN LINUX MAC : editing/inserting/caret-position.html = TEXT
2735
2736 // New test, may be safe to just rebaseline.
2737 BUGWK38099 WIN LINUX : svg/custom/broken-internal-references.svg = IMAGE+TEXT
2738
2739 // Started failing at 58212
2740 BUGWK38108 MAC : fast/backgrounds/size/contain-and-cover.html = IMAGE
2741
2742 // WebKit roll 58304:58400
2743 // Skip since not relevant
2744 BUGUKAI WIN MAC SKIP : fast/text/international/bold-bengali.html = FAIL
2745
2746 // WebKit roll 58400:58523
2747 // We probably don't want to run these massive amount of new ECMA script conformance tests:
2748 BUG42875 SKIP DEFER : fast/js/sputnik = TEXT
2749 // Other failing layout test
2750 BUGWK38360 WIN LINUX SKIP : fast/images/svg-background-partial-redraw.html = TEXT
2751 BUGWK38360 WIN LINUX SKIP : svg/carto.net/tabgroup.svg = TEXT
2752 BUGWK38360 SKIP : traversal/node-iterator-prototype.html = TEXT
2753 BUG42895 : media/audio-only-video-intrinsic-size.html = TIMEOUT
2754 BUG42895 : media/media-document-audio-size.html = TIMEOUT
2755 BUGYAAR MAC : svg/custom/dominant-baseline-hanging.svg = MISSING
2756
2757 BUG39855 SLOW DEBUG : editing/selection/extend-selection.html = PASS
2758
2759 // Failing a few times, flak dashboard seems to agree.
2760 BUG41973 MAC : svg/text/text-text-05-t.svg = IMAGE PASS
2761
2762 // Rolling Skia forward in Chrome tree to get new baselines to check
2763 // in upstream.
2764 BUGEVAN : svg/clip-path/clip-path-child-clipped.svg = PASS FAIL
2765
2766 // webkit roll 58541:58626
2767 BUG43084 MAC DEBUG : media/video-empty-source.html = IMAGE
2768
2769 // WebKit roll 58626:58719
2770 BUG43963 WIN : fast/forms/searchfield-heights.html = IMAGE
2771 BUG43963 LINUX : fast/forms/searchfield-heights.html = IMAGE+TEXT
2772 BUG43960 WIN LINUX : fast/css/input-search-padding.html = IMAGE+TEXT
2773 BUG43960 MAC : fast/css/input-search-padding.html = IMAGE
2774
2775 BUGWK38705 : http/tests/security/sandbox-inherit-to-initial-document-2.html = TEXT
2776
2777 // Needs new baselines
2778 BUGJAMESR WIN MAC : fast/css/nested-rounded-corners.html = IMAGE MISSING
2779
2780 // WebKit roll 58791:58807
2781 BUG43319 MAC : transforms/2d/zoom-menulist.html = IMAGE PASS
2782 BUG43319 MAC : fast/forms/select-empty-option-height.html = TIMEOUT PASS
2783 BUG43319 WIN LINUX : http/tests/loading/307-after-303-after-post.html = TEXT PASS
2784 BUG43319 WIN LINUX : http/tests/loading/bad-server-subframe.html = TEXT PASS
2785
2786 BUG43496 LINUX : svg/custom/mask-changes.svg = IMAGE PASS
2787
2788 BUG43496 LINUX : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2789 BUG43497 MAC WIN : svg/custom/repaint-stroke-width-changes.svg = IMAGE PASS
2790
2791 // WebKit roll 58855:58878
2792 BUG43419: fast/wcss/wap-input-format.xhtml = TEXT
2793 BUG43419: fast/wcss/wap-input-required.xhtml = TEXT
2794 BUG43420: fast/events/popup-allowed-from-gesture-initiated-form-submit.html = TIMEOUT
2795
2796 // WebKit r59064 changes the behavior of javascript regexp literals
2797 BUGJOHNNYG : fast/js/regexp-literals-arent-constants.html = TEXT
2798
2799 // Flaky tests
2800 BUG43890 WIN : http/tests/loading/basic.html = TEXT PASS
2801 BUG43890 MAC LINUX : fast/forms/implicit-submission.html = TEXT PASS
2802
2803 // Flaky crashing test. Started crashing around Chromium r47220
2804 BUG44150 LINUX DEBUG : fast/forms/input-text-paste-maxlength.html = CRASH PASS
2805
2806 // New canvas test suite from http://philip.html5.org/tests/canvas/suite/tests/
2807 BUG20553 SKIP DEFER : canvas/philip = TEXT
2808
2809 // Need to dump context menu items on eventSender.contextClick(true).
2810 BUGWK39105 : editing/spelling/context-menu-suggestions.html = TEXT
2811
2812 // Flaky tests
2813 BUG44229 WIN LINUX : fast/loader/recursive-before-unload-crash.html = PASS TEXT
2814
2815 // DeviceOrientation API not yet implemented.
2816 BUG44654 SKIP : fast/dom/DeviceOrientation = TEXT
2817 BUG44654 SKIP : fast/dom/Window/window-properties-on-device-orientation.html = TEXT
2818
2819 BUGWK39655 : fast/dom/prototype-property.html = FAIL
2820
2821 // These SVG tests have been flaky on Win from quite some time.
2822 // Hard to pin down which roll introduced the flakiness.
2823 BUG45106 WIN : svg/clip-path/clip-path-childs-clipped.svg = PASS CRASH
2824 BUG45106 WIN : svg/clip-path/clip-path-evenodd-nonzero.svg = PASS CRASH
2825 BUG45106 WIN : svg/text/text-text-05-t.svg = PASS CRASH
2826
2827 BUG45720 WIN LINUX : websocket/tests/reload-crash.html = PASS CRASH
2828
2829 // Failing since http://trac.webkit.org/changeset/60865
2830 BUG46096 : editing/selection/extend-selection-after-double-click.html = TEXT
2831
2832 // Flaky since at least r60276
2833 BUG46157 WIN RELEASE : transforms/2d/transform-value-types.html = PASS TEXT
2834
2835 // Chromium does not use the icon loader in WebCore for loading notifications.
2836 WONTFIX SKIP : http/tests/notifications = FAIL
2837
2838 BUG46276 WIN : fast/text/international/khmer-selection.html = IMAGE+TEXT
2839
2840 // HTML5 Geolocation API does not use window.clientInformation.
2841 BUG11246 DEFER SKIP : fast/dom/Window/window-properties-geolocation.html = TEXT
2842
2843 // Re-enabled in http://trac.webkit.org/changeset/60983
2844 // Maybe we just need rebaseline.
2845 BUG_HAMAJI WIN LINUX : svg/W3C-SVG-1.1/fonts-glyph-02-t.svg = IMAGE+TEXT
2846
2847 // WebKit r60999 updated acid3.html, doesn't match expected on Chromium Mac.
2848 BUG46375 MAC : http/tests/misc/acid3.html = IMAGE
2849
2850 // Fails starting http://trac.webkit.org/changeset/61153
2851 // Needs update to test_shell.
2852 BUG46538 MAC WIN LINUX : editing/deleting/forward-delete-key.html = TEXT
2853
2854 BUG46603 : fast/frames/lots-of-iframes.html = PASS TIMEOUT
2855 BUG46603 : fast/frames/lots-of-objects.html = PASS TIMEOUT
2856
2857 // LayoutTestController::pageProperty is not implemented for Chromium yet.
2858 BUGWK35961 : printing/page-rule-selection.html = TEXT
2859
2860 // Needs to implement layoutTestController.dumpResourceResponseMIMETypes()
2861 BUG46872 : fast/preloader = TEXT
2862 // Became a flaky crash in http://trac.webkit.org/log/?verbose=on&rev=61417&stop_rev=61393
2863 BUG46974 WIN : inspector/audits-panel-functional.html = CRASH PASS
2864 // After enabling meter element, these are failing in debug only.
2865 BUG46989 MAC DEBUG : fast/dom/HTMLMeterElement/meter-appearances-capacity.html = IMAGE
2866 BUG46989 MAC DEBUG : fast/dom/HTMLMeterElement/meter-element.html = IMAGE
2867 BUG46989 MAC DEBUG : fast/dom/HTMLMeterElement/meter-optimums.html = IMAGE
2868 BUG46989 MAC DEBUG : fast/dom/HTMLMeterElement/meter-styles-changing-pseudo.html = IMAGE
2869 BUG46989 MAC DEBUG : fast/dom/HTMLMeterElement/meter-styles.html = IMAGE
2870
2871 BUG47035 WIN DEBUG : fast/loader/stateobjects/document-destroyed-navigate-back-with-fragment-scroll.html = PASS TEXT
2872 BUG47036 WIN SLOW : html5lib/runner.html = PASS
2873
2874 # Related to https://bugs.webkit.org/show_bug.cgi?id=35350
2875 BUG45048 : fast/events/show-modal-dialog-onblur-onfocus.html = FAIL
2876 BUG45048 : fast/harness/resources/modal-dialog.html = FAIL
2877 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T10.html = FAIL
2878 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T11.html = FAIL
2879 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T2.html = FAIL
2880 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T2.html = FAIL
2881 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T4.html = FAIL
2882 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T4.html = FAIL
2883 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T6.html = FAIL
2884 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T6.html = FAIL
2885 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T8.html = FAIL
2886 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T8.html = FAIL
2887 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T10.html = FAIL
2888 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T11.html = FAIL
2889 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T1.html = FAIL
2890 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T1.html = FAIL
2891 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T3.html = FAIL
2892 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T3.html = FAIL
2893 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T5.html = FAIL
2894 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T5.html = FAIL
2895 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T7.html = FAIL
2896 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T7.html = FAIL
2897 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.1_T9.html = FAIL
2898 BUG45048 : fast/js/sputnik/Conformance/10_Execution_Contexts/10.2_Entering_An_Execution_Context/10.2.2_Eval_Code/S10.2.2_A1.2_T9.html = FAIL