65518fde3c9940b3cbc7e74c6e64b76e69dbf42c
[WebKit-https.git] / PerformanceTests / ChangeLog
1 2016-05-06  Manuel Rego Casasnovas  <rego@igalia.com>
2
3         [css-grid] Unprefix CSS Grid Layout properties
4         https://bugs.webkit.org/show_bug.cgi?id=157137
5
6         Reviewed by Simon Fraser.
7
8         Remove "-webkit" prefix from all the grid layout properties,
9         including the display value.
10         Update the source code to remove the prefix where it was used too.
11
12         * Layout/auto-grid-lots-of-data.html:
13         * Layout/fixed-grid-lots-of-data.html:
14         * Layout/fixed-grid-lots-of-stretched-data.html:
15
16 2016-04-25  Geoffrey Garen  <ggaren@apple.com>
17
18         bmalloc: Misc improvements to MallocBench
19         https://bugs.webkit.org/show_bug.cgi?id=157004
20
21         Reviewed by Darin Adler.
22
23         * MallocBench/run-malloc-benchmarks: Added --memory and --memory_warning
24         modes for focused memory testing.
25
26         * MallocBench/MallocBench/Benchmark.cpp:
27         (Benchmark::printReport): Clarified output.
28
29         (Benchmark::currentMemoryBytes): Added compressed memory because top
30         does the same. (It always happens to zero in the benchmarks we run. But
31         this is good for sanity.)
32
33         * MallocBench/MallocBench/CommandLine.cpp: Moved up to 8 runs to reduce
34         variance.
35
36         * MallocBench/MallocBench/alloc_free.cpp:
37         (benchmark_alloc_free): Cycle a single allocation in order to stress
38         the effect of merging on calls to madvise.
39
40         * MallocBench/MallocBench/big.cpp:
41         (benchmark_big): Graduated to 8kB-128kB because medium tests up to 8 and
42         our large allocator doesn't kick in until 64kB.
43
44         * MallocBench/MallocBench/medium.cpp:
45         (benchmark_medium): Test all the way down to 1kB because our large
46         allocator used to service 1kB allocations and 1kB is an interesting
47         middle size where memory is unusually large but allocation throughput
48         still matters.
49
50         * MallocBench/MallocBench/stress.cpp:
51         (benchmark_stress): Reduced the churn count to match stress_aligned
52         because this test was taking too long to complete.
53
54         * MallocBench/MallocBench/stress_aligned.cpp:
55         (benchmark_stress_aligned): Our new large allocator can handle even
56         more absurdly large values.
57
58 2016-04-25  Simon Fraser  <simon.fraser@apple.com>
59
60         Add a content animation test that uses SVG animation.
61         https://bugs.webkit.org/show_bug.cgi?id=156827
62
63         * Animation/svg-animation.html: Added.
64         * Skipped:
65
66 2016-04-22  Simon Fraser  <simon.fraser@apple.com>
67
68         Skip two content animation tests which are only meant for iOS testing.
69
70         * Animation/css-animation.html: Added.
71         * Animation/raf-animation.html: Added.
72
73         * Skipped:
74
75 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
76
77         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
78         https://bugs.webkit.org/show_bug.cgi?id=156827
79
80         Add two files missing from the previous commit.
81
82         * Animation/css-animation.html: Added.
83         * Animation/raf-animation.html: Added.
84
85 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
86
87         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
88         https://bugs.webkit.org/show_bug.cgi?id=156827
89
90         Reviewed by Stephanie Lewis.
91
92         Two new files for the content-animation suite.
93
94         After patching for use in the benchmark, these tests are a little different to other benchmarks.
95         The test content itself does not collect performance data; the tests spit out a boilerplate JSON
96         result with a placeholder for framerate, which is collected in native code.
97
98         When run as a benchmark, test completion involves a couple of bounces between the test and MobileSafari.
99         Test completion is initiated by a setTimeout() in the test, at which point location.hash is set to "#done".
100         MobileSafari detects that, and asynchronously dumps performance data. Once this is complete, MobileSafari
101         changes the URL has to "#submit", which triggers the XHR to the test relay that indicates the test is
102         complete.
103
104         * Animation/css-animation.html: Added.
105         * Animation/raf-animation.html: Added.
106
107 2016-04-15  Jon Lee  <jonlee@apple.com>
108
109         Animometer test could report a NaN
110         https://bugs.webkit.org/show_bug.cgi?id=156646
111
112         Reviewed by Darin Adler.
113         Provisionally reviewed by Said Abou-Hallawa.
114
115         * Animometer/tests/resources/main.js:
116         (didFinishInterval): The ramp controller has a first phase where it ramps up the complexity and
117         reacts based on how well the system handles the load. The assumption was that it would handle at least
118         1 particle easily. That is not always the case. As a result, an interpolation calculation could
119         end up setting an upper bound of NaN.
120
121         This occurs because we never get out of the first tier, so this._lastTierComplexity is undefined.
122         Now that we guarantee a minimum complexity of 1, modify the conditional to check for this._lastTierComplexity
123         before interpolating the upper bound of the first ramp. In the case where the system struggles with
124         1 particle, set it to currentComplexity.
125
126 2016-04-09  Jon Lee  <jonlee@apple.com>
127
128         Update Animometer to accommodate different screens
129         https://bugs.webkit.org/show_bug.cgi?id=156449
130
131         Reviewed by Darin Adler.
132         Provisionally reviewed by Said Abou-Hallawa.
133
134         * Animometer/index.html: Wrap button in a container to add padding at the bottom.
135         * Animometer/resources/debug-runner/animometer.css:
136         (@media screen and (min-device-width: 1800px)): Deleted.
137         (@media screen and (min-width: 1800px)): Cannot use min-device-width since it may match incorrectly.
138         (screen and (max-device-height: 414px) and (orientation: landscape)): Some devices swap device width
139         and height with orientation change.
140         * Animometer/resources/runner/animometer.css: Similar.
141         (screen and (min-device-width: 1024px) and (orientation: landscape)):
142         (screen and (max-device-height: 414px) and (orientation: landscape)):
143         (.frame-container): On smaller iPhones, adding 1px prevents the navigation bars from appearing.
144         (@media screen and (min-device-width: 768px) and (max-device-width: 1024px)): Deleted.
145         (@media (min-device-height: 768px) and (max-device-height: 1024px)): Target iPad Airs and similar.
146         (@media screen and (min-device-width: 1024px) and (max-device-width: 1366px)): Deleted.
147         (@media screen and (max-device-width: 1024px) and (min-device-height: 1366px)): Target iPad Pro.
148         (#results footer): Add padding below the button for testing again.
149         * Animometer/tests/master/multiply.html: Remove the center text.
150         * Animometer/tests/master/resources/text.js: Update the test so that in every frame the text moves.
151         * Animometer/tests/master/text.html: Update the text sizing depending on the size of the device.
152
153 2016-04-08  Jon Lee  <jonlee@apple.com>
154
155         Have Animometer benchmark always start with complexity of 1
156         https://bugs.webkit.org/show_bug.cgi?id=156432
157
158         Reviewed by Ryosuke Niwa.
159
160         * Animometer/tests/resources/main.js: Update the default Controller and RampController to
161         set its minimum complexities to 1 instead of 0.
162
163 2016-04-08  Jon Lee  <jonlee@apple.com>
164
165         Fix SVG benchmark test
166         https://bugs.webkit.org/show_bug.cgi?id=156410
167
168         Reviewed by Dean Jackson.
169
170         * Animometer/resources/extensions.js: Update Point.zero to be a static Point.
171         * Animometer/tests/simple/resources/tiled-canvas-image.js:
172         (Stage.call._setupTiles): Refactor.
173         * Animometer/tests/master/resources/particles.js:
174         (Particle.prototype.reset): Use Point.center.
175         (complexity): We are not using a gradient background anymore, so remove the +1.
176         * Animometer/tests/master/resources/svg-particles.js: Update to use SVG transform
177         instead of CSS transform.
178
179 2016-04-06  Jon Lee  <jonlee@apple.com>
180
181         Update master benchmark with SVG test
182         https://bugs.webkit.org/show_bug.cgi?id=156273
183
184         Reviewed by Dean Jackson.
185         Provisionally reviewed by Said Abou-Hallawa.
186
187         Switch masks tests for SVG path test.
188
189         * Animometer/resources/debug-runner/tests.js: Move mask test here.
190         * Animometer/resources/runner/tests.js: Add SVG test here.
191         * Animometer/tests/dom/particles.html: Renamed from PerformanceTests/Animometer/tests/master/particles.html.
192         * Animometer/tests/dom/resources/dom-particles.js: Renamed from PerformanceTests/Animometer/tests/master/resources/dom-particles.js.
193
194         * Animometer/tests/master/resources/particles.js: Add minPosition for bounds checking. Prevents particle from being
195         partially obscured.
196         * Animometer/tests/master/resources/svg-particles.js: Added.
197         (Particle): The particle is either a path object or a rect using a path as a clip. The
198         same path is used either way. For each particle create a linear gradient with a random
199         rotation.
200         (SVGParticlesStage): Look in #shapes to see how many different kinds of paths are available.
201         This makes the test more generic in case other shapes need to be tested.
202         * Animometer/tests/master/svg-particles.html: Added. Have two defs, one that houses each
203         particle's gradient, and one that holds the shape templates.
204
205 2016-03-27  Hunseop Jeong  <hs85.jeong@samsung.com>
206
207         [EFL] REGRESSION(r188793): It made 200 layout tests and Bindings/event-target-wrapper.html performance test fail
208         https://bugs.webkit.org/show_bug.cgi?id=148470 
209
210         Reviewed by Darin Adler.
211
212         * Skipped: Unskip the Bindings/event-target-wrapper test.
213
214 2016-03-23  Jon Lee  <jonlee@apple.com>
215
216         Update focus and leaves tests
217         https://bugs.webkit.org/show_bug.cgi?id=155825
218
219         Reviewed by Simon Fraser.
220
221         Particles would improperly disappear, before they were fully off stage. Update the calculation.
222         * Animometer/tests/dom/resources/leaves.js:
223         * Animometer/tests/master/resources/leaves.js:
224
225         * Animometer/tests/master/focus.html: Update the center element styling.
226         * Animometer/tests/master/resources/focus.js:
227         (FocusElement.Utilities.createClass): Give enough space in the container for each particle for the blur
228         to spread. It should be about 3x more space than the blur radius on each side.
229         (Stage.call.initialize): Ditto for the center element.
230
231 2016-03-23  Jon Lee  <jonlee@apple.com>
232
233         Update support for other platforms
234         https://bugs.webkit.org/show_bug.cgi?id=155824
235
236         Reviewed by Simon Fraser.
237
238         * Animometer/resources/debug-runner/animometer.css: Remove extraneous media query. All of it should
239         be handled in the release stylesheet.
240         * Animometer/resources/debug-runner/animometer.js: Add support for browsers that return an HTMLCollection
241         when retrieving radio elements with a name, instead of the selected value.
242         * Animometer/resources/runner/animometer.css: Adjust the queries for devices of varying widths.
243         (.frame-container): Move overflow:hidden to #stage.
244         * Animometer/tests/master/resources/stage.css: Consolidate into tests/resources/stage.css.
245         * Animometer/tests/resources/stage.css:
246         (body): Remove overflow:hidden.
247         (#stage): Set overflow:hidden here.
248         (#center-text): Moved from master/resources/stage.css.
249
250         Update stylesheet hrefs.
251         * Animometer/tests/master/canvas-stage.html:
252         * Animometer/tests/master/focus.html:
253         * Animometer/tests/master/leaves.html:
254         * Animometer/tests/master/multiply.html:
255         * Animometer/tests/master/particles.html:
256         * Animometer/tests/master/text.html: Adjust text size to fit in the device screen.
257
258 2016-03-23  Jon Lee  <jonlee@apple.com>
259
260         Make the benchmark require device to be in landscape orientation
261         https://bugs.webkit.org/show_bug.cgi?id=155822
262         rdar://problem/25258650
263
264         Reviewed by Ryosuke Niwa.
265
266         Check that the device is in landscape orientation. If not, disable the button to start it,
267         and show a warning message.
268
269         * Animometer/developer.html: Add a message about how the browser should be set up. Include a
270         warning message that appears if the orientation is incorrect on mobile devices.
271         * Animometer/index.html: Ditto.
272
273         * Animometer/resources/debug-runner/animometer.css: Migrate the .hidden rule into the release
274         stylesheet. Update the style to accommodate the new UI.
275         * Animometer/resources/runner/animometer.css:
276
277         * Animometer/resources/runner/animometer.js:
278         (window.benchmarkController.initialize): Add the orientation listener is needed.
279         (window.benchmarkController.addOrientationListenerIfNecessary): Only mobile devices need this. Check
280         to see for support of window.orientation.
281         (window.benchmarkController._orientationChanged): Toggle the warning based on whether we match the
282         landscape query. Set a state variable, which is needed for the debug harness. Call updateStartButtonState.
283         (window.benchmarkController.updateStartButtonState):
284         * Animometer/resources/debug-runner/animometer.js: Change _updateStartButtonState to return
285         a boolean about whether at least one test is selected. That will be used in
286         benchmarkController.updateStartButtonState(). Move the load event listener to the release version.
287         (window.benchmarkController.updateStartButtonState): Override the release version, and also check
288         that at least one test is selected.
289
290 2016-03-22  Geoffrey Garen  <ggaren@apple.com>
291
292         MallocBench: consolidate regression testing for aligned allocation
293         https://bugs.webkit.org/show_bug.cgi?id=155762
294
295         Reviewed by Michael Saboff.
296
297         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
298         * MallocBench/MallocBench/Benchmark.cpp:
299         * MallocBench/MallocBench/memalign.cpp: Removed.
300         * MallocBench/MallocBench/memalign.h: Removed. The stress_aligned test
301         covers this and much more.
302
303         * MallocBench/MallocBench/stress_aligned.cpp:
304         (benchmark_stress_aligned): Include specific tests for extreme sizes
305         and alignments.
306
307 2016-03-21  Jon Lee  <jonlee@apple.com>
308
309         Update benchmark tests
310         https://bugs.webkit.org/show_bug.cgi?id=155723
311
312         Reviewed by Darin Adler.
313         Provisionally reviewed by Said Abou-Hallawa.
314
315         Add quadratic and bezier segments to the canvas path test.
316
317         * Animometer/resources/runner/tests.js: Some of the query strings are unnecessary.
318         Rename the test.
319         * Animometer/tests/master/resources/canvas-stage.js:
320         (tune): Update to be able to take an array of possible constructors. Choose one randomly.
321         * Animometer/tests/master/resources/canvas-tests.js:
322         (CanvasLinePoint.Utilities.createClass): Move the point selection out to a separate
323         function called randomPoint() for reuse. Move X_LOOPS, Y_LOOPS, and offsets into the
324         class definition.
325         (randomPoint): Scale the grid down a little bit so that the lines along the edge of the
326         canvas are not cut off when the stroke size is thick.
327         (CanvasQuadraticSegment): Added.
328         (CanvasBezierSegment): Added.
329         (SimpleCanvasStage): Pass in an array of the different segment types. Since line segments
330         are short compared to the curved ones, make it twice as likely to render a line segment.
331         (SimpleCanvasStage.animate): Update the drawing code so that we render all line segments.
332
333         Add a helper method that selects a random element from an array.
334
335         * Animometer/tests/resources/main.js:
336         (Stage.randomElementInArray): Select a random element from the provided array.
337
338         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Refactor.
339         * Animometer/tests/dom/resources/leaves.js: Ditto.
340         * Animometer/tests/master/resources/dom-particles.js: Ditto.
341         * Animometer/tests/master/resources/image-data.js: Ditto.
342         * Animometer/tests/master/resources/leaves.js: Ditto.
343         * Animometer/tests/simple/resources/simple-canvas-paths.js: Ditto.
344
345         Add canvas tests that includes all stroke and fill paths. This makes it possible to avoid having to
346         include the full simple canvas suite for perf testing.
347
348         * Animometer/resources/debug-runner/tests.js: Add new tests. Move the canvas test into the Canvas
349         suite.
350         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add a CanvasStroke and CanvasFill particle
351         that random selects an object to render.
352
353         * Animometer/resources/debug-runner/tests.js: Move 3D suite before basic canvas suite.
354         When updating the perf bot script, we will include the suites up to this one, but exclude
355         the basic canvas suite.
356
357         Move compositing transforms test to HTML suite and remove the empty Miscellaneous suite.
358
359         * Animometer/resources/debug-runner/tests.js:
360         * Animometer/tests/dom/compositing-transforms.html: Renamed from PerformanceTests/Animometer/tests/misc/compositing-transforms.html.
361         * Animometer/tests/dom/resources/compositing-transforms.js: Renamed from PerformanceTests/Animometer/tests/misc/resources/compositing-transforms.js.
362
363         Clean up miscellaneous test suite. Add a canvas ellipse test, and remove the other
364         canvas tests.
365
366         * Animometer/resources/debug-runner/tests.js: Add ellipse tests to the simple suite.
367         * Animometer/tests/misc/canvas-electrons.html: Removed.
368         * Animometer/tests/misc/canvas-stars.html: Removed.
369         * Animometer/tests/misc/resources/canvas-electrons.js: Removed.
370         * Animometer/tests/misc/resources/canvas-stars.js: Removed.
371         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add ellipse primitives.
372
373         Merge text tests together into one.
374
375         * Animometer/resources/runner/tests.js: Remove international.html.
376         * Animometer/tests/master/international.html: Removed.
377         * Animometer/tests/master/resources/text.js:
378         (animate): Update styling. Manually calculate gradients for the shadow particles.
379         Reduce the step size for y direction to avoid cutting text off at the margins. Increase
380         step for x since there will be a little more room.
381         * Animometer/tests/master/text.html: Add more translations and lay it out in a table.
382
383 2016-03-20  Jon Lee  <jonlee@apple.com>
384
385         Add a link to show debug data
386         https://bugs.webkit.org/show_bug.cgi?id=155724
387
388         Reviewed by Simon Fraser.
389
390         * Animometer/developer.html: Attach the onclick handler to the score.
391         * Animometer/index.html: Ditto.
392
393 2016-03-18  Dean Jackson  <dino@apple.com>
394
395         Add a basic WebGL test to Animometer
396         https://bugs.webkit.org/show_bug.cgi?id=155475
397         <rdar://problem/25156860>
398
399         Reviewed by Simon Fraser and Jon Lee.
400
401         Add a pretty simple WebGL test to Animometer
402         which tries to draw a number of animated triangles.
403         The result still needs a bit of tuning.
404
405         * Animometer/resources/debug-runner/tests.js: Add a new
406         Suite for "3D" tests.
407         * Animometer/tests/3d/resources/webgl.js: Added.
408         * Animometer/tests/3d/webgl.html: Added.
409
410 2016-03-18  Jon Lee  <jonlee@apple.com>
411
412         Add support for statically linking to a specific test
413         https://bugs.webkit.org/show_bug.cgi?id=155631
414
415         Rubber-stamped by Darin Adler.
416
417         * Animometer/developer.html: Update to call restartBenchmark instead so that it works for
418         both the preset and the manually set test sessions.
419         * Animometer/resources/debug-runner/animometer.css:
420         (.tree .link): Style the "link" UI.
421         * Animometer/resources/debug-runner/animometer.js: Move updateDisplay from suitesManager
422         to optionsManager since this is a visual option and has nothing to do with the suites
423         settings. Update the construction of the test UI by including a "link" after each test.
424         Clicking on that link brings up a JS prompt with a URL and a query string with the current
425         parameters of the controller, and selected test. Pasting this URL into the location bar will
426         automatically start running the selected test.
427         (suitesManager.suitesFromQueryString): Iterate through the Suites and tests and find the one
428         that matches the provided parameters. Returns an object similar to the form in
429         suitesManager.updateLocalStorageFromUI.
430         (benchmarkController.initialize): After settings up the events and options, try parsing the
431         query string and running the benchmark immediately. Otherwise, fall back to the form.
432         (benchmarkController.startBenchmark): Store the options and suites into member variables for
433         reuse in restartBenchmark.
434         (benchmarkController.startBenchmarkImmediatelyIfEncoded): Convert the query string to an object.
435         If that's successful, find the suite and test referenced in the query string. Start the benchmark if
436         the search for the test succeeded.
437         * Animometer/resources/extensions.js:
438         (Utilities.stripNonASCIICharacters): Helper method to convert the name of the suite and test
439         into a query-string-friendly version.
440         (Utilities.convertObjectToQueryString): Helper method to convert an object to query string
441         format.
442         (Utilities.convertQueryStringToObject): Helper method to convert query string into an object
443         with properties and values.
444
445 2016-03-16  Jon Lee  <jonlee@apple.com>
446
447         Add a new benchmark test
448         https://bugs.webkit.org/show_bug.cgi?id=155570
449
450         Reviewed by Simon Fraser.
451
452         New Leaves test includes various image sizes and opacity.
453
454         * Animometer/resources/debug-runner/tests.js: Add it to the HTML test suite.
455         * Animometer/tests/dom/leaves.html: Added.
456         * Animometer/tests/dom/resources/leaves.js: Added. Override the
457         (Particle.call.reset): Uses a range of sizes, and opacity.
458         (Particle.call.animate): Opacity goes up then down. When it hits 0, reset the particle.
459         (Particle.call.move): Set transform and opacity.
460         * Animometer/tests/master/resources/leaves.js: Get rid of the closure so that it
461         can be used in this test. Update the relative path so that it works in both the master
462         and dom test suite.
463
464 2016-03-15  Simon Fraser  <simon.fraser@apple.com>
465
466         Add developer Animometer test that bounces P3-tagged images
467         https://bugs.webkit.org/show_bug.cgi?id=155511
468
469         Reviewed by Tim Horton.
470         
471         Add a test for rendering performance of tagged images. The 5 images are tagged
472         with the Display P3 colorspace.
473
474         * Animometer/resources/debug-runner/tests.js:
475         * Animometer/tests/bouncing-particles/bouncing-tagged-images.html: Added.
476         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Added.
477         * Animometer/tests/bouncing-particles/resources/image1.jpg: Added.
478         * Animometer/tests/bouncing-particles/resources/image2.jpg: Added.
479         * Animometer/tests/bouncing-particles/resources/image3.jpg: Added.
480         * Animometer/tests/bouncing-particles/resources/image4.jpg: Added.
481         * Animometer/tests/bouncing-particles/resources/image5.jpg: Added.
482
483 2016-03-09  Jon Lee  <jonlee@apple.com>
484
485         Enhance existing Animometer tests
486         https://bugs.webkit.org/show_bug.cgi?id=155261
487
488         Reviewed by Simon Fraser.
489
490         * Animometer/tests/master/resources/canvas-tests.js: Add a gradient to
491         the filled circles. To expose more of the gradient, add another circle.
492         (SimpleCanvasStage.call.animate): For each frame, create a gradient with
493         undulating stop points and colors. Fill the circles twice; once with
494         the solid color, and once with the gradient.
495
496         * Animometer/tests/master/resources/dom-particles.js: Refactor the
497         emission variables into a separate stage for this test. Add a colorOffset
498         variable to make the colors of each particle slightly different, since
499         the ramp controller can add large numbers of particles all at once, which
500         would otherwise get all the same color.
501         * Animometer/tests/master/resources/particles.js:
502         (initialize): Remove the code specific to the SVG mask test.
503
504         * Animometer/tests/master/resources/image-data.js:
505         (initialize): Remove unused local variable.
506         * Animometer/tests/master/resources/multiply.js:
507         (initialize): Make the test harder by adding more total particles.
508
509 2016-03-09  Jon Lee  <jonlee@apple.com>
510
511         Add text tests
512         https://bugs.webkit.org/show_bug.cgi?id=155257
513
514         Reviewed by Simon Fraser.
515
516         * Animometer/resources/extensions.js:
517         (UnitBezier.Utilities.createClass): Add a class that computes Bezier points
518         assuming that two of the control points are at (0,0) and (1,1). Taken from
519         WebCore/platform/graphics/UnitBezier.h
520         * Animometer/resources/runner/tests.js: Add a test for English text and one
521         for international text.
522         * Animometer/tests/master/international.html: Added.
523         * Animometer/tests/master/resources/text.js: Added. The test assumes there is
524         #template div which it will copy. The copies are placed behind the template, and
525         are set with different colors each frame. They are moved around with CSS transform.
526         * Animometer/tests/master/text.html: Added.
527
528         Remove the other text tests, since these ones cover the same techniques.
529         * Animometer/tests/text/layering-text.html: Removed.
530         * Animometer/tests/text/resources/layering-text.js: Removed.
531         * Animometer/tests/text/resources/text-boxes.js: Removed.
532         * Animometer/tests/text/text-boxes.html: Removed.
533         * Animometer/resources/debug-runner/tests.js:
534
535 2016-03-09  Jon Lee  <jonlee@apple.com>
536
537         Add a new image test
538         https://bugs.webkit.org/show_bug.cgi?id=155232
539
540         Reviewed by Dean Jackson.
541         Provisionally reviewed by Said Abou-Hallawa.
542
543         The image test renders PNGs and moves them with translate and rotate
544         transforms. Each particle has a lifetime, and when the lifetime ends or
545         the particle goes offscreen, it resets itself somewhere on the stage.
546
547         * Animometer/resources/debug-runner/tests.js: Remove the CSS bouncing PNG
548         images test, because this one tests the same technique.
549         * Animometer/resources/runner/tests.js: Added here as "Leaves".
550         * Animometer/tests/master/leaves.html: Added.
551         * Animometer/tests/master/resources/particles.js: Refactor out the parts
552         specific to the DOM particles test. Consequently make velocity a public
553         member.
554         (initialize): The options parameter is never used, so remove it.
555         (animate): Remove unused local variable.
556         * Animometer/tests/master/resources/leaves.js: Maintains a focal point that
557         moves back and forth across the canvas. That point affects the velocity
558         of the particles. When the focal point is on the leftmost side, it is
559         between [-6, -2], and set in reset(). When the focal point is on the rightmost
560         side, it will be from [2, 6].
561         * Animometer/tests/master/resources/dom-particles.js: Move JS specific to
562         this test here from particles.js.
563
564         New images.
565         * Animometer/tests/master/resources/compass100.png: Added.
566         * Animometer/tests/master/resources/console100.png: Added.
567         * Animometer/tests/master/resources/contribute100.png: Added.
568         * Animometer/tests/master/resources/debugger100.png: Added.
569         * Animometer/tests/master/resources/inspector100.png: Added.
570         * Animometer/tests/master/resources/layout100.png: Added.
571         * Animometer/tests/master/resources/performance100.png: Added.
572         * Animometer/tests/master/resources/script100.png: Added.
573         * Animometer/tests/master/resources/shortcuts100.png: Added.
574         * Animometer/tests/master/resources/standards100.png: Added.
575         * Animometer/tests/master/resources/storage100.png: Added.
576         * Animometer/tests/master/resources/styles100.png: Added.
577         * Animometer/tests/master/resources/timeline100.png: Added.
578
579 2016-03-03  Jon Lee  <jonlee@apple.com>
580
581         Add ability to retrieve raw data from release harness
582         https://bugs.webkit.org/show_bug.cgi?id=155026
583
584         Reviewed by Simon Fraser.
585
586         * Animometer/developer.html: Remove the special UI in the debug
587         harness.
588         * Animometer/resources/runner/animometer.css: Add styles for the
589         overlay.
590         * Animometer/resources/runner/animometer.js: Let 'j' show the JSON
591         results, but only if the overlay doesn't exist. Add 'esc' key to dismiss
592         the overlay.
593         (window.benchmarkController.selectResults): Cycle the cases around
594         so that the first 's' press selects both the benchmark score and
595         the individual test scores.
596         * Animometer/resources/debug-runner/animometer.css: Remove
597         unneeded rules.
598         * Animometer/resources/debug-runner/animometer.js: Make the same
599         call to handleKeyPress.
600
601 2016-03-03  Jon Lee  <jonlee@apple.com>
602
603         Make sure multiply test particles have at least some opacity
604         https://bugs.webkit.org/show_bug.cgi?id=155027
605
606         Reviewed by Simon Fraser.
607
608         * Animometer/tests/master/resources/multiply.js:
609         (initialize): Have the elements spin a little faster to make it
610         more obvious when the system is being stressed.
611         (_addTile):
612         (animate): Make sure each element being animated has at least 1%
613         opacity.
614
615 2016-03-03  Jon Lee  <jonlee@apple.com>
616
617         Update image test
618         https://bugs.webkit.org/show_bug.cgi?id=154962
619
620         Rubber-stamped by Darin Adler.
621
622         * Animometer/tests/master/image-data.html: Make each canvas have a compositing layer.
623         * Animometer/tests/master/resources/image-data.js:
624         (initialize): Update to load multiple images serially.
625         (_loadImage):
626         (tune): Use display instead of visibility. When showing an element anew, move it somewhere else.
627         (_createTestElement): Set up the element, refactor out placement of element to _refreshElement.
628         (_refreshElement): Place element in a tile grid.
629         (animate):
630         (_getRandomNeighboringPixelIndex): Use a more conservative distribution to make the effect last a little longer.
631         * Animometer/tests/master/resources/compass.svg: Added.
632         * Animometer/tests/master/resources/console.svg: Added.
633         * Animometer/tests/master/resources/contribute.svg: Added.
634         * Animometer/tests/master/resources/debugger.svg: Added.
635         * Animometer/tests/master/resources/inspector.svg: Added.
636         * Animometer/tests/master/resources/layout.svg: Added.
637         * Animometer/tests/master/resources/performance.svg: Added.
638         * Animometer/tests/master/resources/script.svg: Added.
639         * Animometer/tests/master/resources/shortcuts.svg: Added.
640         * Animometer/tests/master/resources/standards.svg: Added.
641         * Animometer/tests/master/resources/storage.svg: Added.
642         * Animometer/tests/master/resources/styles.svg: Added.
643         * Animometer/tests/master/resources/timeline.svg: Added.
644
645 2016-03-02  Jon Lee  <jonlee@apple.com>
646
647         Add some new controllers, and refine tests
648         https://bugs.webkit.org/show_bug.cgi?id=154914
649
650         Reviewed by Simon Fraser.
651
652         Improve tests.
653
654         * Animometer/tests/master/focus.html: Move each particle into a layer. Put the particle
655         in a container element. Expand the container element by the max blur radius, and clip
656         overflow. This way, when the blur is applied, it avoids causing layer resizes.
657         * Animometer/tests/master/resources/focus.js:
658         (FocusElement.Utilities.createClass): Create a container element, and put the particle
659         inside.
660         (hide): Set display:none.
661         (show): Set display:block.
662         (animate): Apply filters to the container element.
663         (FocusStage.call.initialize): Instead of inserting and removing elements from the DOM,
664         keep them in the stage, but set the display style instead. Use this._offsetIndex to
665         keep track of which elements are displayed.
666         (FocusStage.call.animate): Move some calculations around to avoid doing unneeded math.
667         (FocusStage.call.getBlurValue): Make sure elements are always blurred.
668         (FocusStage.call.getOpacityValue): Make sure elements have some opacity.
669         * Animometer/tests/master/resources/multiply.js: Have the particles on the edge of the
670         stage appear less black when the complexity gets large enough.
671         (tune): Have this._distanceFactor calculate the factor. Avoid calculating square root each
672         frame.
673
674 2016-03-02  Jon Lee  <jonlee@apple.com>
675
676         Add some new controllers, and refine tests
677         https://bugs.webkit.org/show_bug.cgi?id=154914
678
679         Reviewed by Simon Fraser.
680
681         Add a controller that centers around 30 fps instead of 60 fps.
682
683         * Animometer/developer.html: Add a new option.
684         * Animometer/resources/debug-runner/animometer.js:
685         * Animometer/resources/runner/animometer.js:
686         (this._processData.findRegression): When calculating the complexity-frameLength regression,
687         check the controller, and use a 30 fps baseline if needed.
688         * Animometer/resources/statistics.js:
689         (Regression.Utilities.createClass): Update to allow clients to specify the baseline
690         frame length.
691         * Animometer/tests/resources/main.js:
692         (tune): Override some of the constants in RampController. Move those constants out for
693         easier reading.
694
695         Add a fixed controller, with no step.
696
697         * Animometer/developer.html: Add a controller that takes no step.
698         * Animometer/resources/debug-runner/animometer.js:
699         * Animometer/tests/resources/main.js:
700         (Rotater.Utilities.createClass):
701
702         Switch to ramp controller as default.
703
704         * Animometer/developer.html: Increase the test length to 20 seconds.
705         * Animometer/resources/debug-runner/animometer.js: Rename the "adjustment" field to "controller"
706         since that is a more accurate description.
707         * Animometer/resources/debug-runner/graph.js:
708         * Animometer/resources/runner/animometer.js: Update preferences for release suite.
709
710 2016-02-26  Jon Lee  <jonlee@apple.com>
711
712         Address Dean's comments in 154673.
713
714         * Animometer/developer.html:
715         * Animometer/resources/debug-runner/animometer.js:
716         * Animometer/resources/debug-runner/graph.js:
717
718 2016-02-25  Jon Lee  <jonlee@apple.com>
719
720         Update animation benchmark and tests
721         https://bugs.webkit.org/show_bug.cgi?id=154673
722
723         Reviewed by Dean Jackson.
724
725         Update test visuals.
726
727         * Animometer/tests/master/resources/canvas-tests.js:
728         (CanvasLineSegment.Utilities.createClass): Line segments near the edge of the stage get clipped.
729         Update circle position and radius to minimize impact.
730         * Animometer/tests/master/resources/particles.js: Get rid of rotating gradient background, and
731         have 3 locations for emitting particles.
732         * Animometer/tests/master/resources/multiply.js: Update distance metric so that fringe tiles get
733         more color.
734         (initialize): Fix some of the math for laying out the tiles.
735         (animate): When a tile isn't used, set visibility: hidden.
736
737 2016-02-24  Jon Lee  <jonlee@apple.com>
738
739         Update animation benchmark and tests
740         https://bugs.webkit.org/show_bug.cgi?id=154673
741
742         Reviewed by Dean Jackson.
743
744         Update the ramp controller.
745
746         The controller refines the complexity interval to test across.
747
748         * Animometer/resources/statistics.js: Add functions that estimate cumulative distribution function.
749         (Regression): For the flat regression, force the first segment to be at 60 fps.
750         (valueAt): Add convenience function to return interpolated value based on the regression used.
751         (_calculateRegression): Include the number of points included for both segments, and the piecewise
752         errors.
753         * Animometer/tests/resources/math.js: Make the Kalman estimator subclass Experiment, and allow it
754         to be reset.
755
756         * Animometer/tests/resources/main.js: Initialize the tier such that it starts at 10^0 = 1.
757         Increase the number of ramps. Maintain three FPS thresholds-- the frame rate of interest, a limit
758         on the lowest FPS we care to go for later interpolation, and a minimum FPS threshold we want to
759         aim for each ramp. Also keep three estimators: a running average of the change point, a minimum
760         boundary for each ramp, and an estimator for all the frames within an interval. The first two
761         are used to determine the parameters of the next ramp, and the latter allows us to refine the
762         parameters.
763         (update): During the tier phase, it is possible that the highest complexity possible for a test
764         won't stress the system enough to trigger stopping the tier phase and transitioning to the ramps.
765         If the complexity doesn't change when going to the next tier, we've maxed the test out, and move
766         on. When the tier phase completed, turn off Controller.frameLengthEstimator, which estimates the
767         FPS at each tier.
768         (tune): At each interval, look at the confidence distribution of being on the 60 FPS side or the
769         slow side. If the slowest FPS we achieve at the ramp's maximum complexity is not at least
770         _fpsRampSlowThreshold, then increase the maximum complexity. If we ever achieve 60 FPS, increase
771         the ramp's minimum complexity to that level. If, at an even lower complexity, a glitch causes the
772         FPS to drop, we reset the minimum complexity.
773
774         Have the bootstrap calculation occur between tests. Clean up harness.
775
776         * Animometer/resources/debug-runner/animometer.js: Run bootstrap after a test has
777         completed to avoid doing all of it at the end before showing the results. Clean up
778         parameters being passed around.
779         * Animometer/resources/debug-runner/tests.js:
780         (text):
781         * Animometer/resources/runner/animometer.js:
782         (this._processData.calculateScore): Save the results to the same object holding the data.
783         (this._processData._processData): In the case where a file is dragged, calculate the score
784         serially. Grab the results object and move it to the results variable and remove it from
785         the data object. This avoids serializing the results into the JSON.
786         (this._processData.findRegression): Include the samples used for bootstrapping. Reduce the
787         resample size to shorten the wait.
788         * Animometer/resources/runner/benchmark-runner.js:
789         * Animometer/resources/statistics.js:
790         (bootstrap): Update how bootstrapData is sorted. In some regression results the mix of
791         floats and integers causes an alphabetical sort to occur.
792         * Animometer/resources/strings.js:
793
794         Add meta charset so that encodings between harness and test match.
795
796         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
797         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
798         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
799         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
800         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
801         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
802         * Animometer/tests/master/canvas-stage.html:
803         * Animometer/tests/master/focus.html:
804         * Animometer/tests/master/image-data.html:
805         * Animometer/tests/master/multiply.html:
806         * Animometer/tests/master/particles.html:
807         * Animometer/tests/misc/canvas-electrons.html:
808         * Animometer/tests/misc/canvas-stars.html:
809         * Animometer/tests/misc/compositing-transforms.html:
810         * Animometer/tests/simple/simple-canvas-paths.html:
811         * Animometer/tests/simple/tiled-canvas-image.html:
812         * Animometer/tests/template/template-canvas.html:
813         * Animometer/tests/template/template-css.html:
814         * Animometer/tests/template/template-svg.html:
815         * Animometer/tests/text/layering-text.html:
816         * Animometer/tests/text/text-boxes.html:
817
818         Update test harness reporting.
819
820         * Animometer/developer.html: Add missing meta charset.
821         * Animometer/index.html: Remove unnecessary utf-8 declaration.
822         * Animometer/resources/debug-runner/animometer.css: Add convenience classes for
823         formatting the results table.
824         * Animometer/resources/debug-runner/animometer.js: Adjust which stats are shown.
825         * Animometer/resources/debug-runner/tests.js: Display bootstrapping statistics.
826         * Animometer/resources/strings.js: Move strings not used by the release harness.
827
828         Switch to a pseudo-random number generator.
829
830         * Animometer/resources/statistics.js: Add a Pseudo class, with a simple
831         pseudo-random number generator.
832         (_calculateRegression): Reset the generator before running bootstrap.
833         (bootstrap): Deleted.
834
835         Replace Math.random with Pseudo.random.
836         * Animometer/tests/master/resources/canvas-tests.js:
837         * Animometer/tests/master/resources/focus.js:
838         * Animometer/tests/master/resources/particles.js:
839         * Animometer/tests/resources/main.js:
840
841         Use bootstrapping to get confidence interval in the breakpoint.
842
843         For the ramp controller, calculate the piecewise regression, and then use
844         bootstrapping in order to find the 95% confidence interval. Use the raw data.
845
846         * Animometer/developer.html: Default to the complexity graph. Add a legend
847         checkbox to toggle visibility of the bootstrap score and histogram.
848         * Animometer/resources/debug-runner/animometer.css: Make some more space to show
849         the old raw and average scores in the legend. Add new styles for the data.
850         * Animometer/resources/debug-runner/graph.js:
851         (_addRegressionLine): Allow passing an array for the variance bar tied to the
852         regression line. Now |stdev| is |range|.
853         (createComplexityGraph): Add bootstrap median, and overlay a histogram of
854         the bootstrap samples. Switch raw samples from circles to X's.
855         (onComplexityGraphOptionsChanged): Allow toggling of the bootstrap data.
856         (onGraphTypeChanged): Move the regressions for the raw and average samples to the
857         legend. In the subtitle use the bootstrap median, and include the 95% confidence
858         interval.
859         * Animometer/resources/runner/animometer.js:
860         (this._processData.findRegression): Factor out the code that determines which
861         samples to include when calculating the piecewise regression. For series that have
862         many samples, or a wider range of recorded complexities, throw away the 2.5%
863         lowest and highest samples before calculating the regression. Keep all samples
864         if the number of samples to regress is small or the range of complexities is
865         narrow.
866         (this._processData._calculateScore): Factor out regression calculation to
867         findRegression(). Bootstrap the change point of the regression. The score is the
868         median.
869         * Animometer/resources/statistics.js:
870         (_calculateRegression): Correct an issue in the calculation of the regression, where
871         the denominator can be 0.
872         (bootstrap): Template for bootstrapping. Create a bootstrap sample array, Create
873         re-samples by random selection with replacement. Return the 95% confidence samples,
874         the bootstrap median, mean, and the data itself.
875         * Animometer/resources/strings.js: Add bootstrap.
876         * Animometer/tests/resources/main.js:
877         (processSamples): Don't prematurely cut the sample data.
878
879         Fix graph drawing.
880
881         * Animometer/resources/debug-runner/animometer.js: Add spacing in the JSON output.
882         Multiple tests output a lot of JSON and can hang when selecting JSON with no whitespace.
883         * Animometer/resources/debug-runner/animometer.css:
884         (#complexity-graph .series.raw circle): Update the color.
885         * Animometer/resources/debug-runner/graph.js: Use the FPS axis instead of the
886         complexity axis, which can vary in domain. For determining the complexity domain,
887         only use samples after samplingTimeOffset.
888
889         Allow dropping results JSON.
890
891         * Animometer/developer.html: Add a button.
892         * Animometer/resources/debug-runner/animometer.css:
893         * Animometer/resources/debug-runner/animometer.js: Read the data and go straight
894         to the dashboard. With JSON output, write out only the options and the raw data.
895
896         Teach the harness to evaluate the samples and determine the test score.
897
898         This will allow us to update how the score is calculated separately from the samples recorded.
899         This also prepares the harness to be able to accept JSON of prior runs.
900
901         * Animometer/resources/strings.js: Clean up and remove unneeded strings and reduce some of the
902         hierarchy.
903         * Animometer/resources/debug-runner/tests.js: Update to use the new strings.
904
905         * Animometer/tests/resources/main.js: Allow all controllers to show a complexity-FPS graph.
906         (_processComplexitySamples): Factor out some of the sample processing done in the ramp
907         controller for the benefit of the other controllers. |complexitySamples| contains a list of
908         samples. Sort the samples by complexity. Optionally remove the top x% of samples.
909         Group them, and calculate distribution of samples within the same complexity, and add those as
910         new entries into |complexityAverageSamples|.
911         (Controller.processSamples): Move the code responsible for determining the complexity and FPS
912         scores out to ResultsDashboard. The structure of the data returned by the controller is:
913
914         {
915             controller: [time-regression, time-regression, ...], // optional, data specific to controller
916             marks: [...],
917             samples: {                    // all of the sample data
918                 controller: [...],
919                 complexity: [...],        // processed from controller samples
920                 complexityAverage: [...], // processed from complexity samples
921             }
922         }
923
924         (AdaptiveController.processSamples): Adding the target frame length is no longer necessary; we
925         now pass the test options to the graph.
926         (Regression): Move to statistics.js.
927         * Animometer/resources/statistics.js: Move Regression to here. Add a check if the sampling range
928         only contains one sample, since we cannot calculate a regression from one sample point.
929
930         Teach the test harness to evaluate the data.
931         * Animometer/resources/runner/animometer.js:
932         (ResultsDashboard): Store the options used to run the test and the computed results/score separately
933         from the data. The results are stored as:
934
935         {
936             score: /* geomean of iteration score */,
937             iterationsResults: [
938                 {
939                     score: /* geomean of tests */,
940                     testsResults: {
941                         suiteName: {
942                             testName: {
943                                 controller: {
944                                     average:
945                                     concern:
946                                     stdev:
947                                     percent:
948                                 },
949                                 frameLength: { ... },
950                                 complexity: {
951                                     complexity:
952                                     stdev:
953                                     segment1:
954                                     segment2:
955                                 },
956                                 complexityAverage: { ... }
957                             },
958                             testName: { ... },
959                         },
960                         ... next suite ...
961                     }
962                 },
963                 { ...next iteration... }
964             ]
965         }
966
967         * Animometer/resources/debug-runner/animometer.js: Pass options around instead of relying
968         on what was selected in the form. This will later allow for dropping previous results, and
969         using those runs' options when calculating scores.
970         (ResultsTable._addGraphButton): Simplify button action by using attached test data.
971         * Animometer/resources/debug-runner/graph.js: Refactor to use the data.
972
973         Consolidate JS files, and move statistics out to a separate JS.
974
975         Preparation for having the Controller only handle recording and storage of the samples,
976         and leave the evaluation of the test score out to the harness. Move Experiment to
977         a new statistics.js, where Regression will also eventually go. Get rid of algorithm.js
978         and move it to utilities.js since the Heap is used only for Experiments.
979
980         * Animometer/tests/resources/algorithm.js: Removed. Heap is in utilities.js.
981         * Animometer/tests/resources/sampler.js: Removed. Experiment is in statistics.js,
982         Sampler in main.js.
983         * Animometer/tests/resources/main.js: Move Sampler here.
984         * Animometer/resources/statistics.js: Added. Move Statistics and Experiment here.
985         * Animometer/resources/extensions.js: Move Heap here. Attach static method to create
986         a max or min heap to Heap, instead of a new Algorithm object.
987
988         Update JS files.
989         * Animometer/developer.html:
990         * Animometer/index.html:
991         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
992         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
993         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
994         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
995         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
996         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
997         * Animometer/tests/master/canvas-stage.html:
998         * Animometer/tests/master/focus.html:
999         * Animometer/tests/master/image-data.html:
1000         * Animometer/tests/master/multiply.html:
1001         * Animometer/tests/master/particles.html:
1002         * Animometer/tests/misc/canvas-electrons.html:
1003         * Animometer/tests/misc/canvas-stars.html:
1004         * Animometer/tests/misc/compositing-transforms.html:
1005         * Animometer/tests/simple/simple-canvas-paths.html:
1006         * Animometer/tests/simple/tiled-canvas-image.html:
1007         * Animometer/tests/template/template-canvas.html:
1008         * Animometer/tests/template/template-css.html:
1009         * Animometer/tests/template/template-svg.html:
1010         * Animometer/tests/text/layering-text.html:
1011         * Animometer/tests/text/text-boxes.html:
1012
1013         Fix the cursor in the graph analysis when the min
1014         complexity is not 0.
1015
1016         * Animometer/resources/debug-runner/graph.js:
1017         (_addRegression):
1018         (createComplexityGraph):
1019
1020 2016-02-23  Geoffrey Garen  <ggaren@apple.com>
1021
1022         Fix some issues in MallocBench
1023         https://bugs.webkit.org/show_bug.cgi?id=154600
1024
1025         Reviewed by Oliver Hunt.
1026
1027         * MallocBench/MallocBench.xcodeproj/project.pbxproj: Make nimlang.ops
1028         a part of the build so that it copies to the right place for execution.
1029
1030         * MallocBench/MallocBench/Interpreter.cpp:
1031         (Interpreter::Interpreter): Don't try to open .ops files for writing
1032         because we're only going to read and we might need extra permissions to
1033         write.
1034
1035         (Interpreter::~Interpreter): Give more context when opening a file fails
1036         to help with debugging.
1037
1038         * MallocBench/MallocBench/stress.cpp:
1039         (benchmark_stress): Reduce iterations to complete in less than 10 seconds.
1040
1041 2016-02-23  Michael Saboff  <msaboff@apple.com>
1042
1043         Unreviewed change to revert extraneous changes made part of change set 196955.
1044
1045         * MallocBench/MallocBench/Interpreter.cpp:
1046         (Interpreter::doMallocOp):
1047         (Interpreter::Thread::switchTo):
1048         (writeData): Deleted.
1049
1050 2016-02-19  Michael Saboff  <msaboff@apple.com>
1051
1052         MallocBench: Added recording for nimlang website, new recording details and added new options
1053         https://bugs.webkit.org/show_bug.cgi?id=154485
1054
1055         Reviewed by Geoff Garen.
1056
1057         Added new capabilities to MallocBench.  These include:
1058             Added a recording of http://nim-lang.org/docs/lib.html.
1059             Added thread id to the recording and the ability to playback switching threads in MallocBench
1060             Added aligned allocations to recordings and the ability to playback
1061             Added --use-thread-id option to honor recorded thread ids
1062             Added --detailed-report to output remaining allocations by size after playback
1063             Added --no-warmup to not run the warm up iteration
1064
1065         Changed the way that options are passed down to the benchmarks.  Instead of passing individual
1066         boolean or numeric option values, just pass a reference the CommandLine itself.  Each benchmark
1067         can access the options that are appropriate.  The Benchmark class also uses the options for
1068         is parallel, run counts and warm up.
1069
1070         Added thread id and aligned malloc to the Op by noticing that structure padding and Opcode allowed
1071         for another 32 bits of data.  Breaking that unused 32 bits into a 16 bit thread id value and a
1072         16 bit log base 2 of the alignment for aligned malloc allowed for existing recordings to playback
1073         without any incompatibilities.
1074
1075         Threaded operation is simulated by creating threads as needed.  As long as the next Op's thread id
1076         is the same as the last, operation continues as normal.  When the next Op has a different thread id,
1077         we switch to that thread using the shared Op stream to continue playing back.  There is a mutex to
1078         assure that only one thread is really running at a time and a condition variable used to wait
1079         that the current thread id matches each block thread's thread id.  This doesn't simulate true
1080         concurrent threading, but is instead plays back Ops recorded for multiple thread faithfully.
1081
1082         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
1083         * MallocBench/MallocBench/Benchmark.cpp:
1084         (deallocateHeap):
1085         (Benchmark::Benchmark):
1086         (Benchmark::runOnce):
1087         (Benchmark::run):
1088         * MallocBench/MallocBench/Benchmark.h:
1089         (Benchmark::isValid):
1090         * MallocBench/MallocBench/CommandLine.cpp:
1091         (CommandLine::printUsage):
1092         * MallocBench/MallocBench/CommandLine.h:
1093         (CommandLine::isValid):
1094         (CommandLine::benchmarkName):
1095         (CommandLine::isParallel):
1096         (CommandLine::useThreadID):
1097         (CommandLine::detailedReport):
1098         (CommandLine::warmUp):
1099         (CommandLine::heapSize):
1100         (CommandLine::runs):
1101         * MallocBench/MallocBench/Interpreter.cpp:
1102         (Interpreter::Interpreter):
1103         (Interpreter::run):
1104         (Interpreter::readOps):
1105         (Interpreter::doOnSameThread):
1106         (Interpreter::switchToThread):
1107         (Interpreter::detailedReport):
1108         (compute2toPower):
1109         (writeData):
1110         (Interpreter::doMallocOp):
1111         (Interpreter::Thread::Thread):
1112         (Interpreter::Thread::stop):
1113         (Interpreter::Thread::~Thread):
1114         (Interpreter::Thread::runThread):
1115         (Interpreter::Thread::waitToRun):
1116         (Interpreter::Thread::switchTo):
1117         * MallocBench/MallocBench/Interpreter.h:
1118         (Interpreter::Thread::isMainThread):
1119         * MallocBench/MallocBench/alloc_free.cpp: Added.
1120         (benchmark_alloc_free):
1121         * MallocBench/MallocBench/alloc_free.h: Added.
1122         * MallocBench/MallocBench/balloon.cpp:
1123         (benchmark_balloon):
1124         * MallocBench/MallocBench/balloon.h:
1125         * MallocBench/MallocBench/big.cpp:
1126         (benchmark_big):
1127         * MallocBench/MallocBench/big.h:
1128         * MallocBench/MallocBench/churn.cpp:
1129         (benchmark_churn):
1130         * MallocBench/MallocBench/churn.h:
1131         * MallocBench/MallocBench/facebook.cpp:
1132         (benchmark_facebook):
1133         * MallocBench/MallocBench/facebook.h:
1134         * MallocBench/MallocBench/flickr.cpp:
1135         (benchmark_flickr):
1136         (benchmark_flickr_memory_warning):
1137         * MallocBench/MallocBench/flickr.h:
1138         * MallocBench/MallocBench/fragment.cpp:
1139         (validate):
1140         (benchmark_fragment):
1141         (benchmark_fragment_iterate):
1142         * MallocBench/MallocBench/fragment.h:
1143         * MallocBench/MallocBench/list.cpp:
1144         (benchmark_list_allocate):
1145         (benchmark_list_traverse):
1146         * MallocBench/MallocBench/list.h:
1147         * MallocBench/MallocBench/main.cpp:
1148         (main):
1149         * MallocBench/MallocBench/medium.cpp:
1150         (benchmark_medium):
1151         * MallocBench/MallocBench/medium.h:
1152         * MallocBench/MallocBench/memalign.cpp:
1153         (test):
1154         (benchmark_memalign):
1155         * MallocBench/MallocBench/memalign.h:
1156         * MallocBench/MallocBench/message.cpp:
1157         (benchmark_message_one):
1158         (benchmark_message_many):
1159         * MallocBench/MallocBench/message.h:
1160         * MallocBench/MallocBench/nimlang.cpp: Added.
1161         (benchmark_nimlang):
1162         * MallocBench/MallocBench/nimlang.h: Added.
1163         * MallocBench/MallocBench/nimlang.ops: Added.
1164         * MallocBench/MallocBench/realloc.cpp:
1165         (benchmark_realloc):
1166         * MallocBench/MallocBench/realloc.h:
1167         * MallocBench/MallocBench/reddit.cpp:
1168         (benchmark_reddit):
1169         (benchmark_reddit_memory_warning):
1170         * MallocBench/MallocBench/reddit.h:
1171         * MallocBench/MallocBench/stress.cpp:
1172         (deallocate):
1173         (benchmark_stress):
1174         * MallocBench/MallocBench/stress.h:
1175         * MallocBench/MallocBench/stress_aligned.cpp:
1176         (benchmark_stress_aligned):
1177         * MallocBench/MallocBench/stress_aligned.h:
1178         * MallocBench/MallocBench/theverge.cpp:
1179         (benchmark_theverge):
1180         (benchmark_theverge_memory_warning):
1181         * MallocBench/MallocBench/theverge.h:
1182         * MallocBench/MallocBench/tree.cpp:
1183         (benchmark_tree_allocate):
1184         (benchmark_tree_traverse):
1185         (benchmark_tree_churn):
1186         * MallocBench/MallocBench/tree.h:
1187         * MallocBench/run-malloc-benchmarks:
1188
1189 2016-02-11  Jon Lee  <jonlee@apple.com>
1190
1191         Fix a missing refactoring.
1192
1193         * Animometer/tests/master/resources/multiply.js:
1194         (animate): Move to Utilities.lerp.
1195         (_lerp): Deleted.
1196
1197 2016-02-10  Jon Lee  <jonlee@apple.com>
1198
1199         Add new benchmark tests.
1200         https://bugs.webkit.org/show_bug.cgi?id=154063
1201
1202         Provisionally reviewed by Said Abou-Hallawa.
1203
1204         Add tests for get/put image data, filters, opacity, and css transforms.
1205
1206         * Animometer/resources/runner/benchmark-runner.js:
1207         (_runBenchmarkAndRecordResults): Update the body background color to match that of
1208         the stage.
1209         (this._runNextIteration): Clear the background color style for the results page.
1210         * Animometer/resources/runner/tests.js:
1211         * Animometer/tests/master/focus.html: Added.
1212         * Animometer/tests/master/image-data.html: Added.
1213         * Animometer/tests/master/multiply.html: Added.
1214         * Animometer/tests/master/resources/focus.js: Added.
1215         * Animometer/tests/master/resources/image-data.js: Added.
1216         * Animometer/tests/master/resources/multiply.js: Added.
1217         * Animometer/tests/master/resources/stage.css: Move common styles out.
1218         * Animometer/tests/resources/main.js: Update Stage.randomBool to use Math.random.
1219         Add Stage.randomSign for randomly setting a direction. Add the notion of the
1220         current timestamp of the test to Benchmark, since some animations cycle through
1221         colors and rely on an incremental counter like the time.
1222
1223 2016-02-09  Said Abou-Hallawa  <sabouhallawa@apple.com>
1224
1225         Add internal benchmark tests for CSS mix-blend-modes and filters
1226         https://bugs.webkit.org/show_bug.cgi?id=154058
1227
1228         Provisionally reviewed by Jon Lee.
1229
1230         * Animometer/resources/debug-runner/tests.js: Include the new tests in the
1231         "HTML suite" of the debug runner.
1232
1233         * Animometer/resources/extensions.js:
1234         (Utilities.browserPrefix):
1235         (Utilities.setElementPrefixedProperty): Utility functions to allow setting
1236         prefixed style properties.
1237
1238         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1239         Set the mix-blend-mode and the filter to some random values if the options
1240         of the test requested that.
1241
1242         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1243         (parseShapeParameters): Parse the url options "blend" and "filter" and set
1244         the corresponding flags.
1245
1246         * Animometer/tests/resources/main.js:
1247         (randomStyleMixBlendMode):
1248         (randomStyleFilter): Return random mix-blend-mode and filter.
1249
1250 2016-02-08  Jon Lee  <jonlee@apple.com>
1251
1252         Add a ramp controller
1253         https://bugs.webkit.org/show_bug.cgi?id=154028
1254
1255         Provisionally reviewed by Said Abou-Hallawa.
1256
1257         Enhance the graph to include a complexity-fps graph, in addition
1258         to the time graph.
1259
1260         * Animometer/developer.html: Add a ramp option.
1261         * Animometer/resources/debug-runner/animometer.css: Update the style.
1262         * Animometer/resources/strings.js: Flatten the Strings.text constants.
1263         * Animometer/resources/debug-runner/animometer.js:
1264         (ResultsTable.call._addGraphButton): Refactor.
1265         (ResultsTable.call._addTest): Add regression data.
1266         (benchmarkController): Add a form that allows the user to switch between the two forms,
1267         Add a form that allows the user to toggle different data. Hide certain header columns
1268         depending on the selected controller.
1269         * Animometer/resources/debug-runner/graph.js: Add the complexity regressions.
1270         * Animometer/resources/debug-runner/tests.js: Add headers for the ramp results.
1271         * Animometer/resources/runner/animometer.js:
1272         (ResultsTable): If a header is disabled don't include them in _flattenedHeaders.
1273         * Animometer/tests/resources/main.js:
1274         (Controller): Allow options to specify the capacity for sample arrays.
1275         (Regression): A piecewise regression that tries to fit a slope and a flat profile.
1276         (_calculateRegression): Options can fix the slope and bias when calculating the minimal
1277         error. Sweep across the samples in time (which could be backward depending on the controller)
1278         and calculate the intersection point.
1279         (RampController): This controller assumes that the target frame rate is below
1280         58 FPS. It runs in two stages. The first stage quickly determines the order of
1281         magnitude of objects needed to stress the system by the setting the complexity
1282         to increasingly difficult tiers. Perform a series of ramps descending from a
1283         high-water mark of complexity. The complexity needed to reach the target frame
1284         length is done by performing a piecewise regression on each ramp, and track a
1285         running average of these values. For the next ramp, make that running average
1286         the center of the ramp. With a minimum complexity of 0, the high-water mark is
1287         twice that average. The score is based on the highest complexity that can
1288         reach 60 fps.
1289
1290 2016-02-08  Jon Lee  <jonlee@apple.com>
1291
1292         Address Said's comments on the benchmark, and do some clean up.
1293
1294         * Animometer/developer.html:
1295         * Animometer/resources/debug-runner/animometer.css: Add styles for averages.
1296         * Animometer/resources/debug-runner/animometer.js: Use the right
1297         Strings constants.
1298         * Animometer/resources/debug-runner/graph.js:
1299         (_addRegressionLine): Add missing code to draw the line and standard
1300         deviation highlight.
1301         (onGraphTypeChanged): Remove unneeded variables
1302         (onTimeGraphOptionsChanged):
1303         * Animometer/resources/runner/benchmark-runner.js:
1304         (_runBenchmarkAndRecordResults): Rename samplers to suiteResults and
1305         _suitesSamplers to _suitesResults.
1306         * Animometer/tests/resources/main.js:
1307         (results): Call processSamples().
1308         (update): Change sampling timestamp comparison.
1309         (_animateLoop): Move shouldStop call to before the update.
1310         * Animometer/tests/resources/sampler.js:
1311         (process): Rename to processSamples().
1312
1313 2016-02-07  Jon Lee  <jonlee@apple.com>
1314
1315         Teach Controller to measure intervals, and turn off the frame length estimator.
1316
1317         * Animometer/tests/resources/main.js: Default interval length is 100 ms.
1318         (start): Set the first interval.
1319         (_measureAndResetInterval): Reports the average frame length of the interval that just
1320         completed, and sets up the next interval.
1321         (update): If there is no length, then just use the estimator per frame, otherwise the
1322         estimator measures per interval. Add a didFinishInterval for subclasses to process
1323         prior to recording the sample. Update tune() to include whether an interval had
1324         finished.
1325         (StepController): Step controllers don't measure on an interval basis.
1326
1327 2016-02-07  Jon Lee  <jonlee@apple.com>
1328
1329         Minor refactoring. Rename Controller._estimator to Controller._frameLengthEstimator
1330         and switch the parameters for start(), update(), and tune(), so that the timestamp
1331         is first and stage is second.
1332
1333         * Animometer/tests/resources/main.js:
1334
1335 2016-02-07  Jon Lee  <jonlee@apple.com>
1336
1337         Move ResultsTable functionality not needed for release tests out.
1338         Move reporting of score and mean to selection of the time-based graph.
1339
1340         * Animometer/developer.html: Rename graph-options to time-graph-options.
1341         * Animometer/resources/debug-runner/animometer.js:
1342         (DeveloperResultsTable): Moved from runner/animometer.js. Switch from mean
1343         values to "average" objects which can hold stdev. Move graph button and
1344         calculation of noisy measurements here. Sophisticated header processing
1345         is not needed in release suite.
1346         (populateTable): Use DeveloperResultsTable.
1347         * Animometer/resources/debug-runner/graph.js: Pull time graph creation to
1348         its own function, and add a new onGraphTypeChanged handler in preparation
1349         of a complexity graph to be added later.
1350         * Animometer/resources/runner/animometer.js:
1351         (ResultsTable): Simplify to just handle test names and scores.
1352
1353 2016-02-07  Jon Lee  <jonlee@apple.com>
1354
1355         Tests: reuse objects already made.
1356
1357         Avoid thrash of object creation and removal by maintaining an index that
1358         moves along the array as the adjust values change. If the tune value
1359         requires more objects than the maximum size of the object array, then create
1360         new objects. This means that the object array size never decreases.
1361
1362         * Animometer/tests/master/resources/canvas-stage.js: Maintain a separate
1363         offsetIndex. For these tests, we want to avoid drawing the oldest objects,
1364         so the scene will draw the object at offsetIndex to the end of the array.
1365         (tune): Reverse the logic since "removal" of objects is much simpler and
1366         involves simply changing the offsetIndex.
1367         (animate): Update the for loop to draw from offsetIndex to the end.
1368         (complexity): Update the definition.
1369         * Animometer/tests/master/resources/canvas-tests.js: Maintain a separate
1370         offsetIndex. For these tests, we want to avoid drawing the newest objects,
1371         so the scene will draw the object at index 0 to the object at offsetIndex.
1372         (SimpleCanvasStage.animate): Fly-by removal of local stage variable,
1373         which is unneeded. Update the for loop to draw from offsetIndex to the end.
1374         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1375         (SimpleCanvasStage.animate): Update the for loop to draw from 0 to
1376         offsetIndex.
1377         * Animometer/tests/simple/resources/simple-canvas.js:
1378         (tune): Update logic. Here, offsetIndex represents the boundary of the last
1379         index to render.
1380         (animate): Update the for loop to draw from 0 to offsetIndex.
1381         (complexity): Update the definition.
1382
1383 2016-02-07  Jon Lee  <jonlee@apple.com>
1384
1385         Tests: refactor and update styles.
1386
1387         * Animometer/tests/resources/main.js: Add helper methods that return
1388         a color that hue rotates based on the date, and a counter value that
1389         increases based on the date. Fix randomInt() to not bias against the min and
1390         max values.
1391
1392         * Animometer/tests/master/resources/canvas-tests.js: Use new helper methods.
1393         * Animometer/tests/master/resources/dom-particles.js: Ditto.
1394         * Animometer/tests/master/resources/particles.js: Ditto.
1395         * Animometer/tests/simple/resources/simple-canvas-paths.js: Refactor to
1396         use a rotating color instead of a random color. The fast switching of color
1397         is too vivid to watch.
1398
1399         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1400         (BouncingSvgParticlesStage.call.createGradient): Fix the gradient so
1401         that the last stop is located at the end.
1402
1403 2016-02-07  Jon Lee  <jonlee@apple.com>
1404
1405         Refactor tune() to not return the complexity of the scene.
1406
1407         We have stage.complexity() now, so returning the complexity through tune
1408         is unnecessary.
1409
1410         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1411         * Animometer/tests/master/resources/canvas-stage.js:
1412         * Animometer/tests/master/resources/particles.js:
1413         * Animometer/tests/misc/resources/canvas-electrons.js:
1414         * Animometer/tests/misc/resources/canvas-stars.js:
1415         * Animometer/tests/resources/main.js:
1416         * Animometer/tests/simple/resources/simple-canvas.js:
1417         * Animometer/tests/simple/resources/tiled-canvas-image.js:
1418         * Animometer/tests/template/resources/template-canvas.js:
1419         * Animometer/tests/template/resources/template-css.js:
1420         * Animometer/tests/template/resources/template-svg.js:
1421         * Animometer/tests/text/resources/layering-text.js:
1422
1423 2016-02-07  Jon Lee  <jonlee@apple.com>
1424
1425         Make the fixed controller a step controller instead. Halfway through the test
1426         it will bump up the complexity 4-fold. Calculate the step timestamp using options
1427         instead of a separate parameter to the Controller constructor.
1428
1429         * Animometer/developer.html: Change value to "step"
1430         * Animometer/resources/debug-runner/animometer.js:
1431         (window.suitesManager.updateEditsElementsState): Show number inputs when set to "step".
1432         * Animometer/tests/resources/main.js:
1433         (update): Provide a hook for subclasses to tune.
1434         (StepController): Maintain a flag determining whether we've stepped, and the time
1435         we should step.
1436         (Benchmark): Use the new StepController.
1437
1438 2016-02-07  Jon Lee  <jonlee@apple.com>
1439
1440         Adjust the FPS graph scale.
1441
1442         Instead of making the FPS graph linearly scale, scale it based on the frame length,
1443         but show the data in terms of FPS. Because it is inversely proportional, and most
1444         of the data never gets below 20, concentrate the axis from 20-60 FPS, since otherwise
1445         over half of the available graph space ends up blank.
1446
1447         This means we should convert all of the FPS data to frame length data.
1448
1449         * Animometer/resources/debug-runner/graph.js: Update the domain to be based on
1450         frame length in milliseconds instead of FPS. Update the cursor to consider all of the
1451         values being shown, and then pick the min and max values to represent the length of the
1452         cursor.
1453         * Animometer/resources/runner/animometer.js:
1454         * Animometer/resources/strings.js:
1455         * Animometer/tests/resources/main.js:
1456         (processSamples): Add the ability to only sample a range of the data instead of everything
1457         after an offset index. Update sampler to record the frame lengths instead of the frame
1458         rate.
1459
1460 2016-02-07  Jon Lee  <jonlee@apple.com>
1461
1462         Add option to use different methods for retrieving a timestamp.
1463
1464         * Animometer/developer.html: Add performance.now and Date.now options.
1465         * Animometer/resources/runner/animometer.js: Default to performance.now.
1466         (window.benchmarkController.startBenchmark):
1467         * Animometer/tests/resources/main.js: Tie the desired method to _getTimestamp.
1468         (run): Use _getTimestamp.
1469         (_animateLoop): Ditto.
1470
1471 2016-02-07  Jon Lee  <jonlee@apple.com>
1472
1473         Allow adding any number of markers to the graph. The markers can be labeled
1474         and contain timestamp and sample index data. Make it a part of the controller
1475         rather than keeping it in the sampler.
1476
1477         * Animometer/resources/debug-runner/animometer.css: Add styles for markers
1478         * Animometer/resources/debug-runner/graph.js: Create the markers and add
1479         text labels.
1480         * Animometer/resources/runner/animometer.js: Assume the samplingTimeOffset
1481         is just one of the marks provided.
1482         * Animometer/resources/strings.js: Add Strings.json.marks.
1483         * Animometer/tests/resources/main.js:
1484         (Controller): Keep marks here. They are keyed by the marker name, so no two
1485         markers should have the same name.
1486         (recordFirstSample): Refactor to use mark.
1487         (mark): Allows for arbitrary data if needed later. The timestamp maintained
1488         is relative to the absolute start timestamp.
1489         (containsMark): Checks whether a mark with a specific comment exists.
1490         (processSamples): Removes the _startTimestamp offset from the marks before
1491         setting it in results.
1492         * Animometer/tests/resources/sampler.js: Remove marks.
1493
1494 2016-02-07  Jon Lee  <jonlee@apple.com>
1495
1496         Get rid of options member variable in Benchmark.
1497
1498         Options are only needed when initializing the stage or benchmark, so there's no
1499         need to also keep a reference to it.
1500
1501         * Animometer/tests/resources/main.js: Get rid of options variable in Benchmark.
1502         Pass options to Controllers and Stages.
1503         (Controller.Utilities.createClass):
1504         (Benchmark.Utilities.createClass):
1505         (get options): Deleted.
1506
1507         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
1508         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
1509         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
1510         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
1511         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1512         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1513         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1514         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1515         * Animometer/tests/master/resources/canvas-stage.js:
1516         * Animometer/tests/master/resources/canvas-tests.js:
1517         * Animometer/tests/master/resources/particles.js:
1518         * Animometer/tests/misc/resources/canvas-electrons.js:
1519         * Animometer/tests/misc/resources/canvas-stars.js:
1520         * Animometer/tests/misc/resources/compositing-transforms.js:
1521         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1522         * Animometer/tests/simple/resources/tiled-canvas-image.js:
1523         * Animometer/tests/template/resources/template-canvas.js:
1524         * Animometer/tests/template/resources/template-css.js:
1525         * Animometer/tests/template/resources/template-svg.js:
1526         * Animometer/tests/text/resources/layering-text.js:
1527
1528 2016-02-07  Jon Lee  <jonlee@apple.com>
1529
1530         Update how the benchmark is run
1531         https://bugs.webkit.org/show_bug.cgi?id=153960
1532
1533         Provisionally reviewed by Said Abou-Hallawa.
1534
1535         Introduce the notion of a Controller. It is responsible for recording, updating,
1536         and processing the statistics and complexity of the benchmark. This allows
1537         plugging in different Controllers.
1538
1539         This strips most of the functionality from Animator and BenchmarkState, so fold
1540         what's left into Benchmark. Now, Benchmarks only own a stage and a controller, but
1541         are responsible for driving the animation loop.
1542
1543         Rewrite Animator._shouldRequestAnotherFrame into two different Controllers. One
1544         maintains a fixed complexity, and the other adapts the complexity to meet a
1545         fixed FPS.
1546
1547         Fix the Kalman estimator to be modeled on a scalar variable with no model.
1548
1549         * Animometer/tests/resources/main.js: Remove BenchmarkState and Animator, and
1550         replace it with a Controller. Add a FixedController and refactor the previous controller
1551         to an AdaptiveController.
1552
1553         (Controller): Controllers own the estimator and the sampler. When a new frame is
1554         displayed, the animation loop calls update(). The estimator and sampler record
1555         stats, then tune. Samplers can track multiple series of data. The basic controller
1556         tracks timestamp, complexity, and estimated frame rate.
1557                 The Kalman estimation is based on the frame length rather than the frame
1558         rate. Because FPS is inverse proportional to frame length, in the case where the measured
1559         frame length is very small, the FPS ends up being a wildly large number (in the order of
1560         600-1000 "FPS"), and it pulls the estimator up drastically enough that it takes a while
1561         for it to settle back down. Using frame length reduces the impact of these spikes.
1562                 Converging the estimation takes enough time to avoid initializing it immediately
1563         when the benchmark starts. Instead, the benchmark runs for a brief period of time (100ms)
1564         before running it in earnest. Allow controllers an opportunity to set the complexity
1565         before starting recording.
1566                 When the benchmark is complete, the controller has an opportunity to process
1567         the samples. The default implementation calculates the raw FPS based on the time
1568         difference of the samples, and calculates the complexity score. This is moved from
1569         Benchmark.processSamples.
1570
1571         (Controller): Initialize timestamps. These are at first relative to the start of the
1572         benchmark, but are offset by the absolute start time during start(). By default maintain
1573         3 data series, but subclasses can override.
1574         (start): Calls recordFirstSample() for subclasses to override if needed.
1575         (recordFirstSample): For basic controller, start sampling at the beginning.
1576         (update): Update the frame length estimator and sample.
1577         (shouldStop): Checks that the time is before _endTimestamp.
1578         (results): Returns the processed samples.
1579         (processSamples): Iterate through the sample data and collate them. Include scores.
1580
1581         (FixedComplexityController): Controller that tunes the stage to the desired complexity
1582         prior to starting, and keeps it at that complexity.
1583
1584         (AdaptiveController): Have the estimator estimate the interval frame rate instead of the
1585         raw frame rate.
1586                 The previous version of this controller ignored the frame that came after the
1587         adjustment. The raw FPS show that whatever noise the scene change adds is negligible
1588         compared to the noise of the system overall. Stop ignoring that frame and include all
1589         frames in the measurements.
1590
1591         (Benchmark): Remove dependency on animator, and instantiate a runner based on what is
1592         selected. Most of the loop's functionality is in Controller, so remove here.
1593         (Benchmark.run): Remove start() since it is only called from run(), and fold it in here.
1594         (Benchmark._animateLoop): Fold in from Animator.animateLoop. Let the benchmark run for
1595         a brief period before calling Controller.start().
1596
1597         * Animometer/tests/resources/math.js: Fix the Kalman estimator. The filter estimates
1598         a scalar variable, and makes basic assumptions regarding the model. As a result
1599         none of the linear algebra classes are needed, so remove Matrix, Vector3, and Matrix3.
1600         (SimpleKalmanEstimator): Calculate the gain based on the provided process and
1601         measurement errors.
1602         (KalmanEstimator): Deleted.
1603         (IdentityEstimator): Deleted.
1604         (PIDController): Refactor to use the Utilities.createClass() helper.
1605
1606         The Kalman filter algorithm is explained here http://greg.czerniak.info/guides/kalman1/.
1607         The state, represented by a scalar, is the estimated frame length. There is no user
1608         transition of the state, and the state is the same as the measurement. With this model,
1609         the estimation error converges, so calculate the gain ahead of time.
1610
1611         * Animometer/developer.html: Remove fixed-after-warmup since it is not useful.
1612         Replace the option to toggle the estimator, and make it possible to customize the
1613         estimator's error parameters. Show raw FPS by default, and remove interval FPS,
1614         which will be shown instead of the filtered raw FPS.
1615         * Animometer/resources/debug-runner/animometer.css: Put the header behind the graph.
1616         Remove #intervalFPS rules; move the color to #filteredFPS.
1617         * Animometer/resources/debug-runner/graph.js:
1618         (updateGraphData): Update the hr style to force the layout to be calculated
1619         correctly. Change the tick format to be in terms of seconds, since the timestamps
1620         are in milliseconds. Remove interval data.
1621         * Animometer/resources/runner/animometer.js:
1622         (window.benchmarkController.startBenchmark): Set Kalman parameters.
1623         * Animometer/resources/runner/benchmark-runner.js:
1624         (_runBenchmarkAndRecordResults): When a benchmark completes, expect it to return
1625         the final data, rather than passing a sampler from the controller. This avoids
1626         needing to expose the sampler variable in the benchmark.
1627         * Animometer/tests/resources/sampler.js:
1628         (process): Move the setting of the target frame rate to AdaptiveController.
1629
1630 2016-02-06  Jon Lee  <jonlee@apple.com>
1631
1632         Code clean up: Move Rotater function closer to Stage static methods.
1633         The Rotater is used together with those methods; keep them close.
1634
1635         * Animometer/tests/resources/main.js:
1636
1637 2016-02-06  Jon Lee  <jonlee@apple.com>
1638
1639         Update the JS includes due to ResultsTable move.
1640
1641         * Animometer/developer.html:
1642         * Animometer/index.html:
1643
1644 2016-02-06  Jon Lee  <jonlee@apple.com>
1645
1646         Move createElement and createSVGElement to Utilities.
1647
1648         * Animometer/resources/extensions.js:
1649         (Utilities.createElement): Added.
1650         (Utilities.createSVGElement): Added.
1651         (DocumentExtension.createElement): Deleted.
1652         (DocumentExtension.createSvgElement): Deleted.
1653
1654         * Animometer/resources/debug-runner/animometer.js:
1655         * Animometer/resources/runner/animometer.js:
1656         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1657         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
1658         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1659
1660 2016-02-06  Jon Lee  <jonlee@apple.com>
1661
1662         Add a convenience function for creating a class.
1663
1664         The pattern for creating a class is common enough to add as a Utilities
1665         helper function. It also makes it easy to collapse class definitions when
1666         editing.
1667
1668         * Animometer/resources/debug-runner/animometer.js: Move ProgressBar definition,
1669         since it is only used here.
1670         * Animometer/resources/runner/animometer.js: Move ResultsDashboard and
1671         ResultsTable definition, since it is only used here.
1672         * Animometer/resources/extensions.js: Move Utilities definition to the top. Convert
1673         Point, Insets, SimplePromise.
1674         (ProgressBar): Moved to animometer.js.
1675         (ResultsDashboard): Moved to animometer.js.
1676         (ResultsTable): Moved to animometer.js.
1677         * Animometer/resources/runner/benchmark-runner.js: Convert BenchmarkRunnerState,
1678         BenchmarkRunner.
1679         * Animometer/tests/resources/main.js: Convert Rotater, Stage, Animator, Benchmark.
1680         * Animometer/tests/resources/sampler.js: Convert Experiment, Sampler.
1681
1682         Convert test primitives.
1683         * Animometer/tests/master/resources/canvas-tests.js: Convert CanvasLineSegment,
1684         CanvasArc, CanvasLinePoint.
1685         * Animometer/tests/simple/resources/simple-canvas-paths.js: Convert CanvasLineSegment,
1686         CanvasLinePoint, CanvasQuadraticSegment, CanvasQuadraticPoint, CanvasBezierSegment,
1687         CanvasBezierPoint, CanvasArcToSegment, CanvasArcToSegmentFill, CanvasArcSegment,
1688         CanvasArcSegmentFill, CanvasRect, CanvasRectFill.
1689         * Animometer/tests/simple/resources/tiled-canvas-image.js: Convert CanvasImageTile.
1690
1691 2016-02-06  Jon Lee  <jonlee@apple.com>
1692
1693         Minor improvements to debug harness.
1694
1695         * Animometer/developer.html:
1696         * Animometer/resources/debug-runner/animometer.css:
1697         (#suites): Put the complexity text boxes closer to the test names.
1698         (#options):
1699         (#rawFPS circle): Make the interval FPS appear as a separate data series, with a line.
1700         (#intervalFPS path):
1701         (#intervalFPS circle):
1702         * Animometer/resources/debug-runner/animometer.js:
1703         (window.optionsManager.updateLocalStorageFromUI): Convert number inputs from text.
1704         (window.suitesManager._onChangeTestCheckbox): Refactor to take a checkbox.
1705         (window.suitesManager._createTestElement): Enhance such that typing into the complexity
1706         input will automatically select that test for running.
1707         (window.suitesManager.updateLocalStorageFromJSON): Make the harness work for private
1708         browsing.
1709         * Animometer/resources/debug-runner/graph.js: Separate the intervalFPS data, and show
1710         more accuracy in timestamps.
1711
1712 2016-02-06  Jon Lee  <jonlee@apple.com>
1713
1714         Refactor helper methods for getting random values for a stage.
1715
1716         Instead of requiring a Stage instance, just attach it to the Stage object.
1717
1718         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
1719         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1720         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1721         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1722         * Animometer/tests/master/resources/canvas-tests.js:
1723         * Animometer/tests/master/resources/particles.js:
1724         * Animometer/tests/misc/resources/canvas-electrons.js:
1725         * Animometer/tests/misc/resources/canvas-stars.js:
1726         * Animometer/tests/misc/resources/compositing-transforms.js:
1727         * Animometer/tests/resources/main.js:
1728         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1729
1730 2016-02-05  Said Abou-Hallawa  <sabouhallawa@apple.com>
1731
1732         Add a new graphics test for CanvasRenderingContext2D functions: getImageData and putImageData
1733         https://bugs.webkit.org/show_bug.cgi?id=151716
1734
1735         Reviewed by Darin Adler.
1736
1737         The purpose of this test is to measure the performance of getImageData
1738         and putImageData functions. This test draws a background on the canvas
1739         and then gets some random tiles from this background and draw them in
1740         destinations different from their original sources.
1741
1742         * Animometer/resources/debug-runner/tests.js: Adding the new test to the canvas simple tests suite.
1743
1744         * Animometer/resources/extensions.js:
1745         (Array.prototype.shuffle): Shuffles the elements of an array.
1746
1747         (Point.zero): Returns a new Point object whose x and y are equal zero.
1748         (Point.prototype.str): Used for debugging the Point object.
1749
1750         * Animometer/tests/simple/resources/tiled-canvas-image.js: Added.
1751         (CanvasImageTile):
1752         (CanvasImageTile.prototype.getImageData):
1753         (CanvasImageTile.prototype.putImageData):
1754         (Stage.call.initialize):
1755         (Stage.call._createTiles):
1756         (Stage.call._nextTilePosition):
1757         (Stage.call.tune):
1758         (Stage.call._drawBackground):
1759         (Stage.call.animate):
1760         (Stage.call.complexity):
1761         (Stage.call):
1762         * Animometer/tests/simple/tiled-canvas-image.html: Added.
1763
1764 2016-01-07  Jon Lee  <jonlee@apple.com>
1765
1766         Fix new test.
1767
1768         * Animometer/resources/runner/tests.js: Wrong URL from an
1769         old patch.
1770         * Animometer/tests/master/particles.html:
1771         * Animometer/tests/master/resources/dom-particles.js:
1772         (Particle.call.reset): Figured out a simpler way to set up
1773         the particles.
1774         (this.move.reset): Deleted.
1775         (this.move._applyAttributes): Deleted.
1776         * Animometer/tests/master/resources/particles.js:
1777         (Particle): Call move() after reset().
1778
1779 2016-01-07  Jon Lee  <jonlee@apple.com>
1780
1781         Update benchmark test suite
1782         https://bugs.webkit.org/show_bug.cgi?id=152679
1783
1784         Reviewed by Simon Fraser.
1785
1786         Add a new test. The test has a rotating background
1787         gradient, and does a better job physically simulating
1788         particles.
1789
1790         * Animometer/resources/extensions.js: Teach Point to take constants as well as other Points.
1791         (Point.prototype.length): Added.
1792         (Point.prototype.normalize): Added.
1793         * Animometer/resources/runner/tests.js: Add the test to the master suite.
1794         * Animometer/tests/master/particles.html: Added.
1795         * Animometer/tests/master/resources/particles.js: Added. Parent class for different kinds of particles.
1796         (Particle):
1797         (Particle.prototype.reset): If the particle starts slowing down in terms of its animation,
1798         reset it.
1799         (Particle.prototype.animate): Bounce off the walls elastically, and include gravity.
1800         (Particle.prototype.move): Subclasses should override.
1801         (ParticlesStage): Stage includes a rotating gradient background.
1802         * Animometer/tests/master/resources/dom-particles.js: Added. Creates a <div> and adds it to
1803         the stage.
1804         * Animometer/tests/resources/star.svg: Added.
1805
1806 2016-01-03  Jon Lee  <jonlee@apple.com>
1807
1808         Update benchmark test suite
1809         https://bugs.webkit.org/show_bug.cgi?id=152679
1810
1811         Reviewed by Simon Fraser.
1812
1813         Move algorithm.js and sampler.js to tests/ and benchmark-runner.js to runner/.
1814
1815         Needed by both harnesses.
1816         * Animometer/resources/runner/benchmark-runner.js: Renamed from PerformanceTests/Animometer/resources/debug-runner/benchmark-runner.js.
1817         * Animometer/developer.html:
1818         * Animometer/index.html:
1819
1820         Needed only by the tests. Move to tests/. Statistics, in sampler.js, is used by ResultsDashboard, so move that
1821         into extensions.js.
1822         * Animometer/resources/extensions.js:
1823         * Animometer/tests/resources/algorithm.js: Renamed from PerformanceTests/Animometer/resources/algorithm.js.
1824         * Animometer/tests/resources/sampler.js: Renamed from PerformanceTests/Animometer/resources/sampler.js.
1825         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
1826         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
1827         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
1828         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
1829         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
1830         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
1831         * Animometer/tests/master/canvas-stage.html:
1832         * Animometer/tests/misc/canvas-electrons.html:
1833         * Animometer/tests/misc/canvas-stars.html:
1834         * Animometer/tests/misc/compositing-transforms.html:
1835         * Animometer/tests/simple/simple-canvas-paths.html:
1836         * Animometer/tests/template/template-canvas.html:
1837         * Animometer/tests/template/template-css.html:
1838         * Animometer/tests/template/template-svg.html:
1839         * Animometer/tests/text/layering-text.html:
1840         * Animometer/tests/text/text-boxes.html:
1841
1842 2016-01-07  Jon Lee  <jonlee@apple.com>
1843
1844         Update benchmark test suite
1845         https://bugs.webkit.org/show_bug.cgi?id=152679
1846
1847         Reviewed by Simon Fraser.
1848
1849         Fix tests for other browsers.
1850
1851         * Animometer/resources/extensions.js:
1852         (Point.elementClientSize): Some browsers return 0 for SVG clientWidth and clientHeight.
1853         Use getBoundingClientRect() instead.
1854         * Animometer/tests/misc/resources/canvas-electrons.js:
1855         (CanvasElectron.prototype._draw): Some browsers don't support ellipse.
1856
1857 2016-01-07  Jon Lee  <jonlee@apple.com>
1858
1859         Add a waitUntilReady() step
1860         https://bugs.webkit.org/show_bug.cgi?id=152862
1861
1862         Reviewed by Simon Fraser.
1863
1864         Add a waitUntilReady() callback that lets the benchmark complete
1865         its setup before running the benchmark.
1866
1867         * Animometer/tests/resources/main.js:
1868         (Benchmark.prototype.run): First call waitUntilReady, which returns
1869         a promise. When the promise resolves, run everything that was in this
1870         function.
1871         (Benchmark.prototype.waitUntilReady): Default implementation returns
1872         a resolved promise.
1873         (Benchmark.prototype.resolveWhenFinished): Deleted.
1874         * Animometer/tests/template/resources/template-canvas.js:
1875         (new.TemplateCanvasStage.waitUntilReady): Example on how to override.
1876
1877 2016-01-03  Jon Lee  <jonlee@apple.com>
1878
1879         Update data reporting and analysis
1880         https://bugs.webkit.org/show_bug.cgi?id=152670
1881
1882         Reviewed by Simon Fraser.
1883
1884         Show new graph data. Provide controls to show different series data. Provide an
1885         interactive cursor that shows the data at a given sample.
1886
1887         * Animometer/developer.html: Add a nav section in #results. Each part of the graph
1888         has a checkbox for visual toggling, as well as companion spans to contain the data.
1889                 The numbers will always be shown even if the SVG isn't.
1890         * Animometer/resources/debug-runner/animometer.css:
1891         (#suites): Adjust spacing when doing fixed complexity.
1892         (#test-graph nav): Place the nav in the upper right corner.
1893         (#test-graph-data > svg): Fix the FPS scale from 0-60. It makes the raw FPS goes past
1894         that scale. Allow it to show.
1895         (.target-fps): Add a dotted line for where the benchmark is supposed to settle for FPS.
1896         (#cursor line): The cursor contains a line and highlight circles for the data being shown.
1897         (#cursor circle):
1898         (#complexity path): This and rules afterward are named by series type.
1899         (#complexity circle):
1900         (#filteredFPS path):
1901         (#filteredFPS circle):
1902         (#rawFPS path):
1903         (#intervalFPS circle):
1904         (.left-samples): Deleted.
1905         (.right-samples): Deleted.
1906         * Animometer/resources/debug-runner/animometer.js:
1907         (initialize): Add a "changed" listener when the checkboxes change in the nav.
1908         (onBenchmarkOptionsChanged): Renamed.
1909         (showTestGraph): All graph data is passed in as graphData instead of as arguments.
1910         * Animometer/resources/debug-runner/graph.js: Extend BenchmarkController. When showing
1911         a new graph, call updateGraphData(). It creates all of the d3 graphs. onGraphOptionsChanged()
1912         toggles the data on and off.
1913         (updateGraphData): Add the axes. Add the average lines and markers for sample time and
1914         target FPS. Add the cursor group. Use helper function addData() to add the data. On top of
1915         everything add a transparent area which will catch all of the mouse events. When the mouse
1916         moves in the graph, find the closest data point, show the data in the nav area, and highlight
1917         the data points.
1918         (addData): Adds a line and circle for each data point. Also adds a highlight cursor with a
1919         size a little larger than the circle radius for the data points.
1920         (onGraphOptionsChanged): Called when data is visually toggled.
1921         (showOrHideNodes): Helper function to toggle the .hidden class.
1922         * Animometer/resources/extensions.js:
1923         (ResultsDashboard.prototype.get data): Get rid of the arguments for _processData.
1924         (ResultsTable.prototype._addGraphButton): Shove all of the graph data into a singular object.
1925
1926         Producing the JSON can take a while with all of the data. Make it on-demand with a
1927         button.
1928
1929         * Animometer/resources/debug-runner/animometer.js:
1930         (showResults): When showing the results, don't serialize the JSON data. Move that to...
1931         (showJSONResults): ...here. Remove the button.
1932
1933         * Animometer/developer.html: Add a button. The button will remove itself and populate
1934         the textarea with the JSON data.
1935         * Animometer/resources/debug-runner/animometer.css:
1936         (.hidden): Add a universal hidden class.
1937         (#results button.small-button): Promote the small-button styles to the whole results
1938         section for use in the JSON button.
1939         (#results button.small-button:active):
1940         (#results-data button.small-button): Deleted.
1941         (#results-data button.small-button:active): Deleted.
1942
1943         Refactor how Animator does its recording.
1944
1945         * Animometer/tests/resources/math.js: Create a new, simple estimator that just returns
1946         the same interval frame rate for adjustment.
1947         * Animometer/tests/resources/main.js:
1948         (Animator): Remove _dropFrameCount, and make variables more accurate described.
1949         (Animator.prototype.initialize): Use the identity estimator instead of using a bool.
1950         (Animator.prototype._intervalTimeDelta): Rename, only used internally.
1951         (Animator.prototype._shouldRequestAnotherFrame): Assume we drop one frame for adjustment
1952         of the scene. If we are within the number of frames to measure for the interval, just
1953         record the timestamp. Otherwise we are ready to evaluate and adjust the scene. Record
1954         the interval frame rate and the estimator's frame rate.
1955
1956         Avoid processing the data through the Experiment while the test is running. Reconfigure
1957         the sampler to just record the raw samples. After the test is done, run the samples through
1958         the Experiment to get the score.
1959
1960         * Animometer/resources/sampler.js:
1961         (Experiment): Fold _init() into the constructor since nobody else will call it. This is not
1962         needed until the test concludes, so remove startSampling(). Clients should just call sample().
1963         (Sampler): Pre-allocate arrays given the number of data points being recorded, and a capacity
1964         of how many samples will be used. The processor is a called when it's time to process the data
1965         since that is the client also telling the Sampler what to record.
1966                 Introduce the notion of marks as well, which allows the client to mark when an
1967         event occurs. When we mark sample start, we can attach the timestamp there, instead of storing
1968         it separately.
1969         (Sampler.prototype.startSampling): Deleted. Clients should just call record().
1970         (Sampler.prototype.record): The data to record is passed in as variable arguments.
1971         (Sampler.prototype.mark): When adding a mark, a client needs to provide a unique string, and
1972         can provide extra data object for later retrieval.
1973         (Sampler.prototype.process): Renamed from toJSON. Trim the sampling arrays to what was used.
1974         Call the processor to process the samples.
1975         * Animometer/resources/debug-runner/benchmark-runner.js:
1976         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Call process().
1977
1978         * Animometer/resources/strings.js: Add some new strings, remove the graph ones since they are
1979         not used.
1980         * Animometer/tests/resources/main.js:
1981         (Benchmark): Create a sampler with 4 series. The maximum number of points expected is the
1982         number of seconds multiplied by 60 fps. Benchmark, as a client of the Sampler, knows about all
1983         of the data being added to the Sampler. It is added through record(), and processed through
1984         processSamples().
1985         (Benchmark.prototype.update): Mark when we've passed warmup and are starting to sample. Include
1986         the timestamp in the custom data for the mark. This avoids the need to store is separately in
1987         the Sampler. Fold what was in record() here, since nothing else needs this functionality.
1988         record() now just relays the information to the sampler.
1989         (Benchmark.prototype.record): Called by Animator, which provides the data to the sampler.
1990         Animator's calls to this is part of a later patch. Requires each stage to return its complexity.
1991         (Benchmark.prototype.processSamples): If the sampling mark exists, add it to the results.
1992                 Go through all of the samples. All samples contain a timestamp and complexity. We
1993         calculate "raw FPS" which is the time differential from the previous sample. At regular intervals
1994         the Kalman-filtered FPS and the interval average FPS are also recorded. We also create two
1995         experiments, to get the scores for the complexity and smoothed FPS, and add those samples to
1996         the experiments. Grab those scores and add them into results also.
1997
1998         Add complexity() to the tests for Benchmark.record().
1999         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2000         * Animometer/tests/misc/resources/canvas-electrons.js:
2001         * Animometer/tests/misc/resources/canvas-stars.js:
2002         * Animometer/tests/text/resources/layering-text.js:
2003
2004 2015-12-27  Jon Lee  <jonlee@apple.com>
2005
2006         Simplify the test harness
2007         https://bugs.webkit.org/show_bug.cgi?id=152562
2008
2009         Reviewed by Simon Fraser.
2010
2011         Update the simple canvas tests. For the paths, start from the center instead of the
2012         top-left corner. Instead of using a coordinate limit, use a canonized factor, and
2013         use that along both the x and y axes, so that more capable tests use more of the
2014         canvas.
2015
2016         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2017         (CanvasLinePoint): Rewrite to use the coordinate maximum factor.
2018         (CanvasQuadraticPoint): Ditto.
2019         (CanvasBezierPoint): Ditto.
2020         * Animometer/tests/simple/resources/simple-canvas.js:
2021         (tune): Calculate a factor instead of a maximum coordinate.
2022
2023 2015-12-27  Jon Lee  <jonlee@apple.com>
2024
2025         Simplify the test harness
2026         https://bugs.webkit.org/show_bug.cgi?id=152562
2027
2028         Reviewed by Simon Fraser.
2029
2030         All of the benchmarks use the default Animator(). Don't require new tests
2031         to pass a new instance, and instead just make one in the Benchmark constructor.
2032
2033         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
2034         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
2035         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
2036         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2037         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
2038         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
2039         * Animometer/tests/master/resources/canvas-tests.js:
2040         * Animometer/tests/misc/resources/canvas-electrons.js:
2041         * Animometer/tests/misc/resources/canvas-stars.js:
2042         * Animometer/tests/misc/resources/compositing-transforms.js:
2043         * Animometer/tests/resources/main.js:
2044         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2045         * Animometer/tests/template/resources/template-canvas.js:
2046         * Animometer/tests/template/resources/template-css.js:
2047         * Animometer/tests/template/resources/template-svg.js:
2048         * Animometer/tests/text/resources/layering-text.js:
2049         * Animometer/tests/text/resources/text-boxes.js:
2050
2051         Refactor the template.
2052
2053         * Animometer/tests/template/resources/template-canvas.js:
2054         * Animometer/tests/template/resources/template-css.js:
2055         * Animometer/tests/template/resources/template-svg.js:
2056         * Animometer/tests/template/template-canvas.html:
2057         * Animometer/tests/template/template-css.html:
2058         * Animometer/tests/template/template-svg.html:
2059
2060         Refactor the SVG suite.
2061
2062         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Move scripts to the end.
2063         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Ditto.
2064
2065         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Remove extraneous includes
2066         to stage.js.
2067         * Animometer/tests/text/text-boxes.html: Ditto.
2068
2069         BouncingCanvasParticlesBenchmark is not necessary. Use Benchmark directly when subclassing.
2070         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js: Remove
2071         BouncingCanvasParticlesBenchmark.
2072         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Use Benchmark.
2073         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Ditto.
2074
2075         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js: Require the shape
2076         in the constructor instead of having subclasses set the private variable.
2077
2078         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js: Refactor.
2079         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
2080
2081         Refactor the HTML suite.
2082
2083         Move scripts to the end.
2084         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2085         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2086         * Animometer/tests/text/layering-text.html:
2087         * Animometer/tests/text/text-boxes.html:
2088
2089         Refactor to use the new variables.
2090         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
2091         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2092         * Animometer/tests/text/resources/layering-text.js:
2093         * Animometer/tests/text/resources/text-boxes.js:
2094
2095         Refactor the bouncing canvas tests.
2096
2097         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Move scripts to the end.
2098         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Move scripts to the end.
2099
2100         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js: Promote a few
2101         properties to "public" since they are used by subclasses.
2102         (BouncingParticlesStage): Fix the constructor, which was missing "this". Make particles
2103         "public" for subclasses.
2104         (BouncingParticlesStage.initialize): Fix the max velocity, which was accidentally changed.
2105         * Animometer/tests/misc/resources/compositing-transforms.js: Refactor.
2106
2107         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
2108         BouncingCanvasParticlesAnimator is no longer needed.
2109         (BouncingCanvasParticle): Change constructor to take a shape as a parameter instead of
2110         having subclasses set the variable.
2111
2112         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Refactor.
2113         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Refactor.
2114
2115         Move example/ files into misc/.
2116
2117         * Animometer/tests/misc/canvas-electrons.html: Renamed from PerformanceTests/Animometer/tests/examples/canvas-electrons.html.
2118         * Animometer/tests/misc/canvas-stars.html: Renamed from PerformanceTests/Animometer/tests/examples/canvas-stars.html.
2119         * Animometer/tests/misc/resources/canvas-electrons.js: Renamed from PerformanceTests/Animometer/tests/examples/resources/canvas-electrons.js.
2120         * Animometer/tests/misc/resources/canvas-stars.js: Renamed from PerformanceTests/Animometer/tests/examples/resources/canvas-stars.js.
2121
2122         * Animometer/resources/debug-runner/tests.js: Update test URLs.
2123
2124         Refactor miscellaneous suite.
2125
2126         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2127         Remove BouncingParticlesAnimator and BouncingParticleBenchmark, which are
2128         not needed.
2129         (tune): Remove console assert.
2130         * Animometer/tests/resources/main.js: Add Rotater back in from stage.js.
2131
2132         * Animometer/tests/examples/resources/canvas-electrons.js: Remove CanvasElectronsAnimator.
2133         * Animometer/tests/examples/resources/canvas-stars.js: Remove CanvasStarsAnimator.
2134         * Animometer/tests/misc/resources/compositing-transforms.js:
2135         * Animometer/tests/examples/canvas-electrons.html: Move scripts to the end.
2136         * Animometer/tests/examples/canvas-stars.html: Ditto.
2137         * Animometer/tests/misc/compositing-transforms.html: Ditto.
2138
2139         Refactor the simple suite.
2140
2141         * Animometer/tests/master/resources/canvas-stage.js:
2142         (tune): Remove coordinateMaximum since it is not needed in any
2143         of the master tests.
2144         * Animometer/tests/simple/resources/simple-canvas.js:
2145         SimpleCanvasAnimator and SimpleCanvasBenchmark are no longer
2146         needed.
2147         (tune): Manage the objects differently, but instead of duplicating
2148         all of SimpleCanvasStage here, just replace tune(). Include
2149         coordinateMaximum, and remove items from the end of the list
2150         instead of the beginning.
2151         (StageBenchmark.call.createAnimator): Deleted.
2152         (StageBenchmark.call): Deleted.
2153         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2154         * Animometer/tests/simple/simple-canvas-paths.html: Move
2155         scripts to the end.
2156
2157         Get rid of stage.js, StageAnimator, and StageBenchmark. Don't have the progress bar update during the test.
2158
2159         * Animometer/resources/debug-runner/animometer.js:
2160         (initialize): Move the setting of testsCount to the debug runner.
2161         (didRunTest): Nicer name.
2162         * Animometer/resources/debug-runner/benchmark-runner.js:
2163         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Don't pass in the progress bar to benchmarks.
2164         * Animometer/resources/extensions.js:
2165         (ProgressBar): Refactor. Make variables "private". Resetting the progress when instantiating.
2166         (ProgressBar.prototype.incrementRange): This is called every time a benchmark completes.
2167         * Animometer/resources/runner/animometer.js:
2168         (window.benchmarkRunnerClient.initialize): Remove unneeded setting of testsCount.
2169         * Animometer/resources/strings.js: These are no longer needed.
2170         * Animometer/tests/master/canvas-stage.html: Remove script inclusion. Other tests will follow.
2171         * Animometer/tests/master/resources/canvas-tests.js: Use Benchmark instead of StageBenchmark.
2172         * Animometer/tests/resources/main.js: Messages are no longer needed
2173         (Animator.prototype._shouldRequestAnotherFrame): Rename from animate(), since this method returns a boolean
2174         indicating whether another frame should be requested. Collapse the logic from StageAnimator into animateLoop.
2175         (BenchmarkState.prototype.currentStage): Deleted.
2176         (BenchmarkState.prototype.currentMessage): Deleted.
2177         (BenchmarkState.prototype.currentProgress): Deleted.
2178         (Animator.prototype.animate): Deleted.
2179         (Animator.prototype.animateLoop): The stage is animated only when we have another frame to draw.
2180         (Benchmark.prototype.record): No need to update the progress bar.
2181         * Animometer/tests/resources/stage.js: Removed. Rotater will appear in a later patch, in main.js.
2182
2183         * Animometer/resources/debug-runner/benchmark-runner.js:
2184         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Each test is run as a benchmark.
2185         Remove the call to runBenchmark by merging the options here, and calling benchmark.run()
2186         directly.
2187
2188         Make the class relationships more easily understandable. The benchmark owns the stage,
2189         animator, and options. Make the stage and animator no longer have their own references to
2190         the options. Make Stage a first-class citizen by promoting it to main.js. Later patches
2191         will try to get rid of stage.js altogether.
2192         * Animometer/tests/resources/main.js:
2193         (Stage): Moved from stage.js.
2194         (Animator): Don't pass in benchmark and options in its constructor. It will get initialized
2195         by benchmark-related parameters in initialize().
2196         (Animator.prototype.initialize): Add a back-reference to benchmark and cache an option.
2197         (Animator.prototype.get benchmark):
2198         (Animator.prototype.animate): Refactor to use the cached option, to remove its dependency on
2199         the options dictionary.
2200         (Benchmark): Require all benchmarks to have a stage and animator. The instance will initialize
2201         them.
2202         (Benchmark.prototype.get options):
2203         (Benchmark.prototype.get stage): BenchmarkStates.stages will need to be renamed to avoid confusion.
2204         (Benchmark.prototype.get animator):
2205         (Benchmark.prototype.start):
2206         (Benchmark.prototype.update): Ask the stage directly to tune or clear instead of adding another
2207         level of indirection.
2208         (window.runBenchmark): Deleted. Remove the need for a benchmarkClient. Also remove the standalone
2209         path, since tests can be individually selected, and remove the need for runBenchmark since that is
2210         handled in BenchmarkRunner._runBenchmarkAndRecordResults.
2211         * Animometer/tests/resources/stage.js:
2212         (Stage): Deleted. Moved to main.js.
2213         (StageBenchmark): What's left is updating the progress bar; to be removed.
2214         (StageAnimator): What's left can be folded in Animator.
2215
2216         Refactor master suite.
2217         * Animometer/tests/master/resources/canvas-stage.js: This now only has SimpleCanvasStage.
2218         (animate): Push the clearRect() into each stage.
2219         (complexity):
2220         (StageBenchmark.call.createAnimator): Deleted.
2221         (StageBenchmark.call): Deleted.
2222         * Animometer/tests/master/resources/canvas-tests.js: SimpleCanvasPathStrokeStage is no longer needed.
2223         (CanvasLineSegment.prototype.draw):
2224         (CanvasArc):
2225         (CanvasLinePoint): Remove the draw call because depending on its index it either needs to be moveTo
2226         or lineTo, and it is otherwise a very small draw operation that doesn't need the overhead of the
2227         function call. Do all of the drawing through the stage.
2228
2229         Refactor the subclass pattern. Introduce Utilities.createSubclass().
2230
2231         * Animometer/resources/debug-runner/benchmark-runner.js:
2232         * Animometer/resources/extensions.js:
2233         (window.Utilities.createSubclass): Takes the super class, a function representing
2234         the class's constructor, and additional methods to attach to the new class's
2235         prototype object.
2236         * Animometer/tests/text/text-boxes.html: Remove unneeded reference to utilities.js.
2237
2238         Refactor tests.
2239         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
2240         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
2241         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
2242         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
2243         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2244         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2245         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
2246         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
2247         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
2248         * Animometer/tests/examples/resources/canvas-electrons.js:
2249         * Animometer/tests/examples/resources/canvas-stars.js:
2250         * Animometer/tests/master/resources/canvas-stage.js:
2251         * Animometer/tests/master/resources/canvas-tests.js:
2252         * Animometer/tests/misc/resources/compositing-transforms.js:
2253         * Animometer/tests/resources/stage.js:
2254         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2255         * Animometer/tests/simple/resources/simple-canvas.js:
2256         * Animometer/tests/template/resources/template-canvas.js:
2257         * Animometer/tests/template/resources/template-css.js:
2258         * Animometer/tests/template/resources/template-svg.js:
2259         * Animometer/tests/text/resources/layering-text.js: Reorder some of the methods
2260         and properties since they rely on each other.
2261         * Animometer/tests/text/resources/text-boxes.js:
2262
2263         * Animometer/resources/debug-runner/animometer.js: Arrange calls
2264         in the order they are evoked.
2265         * Animometer/resources/debug-runner/benchmark-runner.js:
2266         (BenchmarkRunnerState.prototype.next): Get rid of return value since
2267         no caller to next() uses it.
2268         (BenchmarkRunnerState.prototype.prepareCurrentTest): Refactor the
2269         promise to resolve simply when onload() is called instead of
2270         looking for #stage.
2271         (BenchmarkRunner.prototype._runTestAndRecordResults): Suite.run
2272         simply calls runBenchmark(). Call it directly rather than through
2273         the Suite.
2274         (BenchmarkRunner.prototype.step): Remove unused parameter in
2275         resolve callback.
2276         (BenchmarkRunner.prototype.runMultipleIterations): Use this instead
2277         of self since it is outside of the closure which needed the self
2278         variable.
2279         (resolveIfReady): Deleted.
2280         (BenchmarkRunner.prototype.waitForElement): Deleted.
2281         * Animometer/resources/runner/tests.js: prepare() and run() are
2282         no longer needed.
2283         (Suite.prototype.prepare): Deleted.
2284         (Suite.prototype.run): Deleted.
2285         * Animometer/tests/master/canvas-stage.html: Move all scripts to
2286         the end of the page.
2287
2288 2015-12-23  Simon Fraser  <simon.fraser@apple.com>
2289
2290         Add an Animometer developer test which animates text-rich boxes
2291         https://bugs.webkit.org/show_bug.cgi?id=152544
2292
2293         Reviewed by Zalan Bujtas.
2294
2295         Add a test that draws lots of international text. This is a particle test,
2296         moving the boxes around with absolution positioning.
2297
2298         * Animometer/resources/debug-runner/tests.js:
2299         * Animometer/tests/text/resources/text-boxes.js: Added.
2300         (BouncingTextBox):
2301         (BouncingTextBox.prototype._move):
2302         (BouncingTextBox.prototype.animate):
2303         (BouncingTextBoxStage):
2304         (BouncingTextBoxStage.prototype.createParticle):
2305         (BouncingTextBoxStage.prototype.particleWillBeRemoved):
2306         (BouncingTextBoxsBenchmark):
2307         (BouncingTextBoxsBenchmark.prototype.createStage):
2308         (window.benchmarkClient.create):
2309         * Animometer/tests/text/text-boxes.html: Added.
2310
2311 2015-12-23  Jon Lee  <jonlee@apple.com>
2312
2313         Split benchmark into two different pages
2314         https://bugs.webkit.org/show_bug.cgi?id=152458
2315
2316         Reviewed by Simon Fraser.
2317
2318         Add tests to 'animometer' suite.
2319
2320         * Animometer/resources/runner/tests.js:
2321         * Animometer/tests/master/canvas-stage.html: Added.
2322         * Animometer/tests/master/resources/canvas-stage.js: Added.
2323         * Animometer/tests/master/resources/canvas-tests.js: Added.
2324         * Animometer/tests/master/resources/stage.css: Added.
2325
2326 2015-12-23  Jon Lee  <jonlee@apple.com>
2327
2328         Split benchmark into two different pages
2329         https://bugs.webkit.org/show_bug.cgi?id=152458
2330
2331         Reviewed by Simon Fraser.
2332
2333         Address comments.
2334
2335         * Animometer/resources/debug-runner/benchmark-runner.js:
2336         (BenchmarkRunner.prototype._runTestAndRecordResults): When the testing is complete the frame owning the
2337         sampler goes away, and a later call to get the JSON data is no longer available. Process the data
2338         right here, instead, and just reference it when displaying the results in ResultsDashboard.prototype._processData.
2339         * Animometer/resources/extensions.js:
2340         (Array.prototype.fill.Array.prototype.fill): Add a null check. Remove braces around single-line clause.
2341         (Array.prototype.find.Array.prototype.find): Update the null check.
2342         (ResultsDashboard.prototype._processData): Use the already-processed data.
2343         * Animometer/resources/runner/animometer.css:
2344         (.frame-container > iframe): Remove calc().
2345
2346         Move Array functions to extensions.js since that is included by the harness.
2347         Add ES6 Array polyfills.
2348
2349         * Animometer/resources/algorithm.js:
2350         (Array.prototype.swap): Moved to extensions.js.
2351         * Animometer/resources/extensions.js:
2352         (Array.prototype.swap):
2353         (Array.prototype.fill): Added.
2354         (Array.prototype.find): Added.
2355
2356         Adjust styles for iPad.
2357
2358         * Animometer/resources/runner/animometer.css:
2359         (@media screen and (min-device-width: 768px)): Apply to iPad as well.
2360         (@media screen and (max-device-width: 1024px)): Update width for iPads.
2361
2362         Adjustment styles for iOS.
2363
2364         * Animometer/developer.html: Different divs contain the iframe, so use a class instead and
2365         update the style rules.
2366         * Animometer/index.html:
2367         * Animometer/resources/debug-runner/animometer.css: Remove extraneous rules.
2368         (@media screen and (min-device-width: 1800px)): Move this up.
2369         * Animometer/resources/runner/animometer.css: Add rules to accomodate iOS.
2370
2371         Get rid of prefixed flex properties for now.
2372
2373         * Animometer/resources/debug-runner/animometer.css:
2374         * Animometer/resources/runner/animometer.css:
2375
2376         Update the structure of the harness. Remove the JSON-per-test but keep
2377         the JSON of the whole test run. Use the full page in order to display
2378         the graph.
2379
2380         * Animometer/developer.html: Update several of the JS file includes to UTF-8. Remove header and footer. Test results screen includes score,
2381         average, and worst 5% statistics.
2382         * Animometer/index.html: Make structure similar to developer.html.
2383         * Animometer/resources/debug-runner/animometer.css: Remove most of the
2384         button rules since they are superfluous. Move the progress bar to the
2385         top, fixed. Update the results page rules.
2386         * Animometer/resources/debug-runner/animometer.js: Remove most of the
2387         additions to sectionsManager since they are no longer needed.
2388         (setSectionHeader): Updates header of the section.
2389         (window.suitesManager._updateStartButtonState): Update selector.
2390         (showResults): Add keypress event for selecting different data for
2391         copy/paste. Update how the results are populated. Include full test
2392         JSON in a textarea, rather than requiring a button press.
2393         (showTestGraph):
2394         * Animometer/resources/debug-runner/tests.js: Update structure of Headers. Define different kinds of headers. Headers can control their
2395         title, and the text used as the cell contents, including class name.
2396         * Animometer/resources/extensions.js:
2397         (ResultsTable): Update to include a flattened version of the headers,
2398         used while populating table contents. Remove unneeded helper functions
2399         for creating the table. Rename "show" to "add".
2400         * Animometer/resources/runner/animometer.css: Update rules to
2401         accommodate the new structure.
2402         * Animometer/resources/runner/animometer.js:
2403         (window.sectionsManager.setSectionScore): Helper function to set the
2404         score and mean for a section.
2405         (window.sectionsManager.populateTable): Helper function to set the table.
2406         (window.benchmarkController.showResults): Refactor.
2407         (window.benchmarkController.selectResults): Update selectors.
2408         * Animometer/resources/runner/tests.js: Set Headers. Debug harness
2409         extends it.
2410
2411         Update debug runner to have similar names to the basic runner. Include
2412         that page's CSS and remove extraneous CSS rules.
2413
2414         Get rid of the statistics table #record.
2415
2416         * Animometer/developer.html: Rename #home to #intro. Rename .spacer to hr.
2417         * Animometer/resources/debug-runner/animometer.css: Set to flexbox when selected.
2418         * Animometer/resources/debug-runner/animometer.js: Remove recordTable.
2419         (window.suitesManager._updateStartButtonState): Update selector to #intro.
2420         (setupRunningSectionStyle): Deleted.
2421
2422         * Animometer/resources/runner/animometer.css:
2423         (#test-container.selected): Change to flex-box only when visible.
2424
2425         Remove recordTable.
2426         * Animometer/resources/debug-runner/benchmark-runner.js:
2427         (BenchmarkRunner.prototype._runTestAndRecordResults):
2428         * Animometer/resources/runner/tests.js:
2429         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
2430         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
2431         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
2432         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
2433         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2434         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2435         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
2436         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
2437         * Animometer/tests/examples/resources/canvas-electrons.js:
2438         * Animometer/tests/examples/resources/canvas-stars.js:
2439         * Animometer/tests/misc/resources/compositing-transforms.js:
2440         * Animometer/tests/resources/main.js:
2441         * Animometer/tests/resources/stage.js:
2442         (StageBenchmark): Remove _recordTable.
2443         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2444         * Animometer/tests/simple/resources/simple-canvas.js:
2445         * Animometer/tests/template/resources/template-canvas.js:
2446         * Animometer/tests/template/resources/template-css.js:
2447         * Animometer/tests/template/resources/template-svg.js:
2448         * Animometer/tests/text/resources/layering-text.js:
2449
2450         * Animometer/resources/debug-runner/animometer.js:
2451         (willStartFirstIteration): Fix selector, since results-table is used
2452         in multiple places, so it cannot be an id.
2453
2454         Make it possible to select the scores, or the whole table data,
2455         by cycling through different selections through key press of 's'.
2456
2457         * Animometer/resources/runner/animometer.js:
2458         (window.benchmarkController.showResults): Attach a keypress handler
2459         if it hasn't been added already.
2460         (window.benchmarkController.selectResults):
2461         * Animometer/resources/runner/tests.js: Cycle through different
2462         ranges.
2463
2464         Fix a few fly-by errors.
2465
2466         * Animometer/resources/debug-runner/benchmark-runner.js:
2467         (BenchmarkRunnerState.prototype.prepareCurrentTest): Update the frame relative path
2468         since the files are now in the top directory instead of inside runner/.
2469         (BenchmarkRunner.prototype._runTestAndRecordResults): Incorrect reference to function.
2470         (BenchmarkRunner.prototype.step): Member variable is never used.
2471
2472         A little stylistic cleanup.
2473
2474         * Animometer/resources/debug-runner/benchmark-runner.js:
2475         * Animometer/resources/extensions.js:
2476         (window.DocumentExtension.createElement):
2477         * Animometer/tests/resources/main.js:
2478         (Benchmark.prototype.record):
2479         * Animometer/tests/resources/stage.js:
2480         (StageBenchmark.prototype.showResults): Reverse progress and message.
2481         The message appears less frequently than the progress.
2482         * Animometer/tests/simple/resources/simple-canvas.js:
2483         (SimpleCanvasBenchmark): Remove unused options.
2484
2485         Add newer version of harness in a new page. Consolidate differences between the two
2486         pages.
2487
2488         * Animometer/developer.html: Include runner/animometer.js. Rename the JS function
2489         to run the benchmark to startBenchmark() instead of startTest(). Rename #running to
2490         #test-container.
2491         * Animometer/index.html: Added. Similarly calls startBenchmark() and has #test-container.
2492         * Animometer/resources/debug-runner/animometer.css: Make the canvas 2:1 (1200px x 800px)
2493         instead of 4:3.
2494
2495         Split out benchmarkRunnerClient and benchmarkController.
2496
2497         * Animometer/resources/debug-runner/animometer.js: Move needed functions out of
2498         benchmarkRunnerClient, and leave the rest here to extend that object. Get rid of _resultsTable
2499         and move populating the results table into benchmarkController. Rename _resultsDashboard
2500         to results and make it accessible for other objects to use.
2501         (willAddTestFrame): This is unnecessary. Remove.
2502
2503         (window.sectionsManager.showScore): Grab it from the results object instead of
2504         benchmarkRunnerClient.
2505         (window.sectionsManager.showSection): Deleted. Moved to runner/animometer.js.
2506
2507         (window.benchmarkController._runBenchmark): Deleted. Mostly moved into _startBenchmark.
2508         (window.benchmarkController.startBenchmark): Refactor to call _startBenchmark.
2509         (window.benchmarkController.showResults): Include most of benchmarkRunnerClient.didFinishLastIteration()
2510         here.
2511
2512         * Animometer/resources/debug-runner/benchmark-runner.js:
2513         (BenchmarkRunner.prototype._appendFrame): Remove unneeded call to willAddTestFrame.
2514         * Animometer/resources/extensions.js:
2515         (ResultsDashboard): Change the class to process the sampler data on-demand and hold onto that data
2516         for later referencing.
2517         (ResultsDashboard.prototype.toJSON): Deleted.
2518         (ResultsDashboard.prototype._processData): Rename toJSON to _processData since it's not really
2519         outputting JSON. Store the processed data into a member variable that can be referenced later.
2520         (ResultsDashboard.prototype.get data): Process the data if it hasn't already.
2521         (ResultsDashboard.prototype.get score): Process the data if it hasn't already, then return the
2522         aggregate score.
2523         (ResultsTable.prototype._showHeader): When outputting the results to a table, don't force the
2524         need for an empty children array. This was to allow for a header row in the table that spanned
2525         multiple columns. In the simpler harness, this is not needed.
2526         (ResultsTable.prototype._showEmptyCells):
2527         (ResultsTable.prototype._showTest): This hardcoded the columns. At least for the name and score,
2528         which is the bare minimum needed for the simpler harness, key off of the header name provided.
2529         * Animometer/resources/runner/animometer.css: Added. Use a similar 2:1 ratio. The score tables are
2530         split into the data and the headers, and are also displayed RTL so that a later patch allows a
2531         user to copy-paste the data easily.
2532         * Animometer/resources/runner/animometer.js: Added. Use a simpler version of benchmarkRunnerClient.
2533         The debug harness will extend these classes.
2534         (window.benchmarkController._startBenchmark): Used by both harnesses.
2535         (window.benchmarkController.startBenchmark): Set hard-coded options.
2536         (window.benchmarkController.showResults): Includes most of benchmarkRunnerClient.didFinishLastIteration()
2537         here.
2538
2539         Get rid of utilities.js. Move it all into extensions.js.
2540
2541         * Animometer/resources/extensions.js:
2542         * Animometer/tests/resources/utilities.js: Removed.
2543
2544         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Remove script link.
2545         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Ditto.
2546         * Animometer/tests/bouncing-particles/bouncing-css-images.html: Ditto.
2547         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html: Ditto.
2548         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Ditto.
2549         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Ditto.
2550         * Animometer/tests/examples/canvas-electrons.html: Ditto.
2551         * Animometer/tests/examples/canvas-stars.html: Ditto.
2552         * Animometer/tests/misc/compositing-transforms.html: Ditto.
2553         * Animometer/tests/simple/simple-canvas-paths.html: Ditto.
2554         * Animometer/tests/template/template-canvas.html: Ditto.
2555         * Animometer/tests/template/template-css.html: Ditto.
2556         * Animometer/tests/template/template-svg.html: Ditto.
2557         * Animometer/tests/text/layering-text.html: Ditto.
2558
2559         Split tests.js into two. Add a new suite to runner/tests.js.
2560
2561         * Animometer/developer.html: Update the script order. Scripts from
2562         debug-runner/ will always build on those from runner/, and have the
2563         same name.
2564         * Animometer/resources/debug-runner/tests.js: Move "complex examples"
2565         suite into "miscellaneous tests".
2566         (Suite): Deleted.
2567         (Suite.prototype.prepare): Deleted.
2568         (Suite.prototype.run): Deleted.
2569         (suiteFromName): Deleted.
2570         * Animometer/resources/runner/tests.js: Added. Take definitions and
2571         functions needed by the test harness. Leave the test suites behind.
2572         (Suite): Moved from debug script.
2573         (Suite.prototype.prepare): Ditto.
2574         (Suite.prototype.run): Ditto.
2575         (suiteFromName): Ditto.
2576         (testFromName): Ditto.
2577
2578         Move benchmark resources out into resources/debug-runner, and update URLs.
2579
2580         * Animometer/developer.html: Renamed from PerformanceTests/Animometer/runner/animometer.html.
2581         * Animometer/resources/debug-runner/animometer.css: Renamed from PerformanceTests/Animometer/runner/resources/animometer.css.
2582         * Animometer/resources/debug-runner/animometer.js: Renamed from PerformanceTests/Animometer/runner/resources/animometer.js.
2583         * Animometer/resources/debug-runner/benchmark-runner.js: Renamed from PerformanceTests/Animometer/runner/resources/benchmark-runner.js.
2584         * Animometer/resources/debug-runner/d3.min.js: Renamed from PerformanceTests/Animometer/runner/resources/d3.min.js.
2585         * Animometer/resources/debug-runner/graph.js: Renamed from PerformanceTests/Animometer/runner/resources/graph.js.
2586         * Animometer/resources/debug-runner/tests.js: Renamed from PerformanceTests/Animometer/runner/resources/tests.js.
2587
2588 2015-12-11  Jon Lee  <jonlee@apple.com>
2589
2590         Improve Animometer on iOS
2591         https://bugs.webkit.org/show_bug.cgi?id=152180
2592
2593         Reviewed by Simon Fraser.
2594
2595         Improve experience on phones. Make the canvas take
2596         up the whole screen.
2597
2598         * Animometer/runner/animometer.html: Add meta viewport.
2599         Remove the container div.
2600         * Animometer/runner/resources/animometer.css: Have buttons lay
2601         out vertically. Update detail arrow glyph. Make the suites and
2602         options section lay out vertically. Remove the top spacers since
2603         we want the canvas to take over the whole screen. Minimal display
2604         is recommended for use.
2605
2606 2015-12-07  Jon Lee  <jonlee@apple.com>
2607
2608         Update suites for benchmark
2609         https://bugs.webkit.org/show_bug.cgi?id=151957
2610
2611         Reviewed by Simon Fraser.
2612
2613         * Animometer/runner/animometer.html: Use spacers instead of relying on
2614         justify-content center to center the content. That allows the opening screen
2615         to grow downward when expanding the list of choices, otherwise it expands
2616         from the center, and off the top edge of the screen.
2617         * Animometer/runner/resources/animometer.css:
2618         (.tree): Don't overflow scroll.
2619         (.tree > li > label.tree-label:before): Use better glyphs.
2620         (.tree > li > :checked ~ label.tree-label:before):
2621         (main): Using flex-start for justify-content so that if the section grows too
2622         big it gets pinned to the top edge of the document instead of growing past it.
2623         (.spacer): Make the spacers have a minimum 20px and grow evenly.
2624         (section#home): Add a min-height so that the border will expand if the suite
2625         tests shown make the section grow past the height.
2626         * Animometer/runner/resources/animometer.js: Update the selectors.
2627         (window.suitesManager._treeElement):
2628         (window.suitesManager._suitesElements):
2629         (window.suitesManager._editsElements):
2630
2631 2015-12-07  Jon Lee  <jonlee@apple.com>
2632
2633         Update options for benchmark
2634         https://bugs.webkit.org/show_bug.cgi?id=151956
2635
2636         Reviewed by Simon Fraser.
2637
2638         Move "Fix test complexity" and "Adaptive" checkboxes into a radio group.
2639
2640         Move "Show running results" into a radio group, and add options to remove the HUD.
2641
2642         * Animometer/runner/animometer.html: Get rid of the preamble. Wrap the options
2643         in a form for easier referencing in JS.
2644         * Animometer/runner/resources/animometer.css: Show the surrounding border if the
2645         body's display-minimal class name is set.
2646         * Animometer/runner/resources/animometer.js:
2647
2648         Update the way optionsManager gets and sets default values. Include support for
2649         radio groups.
2650         (window.optionsManager.valueForOption):
2651         (window.optionsManager.updateUIFromLocalStorage):
2652         (window.optionsManager.updateLocalStorageFromUI):
2653
2654         (window.benchmarkRunnerClient.willStartFirstIteration):
2655         (window.sectionsManager.setupRunningSectionStyle):
2656         (window.suitesManager._treeElement): Fly-by whitespace fix.
2657         (window.suitesManager._suitesElements): Ditto.
2658         (window.suitesManager.updateEditsElementsState): Update options check.
2659         (window.suitesManager.updateDisplay): Add a new update function for the HUD.
2660         Attach a class to the body depending on the user's choice.
2661         (window.benchmarkController.initialize): Add an event listener when the form
2662         radio buttons update.
2663         (window.benchmarkController.onFormChanged):
2664         (window.optionsManager._optionsElements): Deleted.
2665         (window.optionsManager._adaptiveTestElement): Deleted.
2666         (window.benchmarkController.onChangeAdaptiveTestCheckbox): Deleted.
2667         * Animometer/tests/resources/main.js:
2668         (Benchmark.prototype.update): Update options checks.
2669         * Animometer/tests/resources/stage.js: Update option check.
2670         (StageBenchmark.prototype.showResults):
2671
2672 2015-12-01  Simon Fraser  <simon.fraser@apple.com>
2673
2674         Add a basic compositing Animometer test
2675         https://bugs.webkit.org/show_bug.cgi?id=151724
2676
2677         Reviewed by Dean Jackson.
2678
2679         Add a "bouncing particles" test that moves composited layers around, optionally with a filter.
2680
2681         This is added under a new "Miscellaneous" category.
2682
2683         Remove the test templates category from the UI.
2684
2685         * Animometer/runner/resources/tests.js:
2686         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2687         (BouncingCssShape.prototype.animate):
2688         * Animometer/tests/misc/compositing-transforms.html: Added.
2689         * Animometer/tests/misc/resources/compositing-transforms.js: Added.
2690         (BouncingCompositedImage):
2691         (BouncingCompositedImage.prototype._move):
2692         (BouncingCompositedImage.prototype.animate):
2693         (CompositingTransformsStage):
2694         (CompositingTransformsStage.prototype.createParticle):
2695         (CompositingTransformsStage.prototype.particleWillBeRemoved):
2696         (CompositedTransformsBenchmark):
2697         (CompositedTransformsBenchmark.prototype.createStage):
2698         (window.benchmarkClient.create):
2699
2700 2015-11-30  Said Abou-Hallawa  <sabouhallawa@apple.com>
2701
2702         Fix the graphics benchmark complexity bounds adjustment
2703         https://bugs.webkit.org/show_bug.cgi?id=151670
2704
2705         Reviewed by Simon Fraser.
2706
2707         Make sure the graphics benchmark complexity bounds adjustment is applied
2708         to the absolute lower bound.
2709
2710         * Animometer/tests/resources/math.js:
2711         (PIDController.prototype._saturate):
2712
2713 2015-11-30  Said Abou-Hallawa  <sabouhallawa@apple.com>
2714
2715         Add an option to select the results form the graphics benchmark
2716         https://bugs.webkit.org/show_bug.cgi?id=151666
2717
2718         Reviewed by Ryosuke Niwa.
2719
2720         We need an easy way to select the graphics benchmark results table such
2721         that when it is copied to the clipboard, rich text format is set to the
2722         clipboard.
2723
2724         * Animometer/runner/animometer.html: Add a new button to select the results table or JSON.
2725
2726         * Animometer/runner/resources/animometer.js:
2727         (window.sectionsManager._sectionDataElement): Selects the container <data> element.
2728         (window.sectionsManager._sectionDataDivElement): Replace a literal string with a string table entry.
2729         (window.sectionsManager.showTestName): Replace a literal string with a string table entry.
2730         (window.sectionsManager.selectData): Selects the container <data> element in a selection.
2731         (window.sectionsManager.selectDataContents): Select the contents of container <data> element in a selection.
2732         (window.benchmarkController.selectResults): Selects the results table.
2733         (window.benchmarkController.showJSON): Function rename.
2734         (window.benchmarkController.selectJSON): Selects the contents of the results JSON.
2735         (window.benchmarkController.showJson): Deleted.
2736
2737 2015-11-20  Simon Fraser  <simon.fraser@apple.com>
2738
2739         Animometer: graphs should not do interpolation
2740         https://bugs.webkit.org/show_bug.cgi?id=151526
2741
2742         Reviewed by Simon Fraser.
2743
2744         Having the graphs do interpolation is misleading, because you can't see the actual data.
2745
2746         Also remove "shape-rendering: crispEdges;" so the lines get antialiased.
2747
2748         * Animometer/runner/resources/animometer.css:
2749         (section#test-graph > data > svg): Deleted.
2750         * Animometer/runner/resources/graph.js:
2751         (graph): Deleted.
2752
2753 2015-11-19  Said Abou-Hallawa  <sabouhallawa@apple.com>
2754
2755         Calculate the graphics benchmark test gain adaptively
2756         https://bugs.webkit.org/show_bug.cgi?id=151208
2757
2758         Reviewed by Darin Adler.
2759
2760         We need to calculate the gain of the graphics benchmark tests adaptively
2761         and get rid of the gain and limits parameters we have to choose manually
2762         for every test. We are going to use the classic Ziegler–Nichols method for
2763         calculating the gain and integral and derivative times. We are going to
2764         try moving on a cubic curve during the manual stage from y0 to reach ysp.
2765         We also going to use a saturation actuator to ensure the system does not
2766         fluctuate.
2767
2768         * Animometer/resources/extensions.js:
2769         (ResultsTable.prototype._isNoisyMeasurement): Fix a parameter name.
2770         (ResultsTable.prototype._isNoisyTest): Since score is a member of testResults, we need to limit our search to frame rate and complexity.
2771         (ResultsTable.prototype._showTest): Pass the correct parameter to _isNoisyMeasurement().
2772
2773         * Animometer/resources/strings.js: Fix the indentation and name and value of a string.
2774
2775         * Animometer/runner/resources/tests.js: Remove all the manual gains and limits parameters which had to be passed to every test.
2776
2777         * Animometer/tests/resources/main.js:
2778         (BenchmarkState.prototype.currentStage): Fix an enum name.
2779         (Benchmark): Get rid of manual gain and limits.
2780         (Benchmark.prototype.update): Simplify the calculation by having all the times in ms.
2781
2782         * Animometer/tests/resources/math.js:
2783         (PIDController): Get rid of the manual gain and limits and the magic numbers for Ti and Td.
2784         (PIDController.prototype._yPosition): Tells whether the test current output is moving towards the set-point or away from it.
2785         (PIDController.prototype._distanceUltimate): Calculates the ultimate distance from y0 after time t using a cubic formula.
2786         (PIDController.prototype._distance): Calculates the distance of y relative to y0.
2787         (PIDController.prototype._gainIncrement): Decides how much the proportional gain should be increased during the manual gain stage.
2788         (PIDController.prototype._updateStage): Updates the stage of the controller based on its current stage and the system output.
2789         (PIDController.prototype._tuneP): Tunes the system before calculating the PID controller gains.
2790         (PIDController.prototype._tunePID): PID tuning function.
2791         (PIDController.prototype._tune):
2792         (PIDController.prototype._saturate):
2793         (PIDController.prototype.tune): Manages calculating the controller parameters. It then returns a PID tuning value.
2794         (PIDController.prototype._sat): Deleted. We may need to return it back but the limits have to be calculated adaptively not manually.
2795
2796 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
2797
2798         Reorganize the graphics benchmark string table
2799         https://bugs.webkit.org/show_bug.cgi?id=151334
2800
2801         Reviewed by Simon Fraser.
2802
2803         Make the graphics benchmark string table be an object of sub-objects. Each
2804         sub-object represents an associative array, the key is the string name and
2805         the value is the string data.
2806
2807         * Animometer/resources/extensions.js:
2808         (ResultsDashboard.prototype.toJSON):
2809         (ResultsTable.prototype._showGraph):
2810         (ResultsTable.prototype._showJSON):
2811         (ResultsTable.prototype._isNoisyMeasurement):
2812         (ResultsTable.prototype._isNoisyTest):
2813         (ResultsTable.prototype._showTest):
2814         (ResultsTable.prototype._showSuite):
2815         (ResultsTable.prototype._showIteration):
2816         * Animometer/resources/sampler.js:
2817         (Sampler.prototype.toJSON):
2818         * Animometer/resources/strings.js:
2819         * Animometer/runner/resources/animometer.js:
2820         (window.benchmarkRunnerClient.didFinishLastIteration):
2821         (window.suitesManager.updateLocalStorageFromJSON):
2822         (window.benchmarkController.showResults):
2823         (window.benchmarkController.showJson):
2824         (window.benchmarkController.showTestGraph):
2825         (window.benchmarkController.showTestJSON):
2826         * Animometer/runner/resources/tests.js:
2827         * Animometer/tests/resources/main.js:
2828
2829 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
2830
2831         Disable flattening the stage iframe of the graphics benchmark when running on iOS
2832         https://bugs.webkit.org/show_bug.cgi?id=151361
2833
2834         Reviewed by Simon Fraser.
2835
2836         Use fixed size for stage iframe of the graphics benchmark to disable
2837         flattening the iframe while animating the particles. Also ensure the
2838         bouncing particles do not go outside the iframe's boundaries.
2839
2840         * Animometer/runner/resources/animometer.css:
2841         (section#running > #running-test > iframe):
2842         (@media screen and (min-device-width: 1800px)):
2843         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2844         (BouncingParticle.prototype.animate):
2845
2846 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
2847
2848         Use the media queries to dynamically set the stage for the graphics benchmark
2849         https://bugs.webkit.org/show_bug.cgi?id=151327
2850
2851         Reviewed by Simon Fraser.
2852
2853         Clean setting the benchmark css rules by using the media queries. Accessing
2854         document.stylesheets.cssRules seems to be unreliable. Fix the test harness
2855         load event listener invocation. And also remove the options for normalizing
2856         the stage resolution for retina display.
2857
2858         * Animometer/resources/extensions.js:
2859         (window.DocumentExtension.insertCssRuleAfter): Deleted.
2860         * Animometer/runner/animometer.html:
2861         * Animometer/runner/resources/animometer.css:
2862         (@media screen and (min-device-width: 1800px)):
2863         * Animometer/runner/resources/animometer.js:
2864         (window.sectionsManager.setupRunningSectionStyle):
2865         (window.benchmarkController.initialize):
2866         (window.sectionsManager.setupSectionStyle): Deleted.
2867         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2868         (BouncingParticlesStage):
2869         * Animometer/tests/text/layering-text.html:
2870         * Animometer/tests/text/resources/layering-text.js:
2871         (LayeringTextStage):
2872         (LayeringTextStage.prototype._setFontSize): Deleted.
2873
2874 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
2875
2876         Remove the option for animating using setInterval from the graphics benchmark
2877         https://bugs.webkit.org/show_bug.cgi?id=151283
2878
2879         Reviewed by Darin Adler.
2880
2881         Get rid of the option to run animation using setInterval().
2882
2883         * Animometer/tests/resources/main.js:
2884         (Animator.prototype.animate):
2885         (Benchmark):
2886         (Benchmark.prototype.start):
2887         (Animator.prototype.start): Deleted.
2888
2889 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
2890
2891         Highlight the alarming test results in the graphics benchmark results page
2892         https://bugs.webkit.org/show_bug.cgi?id=151286
2893
2894         Reviewed by Simon Fraser.
2895
2896         When showing the results of a test in the graphics benchmark the following
2897         criteria is going to be applied:
2898
2899         1. If the standard deviation of the test complexity or the frame rate is
2900            equal to or more than 10%, the standard deviation and the test name
2901            will be displayed in red.
2902         2. If the average frame rate is not in the range = [(desired_frame_rate - 2)
2903            .. (desired_frame_rate + 2)], the average frame rate and the test name will
2904            be displayed in red.
2905
2906         * Animometer/resources/extensions.js:
2907         (ResultsTable.prototype._showHeaderRow):
2908         (ResultsTable.prototype._showHeader):
2909         (ResultsTable.prototype._showEmptyCell):
2910         (ResultsTable.prototype._showText):
2911         (ResultsTable.prototype._showFixedNumber):
2912         (ResultsTable.prototype.):
2913         (ResultsTable.prototype._showGraph):
2914         (ResultsTable.prototype._showJSON):
2915         (ResultsTable.prototype._isAlarmingMeasurement):
2916         (ResultsTable.prototype._isAlarmingTestResults):
2917         (ResultsTable.prototype._showEmptyCells):
2918         (ResultsTable.prototype._showEmptyRow):
2919         (ResultsTable.prototype._showTest):
2920         (ResultsTable.prototype._showSuite):
2921         (ResultsTable.prototype._showIteration):
2922         (ResultsTable.prototype.showRecord):
2923         (ResultsTable.prototype.showIterations):
2924         (ResultsTable.prototype._showEmpty): Deleted.
2925         * Animometer/runner/resources/animometer.js:
2926         (window.benchmarkRunnerClient.didFinishLastIteration):
2927         * Animometer/tests/resources/stage.js:
2928         (StageBenchmark.prototype.showResults):
2929
2930 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
2931
2932         Clean referencing the options object in the graphics benchmark
2933         https://bugs.webkit.org/show_bug.cgi?id=151284
2934
2935         Reviewed by Simon Fraser.
2936
2937         Get rid of the Benchmark.options member and rely only on the private member
2938         Benchmark._options. The animator need to have its own options member instead
2939         of accessing it from its reference to Benchmark object.
2940
2941         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
2942         (BouncingCanvasParticlesAnimator):
2943         (BouncingCanvasParticlesBenchmark.prototype.createAnimator):
2944         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2945         (BouncingParticle.prototype.animate):
2946         (BouncingParticlesAnimator):
2947         (BouncingParticlesBenchmark.prototype.createAnimator):
2948         * Animometer/tests/examples/resources/canvas-electrons.js:
2949         (CanvasElectronsStage.prototype.animate):
2950         (CanvasElectronsAnimator):
2951         (CanvasElectronsBenchmark.prototype.createAnimator):
2952         (window.benchmarkClient.create):
2953         * Animometer/tests/examples/resources/canvas-stars.js:
2954         (CanvasStarsStage.prototype.animate):
2955         (CanvasStarsAnimator):
2956         (CanvasStarsBenchmark.prototype.createAnimator):
2957         (window.benchmarkClient.create):
2958         * Animometer/tests/resources/main.js:
2959         (BenchmarkState.prototype.currentProgress):
2960         (Animator):
2961         (Animator.prototype.animate):
2962         (Benchmark):
2963         (Benchmark.prototype.update):
2964         * Animometer/tests/resources/stage.js:
2965         (Stage.prototype.clear):
2966         (StageAnimator):
2967         (StageBenchmark.prototype.createAnimator):
2968         (StageBenchmark.prototype.tune):
2969         (StageBenchmark.prototype.showResults):
2970         * Animometer/tests/simple/resources/simple-canvas.js:
2971         (SimpleCanvasStage.prototype.animate):
2972         (SimpleCanvasAnimator):
2973         (SimpleCanvasAnimator.prototype.animate):
2974         (SimpleCanvasBenchmark.prototype.createAnimator):
2975         * Animometer/tests/template/resources/template-canvas.js:
2976         (TemplateCanvasStage.prototype.animate):
2977         (TemplateCanvasBenchmark.prototype.createAnimator):
2978         (window.benchmarkClient.create):
2979
2980 2015-11-13  Said Abou-Hallawa  <sabouhallawa@apple.com>
2981
2982         Eliminate a request for layout every time an item is added to the stage of the graphics benchmark
2983         https://bugs.webkit.org/show_bug.cgi?id=151289
2984
2985         Reviewed by Simon Fraser.
2986
2987         Cache the stage size when it is created instead of requesting every time
2988         an object is added via clientWidth and clientHeight.
2989
2990         * Animometer/resources/extensions.js:
2991         (Insets.elementPadding):
2992         * Animometer/tests/resources/stage.js:
2993         (Stage):
2994         (Stage.prototype.get size):
2995
2996 2015-11-06  Said Abou-Hallawa  <sabouhallawa@apple.com>
2997
2998         Initialize the graphics benchmark's Kalman filter with estimated 60 FPS
2999         https://bugs.webkit.org/show_bug.cgi?id=150965
3000
3001         Reviewed by Darin Adler.
3002
3003         This should give the benchmark more accurate reading at warmup time. And
3004         hence we can safely reduce the test running time to be 10 seconds.
3005
3006         * Animometer/runner/animometer.html:
3007         Add "defer" back when loading resources/animometer.js since this script
3008         depends on many other scripts and we need to wait till the page is parsed.
3009         Also change the default test interval to be 10 seconds.
3010
3011         * Animometer/runner/resources/graph.js:
3012         (graph): Make the test results curves smoother.
3013
3014         * Animometer/tests/resources/main.js:
3015         (Animator): Initialize the Kalman filter with 60 FPS which should be true
3016         if the test page is empty.
3017
3018         (Animator.prototype.animate):
3019         * Animometer/tests/resources/math.js:
3020         (KalmanEstimator): Fix the initial value of _vecX_est.
3021             _vecX_est[0] = current FPS (= 60FPS when the test page is empty)
3022             _vecX_est[1] = first time derivative of FPS (=0; FPS has been constant).
3023             _vecX_est[2] = second time derivative of FPS (=0; since _vecX_est[1]=0).
3024         (KalmanEstimator.prototype.estimate): Add some comments.
3025
3026 2015-11-04  Said Abou-Hallawa  <sabouhallawa@apple.com>
3027
3028         Remove "defer" from the scripts' references in the graphics benchmark home page
3029         https://bugs.webkit.org/show_bug.cgi?id=150915
3030
3031         Reviewed by Simon Fraser.
3032
3033         It causes the benchmark to be very flakey.
3034
3035         * Animometer/runner/animometer.html:
3036
3037 2015-11-01  Said Abou-Hallawa  <sabouhallawa@apple,com>
3038
3039         Add an option to make the graphics benchmark runs a specific test with fixed complexity
3040         https://bugs.webkit.org/show_bug.cgi?id=150529
3041
3042         Reviewed by Darin Adler.
3043
3044         Beside each test in the suites tree, we are going to show the complexity
3045         arithmetic mean of the of the last run in an edit control. Based on a
3046         new option these edit controls will all be visible or hidden. If they are
3047         visible their values can be changed. The benchmark runner if it run in
3048         the non-adaptive mode will set the complexity of the test to the passed
3049         value and will not change it ever. The animator will animate the test and
3050         frame rate will also be measured.
3051
3052         * Animometer/runner/animometer.html: Add a new option for the non-adaptive mode.
3053
3054         * Animometer/runner/resources/animometer.css:
3055         (section#home input[type="number"]): Define the width of all the edit control in the <home> section.
3056         (section#home > suites input[type="number"]): The edit controls in the <suites> box will be right aligned and hidden by default.
3057         (section#home > suites input[type="number"].selected): When the class "selected" is added, the edit controls will be visible.
3058         (section#home > options > label > input[type="number"]): Deleted.
3059
3060         * Animometer/runner/resources/animometer.js:
3061         (window.benchmarkRunnerClient.didFinishLastIteration): Update the local storage with the results of each test.
3062         (window.optionsManager._adaptiveTestElement): Returns the checkbox for setting the adaptive test option.
3063         (window.suitesManager._editElement):  Returns the edit element associated with each test element in the suites tree.
3064         (window.suitesManager._editsElements): Returns a list of all the elements in the <suites> box.
3065         (window.suitesManager._localStorageNameForTest): Change this function to take strings.
3066         (window.suitesManager._createTestElement): Adds an edit control beside each test.
3067         (window.suitesManager.updateEditsElementsState): Adds/Removes the 'selected' class to/from all the tests edit elements.
3068         (window.suitesManager.updateUIFromLocalStorage): Reads the edit control value from the local storage.
3069         (window.suitesManager.updateLocalStorageFromUI): Saves the edit control value to the local storage.
3070         (window.suitesManager.updateLocalStorageFromJSON): Saves the last run results to the local storage.
3071         (window.benchmarkController.initialize): Shows/Hides the test edit controls based on the adaptive test option.
3072         (window.benchmarkController.onChangeAdaptiveTestCheckbox): An onchange event handler for the adaptive test checkbox.
3073
3074         * Animometer/tests/resources/main.js:
3075         (Benchmark.prototype.update): Fix the complexity of the test if the running mode is non-adaptive test and desired complexity is not zero.
3076         (window.runBenchmark): Add the test complexity as a new benchmark option.
3077
3078 2015-11-01  Said Abou-Hallawa  <sabouhallawa@apple,com>
3079
3080         Make the size of the benchmark canvas adaptive to the screen size and screen resolution
3081         https://bugs.webkit.org/show_bug.cgi?id=150530
3082
3083         Reviewed by Darin Adler.
3084
3085         We want to set the size of the benchmark stage dynamically such that it
3086         depends on the screen resolution and the device scale factor. This patch
3087         does more than that because the home page css was not done properly. To
3088         use the flex box layout, the animometer.css has to be rewritten almost from
3089         scratch. The suites tree has to be rewritten also because it was not collapsing
3090         and with the flex box layout it was going outside of the window area. The
3091         options handling and the local storage handling had to be rewritten to
3092         allow more flexibility with this patch and the future patches. The code
3093         in animometer.js was reorganized into objects to allow distributing the code
3094         nicely among separate entities.
3095
3096         * Animometer/resources/extensions.js:
3097         (Point.elementClientSize): Returns the client size of an HTMLElement as a Point object.
3098         (Insets.prototype.get width): Follow the function opening brace style guidelines.
3099         (Insets.prototype.get height):
3100         (Insets.prototype.get size): Returns the size of an Insets as a Point object.
3101
3102         (window.DocumentExtension): Provides document helper functions. It should be assailable from the runner and the tests.
3103         (window.DocumentExtension.createElement): Creates an HTMLElement given its name, attributes and parentElement.
3104         (window.DocumentExtension.createSvgElement): Creates an SVGElement given its name, attributes and parentElement (moved from utilities.js).
3105         (window.DocumentExtension.insertCssRuleAfter): Inserts a CSS rule after an exiting rule given its text.
3106
3107         (ResultsTable.prototype._showHeader): Use DocumentExtension functions.
3108         (ResultsTable.prototype._showGraph): Use DocumentExtension functions and create a real button for "Graph..." option.
3109         (ResultsTable.prototype._showJSON): Use DocumentExtension functions and create a real button for "JSON..." option.
3110         (Options): Deleted.
3111
3112         * Animometer/runner/animometer.html: Restructure the page to use the flex box layout.
3113
3114         * Animometer/runner/resources/animometer.css:
3115         (html,body):
3116         (button):
3117
3118         (button.large-button):The large button appears in the animometer.html.
3119         (button.large-button:active):
3120         (button.large-button:disabled):
3121
3122         (button.small-button): The small button appears in the results table.
3123         (button.small-button:active):
3124
3125         (.tree): The tree class is used to list the suites and their tests.
3126         (.tree .expand-button): This button expands a tree element.
3127         (.tree .expand-button ~ ul): Hide the children (<ul>...</ul>) of a parent node by default.
3128         (.tree .expand-button:checked ~ ul): Show the children of a parent node only when checked.
3129         (.tree ul): Hide the list bullets.
3130         (.tree li): Indent every node in the tree relative to its parent.
3131         (.tree ul li): Indent all the non top level nodes only (the tests nodes in our case).
3132         (.tree > li:last-child): Do not indent the bottom of the last child node.
3133         (.tree-label): Style for all the labels in the tree.
3134         (label.tree-label): Style for the labels in the top level only (the suites nodes in our case).
3135         (label.tree-label:before): Style the unchecked case of the expand-button.
3136         (:checked ~ label.tree-label:before): Style the checked case of the expand-button.
3137
3138         (table.results-table): The results table appears while running the test and at the end.
3139         (.results-table td):
3140         (.results-table th):
3141
3142         (div.results-json): The JSON div appears per test or for the whole run.
3143
3144         (main): This is the flex box container.
3145
3146         (section): A section is displayed exclusively inside the <main>. It is hidden by default.
3147         (section.selected): When it is selected, its layout is flex layout.
3148         (section > footer): The header or the footer of a section should not take more than 15% of the container.
3149
3150         (section#home): The home section has <suites> and <options> parts to be laid out in the middle.
3151         (section#home > options):
3152         (section#home > suites): The <suites> should not take more than 40% of the width.
3153         (section#home > options > label): The benchmark title.
3154         (section#home > header > h2): The benchmark title.
3155         (section#home > options > label > input[type="number"]): Sets the width of the option edit control.
3156
3157         (section#running): The running section contain the runner <iframe> which takes the whole area of the <main>.
3158         (section#running > #running-test): This is the <iframe> container.
3159         (section#running > #running-test > iframe): The <iframe> is created by the runner for each test.
3160         (section#running > #progress): This is the progress bar.
3161         (section#running > #progress > #progress-completed): This is another element which grows while the runner is progressing.
3162         (section#running > #record): This the container of the record results table which is shown while running a test.
3163
3164         (section#results):
3165         (section#json):
3166         (section#test-json):
3167         (section#test-graph): All these sections have the same layout. A <data> element is laid out between <header> and <footer>.
3168
3169         (section#results > data):
3170         (section#json > data):
3171         (section#test-json > data):
3172         (section#test-graph > data): The <data> element should take 70% of the <section>.
3173
3174         (section#test-graph > data > svg):
3175         (.axis line):
3176         (.left-samples): These styles are for the d3 graph.
3177
3178         (section#test-json > data): This is the style of the JSON <data> element.
3179
3180         (iframe): Deleted.
3181         (label, p): Deleted.
3182         (section > p): Deleted.
3183         (section#home > p): Deleted.
3184         (section#home > p:first-child): Deleted.
3185         (#testContainer): Deleted.
3186         (section#running #progress-completed): Deleted.
3187         (section#results > table): Deleted.
3188         (section#results > table td, th): Deleted.
3189         (section#results > table tr.alt, td): Deleted.
3190         (section#results > table th): Deleted.
3191         (section#json > textarea): Deleted.
3192         (.options): Deleted.
3193         (.options p): Deleted.
3194         (#suites ul): Deleted.
3195         (#suites ul ul): Deleted.
3196         (#suites ul ul input, #suites ul ul label): Deleted.
3197         (#suites.showTests ul ul): Deleted.
3198         (.column): Deleted.
3199         (input[type="number"]): Deleted.
3200         (.buttons): Deleted.
3201         (.small-button): Deleted.
3202         (#graphContainer): Deleted.
3203         (.right-samples): Deleted.
3204         (.sample-time): Deleted.
3205         (.left-mean): Deleted.
3206         (.right-mean): Deleted.
3207
3208         * Animometer/runner/resources/animometer.js:
3209         (window.benchmarkRunnerClient.initialize): Initialize the client object with the options and the suites.
3210         (window.benchmarkRunnerClient.willStartFirstIteration): Use new css selectors for results and the record table.
3211         (window.benchmarkRunnerClient.didFinishLastIteration): Move the code which sets the JSON text to sectionsManager.showJSON().
3212
3213         (window.sectionsManager): Responsible of managing the <section>s elements inside animometer.html.
3214         (window.sectionsManager._sectionHeaderH1Element): Return the <h1> inside the <header> of a given section.
3215         (window.sectionsManager._sectionDataDivElement): Return the <div> inside the <data> of a given section.
3216         (window.sectionsManager.showScore): Show the score of the last benchmark run.
3217         (window.sectionsManager.showTestName): Show the test name for detailed results <section>.
3218         (window.sectionsManager.showJSON): Shows the JSON text of the last benchmark or for a specific test.
3219         (window.sectionsManager.showSection): Shows a specific <section> in the <main> container.
3220         (window.sectionsManager.setupSectionStyle): Sets css attributes for all the <section>s.
3221         (window.sectionsManager.setupRunningSectionStyle): Sets the css attributes for the running <section> only.
3222
3223         (window.optionsManager): Responsible of managing the user options and streaming them to/form the localStorage.
3224         (window.optionsManager._optionsElements): Returns the children <input> elements of the <options>.
3225         (window.optionsManager.updateUIFromLocalStorage): Restore the values of the <options> UI elements from the local storage.
3226         (window.optionsManager.updateLocalStorageFromUI): Saves the values of the <options> UI elements to the local storage.
3227
3228         (window.suitesManager): Responsible of managing the user suites and streaming them to/form the localStorage.
3229         (window.suitesManager._treeElement): Returns the suites tree container element.
3230         (window.suitesManager._suitesElements): Returns a list of the suites elements.
3231         (window.suitesManager._checkboxElement): Returns the checkbox element of a given suite.
3232         (window.suitesManager._localStorageNameForTest): Generates a string for the tuple <suite, test> to be saved in the localStorage.
3233         (window.suitesManager._updateSuiteCheckboxState): Updates the state of a suite checkbox from the state of its tests' checkboxes.
3234         (window.suitesManager._updateStartButtonState): Updates the state of the start button from the state of the suites' checkboxes.
3235         (window.suitesManager._onChangeSuiteCheckbox): Called when a suite checkbox is clicked.
3236         (window.suitesManager._onChangeTestCheckbox): Called when a test checkbox is clicked.
3237         (window.suitesManager._createSuiteElement): Creates suite node in the suites tree.
3238         (window.suitesManager._createTestElement): Creates test node in the suites tree.
3239         (window.suitesManager.createElements): Creates the suites tree dynamically from the array Suites.
3240         (window.suitesManager.updateUIFromLocalStorage): Restore the values of the <suites> UI elements from the local storage.
3241         (window.suitesManager.updateLocalStorageFromUI): aves the values of the <suites> UI elements to the local storage.
3242
3243         (window.benchmarkController): This is the UI controller of the animometer.html page.
3244         (window.benchmarkController.initialize): Called when the animometer.html page is loaded.
3245         (window.benchmarkController._runBenchmark): Starts a benchmark run.
3246         (window.benchmarkController.startTest): Called when the "Start Test" button is clicked.
3247         (window.benchmarkController.showResults): Called at the end of the test to show the final results.
3248         (window.benchmarkController.showJson): Called from the results page to show the JSON of the last benchmark run.
3249         (window.benchmarkController.showTestGraph): Called from the results the table to show a graph for the samples of a specific test.
3250         (window.benchmarkController.showTestJSON): Called from the results the table to show a JSON for the samples of a specific test.
3251
3252         (showSection): Deleted.
3253         (startTest): Deleted.
3254         (showResults): Deleted.
3255         (showJson): Deleted.
3256         (showTestGraph): Deleted.
3257         (showTestJSON): Deleted.
3258         (initialize.toggleTestsCheckbox.onchange): Deleted.
3259         (initialize): Deleted.
3260         (updateSuiteSelection): Deleted.
3261         (updateTestSelection): Deleted.
3262         (updateSuiteCheckbox): Deleted.
3263         (localStorageNameForTest): Deleted.
3264         (populateSettings.): Deleted.
3265         (populateSettings): Deleted.
3266
3267         * Animometer/runner/resources/benchmark-runner.js:
3268         (BenchmarkRunner): Pass the frameContainer element to the BenchmarkRunner.
3269         (BenchmarkRunner.prototype._appendFrame): Remove unused parameter unwanted styling code.
3270         (BenchmarkRunner.prototype.runMultipleIterations):  Use the this._client.iterationCount instead of passing it as a parameter also.
3271
3272         * Animometer/runner/resources/graph.js:
3273         (graph): Calculate the size of the chart from the container element.
3274
3275         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
3276         (BouncingSvgImage):
3277         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
3278         (BouncingSvgParticlesStage.prototype._createDefs):
3279         (BouncingSvgParticlesStage.prototype._createClipStar):
3280         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3281         (BouncingSvgShape.prototype._createShape):
3282         (BouncingSvgShapesStage.prototype.createGradient):
3283         Call DocumentExtension.createSvgElement() instead of calling Utilities.createSvgElement().
3284
3285         * Animometer/tests/resources/main.js:
3286         (Animator.prototype.animate):
3287         (Benchmark):
3288         (Benchmark.prototype.update):
3289         * Animometer/tests/resources/stage.js:
3290         (StageBenchmark.prototype.showResults):
3291         Rename the options to match the <input> ids in animometer.html.
3292
3293         * Animometer/tests/resources/utilities.js:
3294         (window.Utilities.createSvgElement): Deleted.
3295
3296         * Animometer/tests/text/layering-text.html:
3297         * Animometer/tests/text/resources/layering-text.js:
3298         (LayeringTextStage):
3299         (LayeringTextStage.prototype._setFontSize): Sets the size of the text dynamically such that they all fit in one stage.
3300
3301 2015-10-29  Simon Fraser  <simon.fraser@apple.com>
3302
3303         Animometer computes frame rate incorrectly
3304         https://bugs.webkit.org/show_bug.cgi?id=150698
3305
3306         Reviewed by Tim Horton.
3307
3308         The existing code incremented this._frameCount after checking against this._dropFrameCount.
3309         This has the effect of setting this._measureTimeOffset one frame too late, so
3310         we were measuring only two frames, not three, and thus computing an incorrect fps.
3311
3312         * Animometer/tests/resources/main.js:
3313         (Animator.prototype.animate):
3314
3315 2015-10-27  Jon Lee  <jonlee@apple.com>
3316
3317         Add an option to make the graphics benchmark runs a specific test
3318         https://bugs.webkit.org/show_bug.cgi?id=150528
3319         rdar://problem/23246614
3320
3321         Reviewed by Zalan Bujtas.
3322
3323         Add a checkbox that lets the user list all of the available tests, and select
3324         the ones to run repeatedly. The test checkboxes will update the state of the suite
3325         checkbox. The selected tests are stored in localStorage to make it easy to do
3326         repeated runs.
3327
3328         * Animometer/runner/animometer.html: Add a checkbox to show individual tests.
3329         Update other markup.
3330         * Animometer/runner/resources/animometer.css: Make the settings area a little wider
3331         to accommodate the longer names of the tests
3332         * Animometer/runner/resources/animometer.js:
3333         (startBenchmark): Change the way that the suites are fed into the benchmark
3334         runner. Go through each of the suites and their tests, and create a new Suite
3335         with just the enabled tests. While enumerating store the enabled tests into
3336         localStorage.
3337         (initialize): Initialization routine (taking over populateSettings). When the
3338         checkbox for showing tests is toggled, add or remove a class on #suites to show
3339         the individual tests.
3340         (updateSuiteSelection): Called whenever the user toggles the checkbox for a suite.
3341         Either select all or none of the tests.
3342         (updateTestSelection): Called whenever the user toggles the checkbox for a test.
3343         (updateSuiteCheckbox): Update the state of the test's suite's checkbox to
3344         indeterminate if there is at least one enabled test, unchecked if none are selected,
3345         and checked if all are selected.
3346         (localStorageNameForTest): Helper function to get the name of the test to use as
3347         a key to localStorage.
3348         (populateSettings): Add the tests for each suite into an inner list.
3349
3350 2015-10-26  Said Abou-Hallawa  <sabouhallawa@apple.com>
3351
3352         Add an option to output the results of the graphics benchmark in JSON format
3353         https://bugs.webkit.org/show_bug.cgi?id=150484
3354         <rdar://problem/23243721>
3355
3356         Reviewed by Darin Adler.
3357
3358         * Animometer/resources/extensions.js:
3359         (ResultsDashboard): A new class to hold the iterations results.
3360         (ResultsDashboard.prototype.push): Appends an iteration results;
3361         (ResultsDashboard.prototype.toJSON): Converts the iterations results to JSON format.
3362
3363         (RecordTable.prototype.clear): Clears the results table.
3364         (RecordTable.prototype._showTitles): Shows the header titles and appends the sub-titles to a queue.
3365         (RecordTable.prototype._showHeader): Shows the table header titles.
3366         (RecordTable.prototype._showEmpty): Shows an empty table cell.
3367         (RecordTable.prototype._showValue): Shows a number value in the results table.
3368         (RecordTable.prototype._showSamples): Shows a button for the sampled data graph.
3369         (RecordTable.prototype._showTest): Shows the results of a single test.
3370         (RecordTable.prototype._showSuite): Shows the results of a single suite.
3371         (RecordTable.prototype.showRecord): Shows a single iteration for a single test.
3372         (RecordTable.prototype.showIterations): Shows the results of all the suites of the iterations.
3373
3374         (ResultsTable): RecordTable was renamed to ResultsTable.
3375         (ResultsTable.prototype.clear): Clears the table element.
3376         (ResultsTable.prototype._showHeaderRow): Shows a row in the results table header.
3377         (ResultsTable.prototype._showHeader): Shows the results table header.
3378         (ResultsTable.prototype._showEmpty): Shows an empty table cell.
3379         (ResultsTable.prototype._showText): Shows a string in a new table cell.
3380         (ResultsTable.prototype._showFixedNumber): Shows a number in a new table cell.
3381         (ResultsTable.prototype._showGraph): Shows a button for the sampled data graph.
3382         (ResultsTable.prototype._showJSON): Shows a button for the sampled data JSON.
3383         (ResultsTable.prototype._showTest): Shows the results of a single test.
3384         (ResultsTable.prototype._showSuite): Shows the results of a single suite.
3385         (ResultsTable.prototype._showIteration): Shows the results of a single iteration.
3386         (ResultsTable.prototype.showRecord): Shows a single iteration for a single test.
3387         (ResultsTable.prototype.showIterations): Shows all the results.
3388         (RecordTable): Deleted.
3389         (RecordTable.prototype.clear): Deleted.
3390         (RecordTable.prototype._showTitles): Deleted.
3391         (RecordTable.prototype._showHeader): Deleted.
3392         (RecordTable.prototype._showEmpty): Deleted.
3393         (RecordTable.prototype._showValue): Deleted.
3394         (RecordTable.prototype._showSamples): Deleted.
3395         (RecordTable.prototype._showTest): Deleted.
3396         (RecordTable.prototype._showSuite): Deleted.
3397         (RecordTable.prototype.showRecord): Deleted.
3398         (RecordTable.prototype.showIterations): Deleted.
3399
3400         * Animometer/resources/sampler.js:
3401         (Sampler.prototype.startSampling): Use forEach.
3402         (Sampler.prototype.sample): Use forEach.
3403         (Sampler.prototype.toJSON): Converts the sampler data to JSON format.
3404
3405         * Animometer/resources/strings.js: Added.
3406         This new file will be used to associate the strings used by the benchmark
3407         with IDs. A string can be changed in one place without having to change
3408         all the instances of this string in multiple files. There two groups of
3409         strings in this file. The first one is used by the UI elements and the second
3410         group is used when constructing the results JSON.
3411
3412         * Animometer/runner/animometer.html:
3413         * Animometer/runner/resources/animometer.css:
3414
3415         * Animometer/runner/resources/animometer.js:
3416         (window.benchmarkRunnerClient.willAddTestFrame):
3417         (window.benchmarkRunnerClient.willStartFirstIteration):
3418         (window.benchmarkRunnerClient.didRunSuites):
3419         (window.benchmarkRunnerClient.didFinishLastIteration):
3420         Make benchmarkRunnerClient uses ResultsDashboard instead of _iterationsSamplers
3421         Get the JSON from ResultsDashboard.toJSON() and pass it to ResultsTable.showIterations().
3422         Also set the textContent of the "#json" textarea with the results JSON.
3423
3424         (showResults): Delete unneeded code.
3425         (showJson): Shows the "json" section.
3426         (showTestGraph): Rename showGraph() to be showTestGraph().
3427         (showTestJSON): Shows the JSON of a single testResults.
3428         (showGraph): Deleted.
3429
3430         * Animometer/runner/resources/tests.js:
3431         Use the string table instead of putting literal strings.
3432
3433         * Animometer/tests/resources/stage.js:
3434         (StageBenchmark.prototype.showResults):
3435         Fix the parameters which are passed to RecordTable.showRecord().
3436
3437         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
3438         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
3439         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
3440         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
3441         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
3442         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
3443         * Animometer/tests/examples/canvas-electrons.html:
3444         * Animometer/tests/examples/canvas-stars.html:
3445         * Animometer/tests/simple/simple-canvas-paths.html:
3446         * Animometer/tests/template/template-canvas.html:
3447         * Animometer/tests/template/template-css.html:
3448         * Animometer/tests/template/template-svg.html:
3449         * Animometer/tests/text/layering-text.html:
3450         Include the new strings.js file in all the test files.
3451
3452 2015-10-12  Jon Lee  <jonlee@apple.com>
3453
3454         Add canvas line dash test
3455         https://bugs.webkit.org/show_bug.cgi?id=150078
3456         <rdar://problem/23082347>
3457
3458         Reviewed by Dean Jackson.
3459
3460         * Animometer/runner/resources/tests.js: Add line dash test.
3461         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3462         (CanvasLineDashStage): Create a new stage with a default dash pattern and stroke style.
3463         Maintain a step which will animate the dash.
3464         (CanvasLineDashStage.prototype.animate): Render the line path with the dash. Increment
3465         the dash offset to animate.
3466         (CanvasPathBenchmark.prototype.createStage): Add the test.
3467
3468 2015-10-12  Jon Lee  <jonlee@apple.com>
3469
3470         Add canvas line path tests
3471         https://bugs.webkit.org/show_bug.cgi?id=150076
3472         <rdar://problem/23082285>
3473
3474         Reviewed by Dean Jackson.
3475
3476         * Animometer/runner/resources/tests.js: Add new line path tests, with different
3477         line joins.
3478         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3479         (CanvasLinePathStage): The stage is the same as the SimpleCanvasPathStrokeStage
3480         but sets the lineJoin on the context.
3481         (CanvasPathBenchmark.prototype.createStage): Add the tests.
3482
3483 2015-10-12  Jon Lee  <jonlee@apple.com>
3484
3485         Add missing paint objects for arc and arcTo fills
3486         https://bugs.webkit.org/show_bug.cgi?id=150075
3487         <rdar://problem/23082233>
3488
3489         Reviewed by Dean Jackson.
3490
3491         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add missing paint objects
3492         for arcTo and arc segment fills.
3493         (CanvasArcToSegmentFill):
3494         (CanvasArcToSegmentFill.prototype.draw):
3495         (CanvasArcSegmentFill):
3496         (CanvasArcSegmentFill.prototype.draw):
3497
3498 2015-10-12  Jon Lee  <jonlee@apple.com>
3499
3500         Add canvas line segment tests
3501         https://bugs.webkit.org/show_bug.cgi?id=150073
3502         <rdar://problem/23082138>
3503
3504         Reviewed by Dean Jackson.
3505
3506         * Animometer/runner/resources/tests.js: Add new line segment tests, with different
3507         line caps.
3508         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3509         (CanvasLineSegment): Add new line segment paint object.
3510         (CanvasLineSegmentStage): Create a new stage that sets the lineCap.
3511
3512 2015-10-12  Jon Lee  <jonlee@apple.com>
3513
3514         Add canvas path fill tests
3515         https://bugs.webkit.org/show_bug.cgi?id=150071
3516         <rdar://problem/23082001>
3517
3518         Reviewed by Dean Jackson.
3519
3520         * Animometer/runner/resources/tests.js: Add new pathTypes for path fills.
3521         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3522         (CanvasLinePoint): Add basic point for a line, and call lineTo.
3523         (SimpleCanvasPathFillStage): Add a new stage similar to SimpleCanvasPathStrokeStage.
3524         (CanvasPathBenchmark.prototype.createStage): Add the tests.
3525
3526 2015-10-12  Jon Lee  <jonlee@apple.com>
3527
3528         Add canvas path tests
3529         https://bugs.webkit.org/show_bug.cgi?id=150067
3530         rdar://problem/23081463
3531
3532         Reviewed by Dean Jackson.
3533
3534         * Animometer/runner/resources/tests.js: Add a quadratic and bezier path test.
3535
3536         * Animometer/tests/simple/resources/simple-canvas.js:
3537         (SimpleCanvasStage.prototype.tune): This kind of test joins all of the segments
3538         into one long path, and tries to render that one path. Random points make it
3539         difficult to tell what is going on, so add a parameter to the constructor to
3540         confine the area where the random coordinates can land. The more complicated the
3541         case is, the larger an area the path will cover. Add an artificial minimum so
3542         that the first 200 points aren't confined to a space that is too small.
3543
3544         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3545         (SimpleCanvasPathStrokeStage): Add a new kind of stage that inherits from
3546         SimpleCanvasStage. Each time the frame animates a random line width and stroke
3547         color are chosen. The path setup is done outside of each paint object.
3548         (CanvasQuadraticPoint): This point just calls quadraticCurveTo.
3549         (CanvasPathBenchmark.prototype.createStage): Add the tests.
3550
3551 2015-10-12  Jon Lee  <jonlee@apple.com>
3552
3553         Add basic canvas tests
3554         https://bugs.webkit.org/show_bug.cgi?id=150066
3555         rdar://problem/23081143
3556
3557         Reviewed by Dean Jackson.
3558
3559         This adds a new test suite that will cover all of the path-based canvas calls.
3560         The patch will be divided up to cover tests with similar techniques.
3561
3562         The simplest version uses a SimpleCanvasStage.
3563
3564         * Animometer/runner/resources/tests.js: Add tests for quadratic, bezier, arcTo,
3565         arc, and rect segments. Also include arcTo, arc, and rect fills.
3566         * Animometer/tests/resources/stage.js:
3567         (Stage.prototype.randomBool): Added for counterclockwise property for arc segments.
3568         (Stage.prototype.randomInt): Fix how values are rounded, used by randomBool. It should
3569         round instead of flooring everything.
3570         * Animometer/tests/simple/resources/simple-canvas.js: Added. Defines common classes
3571         used by all simple canvas tests. The page reads best bottom to top.
3572         (SimpleCanvasStage): Basic stage. Pass a canvasObject which will be used to create new
3573         objects as needed in tune().
3574         (SimpleCanvasStage.prototype.tune): Modeled on other tests. Adds and removed objects
3575         as specified by the provided |count|.
3576         (SimpleCanvasStage.prototype.animate): Iterate over all the objects and ask them to draw.
3577         There is no "animating" of the objects; they will just paint statically on the canvas.
3578         (SimpleCanvasAnimator): Basic animator clears the canvas prior to painting.
3579         (SimpleCanvasBenchmark): Hard-code the feedback loop parameters instead of including
3580         them in the query parameters to the test URLs.
3581         (SimpleCanvasBenchmark.prototype.createAnimator):
3582         * Animometer/tests/simple/simple-canvas-paths.html: Added.
3583
3584         * Animometer/tests/simple/resources/simple-canvas-paths.js: Added. There is no "animating"
3585         of these objects--they just paint statically on the canvas.
3586         (CanvasQuadraticSegment): Paint a quadratic segment stroke.
3587         (CanvasBezierSegment): Paint a bezier segment stroke.
3588         (CanvasArcToSegment): Paint an arcTo stroke.
3589         (CanvasArcSegment): Paint an arc stroke.
3590         (CanvasRect): Paint a rect.
3591         (CanvasRectFill): Paint a filled rect.
3592
3593         (CanvasPathBenchmark):
3594         (CanvasPathBenchmark.prototype.createStage): Look for the pathType and create the
3595         stage using the right paint object.
3596         (window.benchmarkClient.create):
3597
3598 2015-10-12  Jon Lee  <jonlee@apple.com>
3599
3600         Refactor tune() to pass in an integer-based count
3601         https://bugs.webkit.org/show_bug.cgi?id=150060
3602         <rdar://problem/23079425>
3603
3604         Reviewed by Dean Jackson.
3605
3606         All of the tune functions do an initial step of flooring the
3607         # of painting objects to add or remove. Factor that out since
3608         the complexity of all of these tests is always expressed in terms
3609         of countable items.
3610
3611         * Animometer/tests/resources/main.js:
3612         (Benchmark.prototype.update): Update the tuneValue.
3613
3614         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3615         (BouncingParticlesStage.prototype.tune): Remove the count adjustment.
3616         * Animometer/tests/examples/resources/canvas-electrons.js:
3617         (CanvasElectronsStage.prototype.tune): Ditto.
3618         * Animometer/tests/examples/resources/canvas-stars.js:
3619         (CanvasStarsStage.prototype.tune): Ditto.
3620         * Animometer/tests/text/resources/layering-text.js:
3621         (LayeringTextStage.prototype.tune): Ditto.
3622
3623 2015-10-12  Jon Lee  <jonlee@apple.com>
3624
3625         Store test-interval in localStorage
3626         https://bugs.webkit.org/show_bug.cgi?id=150055
3627         <rdar://problem/23078879>
3628
3629         Reviewed by Dean Jackson.
3630
3631         * Animometer/runner/resources/animometer.js:
3632         (populateSettings): Keep track of the specified test interval in localStorage
3633         to make it easy to repeat a test suite.
3634
3635 2015-10-12  Jon Lee  <jonlee@apple.com>
3636
3637         Remove "../tests/" from the URLs of all tests
3638         https://bugs.webkit.org/show_bug.cgi?id=150054
3639         <rdar://problem/23078784>
3640
3641         Reviewed by Dean Jackson.
3642
3643         Presumably all tests will be running from the tests/ directory,
3644         so we don't have to specify it in all of the test URLs.
3645
3646         * Animometer/runner/resources/benchmark-runner.js:
3647         (BenchmarkRunnerState.prototype.prepareCurrentTest): Prepend
3648         "../tests/" to all tests.
3649         * Animometer/runner/resources/tests.js: Remove "../tests/" from
3650         all URLs.
3651
3652 2015-10-12  Jon Lee  <jonlee@apple.com>
3653
3654         Refactor test suites to a separate class.
3655         https://bugs.webkit.org/show_bug.cgi?id=150053
3656         <rdar://problem/23078645>
3657
3658         Reviewed by Dean Jackson.
3659
3660         Create a Suite class to refactor out prepare() and run().
3661         Generate the checkboxes representing the suites using Suites
3662         instead of maintaining a separate list. Also, save the
3663         selections out to localStorage.
3664
3665         * Animometer/runner/animometer.html: Remove the explicitly listed
3666         suites. These will be generated from Suites instead.
3667         * Animometer/runner/resources/animometer.js:
3668         (populateSettings): Iterate through Suites, and create the
3669         label and checkbox. Attach the Suite object to the checkbox so
3670         when the benchmark is started, we get direct access. Initialize
3671         the checkmark based on its value in localStorage. Set this to
3672         run when DOMContentLoaded is dispatched.
3673         (startBenchmark): Grab all of the checkboxes, inspect their
3674         values, add it to enabledSuites if selected. Remember whether
3675         the suite was enabled in localStorage, so that it's easy to do
3676         repeated runs.
3677         * Animometer/runner/resources/tests.js:
3678         (Suite): Create a new Suite class. Refactor out prepare() and
3679         run(), since all of them have the same implementation. Populate
3680         Suites with Suite instances instead of generic objects.
3681
3682 2015-10-12  Jon Lee  <jonlee@apple.com>
3683
3684         Update graph styles for legibility.
3685         https://bugs.webkit.org/show_bug.cgi?id=150052
3686         <rdar://problem/23078503>
3687
3688         Reviewed by Dean Jackson.
3689
3690         * Animometer/runner/resources/animometer.css: Update colors and
3691         stroke thicknesses to make the graphs easier to read.
3692         (.smaple-time): Correct to .sample-time
3693         * Animometer/runner/resources/graph.js:
3694         (graph): Ditto.
3695
3696 2015-10-12  Jon Lee  <jonlee@apple.com>
3697
3698         Update graph styles for legibility.
3699         https://bugs.webkit.org/show_bug.cgi?id=150052
3700         <rdar://problem/23078503>
3701
3702         Reviewed by Dean Jackson.
3703
3704         * Animometer/runner/resources/animometer.css: Update colors and
3705         stroke thicknesses to make the graphs easier to read.
3706         (.smaple-time): Correct to .sample-time
3707         * Animometer/runner/resources/graph.js:
3708         (graph): Ditto.
3709
3710 2015-10-12  Filip Pizlo  <fpizlo@apple.com>
3711
3712         Unreviewed, revert an unintended commit.
3713
3714         * JetStream/Octane2/crypto.js:
3715         (montRevert):
3716         (montReduce):
3717
3718 2015-10-05  Said Abou-Hallawa  <sabouhallawa@apple.com>
3719
3720         Add a graphics benchmark
3721         https://bugs.webkit.org/show_bug.cgi?id=149053
3722         <rdar://problem/18984169>
3723
3724         Reviewed by Dean Jackson.
3725
3726         Instead of measuring the FPS of the animation, this benchmark measures the
3727         test complexity when rendering at a set-point FPS which should be lower
3728         than 60 FPS. This benchmark tries to stay at the set-point FPS by using
3729         a closed loop control system PID function. The gain of the system is passed
3730         as a parameter when running the test. Measuring the FPS faithfully results
3731         very fluctuating values. A Kalman filter is used to give a better estimate
3732         for the current FPS.
3733
3734         The animation of the tests is done manually. requestAnimationFrame() is
3735         called with a callback. Inside this callback, the test is animating by
3736         changing the positions of the elements inside the page. The test complexity
3737         may change also if the current FPS is not equal to the desired FPS.
3738
3739         In this patch, the benchmark and the tests are included. The shared code
3740         and the tests runner are included in separate patches.
3741
3742         * Animometer/runner/animometer.html:
3743         * Animometer/runner/resources/animometer.js:
3744         Add two new examples for more complex animation techniques.
3745         Add an option to show/hide the test running results which is off by default.
3746
3747         * Animometer/runner/resources/tests.js: Added.
3748         (suiteFromName): Returns a suite given its name.
3749         (testFromName): Returns a test given its suite and name.
3750
3751         * Animometer/tests: Added.
3752         This directory includes all the test suites to be run by the benchmark.
3753         runner. All the tests should try to run on three stages: CSS, canvas and
3754         SVG.
3755
3756         * Animometer/tests/bouncing-particles: Added.
3757         * Animometer/tests/bouncing-particles/resources: Added.
3758         The bouncing particles test is an example of a simple animation technique.