Update benchmark test suite
[WebKit-https.git] / PerformanceTests / ChangeLog
1 2016-01-07  Jon Lee  <jonlee@apple.com>
2
3         Update benchmark test suite
4         https://bugs.webkit.org/show_bug.cgi?id=152679
5
6         Reviewed by Simon Fraser.
7
8         Add a new test. The test has a rotating background
9         gradient, and does a better job physically simulating
10         particles.
11
12         * Animometer/resources/extensions.js: Teach Point to take constants as well as other Points.
13         (Point.prototype.length): Added.
14         (Point.prototype.normalize): Added.
15         * Animometer/resources/runner/tests.js: Add the test to the master suite.
16         * Animometer/tests/master/particles.html: Added.
17         * Animometer/tests/master/resources/particles.js: Added. Parent class for different kinds of particles.
18         (Particle):
19         (Particle.prototype.reset): If the particle starts slowing down in terms of its animation,
20         reset it.
21         (Particle.prototype.animate): Bounce off the walls elastically, and include gravity.
22         (Particle.prototype.move): Subclasses should override.
23         (ParticlesStage): Stage includes a rotating gradient background.
24         * Animometer/tests/master/resources/dom-particles.js: Added. Creates a <div> and adds it to
25         the stage.
26         * Animometer/tests/resources/star.svg: Added.
27
28 2016-01-03  Jon Lee  <jonlee@apple.com>
29
30         Update benchmark test suite
31         https://bugs.webkit.org/show_bug.cgi?id=152679
32
33         Reviewed by Simon Fraser.
34
35         Move algorithm.js and sampler.js to tests/ and benchmark-runner.js to runner/.
36
37         Needed by both harnesses.
38         * Animometer/resources/runner/benchmark-runner.js: Renamed from PerformanceTests/Animometer/resources/debug-runner/benchmark-runner.js.
39         * Animometer/developer.html:
40         * Animometer/index.html:
41
42         Needed only by the tests. Move to tests/. Statistics, in sampler.js, is used by ResultsDashboard, so move that
43         into extensions.js.
44         * Animometer/resources/extensions.js:
45         * Animometer/tests/resources/algorithm.js: Renamed from PerformanceTests/Animometer/resources/algorithm.js.
46         * Animometer/tests/resources/sampler.js: Renamed from PerformanceTests/Animometer/resources/sampler.js.
47         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
48         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
49         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
50         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
51         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
52         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
53         * Animometer/tests/master/canvas-stage.html:
54         * Animometer/tests/misc/canvas-electrons.html:
55         * Animometer/tests/misc/canvas-stars.html:
56         * Animometer/tests/misc/compositing-transforms.html:
57         * Animometer/tests/simple/simple-canvas-paths.html:
58         * Animometer/tests/template/template-canvas.html:
59         * Animometer/tests/template/template-css.html:
60         * Animometer/tests/template/template-svg.html:
61         * Animometer/tests/text/layering-text.html:
62         * Animometer/tests/text/text-boxes.html:
63
64 2016-01-07  Jon Lee  <jonlee@apple.com>
65
66         Update benchmark test suite
67         https://bugs.webkit.org/show_bug.cgi?id=152679
68
69         Reviewed by Simon Fraser.
70
71         Fix tests for other browsers.
72
73         * Animometer/resources/extensions.js:
74         (Point.elementClientSize): Some browsers return 0 for SVG clientWidth and clientHeight.
75         Use getBoundingClientRect() instead.
76         * Animometer/tests/misc/resources/canvas-electrons.js:
77         (CanvasElectron.prototype._draw): Some browsers don't support ellipse.
78
79 2016-01-07  Jon Lee  <jonlee@apple.com>
80
81         Add a waitUntilReady() step
82         https://bugs.webkit.org/show_bug.cgi?id=152862
83
84         Reviewed by Simon Fraser.
85
86         Add a waitUntilReady() callback that lets the benchmark complete
87         its setup before running the benchmark.
88
89         * Animometer/tests/resources/main.js:
90         (Benchmark.prototype.run): First call waitUntilReady, which returns
91         a promise. When the promise resolves, run everything that was in this
92         function.
93         (Benchmark.prototype.waitUntilReady): Default implementation returns
94         a resolved promise.
95         (Benchmark.prototype.resolveWhenFinished): Deleted.
96         * Animometer/tests/template/resources/template-canvas.js:
97         (new.TemplateCanvasStage.waitUntilReady): Example on how to override.
98
99 2016-01-03  Jon Lee  <jonlee@apple.com>
100
101         Update data reporting and analysis
102         https://bugs.webkit.org/show_bug.cgi?id=152670
103
104         Reviewed by Simon Fraser.
105
106         Show new graph data. Provide controls to show different series data. Provide an
107         interactive cursor that shows the data at a given sample.
108
109         * Animometer/developer.html: Add a nav section in #results. Each part of the graph
110         has a checkbox for visual toggling, as well as companion spans to contain the data.
111                 The numbers will always be shown even if the SVG isn't.
112         * Animometer/resources/debug-runner/animometer.css:
113         (#suites): Adjust spacing when doing fixed complexity.
114         (#test-graph nav): Place the nav in the upper right corner.
115         (#test-graph-data > svg): Fix the FPS scale from 0-60. It makes the raw FPS goes past
116         that scale. Allow it to show.
117         (.target-fps): Add a dotted line for where the benchmark is supposed to settle for FPS.
118         (#cursor line): The cursor contains a line and highlight circles for the data being shown.
119         (#cursor circle):
120         (#complexity path): This and rules afterward are named by series type.
121         (#complexity circle):
122         (#filteredFPS path):
123         (#filteredFPS circle):
124         (#rawFPS path):
125         (#intervalFPS circle):
126         (.left-samples): Deleted.
127         (.right-samples): Deleted.
128         * Animometer/resources/debug-runner/animometer.js:
129         (initialize): Add a "changed" listener when the checkboxes change in the nav.
130         (onBenchmarkOptionsChanged): Renamed.
131         (showTestGraph): All graph data is passed in as graphData instead of as arguments.
132         * Animometer/resources/debug-runner/graph.js: Extend BenchmarkController. When showing
133         a new graph, call updateGraphData(). It creates all of the d3 graphs. onGraphOptionsChanged()
134         toggles the data on and off.
135         (updateGraphData): Add the axes. Add the average lines and markers for sample time and
136         target FPS. Add the cursor group. Use helper function addData() to add the data. On top of
137         everything add a transparent area which will catch all of the mouse events. When the mouse
138         moves in the graph, find the closest data point, show the data in the nav area, and highlight
139         the data points.
140         (addData): Adds a line and circle for each data point. Also adds a highlight cursor with a
141         size a little larger than the circle radius for the data points.
142         (onGraphOptionsChanged): Called when data is visually toggled.
143         (showOrHideNodes): Helper function to toggle the .hidden class.
144         * Animometer/resources/extensions.js:
145         (ResultsDashboard.prototype.get data): Get rid of the arguments for _processData.
146         (ResultsTable.prototype._addGraphButton): Shove all of the graph data into a singular object.
147
148         Producing the JSON can take a while with all of the data. Make it on-demand with a
149         button.
150
151         * Animometer/resources/debug-runner/animometer.js:
152         (showResults): When showing the results, don't serialize the JSON data. Move that to...
153         (showJSONResults): ...here. Remove the button.
154
155         * Animometer/developer.html: Add a button. The button will remove itself and populate
156         the textarea with the JSON data.
157         * Animometer/resources/debug-runner/animometer.css:
158         (.hidden): Add a universal hidden class.
159         (#results button.small-button): Promote the small-button styles to the whole results
160         section for use in the JSON button.
161         (#results button.small-button:active):
162         (#results-data button.small-button): Deleted.
163         (#results-data button.small-button:active): Deleted.
164
165         Refactor how Animator does its recording.
166
167         * Animometer/tests/resources/math.js: Create a new, simple estimator that just returns
168         the same interval frame rate for adjustment.
169         * Animometer/tests/resources/main.js:
170         (Animator): Remove _dropFrameCount, and make variables more accurate described.
171         (Animator.prototype.initialize): Use the identity estimator instead of using a bool.
172         (Animator.prototype._intervalTimeDelta): Rename, only used internally.
173         (Animator.prototype._shouldRequestAnotherFrame): Assume we drop one frame for adjustment
174         of the scene. If we are within the number of frames to measure for the interval, just
175         record the timestamp. Otherwise we are ready to evaluate and adjust the scene. Record
176         the interval frame rate and the estimator's frame rate.
177
178         Avoid processing the data through the Experiment while the test is running. Reconfigure
179         the sampler to just record the raw samples. After the test is done, run the samples through
180         the Experiment to get the score.
181
182         * Animometer/resources/sampler.js:
183         (Experiment): Fold _init() into the constructor since nobody else will call it. This is not
184         needed until the test concludes, so remove startSampling(). Clients should just call sample().
185         (Sampler): Pre-allocate arrays given the number of data points being recorded, and a capacity
186         of how many samples will be used. The processor is a called when it's time to process the data
187         since that is the client also telling the Sampler what to record.
188                 Introduce the notion of marks as well, which allows the client to mark when an
189         event occurs. When we mark sample start, we can attach the timestamp there, instead of storing
190         it separately.
191         (Sampler.prototype.startSampling): Deleted. Clients should just call record().
192         (Sampler.prototype.record): The data to record is passed in as variable arguments.
193         (Sampler.prototype.mark): When adding a mark, a client needs to provide a unique string, and
194         can provide extra data object for later retrieval.
195         (Sampler.prototype.process): Renamed from toJSON. Trim the sampling arrays to what was used.
196         Call the processor to process the samples.
197         * Animometer/resources/debug-runner/benchmark-runner.js:
198         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Call process().
199
200         * Animometer/resources/strings.js: Add some new strings, remove the graph ones since they are
201         not used.
202         * Animometer/tests/resources/main.js:
203         (Benchmark): Create a sampler with 4 series. The maximum number of points expected is the
204         number of seconds multiplied by 60 fps. Benchmark, as a client of the Sampler, knows about all
205         of the data being added to the Sampler. It is added through record(), and processed through
206         processSamples().
207         (Benchmark.prototype.update): Mark when we've passed warmup and are starting to sample. Include
208         the timestamp in the custom data for the mark. This avoids the need to store is separately in
209         the Sampler. Fold what was in record() here, since nothing else needs this functionality.
210         record() now just relays the information to the sampler.
211         (Benchmark.prototype.record): Called by Animator, which provides the data to the sampler.
212         Animator's calls to this is part of a later patch. Requires each stage to return its complexity.
213         (Benchmark.prototype.processSamples): If the sampling mark exists, add it to the results.
214                 Go through all of the samples. All samples contain a timestamp and complexity. We
215         calculate "raw FPS" which is the time differential from the previous sample. At regular intervals
216         the Kalman-filtered FPS and the interval average FPS are also recorded. We also create two
217         experiments, to get the scores for the complexity and smoothed FPS, and add those samples to
218         the experiments. Grab those scores and add them into results also.
219
220         Add complexity() to the tests for Benchmark.record().
221         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
222         * Animometer/tests/misc/resources/canvas-electrons.js:
223         * Animometer/tests/misc/resources/canvas-stars.js:
224         * Animometer/tests/text/resources/layering-text.js:
225
226 2015-12-27  Jon Lee  <jonlee@apple.com>
227
228         Simplify the test harness
229         https://bugs.webkit.org/show_bug.cgi?id=152562
230
231         Reviewed by Simon Fraser.
232
233         Update the simple canvas tests. For the paths, start from the center instead of the
234         top-left corner. Instead of using a coordinate limit, use a canonized factor, and
235         use that along both the x and y axes, so that more capable tests use more of the
236         canvas.
237
238         * Animometer/tests/simple/resources/simple-canvas-paths.js:
239         (CanvasLinePoint): Rewrite to use the coordinate maximum factor.
240         (CanvasQuadraticPoint): Ditto.
241         (CanvasBezierPoint): Ditto.
242         * Animometer/tests/simple/resources/simple-canvas.js:
243         (tune): Calculate a factor instead of a maximum coordinate.
244
245 2015-12-27  Jon Lee  <jonlee@apple.com>
246
247         Simplify the test harness
248         https://bugs.webkit.org/show_bug.cgi?id=152562
249
250         Reviewed by Simon Fraser.
251
252         All of the benchmarks use the default Animator(). Don't require new tests
253         to pass a new instance, and instead just make one in the Benchmark constructor.
254
255         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
256         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
257         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
258         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
259         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
260         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
261         * Animometer/tests/master/resources/canvas-tests.js:
262         * Animometer/tests/misc/resources/canvas-electrons.js:
263         * Animometer/tests/misc/resources/canvas-stars.js:
264         * Animometer/tests/misc/resources/compositing-transforms.js:
265         * Animometer/tests/resources/main.js:
266         * Animometer/tests/simple/resources/simple-canvas-paths.js:
267         * Animometer/tests/template/resources/template-canvas.js:
268         * Animometer/tests/template/resources/template-css.js:
269         * Animometer/tests/template/resources/template-svg.js:
270         * Animometer/tests/text/resources/layering-text.js:
271         * Animometer/tests/text/resources/text-boxes.js:
272
273         Refactor the template.
274
275         * Animometer/tests/template/resources/template-canvas.js:
276         * Animometer/tests/template/resources/template-css.js:
277         * Animometer/tests/template/resources/template-svg.js:
278         * Animometer/tests/template/template-canvas.html:
279         * Animometer/tests/template/template-css.html:
280         * Animometer/tests/template/template-svg.html:
281
282         Refactor the SVG suite.
283
284         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Move scripts to the end.
285         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Ditto.
286
287         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Remove extraneous includes
288         to stage.js.
289         * Animometer/tests/text/text-boxes.html: Ditto.
290
291         BouncingCanvasParticlesBenchmark is not necessary. Use Benchmark directly when subclassing.
292         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js: Remove
293         BouncingCanvasParticlesBenchmark.
294         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Use Benchmark.
295         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Ditto.
296
297         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js: Require the shape
298         in the constructor instead of having subclasses set the private variable.
299
300         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js: Refactor.
301         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
302
303         Refactor the HTML suite.
304
305         Move scripts to the end.
306         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
307         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
308         * Animometer/tests/text/layering-text.html:
309         * Animometer/tests/text/text-boxes.html:
310
311         Refactor to use the new variables.
312         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
313         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
314         * Animometer/tests/text/resources/layering-text.js:
315         * Animometer/tests/text/resources/text-boxes.js:
316
317         Refactor the bouncing canvas tests.
318
319         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Move scripts to the end.
320         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Move scripts to the end.
321
322         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js: Promote a few
323         properties to "public" since they are used by subclasses.
324         (BouncingParticlesStage): Fix the constructor, which was missing "this". Make particles
325         "public" for subclasses.
326         (BouncingParticlesStage.initialize): Fix the max velocity, which was accidentally changed.
327         * Animometer/tests/misc/resources/compositing-transforms.js: Refactor.
328
329         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
330         BouncingCanvasParticlesAnimator is no longer needed.
331         (BouncingCanvasParticle): Change constructor to take a shape as a parameter instead of
332         having subclasses set the variable.
333
334         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Refactor.
335         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Refactor.
336
337         Move example/ files into misc/.
338
339         * Animometer/tests/misc/canvas-electrons.html: Renamed from PerformanceTests/Animometer/tests/examples/canvas-electrons.html.
340         * Animometer/tests/misc/canvas-stars.html: Renamed from PerformanceTests/Animometer/tests/examples/canvas-stars.html.
341         * Animometer/tests/misc/resources/canvas-electrons.js: Renamed from PerformanceTests/Animometer/tests/examples/resources/canvas-electrons.js.
342         * Animometer/tests/misc/resources/canvas-stars.js: Renamed from PerformanceTests/Animometer/tests/examples/resources/canvas-stars.js.
343
344         * Animometer/resources/debug-runner/tests.js: Update test URLs.
345
346         Refactor miscellaneous suite.
347
348         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
349         Remove BouncingParticlesAnimator and BouncingParticleBenchmark, which are
350         not needed.
351         (tune): Remove console assert.
352         * Animometer/tests/resources/main.js: Add Rotater back in from stage.js.
353
354         * Animometer/tests/examples/resources/canvas-electrons.js: Remove CanvasElectronsAnimator.
355         * Animometer/tests/examples/resources/canvas-stars.js: Remove CanvasStarsAnimator.
356         * Animometer/tests/misc/resources/compositing-transforms.js:
357         * Animometer/tests/examples/canvas-electrons.html: Move scripts to the end.
358         * Animometer/tests/examples/canvas-stars.html: Ditto.
359         * Animometer/tests/misc/compositing-transforms.html: Ditto.
360
361         Refactor the simple suite.
362
363         * Animometer/tests/master/resources/canvas-stage.js:
364         (tune): Remove coordinateMaximum since it is not needed in any
365         of the master tests.
366         * Animometer/tests/simple/resources/simple-canvas.js:
367         SimpleCanvasAnimator and SimpleCanvasBenchmark are no longer
368         needed.
369         (tune): Manage the objects differently, but instead of duplicating
370         all of SimpleCanvasStage here, just replace tune(). Include
371         coordinateMaximum, and remove items from the end of the list
372         instead of the beginning.
373         (StageBenchmark.call.createAnimator): Deleted.
374         (StageBenchmark.call): Deleted.
375         * Animometer/tests/simple/resources/simple-canvas-paths.js:
376         * Animometer/tests/simple/simple-canvas-paths.html: Move
377         scripts to the end.
378
379         Get rid of stage.js, StageAnimator, and StageBenchmark. Don't have the progress bar update during the test.
380
381         * Animometer/resources/debug-runner/animometer.js:
382         (initialize): Move the setting of testsCount to the debug runner.
383         (didRunTest): Nicer name.
384         * Animometer/resources/debug-runner/benchmark-runner.js:
385         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Don't pass in the progress bar to benchmarks.
386         * Animometer/resources/extensions.js:
387         (ProgressBar): Refactor. Make variables "private". Resetting the progress when instantiating.
388         (ProgressBar.prototype.incrementRange): This is called every time a benchmark completes.
389         * Animometer/resources/runner/animometer.js:
390         (window.benchmarkRunnerClient.initialize): Remove unneeded setting of testsCount.
391         * Animometer/resources/strings.js: These are no longer needed.
392         * Animometer/tests/master/canvas-stage.html: Remove script inclusion. Other tests will follow.
393         * Animometer/tests/master/resources/canvas-tests.js: Use Benchmark instead of StageBenchmark.
394         * Animometer/tests/resources/main.js: Messages are no longer needed
395         (Animator.prototype._shouldRequestAnotherFrame): Rename from animate(), since this method returns a boolean
396         indicating whether another frame should be requested. Collapse the logic from StageAnimator into animateLoop.
397         (BenchmarkState.prototype.currentStage): Deleted.
398         (BenchmarkState.prototype.currentMessage): Deleted.
399         (BenchmarkState.prototype.currentProgress): Deleted.
400         (Animator.prototype.animate): Deleted.
401         (Animator.prototype.animateLoop): The stage is animated only when we have another frame to draw.
402         (Benchmark.prototype.record): No need to update the progress bar.
403         * Animometer/tests/resources/stage.js: Removed. Rotater will appear in a later patch, in main.js.
404
405         * Animometer/resources/debug-runner/benchmark-runner.js:
406         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Each test is run as a benchmark.
407         Remove the call to runBenchmark by merging the options here, and calling benchmark.run()
408         directly.
409
410         Make the class relationships more easily understandable. The benchmark owns the stage,
411         animator, and options. Make the stage and animator no longer have their own references to
412         the options. Make Stage a first-class citizen by promoting it to main.js. Later patches
413         will try to get rid of stage.js altogether.
414         * Animometer/tests/resources/main.js:
415         (Stage): Moved from stage.js.
416         (Animator): Don't pass in benchmark and options in its constructor. It will get initialized
417         by benchmark-related parameters in initialize().
418         (Animator.prototype.initialize): Add a back-reference to benchmark and cache an option.
419         (Animator.prototype.get benchmark):
420         (Animator.prototype.animate): Refactor to use the cached option, to remove its dependency on
421         the options dictionary.
422         (Benchmark): Require all benchmarks to have a stage and animator. The instance will initialize
423         them.
424         (Benchmark.prototype.get options):
425         (Benchmark.prototype.get stage): BenchmarkStates.stages will need to be renamed to avoid confusion.
426         (Benchmark.prototype.get animator):
427         (Benchmark.prototype.start):
428         (Benchmark.prototype.update): Ask the stage directly to tune or clear instead of adding another
429         level of indirection.
430         (window.runBenchmark): Deleted. Remove the need for a benchmarkClient. Also remove the standalone
431         path, since tests can be individually selected, and remove the need for runBenchmark since that is
432         handled in BenchmarkRunner._runBenchmarkAndRecordResults.
433         * Animometer/tests/resources/stage.js:
434         (Stage): Deleted. Moved to main.js.
435         (StageBenchmark): What's left is updating the progress bar; to be removed.
436         (StageAnimator): What's left can be folded in Animator.
437
438         Refactor master suite.
439         * Animometer/tests/master/resources/canvas-stage.js: This now only has SimpleCanvasStage.
440         (animate): Push the clearRect() into each stage.
441         (complexity):
442         (StageBenchmark.call.createAnimator): Deleted.
443         (StageBenchmark.call): Deleted.
444         * Animometer/tests/master/resources/canvas-tests.js: SimpleCanvasPathStrokeStage is no longer needed.
445         (CanvasLineSegment.prototype.draw):
446         (CanvasArc):
447         (CanvasLinePoint): Remove the draw call because depending on its index it either needs to be moveTo
448         or lineTo, and it is otherwise a very small draw operation that doesn't need the overhead of the
449         function call. Do all of the drawing through the stage.
450
451         Refactor the subclass pattern. Introduce Utilities.createSubclass().
452
453         * Animometer/resources/debug-runner/benchmark-runner.js:
454         * Animometer/resources/extensions.js:
455         (window.Utilities.createSubclass): Takes the super class, a function representing
456         the class's constructor, and additional methods to attach to the new class's
457         prototype object.
458         * Animometer/tests/text/text-boxes.html: Remove unneeded reference to utilities.js.
459
460         Refactor tests.
461         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
462         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
463         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
464         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
465         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
466         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
467         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
468         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
469         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
470         * Animometer/tests/examples/resources/canvas-electrons.js:
471         * Animometer/tests/examples/resources/canvas-stars.js:
472         * Animometer/tests/master/resources/canvas-stage.js:
473         * Animometer/tests/master/resources/canvas-tests.js:
474         * Animometer/tests/misc/resources/compositing-transforms.js:
475         * Animometer/tests/resources/stage.js:
476         * Animometer/tests/simple/resources/simple-canvas-paths.js:
477         * Animometer/tests/simple/resources/simple-canvas.js:
478         * Animometer/tests/template/resources/template-canvas.js:
479         * Animometer/tests/template/resources/template-css.js:
480         * Animometer/tests/template/resources/template-svg.js:
481         * Animometer/tests/text/resources/layering-text.js: Reorder some of the methods
482         and properties since they rely on each other.
483         * Animometer/tests/text/resources/text-boxes.js:
484
485         * Animometer/resources/debug-runner/animometer.js: Arrange calls
486         in the order they are evoked.
487         * Animometer/resources/debug-runner/benchmark-runner.js:
488         (BenchmarkRunnerState.prototype.next): Get rid of return value since
489         no caller to next() uses it.
490         (BenchmarkRunnerState.prototype.prepareCurrentTest): Refactor the
491         promise to resolve simply when onload() is called instead of
492         looking for #stage.
493         (BenchmarkRunner.prototype._runTestAndRecordResults): Suite.run
494         simply calls runBenchmark(). Call it directly rather than through
495         the Suite.
496         (BenchmarkRunner.prototype.step): Remove unused parameter in
497         resolve callback.
498         (BenchmarkRunner.prototype.runMultipleIterations): Use this instead
499         of self since it is outside of the closure which needed the self
500         variable.
501         (resolveIfReady): Deleted.
502         (BenchmarkRunner.prototype.waitForElement): Deleted.
503         * Animometer/resources/runner/tests.js: prepare() and run() are
504         no longer needed.
505         (Suite.prototype.prepare): Deleted.
506         (Suite.prototype.run): Deleted.
507         * Animometer/tests/master/canvas-stage.html: Move all scripts to
508         the end of the page.
509
510 2015-12-23  Simon Fraser  <simon.fraser@apple.com>
511
512         Add an Animometer developer test which animates text-rich boxes
513         https://bugs.webkit.org/show_bug.cgi?id=152544
514
515         Reviewed by Zalan Bujtas.
516         
517         Add a test that draws lots of international text. This is a particle test,
518         moving the boxes around with absolution positioning.
519
520         * Animometer/resources/debug-runner/tests.js:
521         * Animometer/tests/text/resources/text-boxes.js: Added.
522         (BouncingTextBox):
523         (BouncingTextBox.prototype._move):
524         (BouncingTextBox.prototype.animate):
525         (BouncingTextBoxStage):
526         (BouncingTextBoxStage.prototype.createParticle):
527         (BouncingTextBoxStage.prototype.particleWillBeRemoved):
528         (BouncingTextBoxsBenchmark):
529         (BouncingTextBoxsBenchmark.prototype.createStage):
530         (window.benchmarkClient.create):
531         * Animometer/tests/text/text-boxes.html: Added.
532
533 2015-12-23  Jon Lee  <jonlee@apple.com>
534
535         Split benchmark into two different pages
536         https://bugs.webkit.org/show_bug.cgi?id=152458
537
538         Reviewed by Simon Fraser.
539
540         Add tests to 'animometer' suite.
541
542         * Animometer/resources/runner/tests.js:
543         * Animometer/tests/master/canvas-stage.html: Added.
544         * Animometer/tests/master/resources/canvas-stage.js: Added.
545         * Animometer/tests/master/resources/canvas-tests.js: Added.
546         * Animometer/tests/master/resources/stage.css: Added.
547
548 2015-12-23  Jon Lee  <jonlee@apple.com>
549
550         Split benchmark into two different pages
551         https://bugs.webkit.org/show_bug.cgi?id=152458
552
553         Reviewed by Simon Fraser.
554
555         Address comments.
556
557         * Animometer/resources/debug-runner/benchmark-runner.js:
558         (BenchmarkRunner.prototype._runTestAndRecordResults): When the testing is complete the frame owning the
559         sampler goes away, and a later call to get the JSON data is no longer available. Process the data
560         right here, instead, and just reference it when displaying the results in ResultsDashboard.prototype._processData.
561         * Animometer/resources/extensions.js:
562         (Array.prototype.fill.Array.prototype.fill): Add a null check. Remove braces around single-line clause.
563         (Array.prototype.find.Array.prototype.find): Update the null check.
564         (ResultsDashboard.prototype._processData): Use the already-processed data.
565         * Animometer/resources/runner/animometer.css:
566         (.frame-container > iframe): Remove calc().
567
568         Move Array functions to extensions.js since that is included by the harness.
569         Add ES6 Array polyfills.
570
571         * Animometer/resources/algorithm.js:
572         (Array.prototype.swap): Moved to extensions.js.
573         * Animometer/resources/extensions.js:
574         (Array.prototype.swap):
575         (Array.prototype.fill): Added.
576         (Array.prototype.find): Added.
577
578         Adjust styles for iPad.
579
580         * Animometer/resources/runner/animometer.css:
581         (@media screen and (min-device-width: 768px)): Apply to iPad as well.
582         (@media screen and (max-device-width: 1024px)): Update width for iPads.
583
584         Adjustment styles for iOS.
585
586         * Animometer/developer.html: Different divs contain the iframe, so use a class instead and
587         update the style rules.
588         * Animometer/index.html:
589         * Animometer/resources/debug-runner/animometer.css: Remove extraneous rules.
590         (@media screen and (min-device-width: 1800px)): Move this up.
591         * Animometer/resources/runner/animometer.css: Add rules to accomodate iOS.
592
593         Get rid of prefixed flex properties for now.
594
595         * Animometer/resources/debug-runner/animometer.css:
596         * Animometer/resources/runner/animometer.css:
597
598         Update the structure of the harness. Remove the JSON-per-test but keep
599         the JSON of the whole test run. Use the full page in order to display
600         the graph.
601
602         * Animometer/developer.html: Update several of the JS file includes to UTF-8. Remove header and footer. Test results screen includes score,
603         average, and worst 5% statistics.
604         * Animometer/index.html: Make structure similar to developer.html.
605         * Animometer/resources/debug-runner/animometer.css: Remove most of the
606         button rules since they are superfluous. Move the progress bar to the
607         top, fixed. Update the results page rules.
608         * Animometer/resources/debug-runner/animometer.js: Remove most of the
609         additions to sectionsManager since they are no longer needed.
610         (setSectionHeader): Updates header of the section.
611         (window.suitesManager._updateStartButtonState): Update selector.
612         (showResults): Add keypress event for selecting different data for
613         copy/paste. Update how the results are populated. Include full test
614         JSON in a textarea, rather than requiring a button press.
615         (showTestGraph):
616         * Animometer/resources/debug-runner/tests.js: Update structure of Headers. Define different kinds of headers. Headers can control their
617         title, and the text used as the cell contents, including class name.
618         * Animometer/resources/extensions.js:
619         (ResultsTable): Update to include a flattened version of the headers,
620         used while populating table contents. Remove unneeded helper functions
621         for creating the table. Rename "show" to "add".
622         * Animometer/resources/runner/animometer.css: Update rules to
623         accommodate the new structure.
624         * Animometer/resources/runner/animometer.js:
625         (window.sectionsManager.setSectionScore): Helper function to set the
626         score and mean for a section.
627         (window.sectionsManager.populateTable): Helper function to set the table.
628         (window.benchmarkController.showResults): Refactor.
629         (window.benchmarkController.selectResults): Update selectors.
630         * Animometer/resources/runner/tests.js: Set Headers. Debug harness
631         extends it.
632
633         Update debug runner to have similar names to the basic runner. Include
634         that page's CSS and remove extraneous CSS rules.
635
636         Get rid of the statistics table #record.
637
638         * Animometer/developer.html: Rename #home to #intro. Rename .spacer to hr.
639         * Animometer/resources/debug-runner/animometer.css: Set to flexbox when selected.
640         * Animometer/resources/debug-runner/animometer.js: Remove recordTable.
641         (window.suitesManager._updateStartButtonState): Update selector to #intro.
642         (setupRunningSectionStyle): Deleted.
643
644         * Animometer/resources/runner/animometer.css:
645         (#test-container.selected): Change to flex-box only when visible.
646
647         Remove recordTable.
648         * Animometer/resources/debug-runner/benchmark-runner.js:
649         (BenchmarkRunner.prototype._runTestAndRecordResults):
650         * Animometer/resources/runner/tests.js:
651         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
652         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
653         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
654         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
655         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
656         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
657         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
658         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
659         * Animometer/tests/examples/resources/canvas-electrons.js:
660         * Animometer/tests/examples/resources/canvas-stars.js:
661         * Animometer/tests/misc/resources/compositing-transforms.js:
662         * Animometer/tests/resources/main.js:
663         * Animometer/tests/resources/stage.js:
664         (StageBenchmark): Remove _recordTable.
665         * Animometer/tests/simple/resources/simple-canvas-paths.js:
666         * Animometer/tests/simple/resources/simple-canvas.js:
667         * Animometer/tests/template/resources/template-canvas.js:
668         * Animometer/tests/template/resources/template-css.js:
669         * Animometer/tests/template/resources/template-svg.js:
670         * Animometer/tests/text/resources/layering-text.js:
671
672         * Animometer/resources/debug-runner/animometer.js:
673         (willStartFirstIteration): Fix selector, since results-table is used
674         in multiple places, so it cannot be an id.
675
676         Make it possible to select the scores, or the whole table data,
677         by cycling through different selections through key press of 's'.
678
679         * Animometer/resources/runner/animometer.js:
680         (window.benchmarkController.showResults): Attach a keypress handler
681         if it hasn't been added already.
682         (window.benchmarkController.selectResults):
683         * Animometer/resources/runner/tests.js: Cycle through different
684         ranges.
685
686         Fix a few fly-by errors.
687
688         * Animometer/resources/debug-runner/benchmark-runner.js:
689         (BenchmarkRunnerState.prototype.prepareCurrentTest): Update the frame relative path
690         since the files are now in the top directory instead of inside runner/.
691         (BenchmarkRunner.prototype._runTestAndRecordResults): Incorrect reference to function.
692         (BenchmarkRunner.prototype.step): Member variable is never used.
693
694         A little stylistic cleanup.
695
696         * Animometer/resources/debug-runner/benchmark-runner.js:
697         * Animometer/resources/extensions.js:
698         (window.DocumentExtension.createElement):
699         * Animometer/tests/resources/main.js:
700         (Benchmark.prototype.record):
701         * Animometer/tests/resources/stage.js:
702         (StageBenchmark.prototype.showResults): Reverse progress and message.
703         The message appears less frequently than the progress.
704         * Animometer/tests/simple/resources/simple-canvas.js:
705         (SimpleCanvasBenchmark): Remove unused options.
706
707         Add newer version of harness in a new page. Consolidate differences between the two
708         pages.
709
710         * Animometer/developer.html: Include runner/animometer.js. Rename the JS function
711         to run the benchmark to startBenchmark() instead of startTest(). Rename #running to
712         #test-container.
713         * Animometer/index.html: Added. Similarly calls startBenchmark() and has #test-container.
714         * Animometer/resources/debug-runner/animometer.css: Make the canvas 2:1 (1200px x 800px)
715         instead of 4:3.
716
717         Split out benchmarkRunnerClient and benchmarkController.
718
719         * Animometer/resources/debug-runner/animometer.js: Move needed functions out of
720         benchmarkRunnerClient, and leave the rest here to extend that object. Get rid of _resultsTable
721         and move populating the results table into benchmarkController. Rename _resultsDashboard
722         to results and make it accessible for other objects to use.
723         (willAddTestFrame): This is unnecessary. Remove.
724
725         (window.sectionsManager.showScore): Grab it from the results object instead of
726         benchmarkRunnerClient.
727         (window.sectionsManager.showSection): Deleted. Moved to runner/animometer.js.
728
729         (window.benchmarkController._runBenchmark): Deleted. Mostly moved into _startBenchmark.
730         (window.benchmarkController.startBenchmark): Refactor to call _startBenchmark.
731         (window.benchmarkController.showResults): Include most of benchmarkRunnerClient.didFinishLastIteration()
732         here.
733
734         * Animometer/resources/debug-runner/benchmark-runner.js:
735         (BenchmarkRunner.prototype._appendFrame): Remove unneeded call to willAddTestFrame.
736         * Animometer/resources/extensions.js:
737         (ResultsDashboard): Change the class to process the sampler data on-demand and hold onto that data
738         for later referencing.
739         (ResultsDashboard.prototype.toJSON): Deleted.
740         (ResultsDashboard.prototype._processData): Rename toJSON to _processData since it's not really
741         outputting JSON. Store the processed data into a member variable that can be referenced later.
742         (ResultsDashboard.prototype.get data): Process the data if it hasn't already.
743         (ResultsDashboard.prototype.get score): Process the data if it hasn't already, then return the
744         aggregate score.
745         (ResultsTable.prototype._showHeader): When outputting the results to a table, don't force the
746         need for an empty children array. This was to allow for a header row in the table that spanned
747         multiple columns. In the simpler harness, this is not needed.
748         (ResultsTable.prototype._showEmptyCells):
749         (ResultsTable.prototype._showTest): This hardcoded the columns. At least for the name and score,
750         which is the bare minimum needed for the simpler harness, key off of the header name provided.
751         * Animometer/resources/runner/animometer.css: Added. Use a similar 2:1 ratio. The score tables are
752         split into the data and the headers, and are also displayed RTL so that a later patch allows a
753         user to copy-paste the data easily.
754         * Animometer/resources/runner/animometer.js: Added. Use a simpler version of benchmarkRunnerClient.
755         The debug harness will extend these classes.
756         (window.benchmarkController._startBenchmark): Used by both harnesses.
757         (window.benchmarkController.startBenchmark): Set hard-coded options.
758         (window.benchmarkController.showResults): Includes most of benchmarkRunnerClient.didFinishLastIteration()
759         here.
760
761         Get rid of utilities.js. Move it all into extensions.js.
762
763         * Animometer/resources/extensions.js:
764         * Animometer/tests/resources/utilities.js: Removed.
765
766         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Remove script link.
767         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Ditto.
768         * Animometer/tests/bouncing-particles/bouncing-css-images.html: Ditto.
769         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html: Ditto.
770         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Ditto.
771         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Ditto.
772         * Animometer/tests/examples/canvas-electrons.html: Ditto.
773         * Animometer/tests/examples/canvas-stars.html: Ditto.
774         * Animometer/tests/misc/compositing-transforms.html: Ditto.
775         * Animometer/tests/simple/simple-canvas-paths.html: Ditto.
776         * Animometer/tests/template/template-canvas.html: Ditto.
777         * Animometer/tests/template/template-css.html: Ditto.
778         * Animometer/tests/template/template-svg.html: Ditto.
779         * Animometer/tests/text/layering-text.html: Ditto.
780
781         Split tests.js into two. Add a new suite to runner/tests.js.
782
783         * Animometer/developer.html: Update the script order. Scripts from
784         debug-runner/ will always build on those from runner/, and have the
785         same name.
786         * Animometer/resources/debug-runner/tests.js: Move "complex examples"
787         suite into "miscellaneous tests".
788         (Suite): Deleted.
789         (Suite.prototype.prepare): Deleted.
790         (Suite.prototype.run): Deleted.
791         (suiteFromName): Deleted.
792         * Animometer/resources/runner/tests.js: Added. Take definitions and
793         functions needed by the test harness. Leave the test suites behind.
794         (Suite): Moved from debug script.
795         (Suite.prototype.prepare): Ditto.
796         (Suite.prototype.run): Ditto.
797         (suiteFromName): Ditto.
798         (testFromName): Ditto.
799
800         Move benchmark resources out into resources/debug-runner, and update URLs.
801
802         * Animometer/developer.html: Renamed from PerformanceTests/Animometer/runner/animometer.html.
803         * Animometer/resources/debug-runner/animometer.css: Renamed from PerformanceTests/Animometer/runner/resources/animometer.css.
804         * Animometer/resources/debug-runner/animometer.js: Renamed from PerformanceTests/Animometer/runner/resources/animometer.js.
805         * Animometer/resources/debug-runner/benchmark-runner.js: Renamed from PerformanceTests/Animometer/runner/resources/benchmark-runner.js.
806         * Animometer/resources/debug-runner/d3.min.js: Renamed from PerformanceTests/Animometer/runner/resources/d3.min.js.
807         * Animometer/resources/debug-runner/graph.js: Renamed from PerformanceTests/Animometer/runner/resources/graph.js.
808         * Animometer/resources/debug-runner/tests.js: Renamed from PerformanceTests/Animometer/runner/resources/tests.js.
809
810 2015-12-11  Jon Lee  <jonlee@apple.com>
811
812         Improve Animometer on iOS
813         https://bugs.webkit.org/show_bug.cgi?id=152180
814
815         Reviewed by Simon Fraser.
816
817         Improve experience on phones. Make the canvas take
818         up the whole screen.
819
820         * Animometer/runner/animometer.html: Add meta viewport.
821         Remove the container div.
822         * Animometer/runner/resources/animometer.css: Have buttons lay
823         out vertically. Update detail arrow glyph. Make the suites and
824         options section lay out vertically. Remove the top spacers since
825         we want the canvas to take over the whole screen. Minimal display
826         is recommended for use.
827
828 2015-12-07  Jon Lee  <jonlee@apple.com>
829
830         Update suites for benchmark
831         https://bugs.webkit.org/show_bug.cgi?id=151957
832
833         Reviewed by Simon Fraser.
834
835         * Animometer/runner/animometer.html: Use spacers instead of relying on
836         justify-content center to center the content. That allows the opening screen
837         to grow downward when expanding the list of choices, otherwise it expands
838         from the center, and off the top edge of the screen.
839         * Animometer/runner/resources/animometer.css:
840         (.tree): Don't overflow scroll.
841         (.tree > li > label.tree-label:before): Use better glyphs.
842         (.tree > li > :checked ~ label.tree-label:before):
843         (main): Using flex-start for justify-content so that if the section grows too
844         big it gets pinned to the top edge of the document instead of growing past it.
845         (.spacer): Make the spacers have a minimum 20px and grow evenly.
846         (section#home): Add a min-height so that the border will expand if the suite
847         tests shown make the section grow past the height.
848         * Animometer/runner/resources/animometer.js: Update the selectors.
849         (window.suitesManager._treeElement):
850         (window.suitesManager._suitesElements):
851         (window.suitesManager._editsElements):
852
853 2015-12-07  Jon Lee  <jonlee@apple.com>
854
855         Update options for benchmark
856         https://bugs.webkit.org/show_bug.cgi?id=151956
857
858         Reviewed by Simon Fraser.
859
860         Move "Fix test complexity" and "Adaptive" checkboxes into a radio group.
861
862         Move "Show running results" into a radio group, and add options to remove the HUD.
863
864         * Animometer/runner/animometer.html: Get rid of the preamble. Wrap the options
865         in a form for easier referencing in JS.
866         * Animometer/runner/resources/animometer.css: Show the surrounding border if the
867         body's display-minimal class name is set.
868         * Animometer/runner/resources/animometer.js:
869
870         Update the way optionsManager gets and sets default values. Include support for
871         radio groups.
872         (window.optionsManager.valueForOption):
873         (window.optionsManager.updateUIFromLocalStorage):
874         (window.optionsManager.updateLocalStorageFromUI):
875
876         (window.benchmarkRunnerClient.willStartFirstIteration):
877         (window.sectionsManager.setupRunningSectionStyle):
878         (window.suitesManager._treeElement): Fly-by whitespace fix.
879         (window.suitesManager._suitesElements): Ditto.
880         (window.suitesManager.updateEditsElementsState): Update options check.
881         (window.suitesManager.updateDisplay): Add a new update function for the HUD.
882         Attach a class to the body depending on the user's choice.
883         (window.benchmarkController.initialize): Add an event listener when the form
884         radio buttons update.
885         (window.benchmarkController.onFormChanged):
886         (window.optionsManager._optionsElements): Deleted.
887         (window.optionsManager._adaptiveTestElement): Deleted.
888         (window.benchmarkController.onChangeAdaptiveTestCheckbox): Deleted.
889         * Animometer/tests/resources/main.js:
890         (Benchmark.prototype.update): Update options checks.
891         * Animometer/tests/resources/stage.js: Update option check.
892         (StageBenchmark.prototype.showResults):
893
894 2015-12-01  Simon Fraser  <simon.fraser@apple.com>
895
896         Add a basic compositing Animometer test
897         https://bugs.webkit.org/show_bug.cgi?id=151724
898
899         Reviewed by Dean Jackson.
900         
901         Add a "bouncing particles" test that moves composited layers around, optionally with a filter.
902         
903         This is added under a new "Miscellaneous" category.
904         
905         Remove the test templates category from the UI.
906
907         * Animometer/runner/resources/tests.js:
908         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
909         (BouncingCssShape.prototype.animate):
910         * Animometer/tests/misc/compositing-transforms.html: Added.
911         * Animometer/tests/misc/resources/compositing-transforms.js: Added.
912         (BouncingCompositedImage):
913         (BouncingCompositedImage.prototype._move):
914         (BouncingCompositedImage.prototype.animate):
915         (CompositingTransformsStage):
916         (CompositingTransformsStage.prototype.createParticle):
917         (CompositingTransformsStage.prototype.particleWillBeRemoved):
918         (CompositedTransformsBenchmark):
919         (CompositedTransformsBenchmark.prototype.createStage):
920         (window.benchmarkClient.create):
921
922 2015-11-30  Said Abou-Hallawa  <sabouhallawa@apple.com>
923
924         Fix the graphics benchmark complexity bounds adjustment
925         https://bugs.webkit.org/show_bug.cgi?id=151670
926
927         Reviewed by Simon Fraser.
928
929         Make sure the graphics benchmark complexity bounds adjustment is applied
930         to the absolute lower bound.
931
932         * Animometer/tests/resources/math.js:
933         (PIDController.prototype._saturate):
934
935 2015-11-30  Said Abou-Hallawa  <sabouhallawa@apple.com>
936
937         Add an option to select the results form the graphics benchmark
938         https://bugs.webkit.org/show_bug.cgi?id=151666
939
940         Reviewed by Ryosuke Niwa.
941
942         We need an easy way to select the graphics benchmark results table such
943         that when it is copied to the clipboard, rich text format is set to the
944         clipboard.
945
946         * Animometer/runner/animometer.html: Add a new button to select the results table or JSON.
947         
948         * Animometer/runner/resources/animometer.js:
949         (window.sectionsManager._sectionDataElement): Selects the container <data> element.
950         (window.sectionsManager._sectionDataDivElement): Replace a literal string with a string table entry.
951         (window.sectionsManager.showTestName): Replace a literal string with a string table entry.
952         (window.sectionsManager.selectData): Selects the container <data> element in a selection.
953         (window.sectionsManager.selectDataContents): Select the contents of container <data> element in a selection.
954         (window.benchmarkController.selectResults): Selects the results table.
955         (window.benchmarkController.showJSON): Function rename.
956         (window.benchmarkController.selectJSON): Selects the contents of the results JSON.
957         (window.benchmarkController.showJson): Deleted.
958
959 2015-11-20  Simon Fraser  <simon.fraser@apple.com>
960
961         Animometer: graphs should not do interpolation
962         https://bugs.webkit.org/show_bug.cgi?id=151526
963
964         Reviewed by Simon Fraser.
965         
966         Having the graphs do interpolation is misleading, because you can't see the actual data.
967         
968         Also remove "shape-rendering: crispEdges;" so the lines get antialiased.
969
970         * Animometer/runner/resources/animometer.css:
971         (section#test-graph > data > svg): Deleted.
972         * Animometer/runner/resources/graph.js:
973         (graph): Deleted.
974
975 2015-11-19  Said Abou-Hallawa  <sabouhallawa@apple.com>
976
977         Calculate the graphics benchmark test gain adaptively
978         https://bugs.webkit.org/show_bug.cgi?id=151208
979
980         Reviewed by Darin Adler.
981
982         We need to calculate the gain of the graphics benchmark tests adaptively
983         and get rid of the gain and limits parameters we have to choose manually
984         for every test. We are going to use the classic Ziegler–Nichols method for
985         calculating the gain and integral and derivative times. We are going to
986         try moving on a cubic curve during the manual stage from y0 to reach ysp.
987         We also going to use a saturation actuator to ensure the system does not
988         fluctuate.
989
990         * Animometer/resources/extensions.js:
991         (ResultsTable.prototype._isNoisyMeasurement): Fix a parameter name.
992         (ResultsTable.prototype._isNoisyTest): Since score is a member of testResults, we need to limit our search to frame rate and complexity.
993         (ResultsTable.prototype._showTest): Pass the correct parameter to _isNoisyMeasurement(). 
994         
995         * Animometer/resources/strings.js: Fix the indentation and name and value of a string.
996
997         * Animometer/runner/resources/tests.js: Remove all the manual gains and limits parameters which had to be passed to every test.
998         
999         * Animometer/tests/resources/main.js:
1000         (BenchmarkState.prototype.currentStage): Fix an enum name.
1001         (Benchmark): Get rid of manual gain and limits.
1002         (Benchmark.prototype.update): Simplify the calculation by having all the times in ms.
1003         
1004         * Animometer/tests/resources/math.js:
1005         (PIDController): Get rid of the manual gain and limits and the magic numbers for Ti and Td.
1006         (PIDController.prototype._yPosition): Tells whether the test current output is moving towards the set-point or away from it.
1007         (PIDController.prototype._distanceUltimate): Calculates the ultimate distance from y0 after time t using a cubic formula.
1008         (PIDController.prototype._distance): Calculates the distance of y relative to y0.
1009         (PIDController.prototype._gainIncrement): Decides how much the proportional gain should be increased during the manual gain stage.
1010         (PIDController.prototype._updateStage): Updates the stage of the controller based on its current stage and the system output.
1011         (PIDController.prototype._tuneP): Tunes the system before calculating the PID controller gains.
1012         (PIDController.prototype._tunePID): PID tuning function.
1013         (PIDController.prototype._tune):
1014         (PIDController.prototype._saturate):
1015         (PIDController.prototype.tune): Manages calculating the controller parameters. It then returns a PID tuning value.
1016         (PIDController.prototype._sat): Deleted. We may need to return it back but the limits have to be calculated adaptively not manually. 
1017
1018 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
1019
1020         Reorganize the graphics benchmark string table
1021         https://bugs.webkit.org/show_bug.cgi?id=151334
1022
1023         Reviewed by Simon Fraser.
1024         
1025         Make the graphics benchmark string table be an object of sub-objects. Each
1026         sub-object represents an associative array, the key is the string name and
1027         the value is the string data.
1028
1029         * Animometer/resources/extensions.js:
1030         (ResultsDashboard.prototype.toJSON):
1031         (ResultsTable.prototype._showGraph):
1032         (ResultsTable.prototype._showJSON):
1033         (ResultsTable.prototype._isNoisyMeasurement):
1034         (ResultsTable.prototype._isNoisyTest):
1035         (ResultsTable.prototype._showTest):
1036         (ResultsTable.prototype._showSuite):
1037         (ResultsTable.prototype._showIteration):
1038         * Animometer/resources/sampler.js:
1039         (Sampler.prototype.toJSON):
1040         * Animometer/resources/strings.js:
1041         * Animometer/runner/resources/animometer.js:
1042         (window.benchmarkRunnerClient.didFinishLastIteration):
1043         (window.suitesManager.updateLocalStorageFromJSON):
1044         (window.benchmarkController.showResults):
1045         (window.benchmarkController.showJson):
1046         (window.benchmarkController.showTestGraph):
1047         (window.benchmarkController.showTestJSON):
1048         * Animometer/runner/resources/tests.js:
1049         * Animometer/tests/resources/main.js:
1050
1051 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
1052
1053         Disable flattening the stage iframe of the graphics benchmark when running on iOS
1054         https://bugs.webkit.org/show_bug.cgi?id=151361
1055
1056         Reviewed by Simon Fraser.
1057         
1058         Use fixed size for stage iframe of the graphics benchmark to disable
1059         flattening the iframe while animating the particles. Also ensure the
1060         bouncing particles do not go outside the iframe's boundaries.
1061
1062         * Animometer/runner/resources/animometer.css:
1063         (section#running > #running-test > iframe):
1064         (@media screen and (min-device-width: 1800px)):
1065         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1066         (BouncingParticle.prototype.animate):
1067
1068 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
1069
1070         Use the media queries to dynamically set the stage for the graphics benchmark
1071         https://bugs.webkit.org/show_bug.cgi?id=151327
1072
1073         Reviewed by Simon Fraser.
1074
1075         Clean setting the benchmark css rules by using the media queries. Accessing
1076         document.stylesheets.cssRules seems to be unreliable. Fix the test harness
1077         load event listener invocation. And also remove the options for normalizing
1078         the stage resolution for retina display.
1079
1080         * Animometer/resources/extensions.js:
1081         (window.DocumentExtension.insertCssRuleAfter): Deleted.
1082         * Animometer/runner/animometer.html:
1083         * Animometer/runner/resources/animometer.css:
1084         (@media screen and (min-device-width: 1800px)):
1085         * Animometer/runner/resources/animometer.js:
1086         (window.sectionsManager.setupRunningSectionStyle):
1087         (window.benchmarkController.initialize):
1088         (window.sectionsManager.setupSectionStyle): Deleted.
1089         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1090         (BouncingParticlesStage):
1091         * Animometer/tests/text/layering-text.html:
1092         * Animometer/tests/text/resources/layering-text.js:
1093         (LayeringTextStage):
1094         (LayeringTextStage.prototype._setFontSize): Deleted.
1095
1096 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
1097
1098         Remove the option for animating using setInterval from the graphics benchmark
1099         https://bugs.webkit.org/show_bug.cgi?id=151283
1100
1101         Reviewed by Darin Adler.
1102         
1103         Get rid of the option to run animation using setInterval().
1104
1105         * Animometer/tests/resources/main.js:
1106         (Animator.prototype.animate):
1107         (Benchmark):
1108         (Benchmark.prototype.start):
1109         (Animator.prototype.start): Deleted.
1110
1111 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
1112
1113         Highlight the alarming test results in the graphics benchmark results page
1114         https://bugs.webkit.org/show_bug.cgi?id=151286
1115
1116         Reviewed by Simon Fraser.
1117         
1118         When showing the results of a test in the graphics benchmark the following
1119         criteria is going to be applied:
1120         
1121         1. If the standard deviation of the test complexity or the frame rate is
1122            equal to or more than 10%, the standard deviation and the test name
1123            will be displayed in red.
1124         2. If the average frame rate is not in the range = [(desired_frame_rate - 2)
1125            .. (desired_frame_rate + 2)], the average frame rate and the test name will
1126            be displayed in red.
1127
1128         * Animometer/resources/extensions.js:
1129         (ResultsTable.prototype._showHeaderRow):
1130         (ResultsTable.prototype._showHeader):
1131         (ResultsTable.prototype._showEmptyCell):
1132         (ResultsTable.prototype._showText):
1133         (ResultsTable.prototype._showFixedNumber):
1134         (ResultsTable.prototype.):
1135         (ResultsTable.prototype._showGraph):
1136         (ResultsTable.prototype._showJSON):
1137         (ResultsTable.prototype._isAlarmingMeasurement):
1138         (ResultsTable.prototype._isAlarmingTestResults):
1139         (ResultsTable.prototype._showEmptyCells):
1140         (ResultsTable.prototype._showEmptyRow):
1141         (ResultsTable.prototype._showTest):
1142         (ResultsTable.prototype._showSuite):
1143         (ResultsTable.prototype._showIteration):
1144         (ResultsTable.prototype.showRecord):
1145         (ResultsTable.prototype.showIterations):
1146         (ResultsTable.prototype._showEmpty): Deleted.
1147         * Animometer/runner/resources/animometer.js:
1148         (window.benchmarkRunnerClient.didFinishLastIteration):
1149         * Animometer/tests/resources/stage.js:
1150         (StageBenchmark.prototype.showResults):
1151
1152 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
1153
1154         Clean referencing the options object in the graphics benchmark
1155         https://bugs.webkit.org/show_bug.cgi?id=151284
1156
1157         Reviewed by Simon Fraser.
1158
1159         Get rid of the Benchmark.options member and rely only on the private member
1160         Benchmark._options. The animator need to have its own options member instead
1161         of accessing it from its reference to Benchmark object.
1162
1163         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
1164         (BouncingCanvasParticlesAnimator):
1165         (BouncingCanvasParticlesBenchmark.prototype.createAnimator):
1166         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1167         (BouncingParticle.prototype.animate):
1168         (BouncingParticlesAnimator):
1169         (BouncingParticlesBenchmark.prototype.createAnimator):
1170         * Animometer/tests/examples/resources/canvas-electrons.js:
1171         (CanvasElectronsStage.prototype.animate):
1172         (CanvasElectronsAnimator):
1173         (CanvasElectronsBenchmark.prototype.createAnimator):
1174         (window.benchmarkClient.create):
1175         * Animometer/tests/examples/resources/canvas-stars.js:
1176         (CanvasStarsStage.prototype.animate):
1177         (CanvasStarsAnimator):
1178         (CanvasStarsBenchmark.prototype.createAnimator):
1179         (window.benchmarkClient.create):
1180         * Animometer/tests/resources/main.js:
1181         (BenchmarkState.prototype.currentProgress):
1182         (Animator):
1183         (Animator.prototype.animate):
1184         (Benchmark):
1185         (Benchmark.prototype.update):
1186         * Animometer/tests/resources/stage.js:
1187         (Stage.prototype.clear):
1188         (StageAnimator):
1189         (StageBenchmark.prototype.createAnimator):
1190         (StageBenchmark.prototype.tune):
1191         (StageBenchmark.prototype.showResults):
1192         * Animometer/tests/simple/resources/simple-canvas.js:
1193         (SimpleCanvasStage.prototype.animate):
1194         (SimpleCanvasAnimator):
1195         (SimpleCanvasAnimator.prototype.animate):
1196         (SimpleCanvasBenchmark.prototype.createAnimator):
1197         * Animometer/tests/template/resources/template-canvas.js:
1198         (TemplateCanvasStage.prototype.animate):
1199         (TemplateCanvasBenchmark.prototype.createAnimator):
1200         (window.benchmarkClient.create):
1201
1202 2015-11-13  Said Abou-Hallawa  <sabouhallawa@apple.com>
1203
1204         Eliminate a request for layout every time an item is added to the stage of the graphics benchmark
1205         https://bugs.webkit.org/show_bug.cgi?id=151289
1206
1207         Reviewed by Simon Fraser.
1208         
1209         Cache the stage size when it is created instead of requesting every time
1210         an object is added via clientWidth and clientHeight.
1211
1212         * Animometer/resources/extensions.js:
1213         (Insets.elementPadding):
1214         * Animometer/tests/resources/stage.js:
1215         (Stage):
1216         (Stage.prototype.get size):
1217
1218 2015-11-06  Said Abou-Hallawa  <sabouhallawa@apple.com>
1219
1220         Initialize the graphics benchmark's Kalman filter with estimated 60 FPS
1221         https://bugs.webkit.org/show_bug.cgi?id=150965
1222
1223         Reviewed by Darin Adler.
1224
1225         This should give the benchmark more accurate reading at warmup time. And
1226         hence we can safely reduce the test running time to be 10 seconds.
1227
1228         * Animometer/runner/animometer.html:
1229         Add "defer" back when loading resources/animometer.js since this script
1230         depends on many other scripts and we need to wait till the page is parsed.
1231         Also change the default test interval to be 10 seconds.
1232         
1233         * Animometer/runner/resources/graph.js:
1234         (graph): Make the test results curves smoother.
1235         
1236         * Animometer/tests/resources/main.js:
1237         (Animator): Initialize the Kalman filter with 60 FPS which should be true
1238         if the test page is empty.
1239         
1240         (Animator.prototype.animate):
1241         * Animometer/tests/resources/math.js:
1242         (KalmanEstimator): Fix the initial value of _vecX_est.
1243             _vecX_est[0] = current FPS (= 60FPS when the test page is empty)
1244             _vecX_est[1] = first time derivative of FPS (=0; FPS has been constant).
1245             _vecX_est[2] = second time derivative of FPS (=0; since _vecX_est[1]=0).
1246         (KalmanEstimator.prototype.estimate): Add some comments.
1247
1248 2015-11-04  Said Abou-Hallawa  <sabouhallawa@apple.com>
1249
1250         Remove "defer" from the scripts' references in the graphics benchmark home page 
1251         https://bugs.webkit.org/show_bug.cgi?id=150915
1252
1253         Reviewed by Simon Fraser.
1254
1255         It causes the benchmark to be very flakey.
1256
1257         * Animometer/runner/animometer.html:
1258
1259 2015-11-01  Said Abou-Hallawa  <sabouhallawa@apple,com>
1260
1261         Add an option to make the graphics benchmark runs a specific test with fixed complexity
1262         https://bugs.webkit.org/show_bug.cgi?id=150529
1263
1264         Reviewed by Darin Adler.
1265
1266         Beside each test in the suites tree, we are going to show the complexity
1267         arithmetic mean of the of the last run in an edit control. Based on a
1268         new option these edit controls will all be visible or hidden. If they are
1269         visible their values can be changed. The benchmark runner if it run in
1270         the non-adaptive mode will set the complexity of the test to the passed
1271         value and will not change it ever. The animator will animate the test and
1272         frame rate will also be measured.
1273
1274         * Animometer/runner/animometer.html: Add a new option for the non-adaptive mode.
1275         
1276         * Animometer/runner/resources/animometer.css:
1277         (section#home input[type="number"]): Define the width of all the edit control in the <home> section.
1278         (section#home > suites input[type="number"]): The edit controls in the <suites> box will be right aligned and hidden by default.
1279         (section#home > suites input[type="number"].selected): When the class "selected" is added, the edit controls will be visible.
1280         (section#home > options > label > input[type="number"]): Deleted.
1281         
1282         * Animometer/runner/resources/animometer.js:
1283         (window.benchmarkRunnerClient.didFinishLastIteration): Update the local storage with the results of each test.
1284         (window.optionsManager._adaptiveTestElement): Returns the checkbox for setting the adaptive test option.
1285         (window.suitesManager._editElement):  Returns the edit element associated with each test element in the suites tree.
1286         (window.suitesManager._editsElements): Returns a list of all the elements in the <suites> box.
1287         (window.suitesManager._localStorageNameForTest): Change this function to take strings.
1288         (window.suitesManager._createTestElement): Adds an edit control beside each test.
1289         (window.suitesManager.updateEditsElementsState): Adds/Removes the 'selected' class to/from all the tests edit elements.
1290         (window.suitesManager.updateUIFromLocalStorage): Reads the edit control value from the local storage.
1291         (window.suitesManager.updateLocalStorageFromUI): Saves the edit control value to the local storage.
1292         (window.suitesManager.updateLocalStorageFromJSON): Saves the last run results to the local storage.
1293         (window.benchmarkController.initialize): Shows/Hides the test edit controls based on the adaptive test option.
1294         (window.benchmarkController.onChangeAdaptiveTestCheckbox): An onchange event handler for the adaptive test checkbox.
1295         
1296         * Animometer/tests/resources/main.js: 
1297         (Benchmark.prototype.update): Fix the complexity of the test if the running mode is non-adaptive test and desired complexity is not zero.
1298         (window.runBenchmark): Add the test complexity as a new benchmark option.
1299
1300 2015-11-01  Said Abou-Hallawa  <sabouhallawa@apple,com>
1301
1302         Make the size of the benchmark canvas adaptive to the screen size and screen resolution
1303         https://bugs.webkit.org/show_bug.cgi?id=150530
1304
1305         Reviewed by Darin Adler.
1306         
1307         We want to set the size of the benchmark stage dynamically such that it
1308         depends on the screen resolution and the device scale factor. This patch 
1309         does more than that because the home page css was not done properly. To
1310         use the flex box layout, the animometer.css has to be rewritten almost from
1311         scratch. The suites tree has to be rewritten also because it was not collapsing
1312         and with the flex box layout it was going outside of the window area. The 
1313         options handling and the local storage handling had to be rewritten to
1314         allow more flexibility with this patch and the future patches. The code
1315         in animometer.js was reorganized into objects to allow distributing the code
1316         nicely among separate entities.
1317
1318         * Animometer/resources/extensions.js:
1319         (Point.elementClientSize): Returns the client size of an HTMLElement as a Point object.
1320         (Insets.prototype.get width): Follow the function opening brace style guidelines.
1321         (Insets.prototype.get height):
1322         (Insets.prototype.get size): Returns the size of an Insets as a Point object.
1323         
1324         (window.DocumentExtension): Provides document helper functions. It should be assailable from the runner and the tests.
1325         (window.DocumentExtension.createElement): Creates an HTMLElement given its name, attributes and parentElement. 
1326         (window.DocumentExtension.createSvgElement): Creates an SVGElement given its name, attributes and parentElement (moved from utilities.js). 
1327         (window.DocumentExtension.insertCssRuleAfter): Inserts a CSS rule after an exiting rule given its text.
1328         
1329         (ResultsTable.prototype._showHeader): Use DocumentExtension functions.
1330         (ResultsTable.prototype._showGraph): Use DocumentExtension functions and create a real button for "Graph..." option.
1331         (ResultsTable.prototype._showJSON): Use DocumentExtension functions and create a real button for "JSON..." option.
1332         (Options): Deleted.
1333         
1334         * Animometer/runner/animometer.html: Restructure the page to use the flex box layout.
1335         
1336         * Animometer/runner/resources/animometer.css:
1337         (html,body):
1338         (button):
1339         
1340         (button.large-button):The large button appears in the animometer.html.
1341         (button.large-button:active):
1342         (button.large-button:disabled):
1343         
1344         (button.small-button): The small button appears in the results table.
1345         (button.small-button:active):
1346         
1347         (.tree): The tree class is used to list the suites and their tests.
1348         (.tree .expand-button): This button expands a tree element.
1349         (.tree .expand-button ~ ul): Hide the children (<ul>...</ul>) of a parent node by default.
1350         (.tree .expand-button:checked ~ ul): Show the children of a parent node only when checked.
1351         (.tree ul): Hide the list bullets.
1352         (.tree li): Indent every node in the tree relative to its parent.
1353         (.tree ul li): Indent all the non top level nodes only (the tests nodes in our case).
1354         (.tree > li:last-child): Do not indent the bottom of the last child node.
1355         (.tree-label): Style for all the labels in the tree.
1356         (label.tree-label): Style for the labels in the top level only (the suites nodes in our case).
1357         (label.tree-label:before): Style the unchecked case of the expand-button.
1358         (:checked ~ label.tree-label:before): Style the checked case of the expand-button.
1359         
1360         (table.results-table): The results table appears while running the test and at the end.
1361         (.results-table td):
1362         (.results-table th):
1363         
1364         (div.results-json): The JSON div appears per test or for the whole run.
1365         
1366         (main): This is the flex box container.
1367         
1368         (section): A section is displayed exclusively inside the <main>. It is hidden by default.
1369         (section.selected): When it is selected, its layout is flex layout.
1370         (section > footer): The header or the footer of a section should not take more than 15% of the container.
1371         
1372         (section#home): The home section has <suites> and <options> parts to be laid out in the middle.
1373         (section#home > options): 
1374         (section#home > suites): The <suites> should not take more than 40% of the width.
1375         (section#home > options > label): The benchmark title.
1376         (section#home > header > h2): The benchmark title.
1377         (section#home > options > label > input[type="number"]): Sets the width of the option edit control.
1378         
1379         (section#running): The running section contain the runner <iframe> which takes the whole area of the <main>.
1380         (section#running > #running-test): This is the <iframe> container.
1381         (section#running > #running-test > iframe): The <iframe> is created by the runner for each test.
1382         (section#running > #progress): This is the progress bar.
1383         (section#running > #progress > #progress-completed): This is another element which grows while the runner is progressing.
1384         (section#running > #record): This the container of the record results table which is shown while running a test.
1385         
1386         (section#results):
1387         (section#json):
1388         (section#test-json):
1389         (section#test-graph): All these sections have the same layout. A <data> element is laid out between <header> and <footer>.
1390
1391         (section#results > data):
1392         (section#json > data):
1393         (section#test-json > data):
1394         (section#test-graph > data): The <data> element should take 70% of the <section>.
1395         
1396         (section#test-graph > data > svg):
1397         (.axis line):
1398         (.left-samples): These styles are for the d3 graph.
1399         
1400         (section#test-json > data): This is the style of the JSON <data> element.
1401         
1402         (iframe): Deleted.
1403         (label, p): Deleted.
1404         (section > p): Deleted.
1405         (section#home > p): Deleted.
1406         (section#home > p:first-child): Deleted.
1407         (#testContainer): Deleted.
1408         (section#running #progress-completed): Deleted.
1409         (section#results > table): Deleted.
1410         (section#results > table td, th): Deleted.
1411         (section#results > table tr.alt, td): Deleted.
1412         (section#results > table th): Deleted.
1413         (section#json > textarea): Deleted.
1414         (.options): Deleted.
1415         (.options p): Deleted.
1416         (#suites ul): Deleted.
1417         (#suites ul ul): Deleted.
1418         (#suites ul ul input, #suites ul ul label): Deleted.
1419         (#suites.showTests ul ul): Deleted.
1420         (.column): Deleted.
1421         (input[type="number"]): Deleted.
1422         (.buttons): Deleted.
1423         (.small-button): Deleted.
1424         (#graphContainer): Deleted.
1425         (.right-samples): Deleted.
1426         (.sample-time): Deleted.
1427         (.left-mean): Deleted.
1428         (.right-mean): Deleted.
1429         
1430         * Animometer/runner/resources/animometer.js:
1431         (window.benchmarkRunnerClient.initialize): Initialize the client object with the options and the suites.
1432         (window.benchmarkRunnerClient.willStartFirstIteration): Use new css selectors for results and the record table.
1433         (window.benchmarkRunnerClient.didFinishLastIteration): Move the code which sets the JSON text to sectionsManager.showJSON().
1434         
1435         (window.sectionsManager): Responsible of managing the <section>s elements inside animometer.html.
1436         (window.sectionsManager._sectionHeaderH1Element): Return the <h1> inside the <header> of a given section.
1437         (window.sectionsManager._sectionDataDivElement): Return the <div> inside the <data> of a given section.
1438         (window.sectionsManager.showScore): Show the score of the last benchmark run.
1439         (window.sectionsManager.showTestName): Show the test name for detailed results <section>.
1440         (window.sectionsManager.showJSON): Shows the JSON text of the last benchmark or for a specific test.
1441         (window.sectionsManager.showSection): Shows a specific <section> in the <main> container.
1442         (window.sectionsManager.setupSectionStyle): Sets css attributes for all the <section>s.
1443         (window.sectionsManager.setupRunningSectionStyle): Sets the css attributes for the running <section> only.
1444         
1445         (window.optionsManager): Responsible of managing the user options and streaming them to/form the localStorage.
1446         (window.optionsManager._optionsElements): Returns the children <input> elements of the <options>.
1447         (window.optionsManager.updateUIFromLocalStorage): Restore the values of the <options> UI elements from the local storage.
1448         (window.optionsManager.updateLocalStorageFromUI): Saves the values of the <options> UI elements to the local storage.
1449         
1450         (window.suitesManager): Responsible of managing the user suites and streaming them to/form the localStorage.
1451         (window.suitesManager._treeElement): Returns the suites tree container element.
1452         (window.suitesManager._suitesElements): Returns a list of the suites elements.
1453         (window.suitesManager._checkboxElement): Returns the checkbox element of a given suite.
1454         (window.suitesManager._localStorageNameForTest): Generates a string for the tuple <suite, test> to be saved in the localStorage.
1455         (window.suitesManager._updateSuiteCheckboxState): Updates the state of a suite checkbox from the state of its tests' checkboxes.
1456         (window.suitesManager._updateStartButtonState): Updates the state of the start button from the state of the suites' checkboxes.
1457         (window.suitesManager._onChangeSuiteCheckbox): Called when a suite checkbox is clicked.
1458         (window.suitesManager._onChangeTestCheckbox): Called when a test checkbox is clicked.
1459         (window.suitesManager._createSuiteElement): Creates suite node in the suites tree.
1460         (window.suitesManager._createTestElement): Creates test node in the suites tree.
1461         (window.suitesManager.createElements): Creates the suites tree dynamically from the array Suites.
1462         (window.suitesManager.updateUIFromLocalStorage): Restore the values of the <suites> UI elements from the local storage.
1463         (window.suitesManager.updateLocalStorageFromUI): aves the values of the <suites> UI elements to the local storage.
1464         
1465         (window.benchmarkController): This is the UI controller of the animometer.html page.
1466         (window.benchmarkController.initialize): Called when the animometer.html page is loaded.
1467         (window.benchmarkController._runBenchmark): Starts a benchmark run.
1468         (window.benchmarkController.startTest): Called when the "Start Test" button is clicked.
1469         (window.benchmarkController.showResults): Called at the end of the test to show the final results.
1470         (window.benchmarkController.showJson): Called from the results page to show the JSON of the last benchmark run.
1471         (window.benchmarkController.showTestGraph): Called from the results the table to show a graph for the samples of a specific test.
1472         (window.benchmarkController.showTestJSON): Called from the results the table to show a JSON for the samples of a specific test.
1473         
1474         (showSection): Deleted.
1475         (startTest): Deleted.
1476         (showResults): Deleted.
1477         (showJson): Deleted.
1478         (showTestGraph): Deleted.
1479         (showTestJSON): Deleted.
1480         (initialize.toggleTestsCheckbox.onchange): Deleted.
1481         (initialize): Deleted.
1482         (updateSuiteSelection): Deleted.
1483         (updateTestSelection): Deleted.
1484         (updateSuiteCheckbox): Deleted.
1485         (localStorageNameForTest): Deleted.
1486         (populateSettings.): Deleted.
1487         (populateSettings): Deleted.
1488         
1489         * Animometer/runner/resources/benchmark-runner.js:
1490         (BenchmarkRunner): Pass the frameContainer element to the BenchmarkRunner.
1491         (BenchmarkRunner.prototype._appendFrame): Remove unused parameter unwanted styling code.
1492         (BenchmarkRunner.prototype.runMultipleIterations):  Use the this._client.iterationCount instead of passing it as a parameter also.
1493
1494         * Animometer/runner/resources/graph.js:
1495         (graph): Calculate the size of the chart from the container element.
1496         
1497         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1498         (BouncingSvgImage):
1499         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
1500         (BouncingSvgParticlesStage.prototype._createDefs):
1501         (BouncingSvgParticlesStage.prototype._createClipStar):        
1502         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1503         (BouncingSvgShape.prototype._createShape):
1504         (BouncingSvgShapesStage.prototype.createGradient):
1505         Call DocumentExtension.createSvgElement() instead of calling Utilities.createSvgElement().
1506         
1507         * Animometer/tests/resources/main.js:
1508         (Animator.prototype.animate):
1509         (Benchmark):
1510         (Benchmark.prototype.update):
1511         * Animometer/tests/resources/stage.js:
1512         (StageBenchmark.prototype.showResults):
1513         Rename the options to match the <input> ids in animometer.html.
1514         
1515         * Animometer/tests/resources/utilities.js:
1516         (window.Utilities.createSvgElement): Deleted.
1517         
1518         * Animometer/tests/text/layering-text.html:
1519         * Animometer/tests/text/resources/layering-text.js:
1520         (LayeringTextStage):
1521         (LayeringTextStage.prototype._setFontSize): Sets the size of the text dynamically such that they all fit in one stage.
1522
1523 2015-10-29  Simon Fraser  <simon.fraser@apple.com>
1524
1525         Animometer computes frame rate incorrectly
1526         https://bugs.webkit.org/show_bug.cgi?id=150698
1527
1528         Reviewed by Tim Horton.
1529         
1530         The existing code incremented this._frameCount after checking against this._dropFrameCount.
1531         This has the effect of setting this._measureTimeOffset one frame too late, so
1532         we were measuring only two frames, not three, and thus computing an incorrect fps.
1533
1534         * Animometer/tests/resources/main.js:
1535         (Animator.prototype.animate):
1536
1537 2015-10-27  Jon Lee  <jonlee@apple.com>
1538
1539         Add an option to make the graphics benchmark runs a specific test
1540         https://bugs.webkit.org/show_bug.cgi?id=150528
1541         rdar://problem/23246614
1542
1543         Reviewed by Zalan Bujtas.
1544
1545         Add a checkbox that lets the user list all of the available tests, and select
1546         the ones to run repeatedly. The test checkboxes will update the state of the suite
1547         checkbox. The selected tests are stored in localStorage to make it easy to do
1548         repeated runs.
1549
1550         * Animometer/runner/animometer.html: Add a checkbox to show individual tests.
1551         Update other markup.
1552         * Animometer/runner/resources/animometer.css: Make the settings area a little wider
1553         to accommodate the longer names of the tests
1554         * Animometer/runner/resources/animometer.js:
1555         (startBenchmark): Change the way that the suites are fed into the benchmark
1556         runner. Go through each of the suites and their tests, and create a new Suite
1557         with just the enabled tests. While enumerating store the enabled tests into
1558         localStorage.
1559         (initialize): Initialization routine (taking over populateSettings). When the
1560         checkbox for showing tests is toggled, add or remove a class on #suites to show
1561         the individual tests.
1562         (updateSuiteSelection): Called whenever the user toggles the checkbox for a suite.
1563         Either select all or none of the tests.
1564         (updateTestSelection): Called whenever the user toggles the checkbox for a test.
1565         (updateSuiteCheckbox): Update the state of the test's suite's checkbox to
1566         indeterminate if there is at least one enabled test, unchecked if none are selected,
1567         and checked if all are selected.
1568         (localStorageNameForTest): Helper function to get the name of the test to use as
1569         a key to localStorage.
1570         (populateSettings): Add the tests for each suite into an inner list.
1571
1572 2015-10-26  Said Abou-Hallawa  <sabouhallawa@apple.com>
1573
1574         Add an option to output the results of the graphics benchmark in JSON format
1575         https://bugs.webkit.org/show_bug.cgi?id=150484
1576         <rdar://problem/23243721>
1577
1578         Reviewed by Darin Adler.
1579
1580         * Animometer/resources/extensions.js:
1581         (ResultsDashboard): A new class to hold the iterations results.
1582         (ResultsDashboard.prototype.push): Appends an iteration results;
1583         (ResultsDashboard.prototype.toJSON): Converts the iterations results to JSON format.
1584
1585         (RecordTable.prototype.clear): Clears the results table.
1586         (RecordTable.prototype._showTitles): Shows the header titles and appends the sub-titles to a queue.
1587         (RecordTable.prototype._showHeader): Shows the table header titles.
1588         (RecordTable.prototype._showEmpty): Shows an empty table cell.
1589         (RecordTable.prototype._showValue): Shows a number value in the results table.
1590         (RecordTable.prototype._showSamples): Shows a button for the sampled data graph.
1591         (RecordTable.prototype._showTest): Shows the results of a single test.
1592         (RecordTable.prototype._showSuite): Shows the results of a single suite.
1593         (RecordTable.prototype.showRecord): Shows a single iteration for a single test.
1594         (RecordTable.prototype.showIterations): Shows the results of all the suites of the iterations. 
1595         
1596         (ResultsTable): RecordTable was renamed to ResultsTable.
1597         (ResultsTable.prototype.clear): Clears the table element.
1598         (ResultsTable.prototype._showHeaderRow): Shows a row in the results table header.
1599         (ResultsTable.prototype._showHeader): Shows the results table header.
1600         (ResultsTable.prototype._showEmpty): Shows an empty table cell.
1601         (ResultsTable.prototype._showText): Shows a string in a new table cell.
1602         (ResultsTable.prototype._showFixedNumber): Shows a number in a new table cell.
1603         (ResultsTable.prototype._showGraph): Shows a button for the sampled data graph.
1604         (ResultsTable.prototype._showJSON): Shows a button for the sampled data JSON.
1605         (ResultsTable.prototype._showTest): Shows the results of a single test.
1606         (ResultsTable.prototype._showSuite): Shows the results of a single suite.
1607         (ResultsTable.prototype._showIteration): Shows the results of a single iteration.
1608         (ResultsTable.prototype.showRecord): Shows a single iteration for a single test.
1609         (ResultsTable.prototype.showIterations): Shows all the results.
1610         (RecordTable): Deleted.
1611         (RecordTable.prototype.clear): Deleted.
1612         (RecordTable.prototype._showTitles): Deleted.
1613         (RecordTable.prototype._showHeader): Deleted.
1614         (RecordTable.prototype._showEmpty): Deleted.
1615         (RecordTable.prototype._showValue): Deleted.
1616         (RecordTable.prototype._showSamples): Deleted.
1617         (RecordTable.prototype._showTest): Deleted.
1618         (RecordTable.prototype._showSuite): Deleted.
1619         (RecordTable.prototype.showRecord): Deleted.
1620         (RecordTable.prototype.showIterations): Deleted.
1621         
1622         * Animometer/resources/sampler.js:
1623         (Sampler.prototype.startSampling): Use forEach.
1624         (Sampler.prototype.sample): Use forEach.
1625         (Sampler.prototype.toJSON): Converts the sampler data to JSON format.
1626         
1627         * Animometer/resources/strings.js: Added.
1628         This new file will be used to associate the strings used by the benchmark
1629         with IDs. A string can be changed in one place without having to change
1630         all the instances of this string in multiple files. There two groups of
1631         strings in this file. The first one is used by the UI elements and the second
1632         group is used when constructing the results JSON.
1633         
1634         * Animometer/runner/animometer.html:
1635         * Animometer/runner/resources/animometer.css:
1636         
1637         * Animometer/runner/resources/animometer.js:
1638         (window.benchmarkRunnerClient.willAddTestFrame):
1639         (window.benchmarkRunnerClient.willStartFirstIteration):
1640         (window.benchmarkRunnerClient.didRunSuites):
1641         (window.benchmarkRunnerClient.didFinishLastIteration):
1642         Make benchmarkRunnerClient uses ResultsDashboard instead of _iterationsSamplers
1643         Get the JSON from ResultsDashboard.toJSON() and pass it to ResultsTable.showIterations().
1644         Also set the textContent of the "#json" textarea with the results JSON.
1645         
1646         (showResults): Delete unneeded code.
1647         (showJson): Shows the "json" section.
1648         (showTestGraph): Rename showGraph() to be showTestGraph().
1649         (showTestJSON): Shows the JSON of a single testResults.
1650         (showGraph): Deleted.
1651         
1652         * Animometer/runner/resources/tests.js:
1653         Use the string table instead of putting literal strings.
1654
1655         * Animometer/tests/resources/stage.js:
1656         (StageBenchmark.prototype.showResults):
1657         Fix the parameters which are passed to RecordTable.showRecord().
1658         
1659         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
1660         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
1661         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
1662         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
1663         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
1664         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
1665         * Animometer/tests/examples/canvas-electrons.html:
1666         * Animometer/tests/examples/canvas-stars.html:
1667         * Animometer/tests/simple/simple-canvas-paths.html:
1668         * Animometer/tests/template/template-canvas.html:
1669         * Animometer/tests/template/template-css.html:
1670         * Animometer/tests/template/template-svg.html:
1671         * Animometer/tests/text/layering-text.html:
1672         Include the new strings.js file in all the test files.
1673
1674 2015-10-12  Jon Lee  <jonlee@apple.com>
1675
1676         Add canvas line dash test
1677         https://bugs.webkit.org/show_bug.cgi?id=150078
1678         <rdar://problem/23082347>
1679
1680         Reviewed by Dean Jackson.
1681
1682         * Animometer/runner/resources/tests.js: Add line dash test.
1683         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1684         (CanvasLineDashStage): Create a new stage with a default dash pattern and stroke style.
1685         Maintain a step which will animate the dash.
1686         (CanvasLineDashStage.prototype.animate): Render the line path with the dash. Increment
1687         the dash offset to animate.
1688         (CanvasPathBenchmark.prototype.createStage): Add the test.
1689
1690 2015-10-12  Jon Lee  <jonlee@apple.com>
1691
1692         Add canvas line path tests
1693         https://bugs.webkit.org/show_bug.cgi?id=150076
1694         <rdar://problem/23082285>
1695
1696         Reviewed by Dean Jackson.
1697
1698         * Animometer/runner/resources/tests.js: Add new line path tests, with different
1699         line joins.
1700         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1701         (CanvasLinePathStage): The stage is the same as the SimpleCanvasPathStrokeStage
1702         but sets the lineJoin on the context.
1703         (CanvasPathBenchmark.prototype.createStage): Add the tests.
1704
1705 2015-10-12  Jon Lee  <jonlee@apple.com>
1706
1707         Add missing paint objects for arc and arcTo fills
1708         https://bugs.webkit.org/show_bug.cgi?id=150075
1709         <rdar://problem/23082233>
1710
1711         Reviewed by Dean Jackson.
1712
1713         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add missing paint objects
1714         for arcTo and arc segment fills.
1715         (CanvasArcToSegmentFill):
1716         (CanvasArcToSegmentFill.prototype.draw):
1717         (CanvasArcSegmentFill):
1718         (CanvasArcSegmentFill.prototype.draw):
1719
1720 2015-10-12  Jon Lee  <jonlee@apple.com>
1721
1722         Add canvas line segment tests
1723         https://bugs.webkit.org/show_bug.cgi?id=150073
1724         <rdar://problem/23082138>
1725
1726         Reviewed by Dean Jackson.
1727
1728         * Animometer/runner/resources/tests.js: Add new line segment tests, with different
1729         line caps.
1730         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1731         (CanvasLineSegment): Add new line segment paint object.
1732         (CanvasLineSegmentStage): Create a new stage that sets the lineCap.
1733
1734 2015-10-12  Jon Lee  <jonlee@apple.com>
1735
1736         Add canvas path fill tests
1737         https://bugs.webkit.org/show_bug.cgi?id=150071
1738         <rdar://problem/23082001>
1739
1740         Reviewed by Dean Jackson.
1741
1742         * Animometer/runner/resources/tests.js: Add new pathTypes for path fills.
1743         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1744         (CanvasLinePoint): Add basic point for a line, and call lineTo.
1745         (SimpleCanvasPathFillStage): Add a new stage similar to SimpleCanvasPathStrokeStage.
1746         (CanvasPathBenchmark.prototype.createStage): Add the tests.
1747
1748 2015-10-12  Jon Lee  <jonlee@apple.com>
1749
1750         Add canvas path tests
1751         https://bugs.webkit.org/show_bug.cgi?id=150067
1752         rdar://problem/23081463
1753
1754         Reviewed by Dean Jackson.
1755
1756         * Animometer/runner/resources/tests.js: Add a quadratic and bezier path test.
1757
1758         * Animometer/tests/simple/resources/simple-canvas.js:
1759         (SimpleCanvasStage.prototype.tune): This kind of test joins all of the segments
1760         into one long path, and tries to render that one path. Random points make it
1761         difficult to tell what is going on, so add a parameter to the constructor to
1762         confine the area where the random coordinates can land. The more complicated the
1763         case is, the larger an area the path will cover. Add an artificial minimum so
1764         that the first 200 points aren't confined to a space that is too small.
1765
1766         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1767         (SimpleCanvasPathStrokeStage): Add a new kind of stage that inherits from
1768         SimpleCanvasStage. Each time the frame animates a random line width and stroke
1769         color are chosen. The path setup is done outside of each paint object.
1770         (CanvasQuadraticPoint): This point just calls quadraticCurveTo.
1771         (CanvasPathBenchmark.prototype.createStage): Add the tests.
1772
1773 2015-10-12  Jon Lee  <jonlee@apple.com>
1774
1775         Add basic canvas tests
1776         https://bugs.webkit.org/show_bug.cgi?id=150066
1777         rdar://problem/23081143
1778
1779         Reviewed by Dean Jackson.
1780
1781         This adds a new test suite that will cover all of the path-based canvas calls.
1782         The patch will be divided up to cover tests with similar techniques.
1783
1784         The simplest version uses a SimpleCanvasStage.
1785
1786         * Animometer/runner/resources/tests.js: Add tests for quadratic, bezier, arcTo,
1787         arc, and rect segments. Also include arcTo, arc, and rect fills.
1788         * Animometer/tests/resources/stage.js:
1789         (Stage.prototype.randomBool): Added for counterclockwise property for arc segments.
1790         (Stage.prototype.randomInt): Fix how values are rounded, used by randomBool. It should
1791         round instead of flooring everything.
1792         * Animometer/tests/simple/resources/simple-canvas.js: Added. Defines common classes
1793         used by all simple canvas tests. The page reads best bottom to top.
1794         (SimpleCanvasStage): Basic stage. Pass a canvasObject which will be used to create new
1795         objects as needed in tune().
1796         (SimpleCanvasStage.prototype.tune): Modeled on other tests. Adds and removed objects
1797         as specified by the provided |count|.
1798         (SimpleCanvasStage.prototype.animate): Iterate over all the objects and ask them to draw.
1799         There is no "animating" of the objects; they will just paint statically on the canvas.
1800         (SimpleCanvasAnimator): Basic animator clears the canvas prior to painting.
1801         (SimpleCanvasBenchmark): Hard-code the feedback loop parameters instead of including
1802         them in the query parameters to the test URLs.
1803         (SimpleCanvasBenchmark.prototype.createAnimator):
1804         * Animometer/tests/simple/simple-canvas-paths.html: Added.
1805
1806         * Animometer/tests/simple/resources/simple-canvas-paths.js: Added. There is no "animating"
1807         of these objects--they just paint statically on the canvas.
1808         (CanvasQuadraticSegment): Paint a quadratic segment stroke.
1809         (CanvasBezierSegment): Paint a bezier segment stroke.
1810         (CanvasArcToSegment): Paint an arcTo stroke.
1811         (CanvasArcSegment): Paint an arc stroke.
1812         (CanvasRect): Paint a rect.
1813         (CanvasRectFill): Paint a filled rect.
1814
1815         (CanvasPathBenchmark):
1816         (CanvasPathBenchmark.prototype.createStage): Look for the pathType and create the
1817         stage using the right paint object.
1818         (window.benchmarkClient.create):
1819
1820 2015-10-12  Jon Lee  <jonlee@apple.com>
1821
1822         Refactor tune() to pass in an integer-based count
1823         https://bugs.webkit.org/show_bug.cgi?id=150060
1824         <rdar://problem/23079425>
1825
1826         Reviewed by Dean Jackson.
1827
1828         All of the tune functions do an initial step of flooring the
1829         # of painting objects to add or remove. Factor that out since
1830         the complexity of all of these tests is always expressed in terms
1831         of countable items.
1832
1833         * Animometer/tests/resources/main.js:
1834         (Benchmark.prototype.update): Update the tuneValue.
1835
1836         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1837         (BouncingParticlesStage.prototype.tune): Remove the count adjustment.
1838         * Animometer/tests/examples/resources/canvas-electrons.js:
1839         (CanvasElectronsStage.prototype.tune): Ditto.
1840         * Animometer/tests/examples/resources/canvas-stars.js:
1841         (CanvasStarsStage.prototype.tune): Ditto.
1842         * Animometer/tests/text/resources/layering-text.js:
1843         (LayeringTextStage.prototype.tune): Ditto.
1844
1845 2015-10-12  Jon Lee  <jonlee@apple.com>
1846
1847         Store test-interval in localStorage
1848         https://bugs.webkit.org/show_bug.cgi?id=150055
1849         <rdar://problem/23078879>
1850
1851         Reviewed by Dean Jackson.
1852
1853         * Animometer/runner/resources/animometer.js:
1854         (populateSettings): Keep track of the specified test interval in localStorage
1855         to make it easy to repeat a test suite.
1856
1857 2015-10-12  Jon Lee  <jonlee@apple.com>
1858
1859         Remove "../tests/" from the URLs of all tests
1860         https://bugs.webkit.org/show_bug.cgi?id=150054
1861         <rdar://problem/23078784>
1862
1863         Reviewed by Dean Jackson.
1864
1865         Presumably all tests will be running from the tests/ directory,
1866         so we don't have to specify it in all of the test URLs.
1867
1868         * Animometer/runner/resources/benchmark-runner.js:
1869         (BenchmarkRunnerState.prototype.prepareCurrentTest): Prepend
1870         "../tests/" to all tests.
1871         * Animometer/runner/resources/tests.js: Remove "../tests/" from
1872         all URLs.
1873
1874 2015-10-12  Jon Lee  <jonlee@apple.com>
1875
1876         Refactor test suites to a separate class.
1877         https://bugs.webkit.org/show_bug.cgi?id=150053
1878         <rdar://problem/23078645>
1879
1880         Reviewed by Dean Jackson.
1881
1882         Create a Suite class to refactor out prepare() and run().
1883         Generate the checkboxes representing the suites using Suites
1884         instead of maintaining a separate list. Also, save the
1885         selections out to localStorage.
1886
1887         * Animometer/runner/animometer.html: Remove the explicitly listed
1888         suites. These will be generated from Suites instead.
1889         * Animometer/runner/resources/animometer.js:
1890         (populateSettings): Iterate through Suites, and create the
1891         label and checkbox. Attach the Suite object to the checkbox so
1892         when the benchmark is started, we get direct access. Initialize
1893         the checkmark based on its value in localStorage. Set this to
1894         run when DOMContentLoaded is dispatched.
1895         (startBenchmark): Grab all of the checkboxes, inspect their
1896         values, add it to enabledSuites if selected. Remember whether
1897         the suite was enabled in localStorage, so that it's easy to do
1898         repeated runs.
1899         * Animometer/runner/resources/tests.js:
1900         (Suite): Create a new Suite class. Refactor out prepare() and
1901         run(), since all of them have the same implementation. Populate
1902         Suites with Suite instances instead of generic objects.
1903
1904 2015-10-12  Jon Lee  <jonlee@apple.com>
1905
1906         Update graph styles for legibility.
1907         https://bugs.webkit.org/show_bug.cgi?id=150052
1908         <rdar://problem/23078503>
1909
1910         Reviewed by Dean Jackson.
1911
1912         * Animometer/runner/resources/animometer.css: Update colors and
1913         stroke thicknesses to make the graphs easier to read.
1914         (.smaple-time): Correct to .sample-time
1915         * Animometer/runner/resources/graph.js:
1916         (graph): Ditto.
1917
1918 2015-10-12  Jon Lee  <jonlee@apple.com>
1919
1920         Update graph styles for legibility.
1921         https://bugs.webkit.org/show_bug.cgi?id=150052
1922         <rdar://problem/23078503>
1923
1924         Reviewed by Dean Jackson.
1925
1926         * Animometer/runner/resources/animometer.css: Update colors and
1927         stroke thicknesses to make the graphs easier to read.
1928         (.smaple-time): Correct to .sample-time
1929         * Animometer/runner/resources/graph.js:
1930         (graph): Ditto.
1931
1932 2015-10-12  Filip Pizlo  <fpizlo@apple.com>
1933
1934         Unreviewed, revert an unintended commit.
1935
1936         * JetStream/Octane2/crypto.js:
1937         (montRevert):
1938         (montReduce):
1939
1940 2015-10-05  Said Abou-Hallawa  <sabouhallawa@apple.com>
1941
1942         Add a graphics benchmark
1943         https://bugs.webkit.org/show_bug.cgi?id=149053
1944         <rdar://problem/18984169>
1945
1946         Reviewed by Dean Jackson.
1947
1948         Instead of measuring the FPS of the animation, this benchmark measures the
1949         test complexity when rendering at a set-point FPS which should be lower
1950         than 60 FPS. This benchmark tries to stay at the set-point FPS by using
1951         a closed loop control system PID function. The gain of the system is passed
1952         as a parameter when running the test. Measuring the FPS faithfully results
1953         very fluctuating values. A Kalman filter is used to give a better estimate
1954         for the current FPS.
1955
1956         The animation of the tests is done manually. requestAnimationFrame() is
1957         called with a callback. Inside this callback, the test is animating by
1958         changing the positions of the elements inside the page. The test complexity
1959         may change also if the current FPS is not equal to the desired FPS.
1960
1961         In this patch, the benchmark and the tests are included. The shared code
1962         and the tests runner are included in separate patches.
1963
1964         * Animometer/runner/animometer.html:
1965         * Animometer/runner/resources/animometer.js:
1966         Add two new examples for more complex animation techniques.
1967         Add an option to show/hide the test running results which is off by default.
1968
1969         * Animometer/runner/resources/tests.js: Added.
1970         (suiteFromName): Returns a suite given its name.
1971         (testFromName): Returns a test given its suite and name.
1972
1973         * Animometer/tests: Added.
1974         This directory includes all the test suites to be run by the benchmark.
1975         runner. All the tests should try to run on three stages: CSS, canvas and
1976         SVG.
1977         
1978         * Animometer/tests/bouncing-particles: Added.
1979         * Animometer/tests/bouncing-particles/resources: Added.
1980         The bouncing particles test is an example of a simple animation technique.
1981         
1982         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Added.
1983         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Added.
1984         * Animometer/tests/bouncing-particles/bouncing-css-images.html: Added.
1985         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html: Added.
1986         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Added.
1987         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Added.
1988         Bouncing particles test pages.
1989
1990         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js: Added.
1991         (BouncingParticle): Base class for a bouncing particle.
1992         (BouncingParticle.prototype.center): Returns the center point or the particle.
1993         (BouncingParticle.prototype.animate): Moves the particle based on its current position, angle and velocity.
1994         
1995         (BouncingParticlesAnimator): A sub class of Animator.
1996         
1997         (BouncingParticlesStage): Represents the container of all the bouncing particles.
1998         (BouncingParticlesStage.prototype.parseShapeParamters): Gets the shape parameters for shape animating tests.
1999         (BouncingParticlesStage.prototype.randomRotater): Creates a rotater for the particles.
2000         (BouncingParticlesStage.prototype.animate): Animates all the particles.
2001         (BouncingParticlesStage.prototype.tune): Changes the test by adding or removing particles.
2002         
2003         (BouncingParticlesBenchmark): Runs the benchmark for bouncing particles test.
2004         (BouncingParticlesBenchmark.prototype.createAnimator): Creates an animator of type BouncingParticlesAnimator.
2005
2006         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js: Added.
2007         (BouncingCssShape): A sub class of BouncingParticle for animating CSS shapes.
2008         (BouncingCssShape.prototype._createSpan): Creates a <span> element and takes the shape and clipping classes into consideration.
2009         (BouncingCssShape.prototype._move): Moves the particle to a new location. Apply transform since it does not require layout.
2010         (BouncingCssShape.prototype.animate): Rotates and moves the shape to a new location.
2011         
2012         (BouncingCssShapesStage): A sub class of BouncingParticlesStage for animating CSS shapes.
2013         (BouncingCssShapesStage.prototype.createParticle): Creates a particle of type BouncingCssShape.
2014         (BouncingCssShapesStage.prototype.particleWillBeRemoved): Removes the corresponding element form the parent children list.
2015         
2016         (BouncingCssShapesBenchmark): A sub class of BouncingParticlesBenchmark for animating CSS shapes.
2017         (BouncingCssShapesBenchmark.prototype.createStage): Creates a stage of type BouncingCssShapesStage.
2018         (window.benchmarkClient.create): Creates a benchmark of type BouncingCssShapesBenchmark.
2019         
2020         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js: Added.
2021         (BouncingCssImage): A sub class of BouncingParticle for animating CSS images.
2022         (BouncingCssImage.prototype._move): Move the particle to a new location. Apply transform since it does not require layout.
2023         (BouncingCssImage.prototype.animate): Rotates and moves the shape to a new location.
2024         
2025         (BouncingCssImagesStage): A sub class of BouncingParticlesStage for animating CSS images.
2026         (BouncingCssImagesStage.prototype.createParticle): Creates a particle of type BouncingCssImage.
2027         (BouncingCssImagesStage.prototype.particleWillBeRemoved): Removes the corresponding element form the parent children list.
2028         
2029         (BouncingCssImagesBenchmark): A sub class of BouncingParticlesBenchmark for animating CSS images.
2030         (BouncingCssImagesBenchmark.prototype.createStage): Creates a stage of type BouncingCssImagesStage.
2031         (window.benchmarkClient.create): Creates a benchmark of type BouncingCssImagesBenchmark.
2032         
2033         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js: Added.
2034         (BouncingCanvasParticle): A base sub-class of BouncingParticle for animating canvas particles.
2035         (BouncingCanvasParticle.prototype._applyRotation): Apply the particle rotation-around-center transform to the canvas context.
2036         (BouncingCanvasParticle.prototype._applyClipping): Apply the particle clipping to the canvas context.
2037         (BouncingCanvasParticle.prototype._draw): A non-implemented version of the drawing function.
2038         (BouncingCanvasParticle.prototype.animate): Carries out all the steps to redraw the canvas particle.
2039         
2040         (BouncingCanvasParticlesStage): A base sub-class of BouncingParticlesStage for animating canvas particles.
2041         
2042         (BouncingCanvasParticlesAnimator): A concrete sub-class of BouncingParticlesAnimator for animating canvas particles.
2043         (BouncingCanvasParticlesAnimator.prototype.animate): Overrides the base class method to clear the canvas before redrawing the stage.
2044         
2045         (BouncingCanvasParticlesBenchmark): A base sub-class of StageBenchmark for animating canvas particles.
2046         (BouncingCanvasParticlesBenchmark.prototype.createAnimator): Creates the canvas particles animator.
2047         
2048         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Added.
2049         (BouncingCanvasShape): A concrete sub-class of BouncingCanvasParticle for animating canvas shapes.
2050         (BouncingCanvasShape.prototype._applyFill): Sets the fillStyle in the canvas context.
2051         (BouncingCanvasShape.prototype._drawShape): Carries out the actual drawing.
2052         (BouncingCanvasShape.prototype._draw): Carries out all the steps to draw the shape.
2053         
2054         (BouncingCanvasShapesStage): A concrete sub-class of BouncingCanvasParticle for animating canvas shapes.
2055         (BouncingCanvasShapesStage.prototype.createParticle): Creates a particle of type BouncingCanvasShape.
2056         
2057         (BouncingCanvasShapesBenchmark): A concrete sub-class of BouncingCanvasParticlesBenchmark for animating canvas shapes.
2058         (BouncingCanvasShapesBenchmark.prototype.createStage): Creates a stage of type BouncingCanvasShapesStage.
2059         (window.benchmarkClient.create): Creates a benchmark of type BouncingCanvasShapesBenchmark.
2060
2061         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Added.
2062         (BouncingCanvasImage): A concrete sub-class of BouncingCanvasParticle for animating canvas images.
2063         (BouncingCanvasImage.prototype._draw): Draws an image on the context of a canvas.
2064         
2065         (BouncingCanvasImagesStage): A concrete sub-class of BouncingCanvasParticlesBenchmark for animating canvas images.
2066         (BouncingCanvasImagesStage.prototype.createParticle): Creates a particle of type BouncingCanvasImage.
2067         
2068         (BouncingCanvasImagesBenchmark): A concrete sub-class of BouncingCanvasParticlesBenchmark for animating canvas images.
2069         (BouncingCanvasImagesBenchmark.prototype.createStage): Creates a stage of type BouncingCanvasImagesStage.
2070         (window.benchmarkClient.create): Creates a benchmark of type BouncingCanvasImagesBenchmark.
2071
2072         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js: Added.
2073         (BouncingSvgParticle): A base sub-class of BouncingParticle for animating SVG particles.
2074         (BouncingSvgParticle.prototype._applyClipping): Apply the particle clipping by setting the 'clip-path' attribute of the SVGElement.
2075         (BouncingSvgParticle.prototype._move): Moves the particle to a new location. Apply transform since it does not require layout.
2076         (BouncingSvgParticle.prototype.animate): Rotates and moves the shape to a new location.
2077         (BouncingSvgParticlesStage): A sub class of BouncingParticlesStage for animating SVGElements.
2078         (BouncingSvgParticlesStage.prototype._createDefs): Creates an SVGDefsElement.
2079         (BouncingSvgParticlesStage.prototype._ensureDefsIsCreated): Ensures there is only one SVGDefsElement is created.
2080         (BouncingSvgParticlesStage.prototype._createClipStar): Creates an SVGClipPathElement and sets its 'd' attribute to a star like shape.
2081         (BouncingSvgParticlesStage.prototype.ensureClipStarIsCreated): Ensure there is only one star SVGClipPathElement is created.
2082         (BouncingSvgParticlesStage.prototype.particleWillBeRemoved): Remove the corresponding element form the parent children list.
2083
2084         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js: Added.
2085         (BouncingSvgShape): A concrete sub-class of BouncingSVGParticle for animating SVG shapes.
2086         (BouncingSvgShape.prototype._createShape): Creates an SVG shape.
2087         (BouncingSvgShape.prototype._applyFill): Applies the selected fill style to the SVG shape.
2088         
2089         (BouncingSvgShapesStage): A concrete sub-class of BouncingSvgParticlesStage for animating SVG shapes.
2090         (BouncingSvgShapesStage.prototype.createGradient): Creates an SVGLinearGradientElement.
2091         (BouncingSvgShapesStage.prototype.createParticle): Creates a particle of type BouncingSvgShape.
2092         (BouncingSvgShapesStage.prototype.particleWillBeRemoved): Ensures the attached SVGLinearGradientElement is removed from the SVGDefsElement.
2093         
2094         (BouncingSvgShapesBenchmark): A concrete sub-class of BouncingParticlesBenchmark for animating SVG images.
2095         (BouncingSvgShapesBenchmark.prototype.createStage): Creates a stage of type BouncingSvgShapesStage.
2096         (window.benchmarkClient.create): Creates a benchmark of type BouncingSvgShapesBenchmark.
2097         
2098         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js: Added.
2099         (BouncingSvgImage): A concrete sub-class of BouncingSVGParticle for animating SVG images.
2100         
2101         (BouncingSvgImagesStage): A concrete sub-class of BouncingSVGParticlesBenchmark for animating SVG images.
2102         (BouncingSvgImagesStage.prototype.createParticle): Creates a particle of type BouncingSvgImage.
2103         
2104         (BouncingSvgImagesBenchmark): A concrete sub-class of BouncingParticlesBenchmark for animating SVG images.
2105         (BouncingSvgImagesBenchmark.prototype.createStage): Creates a stage of type BouncingSvgImagesStage.
2106         (window.benchmarkClient.create): Creates a benchmark of type BouncingSvgImagesBenchmark.
2107
2108         * Animometer/tests/examples: Added.
2109         * Animometer/tests/examples/canvas-electrons.html: Added.
2110         * Animometer/tests/examples/canvas-stars.html: Added.
2111         Examples test pages. 
2112         
2113         * Animometer/tests/examples/resources: Added.
2114         * Animometer/tests/examples/resources/canvas-electrons.js: Added.
2115         (CanvasElectron): An object which draws and animate a electron object on a canvas stage.
2116         (CanvasElectron.prototype._draw): Draws the electron object.
2117         (CanvasElectron.prototype.animate): Animates the electron object.
2118         
2119         (CanvasElectronsStage): A concrete sub-class of Stage for animating electrons.
2120         (CanvasElectronsStage.prototype.tune): Changes the test by adding or removing elements.
2121         (CanvasElectronsStage.prototype.animate): Animates the test elements.
2122         
2123         (CanvasElectronsAnimator): A concrete sub-class of StageAnimator for animating canvas electrons.
2124         (CanvasElectronsAnimator.prototype.animate): Overrides the base class method to clear the canvas before redrawing the stage.
2125         
2126         (CanvasElectronsBenchmark): A concrete sub-class of StageBenchmark for animating electrons.
2127         (CanvasElectronsBenchmark.prototype.createStage): Creates a stage of CanvasElectronsStage.
2128         (CanvasElectronsBenchmark.prototype.createAnimator): Creates an animator of type CanvasElectronsAnimator.
2129         (window.benchmarkClient.create): Creates a benchmark of type CanvasElectronsBenchmark.
2130         
2131         * Animometer/tests/examples/resources/canvas-stars.js: Added.
2132         (CanvasStar): An object which draws and animate a star object on a canvas stage.
2133         (CanvasStar.prototype._draw): Draws the star object.
2134         (CanvasStar.prototype.animate): Animates the star object.
2135         
2136         (CanvasStarsStage): A concrete sub-class of Stage for animating stars.
2137         (CanvasStarsStage.prototype.tune): Changes the test by adding or removing elements.
2138         (CanvasStarsStage.prototype.animate): Animates the test elements.
2139         
2140         (CanvasStarsAnimator): A concrete sub-class of StageAnimator for animating canvas stars.
2141         (CanvasStarsAnimator.prototype.animate): Overrides the base class method to clear the canvas before redrawing the stage.
2142         
2143         (CanvasStarsBenchmark): A concrete sub-class of Benchmark for animating stars.
2144         (CanvasStarsBenchmark.prototype.createStage): Creates a stage of CanvasStarsStage.
2145         (CanvasStarsBenchmark.prototype.createAnimator): Creates an animator of type CanvasStarsAnimator.
2146         (window.benchmarkClient.create): Creates a benchmark of type CanvasStarsBenchmark.
2147
2148         * Animometer/tests/resources: Added.
2149         This directory includes the script which is required to run an adaptive 
2150         graphics benchmark. From an empty test page, the set of classes in this
2151         directory are responsible for measuring the current frame rate and
2152         changing the test to reach a desired FPS. It keeps asking the test page
2153         to tune itself by a certain value to increase or decrease the frame rate.
2154         It's also responsible for sampling the test state and the corresponding
2155         frame rate.
2156         
2157         * Animometer/tests/resources/main.js: Added.
2158         (BenchmarkState): Tracks the state of the benchmark test.
2159         (BenchmarkState.prototype._timeOffset): Returns the timeOffset of a stage.
2160         (BenchmarkState.prototype._message): Returns the message of a stage.
2161         (BenchmarkState.prototype.update): Sets the currentTimeOffset to a new value.
2162         (BenchmarkState.prototype.samplingTimeOffset): Returns the timeOffset of the sampling stage.
2163         (BenchmarkState.prototype.currentStage): Returns the current stage of the benchmark.
2164         (BenchmarkState.prototype.currentMessage): Returns the message of the current stage and timeOffset.
2165         (BenchmarkState.prototype.currentProgress): Returns a percentage of how much the benchmark is running.
2166         
2167         (Animator): Manages animating the test.
2168         (Animator.prototype.start): Called if animating using setInterval is requested.
2169         (Animator.prototype.timeDelta): Returns the current timeDelta 
2170         (Animator.prototype.animate): Manages the test animation.
2171         (Animator.prototype.animateLoop): Called if animating using requestAnimationFrame is requested. 
2172
2173         (Benchmark): Manages running the test benchmark and recording the sampled data.
2174         (Benchmark.prototype.start): Starts the benchmark.
2175         (Benchmark.prototype.update): Called from the animator.animate() to change the complexity of the test.
2176         (Benchmark.prototype.record): Shows the current (not final) results of the benchmark.
2177         (Benchmark.prototype.resolveWhenFinished): Spins until the benchmark is finished and returns its results.
2178         (Benchmark.prototype.run): Starts the test, runs it, waits until it is finished and return its results.
2179         (window.runBenchmark): Called from the benchmark runner through the suite controller run-callback.
2180
2181         * Animometer/tests/resources/math.js: Added.
2182         (Matrix): A matrix object.
2183         (Vector3): A vector of size 3 object.
2184         (Matrix3): A matrix of size 3x3 object.
2185         
2186         (PIDController): Closed-loop controller for a set-point y.
2187         (PIDController.prototype._sat): Limits the output to a certain range.
2188         (PIDController.prototype.tune): Given the current output of a system, it produces a new pid value for tuning it.
2189         
2190         (KalmanEstimator): Implement Kalman filter to get an estimate for a sampled data point.
2191         (KalmanEstimator.prototype.estimate): Returns an estimate for for a sampled data point.
2192
2193         * Animometer/tests/resources/utilities.js: Added.
2194         (window.Utilities._parse): Given a separator character, it pareses a string to a set of <key, value> pairs.
2195         (window.Utilities.parseParameters): Parses a test parameters.
2196         (window.Utilities.parseArguments): Parses a tag arguments.
2197         (window.Utilities.extendObject): Adds the attributes and their values of an object to another object.
2198         (window.Utilities.copyObject): Copies the attributes and their values of an object to a new object.
2199         (window.Utilities.mergeObjects): Copies the attributes and their values of two objects to a new object.
2200         (window.Utilities.createSvgElement): Creates an SVGElement given its name and its attributes.
2201         
2202         * Animometer/tests/resources/stage.css: Added.
2203         * Animometer/tests/resources/stage.js: Added.
2204         (Rotater): Manages rotating an angle within a fixed time interval.
2205         (Rotater.prototype.get interval): Returns the time interval which is required to rotate 360 degrees.
2206         (Rotater.prototype.next): Moves the current time by a delta.
2207         (Rotater.prototype.degree): Returns the current rotating degree.
2208         (Rotater.prototype.rotateZ): Returns CSS formatted transform rotateZ() string for the current degree.
2209         (Rotater.prototype.rotate): Returns SVG formatted transform rotate() string for the current degree.
2210         
2211         (Stage): A base class for managing the test complexity and test animation.
2212         (Stage.prototype.get size): Returns the size of the stage excluding the CSS padding.
2213         (Stage.prototype.random): Returns a random float.
2214         (Stage.prototype.randomInt): Returns a random integer.
2215         (Stage.prototype.randomPosition): Returns a random position.
2216         (Stage.prototype.randomSquareSize): Returns a square size.
2217         (Stage.prototype.randomVelocity): Returns a random velocity.
2218         (Stage.prototype.randomAngle): Returns a random angle.
2219         (Stage.prototype.randomColor): Returns a random color not too dark and not too light.
2220         (Stage.prototype.randomRotater): Creates a random rotater. Its velocity depends on choosing a random rotation time interval.
2221         (Stage.prototype.tune): A not-implemented version of this function.
2222         (Stage.prototype.animate): A not-implemented version of this function.
2223         (Stage.prototype.clear): Clears the stage from all its animation elements.
2224         
2225         (StageAnimator): A base class for the stage-based animators.
2226         (StageAnimator.prototype.animate): Calls Animator.animate() which updates the test page and then calls Stage.animate() to force redraw.
2227         
2228         (StageBenchmark): A base class for the stage-based benchmarks.
2229         (StageBenchmark.prototype.createStage): Creates the default stage.
2230         (StageBenchmark.prototype.createAnimator): Creates the default animator.
2231         (StageBenchmark.prototype.tune): Delegates the call to stage.
2232         (StageBenchmark.prototype.clear): Delegates the call to stage.
2233         (StageBenchmark.prototype.showResults): Shows the results/progress through its recordTable and progressBar.
2234         
2235         * Animometer/tests/resources/yin-yang.png: Added.
2236         * Animometer/tests/resources/yin-yang.svg: Added.
2237         These images are shared among all the tests.
2238         
2239         * Animometer/tests/template: Added.
2240         * Animometer/tests/template/resources: Added.
2241         This directory includes template tests which do nothing. They can be used
2242         to author new tests. Animated items can be created, moved and redrawn by
2243         removing the TODO comments in the script files and writing actual code.
2244
2245         * Animometer/tests/template/template-css.html: Added.
2246         * Animometer/tests/template/template-canvas.html: Added.
2247         * Animometer/tests/template/template-svg.html: Added.
2248         Template test pages. They can be used as they are. CSS attributes or hidden
2249         elements can be added to these derived test pages if needed.
2250         
2251         * Animometer/tests/template/resources/template-css.js: Added.
2252         
2253         (TemplateCssStage): A stage to create and animate HTMLElements.
2254         (TemplateCssStage.prototype.tune): Changes the test by adding or removing elements.
2255         (TemplateCssStage.prototype.animate): Animates the test elements.
2256         (TemplateCssBenchmark): 
2257         (TemplateCssBenchmark.prototype.createStage): Creates the test stage.
2258         (window.benchmarkClient.create): Creates a benchmark of type TemplateCssBenchmark.
2259         
2260         * Animometer/tests/template/resources/template-canvas.js: Added.
2261         (TemplateCanvasObject):
2262         (TemplateCanvasObject.prototype._draw): Draws the objects on the canvas context.
2263         (TemplateCanvasObject.prototype.animate): Moves and redraws the object.
2264         (TemplateCanvasStage): A stage to create and animate drawing elements.
2265         (TemplateCanvasStage.prototype.tune): hanges the test by adding or removing elements.
2266         (TemplateCanvasStage.prototype.animate):  Animates the test elements.
2267         (TemplateCanvasAnimator.prototype.animate): Starts the animation every frame.
2268         (TemplateCanvasBenchmark): 
2269         (TemplateCanvasBenchmark.prototype.createStage): Creates a stage of type TemplateCanvasStage.
2270         (TemplateCanvasBenchmark.prototype.createAnimator): Creates a animator of type TemplateCanvasAnimator.
2271         (window.benchmarkClient.create): Creates a benchmark of type TemplateCanvasBenchmark.
2272         
2273         * Animometer/tests/template/resources/template-svg.js: Added.
2274         (TemplateSvgStage): A stage to create and animate SVGElements.
2275         (TemplateSvgStage.prototype.tune): Changes the test by adding or removing elements.
2276         (TemplateSvgStage.prototype.animate): Animates the test elements.
2277         (TemplateSvgBenchmark.prototype.createStage): Creates a stage of type TemplateSvgStage.
2278         (window.benchmarkClient.create): Creates a benchmark of type TemplateSvgBenchmark.
2279         
2280         * Animometer/tests/text: Added.
2281         * Animometer/tests/text/resources: Added.
2282         This directory includes the text animating tests which currently runs
2283         on CSS stage only.
2284         
2285         * Animometer/tests/text/layering-text.html: Added.
2286         Text test page.
2287         
2288         * Animometer/tests/text/resources/layering-text.js: Added.
2289         (LayeringTextStage): Represents the container of all the stacked text layers.
2290         (LayeringTextStage.parseTextItem): Parses a textItem which may be an opening tag, a closing tag or a self-closing tag.
2291         (LayeringTextStage.isOpeningTextItem): Returns true if the textItem is an opening tag e.g. '<ol>'.
2292         (LayeringTextStage.isClosingTextItem): Returns true if  the textItem is an closing tag e.g. '</ol>.
2293         (LayeringTextStage.textItemsFlags.LayeringTextStage.textItems.map): Calculates and stores isOpening and isClosing flags for each textItem.
2294         (LayeringTextStage.isColorableTextItem): Returns true if the textItem is self-closing tag e.g. '<p>...</p>'.
2295         (LayeringTextStage.isInsertableTextItem): Returns true if the textItems causes a new element to be added to the text layers.
2296         (LayeringTextStage.colorableTextItems.LayeringTextStage.textItemsFlags.filter): Number of colorable textItems.
2297         (LayeringTextStage.insertableTextItems.LayeringTextStage.textItemsFlags.filter): Number of insertable textItems.
2298         (LayeringTextStage.colorIndexToTextElementIndex): Maps from colorIndex [0..colorableTextItems-1] to textElementIndex [0..insertableTextItems-1].
2299         (LayeringTextStage.prototype._nextTextItem): Moves the _textItemIndex one step forward in a loop [0..LayeringTextStage.textItems.length-1].
2300         (LayeringTextStage.prototype._previousTextItem): Moves the _textItemIndex one step backward in a loop.
2301         (LayeringTextStage.prototype._pushTextElement): Creates a new textItemElement and adds it to the topmost container <div>.
2302         (LayeringTextStage.prototype._popTextElement): Removes the last textItemElement from the topmost container <div>.
2303         (LayeringTextStage.prototype._colorTextItem): Changes the background color of a single colorable textElement. The index advances in a circle [0..colorableTextItems-1].
2304         (LayeringTextStage.prototype.animate): Changes the background color and the text color of the textElements such that a redraw is enforced.
2305         (LayeringTextStage.prototype.tune): Adds or removes textElements to the stage.
2306
2307         (LayeringTextBenchmark): Runs the benchmark for the layering text test.
2308         (LayeringTextBenchmark.prototype.createStage): Creates a stage of type LayeringTextStage.
2309         (window.benchmarkClient.create): Creates a benchmark of type LayeringTextBenchmark.
2310
2311 2015-10-02  Said Abou-Hallawa  <sabouhallawa@apple.com>
2312
2313         Add shared code for a new a graphics benchmark
2314         https://bugs.webkit.org/show_bug.cgi?id=149691
2315
2316         Reviewed by Ryosuke Niwa.
2317
2318         This set of classes will be shared and used by the tests and the runner
2319         of a new graphics benchmark.
2320
2321         * Animometer/resources: Added.
2322         * Animometer/resources/algorithm.js: Added.
2323         (Array.prototype.swap): Swaps two elements in an array.
2324         (Heap): Binary Min/Max Heap object
2325         (Heap.prototype._parentIndex): Given the child node index, it returns the parent index.
2326         (Heap.prototype._leftIndex): Given the parent node index, it returns the left node index.
2327         (Heap.prototype._rightIndex): Given the parent node index, it returns the right node index.
2328         (Heap.prototype._childIndex): Given the parent node index, it returns the child index that may violate the heap property.
2329         (Heap.prototype.init): Initializes the heap state.
2330         (Heap.prototype.top): Returns the value stored at the top of the heap.
2331         (Heap.prototype.push): Pushes a new node at the top of the heap.
2332         (Heap.prototype.pop): Extracts the top node of the heap.
2333         (Heap.prototype._bubble): Fixes the heap property by moving upward.
2334         (Heap.prototype._sink): Fixes the heap property by moving downward.
2335         (Heap.prototype.str): Prints the nodes of the heap to a string.
2336         (Heap.prototype.values): Returns the last "size" heap elements values.
2337
2338         (Algorithm.createMinHeap): Creates a size-bounded min-heap object.
2339         (Algorithm.createMaxHeap): Creates a size-bounded max-heap object.
2340         
2341         * Animometer/resources/extensions.js: Added.
2342         (Point): Point object but can be used as size also.
2343         (Point.pointOnCircle): Given, the radius of the circle and the angle of the point, it returns a point object.
2344         (Point.pointOnEllipse): Given, the radiuses of the ellipse and the angle of the point, it returns a point object.
2345         (Point.prototype.get width): Should be called when the point is used as size.
2346         (Point.prototype.get height): Should be called when the point is used as size.
2347         (Point.prototype.get center): Should be called when the point is used as size.
2348         (Point.prototype.add): Returns a new point = this + other.
2349         (Point.prototype.subtract): Returns a new point = this - other.
2350         (Point.prototype.multiply): Returns a new point = this * other.
2351         (Point.prototype.move): Moves the point in a given direction, velocity, time period.
2352
2353         (Insets): Represents borders of a container.
2354         (Insets.prototype.get width): Returns left + right.
2355         (Insets.prototype.get height): Returns top + bottom.
2356
2357         (SimplePromise):
2358         (SimplePromise.prototype.then):
2359         (SimplePromise.prototype.resolve):
2360         Moved from Animometer/runner/resources/benchmark-runner.js since tests also need it.
2361
2362         (Options): Benchmark running options as they are set by the user.
2363
2364         (ProgressBar): Manages a progress bar element. The progress bar is divided into equal length ranges.
2365         (ProgressBar.prototype._progressToPercent): Converts the progress into a percentage.
2366         (ProgressBar.prototype.incRange): Moves to the next range (a range is the running time of a single test).
2367         (ProgressBar.prototype.setPos): Draws the current progress in the current range.
2368
2369         (RecordTable): Shows the results of running a benchmark in a tabular form.
2370         (RecordTable.prototype.clear): Clears the results table.
2371         (RecordTable.prototype._showTitles): Shows the header titles and appends the sub-titles to a queue.
2372         (RecordTable.prototype._showHeader): Shows the table header titles.
2373         (RecordTable.prototype._showEmpty): Shows an empty table cell.
2374         (RecordTable.prototype._showValue): Shows a number value in the results table.
2375         (RecordTable.prototype._showSamples): Shows a button for the sampled data graph.
2376         (RecordTable.prototype._showTest): Shows the results of a single test.
2377         (RecordTable.prototype._showSuite): Shows the results of a single suite.
2378         (RecordTable.prototype.showRecord): Shows a single iteration for a single test.
2379         (RecordTable.prototype.showIterations): Shows the results of all the suites of the iterations. 
2380
2381         * Animometer/resources/sampler.js: Added.
2382         (Statistics.sampleMean): Returns the sample mean.
2383         (Statistics.unbiasedSampleStandardDeviation): Returns the unbiased sample variance (i.e. with Bessel's correction)
2384         (Statistics.geometricMean): Returns the geometric mean.
2385
2386         (Experiment): Represents a sampling experiment. 
2387         (Experiment.prototype._init): Called when the object is created and when startSampling() is called.
2388         (Experiment.prototype.startSampling): Called after warmup period. Restarts collecting sampled data points.
2389         (Experiment.prototype.sample): Add a new data point.
2390         (Experiment.prototype.mean): Returns the sample mean for the current sampled data points.
2391         (Experiment.prototype.standardDeviation): Returns the sample standard deviation for the current sampled data points.
2392         (Experiment.prototype.percentage): Returns the percentage of the standard deviation divided to the mean.
2393         (Experiment.prototype.confidenceIntervalDelta): Calculates the confidence delta for the current sampled data given a confidence level.
2394         (Experiment.prototype.concern): Returns the average of the worst given percentage from the sampled data.
2395         (Experiment.prototype.score): Returns a score for the sampled data. It is the geometric mean of sampleMean and concern.
2396
2397         (Sampler): Represents a compound experiment. It manages sampling multiple data points at the same time offset.
2398         (Sampler.prototype.startSampling): Called after warming up period. Restarts collecting sampled data points.
2399         (Sampler.prototype.sample): Add a new data vector at a given time offset.
2400         
2401 2015-10-02  Said Abou-Hallawa  <sabouhallawa@apple.com>
2402
2403         Add the test runner for a new a graphics benchmark
2404         https://bugs.webkit.org/show_bug.cgi?id=149683
2405
2406         Reviewed by Ryosuke Niwa.
2407
2408         The test runner collects the selected test suites and the running options
2409         from its home page. It loops through all the tests, runs them and collects
2410         their running results. At the end, it shows summary results and a final
2411         score. It can also show a chart for a test sampled data.
2412
2413         * Animometer: Added.
2414         * Animometer/runner: Added.
2415         * Animometer/runner/resources: Added.
2416         
2417         * Animometer/runner/animometer.html: Added.
2418         * Animometer/runner/resources/animometer.css: Added.
2419         The benchmark runner page and css.
2420
2421         * Animometer/runner/resources/animometer.js: Added.
2422         (window.benchmarkRunnerClient.willAddTestFrame): Called after the test <iframe> is created.
2423         (window.benchmarkRunnerClient.didRunTest): Called after running a test is finished.
2424         (window.benchmarkRunnerClient.willStartFirstIteration): Called at the beginning before running any test.
2425         (window.benchmarkRunnerClient.didRunSuites): Called after running all tests of a suite.
2426         (window.benchmarkRunnerClient.didFinishLastIteration): Called after running the last test.
2427         
2428         (showSection): Shows a section in the animometer.html page.
2429         (startTest): Called when the "Start Test" button is clicked.
2430         (showResults): Called after finishing all the tests.
2431         (showGraph): Called when "Click..." button in the "Samples" column of the results table is clicked
2432         
2433         * Animometer/runner/resources/benchmark-runner.js: Copied from PerformanceTests/Speedometer/resources/benchmark-runner.js.
2434         (BenchmarkRunnerState): Tracks the current running <suite, test>
2435         (BenchmarkRunnerState.prototype.currentSuite): Returns the current running suite.
2436         (BenchmarkRunnerState.prototype.currentTest): Returns the current running test.
2437         (BenchmarkRunnerState.prototype.isFirstTest): Returns true if we are running the first test in the current suite.
2438         (BenchmarkRunnerState.prototype.next): Advances to the next test.
2439         (BenchmarkRunnerState.prototype.prepareCurrentTest): Creates a new <iframe> and waits for it to load a test.
2440         
2441         (BenchmarkRunner): Manages running the tests and communicating with the benchmarkRunnerClient.
2442         (BenchmarkRunner.prototype.waitForElement): Waits for an element to be created.
2443         (BenchmarkRunner.prototype._appendFrame): Creates a new <iframe> element.
2444         (BenchmarkRunner.prototype._removeFrame): Removed the current <iframe> element.
2445         (BenchmarkRunner.prototype._runTestAndRecordResults): Runs the current test and saves its results.
2446         (BenchmarkRunner.prototype.step): Either runs the current test if there is or start a new iteration.
2447         (BenchmarkRunner.prototype.runAllSteps): Loops to run all the tests and move to the next iteration.
2448         (this._runNextIteration): Starts a new iteration or show the results.
2449         (BenchmarkRunner.prototype.runMultipleIterations): Loops to run all the iterations and show the results
2450         (BenchmarkRunner.prototype._finalize): Finalizes the current iteration and starts a new one.
2451
2452         (SimplePromise): Deleted.
2453         (SimplePromise.prototype.then): Deleted.
2454         (SimplePromise.prototype.resolve): Deleted.
2455         (BenchmarkTestStep): Deleted.
2456         (Fibonacci): Deleted.
2457         SimplePromise was moved t Animometer/resources/extensions.js because it is used by the runner and the tests.
2458         
2459         (BenchmarkRunner.prototype._waitAndWarmUp): Deleted.
2460         (BenchmarkRunner.prototype._runTest): Deleted.
2461         (BenchmarkState.prototype.currentSuite): Deleted.
2462         (BenchmarkState.prototype.currentTest): Deleted.
2463         (BenchmarkState.prototype.next): Deleted.
2464         (BenchmarkState.prototype.isFirstTest): Deleted.
2465         (BenchmarkState.prototype.prepareCurrentSuite): Deleted.
2466         BenchmarkState was renamed to BenchmarkRunnerState to not be confused with the tests BenchmarkState.
2467         
2468         * Animometer/runner/resources/d3.min.js: Copied from Websites/perf.webkit.org/public/v2/js/d3/d3.min.js.
2469         Needed for drawing charts for the sampled scores and frame rates.
2470         
2471         * Animometer/runner/resources/graph.js: Added.
2472         (graph): Draws a chart for a test sampled data. It shows two y-axes: one for the animated items and the second for FPS.
2473                 
2474         * Skipped: Skip the Animometer benchmark for now.
2475
2476 2015-08-27  Csaba Osztrogonác  <ossy@webkit.org>
2477
2478         [EFL] REGRESSION(r188793): It made 200 layout tests and Bindings/event-target-wrapper.html performance test fail
2479         https://bugs.webkit.org/show_bug.cgi?id=148470
2480
2481         Unreviewed gardening, skip the hanging test to make the performance bot work.
2482
2483         * Skipped:
2484
2485 2015-08-17  Chris Dumez  <cdumez@apple.com>
2486
2487         Add performance tests for traversal of collections returned by getElementsByClassName() / getElementsByTagName()
2488         https://bugs.webkit.org/show_bug.cgi?id=148080
2489
2490         Reviewed by Antti Koivisto.
2491
2492         Add performance tests for traversal of *uncached* collections returned
2493         by getElementsByClassName() / getElementsByTagName(). These methods
2494         will soon be updated to return an HTMLCollection instead of a
2495         NodeList and we need to make sure we don't regress performance in the
2496         process.
2497
2498         * DOM/get-elements-by-class-name-traversal-uncached.html: Added.
2499         * DOM/get-elements-by-tag-name-traversal-uncached.html: Added.
2500
2501 2015-08-14  Chris Dumez  <cdumez@apple.com>
2502
2503         Add performance tests for NodeList and HTMLCollection traversal
2504         https://bugs.webkit.org/show_bug.cgi?id=148043
2505
2506         Reviewed by Gavin Barraclough.
2507
2508         Add performance tests for NodeList and HTMLCollection traversal.
2509         Ideally, those 2 tests should be as fast. However, due to inefficiencies
2510         in our HTMLCollection bindings code, the HTMLCollection tests is ~30%
2511         slower. This will be addressed in the near future.
2512
2513         * Bindings/childNodes-traversal.html: Added.
2514         * Bindings/children-traversal.html: Added.
2515
2516 2015-08-05  Myles C. Maxfield  <mmaxfield@apple.com>
2517
2518         Add a second font-fallback performance test
2519         https://bugs.webkit.org/show_bug.cgi?id=147692
2520
2521         Reviewed by Ryosuke Niwa.
2522
2523         This test is smaller, but has more realistic content. Also, it uses the "lang" attribute.
2524
2525         * Layout/font-fallback-2.html: Added.
2526         * Layout/resources/font-fallback-2.html: Added.
2527
2528 2015-07-13  Filip Pizlo  <fpizlo@apple.com>
2529
2530         Update JetStream version number to 1.1.
2531
2532         Rubber stamped by Ryosuke Niwa.
2533
2534         * JetStream/create.rb:
2535
2536 2015-06-30  Filip Pizlo  <fpizlo@apple.com>
2537
2538         Update the JetStream documentation to reflect the recent changes
2539         https://bugs.webkit.org/show_bug.cgi?id=146474
2540
2541         Reviewed by Geoffrey Garen.
2542
2543         * JetStream/create.rb: Bump the version.
2544         * JetStream/in-depth-TEMPLATE.html: Add cdjs documentation. Remove cordic documentation. Change documentation for splay and mandreel.
2545
2546 2015-06-26  Filip Pizlo  <fpizlo@apple.com>
2547
2548         [JetStream] Raise the percentile of mandreel-latency and splay-latency
2549         https://bugs.webkit.org/show_bug.cgi?id=146378
2550
2551         Reviewed by Mark Lam.
2552         
2553         The current percentile is 95%.  When I looked at the sample lists in our GC, it was
2554         clear that the worst 5% samples completely amortize our GC pauses.  Our GC pauses can
2555         be quite bad.  Clearly, splay-latency is meant to test whether we have an incremental
2556         GC that ensures that you don't have bad worst-case pauses.  But 95% is too small,
2557         because it doesn't really capture those pauses.  Raising the percentile to above 99%
2558         appears to do the trick.  99.5% or more seems like a good bet.  The trade-off there is
2559         just that if we set it too high, then we won't have enough statistics.  Doing this very
2560         clearly rewards GCs that are incremental, and punishes GCs that aren't (like ours).
2561         That's what we want, since in the future we want to use this test to guide any
2562         improvements to the worst-case performance of our GC.
2563
2564         The way that the percentile is selected will also affect mandreel-latency.  That's a
2565         good thing, because 95% is probably too low for that test as well.  That test ends up
2566         with >10k samples.  The goal of using 95% in the first place was to get enough samples
2567         to have a stable average.  But if we have >10k samples, we can push that percentile up
2568         much higher and still get good statistics while achieving the effect we want - i.e.
2569         getting the worst case.
2570
2571         I don't think that we need to do the same thing for cdjs.  That test only takes 200
2572         samples, so 95% means we report the average of the worst 10 samples.  That's probably
2573         good enough.
2574
2575         * JetStream/Octane2/base.js: Raise the percentile as described above.
2576         (BenchmarkSuite.prototype.RunSingleBenchmark):
2577         * JetStream/Reference.js: Tweak the reference times to bring the latency tests closer to 100ish on my machine.
2578         * JetStream/create.rb: Bump the version.
2579
2580 2015-06-19  Filip Pizlo  <fpizlo@apple.com>
2581
2582         Run CDjs as part of JSC stress testing
2583         https://bugs.webkit.org/show_bug.cgi?id=146174
2584
2585         Reviewed by Geoffrey Garen.
2586
2587         * JetStream/cdjs/cdjs-tests.yaml: Added. This tells JSC stress tests what tests to run. It uses new syntax ("tests" being a list) that I add in this change.
2588         * JetStream/cdjs/main.js: Mark this as a slow test.
2589         * JetStream/create.rb: Don't copy the JSC stress tests artifacts into the JetStream bundle.
2590
2591 2015-06-19  Filip Pizlo  <fpizlo@apple.com>
2592
2593         Unreviewed, fix a small indentation goof.
2594
2595         * JetStream/cdjs/motion.js:
2596         (Motion.prototype.findIntersection):
2597
2598 2015-06-19  Filip Pizlo  <fpizlo@apple.com>
2599
2600         JetStream should include a JavaScript version of the CDx real-time benchmark
2601         https://bugs.webkit.org/show_bug.cgi?id=146156
2602
2603         Reviewed by Geoffrey Garen.
2604         
2605         This adds a JavaScript port of the CDx real-time benchmark to JetStream, and retires
2606         the cordic test because it was previously the smallest and probably least interesting.
2607         
2608         The new test, "cdjs", is mostly a faithful rewrite of the Java code into JavaScript.
2609         I got the Java code from https://www.cs.purdue.edu/sss/projects/cdx/.
2610         
2611         There are some differences:
2612         
2613         - It uses RedBlackTree's for all sets and maps rather than hashtables. This is clearly
2614           more in the spirit of real-time than the CDx benchmark. FWIW, CDx used to use trees
2615           and I don't know why that changed in the latest version.
2616         
2617         - CDjs doesn't attempt to avoid memory allocations, unlike the real-time Java version.
2618           I wrote the code that I wanted to write for aesthetics, rather than the code that I
2619           would have written if I tried to write the fastest code possible. Again, I believe
2620           that this is in the spirit of CDj - it's meant to test what would happen if you wrote
2621           real-timey stuff in a high level language and actually took advantage of that
2622           language to be more productive.
2623         
2624         The test score reflects the average latency of the worst 10 samples out of 200 samples.
2625         The simulation uses 1000 aircraft, flying along paths that result in some detected
2626         collisions every once in a while. The benchmark validates its results by checking the
2627         total number of collisions detected.
2628         
2629         Apart from the integration into the JetStream harness, the CDjs directory contains a
2630         fully self-contained benchmark that could be run either in the jsc shell or in browser.
2631         
2632         This new code uses the same 3-clause BSD license as the Purdue code, and gives
2633         attribution to Purdue in almost all files. I believe that is appropriate since I wrote
2634         most of the JS files by looking at the Purdue Java code and trascribing to JavaScript.
2635         In some cases, I even copy-pasted the Java code, like the complicated math for
2636         four-dimensional intersections and voxel hashing.
2637
2638         * JetStream/CDjsSetup.js: Added.
2639         * JetStream/Octane2Setup.js:
2640         * JetStream/Reference.js:
2641         * JetStream/cdjs: Added.
2642         * JetStream/cdjs/benchmark.js: Added.
2643         (benchmark):
2644         * JetStream/cdjs/call_sign.js: Added.
2645         (CallSign):
2646         (CallSign.prototype.compareTo):
2647         (CallSign.prototype.toString):
2648         * JetStream/cdjs/collision.js: Added.
2649         (Collision):
2650         (Collision.prototype.toString):
2651         * JetStream/cdjs/collision_detector.js: Added.
2652         (CollisionDetector):
2653         (CollisionDetector.prototype.handleNewFrame.get for):
2654         (CollisionDetector.prototype.handleNewFrame):
2655         * JetStream/cdjs/constants.js: Added.
2656         * JetStream/cdjs/main.html: Added.
2657         * JetStream/cdjs/main.js: Added.
2658         * JetStream/cdjs/motion.js: Added.
2659         (Motion):
2660         (Motion.prototype.toString):
2661         (Motion.prototype.delta):
2662         (Motion.prototype.findIntersection):
2663         * JetStream/cdjs/motion_test.js: Added.
2664         (checkDoesIntersect):
2665         (checkDoesNotIntersect):
2666         (makeMotion):
2667         * JetStream/cdjs/red_black_tree.js: Added.
2668         (RedBlackTree):
2669         (RedBlackTree.):
2670         * JetStream/cdjs/red_black_tree_test.js: Added.
2671         (test):
2672         (test.):
2673         * JetStream/cdjs/reduce_collision_set.js: Added.
2674         (drawMotionOnVoxelMap):
2675         (drawMotionOnVoxelMap.):
2676         (.get reduceCollisionSet):
2677         * JetStream/cdjs/reduce_collision_set_test.js: Added.
2678         (makeMotion):
2679         (keys):
2680         (test):
2681         * JetStream/cdjs/simulator.js: Added.
2682         (Simulator):
2683         (Simulator.prototype.simulate):
2684         * JetStream/cdjs/util.js: Added.
2685         (compareNumbers):
2686         (averageAbovePercentile):
2687         (currentTime):
2688         (else.currentTime):
2689         * JetStream/cdjs/vector_2d.js: Added.
2690         (Vector2D):
2691         (Vector2D.prototype.plus):
2692         (Vector2D.prototype.minus):
2693         (Vector2D.prototype.toString):
2694         (Vector2D.prototype.compareTo):
2695         * JetStream/cdjs/vector_3d.js: Added.
2696         (Vector3D):
2697         (Vector3D.prototype.plus):
2698         (Vector3D.prototype.minus):
2699         (Vector3D.prototype.dot):
2700         (Vector3D.prototype.squaredMagnitude):
2701         (Vector3D.prototype.magnitude):
2702         (Vector3D.prototype.times):
2703         (Vector3D.prototype.as2D):
2704         (Vector3D.prototype.toString):
2705         * JetStream/create.rb:
2706         * JetStream/index-TEMPLATE.html:
2707         * JetStream/sunspider/cordic.js: Removed.
2708
2709 2015-06-17  Javier Fernandez  <jfernandez@igalia.com>
2710
2711         [CSS Grid Layout] We should add performance tests for stretching logic
2712         https://bugs.webkit.org/show_bug.cgi?id=146063
2713
2714         Reviewed by Sergio Villar Senin.
2715
2716         Added a new performance test for Grid Layout to ensure there are no
2717         regressions in the stretching alignment logic.
2718
2719         * Layout/fixed-grid-lots-of-stretched-data.html: Added.
2720
2721 2015-06-17  Javier Fernandez  <jfernandez@igalia.com>
2722
2723         [CSS Grid Layout] Performance tests are using the old syntax
2724         https://bugs.webkit.org/show_bug.cgi?id=146061
2725
2726         Reviewed by Sergio Villar Senin.
2727
2728         Adapted tests to the new grid tracks definition syntax.
2729
2730         * Layout/auto-grid-lots-of-data.html:
2731         * Layout/fixed-grid-lots-of-data.html:
2732
2733 2015-06-08  Filip Pizlo  <fpizlo@apple.com>
2734
2735         JetStream should have a more rational story for jitter-oriented latency tests
2736         https://bugs.webkit.org/show_bug.cgi?id=145762
2737
2738         Reviewed by Geoffrey Garen.
2739         
2740         JetStream has some latency tests that are meant to measure jitter.  Prior to this change, they
2741         did this by computing the RMS.  But the RMS is a pretty bad metric.  The thing that it rewards
2742         isn't really the thing that you'd want your browser to do.  These RMS-based tests involve taking
2743         the geomean of the RMS of some samples and the sample average.  The lower the geomean, the better
2744         (in the JetStream harness we then invert the scores so that higher is better, but let's ignore
2745         that for this discussion and assume that lower is better).  Here's an example of how this can go
2746         bad.  A browser that always computes a task in some horribly long time (say, 1000ms) but never
2747         varies that time will perform better than a browser that usually computes the task super quickly
2748         (say, 10ms) and sometimes just a little bit less quickly (say, 15ms).  The former browser will
2749         have an RMS of 0 and an average of 1000.  The latter will have a RMS somewhere around 3.5 and an
2750         average of 12.5 (assuming equal probability of 10ms and 15ms).  The geomean of (0, 1000) is 0.
2751         The geomean of (3.5, 12.5) is 6.6.  Lower is better, so the former browser scores higher - even
2752         though it's obviously never better to have a browser always complete a task in 1000ms when a
2753         different browser can do it in 15ms in the worst case.
2754
2755         JetStream should not have this pathology.  The right way of avoiding it is to replace RMS with
2756         some other metric of how bad things get.  A good metric is the average of the worst percentile.
2757         The worst 1% or the worst 5% would be good things to average.  This will catch cases where the VM
2758         jittered due to JIT or GC, but it never have the pathology that we end up giving the better score
2759         to a VM whose best case is worst than another VM's worst case.
2760         
2761         For now, this change uses the highest samples above the 95% percentile. I'm not yet sure if that
2762         is the best thing - it might include too many scores that are around the best-case performance -
2763         but it's certainly better than RMS and it might be good enough to keep. But because of that
2764         uncertainty, I'm setting the version to be "1.1-alpha1" to indicate that we aren't ready to
2765         release this yet.
2766
2767         * JetStream/Octane2/base.js:
2768         (.this.Setup.setup.setup):
2769         (.this.TearDown.tearDown.tearDown):
2770         (BenchmarkSuite.GeometricMeanTime):
2771         (BenchmarkSuite.AverageAbovePercentile):
2772         (BenchmarkSuite.GeometricMeanLatency):
2773         (BenchmarkSuite.prototype.NotifyStep):
2774         (BenchmarkSuite.prototype.RunSingleBenchmark):
2775         * JetStream/Octane2/mandreel.js:
2776         (setupMandreel):
2777         (updateMandreelStats):
2778         (startMandreelTimer):
2779         (latencyMandreel):
2780         (tearDownMandreel):
2781         (RMSMandreel): Deleted.
2782         * JetStream/Octane2/splay.js:
2783         (GenerateKey):
2784         (SplayUpdateStats):
2785         (InsertNewNode):
2786         (SplayTearDown):
2787         (SplayRMS): Deleted.
2788         * JetStream/create.rb:
2789
2790 2015-06-03  Zalan Bujtas  <zalan@apple.com>
2791
2792         Skip Dromaeo/jslib-modify-prototype.html for now.
2793
2794         Unreviewed gardening.
2795
2796         * Skipped:
2797
2798 2015-05-04  Filip Pizlo  <fpizlo@apple.com>
2799
2800         Large array shouldn't be slow
2801         https://bugs.webkit.org/show_bug.cgi?id=144617
2802
2803         Reviewed by Geoffrey Garen.
2804         
2805         Add the hash-map benchmark to LongSpider. LongSpider was already not a perfect match of
2806         SunSpider. It's not an official benchmark. It contains benchmarks that are relatively
2807         long-running. So, hash-map sort of belongs here.
2808
2809         * LongSpider/hash-map.js: Added.
2810         (HashMap):
2811         (HashMap.):
2812         (.get var):
2813
2814 2015-05-01  Dewei Zhu  <dewei_zhu@apple.com>
2815
2816         Fix typo bug in Speedometer/resources/main.js
2817         https://bugs.webkit.org/show_bug.cgi?id=144504
2818
2819         Reviewed by Ryosuke Niwa. 
2820
2821         * Speedometer/resources/main.js: Fix typo.
2822         (window.benchmarkClient.totalTimeInDisplayUnit):
2823
2824 2015-04-21  Ryosuke Niwa  <rniwa@webkit.org>
2825
2826         Add JetStream to PerformanceTests
2827         https://bugs.webkit.org/show_bug.cgi?id=144024
2828
2829         Rubber-stamped by Filip Pizlo.
2830
2831         * JetStream: Added.
2832         * JetStream/JetStream-Logo.png: Added.
2833         * JetStream/JetStream-Logo@2x.png: Added.
2834         * JetStream/JetStream.css: Added.
2835         * JetStream/JetStreamDriver.js: Added.
2836         * JetStream/LICENSE.txt: Added.
2837         * JetStream/LLVM-test-suite-LICENSE.txt: Added.
2838         * JetStream/Octane: Added.
2839         * JetStream/Octane/base.js: Added.
2840         * JetStream/Octane/code-load.js: Added.
2841         * JetStream/Octane2: Added.
2842         * JetStream/Octane2/base.js: Added.
2843         * JetStream/Octane2/box2d.js: Added.
2844         * JetStream/Octane2/code-load.js: Added.
2845         * JetStream/Octane2/crypto.js: Added.
2846         * JetStream/Octane2/deltablue.js: Added.
2847         * JetStream/Octane2/earley-boyer.js: Added.
2848         * JetStream/Octane2/gbemu-part1.js: Added.
2849         * JetStream/Octane2/gbemu-part2.js: Added.
2850         * JetStream/Octane2/mandreel.js: Added.
2851         * JetStream/Octane2/navier-stokes.js: Added.
2852         * JetStream/Octane2/pdfjs.js: Added.
2853         * JetStream/Octane2/raytrace.js: Added.
2854         * JetStream/Octane2/regexp.js: Added.
2855         * JetStream/Octane2/richards.js: Added.
2856         * JetStream/Octane2/run.js: Added.
2857         * JetStream/Octane2/splay.js: Added.
2858         * JetStream/Octane2/typescript-compiler.js: Added.
2859         * JetStream/Octane2/typescript-input.js: Added.
2860         * JetStream/Octane2/typescript.js: Added.
2861         * JetStream/Octane2/zlib-data.js: Added.
2862         * JetStream/Octane2/zlib.js: Added.
2863         * JetStream/Octane2Setup.js: Added.
2864         * JetStream/OctaneSetup.js: Added.
2865         * JetStream/README: Added.
2866         * JetStream/Reference.js: Added.
2867         * JetStream/SimpleSetup.js: Added.
2868         * JetStream/SunSpiderSetup.js: Added.
2869         * JetStream/Swoosh.png: Added.
2870         * JetStream/Swoosh@2x.png: Added.
2871         * JetStream/TestingSetup.js: Added.
2872         * JetStream/create.rb: Added.
2873         * JetStream/docs: Added.
2874         * JetStream/docs/JetStreamBlogPost.html: Added.
2875         * JetStream/in-depth-TEMPLATE.html: Added.
2876         * JetStream/index-TEMPLATE.html: Added.
2877         * JetStream/simple: Added.
2878         * JetStream/simple/bigfib.cpp: Added.
2879         * JetStream/simple/bigfib.cpp.js: Added.
2880         * JetStream/simple/container.cpp: Added.
2881         * JetStream/simple/container.cpp.js: Added.
2882         * JetStream/simple/dry.c: Added.
2883         * JetStream/simple/dry.c.js: Added.
2884         * JetStream/simple/float-mm.c: Added.
2885         * JetStream/simple/float-mm.c.js: Added.
2886         * JetStream/simple/gcc-loops.cpp: Added.
2887         * JetStream/simple/gcc-loops.cpp.js: Added.
2888         * JetStream/simple/hash-map.js: Added.
2889         * JetStream/simple/n-body.c: Added.
2890         * JetStream/simple/n-body.c.js: Added.
2891         * JetStream/simple/quicksort.c: Added.
2892         * JetStream/simple/quicksort.c.js: Added.
2893         * JetStream/simple/towers.c: Added.
2894         * JetStream/simple/towers.c.js: Added.
2895         * JetStream/sunspider: Added.
2896         * JetStream/sunspider/3d-cube.js: Added.
2897         * JetStream/sunspider/3d-raytrace.js: Added.
2898         * JetStream/sunspider/base64.js: Added.
2899         * JetStream/sunspider/cordic.js: Added.
2900         * JetStream/sunspider/crypto-aes.js: Added.
2901         * JetStream/sunspider/crypto-md5.js: Added.
2902         * JetStream/sunspider/crypto-sha1.js: Added.
2903         * JetStream/sunspider/date-format-tofte.js: Added.
2904         * JetStream/sunspider/date-format-xparb.js: Added.
2905         * JetStream/sunspider/n-body.js: Added.
2906         * JetStream/sunspider/regex-dna.js: Added.
2907         * JetStream/sunspider/tagcloud.js: Added.
2908
2909 2015-04-14  Said Abou-Hallawa  <sabouhallawa@apple.com>
2910
2911         textPath layout performance improvement.
2912         https://bugs.webkit.org/show_bug.cgi?id=141570.
2913
2914         Reviewed by Darin Adler.
2915
2916         Cut down the time spent in traversing the path for text by 50%. Instead
2917         of traversing the path twice at a certain length: one time for the position
2918         and the second time for the angle, we can merge these two passes into one.
2919
2920         * SVG/TextOnPathSimple.html: Added.
2921         * SVG/resources/TextOnPathSimple.svg: Added.
2922
2923 2015-04-13  Zalan Bujtas  <zalan@apple.com>
2924
2925         Clear up the test content when test is done.
2926
2927         Unreviewed fix.
2928
2929         * Layout/simple-line-layout-innertext.html:
2930
2931 2015-04-09  Zalan Bujtas  <zalan@apple.com>
2932
2933         Simple line layout(regression): Calling innerText on RenderFlow with multiple children is slow.
2934         https://bugs.webkit.org/show_bug.cgi?id=143554
2935
2936         Reviewed by Antti Koivisto.
2937
2938         Initialize render flow's segments only when the render flow changes in TextIterator.
2939         The included performance test shows 6x speedup. (from ~10 runs/sec to ~60 runs/sec)
2940
2941         * Layout/simple-line-layout-innertext.html: Added.
2942
2943 2015-03-09  Chris Dumez  <cdumez@apple.com>
2944
2945         [CG] Have Canvas use the IOSurfacePool
2946         https://bugs.webkit.org/show_bug.cgi?id=142417
2947         <rdar://problem/20044440>
2948
2949         Reviewed by Darin Adler.
2950
2951         Lower the number of different canvas sizes from 1000 to 100 so that
2952         the test does not require such a huge cache size. With 100, we now
2953         get over 90% cache hit rate with the default IOSurfacePool size.
2954
2955         * Canvas/reuse.html:
2956
2957 2015-01-28  Said Abou-Hallawa  <sabouhallawa@apple.com>
2958
2959         Poor performance on IE's Chalkboard benchmark.
2960         https://bugs.webkit.org/show_bug.cgi?id=140753.
2961
2962         Reviewed by Zalan Bujtas.
2963
2964         * SVG/UnderTheSeeBenchmark.html: Added
2965         * SVG/WorldcupBenchmark.html: Added.
2966         * SVG/resources/RenderAnimator.css: Added.
2967         * SVG/resources/RenderAnimator.js: Added.
2968         These are benchmarks for the SVG rendering. Mainly we want to measure how fast
2969         the SVG rendering will be when only a small part of it is drawn.
2970         
2971 2015-01-21  Geoffrey Garen  <ggaren@apple.com>
2972
2973         bmalloc: support aligned allocation
2974         https://bugs.webkit.org/show_bug.cgi?id=140732
2975
2976         Reviewed by Andreas Kling.
2977
2978         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2979         * MallocBench/MallocBench/Benchmark.cpp:
2980         * MallocBench/MallocBench/memalign.cpp:
2981         (test):
2982         (benchmark_memalign): Added a test for specific interesting memalign values.
2983
2984         * MallocBench/MallocBench/stress_aligned.cpp: Added.
2985         (benchmark_stress_aligned):
2986         * MallocBench/MallocBench/stress_aligned.h: Added. Added a stress test
2987         for arbitrary memalign values.
2988
2989 2015-01-16  Geoffrey Garen  <ggaren@apple.com>
2990
2991         bmalloc: added the tiniest bit of testing for aligned allocation
2992         https://bugs.webkit.org/show_bug.cgi?id=140573
2993
2994         Reviewed by Andreas Kling.
2995
2996         Just good enoug to catch two bugs in a preliminary implementation.
2997
2998         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2999         * MallocBench/MallocBench/Benchmark.cpp:
3000         * MallocBench/MallocBench/mbmalloc.cpp:
3001         * MallocBench/MallocBench/mbmalloc.h:
3002         * MallocBench/MallocBench/memalign.cpp: Added.
3003         (benchmark_memalign):
3004         * MallocBench/MallocBench/memalign.h: Added.
3005
3006 2014-12-09  Myles C. Maxfield  <mmaxfield@apple.com>
3007
3008         Add performance test related to font fallback
3009         https://bugs.webkit.org/show_bug.cgi?id=139332
3010
3011         Reviewed by Simon Fraser.
3012
3013         * Layout/font-fallback.html: Added.
3014         * Layout/resources/font-fallback.html: Added.
3015
3016 2014-12-08  Dean Jackson  <dino@apple.com>
3017
3018         [Apple] Use Accelerate framework to speed-up FEGaussianBlur
3019         https://bugs.webkit.org/show_bug.cgi?id=139310
3020
3021         Reviewed by Simon Fraser.
3022
3023         Add an interactive performance test that measures the speed of a set
3024         of blur operations on a generated images.
3025
3026         * Interactive/blur-filter-timing.html: Added.
3027
3028 2014-11-13  Zalan Bujtas  <zalan@apple.com>
3029
3030         Simple line layout: Add performance test case to measure line layout speed of monolithic text content.
3031         https://bugs.webkit.org/show_bug.cgi?id=138699
3032
3033         Reviewed by Antti Koivisto.
3034
3035         * Layout/line-layout-long-long-text.html: Added.
3036
3037 2014-10-22  Zalan Bujtas  <zalan@apple.com>
3038
3039         Speed up line parsing for simple line layout (part I)
3040         https://bugs.webkit.org/show_bug.cgi?id=137275
3041
3042         Reviewed by Antti Koivisto.
3043
3044         Extend simple line layout performance test with a few more cases.
3045         Now we've got:
3046         <div center
3047         <div right
3048         <div justify
3049         <div white-space: pre (new)
3050         <div overflow-wrap: break-word (new)
3051         <pre
3052         <pre white-space: pre-wrap
3053         <pre white-space: pre-line (new)
3054         <pre white-space: nowrap (new)
3055         <pre white-space: pre-wrap overflow-wrap: break-word
3056         <div + embedded <span etc.
3057         <div + br
3058
3059         * Layout/line-layout-simple.html:
3060
3061 2014-10-15  Andrei Bucur  <abucur@adobe.com>
3062
3063         [Multicol] Start adding performance tests for the multi-column implementation
3064         https://bugs.webkit.org/show_bug.cgi?id=137687
3065
3066         Reviewed by Mihnea Ovidenie.
3067
3068         This patch creates a Multicol folder inside the Layout performance tests suite. It adds only two tests
3069         as described below.
3070
3071         The tests are skipped until the implementation stabilizes.
3072
3073         * Layout/Multicol/MulticolManyColumns.html: Added.
3074         This test verifies the performance of the multi-column implementation with two nested multi-column
3075         containers, the first having 20 columns and the second 10 columns.
3076
3077         * Layout/Multicol/MulticolNested.html: Added.
3078         This test verifies the performance of nesting multi-column containers in the presence
3079         of floats.
3080
3081         * Layout/Multicol/resources/multicol-content-many-columns.html: Added.
3082         * Layout/Multicol/resources/multicol-content-nested.html: Added.
3083         * Skipped: Skip the Multicol folder for now.
3084
3085 2014-09-29  Filip Pizlo  <fpizlo@apple.com>
3086
3087         It should be fun and easy to run every possible JavaScript benchmark from the command line
3088         https://bugs.webkit.org/show_bug.cgi?id=137245
3089
3090         Reviewed by Oliver Hunt.
3091         
3092         This adds the scaffolding for running Octane version 2 inside run-jsc-benchmarks.
3093         In the future we should just land Octane2 in this directory, and run-jsc-benchmarks
3094         should be changed to point directly at this directory instead of requiring the
3095         Octane path to be configured as part of the configuration file.
3096
3097         * Octane: Added.
3098         * Octane/wrappers: Added.
3099         * Octane/wrappers/jsc-box2d.js: Added.
3100         (jscSetUp):
3101         (jscTearDown):
3102         (jscRun):
3103         * Octane/wrappers/jsc-boyer.js: Added.
3104         (jscSetUp):
3105         (jscTearDown):
3106         (jscRun):
3107         * Octane/wrappers/jsc-closure.js: Added.
3108         (jscSetUp):
3109         (jscTearDown):
3110         (jscRun):
3111         * Octane/wrappers/jsc-decrypt.js: Added.
3112         (jscSetUp):
3113         (jscTearDown):
3114         (jscRun):
3115         * Octane/wrappers/jsc-deltablue.js: Added.
3116         (jscSetUp):
3117         (jscTearDown):
3118         (jscRun):
3119         * Octane/wrappers/jsc-earley.js: Added.
3120         (jscSetUp):
3121         (jscTearDown):
3122         (jscRun):
3123         * Octane/wrappers/jsc-encrypt.js: Added.
3124         (jscSetUp):
3125         (jscTearDown):
3126         (jscRun):
3127         * Octane/wrappers/jsc-gbemu.js: Added.
3128         (jscSetUp):
3129         (jscTearDown):
3130         (jscRun):
3131         * Octane/wrappers/jsc-jquery.js: Added.
3132         (jscSetUp):
3133         (jscTearDown):
3134         (jscRun):
3135         * Octane/wrappers/jsc-mandreel.js: Added.
3136         (jscSetUp):
3137         (jscTearDown):
3138         (jscRun):
3139         * Octane/wrappers/jsc-navier-stokes.js: Added.
3140         (jscSetUp):
3141         (jscTearDown):
3142         (jscRun):
3143         * Octane/wrappers/jsc-pdfjs.js: Added.
3144         (jscSetUp.PdfJS_window.console.log):
3145         (jscSetUp):
3146         (jscTearDown):
3147         (jscRun):
3148         * Octane/wrappers/jsc-raytrace.js: Added.
3149         (jscSetUp):
3150         (jscTearDown):
3151         (jscRun):
3152         * Octane/wrappers/jsc-regexp.js: Added.
3153         (jscSetUp):
3154         (jscTearDown):
3155         (jscRun):
3156         * Octane/wrappers/jsc-richards.js: Added.
3157         (jscSetUp):
3158         (jscTearDown):
3159         (jscRun):
3160         * Octane/wrappers/jsc-splay.js: Added.
3161         (jscSetUp):
3162         (jscTearDown):
3163         (jscRun):
3164         * Octane/wrappers/jsc-typescript.js: Added.
3165         (jscSetUp):
3166         (jscTearDown):
3167         (jscRun):
3168         * Octane/wrappers/jsc-zlib.js: Added.
3169         (jscSetUp):
3170         (jscTearDown):
3171         (jscRun):
3172
3173 2014-09-28  Sungmann Cho  <sungmann.cho@navercorp.com>
3174
3175         Fix some minor typos: psuedo -> pseudo
3176         https://bugs.webkit.org/show_bug.cgi?id=137192
3177
3178         Reviewed by Alexey Proskuryakov.
3179
3180         * Speedometer/resources/todomvc/architecture-examples/emberjs/bower_components/handlebars/handlebars.js:
3181
3182 2014-09-11  Geoffrey Garen  <ggaren@apple.com>
3183
3184         Some MallocBench refinements
3185         https://bugs.webkit.org/show_bug.cgi?id=136750
3186
3187         Reviewed by Sam Weinig.
3188
3189         * MallocBench/MallocBench/Interpreter.cpp:
3190         (Interpreter::run): Allow for null entries in the object list so that
3191         we can test in modes that exclude large or small allocations.
3192
3193         * MallocBench/MallocBench/churn.cpp:
3194         (benchmark_churn):
3195         * MallocBench/MallocBench/flickr.cpp:
3196         (benchmark_flickr):
3197         * MallocBench/MallocBench/fragment.cpp:
3198         (benchmark_fragment_iterate):
3199         * MallocBench/MallocBench/list.cpp:
3200         (benchmark_list_allocate):
3201         * MallocBench/MallocBench/reddit.cpp:
3202         (benchmark_reddit): Updated test runtimes to weight them more equally,
3203         for the sake of arithmetic mean.
3204
3205         * MallocBench/MallocBench/stress.cpp:
3206         (Object::Object):
3207         (allocate):
3208         (deallocate):
3209         (benchmark_stress): Verify the contents of memory as we go. Also,
3210         force scavenging each time through the loop to test the scavenging path.
3211
3212         * MallocBench/MallocBench/theverge.cpp:
3213         (benchmark_theverge):
3214         * MallocBench/MallocBench/tree.cpp:
3215         (benchmark_tree_churn): Re-weighted, as above.
3216
3217 2014-09-08  Myles C. Maxfield  <mmaxfield@apple.com>
3218
3219         PerformanceTests/SVG/SVG-Text.html has unparsable output
3220         https://bugs.webkit.org/show_bug.cgi?id=136648
3221
3222         Reviewed by Gavi