5be89f38828f2992ca682bb4b5abf982126df817
[WebKit-https.git] / PerformanceTests / ChangeLog
1 2016-03-09  Jon Lee  <jonlee@apple.com>
2
3         Add a new image test
4         https://bugs.webkit.org/show_bug.cgi?id=155232
5
6         Reviewed by Dean Jackson.
7         Provisionally reviewed by Said Abou-Hallawa.
8
9         The image test renders PNGs and moves them with translate and rotate
10         transforms. Each particle has a lifetime, and when the lifetime ends or
11         the particle goes offscreen, it resets itself somewhere on the stage.
12
13         * Animometer/resources/debug-runner/tests.js: Remove the CSS bouncing PNG
14         images test, because this one tests the same technique.
15         * Animometer/resources/runner/tests.js: Added here as "Leaves".
16         * Animometer/tests/master/leaves.html: Added.
17         * Animometer/tests/master/resources/particles.js: Refactor out the parts
18         specific to the DOM particles test. Consequently make velocity a public
19         member.
20         (initialize): The options parameter is never used, so remove it.
21         (animate): Remove unused local variable.
22         * Animometer/tests/master/resources/leaves.js: Maintains a focal point that
23         moves back and forth across the canvas. That point affects the velocity
24         of the particles. When the focal point is on the leftmost side, it is
25         between [-6, -2], and set in reset(). When the focal point is on the rightmost
26         side, it will be from [2, 6].
27         * Animometer/tests/master/resources/dom-particles.js: Move JS specific to
28         this test here from particles.js.
29
30         New images.
31         * Animometer/tests/master/resources/compass100.png: Added.
32         * Animometer/tests/master/resources/console100.png: Added.
33         * Animometer/tests/master/resources/contribute100.png: Added.
34         * Animometer/tests/master/resources/debugger100.png: Added.
35         * Animometer/tests/master/resources/inspector100.png: Added.
36         * Animometer/tests/master/resources/layout100.png: Added.
37         * Animometer/tests/master/resources/performance100.png: Added.
38         * Animometer/tests/master/resources/script100.png: Added.
39         * Animometer/tests/master/resources/shortcuts100.png: Added.
40         * Animometer/tests/master/resources/standards100.png: Added.
41         * Animometer/tests/master/resources/storage100.png: Added.
42         * Animometer/tests/master/resources/styles100.png: Added.
43         * Animometer/tests/master/resources/timeline100.png: Added.
44
45 2016-03-03  Jon Lee  <jonlee@apple.com>
46
47         Add ability to retrieve raw data from release harness
48         https://bugs.webkit.org/show_bug.cgi?id=155026
49
50         Reviewed by Simon Fraser.
51
52         * Animometer/developer.html: Remove the special UI in the debug
53         harness.
54         * Animometer/resources/runner/animometer.css: Add styles for the
55         overlay.
56         * Animometer/resources/runner/animometer.js: Let 'j' show the JSON
57         results, but only if the overlay doesn't exist. Add 'esc' key to dismiss
58         the overlay.
59         (window.benchmarkController.selectResults): Cycle the cases around
60         so that the first 's' press selects both the benchmark score and
61         the individual test scores.
62         * Animometer/resources/debug-runner/animometer.css: Remove
63         unneeded rules.
64         * Animometer/resources/debug-runner/animometer.js: Make the same
65         call to handleKeyPress.
66
67 2016-03-03  Jon Lee  <jonlee@apple.com>
68
69         Make sure multiply test particles have at least some opacity
70         https://bugs.webkit.org/show_bug.cgi?id=155027
71
72         Reviewed by Simon Fraser.
73
74         * Animometer/tests/master/resources/multiply.js:
75         (initialize): Have the elements spin a little faster to make it
76         more obvious when the system is being stressed.
77         (_addTile):
78         (animate): Make sure each element being animated has at least 1%
79         opacity.
80
81 2016-03-03  Jon Lee  <jonlee@apple.com>
82
83         Update image test
84         https://bugs.webkit.org/show_bug.cgi?id=154962
85
86         Rubber-stamped by Darin Adler.
87
88         * Animometer/tests/master/image-data.html: Make each canvas have a compositing layer.
89         * Animometer/tests/master/resources/image-data.js:
90         (initialize): Update to load multiple images serially.
91         (_loadImage):
92         (tune): Use display instead of visibility. When showing an element anew, move it somewhere else.
93         (_createTestElement): Set up the element, refactor out placement of element to _refreshElement.
94         (_refreshElement): Place element in a tile grid.
95         (animate):
96         (_getRandomNeighboringPixelIndex): Use a more conservative distribution to make the effect last a little longer.
97         * Animometer/tests/master/resources/compass.svg: Added.
98         * Animometer/tests/master/resources/console.svg: Added.
99         * Animometer/tests/master/resources/contribute.svg: Added.
100         * Animometer/tests/master/resources/debugger.svg: Added.
101         * Animometer/tests/master/resources/inspector.svg: Added.
102         * Animometer/tests/master/resources/layout.svg: Added.
103         * Animometer/tests/master/resources/performance.svg: Added.
104         * Animometer/tests/master/resources/script.svg: Added.
105         * Animometer/tests/master/resources/shortcuts.svg: Added.
106         * Animometer/tests/master/resources/standards.svg: Added.
107         * Animometer/tests/master/resources/storage.svg: Added.
108         * Animometer/tests/master/resources/styles.svg: Added.
109         * Animometer/tests/master/resources/timeline.svg: Added.
110
111 2016-03-02  Jon Lee  <jonlee@apple.com>
112
113         Add some new controllers, and refine tests
114         https://bugs.webkit.org/show_bug.cgi?id=154914
115
116         Reviewed by Simon Fraser.
117
118         Improve tests.
119
120         * Animometer/tests/master/focus.html: Move each particle into a layer. Put the particle
121         in a container element. Expand the container element by the max blur radius, and clip
122         overflow. This way, when the blur is applied, it avoids causing layer resizes.
123         * Animometer/tests/master/resources/focus.js:
124         (FocusElement.Utilities.createClass): Create a container element, and put the particle
125         inside.
126         (hide): Set display:none.
127         (show): Set display:block.
128         (animate): Apply filters to the container element.
129         (FocusStage.call.initialize): Instead of inserting and removing elements from the DOM,
130         keep them in the stage, but set the display style instead. Use this._offsetIndex to
131         keep track of which elements are displayed.
132         (FocusStage.call.animate): Move some calculations around to avoid doing unneeded math.
133         (FocusStage.call.getBlurValue): Make sure elements are always blurred.
134         (FocusStage.call.getOpacityValue): Make sure elements have some opacity.
135         * Animometer/tests/master/resources/multiply.js: Have the particles on the edge of the
136         stage appear less black when the complexity gets large enough.
137         (tune): Have this._distanceFactor calculate the factor. Avoid calculating square root each
138         frame.
139
140 2016-03-02  Jon Lee  <jonlee@apple.com>
141
142         Add some new controllers, and refine tests
143         https://bugs.webkit.org/show_bug.cgi?id=154914
144
145         Reviewed by Simon Fraser.
146
147         Add a controller that centers around 30 fps instead of 60 fps.
148
149         * Animometer/developer.html: Add a new option.
150         * Animometer/resources/debug-runner/animometer.js:
151         * Animometer/resources/runner/animometer.js:
152         (this._processData.findRegression): When calculating the complexity-frameLength regression,
153         check the controller, and use a 30 fps baseline if needed.
154         * Animometer/resources/statistics.js:
155         (Regression.Utilities.createClass): Update to allow clients to specify the baseline
156         frame length.
157         * Animometer/tests/resources/main.js:
158         (tune): Override some of the constants in RampController. Move those constants out for
159         easier reading.
160
161         Add a fixed controller, with no step.
162
163         * Animometer/developer.html: Add a controller that takes no step.
164         * Animometer/resources/debug-runner/animometer.js:
165         * Animometer/tests/resources/main.js:
166         (Rotater.Utilities.createClass):
167
168         Switch to ramp controller as default.
169
170         * Animometer/developer.html: Increase the test length to 20 seconds.
171         * Animometer/resources/debug-runner/animometer.js: Rename the "adjustment" field to "controller"
172         since that is a more accurate description.
173         * Animometer/resources/debug-runner/graph.js:
174         * Animometer/resources/runner/animometer.js: Update preferences for release suite.
175
176 2016-02-26  Jon Lee  <jonlee@apple.com>
177
178         Address Dean's comments in 154673.
179
180         * Animometer/developer.html:
181         * Animometer/resources/debug-runner/animometer.js:
182         * Animometer/resources/debug-runner/graph.js:
183
184 2016-02-25  Jon Lee  <jonlee@apple.com>
185
186         Update animation benchmark and tests
187         https://bugs.webkit.org/show_bug.cgi?id=154673
188
189         Reviewed by Dean Jackson.
190
191         Update test visuals.
192
193         * Animometer/tests/master/resources/canvas-tests.js:
194         (CanvasLineSegment.Utilities.createClass): Line segments near the edge of the stage get clipped.
195         Update circle position and radius to minimize impact.
196         * Animometer/tests/master/resources/particles.js: Get rid of rotating gradient background, and
197         have 3 locations for emitting particles.
198         * Animometer/tests/master/resources/multiply.js: Update distance metric so that fringe tiles get
199         more color.
200         (initialize): Fix some of the math for laying out the tiles.
201         (animate): When a tile isn't used, set visibility: hidden.
202
203 2016-02-24  Jon Lee  <jonlee@apple.com>
204
205         Update animation benchmark and tests
206         https://bugs.webkit.org/show_bug.cgi?id=154673
207
208         Reviewed by Dean Jackson.
209
210         Update the ramp controller.
211
212         The controller refines the complexity interval to test across.
213
214         * Animometer/resources/statistics.js: Add functions that estimate cumulative distribution function.
215         (Regression): For the flat regression, force the first segment to be at 60 fps.
216         (valueAt): Add convenience function to return interpolated value based on the regression used.
217         (_calculateRegression): Include the number of points included for both segments, and the piecewise
218         errors.
219         * Animometer/tests/resources/math.js: Make the Kalman estimator subclass Experiment, and allow it
220         to be reset.
221
222         * Animometer/tests/resources/main.js: Initialize the tier such that it starts at 10^0 = 1.
223         Increase the number of ramps. Maintain three FPS thresholds-- the frame rate of interest, a limit
224         on the lowest FPS we care to go for later interpolation, and a minimum FPS threshold we want to
225         aim for each ramp. Also keep three estimators: a running average of the change point, a minimum
226         boundary for each ramp, and an estimator for all the frames within an interval. The first two
227         are used to determine the parameters of the next ramp, and the latter allows us to refine the
228         parameters.
229         (update): During the tier phase, it is possible that the highest complexity possible for a test
230         won't stress the system enough to trigger stopping the tier phase and transitioning to the ramps.
231         If the complexity doesn't change when going to the next tier, we've maxed the test out, and move
232         on. When the tier phase completed, turn off Controller.frameLengthEstimator, which estimates the
233         FPS at each tier.
234         (tune): At each interval, look at the confidence distribution of being on the 60 FPS side or the
235         slow side. If the slowest FPS we achieve at the ramp's maximum complexity is not at least
236         _fpsRampSlowThreshold, then increase the maximum complexity. If we ever achieve 60 FPS, increase
237         the ramp's minimum complexity to that level. If, at an even lower complexity, a glitch causes the
238         FPS to drop, we reset the minimum complexity.
239
240         Have the bootstrap calculation occur between tests. Clean up harness.
241
242         * Animometer/resources/debug-runner/animometer.js: Run bootstrap after a test has
243         completed to avoid doing all of it at the end before showing the results. Clean up
244         parameters being passed around.
245         * Animometer/resources/debug-runner/tests.js:
246         (text):
247         * Animometer/resources/runner/animometer.js:
248         (this._processData.calculateScore): Save the results to the same object holding the data.
249         (this._processData._processData): In the case where a file is dragged, calculate the score
250         serially. Grab the results object and move it to the results variable and remove it from
251         the data object. This avoids serializing the results into the JSON.
252         (this._processData.findRegression): Include the samples used for bootstrapping. Reduce the
253         resample size to shorten the wait.
254         * Animometer/resources/runner/benchmark-runner.js:
255         * Animometer/resources/statistics.js:
256         (bootstrap): Update how bootstrapData is sorted. In some regression results the mix of
257         floats and integers causes an alphabetical sort to occur.
258         * Animometer/resources/strings.js:
259
260         Add meta charset so that encodings between harness and test match.
261
262         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
263         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
264         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
265         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
266         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
267         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
268         * Animometer/tests/master/canvas-stage.html:
269         * Animometer/tests/master/focus.html:
270         * Animometer/tests/master/image-data.html:
271         * Animometer/tests/master/multiply.html:
272         * Animometer/tests/master/particles.html:
273         * Animometer/tests/misc/canvas-electrons.html:
274         * Animometer/tests/misc/canvas-stars.html:
275         * Animometer/tests/misc/compositing-transforms.html:
276         * Animometer/tests/simple/simple-canvas-paths.html:
277         * Animometer/tests/simple/tiled-canvas-image.html:
278         * Animometer/tests/template/template-canvas.html:
279         * Animometer/tests/template/template-css.html:
280         * Animometer/tests/template/template-svg.html:
281         * Animometer/tests/text/layering-text.html:
282         * Animometer/tests/text/text-boxes.html:
283
284         Update test harness reporting.
285
286         * Animometer/developer.html: Add missing meta charset.
287         * Animometer/index.html: Remove unnecessary utf-8 declaration.
288         * Animometer/resources/debug-runner/animometer.css: Add convenience classes for
289         formatting the results table.
290         * Animometer/resources/debug-runner/animometer.js: Adjust which stats are shown.
291         * Animometer/resources/debug-runner/tests.js: Display bootstrapping statistics.
292         * Animometer/resources/strings.js: Move strings not used by the release harness.
293
294         Switch to a pseudo-random number generator.
295
296         * Animometer/resources/statistics.js: Add a Pseudo class, with a simple
297         pseudo-random number generator.
298         (_calculateRegression): Reset the generator before running bootstrap.
299         (bootstrap): Deleted.
300
301         Replace Math.random with Pseudo.random.
302         * Animometer/tests/master/resources/canvas-tests.js:
303         * Animometer/tests/master/resources/focus.js:
304         * Animometer/tests/master/resources/particles.js:
305         * Animometer/tests/resources/main.js:
306
307         Use bootstrapping to get confidence interval in the breakpoint.
308
309         For the ramp controller, calculate the piecewise regression, and then use
310         bootstrapping in order to find the 95% confidence interval. Use the raw data.
311
312         * Animometer/developer.html: Default to the complexity graph. Add a legend
313         checkbox to toggle visibility of the bootstrap score and histogram.
314         * Animometer/resources/debug-runner/animometer.css: Make some more space to show
315         the old raw and average scores in the legend. Add new styles for the data.
316         * Animometer/resources/debug-runner/graph.js:
317         (_addRegressionLine): Allow passing an array for the variance bar tied to the
318         regression line. Now |stdev| is |range|.
319         (createComplexityGraph): Add bootstrap median, and overlay a histogram of
320         the bootstrap samples. Switch raw samples from circles to X's.
321         (onComplexityGraphOptionsChanged): Allow toggling of the bootstrap data.
322         (onGraphTypeChanged): Move the regressions for the raw and average samples to the
323         legend. In the subtitle use the bootstrap median, and include the 95% confidence
324         interval.
325         * Animometer/resources/runner/animometer.js:
326         (this._processData.findRegression): Factor out the code that determines which
327         samples to include when calculating the piecewise regression. For series that have
328         many samples, or a wider range of recorded complexities, throw away the 2.5%
329         lowest and highest samples before calculating the regression. Keep all samples
330         if the number of samples to regress is small or the range of complexities is
331         narrow.
332         (this._processData._calculateScore): Factor out regression calculation to
333         findRegression(). Bootstrap the change point of the regression. The score is the
334         median.
335         * Animometer/resources/statistics.js:
336         (_calculateRegression): Correct an issue in the calculation of the regression, where
337         the denominator can be 0.
338         (bootstrap): Template for bootstrapping. Create a bootstrap sample array, Create
339         re-samples by random selection with replacement. Return the 95% confidence samples,
340         the bootstrap median, mean, and the data itself.
341         * Animometer/resources/strings.js: Add bootstrap.
342         * Animometer/tests/resources/main.js:
343         (processSamples): Don't prematurely cut the sample data.
344
345         Fix graph drawing.
346
347         * Animometer/resources/debug-runner/animometer.js: Add spacing in the JSON output.
348         Multiple tests output a lot of JSON and can hang when selecting JSON with no whitespace.
349         * Animometer/resources/debug-runner/animometer.css:
350         (#complexity-graph .series.raw circle): Update the color.
351         * Animometer/resources/debug-runner/graph.js: Use the FPS axis instead of the
352         complexity axis, which can vary in domain. For determining the complexity domain,
353         only use samples after samplingTimeOffset.
354
355         Allow dropping results JSON.
356
357         * Animometer/developer.html: Add a button.
358         * Animometer/resources/debug-runner/animometer.css:
359         * Animometer/resources/debug-runner/animometer.js: Read the data and go straight
360         to the dashboard. With JSON output, write out only the options and the raw data.
361
362         Teach the harness to evaluate the samples and determine the test score.
363
364         This will allow us to update how the score is calculated separately from the samples recorded.
365         This also prepares the harness to be able to accept JSON of prior runs.
366
367         * Animometer/resources/strings.js: Clean up and remove unneeded strings and reduce some of the
368         hierarchy.
369         * Animometer/resources/debug-runner/tests.js: Update to use the new strings.
370
371         * Animometer/tests/resources/main.js: Allow all controllers to show a complexity-FPS graph.
372         (_processComplexitySamples): Factor out some of the sample processing done in the ramp
373         controller for the benefit of the other controllers. |complexitySamples| contains a list of
374         samples. Sort the samples by complexity. Optionally remove the top x% of samples.
375         Group them, and calculate distribution of samples within the same complexity, and add those as
376         new entries into |complexityAverageSamples|.
377         (Controller.processSamples): Move the code responsible for determining the complexity and FPS
378         scores out to ResultsDashboard. The structure of the data returned by the controller is:
379
380         {
381             controller: [time-regression, time-regression, ...], // optional, data specific to controller
382             marks: [...],
383             samples: {                    // all of the sample data
384                 controller: [...],
385                 complexity: [...],        // processed from controller samples
386                 complexityAverage: [...], // processed from complexity samples
387             }
388         }
389
390         (AdaptiveController.processSamples): Adding the target frame length is no longer necessary; we
391         now pass the test options to the graph.
392         (Regression): Move to statistics.js.
393         * Animometer/resources/statistics.js: Move Regression to here. Add a check if the sampling range
394         only contains one sample, since we cannot calculate a regression from one sample point.
395
396         Teach the test harness to evaluate the data.
397         * Animometer/resources/runner/animometer.js:
398         (ResultsDashboard): Store the options used to run the test and the computed results/score separately
399         from the data. The results are stored as:
400
401         {
402             score: /* geomean of iteration score */,
403             iterationsResults: [
404                 {
405                     score: /* geomean of tests */,
406                     testsResults: {
407                         suiteName: {
408                             testName: {
409                                 controller: {
410                                     average:
411                                     concern:
412                                     stdev:
413                                     percent:
414                                 },
415                                 frameLength: { ... },
416                                 complexity: {
417                                     complexity:
418                                     stdev:
419                                     segment1:
420                                     segment2:
421                                 },
422                                 complexityAverage: { ... }
423                             },
424                             testName: { ... },
425                         },
426                         ... next suite ...
427                     }
428                 },
429                 { ...next iteration... }
430             ]
431         }
432
433         * Animometer/resources/debug-runner/animometer.js: Pass options around instead of relying
434         on what was selected in the form. This will later allow for dropping previous results, and
435         using those runs' options when calculating scores.
436         (ResultsTable._addGraphButton): Simplify button action by using attached test data.
437         * Animometer/resources/debug-runner/graph.js: Refactor to use the data.
438
439         Consolidate JS files, and move statistics out to a separate JS.
440
441         Preparation for having the Controller only handle recording and storage of the samples,
442         and leave the evaluation of the test score out to the harness. Move Experiment to
443         a new statistics.js, where Regression will also eventually go. Get rid of algorithm.js
444         and move it to utilities.js since the Heap is used only for Experiments.
445
446         * Animometer/tests/resources/algorithm.js: Removed. Heap is in utilities.js.
447         * Animometer/tests/resources/sampler.js: Removed. Experiment is in statistics.js,
448         Sampler in main.js.
449         * Animometer/tests/resources/main.js: Move Sampler here.
450         * Animometer/resources/statistics.js: Added. Move Statistics and Experiment here.
451         * Animometer/resources/extensions.js: Move Heap here. Attach static method to create
452         a max or min heap to Heap, instead of a new Algorithm object.
453
454         Update JS files.
455         * Animometer/developer.html:
456         * Animometer/index.html:
457         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
458         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
459         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
460         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
461         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
462         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
463         * Animometer/tests/master/canvas-stage.html:
464         * Animometer/tests/master/focus.html:
465         * Animometer/tests/master/image-data.html:
466         * Animometer/tests/master/multiply.html:
467         * Animometer/tests/master/particles.html:
468         * Animometer/tests/misc/canvas-electrons.html:
469         * Animometer/tests/misc/canvas-stars.html:
470         * Animometer/tests/misc/compositing-transforms.html:
471         * Animometer/tests/simple/simple-canvas-paths.html:
472         * Animometer/tests/simple/tiled-canvas-image.html:
473         * Animometer/tests/template/template-canvas.html:
474         * Animometer/tests/template/template-css.html:
475         * Animometer/tests/template/template-svg.html:
476         * Animometer/tests/text/layering-text.html:
477         * Animometer/tests/text/text-boxes.html:
478
479         Fix the cursor in the graph analysis when the min
480         complexity is not 0.
481
482         * Animometer/resources/debug-runner/graph.js:
483         (_addRegression):
484         (createComplexityGraph):
485
486 2016-02-23  Geoffrey Garen  <ggaren@apple.com>
487
488         Fix some issues in MallocBench
489         https://bugs.webkit.org/show_bug.cgi?id=154600
490
491         Reviewed by Oliver Hunt.
492
493         * MallocBench/MallocBench.xcodeproj/project.pbxproj: Make nimlang.ops
494         a part of the build so that it copies to the right place for execution.
495
496         * MallocBench/MallocBench/Interpreter.cpp:
497         (Interpreter::Interpreter): Don't try to open .ops files for writing
498         because we're only going to read and we might need extra permissions to
499         write.
500
501         (Interpreter::~Interpreter): Give more context when opening a file fails
502         to help with debugging.
503
504         * MallocBench/MallocBench/stress.cpp:
505         (benchmark_stress): Reduce iterations to complete in less than 10 seconds.
506
507 2016-02-23  Michael Saboff  <msaboff@apple.com>
508
509         Unreviewed change to revert extraneous changes made part of change set 196955.
510
511         * MallocBench/MallocBench/Interpreter.cpp:
512         (Interpreter::doMallocOp):
513         (Interpreter::Thread::switchTo):
514         (writeData): Deleted.
515
516 2016-02-19  Michael Saboff  <msaboff@apple.com>
517
518         MallocBench: Added recording for nimlang website, new recording details and added new options
519         https://bugs.webkit.org/show_bug.cgi?id=154485
520
521         Reviewed by Geoff Garen.
522
523         Added new capabilities to MallocBench.  These include:
524             Added a recording of http://nim-lang.org/docs/lib.html.
525             Added thread id to the recording and the ability to playback switching threads in MallocBench
526             Added aligned allocations to recordings and the ability to playback
527             Added --use-thread-id option to honor recorded thread ids
528             Added --detailed-report to output remaining allocations by size after playback
529             Added --no-warmup to not run the warm up iteration
530
531         Changed the way that options are passed down to the benchmarks.  Instead of passing individual
532         boolean or numeric option values, just pass a reference the CommandLine itself.  Each benchmark
533         can access the options that are appropriate.  The Benchmark class also uses the options for
534         is parallel, run counts and warm up.
535
536         Added thread id and aligned malloc to the Op by noticing that structure padding and Opcode allowed
537         for another 32 bits of data.  Breaking that unused 32 bits into a 16 bit thread id value and a
538         16 bit log base 2 of the alignment for aligned malloc allowed for existing recordings to playback
539         without any incompatibilities.
540
541         Threaded operation is simulated by creating threads as needed.  As long as the next Op's thread id
542         is the same as the last, operation continues as normal.  When the next Op has a different thread id,
543         we switch to that thread using the shared Op stream to continue playing back.  There is a mutex to
544         assure that only one thread is really running at a time and a condition variable used to wait
545         that the current thread id matches each block thread's thread id.  This doesn't simulate true
546         concurrent threading, but is instead plays back Ops recorded for multiple thread faithfully.
547
548         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
549         * MallocBench/MallocBench/Benchmark.cpp:
550         (deallocateHeap):
551         (Benchmark::Benchmark):
552         (Benchmark::runOnce):
553         (Benchmark::run):
554         * MallocBench/MallocBench/Benchmark.h:
555         (Benchmark::isValid):
556         * MallocBench/MallocBench/CommandLine.cpp:
557         (CommandLine::printUsage):
558         * MallocBench/MallocBench/CommandLine.h:
559         (CommandLine::isValid):
560         (CommandLine::benchmarkName):
561         (CommandLine::isParallel):
562         (CommandLine::useThreadID):
563         (CommandLine::detailedReport):
564         (CommandLine::warmUp):
565         (CommandLine::heapSize):
566         (CommandLine::runs):
567         * MallocBench/MallocBench/Interpreter.cpp:
568         (Interpreter::Interpreter):
569         (Interpreter::run):
570         (Interpreter::readOps):
571         (Interpreter::doOnSameThread):
572         (Interpreter::switchToThread):
573         (Interpreter::detailedReport):
574         (compute2toPower):
575         (writeData):
576         (Interpreter::doMallocOp):
577         (Interpreter::Thread::Thread):
578         (Interpreter::Thread::stop):
579         (Interpreter::Thread::~Thread):
580         (Interpreter::Thread::runThread):
581         (Interpreter::Thread::waitToRun):
582         (Interpreter::Thread::switchTo):
583         * MallocBench/MallocBench/Interpreter.h:
584         (Interpreter::Thread::isMainThread):
585         * MallocBench/MallocBench/alloc_free.cpp: Added.
586         (benchmark_alloc_free):
587         * MallocBench/MallocBench/alloc_free.h: Added.
588         * MallocBench/MallocBench/balloon.cpp:
589         (benchmark_balloon):
590         * MallocBench/MallocBench/balloon.h:
591         * MallocBench/MallocBench/big.cpp:
592         (benchmark_big):
593         * MallocBench/MallocBench/big.h:
594         * MallocBench/MallocBench/churn.cpp:
595         (benchmark_churn):
596         * MallocBench/MallocBench/churn.h:
597         * MallocBench/MallocBench/facebook.cpp:
598         (benchmark_facebook):
599         * MallocBench/MallocBench/facebook.h:
600         * MallocBench/MallocBench/flickr.cpp:
601         (benchmark_flickr):
602         (benchmark_flickr_memory_warning):
603         * MallocBench/MallocBench/flickr.h:
604         * MallocBench/MallocBench/fragment.cpp:
605         (validate):
606         (benchmark_fragment):
607         (benchmark_fragment_iterate):
608         * MallocBench/MallocBench/fragment.h:
609         * MallocBench/MallocBench/list.cpp:
610         (benchmark_list_allocate):
611         (benchmark_list_traverse):
612         * MallocBench/MallocBench/list.h:
613         * MallocBench/MallocBench/main.cpp:
614         (main):
615         * MallocBench/MallocBench/medium.cpp:
616         (benchmark_medium):
617         * MallocBench/MallocBench/medium.h:
618         * MallocBench/MallocBench/memalign.cpp:
619         (test):
620         (benchmark_memalign):
621         * MallocBench/MallocBench/memalign.h:
622         * MallocBench/MallocBench/message.cpp:
623         (benchmark_message_one):
624         (benchmark_message_many):
625         * MallocBench/MallocBench/message.h:
626         * MallocBench/MallocBench/nimlang.cpp: Added.
627         (benchmark_nimlang):
628         * MallocBench/MallocBench/nimlang.h: Added.
629         * MallocBench/MallocBench/nimlang.ops: Added.
630         * MallocBench/MallocBench/realloc.cpp:
631         (benchmark_realloc):
632         * MallocBench/MallocBench/realloc.h:
633         * MallocBench/MallocBench/reddit.cpp:
634         (benchmark_reddit):
635         (benchmark_reddit_memory_warning):
636         * MallocBench/MallocBench/reddit.h:
637         * MallocBench/MallocBench/stress.cpp:
638         (deallocate):
639         (benchmark_stress):
640         * MallocBench/MallocBench/stress.h:
641         * MallocBench/MallocBench/stress_aligned.cpp:
642         (benchmark_stress_aligned):
643         * MallocBench/MallocBench/stress_aligned.h:
644         * MallocBench/MallocBench/theverge.cpp:
645         (benchmark_theverge):
646         (benchmark_theverge_memory_warning):
647         * MallocBench/MallocBench/theverge.h:
648         * MallocBench/MallocBench/tree.cpp:
649         (benchmark_tree_allocate):
650         (benchmark_tree_traverse):
651         (benchmark_tree_churn):
652         * MallocBench/MallocBench/tree.h:
653         * MallocBench/run-malloc-benchmarks:
654
655 2016-02-11  Jon Lee  <jonlee@apple.com>
656
657         Fix a missing refactoring.
658
659         * Animometer/tests/master/resources/multiply.js:
660         (animate): Move to Utilities.lerp.
661         (_lerp): Deleted.
662
663 2016-02-10  Jon Lee  <jonlee@apple.com>
664
665         Add new benchmark tests.
666         https://bugs.webkit.org/show_bug.cgi?id=154063
667
668         Provisionally reviewed by Said Abou-Hallawa.
669
670         Add tests for get/put image data, filters, opacity, and css transforms.
671
672         * Animometer/resources/runner/benchmark-runner.js:
673         (_runBenchmarkAndRecordResults): Update the body background color to match that of
674         the stage.
675         (this._runNextIteration): Clear the background color style for the results page.
676         * Animometer/resources/runner/tests.js:
677         * Animometer/tests/master/focus.html: Added.
678         * Animometer/tests/master/image-data.html: Added.
679         * Animometer/tests/master/multiply.html: Added.
680         * Animometer/tests/master/resources/focus.js: Added.
681         * Animometer/tests/master/resources/image-data.js: Added.
682         * Animometer/tests/master/resources/multiply.js: Added.
683         * Animometer/tests/master/resources/stage.css: Move common styles out.
684         * Animometer/tests/resources/main.js: Update Stage.randomBool to use Math.random.
685         Add Stage.randomSign for randomly setting a direction. Add the notion of the
686         current timestamp of the test to Benchmark, since some animations cycle through
687         colors and rely on an incremental counter like the time.
688
689 2016-02-09  Said Abou-Hallawa  <sabouhallawa@apple.com>
690
691         Add internal benchmark tests for CSS mix-blend-modes and filters
692         https://bugs.webkit.org/show_bug.cgi?id=154058
693
694         Provisionally reviewed by Jon Lee.
695
696         * Animometer/resources/debug-runner/tests.js: Include the new tests in the
697         "HTML suite" of the debug runner.
698
699         * Animometer/resources/extensions.js:
700         (Utilities.browserPrefix):
701         (Utilities.setElementPrefixedProperty): Utility functions to allow setting
702         prefixed style properties.
703
704         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
705         Set the mix-blend-mode and the filter to some random values if the options
706         of the test requested that.
707
708         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
709         (parseShapeParameters): Parse the url options "blend" and "filter" and set
710         the corresponding flags.
711
712         * Animometer/tests/resources/main.js:
713         (randomStyleMixBlendMode):
714         (randomStyleFilter): Return random mix-blend-mode and filter.
715
716 2016-02-08  Jon Lee  <jonlee@apple.com>
717
718         Add a ramp controller
719         https://bugs.webkit.org/show_bug.cgi?id=154028
720
721         Provisionally reviewed by Said Abou-Hallawa.
722
723         Enhance the graph to include a complexity-fps graph, in addition
724         to the time graph.
725
726         * Animometer/developer.html: Add a ramp option.
727         * Animometer/resources/debug-runner/animometer.css: Update the style.
728         * Animometer/resources/strings.js: Flatten the Strings.text constants.
729         * Animometer/resources/debug-runner/animometer.js:
730         (ResultsTable.call._addGraphButton): Refactor.
731         (ResultsTable.call._addTest): Add regression data.
732         (benchmarkController): Add a form that allows the user to switch between the two forms,
733         Add a form that allows the user to toggle different data. Hide certain header columns
734         depending on the selected controller.
735         * Animometer/resources/debug-runner/graph.js: Add the complexity regressions.
736         * Animometer/resources/debug-runner/tests.js: Add headers for the ramp results.
737         * Animometer/resources/runner/animometer.js:
738         (ResultsTable): If a header is disabled don't include them in _flattenedHeaders.
739         * Animometer/tests/resources/main.js:
740         (Controller): Allow options to specify the capacity for sample arrays.
741         (Regression): A piecewise regression that tries to fit a slope and a flat profile.
742         (_calculateRegression): Options can fix the slope and bias when calculating the minimal
743         error. Sweep across the samples in time (which could be backward depending on the controller)
744         and calculate the intersection point.
745         (RampController): This controller assumes that the target frame rate is below
746         58 FPS. It runs in two stages. The first stage quickly determines the order of
747         magnitude of objects needed to stress the system by the setting the complexity
748         to increasingly difficult tiers. Perform a series of ramps descending from a
749         high-water mark of complexity. The complexity needed to reach the target frame
750         length is done by performing a piecewise regression on each ramp, and track a
751         running average of these values. For the next ramp, make that running average
752         the center of the ramp. With a minimum complexity of 0, the high-water mark is
753         twice that average. The score is based on the highest complexity that can
754         reach 60 fps.
755
756 2016-02-08  Jon Lee  <jonlee@apple.com>
757
758         Address Said's comments on the benchmark, and do some clean up.
759
760         * Animometer/developer.html:
761         * Animometer/resources/debug-runner/animometer.css: Add styles for averages.
762         * Animometer/resources/debug-runner/animometer.js: Use the right
763         Strings constants.
764         * Animometer/resources/debug-runner/graph.js:
765         (_addRegressionLine): Add missing code to draw the line and standard
766         deviation highlight.
767         (onGraphTypeChanged): Remove unneeded variables
768         (onTimeGraphOptionsChanged):
769         * Animometer/resources/runner/benchmark-runner.js:
770         (_runBenchmarkAndRecordResults): Rename samplers to suiteResults and
771         _suitesSamplers to _suitesResults.
772         * Animometer/tests/resources/main.js:
773         (results): Call processSamples().
774         (update): Change sampling timestamp comparison.
775         (_animateLoop): Move shouldStop call to before the update.
776         * Animometer/tests/resources/sampler.js:
777         (process): Rename to processSamples().
778
779 2016-02-07  Jon Lee  <jonlee@apple.com>
780
781         Teach Controller to measure intervals, and turn off the frame length estimator.
782
783         * Animometer/tests/resources/main.js: Default interval length is 100 ms.
784         (start): Set the first interval.
785         (_measureAndResetInterval): Reports the average frame length of the interval that just
786         completed, and sets up the next interval.
787         (update): If there is no length, then just use the estimator per frame, otherwise the
788         estimator measures per interval. Add a didFinishInterval for subclasses to process
789         prior to recording the sample. Update tune() to include whether an interval had
790         finished.
791         (StepController): Step controllers don't measure on an interval basis.
792
793 2016-02-07  Jon Lee  <jonlee@apple.com>
794
795         Minor refactoring. Rename Controller._estimator to Controller._frameLengthEstimator
796         and switch the parameters for start(), update(), and tune(), so that the timestamp
797         is first and stage is second.
798
799         * Animometer/tests/resources/main.js:
800
801 2016-02-07  Jon Lee  <jonlee@apple.com>
802
803         Move ResultsTable functionality not needed for release tests out.
804         Move reporting of score and mean to selection of the time-based graph.
805
806         * Animometer/developer.html: Rename graph-options to time-graph-options.
807         * Animometer/resources/debug-runner/animometer.js:
808         (DeveloperResultsTable): Moved from runner/animometer.js. Switch from mean
809         values to "average" objects which can hold stdev. Move graph button and
810         calculation of noisy measurements here. Sophisticated header processing
811         is not needed in release suite.
812         (populateTable): Use DeveloperResultsTable.
813         * Animometer/resources/debug-runner/graph.js: Pull time graph creation to
814         its own function, and add a new onGraphTypeChanged handler in preparation
815         of a complexity graph to be added later.
816         * Animometer/resources/runner/animometer.js:
817         (ResultsTable): Simplify to just handle test names and scores.
818
819 2016-02-07  Jon Lee  <jonlee@apple.com>
820
821         Tests: reuse objects already made.
822
823         Avoid thrash of object creation and removal by maintaining an index that
824         moves along the array as the adjust values change. If the tune value
825         requires more objects than the maximum size of the object array, then create
826         new objects. This means that the object array size never decreases.
827
828         * Animometer/tests/master/resources/canvas-stage.js: Maintain a separate
829         offsetIndex. For these tests, we want to avoid drawing the oldest objects,
830         so the scene will draw the object at offsetIndex to the end of the array.
831         (tune): Reverse the logic since "removal" of objects is much simpler and
832         involves simply changing the offsetIndex.
833         (animate): Update the for loop to draw from offsetIndex to the end.
834         (complexity): Update the definition.
835         * Animometer/tests/master/resources/canvas-tests.js: Maintain a separate
836         offsetIndex. For these tests, we want to avoid drawing the newest objects,
837         so the scene will draw the object at index 0 to the object at offsetIndex.
838         (SimpleCanvasStage.animate): Fly-by removal of local stage variable,
839         which is unneeded. Update the for loop to draw from offsetIndex to the end.
840         * Animometer/tests/simple/resources/simple-canvas-paths.js:
841         (SimpleCanvasStage.animate): Update the for loop to draw from 0 to
842         offsetIndex.
843         * Animometer/tests/simple/resources/simple-canvas.js:
844         (tune): Update logic. Here, offsetIndex represents the boundary of the last
845         index to render.
846         (animate): Update the for loop to draw from 0 to offsetIndex.
847         (complexity): Update the definition.
848
849 2016-02-07  Jon Lee  <jonlee@apple.com>
850
851         Tests: refactor and update styles.
852
853         * Animometer/tests/resources/main.js: Add helper methods that return
854         a color that hue rotates based on the date, and a counter value that
855         increases based on the date. Fix randomInt() to not bias against the min and
856         max values.
857
858         * Animometer/tests/master/resources/canvas-tests.js: Use new helper methods.
859         * Animometer/tests/master/resources/dom-particles.js: Ditto.
860         * Animometer/tests/master/resources/particles.js: Ditto.
861         * Animometer/tests/simple/resources/simple-canvas-paths.js: Refactor to
862         use a rotating color instead of a random color. The fast switching of color
863         is too vivid to watch.
864
865         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
866         (BouncingSvgParticlesStage.call.createGradient): Fix the gradient so
867         that the last stop is located at the end.
868
869 2016-02-07  Jon Lee  <jonlee@apple.com>
870
871         Refactor tune() to not return the complexity of the scene.
872
873         We have stage.complexity() now, so returning the complexity through tune
874         is unnecessary.
875
876         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
877         * Animometer/tests/master/resources/canvas-stage.js:
878         * Animometer/tests/master/resources/particles.js:
879         * Animometer/tests/misc/resources/canvas-electrons.js:
880         * Animometer/tests/misc/resources/canvas-stars.js:
881         * Animometer/tests/resources/main.js:
882         * Animometer/tests/simple/resources/simple-canvas.js:
883         * Animometer/tests/simple/resources/tiled-canvas-image.js:
884         * Animometer/tests/template/resources/template-canvas.js:
885         * Animometer/tests/template/resources/template-css.js:
886         * Animometer/tests/template/resources/template-svg.js:
887         * Animometer/tests/text/resources/layering-text.js:
888
889 2016-02-07  Jon Lee  <jonlee@apple.com>
890
891         Make the fixed controller a step controller instead. Halfway through the test
892         it will bump up the complexity 4-fold. Calculate the step timestamp using options
893         instead of a separate parameter to the Controller constructor.
894
895         * Animometer/developer.html: Change value to "step"
896         * Animometer/resources/debug-runner/animometer.js:
897         (window.suitesManager.updateEditsElementsState): Show number inputs when set to "step".
898         * Animometer/tests/resources/main.js:
899         (update): Provide a hook for subclasses to tune.
900         (StepController): Maintain a flag determining whether we've stepped, and the time
901         we should step.
902         (Benchmark): Use the new StepController.
903
904 2016-02-07  Jon Lee  <jonlee@apple.com>
905
906         Adjust the FPS graph scale.
907
908         Instead of making the FPS graph linearly scale, scale it based on the frame length,
909         but show the data in terms of FPS. Because it is inversely proportional, and most
910         of the data never gets below 20, concentrate the axis from 20-60 FPS, since otherwise
911         over half of the available graph space ends up blank.
912
913         This means we should convert all of the FPS data to frame length data.
914
915         * Animometer/resources/debug-runner/graph.js: Update the domain to be based on
916         frame length in milliseconds instead of FPS. Update the cursor to consider all of the
917         values being shown, and then pick the min and max values to represent the length of the
918         cursor.
919         * Animometer/resources/runner/animometer.js:
920         * Animometer/resources/strings.js:
921         * Animometer/tests/resources/main.js:
922         (processSamples): Add the ability to only sample a range of the data instead of everything
923         after an offset index. Update sampler to record the frame lengths instead of the frame
924         rate.
925
926 2016-02-07  Jon Lee  <jonlee@apple.com>
927
928         Add option to use different methods for retrieving a timestamp.
929
930         * Animometer/developer.html: Add performance.now and Date.now options.
931         * Animometer/resources/runner/animometer.js: Default to performance.now.
932         (window.benchmarkController.startBenchmark):
933         * Animometer/tests/resources/main.js: Tie the desired method to _getTimestamp.
934         (run): Use _getTimestamp.
935         (_animateLoop): Ditto.
936
937 2016-02-07  Jon Lee  <jonlee@apple.com>
938
939         Allow adding any number of markers to the graph. The markers can be labeled
940         and contain timestamp and sample index data. Make it a part of the controller
941         rather than keeping it in the sampler.
942
943         * Animometer/resources/debug-runner/animometer.css: Add styles for markers
944         * Animometer/resources/debug-runner/graph.js: Create the markers and add
945         text labels.
946         * Animometer/resources/runner/animometer.js: Assume the samplingTimeOffset
947         is just one of the marks provided.
948         * Animometer/resources/strings.js: Add Strings.json.marks.
949         * Animometer/tests/resources/main.js:
950         (Controller): Keep marks here. They are keyed by the marker name, so no two
951         markers should have the same name.
952         (recordFirstSample): Refactor to use mark.
953         (mark): Allows for arbitrary data if needed later. The timestamp maintained
954         is relative to the absolute start timestamp.
955         (containsMark): Checks whether a mark with a specific comment exists.
956         (processSamples): Removes the _startTimestamp offset from the marks before
957         setting it in results.
958         * Animometer/tests/resources/sampler.js: Remove marks.
959
960 2016-02-07  Jon Lee  <jonlee@apple.com>
961
962         Get rid of options member variable in Benchmark.
963
964         Options are only needed when initializing the stage or benchmark, so there's no
965         need to also keep a reference to it.
966
967         * Animometer/tests/resources/main.js: Get rid of options variable in Benchmark.
968         Pass options to Controllers and Stages.
969         (Controller.Utilities.createClass):
970         (Benchmark.Utilities.createClass):
971         (get options): Deleted.
972
973         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
974         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
975         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
976         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
977         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
978         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
979         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
980         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
981         * Animometer/tests/master/resources/canvas-stage.js:
982         * Animometer/tests/master/resources/canvas-tests.js:
983         * Animometer/tests/master/resources/particles.js:
984         * Animometer/tests/misc/resources/canvas-electrons.js:
985         * Animometer/tests/misc/resources/canvas-stars.js:
986         * Animometer/tests/misc/resources/compositing-transforms.js:
987         * Animometer/tests/simple/resources/simple-canvas-paths.js:
988         * Animometer/tests/simple/resources/tiled-canvas-image.js:
989         * Animometer/tests/template/resources/template-canvas.js:
990         * Animometer/tests/template/resources/template-css.js:
991         * Animometer/tests/template/resources/template-svg.js:
992         * Animometer/tests/text/resources/layering-text.js:
993
994 2016-02-07  Jon Lee  <jonlee@apple.com>
995
996         Update how the benchmark is run
997         https://bugs.webkit.org/show_bug.cgi?id=153960
998
999         Provisionally reviewed by Said Abou-Hallawa.
1000
1001         Introduce the notion of a Controller. It is responsible for recording, updating,
1002         and processing the statistics and complexity of the benchmark. This allows
1003         plugging in different Controllers.
1004
1005         This strips most of the functionality from Animator and BenchmarkState, so fold
1006         what's left into Benchmark. Now, Benchmarks only own a stage and a controller, but
1007         are responsible for driving the animation loop.
1008
1009         Rewrite Animator._shouldRequestAnotherFrame into two different Controllers. One
1010         maintains a fixed complexity, and the other adapts the complexity to meet a
1011         fixed FPS.
1012
1013         Fix the Kalman estimator to be modeled on a scalar variable with no model.
1014
1015         * Animometer/tests/resources/main.js: Remove BenchmarkState and Animator, and
1016         replace it with a Controller. Add a FixedController and refactor the previous controller
1017         to an AdaptiveController.
1018
1019         (Controller): Controllers own the estimator and the sampler. When a new frame is
1020         displayed, the animation loop calls update(). The estimator and sampler record
1021         stats, then tune. Samplers can track multiple series of data. The basic controller
1022         tracks timestamp, complexity, and estimated frame rate.
1023                 The Kalman estimation is based on the frame length rather than the frame
1024         rate. Because FPS is inverse proportional to frame length, in the case where the measured
1025         frame length is very small, the FPS ends up being a wildly large number (in the order of
1026         600-1000 "FPS"), and it pulls the estimator up drastically enough that it takes a while
1027         for it to settle back down. Using frame length reduces the impact of these spikes.
1028                 Converging the estimation takes enough time to avoid initializing it immediately
1029         when the benchmark starts. Instead, the benchmark runs for a brief period of time (100ms)
1030         before running it in earnest. Allow controllers an opportunity to set the complexity
1031         before starting recording.
1032                 When the benchmark is complete, the controller has an opportunity to process
1033         the samples. The default implementation calculates the raw FPS based on the time
1034         difference of the samples, and calculates the complexity score. This is moved from
1035         Benchmark.processSamples.
1036
1037         (Controller): Initialize timestamps. These are at first relative to the start of the
1038         benchmark, but are offset by the absolute start time during start(). By default maintain
1039         3 data series, but subclasses can override.
1040         (start): Calls recordFirstSample() for subclasses to override if needed.
1041         (recordFirstSample): For basic controller, start sampling at the beginning.
1042         (update): Update the frame length estimator and sample.
1043         (shouldStop): Checks that the time is before _endTimestamp.
1044         (results): Returns the processed samples.
1045         (processSamples): Iterate through the sample data and collate them. Include scores.
1046
1047         (FixedComplexityController): Controller that tunes the stage to the desired complexity
1048         prior to starting, and keeps it at that complexity.
1049
1050         (AdaptiveController): Have the estimator estimate the interval frame rate instead of the
1051         raw frame rate.
1052                 The previous version of this controller ignored the frame that came after the
1053         adjustment. The raw FPS show that whatever noise the scene change adds is negligible
1054         compared to the noise of the system overall. Stop ignoring that frame and include all
1055         frames in the measurements.
1056
1057         (Benchmark): Remove dependency on animator, and instantiate a runner based on what is
1058         selected. Most of the loop's functionality is in Controller, so remove here.
1059         (Benchmark.run): Remove start() since it is only called from run(), and fold it in here.
1060         (Benchmark._animateLoop): Fold in from Animator.animateLoop. Let the benchmark run for
1061         a brief period before calling Controller.start().
1062
1063         * Animometer/tests/resources/math.js: Fix the Kalman estimator. The filter estimates
1064         a scalar variable, and makes basic assumptions regarding the model. As a result
1065         none of the linear algebra classes are needed, so remove Matrix, Vector3, and Matrix3.
1066         (SimpleKalmanEstimator): Calculate the gain based on the provided process and
1067         measurement errors.
1068         (KalmanEstimator): Deleted.
1069         (IdentityEstimator): Deleted.
1070         (PIDController): Refactor to use the Utilities.createClass() helper.
1071
1072         The Kalman filter algorithm is explained here http://greg.czerniak.info/guides/kalman1/.
1073         The state, represented by a scalar, is the estimated frame length. There is no user
1074         transition of the state, and the state is the same as the measurement. With this model,
1075         the estimation error converges, so calculate the gain ahead of time.
1076
1077         * Animometer/developer.html: Remove fixed-after-warmup since it is not useful.
1078         Replace the option to toggle the estimator, and make it possible to customize the
1079         estimator's error parameters. Show raw FPS by default, and remove interval FPS,
1080         which will be shown instead of the filtered raw FPS.
1081         * Animometer/resources/debug-runner/animometer.css: Put the header behind the graph.
1082         Remove #intervalFPS rules; move the color to #filteredFPS.
1083         * Animometer/resources/debug-runner/graph.js:
1084         (updateGraphData): Update the hr style to force the layout to be calculated
1085         correctly. Change the tick format to be in terms of seconds, since the timestamps
1086         are in milliseconds. Remove interval data.
1087         * Animometer/resources/runner/animometer.js:
1088         (window.benchmarkController.startBenchmark): Set Kalman parameters.
1089         * Animometer/resources/runner/benchmark-runner.js:
1090         (_runBenchmarkAndRecordResults): When a benchmark completes, expect it to return
1091         the final data, rather than passing a sampler from the controller. This avoids
1092         needing to expose the sampler variable in the benchmark.
1093         * Animometer/tests/resources/sampler.js:
1094         (process): Move the setting of the target frame rate to AdaptiveController.
1095
1096 2016-02-06  Jon Lee  <jonlee@apple.com>
1097
1098         Code clean up: Move Rotater function closer to Stage static methods.
1099         The Rotater is used together with those methods; keep them close.
1100
1101         * Animometer/tests/resources/main.js:
1102
1103 2016-02-06  Jon Lee  <jonlee@apple.com>
1104
1105         Update the JS includes due to ResultsTable move.
1106
1107         * Animometer/developer.html:
1108         * Animometer/index.html:
1109
1110 2016-02-06  Jon Lee  <jonlee@apple.com>
1111
1112         Move createElement and createSVGElement to Utilities.
1113
1114         * Animometer/resources/extensions.js:
1115         (Utilities.createElement): Added.
1116         (Utilities.createSVGElement): Added.
1117         (DocumentExtension.createElement): Deleted.
1118         (DocumentExtension.createSvgElement): Deleted.
1119
1120         * Animometer/resources/debug-runner/animometer.js:
1121         * Animometer/resources/runner/animometer.js:
1122         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1123         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
1124         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1125
1126 2016-02-06  Jon Lee  <jonlee@apple.com>
1127
1128         Add a convenience function for creating a class.
1129
1130         The pattern for creating a class is common enough to add as a Utilities
1131         helper function. It also makes it easy to collapse class definitions when
1132         editing.
1133
1134         * Animometer/resources/debug-runner/animometer.js: Move ProgressBar definition,
1135         since it is only used here.
1136         * Animometer/resources/runner/animometer.js: Move ResultsDashboard and
1137         ResultsTable definition, since it is only used here.
1138         * Animometer/resources/extensions.js: Move Utilities definition to the top. Convert
1139         Point, Insets, SimplePromise.
1140         (ProgressBar): Moved to animometer.js.
1141         (ResultsDashboard): Moved to animometer.js.
1142         (ResultsTable): Moved to animometer.js.
1143         * Animometer/resources/runner/benchmark-runner.js: Convert BenchmarkRunnerState,
1144         BenchmarkRunner.
1145         * Animometer/tests/resources/main.js: Convert Rotater, Stage, Animator, Benchmark.
1146         * Animometer/tests/resources/sampler.js: Convert Experiment, Sampler.
1147
1148         Convert test primitives.
1149         * Animometer/tests/master/resources/canvas-tests.js: Convert CanvasLineSegment,
1150         CanvasArc, CanvasLinePoint.
1151         * Animometer/tests/simple/resources/simple-canvas-paths.js: Convert CanvasLineSegment,
1152         CanvasLinePoint, CanvasQuadraticSegment, CanvasQuadraticPoint, CanvasBezierSegment,
1153         CanvasBezierPoint, CanvasArcToSegment, CanvasArcToSegmentFill, CanvasArcSegment,
1154         CanvasArcSegmentFill, CanvasRect, CanvasRectFill.
1155         * Animometer/tests/simple/resources/tiled-canvas-image.js: Convert CanvasImageTile.
1156
1157 2016-02-06  Jon Lee  <jonlee@apple.com>
1158
1159         Minor improvements to debug harness.
1160
1161         * Animometer/developer.html:
1162         * Animometer/resources/debug-runner/animometer.css:
1163         (#suites): Put the complexity text boxes closer to the test names.
1164         (#options):
1165         (#rawFPS circle): Make the interval FPS appear as a separate data series, with a line.
1166         (#intervalFPS path):
1167         (#intervalFPS circle):
1168         * Animometer/resources/debug-runner/animometer.js:
1169         (window.optionsManager.updateLocalStorageFromUI): Convert number inputs from text.
1170         (window.suitesManager._onChangeTestCheckbox): Refactor to take a checkbox.
1171         (window.suitesManager._createTestElement): Enhance such that typing into the complexity
1172         input will automatically select that test for running.
1173         (window.suitesManager.updateLocalStorageFromJSON): Make the harness work for private
1174         browsing.
1175         * Animometer/resources/debug-runner/graph.js: Separate the intervalFPS data, and show
1176         more accuracy in timestamps.
1177
1178 2016-02-06  Jon Lee  <jonlee@apple.com>
1179
1180         Refactor helper methods for getting random values for a stage.
1181
1182         Instead of requiring a Stage instance, just attach it to the Stage object.
1183
1184         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
1185         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1186         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1187         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1188         * Animometer/tests/master/resources/canvas-tests.js:
1189         * Animometer/tests/master/resources/particles.js:
1190         * Animometer/tests/misc/resources/canvas-electrons.js:
1191         * Animometer/tests/misc/resources/canvas-stars.js:
1192         * Animometer/tests/misc/resources/compositing-transforms.js:
1193         * Animometer/tests/resources/main.js:
1194         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1195
1196 2016-02-05  Said Abou-Hallawa  <sabouhallawa@apple.com>
1197
1198         Add a new graphics test for CanvasRenderingContext2D functions: getImageData and putImageData
1199         https://bugs.webkit.org/show_bug.cgi?id=151716
1200
1201         Reviewed by Darin Adler.
1202
1203         The purpose of this test is to measure the performance of getImageData
1204         and putImageData functions. This test draws a background on the canvas
1205         and then gets some random tiles from this background and draw them in
1206         destinations different from their original sources.
1207
1208         * Animometer/resources/debug-runner/tests.js: Adding the new test to the canvas simple tests suite.
1209
1210         * Animometer/resources/extensions.js:
1211         (Array.prototype.shuffle): Shuffles the elements of an array.
1212
1213         (Point.zero): Returns a new Point object whose x and y are equal zero.
1214         (Point.prototype.str): Used for debugging the Point object.
1215
1216         * Animometer/tests/simple/resources/tiled-canvas-image.js: Added.
1217         (CanvasImageTile):
1218         (CanvasImageTile.prototype.getImageData):
1219         (CanvasImageTile.prototype.putImageData):
1220         (Stage.call.initialize):
1221         (Stage.call._createTiles):
1222         (Stage.call._nextTilePosition):
1223         (Stage.call.tune):
1224         (Stage.call._drawBackground):
1225         (Stage.call.animate):
1226         (Stage.call.complexity):
1227         (Stage.call):
1228         * Animometer/tests/simple/tiled-canvas-image.html: Added.
1229
1230 2016-01-07  Jon Lee  <jonlee@apple.com>
1231
1232         Fix new test.
1233
1234         * Animometer/resources/runner/tests.js: Wrong URL from an
1235         old patch.
1236         * Animometer/tests/master/particles.html:
1237         * Animometer/tests/master/resources/dom-particles.js:
1238         (Particle.call.reset): Figured out a simpler way to set up
1239         the particles.
1240         (this.move.reset): Deleted.
1241         (this.move._applyAttributes): Deleted.
1242         * Animometer/tests/master/resources/particles.js:
1243         (Particle): Call move() after reset().
1244
1245 2016-01-07  Jon Lee  <jonlee@apple.com>
1246
1247         Update benchmark test suite
1248         https://bugs.webkit.org/show_bug.cgi?id=152679
1249
1250         Reviewed by Simon Fraser.
1251
1252         Add a new test. The test has a rotating background
1253         gradient, and does a better job physically simulating
1254         particles.
1255
1256         * Animometer/resources/extensions.js: Teach Point to take constants as well as other Points.
1257         (Point.prototype.length): Added.
1258         (Point.prototype.normalize): Added.
1259         * Animometer/resources/runner/tests.js: Add the test to the master suite.
1260         * Animometer/tests/master/particles.html: Added.
1261         * Animometer/tests/master/resources/particles.js: Added. Parent class for different kinds of particles.
1262         (Particle):
1263         (Particle.prototype.reset): If the particle starts slowing down in terms of its animation,
1264         reset it.
1265         (Particle.prototype.animate): Bounce off the walls elastically, and include gravity.
1266         (Particle.prototype.move): Subclasses should override.
1267         (ParticlesStage): Stage includes a rotating gradient background.
1268         * Animometer/tests/master/resources/dom-particles.js: Added. Creates a <div> and adds it to
1269         the stage.
1270         * Animometer/tests/resources/star.svg: Added.
1271
1272 2016-01-03  Jon Lee  <jonlee@apple.com>
1273
1274         Update benchmark test suite
1275         https://bugs.webkit.org/show_bug.cgi?id=152679
1276
1277         Reviewed by Simon Fraser.
1278
1279         Move algorithm.js and sampler.js to tests/ and benchmark-runner.js to runner/.
1280
1281         Needed by both harnesses.
1282         * Animometer/resources/runner/benchmark-runner.js: Renamed from PerformanceTests/Animometer/resources/debug-runner/benchmark-runner.js.
1283         * Animometer/developer.html:
1284         * Animometer/index.html:
1285
1286         Needed only by the tests. Move to tests/. Statistics, in sampler.js, is used by ResultsDashboard, so move that
1287         into extensions.js.
1288         * Animometer/resources/extensions.js:
1289         * Animometer/tests/resources/algorithm.js: Renamed from PerformanceTests/Animometer/resources/algorithm.js.
1290         * Animometer/tests/resources/sampler.js: Renamed from PerformanceTests/Animometer/resources/sampler.js.
1291         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
1292         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
1293         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
1294         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
1295         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
1296         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
1297         * Animometer/tests/master/canvas-stage.html:
1298         * Animometer/tests/misc/canvas-electrons.html:
1299         * Animometer/tests/misc/canvas-stars.html:
1300         * Animometer/tests/misc/compositing-transforms.html:
1301         * Animometer/tests/simple/simple-canvas-paths.html:
1302         * Animometer/tests/template/template-canvas.html:
1303         * Animometer/tests/template/template-css.html:
1304         * Animometer/tests/template/template-svg.html:
1305         * Animometer/tests/text/layering-text.html:
1306         * Animometer/tests/text/text-boxes.html:
1307
1308 2016-01-07  Jon Lee  <jonlee@apple.com>
1309
1310         Update benchmark test suite
1311         https://bugs.webkit.org/show_bug.cgi?id=152679
1312
1313         Reviewed by Simon Fraser.
1314
1315         Fix tests for other browsers.
1316
1317         * Animometer/resources/extensions.js:
1318         (Point.elementClientSize): Some browsers return 0 for SVG clientWidth and clientHeight.
1319         Use getBoundingClientRect() instead.
1320         * Animometer/tests/misc/resources/canvas-electrons.js:
1321         (CanvasElectron.prototype._draw): Some browsers don't support ellipse.
1322
1323 2016-01-07  Jon Lee  <jonlee@apple.com>
1324
1325         Add a waitUntilReady() step
1326         https://bugs.webkit.org/show_bug.cgi?id=152862
1327
1328         Reviewed by Simon Fraser.
1329
1330         Add a waitUntilReady() callback that lets the benchmark complete
1331         its setup before running the benchmark.
1332
1333         * Animometer/tests/resources/main.js:
1334         (Benchmark.prototype.run): First call waitUntilReady, which returns
1335         a promise. When the promise resolves, run everything that was in this
1336         function.
1337         (Benchmark.prototype.waitUntilReady): Default implementation returns
1338         a resolved promise.
1339         (Benchmark.prototype.resolveWhenFinished): Deleted.
1340         * Animometer/tests/template/resources/template-canvas.js:
1341         (new.TemplateCanvasStage.waitUntilReady): Example on how to override.
1342
1343 2016-01-03  Jon Lee  <jonlee@apple.com>
1344
1345         Update data reporting and analysis
1346         https://bugs.webkit.org/show_bug.cgi?id=152670
1347
1348         Reviewed by Simon Fraser.
1349
1350         Show new graph data. Provide controls to show different series data. Provide an
1351         interactive cursor that shows the data at a given sample.
1352
1353         * Animometer/developer.html: Add a nav section in #results. Each part of the graph
1354         has a checkbox for visual toggling, as well as companion spans to contain the data.
1355                 The numbers will always be shown even if the SVG isn't.
1356         * Animometer/resources/debug-runner/animometer.css:
1357         (#suites): Adjust spacing when doing fixed complexity.
1358         (#test-graph nav): Place the nav in the upper right corner.
1359         (#test-graph-data > svg): Fix the FPS scale from 0-60. It makes the raw FPS goes past
1360         that scale. Allow it to show.
1361         (.target-fps): Add a dotted line for where the benchmark is supposed to settle for FPS.
1362         (#cursor line): The cursor contains a line and highlight circles for the data being shown.
1363         (#cursor circle):
1364         (#complexity path): This and rules afterward are named by series type.
1365         (#complexity circle):
1366         (#filteredFPS path):
1367         (#filteredFPS circle):
1368         (#rawFPS path):
1369         (#intervalFPS circle):
1370         (.left-samples): Deleted.
1371         (.right-samples): Deleted.
1372         * Animometer/resources/debug-runner/animometer.js:
1373         (initialize): Add a "changed" listener when the checkboxes change in the nav.
1374         (onBenchmarkOptionsChanged): Renamed.
1375         (showTestGraph): All graph data is passed in as graphData instead of as arguments.
1376         * Animometer/resources/debug-runner/graph.js: Extend BenchmarkController. When showing
1377         a new graph, call updateGraphData(). It creates all of the d3 graphs. onGraphOptionsChanged()
1378         toggles the data on and off.
1379         (updateGraphData): Add the axes. Add the average lines and markers for sample time and
1380         target FPS. Add the cursor group. Use helper function addData() to add the data. On top of
1381         everything add a transparent area which will catch all of the mouse events. When the mouse
1382         moves in the graph, find the closest data point, show the data in the nav area, and highlight
1383         the data points.
1384         (addData): Adds a line and circle for each data point. Also adds a highlight cursor with a
1385         size a little larger than the circle radius for the data points.
1386         (onGraphOptionsChanged): Called when data is visually toggled.
1387         (showOrHideNodes): Helper function to toggle the .hidden class.
1388         * Animometer/resources/extensions.js:
1389         (ResultsDashboard.prototype.get data): Get rid of the arguments for _processData.
1390         (ResultsTable.prototype._addGraphButton): Shove all of the graph data into a singular object.
1391
1392         Producing the JSON can take a while with all of the data. Make it on-demand with a
1393         button.
1394
1395         * Animometer/resources/debug-runner/animometer.js:
1396         (showResults): When showing the results, don't serialize the JSON data. Move that to...
1397         (showJSONResults): ...here. Remove the button.
1398
1399         * Animometer/developer.html: Add a button. The button will remove itself and populate
1400         the textarea with the JSON data.
1401         * Animometer/resources/debug-runner/animometer.css:
1402         (.hidden): Add a universal hidden class.
1403         (#results button.small-button): Promote the small-button styles to the whole results
1404         section for use in the JSON button.
1405         (#results button.small-button:active):
1406         (#results-data button.small-button): Deleted.
1407         (#results-data button.small-button:active): Deleted.
1408
1409         Refactor how Animator does its recording.
1410
1411         * Animometer/tests/resources/math.js: Create a new, simple estimator that just returns
1412         the same interval frame rate for adjustment.
1413         * Animometer/tests/resources/main.js:
1414         (Animator): Remove _dropFrameCount, and make variables more accurate described.
1415         (Animator.prototype.initialize): Use the identity estimator instead of using a bool.
1416         (Animator.prototype._intervalTimeDelta): Rename, only used internally.
1417         (Animator.prototype._shouldRequestAnotherFrame): Assume we drop one frame for adjustment
1418         of the scene. If we are within the number of frames to measure for the interval, just
1419         record the timestamp. Otherwise we are ready to evaluate and adjust the scene. Record
1420         the interval frame rate and the estimator's frame rate.
1421
1422         Avoid processing the data through the Experiment while the test is running. Reconfigure
1423         the sampler to just record the raw samples. After the test is done, run the samples through
1424         the Experiment to get the score.
1425
1426         * Animometer/resources/sampler.js:
1427         (Experiment): Fold _init() into the constructor since nobody else will call it. This is not
1428         needed until the test concludes, so remove startSampling(). Clients should just call sample().
1429         (Sampler): Pre-allocate arrays given the number of data points being recorded, and a capacity
1430         of how many samples will be used. The processor is a called when it's time to process the data
1431         since that is the client also telling the Sampler what to record.
1432                 Introduce the notion of marks as well, which allows the client to mark when an
1433         event occurs. When we mark sample start, we can attach the timestamp there, instead of storing
1434         it separately.
1435         (Sampler.prototype.startSampling): Deleted. Clients should just call record().
1436         (Sampler.prototype.record): The data to record is passed in as variable arguments.
1437         (Sampler.prototype.mark): When adding a mark, a client needs to provide a unique string, and
1438         can provide extra data object for later retrieval.
1439         (Sampler.prototype.process): Renamed from toJSON. Trim the sampling arrays to what was used.
1440         Call the processor to process the samples.
1441         * Animometer/resources/debug-runner/benchmark-runner.js:
1442         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Call process().
1443
1444         * Animometer/resources/strings.js: Add some new strings, remove the graph ones since they are
1445         not used.
1446         * Animometer/tests/resources/main.js:
1447         (Benchmark): Create a sampler with 4 series. The maximum number of points expected is the
1448         number of seconds multiplied by 60 fps. Benchmark, as a client of the Sampler, knows about all
1449         of the data being added to the Sampler. It is added through record(), and processed through
1450         processSamples().
1451         (Benchmark.prototype.update): Mark when we've passed warmup and are starting to sample. Include
1452         the timestamp in the custom data for the mark. This avoids the need to store is separately in
1453         the Sampler. Fold what was in record() here, since nothing else needs this functionality.
1454         record() now just relays the information to the sampler.
1455         (Benchmark.prototype.record): Called by Animator, which provides the data to the sampler.
1456         Animator's calls to this is part of a later patch. Requires each stage to return its complexity.
1457         (Benchmark.prototype.processSamples): If the sampling mark exists, add it to the results.
1458                 Go through all of the samples. All samples contain a timestamp and complexity. We
1459         calculate "raw FPS" which is the time differential from the previous sample. At regular intervals
1460         the Kalman-filtered FPS and the interval average FPS are also recorded. We also create two
1461         experiments, to get the scores for the complexity and smoothed FPS, and add those samples to
1462         the experiments. Grab those scores and add them into results also.
1463
1464         Add complexity() to the tests for Benchmark.record().
1465         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1466         * Animometer/tests/misc/resources/canvas-electrons.js:
1467         * Animometer/tests/misc/resources/canvas-stars.js:
1468         * Animometer/tests/text/resources/layering-text.js:
1469
1470 2015-12-27  Jon Lee  <jonlee@apple.com>
1471
1472         Simplify the test harness
1473         https://bugs.webkit.org/show_bug.cgi?id=152562
1474
1475         Reviewed by Simon Fraser.
1476
1477         Update the simple canvas tests. For the paths, start from the center instead of the
1478         top-left corner. Instead of using a coordinate limit, use a canonized factor, and
1479         use that along both the x and y axes, so that more capable tests use more of the
1480         canvas.
1481
1482         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1483         (CanvasLinePoint): Rewrite to use the coordinate maximum factor.
1484         (CanvasQuadraticPoint): Ditto.
1485         (CanvasBezierPoint): Ditto.
1486         * Animometer/tests/simple/resources/simple-canvas.js:
1487         (tune): Calculate a factor instead of a maximum coordinate.
1488
1489 2015-12-27  Jon Lee  <jonlee@apple.com>
1490
1491         Simplify the test harness
1492         https://bugs.webkit.org/show_bug.cgi?id=152562
1493
1494         Reviewed by Simon Fraser.
1495
1496         All of the benchmarks use the default Animator(). Don't require new tests
1497         to pass a new instance, and instead just make one in the Benchmark constructor.
1498
1499         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
1500         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
1501         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
1502         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1503         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1504         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1505         * Animometer/tests/master/resources/canvas-tests.js:
1506         * Animometer/tests/misc/resources/canvas-electrons.js:
1507         * Animometer/tests/misc/resources/canvas-stars.js:
1508         * Animometer/tests/misc/resources/compositing-transforms.js:
1509         * Animometer/tests/resources/main.js:
1510         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1511         * Animometer/tests/template/resources/template-canvas.js:
1512         * Animometer/tests/template/resources/template-css.js:
1513         * Animometer/tests/template/resources/template-svg.js:
1514         * Animometer/tests/text/resources/layering-text.js:
1515         * Animometer/tests/text/resources/text-boxes.js:
1516
1517         Refactor the template.
1518
1519         * Animometer/tests/template/resources/template-canvas.js:
1520         * Animometer/tests/template/resources/template-css.js:
1521         * Animometer/tests/template/resources/template-svg.js:
1522         * Animometer/tests/template/template-canvas.html:
1523         * Animometer/tests/template/template-css.html:
1524         * Animometer/tests/template/template-svg.html:
1525
1526         Refactor the SVG suite.
1527
1528         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Move scripts to the end.
1529         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Ditto.
1530
1531         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Remove extraneous includes
1532         to stage.js.
1533         * Animometer/tests/text/text-boxes.html: Ditto.
1534
1535         BouncingCanvasParticlesBenchmark is not necessary. Use Benchmark directly when subclassing.
1536         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js: Remove
1537         BouncingCanvasParticlesBenchmark.
1538         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Use Benchmark.
1539         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Ditto.
1540
1541         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js: Require the shape
1542         in the constructor instead of having subclasses set the private variable.
1543
1544         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js: Refactor.
1545         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1546
1547         Refactor the HTML suite.
1548
1549         Move scripts to the end.
1550         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
1551         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
1552         * Animometer/tests/text/layering-text.html:
1553         * Animometer/tests/text/text-boxes.html:
1554
1555         Refactor to use the new variables.
1556         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
1557         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1558         * Animometer/tests/text/resources/layering-text.js:
1559         * Animometer/tests/text/resources/text-boxes.js:
1560
1561         Refactor the bouncing canvas tests.
1562
1563         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Move scripts to the end.
1564         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Move scripts to the end.
1565
1566         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js: Promote a few
1567         properties to "public" since they are used by subclasses.
1568         (BouncingParticlesStage): Fix the constructor, which was missing "this". Make particles
1569         "public" for subclasses.
1570         (BouncingParticlesStage.initialize): Fix the max velocity, which was accidentally changed.
1571         * Animometer/tests/misc/resources/compositing-transforms.js: Refactor.
1572
1573         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
1574         BouncingCanvasParticlesAnimator is no longer needed.
1575         (BouncingCanvasParticle): Change constructor to take a shape as a parameter instead of
1576         having subclasses set the variable.
1577
1578         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Refactor.
1579         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Refactor.
1580
1581         Move example/ files into misc/.
1582
1583         * Animometer/tests/misc/canvas-electrons.html: Renamed from PerformanceTests/Animometer/tests/examples/canvas-electrons.html.
1584         * Animometer/tests/misc/canvas-stars.html: Renamed from PerformanceTests/Animometer/tests/examples/canvas-stars.html.
1585         * Animometer/tests/misc/resources/canvas-electrons.js: Renamed from PerformanceTests/Animometer/tests/examples/resources/canvas-electrons.js.
1586         * Animometer/tests/misc/resources/canvas-stars.js: Renamed from PerformanceTests/Animometer/tests/examples/resources/canvas-stars.js.
1587
1588         * Animometer/resources/debug-runner/tests.js: Update test URLs.
1589
1590         Refactor miscellaneous suite.
1591
1592         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1593         Remove BouncingParticlesAnimator and BouncingParticleBenchmark, which are
1594         not needed.
1595         (tune): Remove console assert.
1596         * Animometer/tests/resources/main.js: Add Rotater back in from stage.js.
1597
1598         * Animometer/tests/examples/resources/canvas-electrons.js: Remove CanvasElectronsAnimator.
1599         * Animometer/tests/examples/resources/canvas-stars.js: Remove CanvasStarsAnimator.
1600         * Animometer/tests/misc/resources/compositing-transforms.js:
1601         * Animometer/tests/examples/canvas-electrons.html: Move scripts to the end.
1602         * Animometer/tests/examples/canvas-stars.html: Ditto.
1603         * Animometer/tests/misc/compositing-transforms.html: Ditto.
1604
1605         Refactor the simple suite.
1606
1607         * Animometer/tests/master/resources/canvas-stage.js:
1608         (tune): Remove coordinateMaximum since it is not needed in any
1609         of the master tests.
1610         * Animometer/tests/simple/resources/simple-canvas.js:
1611         SimpleCanvasAnimator and SimpleCanvasBenchmark are no longer
1612         needed.
1613         (tune): Manage the objects differently, but instead of duplicating
1614         all of SimpleCanvasStage here, just replace tune(). Include
1615         coordinateMaximum, and remove items from the end of the list
1616         instead of the beginning.
1617         (StageBenchmark.call.createAnimator): Deleted.
1618         (StageBenchmark.call): Deleted.
1619         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1620         * Animometer/tests/simple/simple-canvas-paths.html: Move
1621         scripts to the end.
1622
1623         Get rid of stage.js, StageAnimator, and StageBenchmark. Don't have the progress bar update during the test.
1624
1625         * Animometer/resources/debug-runner/animometer.js:
1626         (initialize): Move the setting of testsCount to the debug runner.
1627         (didRunTest): Nicer name.
1628         * Animometer/resources/debug-runner/benchmark-runner.js:
1629         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Don't pass in the progress bar to benchmarks.
1630         * Animometer/resources/extensions.js:
1631         (ProgressBar): Refactor. Make variables "private". Resetting the progress when instantiating.
1632         (ProgressBar.prototype.incrementRange): This is called every time a benchmark completes.
1633         * Animometer/resources/runner/animometer.js:
1634         (window.benchmarkRunnerClient.initialize): Remove unneeded setting of testsCount.
1635         * Animometer/resources/strings.js: These are no longer needed.
1636         * Animometer/tests/master/canvas-stage.html: Remove script inclusion. Other tests will follow.
1637         * Animometer/tests/master/resources/canvas-tests.js: Use Benchmark instead of StageBenchmark.
1638         * Animometer/tests/resources/main.js: Messages are no longer needed
1639         (Animator.prototype._shouldRequestAnotherFrame): Rename from animate(), since this method returns a boolean
1640         indicating whether another frame should be requested. Collapse the logic from StageAnimator into animateLoop.
1641         (BenchmarkState.prototype.currentStage): Deleted.
1642         (BenchmarkState.prototype.currentMessage): Deleted.
1643         (BenchmarkState.prototype.currentProgress): Deleted.
1644         (Animator.prototype.animate): Deleted.
1645         (Animator.prototype.animateLoop): The stage is animated only when we have another frame to draw.
1646         (Benchmark.prototype.record): No need to update the progress bar.
1647         * Animometer/tests/resources/stage.js: Removed. Rotater will appear in a later patch, in main.js.
1648
1649         * Animometer/resources/debug-runner/benchmark-runner.js:
1650         (BenchmarkRunner.prototype._runBenchmarkAndRecordResults): Each test is run as a benchmark.
1651         Remove the call to runBenchmark by merging the options here, and calling benchmark.run()
1652         directly.
1653
1654         Make the class relationships more easily understandable. The benchmark owns the stage,
1655         animator, and options. Make the stage and animator no longer have their own references to
1656         the options. Make Stage a first-class citizen by promoting it to main.js. Later patches
1657         will try to get rid of stage.js altogether.
1658         * Animometer/tests/resources/main.js:
1659         (Stage): Moved from stage.js.
1660         (Animator): Don't pass in benchmark and options in its constructor. It will get initialized
1661         by benchmark-related parameters in initialize().
1662         (Animator.prototype.initialize): Add a back-reference to benchmark and cache an option.
1663         (Animator.prototype.get benchmark):
1664         (Animator.prototype.animate): Refactor to use the cached option, to remove its dependency on
1665         the options dictionary.
1666         (Benchmark): Require all benchmarks to have a stage and animator. The instance will initialize
1667         them.
1668         (Benchmark.prototype.get options):
1669         (Benchmark.prototype.get stage): BenchmarkStates.stages will need to be renamed to avoid confusion.
1670         (Benchmark.prototype.get animator):
1671         (Benchmark.prototype.start):
1672         (Benchmark.prototype.update): Ask the stage directly to tune or clear instead of adding another
1673         level of indirection.
1674         (window.runBenchmark): Deleted. Remove the need for a benchmarkClient. Also remove the standalone
1675         path, since tests can be individually selected, and remove the need for runBenchmark since that is
1676         handled in BenchmarkRunner._runBenchmarkAndRecordResults.
1677         * Animometer/tests/resources/stage.js:
1678         (Stage): Deleted. Moved to main.js.
1679         (StageBenchmark): What's left is updating the progress bar; to be removed.
1680         (StageAnimator): What's left can be folded in Animator.
1681
1682         Refactor master suite.
1683         * Animometer/tests/master/resources/canvas-stage.js: This now only has SimpleCanvasStage.
1684         (animate): Push the clearRect() into each stage.
1685         (complexity):
1686         (StageBenchmark.call.createAnimator): Deleted.
1687         (StageBenchmark.call): Deleted.
1688         * Animometer/tests/master/resources/canvas-tests.js: SimpleCanvasPathStrokeStage is no longer needed.
1689         (CanvasLineSegment.prototype.draw):
1690         (CanvasArc):
1691         (CanvasLinePoint): Remove the draw call because depending on its index it either needs to be moveTo
1692         or lineTo, and it is otherwise a very small draw operation that doesn't need the overhead of the
1693         function call. Do all of the drawing through the stage.
1694
1695         Refactor the subclass pattern. Introduce Utilities.createSubclass().
1696
1697         * Animometer/resources/debug-runner/benchmark-runner.js:
1698         * Animometer/resources/extensions.js:
1699         (window.Utilities.createSubclass): Takes the super class, a function representing
1700         the class's constructor, and additional methods to attach to the new class's
1701         prototype object.
1702         * Animometer/tests/text/text-boxes.html: Remove unneeded reference to utilities.js.
1703
1704         Refactor tests.
1705         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
1706         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
1707         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
1708         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
1709         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1710         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1711         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1712         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
1713         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1714         * Animometer/tests/examples/resources/canvas-electrons.js:
1715         * Animometer/tests/examples/resources/canvas-stars.js:
1716         * Animometer/tests/master/resources/canvas-stage.js:
1717         * Animometer/tests/master/resources/canvas-tests.js:
1718         * Animometer/tests/misc/resources/compositing-transforms.js:
1719         * Animometer/tests/resources/stage.js:
1720         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1721         * Animometer/tests/simple/resources/simple-canvas.js:
1722         * Animometer/tests/template/resources/template-canvas.js:
1723         * Animometer/tests/template/resources/template-css.js:
1724         * Animometer/tests/template/resources/template-svg.js:
1725         * Animometer/tests/text/resources/layering-text.js: Reorder some of the methods
1726         and properties since they rely on each other.
1727         * Animometer/tests/text/resources/text-boxes.js:
1728
1729         * Animometer/resources/debug-runner/animometer.js: Arrange calls
1730         in the order they are evoked.
1731         * Animometer/resources/debug-runner/benchmark-runner.js:
1732         (BenchmarkRunnerState.prototype.next): Get rid of return value since
1733         no caller to next() uses it.
1734         (BenchmarkRunnerState.prototype.prepareCurrentTest): Refactor the
1735         promise to resolve simply when onload() is called instead of
1736         looking for #stage.
1737         (BenchmarkRunner.prototype._runTestAndRecordResults): Suite.run
1738         simply calls runBenchmark(). Call it directly rather than through
1739         the Suite.
1740         (BenchmarkRunner.prototype.step): Remove unused parameter in
1741         resolve callback.
1742         (BenchmarkRunner.prototype.runMultipleIterations): Use this instead
1743         of self since it is outside of the closure which needed the self
1744         variable.
1745         (resolveIfReady): Deleted.
1746         (BenchmarkRunner.prototype.waitForElement): Deleted.
1747         * Animometer/resources/runner/tests.js: prepare() and run() are
1748         no longer needed.
1749         (Suite.prototype.prepare): Deleted.
1750         (Suite.prototype.run): Deleted.
1751         * Animometer/tests/master/canvas-stage.html: Move all scripts to
1752         the end of the page.
1753
1754 2015-12-23  Simon Fraser  <simon.fraser@apple.com>
1755
1756         Add an Animometer developer test which animates text-rich boxes
1757         https://bugs.webkit.org/show_bug.cgi?id=152544
1758
1759         Reviewed by Zalan Bujtas.
1760
1761         Add a test that draws lots of international text. This is a particle test,
1762         moving the boxes around with absolution positioning.
1763
1764         * Animometer/resources/debug-runner/tests.js:
1765         * Animometer/tests/text/resources/text-boxes.js: Added.
1766         (BouncingTextBox):
1767         (BouncingTextBox.prototype._move):
1768         (BouncingTextBox.prototype.animate):
1769         (BouncingTextBoxStage):
1770         (BouncingTextBoxStage.prototype.createParticle):
1771         (BouncingTextBoxStage.prototype.particleWillBeRemoved):
1772         (BouncingTextBoxsBenchmark):
1773         (BouncingTextBoxsBenchmark.prototype.createStage):
1774         (window.benchmarkClient.create):
1775         * Animometer/tests/text/text-boxes.html: Added.
1776
1777 2015-12-23  Jon Lee  <jonlee@apple.com>
1778
1779         Split benchmark into two different pages
1780         https://bugs.webkit.org/show_bug.cgi?id=152458
1781
1782         Reviewed by Simon Fraser.
1783
1784         Add tests to 'animometer' suite.
1785
1786         * Animometer/resources/runner/tests.js:
1787         * Animometer/tests/master/canvas-stage.html: Added.
1788         * Animometer/tests/master/resources/canvas-stage.js: Added.
1789         * Animometer/tests/master/resources/canvas-tests.js: Added.
1790         * Animometer/tests/master/resources/stage.css: Added.
1791
1792 2015-12-23  Jon Lee  <jonlee@apple.com>
1793
1794         Split benchmark into two different pages
1795         https://bugs.webkit.org/show_bug.cgi?id=152458
1796
1797         Reviewed by Simon Fraser.
1798
1799         Address comments.
1800
1801         * Animometer/resources/debug-runner/benchmark-runner.js:
1802         (BenchmarkRunner.prototype._runTestAndRecordResults): When the testing is complete the frame owning the
1803         sampler goes away, and a later call to get the JSON data is no longer available. Process the data
1804         right here, instead, and just reference it when displaying the results in ResultsDashboard.prototype._processData.
1805         * Animometer/resources/extensions.js:
1806         (Array.prototype.fill.Array.prototype.fill): Add a null check. Remove braces around single-line clause.
1807         (Array.prototype.find.Array.prototype.find): Update the null check.
1808         (ResultsDashboard.prototype._processData): Use the already-processed data.
1809         * Animometer/resources/runner/animometer.css:
1810         (.frame-container > iframe): Remove calc().
1811
1812         Move Array functions to extensions.js since that is included by the harness.
1813         Add ES6 Array polyfills.
1814
1815         * Animometer/resources/algorithm.js:
1816         (Array.prototype.swap): Moved to extensions.js.
1817         * Animometer/resources/extensions.js:
1818         (Array.prototype.swap):
1819         (Array.prototype.fill): Added.
1820         (Array.prototype.find): Added.
1821
1822         Adjust styles for iPad.
1823
1824         * Animometer/resources/runner/animometer.css:
1825         (@media screen and (min-device-width: 768px)): Apply to iPad as well.
1826         (@media screen and (max-device-width: 1024px)): Update width for iPads.
1827
1828         Adjustment styles for iOS.
1829
1830         * Animometer/developer.html: Different divs contain the iframe, so use a class instead and
1831         update the style rules.
1832         * Animometer/index.html:
1833         * Animometer/resources/debug-runner/animometer.css: Remove extraneous rules.
1834         (@media screen and (min-device-width: 1800px)): Move this up.
1835         * Animometer/resources/runner/animometer.css: Add rules to accomodate iOS.
1836
1837         Get rid of prefixed flex properties for now.
1838
1839         * Animometer/resources/debug-runner/animometer.css:
1840         * Animometer/resources/runner/animometer.css:
1841
1842         Update the structure of the harness. Remove the JSON-per-test but keep
1843         the JSON of the whole test run. Use the full page in order to display
1844         the graph.
1845
1846         * Animometer/developer.html: Update several of the JS file includes to UTF-8. Remove header and footer. Test results screen includes score,
1847         average, and worst 5% statistics.
1848         * Animometer/index.html: Make structure similar to developer.html.
1849         * Animometer/resources/debug-runner/animometer.css: Remove most of the
1850         button rules since they are superfluous. Move the progress bar to the
1851         top, fixed. Update the results page rules.
1852         * Animometer/resources/debug-runner/animometer.js: Remove most of the
1853         additions to sectionsManager since they are no longer needed.
1854         (setSectionHeader): Updates header of the section.
1855         (window.suitesManager._updateStartButtonState): Update selector.
1856         (showResults): Add keypress event for selecting different data for
1857         copy/paste. Update how the results are populated. Include full test
1858         JSON in a textarea, rather than requiring a button press.
1859         (showTestGraph):
1860         * Animometer/resources/debug-runner/tests.js: Update structure of Headers. Define different kinds of headers. Headers can control their
1861         title, and the text used as the cell contents, including class name.
1862         * Animometer/resources/extensions.js:
1863         (ResultsTable): Update to include a flattened version of the headers,
1864         used while populating table contents. Remove unneeded helper functions
1865         for creating the table. Rename "show" to "add".
1866         * Animometer/resources/runner/animometer.css: Update rules to
1867         accommodate the new structure.
1868         * Animometer/resources/runner/animometer.js:
1869         (window.sectionsManager.setSectionScore): Helper function to set the
1870         score and mean for a section.
1871         (window.sectionsManager.populateTable): Helper function to set the table.
1872         (window.benchmarkController.showResults): Refactor.
1873         (window.benchmarkController.selectResults): Update selectors.
1874         * Animometer/resources/runner/tests.js: Set Headers. Debug harness
1875         extends it.
1876
1877         Update debug runner to have similar names to the basic runner. Include
1878         that page's CSS and remove extraneous CSS rules.
1879
1880         Get rid of the statistics table #record.
1881
1882         * Animometer/developer.html: Rename #home to #intro. Rename .spacer to hr.
1883         * Animometer/resources/debug-runner/animometer.css: Set to flexbox when selected.
1884         * Animometer/resources/debug-runner/animometer.js: Remove recordTable.
1885         (window.suitesManager._updateStartButtonState): Update selector to #intro.
1886         (setupRunningSectionStyle): Deleted.
1887
1888         * Animometer/resources/runner/animometer.css:
1889         (#test-container.selected): Change to flex-box only when visible.
1890
1891         Remove recordTable.
1892         * Animometer/resources/debug-runner/benchmark-runner.js:
1893         (BenchmarkRunner.prototype._runTestAndRecordResults):
1894         * Animometer/resources/runner/tests.js:
1895         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
1896         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
1897         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
1898         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
1899         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
1900         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
1901         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
1902         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
1903         * Animometer/tests/examples/resources/canvas-electrons.js:
1904         * Animometer/tests/examples/resources/canvas-stars.js:
1905         * Animometer/tests/misc/resources/compositing-transforms.js:
1906         * Animometer/tests/resources/main.js:
1907         * Animometer/tests/resources/stage.js:
1908         (StageBenchmark): Remove _recordTable.
1909         * Animometer/tests/simple/resources/simple-canvas-paths.js:
1910         * Animometer/tests/simple/resources/simple-canvas.js:
1911         * Animometer/tests/template/resources/template-canvas.js:
1912         * Animometer/tests/template/resources/template-css.js:
1913         * Animometer/tests/template/resources/template-svg.js:
1914         * Animometer/tests/text/resources/layering-text.js:
1915
1916         * Animometer/resources/debug-runner/animometer.js:
1917         (willStartFirstIteration): Fix selector, since results-table is used
1918         in multiple places, so it cannot be an id.
1919
1920         Make it possible to select the scores, or the whole table data,
1921         by cycling through different selections through key press of 's'.
1922
1923         * Animometer/resources/runner/animometer.js:
1924         (window.benchmarkController.showResults): Attach a keypress handler
1925         if it hasn't been added already.
1926         (window.benchmarkController.selectResults):
1927         * Animometer/resources/runner/tests.js: Cycle through different
1928         ranges.
1929
1930         Fix a few fly-by errors.
1931
1932         * Animometer/resources/debug-runner/benchmark-runner.js:
1933         (BenchmarkRunnerState.prototype.prepareCurrentTest): Update the frame relative path
1934         since the files are now in the top directory instead of inside runner/.
1935         (BenchmarkRunner.prototype._runTestAndRecordResults): Incorrect reference to function.
1936         (BenchmarkRunner.prototype.step): Member variable is never used.
1937
1938         A little stylistic cleanup.
1939
1940         * Animometer/resources/debug-runner/benchmark-runner.js:
1941         * Animometer/resources/extensions.js:
1942         (window.DocumentExtension.createElement):
1943         * Animometer/tests/resources/main.js:
1944         (Benchmark.prototype.record):
1945         * Animometer/tests/resources/stage.js:
1946         (StageBenchmark.prototype.showResults): Reverse progress and message.
1947         The message appears less frequently than the progress.
1948         * Animometer/tests/simple/resources/simple-canvas.js:
1949         (SimpleCanvasBenchmark): Remove unused options.
1950
1951         Add newer version of harness in a new page. Consolidate differences between the two
1952         pages.
1953
1954         * Animometer/developer.html: Include runner/animometer.js. Rename the JS function
1955         to run the benchmark to startBenchmark() instead of startTest(). Rename #running to
1956         #test-container.
1957         * Animometer/index.html: Added. Similarly calls startBenchmark() and has #test-container.
1958         * Animometer/resources/debug-runner/animometer.css: Make the canvas 2:1 (1200px x 800px)
1959         instead of 4:3.
1960
1961         Split out benchmarkRunnerClient and benchmarkController.
1962
1963         * Animometer/resources/debug-runner/animometer.js: Move needed functions out of
1964         benchmarkRunnerClient, and leave the rest here to extend that object. Get rid of _resultsTable
1965         and move populating the results table into benchmarkController. Rename _resultsDashboard
1966         to results and make it accessible for other objects to use.
1967         (willAddTestFrame): This is unnecessary. Remove.
1968
1969         (window.sectionsManager.showScore): Grab it from the results object instead of
1970         benchmarkRunnerClient.
1971         (window.sectionsManager.showSection): Deleted. Moved to runner/animometer.js.
1972
1973         (window.benchmarkController._runBenchmark): Deleted. Mostly moved into _startBenchmark.
1974         (window.benchmarkController.startBenchmark): Refactor to call _startBenchmark.
1975         (window.benchmarkController.showResults): Include most of benchmarkRunnerClient.didFinishLastIteration()
1976         here.
1977
1978         * Animometer/resources/debug-runner/benchmark-runner.js:
1979         (BenchmarkRunner.prototype._appendFrame): Remove unneeded call to willAddTestFrame.
1980         * Animometer/resources/extensions.js:
1981         (ResultsDashboard): Change the class to process the sampler data on-demand and hold onto that data
1982         for later referencing.
1983         (ResultsDashboard.prototype.toJSON): Deleted.
1984         (ResultsDashboard.prototype._processData): Rename toJSON to _processData since it's not really
1985         outputting JSON. Store the processed data into a member variable that can be referenced later.
1986         (ResultsDashboard.prototype.get data): Process the data if it hasn't already.
1987         (ResultsDashboard.prototype.get score): Process the data if it hasn't already, then return the
1988         aggregate score.
1989         (ResultsTable.prototype._showHeader): When outputting the results to a table, don't force the
1990         need for an empty children array. This was to allow for a header row in the table that spanned
1991         multiple columns. In the simpler harness, this is not needed.
1992         (ResultsTable.prototype._showEmptyCells):
1993         (ResultsTable.prototype._showTest): This hardcoded the columns. At least for the name and score,
1994         which is the bare minimum needed for the simpler harness, key off of the header name provided.
1995         * Animometer/resources/runner/animometer.css: Added. Use a similar 2:1 ratio. The score tables are
1996         split into the data and the headers, and are also displayed RTL so that a later patch allows a
1997         user to copy-paste the data easily.
1998         * Animometer/resources/runner/animometer.js: Added. Use a simpler version of benchmarkRunnerClient.
1999         The debug harness will extend these classes.
2000         (window.benchmarkController._startBenchmark): Used by both harnesses.
2001         (window.benchmarkController.startBenchmark): Set hard-coded options.
2002         (window.benchmarkController.showResults): Includes most of benchmarkRunnerClient.didFinishLastIteration()
2003         here.
2004
2005         Get rid of utilities.js. Move it all into extensions.js.
2006
2007         * Animometer/resources/extensions.js:
2008         * Animometer/tests/resources/utilities.js: Removed.
2009
2010         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Remove script link.
2011         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Ditto.
2012         * Animometer/tests/bouncing-particles/bouncing-css-images.html: Ditto.
2013         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html: Ditto.
2014         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Ditto.
2015         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Ditto.
2016         * Animometer/tests/examples/canvas-electrons.html: Ditto.
2017         * Animometer/tests/examples/canvas-stars.html: Ditto.
2018         * Animometer/tests/misc/compositing-transforms.html: Ditto.
2019         * Animometer/tests/simple/simple-canvas-paths.html: Ditto.
2020         * Animometer/tests/template/template-canvas.html: Ditto.
2021         * Animometer/tests/template/template-css.html: Ditto.
2022         * Animometer/tests/template/template-svg.html: Ditto.
2023         * Animometer/tests/text/layering-text.html: Ditto.
2024
2025         Split tests.js into two. Add a new suite to runner/tests.js.
2026
2027         * Animometer/developer.html: Update the script order. Scripts from
2028         debug-runner/ will always build on those from runner/, and have the
2029         same name.
2030         * Animometer/resources/debug-runner/tests.js: Move "complex examples"
2031         suite into "miscellaneous tests".
2032         (Suite): Deleted.
2033         (Suite.prototype.prepare): Deleted.
2034         (Suite.prototype.run): Deleted.
2035         (suiteFromName): Deleted.
2036         * Animometer/resources/runner/tests.js: Added. Take definitions and
2037         functions needed by the test harness. Leave the test suites behind.
2038         (Suite): Moved from debug script.
2039         (Suite.prototype.prepare): Ditto.
2040         (Suite.prototype.run): Ditto.
2041         (suiteFromName): Ditto.
2042         (testFromName): Ditto.
2043
2044         Move benchmark resources out into resources/debug-runner, and update URLs.
2045
2046         * Animometer/developer.html: Renamed from PerformanceTests/Animometer/runner/animometer.html.
2047         * Animometer/resources/debug-runner/animometer.css: Renamed from PerformanceTests/Animometer/runner/resources/animometer.css.
2048         * Animometer/resources/debug-runner/animometer.js: Renamed from PerformanceTests/Animometer/runner/resources/animometer.js.
2049         * Animometer/resources/debug-runner/benchmark-runner.js: Renamed from PerformanceTests/Animometer/runner/resources/benchmark-runner.js.
2050         * Animometer/resources/debug-runner/d3.min.js: Renamed from PerformanceTests/Animometer/runner/resources/d3.min.js.
2051         * Animometer/resources/debug-runner/graph.js: Renamed from PerformanceTests/Animometer/runner/resources/graph.js.
2052         * Animometer/resources/debug-runner/tests.js: Renamed from PerformanceTests/Animometer/runner/resources/tests.js.
2053
2054 2015-12-11  Jon Lee  <jonlee@apple.com>
2055
2056         Improve Animometer on iOS
2057         https://bugs.webkit.org/show_bug.cgi?id=152180
2058
2059         Reviewed by Simon Fraser.
2060
2061         Improve experience on phones. Make the canvas take
2062         up the whole screen.
2063
2064         * Animometer/runner/animometer.html: Add meta viewport.
2065         Remove the container div.
2066         * Animometer/runner/resources/animometer.css: Have buttons lay
2067         out vertically. Update detail arrow glyph. Make the suites and
2068         options section lay out vertically. Remove the top spacers since
2069         we want the canvas to take over the whole screen. Minimal display
2070         is recommended for use.
2071
2072 2015-12-07  Jon Lee  <jonlee@apple.com>
2073
2074         Update suites for benchmark
2075         https://bugs.webkit.org/show_bug.cgi?id=151957
2076
2077         Reviewed by Simon Fraser.
2078
2079         * Animometer/runner/animometer.html: Use spacers instead of relying on
2080         justify-content center to center the content. That allows the opening screen
2081         to grow downward when expanding the list of choices, otherwise it expands
2082         from the center, and off the top edge of the screen.
2083         * Animometer/runner/resources/animometer.css:
2084         (.tree): Don't overflow scroll.
2085         (.tree > li > label.tree-label:before): Use better glyphs.
2086         (.tree > li > :checked ~ label.tree-label:before):
2087         (main): Using flex-start for justify-content so that if the section grows too
2088         big it gets pinned to the top edge of the document instead of growing past it.
2089         (.spacer): Make the spacers have a minimum 20px and grow evenly.
2090         (section#home): Add a min-height so that the border will expand if the suite
2091         tests shown make the section grow past the height.
2092         * Animometer/runner/resources/animometer.js: Update the selectors.
2093         (window.suitesManager._treeElement):
2094         (window.suitesManager._suitesElements):
2095         (window.suitesManager._editsElements):
2096
2097 2015-12-07  Jon Lee  <jonlee@apple.com>
2098
2099         Update options for benchmark
2100         https://bugs.webkit.org/show_bug.cgi?id=151956
2101
2102         Reviewed by Simon Fraser.
2103
2104         Move "Fix test complexity" and "Adaptive" checkboxes into a radio group.
2105
2106         Move "Show running results" into a radio group, and add options to remove the HUD.
2107
2108         * Animometer/runner/animometer.html: Get rid of the preamble. Wrap the options
2109         in a form for easier referencing in JS.
2110         * Animometer/runner/resources/animometer.css: Show the surrounding border if the
2111         body's display-minimal class name is set.
2112         * Animometer/runner/resources/animometer.js:
2113
2114         Update the way optionsManager gets and sets default values. Include support for
2115         radio groups.
2116         (window.optionsManager.valueForOption):
2117         (window.optionsManager.updateUIFromLocalStorage):
2118         (window.optionsManager.updateLocalStorageFromUI):
2119
2120         (window.benchmarkRunnerClient.willStartFirstIteration):
2121         (window.sectionsManager.setupRunningSectionStyle):
2122         (window.suitesManager._treeElement): Fly-by whitespace fix.
2123         (window.suitesManager._suitesElements): Ditto.
2124         (window.suitesManager.updateEditsElementsState): Update options check.
2125         (window.suitesManager.updateDisplay): Add a new update function for the HUD.
2126         Attach a class to the body depending on the user's choice.
2127         (window.benchmarkController.initialize): Add an event listener when the form
2128         radio buttons update.
2129         (window.benchmarkController.onFormChanged):
2130         (window.optionsManager._optionsElements): Deleted.
2131         (window.optionsManager._adaptiveTestElement): Deleted.
2132         (window.benchmarkController.onChangeAdaptiveTestCheckbox): Deleted.
2133         * Animometer/tests/resources/main.js:
2134         (Benchmark.prototype.update): Update options checks.
2135         * Animometer/tests/resources/stage.js: Update option check.
2136         (StageBenchmark.prototype.showResults):
2137
2138 2015-12-01  Simon Fraser  <simon.fraser@apple.com>
2139
2140         Add a basic compositing Animometer test
2141         https://bugs.webkit.org/show_bug.cgi?id=151724
2142
2143         Reviewed by Dean Jackson.
2144
2145         Add a "bouncing particles" test that moves composited layers around, optionally with a filter.
2146
2147         This is added under a new "Miscellaneous" category.
2148
2149         Remove the test templates category from the UI.
2150
2151         * Animometer/runner/resources/tests.js:
2152         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2153         (BouncingCssShape.prototype.animate):
2154         * Animometer/tests/misc/compositing-transforms.html: Added.
2155         * Animometer/tests/misc/resources/compositing-transforms.js: Added.
2156         (BouncingCompositedImage):
2157         (BouncingCompositedImage.prototype._move):
2158         (BouncingCompositedImage.prototype.animate):
2159         (CompositingTransformsStage):
2160         (CompositingTransformsStage.prototype.createParticle):
2161         (CompositingTransformsStage.prototype.particleWillBeRemoved):
2162         (CompositedTransformsBenchmark):
2163         (CompositedTransformsBenchmark.prototype.createStage):
2164         (window.benchmarkClient.create):
2165
2166 2015-11-30  Said Abou-Hallawa  <sabouhallawa@apple.com>
2167
2168         Fix the graphics benchmark complexity bounds adjustment
2169         https://bugs.webkit.org/show_bug.cgi?id=151670
2170
2171         Reviewed by Simon Fraser.
2172
2173         Make sure the graphics benchmark complexity bounds adjustment is applied
2174         to the absolute lower bound.
2175
2176         * Animometer/tests/resources/math.js:
2177         (PIDController.prototype._saturate):
2178
2179 2015-11-30  Said Abou-Hallawa  <sabouhallawa@apple.com>
2180
2181         Add an option to select the results form the graphics benchmark
2182         https://bugs.webkit.org/show_bug.cgi?id=151666
2183
2184         Reviewed by Ryosuke Niwa.
2185
2186         We need an easy way to select the graphics benchmark results table such
2187         that when it is copied to the clipboard, rich text format is set to the
2188         clipboard.
2189
2190         * Animometer/runner/animometer.html: Add a new button to select the results table or JSON.
2191
2192         * Animometer/runner/resources/animometer.js:
2193         (window.sectionsManager._sectionDataElement): Selects the container <data> element.
2194         (window.sectionsManager._sectionDataDivElement): Replace a literal string with a string table entry.
2195         (window.sectionsManager.showTestName): Replace a literal string with a string table entry.
2196         (window.sectionsManager.selectData): Selects the container <data> element in a selection.
2197         (window.sectionsManager.selectDataContents): Select the contents of container <data> element in a selection.
2198         (window.benchmarkController.selectResults): Selects the results table.
2199         (window.benchmarkController.showJSON): Function rename.
2200         (window.benchmarkController.selectJSON): Selects the contents of the results JSON.
2201         (window.benchmarkController.showJson): Deleted.
2202
2203 2015-11-20  Simon Fraser  <simon.fraser@apple.com>
2204
2205         Animometer: graphs should not do interpolation
2206         https://bugs.webkit.org/show_bug.cgi?id=151526
2207
2208         Reviewed by Simon Fraser.
2209
2210         Having the graphs do interpolation is misleading, because you can't see the actual data.
2211
2212         Also remove "shape-rendering: crispEdges;" so the lines get antialiased.
2213
2214         * Animometer/runner/resources/animometer.css:
2215         (section#test-graph > data > svg): Deleted.
2216         * Animometer/runner/resources/graph.js:
2217         (graph): Deleted.
2218
2219 2015-11-19  Said Abou-Hallawa  <sabouhallawa@apple.com>
2220
2221         Calculate the graphics benchmark test gain adaptively
2222         https://bugs.webkit.org/show_bug.cgi?id=151208
2223
2224         Reviewed by Darin Adler.
2225
2226         We need to calculate the gain of the graphics benchmark tests adaptively
2227         and get rid of the gain and limits parameters we have to choose manually
2228         for every test. We are going to use the classic Ziegler–Nichols method for
2229         calculating the gain and integral and derivative times. We are going to
2230         try moving on a cubic curve during the manual stage from y0 to reach ysp.
2231         We also going to use a saturation actuator to ensure the system does not
2232         fluctuate.
2233
2234         * Animometer/resources/extensions.js:
2235         (ResultsTable.prototype._isNoisyMeasurement): Fix a parameter name.
2236         (ResultsTable.prototype._isNoisyTest): Since score is a member of testResults, we need to limit our search to frame rate and complexity.
2237         (ResultsTable.prototype._showTest): Pass the correct parameter to _isNoisyMeasurement().
2238
2239         * Animometer/resources/strings.js: Fix the indentation and name and value of a string.
2240
2241         * Animometer/runner/resources/tests.js: Remove all the manual gains and limits parameters which had to be passed to every test.
2242
2243         * Animometer/tests/resources/main.js:
2244         (BenchmarkState.prototype.currentStage): Fix an enum name.
2245         (Benchmark): Get rid of manual gain and limits.
2246         (Benchmark.prototype.update): Simplify the calculation by having all the times in ms.
2247
2248         * Animometer/tests/resources/math.js:
2249         (PIDController): Get rid of the manual gain and limits and the magic numbers for Ti and Td.
2250         (PIDController.prototype._yPosition): Tells whether the test current output is moving towards the set-point or away from it.
2251         (PIDController.prototype._distanceUltimate): Calculates the ultimate distance from y0 after time t using a cubic formula.
2252         (PIDController.prototype._distance): Calculates the distance of y relative to y0.
2253         (PIDController.prototype._gainIncrement): Decides how much the proportional gain should be increased during the manual gain stage.
2254         (PIDController.prototype._updateStage): Updates the stage of the controller based on its current stage and the system output.
2255         (PIDController.prototype._tuneP): Tunes the system before calculating the PID controller gains.
2256         (PIDController.prototype._tunePID): PID tuning function.
2257         (PIDController.prototype._tune):
2258         (PIDController.prototype._saturate):
2259         (PIDController.prototype.tune): Manages calculating the controller parameters. It then returns a PID tuning value.
2260         (PIDController.prototype._sat): Deleted. We may need to return it back but the limits have to be calculated adaptively not manually.
2261
2262 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
2263
2264         Reorganize the graphics benchmark string table
2265         https://bugs.webkit.org/show_bug.cgi?id=151334
2266
2267         Reviewed by Simon Fraser.
2268
2269         Make the graphics benchmark string table be an object of sub-objects. Each
2270         sub-object represents an associative array, the key is the string name and
2271         the value is the string data.
2272
2273         * Animometer/resources/extensions.js:
2274         (ResultsDashboard.prototype.toJSON):
2275         (ResultsTable.prototype._showGraph):
2276         (ResultsTable.prototype._showJSON):
2277         (ResultsTable.prototype._isNoisyMeasurement):
2278         (ResultsTable.prototype._isNoisyTest):
2279         (ResultsTable.prototype._showTest):
2280         (ResultsTable.prototype._showSuite):
2281         (ResultsTable.prototype._showIteration):
2282         * Animometer/resources/sampler.js:
2283         (Sampler.prototype.toJSON):
2284         * Animometer/resources/strings.js:
2285         * Animometer/runner/resources/animometer.js:
2286         (window.benchmarkRunnerClient.didFinishLastIteration):
2287         (window.suitesManager.updateLocalStorageFromJSON):
2288         (window.benchmarkController.showResults):
2289         (window.benchmarkController.showJson):
2290         (window.benchmarkController.showTestGraph):
2291         (window.benchmarkController.showTestJSON):
2292         * Animometer/runner/resources/tests.js:
2293         * Animometer/tests/resources/main.js:
2294
2295 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
2296
2297         Disable flattening the stage iframe of the graphics benchmark when running on iOS
2298         https://bugs.webkit.org/show_bug.cgi?id=151361
2299
2300         Reviewed by Simon Fraser.
2301
2302         Use fixed size for stage iframe of the graphics benchmark to disable
2303         flattening the iframe while animating the particles. Also ensure the
2304         bouncing particles do not go outside the iframe's boundaries.
2305
2306         * Animometer/runner/resources/animometer.css:
2307         (section#running > #running-test > iframe):
2308         (@media screen and (min-device-width: 1800px)):
2309         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2310         (BouncingParticle.prototype.animate):
2311
2312 2015-11-17  Said Abou-Hallawa  <sabouhallawa@apple.com>
2313
2314         Use the media queries to dynamically set the stage for the graphics benchmark
2315         https://bugs.webkit.org/show_bug.cgi?id=151327
2316
2317         Reviewed by Simon Fraser.
2318
2319         Clean setting the benchmark css rules by using the media queries. Accessing
2320         document.stylesheets.cssRules seems to be unreliable. Fix the test harness
2321         load event listener invocation. And also remove the options for normalizing
2322         the stage resolution for retina display.
2323
2324         * Animometer/resources/extensions.js:
2325         (window.DocumentExtension.insertCssRuleAfter): Deleted.
2326         * Animometer/runner/animometer.html:
2327         * Animometer/runner/resources/animometer.css:
2328         (@media screen and (min-device-width: 1800px)):
2329         * Animometer/runner/resources/animometer.js:
2330         (window.sectionsManager.setupRunningSectionStyle):
2331         (window.benchmarkController.initialize):
2332         (window.sectionsManager.setupSectionStyle): Deleted.
2333         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2334         (BouncingParticlesStage):
2335         * Animometer/tests/text/layering-text.html:
2336         * Animometer/tests/text/resources/layering-text.js:
2337         (LayeringTextStage):
2338         (LayeringTextStage.prototype._setFontSize): Deleted.
2339
2340 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
2341
2342         Remove the option for animating using setInterval from the graphics benchmark
2343         https://bugs.webkit.org/show_bug.cgi?id=151283
2344
2345         Reviewed by Darin Adler.
2346
2347         Get rid of the option to run animation using setInterval().
2348
2349         * Animometer/tests/resources/main.js:
2350         (Animator.prototype.animate):
2351         (Benchmark):
2352         (Benchmark.prototype.start):
2353         (Animator.prototype.start): Deleted.
2354
2355 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
2356
2357         Highlight the alarming test results in the graphics benchmark results page
2358         https://bugs.webkit.org/show_bug.cgi?id=151286
2359
2360         Reviewed by Simon Fraser.
2361
2362         When showing the results of a test in the graphics benchmark the following
2363         criteria is going to be applied:
2364
2365         1. If the standard deviation of the test complexity or the frame rate is
2366            equal to or more than 10%, the standard deviation and the test name
2367            will be displayed in red.
2368         2. If the average frame rate is not in the range = [(desired_frame_rate - 2)
2369            .. (desired_frame_rate + 2)], the average frame rate and the test name will
2370            be displayed in red.
2371
2372         * Animometer/resources/extensions.js:
2373         (ResultsTable.prototype._showHeaderRow):
2374         (ResultsTable.prototype._showHeader):
2375         (ResultsTable.prototype._showEmptyCell):
2376         (ResultsTable.prototype._showText):
2377         (ResultsTable.prototype._showFixedNumber):
2378         (ResultsTable.prototype.):
2379         (ResultsTable.prototype._showGraph):
2380         (ResultsTable.prototype._showJSON):
2381         (ResultsTable.prototype._isAlarmingMeasurement):
2382         (ResultsTable.prototype._isAlarmingTestResults):
2383         (ResultsTable.prototype._showEmptyCells):
2384         (ResultsTable.prototype._showEmptyRow):
2385         (ResultsTable.prototype._showTest):
2386         (ResultsTable.prototype._showSuite):
2387         (ResultsTable.prototype._showIteration):
2388         (ResultsTable.prototype.showRecord):
2389         (ResultsTable.prototype.showIterations):
2390         (ResultsTable.prototype._showEmpty): Deleted.
2391         * Animometer/runner/resources/animometer.js:
2392         (window.benchmarkRunnerClient.didFinishLastIteration):
2393         * Animometer/tests/resources/stage.js:
2394         (StageBenchmark.prototype.showResults):
2395
2396 2015-11-16  Said Abou-Hallawa  <sabouhallawa@apple.com>
2397
2398         Clean referencing the options object in the graphics benchmark
2399         https://bugs.webkit.org/show_bug.cgi?id=151284
2400
2401         Reviewed by Simon Fraser.
2402
2403         Get rid of the Benchmark.options member and rely only on the private member
2404         Benchmark._options. The animator need to have its own options member instead
2405         of accessing it from its reference to Benchmark object.
2406
2407         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
2408         (BouncingCanvasParticlesAnimator):
2409         (BouncingCanvasParticlesBenchmark.prototype.createAnimator):
2410         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2411         (BouncingParticle.prototype.animate):
2412         (BouncingParticlesAnimator):
2413         (BouncingParticlesBenchmark.prototype.createAnimator):
2414         * Animometer/tests/examples/resources/canvas-electrons.js:
2415         (CanvasElectronsStage.prototype.animate):
2416         (CanvasElectronsAnimator):
2417         (CanvasElectronsBenchmark.prototype.createAnimator):
2418         (window.benchmarkClient.create):
2419         * Animometer/tests/examples/resources/canvas-stars.js:
2420         (CanvasStarsStage.prototype.animate):
2421         (CanvasStarsAnimator):
2422         (CanvasStarsBenchmark.prototype.createAnimator):
2423         (window.benchmarkClient.create):
2424         * Animometer/tests/resources/main.js:
2425         (BenchmarkState.prototype.currentProgress):
2426         (Animator):
2427         (Animator.prototype.animate):
2428         (Benchmark):
2429         (Benchmark.prototype.update):
2430         * Animometer/tests/resources/stage.js:
2431         (Stage.prototype.clear):
2432         (StageAnimator):
2433         (StageBenchmark.prototype.createAnimator):
2434         (StageBenchmark.prototype.tune):
2435         (StageBenchmark.prototype.showResults):
2436         * Animometer/tests/simple/resources/simple-canvas.js:
2437         (SimpleCanvasStage.prototype.animate):
2438         (SimpleCanvasAnimator):
2439         (SimpleCanvasAnimator.prototype.animate):
2440         (SimpleCanvasBenchmark.prototype.createAnimator):
2441         * Animometer/tests/template/resources/template-canvas.js:
2442         (TemplateCanvasStage.prototype.animate):
2443         (TemplateCanvasBenchmark.prototype.createAnimator):
2444         (window.benchmarkClient.create):
2445
2446 2015-11-13  Said Abou-Hallawa  <sabouhallawa@apple.com>
2447
2448         Eliminate a request for layout every time an item is added to the stage of the graphics benchmark
2449         https://bugs.webkit.org/show_bug.cgi?id=151289
2450
2451         Reviewed by Simon Fraser.
2452
2453         Cache the stage size when it is created instead of requesting every time
2454         an object is added via clientWidth and clientHeight.
2455
2456         * Animometer/resources/extensions.js:
2457         (Insets.elementPadding):
2458         * Animometer/tests/resources/stage.js:
2459         (Stage):
2460         (Stage.prototype.get size):
2461
2462 2015-11-06  Said Abou-Hallawa  <sabouhallawa@apple.com>
2463
2464         Initialize the graphics benchmark's Kalman filter with estimated 60 FPS
2465         https://bugs.webkit.org/show_bug.cgi?id=150965
2466
2467         Reviewed by Darin Adler.
2468
2469         This should give the benchmark more accurate reading at warmup time. And
2470         hence we can safely reduce the test running time to be 10 seconds.
2471
2472         * Animometer/runner/animometer.html:
2473         Add "defer" back when loading resources/animometer.js since this script
2474         depends on many other scripts and we need to wait till the page is parsed.
2475         Also change the default test interval to be 10 seconds.
2476
2477         * Animometer/runner/resources/graph.js:
2478         (graph): Make the test results curves smoother.
2479
2480         * Animometer/tests/resources/main.js:
2481         (Animator): Initialize the Kalman filter with 60 FPS which should be true
2482         if the test page is empty.
2483
2484         (Animator.prototype.animate):
2485         * Animometer/tests/resources/math.js:
2486         (KalmanEstimator): Fix the initial value of _vecX_est.
2487             _vecX_est[0] = current FPS (= 60FPS when the test page is empty)
2488             _vecX_est[1] = first time derivative of FPS (=0; FPS has been constant).
2489             _vecX_est[2] = second time derivative of FPS (=0; since _vecX_est[1]=0).
2490         (KalmanEstimator.prototype.estimate): Add some comments.
2491
2492 2015-11-04  Said Abou-Hallawa  <sabouhallawa@apple.com>
2493
2494         Remove "defer" from the scripts' references in the graphics benchmark home page
2495         https://bugs.webkit.org/show_bug.cgi?id=150915
2496
2497         Reviewed by Simon Fraser.
2498
2499         It causes the benchmark to be very flakey.
2500
2501         * Animometer/runner/animometer.html:
2502
2503 2015-11-01  Said Abou-Hallawa  <sabouhallawa@apple,com>
2504
2505         Add an option to make the graphics benchmark runs a specific test with fixed complexity
2506         https://bugs.webkit.org/show_bug.cgi?id=150529
2507
2508         Reviewed by Darin Adler.
2509
2510         Beside each test in the suites tree, we are going to show the complexity
2511         arithmetic mean of the of the last run in an edit control. Based on a
2512         new option these edit controls will all be visible or hidden. If they are
2513         visible their values can be changed. The benchmark runner if it run in
2514         the non-adaptive mode will set the complexity of the test to the passed
2515         value and will not change it ever. The animator will animate the test and
2516         frame rate will also be measured.
2517
2518         * Animometer/runner/animometer.html: Add a new option for the non-adaptive mode.
2519
2520         * Animometer/runner/resources/animometer.css:
2521         (section#home input[type="number"]): Define the width of all the edit control in the <home> section.
2522         (section#home > suites input[type="number"]): The edit controls in the <suites> box will be right aligned and hidden by default.
2523         (section#home > suites input[type="number"].selected): When the class "selected" is added, the edit controls will be visible.
2524         (section#home > options > label > input[type="number"]): Deleted.
2525
2526         * Animometer/runner/resources/animometer.js:
2527         (window.benchmarkRunnerClient.didFinishLastIteration): Update the local storage with the results of each test.
2528         (window.optionsManager._adaptiveTestElement): Returns the checkbox for setting the adaptive test option.
2529         (window.suitesManager._editElement):  Returns the edit element associated with each test element in the suites tree.
2530         (window.suitesManager._editsElements): Returns a list of all the elements in the <suites> box.
2531         (window.suitesManager._localStorageNameForTest): Change this function to take strings.
2532         (window.suitesManager._createTestElement): Adds an edit control beside each test.
2533         (window.suitesManager.updateEditsElementsState): Adds/Removes the 'selected' class to/from all the tests edit elements.
2534         (window.suitesManager.updateUIFromLocalStorage): Reads the edit control value from the local storage.
2535         (window.suitesManager.updateLocalStorageFromUI): Saves the edit control value to the local storage.
2536         (window.suitesManager.updateLocalStorageFromJSON): Saves the last run results to the local storage.
2537         (window.benchmarkController.initialize): Shows/Hides the test edit controls based on the adaptive test option.
2538         (window.benchmarkController.onChangeAdaptiveTestCheckbox): An onchange event handler for the adaptive test checkbox.
2539
2540         * Animometer/tests/resources/main.js:
2541         (Benchmark.prototype.update): Fix the complexity of the test if the running mode is non-adaptive test and desired complexity is not zero.
2542         (window.runBenchmark): Add the test complexity as a new benchmark option.
2543
2544 2015-11-01  Said Abou-Hallawa  <sabouhallawa@apple,com>
2545
2546         Make the size of the benchmark canvas adaptive to the screen size and screen resolution
2547         https://bugs.webkit.org/show_bug.cgi?id=150530
2548
2549         Reviewed by Darin Adler.
2550
2551         We want to set the size of the benchmark stage dynamically such that it
2552         depends on the screen resolution and the device scale factor. This patch
2553         does more than that because the home page css was not done properly. To
2554         use the flex box layout, the animometer.css has to be rewritten almost from
2555         scratch. The suites tree has to be rewritten also because it was not collapsing
2556         and with the flex box layout it was going outside of the window area. The
2557         options handling and the local storage handling had to be rewritten to
2558         allow more flexibility with this patch and the future patches. The code
2559         in animometer.js was reorganized into objects to allow distributing the code
2560         nicely among separate entities.
2561
2562         * Animometer/resources/extensions.js:
2563         (Point.elementClientSize): Returns the client size of an HTMLElement as a Point object.
2564         (Insets.prototype.get width): Follow the function opening brace style guidelines.
2565         (Insets.prototype.get height):
2566         (Insets.prototype.get size): Returns the size of an Insets as a Point object.
2567
2568         (window.DocumentExtension): Provides document helper functions. It should be assailable from the runner and the tests.
2569         (window.DocumentExtension.createElement): Creates an HTMLElement given its name, attributes and parentElement.
2570         (window.DocumentExtension.createSvgElement): Creates an SVGElement given its name, attributes and parentElement (moved from utilities.js).
2571         (window.DocumentExtension.insertCssRuleAfter): Inserts a CSS rule after an exiting rule given its text.
2572
2573         (ResultsTable.prototype._showHeader): Use DocumentExtension functions.
2574         (ResultsTable.prototype._showGraph): Use DocumentExtension functions and create a real button for "Graph..." option.
2575         (ResultsTable.prototype._showJSON): Use DocumentExtension functions and create a real button for "JSON..." option.
2576         (Options): Deleted.
2577
2578         * Animometer/runner/animometer.html: Restructure the page to use the flex box layout.
2579
2580         * Animometer/runner/resources/animometer.css:
2581         (html,body):
2582         (button):
2583
2584         (button.large-button):The large button appears in the animometer.html.
2585         (button.large-button:active):
2586         (button.large-button:disabled):
2587
2588         (button.small-button): The small button appears in the results table.
2589         (button.small-button:active):
2590
2591         (.tree): The tree class is used to list the suites and their tests.
2592         (.tree .expand-button): This button expands a tree element.
2593         (.tree .expand-button ~ ul): Hide the children (<ul>...</ul>) of a parent node by default.
2594         (.tree .expand-button:checked ~ ul): Show the children of a parent node only when checked.
2595         (.tree ul): Hide the list bullets.
2596         (.tree li): Indent every node in the tree relative to its parent.
2597         (.tree ul li): Indent all the non top level nodes only (the tests nodes in our case).
2598         (.tree > li:last-child): Do not indent the bottom of the last child node.
2599         (.tree-label): Style for all the labels in the tree.
2600         (label.tree-label): Style for the labels in the top level only (the suites nodes in our case).
2601         (label.tree-label:before): Style the unchecked case of the expand-button.
2602         (:checked ~ label.tree-label:before): Style the checked case of the expand-button.
2603
2604         (table.results-table): The results table appears while running the test and at the end.
2605         (.results-table td):
2606         (.results-table th):
2607
2608         (div.results-json): The JSON div appears per test or for the whole run.
2609
2610         (main): This is the flex box container.
2611
2612         (section): A section is displayed exclusively inside the <main>. It is hidden by default.
2613         (section.selected): When it is selected, its layout is flex layout.
2614         (section > footer): The header or the footer of a section should not take more than 15% of the container.
2615
2616         (section#home): The home section has <suites> and <options> parts to be laid out in the middle.
2617         (section#home > options):
2618         (section#home > suites): The <suites> should not take more than 40% of the width.
2619         (section#home > options > label): The benchmark title.
2620         (section#home > header > h2): The benchmark title.
2621         (section#home > options > label > input[type="number"]): Sets the width of the option edit control.
2622
2623         (section#running): The running section contain the runner <iframe> which takes the whole area of the <main>.
2624         (section#running > #running-test): This is the <iframe> container.
2625         (section#running > #running-test > iframe): The <iframe> is created by the runner for each test.
2626         (section#running > #progress): This is the progress bar.
2627         (section#running > #progress > #progress-completed): This is another element which grows while the runner is progressing.
2628         (section#running > #record): This the container of the record results table which is shown while running a test.
2629
2630         (section#results):
2631         (section#json):
2632         (section#test-json):
2633         (section#test-graph): All these sections have the same layout. A <data> element is laid out between <header> and <footer>.
2634
2635         (section#results > data):
2636         (section#json > data):
2637         (section#test-json > data):
2638         (section#test-graph > data): The <data> element should take 70% of the <section>.
2639
2640         (section#test-graph > data > svg):
2641         (.axis line):
2642         (.left-samples): These styles are for the d3 graph.
2643
2644         (section#test-json > data): This is the style of the JSON <data> element.
2645
2646         (iframe): Deleted.
2647         (label, p): Deleted.
2648         (section > p): Deleted.
2649         (section#home > p): Deleted.
2650         (section#home > p:first-child): Deleted.
2651         (#testContainer): Deleted.
2652         (section#running #progress-completed): Deleted.
2653         (section#results > table): Deleted.
2654         (section#results > table td, th): Deleted.
2655         (section#results > table tr.alt, td): Deleted.
2656         (section#results > table th): Deleted.
2657         (section#json > textarea): Deleted.
2658         (.options): Deleted.
2659         (.options p): Deleted.
2660         (#suites ul): Deleted.
2661         (#suites ul ul): Deleted.
2662         (#suites ul ul input, #suites ul ul label): Deleted.
2663         (#suites.showTests ul ul): Deleted.
2664         (.column): Deleted.
2665         (input[type="number"]): Deleted.
2666         (.buttons): Deleted.
2667         (.small-button): Deleted.
2668         (#graphContainer): Deleted.
2669         (.right-samples): Deleted.
2670         (.sample-time): Deleted.
2671         (.left-mean): Deleted.
2672         (.right-mean): Deleted.
2673
2674         * Animometer/runner/resources/animometer.js:
2675         (window.benchmarkRunnerClient.initialize): Initialize the client object with the options and the suites.
2676         (window.benchmarkRunnerClient.willStartFirstIteration): Use new css selectors for results and the record table.
2677         (window.benchmarkRunnerClient.didFinishLastIteration): Move the code which sets the JSON text to sectionsManager.showJSON().
2678
2679         (window.sectionsManager): Responsible of managing the <section>s elements inside animometer.html.
2680         (window.sectionsManager._sectionHeaderH1Element): Return the <h1> inside the <header> of a given section.
2681         (window.sectionsManager._sectionDataDivElement): Return the <div> inside the <data> of a given section.
2682         (window.sectionsManager.showScore): Show the score of the last benchmark run.
2683         (window.sectionsManager.showTestName): Show the test name for detailed results <section>.
2684         (window.sectionsManager.showJSON): Shows the JSON text of the last benchmark or for a specific test.
2685         (window.sectionsManager.showSection): Shows a specific <section> in the <main> container.
2686         (window.sectionsManager.setupSectionStyle): Sets css attributes for all the <section>s.
2687         (window.sectionsManager.setupRunningSectionStyle): Sets the css attributes for the running <section> only.
2688
2689         (window.optionsManager): Responsible of managing the user options and streaming them to/form the localStorage.
2690         (window.optionsManager._optionsElements): Returns the children <input> elements of the <options>.
2691         (window.optionsManager.updateUIFromLocalStorage): Restore the values of the <options> UI elements from the local storage.
2692         (window.optionsManager.updateLocalStorageFromUI): Saves the values of the <options> UI elements to the local storage.
2693
2694         (window.suitesManager): Responsible of managing the user suites and streaming them to/form the localStorage.
2695         (window.suitesManager._treeElement): Returns the suites tree container element.
2696         (window.suitesManager._suitesElements): Returns a list of the suites elements.
2697         (window.suitesManager._checkboxElement): Returns the checkbox element of a given suite.
2698         (window.suitesManager._localStorageNameForTest): Generates a string for the tuple <suite, test> to be saved in the localStorage.
2699         (window.suitesManager._updateSuiteCheckboxState): Updates the state of a suite checkbox from the state of its tests' checkboxes.
2700         (window.suitesManager._updateStartButtonState): Updates the state of the start button from the state of the suites' checkboxes.
2701         (window.suitesManager._onChangeSuiteCheckbox): Called when a suite checkbox is clicked.
2702         (window.suitesManager._onChangeTestCheckbox): Called when a test checkbox is clicked.
2703         (window.suitesManager._createSuiteElement): Creates suite node in the suites tree.
2704         (window.suitesManager._createTestElement): Creates test node in the suites tree.
2705         (window.suitesManager.createElements): Creates the suites tree dynamically from the array Suites.
2706         (window.suitesManager.updateUIFromLocalStorage): Restore the values of the <suites> UI elements from the local storage.
2707         (window.suitesManager.updateLocalStorageFromUI): aves the values of the <suites> UI elements to the local storage.
2708
2709         (window.benchmarkController): This is the UI controller of the animometer.html page.
2710         (window.benchmarkController.initialize): Called when the animometer.html page is loaded.
2711         (window.benchmarkController._runBenchmark): Starts a benchmark run.
2712         (window.benchmarkController.startTest): Called when the "Start Test" button is clicked.
2713         (window.benchmarkController.showResults): Called at the end of the test to show the final results.
2714         (window.benchmarkController.showJson): Called from the results page to show the JSON of the last benchmark run.
2715         (window.benchmarkController.showTestGraph): Called from the results the table to show a graph for the samples of a specific test.
2716         (window.benchmarkController.showTestJSON): Called from the results the table to show a JSON for the samples of a specific test.
2717
2718         (showSection): Deleted.
2719         (startTest): Deleted.
2720         (showResults): Deleted.
2721         (showJson): Deleted.
2722         (showTestGraph): Deleted.
2723         (showTestJSON): Deleted.
2724         (initialize.toggleTestsCheckbox.onchange): Deleted.
2725         (initialize): Deleted.
2726         (updateSuiteSelection): Deleted.
2727         (updateTestSelection): Deleted.
2728         (updateSuiteCheckbox): Deleted.
2729         (localStorageNameForTest): Deleted.
2730         (populateSettings.): Deleted.
2731         (populateSettings): Deleted.
2732
2733         * Animometer/runner/resources/benchmark-runner.js:
2734         (BenchmarkRunner): Pass the frameContainer element to the BenchmarkRunner.
2735         (BenchmarkRunner.prototype._appendFrame): Remove unused parameter unwanted styling code.
2736         (BenchmarkRunner.prototype.runMultipleIterations):  Use the this._client.iterationCount instead of passing it as a parameter also.
2737
2738         * Animometer/runner/resources/graph.js:
2739         (graph): Calculate the size of the chart from the container element.
2740
2741         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
2742         (BouncingSvgImage):
2743         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
2744         (BouncingSvgParticlesStage.prototype._createDefs):
2745         (BouncingSvgParticlesStage.prototype._createClipStar):
2746         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
2747         (BouncingSvgShape.prototype._createShape):
2748         (BouncingSvgShapesStage.prototype.createGradient):
2749         Call DocumentExtension.createSvgElement() instead of calling Utilities.createSvgElement().
2750
2751         * Animometer/tests/resources/main.js:
2752         (Animator.prototype.animate):
2753         (Benchmark):
2754         (Benchmark.prototype.update):
2755         * Animometer/tests/resources/stage.js:
2756         (StageBenchmark.prototype.showResults):
2757         Rename the options to match the <input> ids in animometer.html.
2758
2759         * Animometer/tests/resources/utilities.js:
2760         (window.Utilities.createSvgElement): Deleted.
2761
2762         * Animometer/tests/text/layering-text.html:
2763         * Animometer/tests/text/resources/layering-text.js:
2764         (LayeringTextStage):
2765         (LayeringTextStage.prototype._setFontSize): Sets the size of the text dynamically such that they all fit in one stage.
2766
2767 2015-10-29  Simon Fraser  <simon.fraser@apple.com>
2768
2769         Animometer computes frame rate incorrectly
2770         https://bugs.webkit.org/show_bug.cgi?id=150698
2771
2772         Reviewed by Tim Horton.
2773
2774         The existing code incremented this._frameCount after checking against this._dropFrameCount.
2775         This has the effect of setting this._measureTimeOffset one frame too late, so
2776         we were measuring only two frames, not three, and thus computing an incorrect fps.
2777
2778         * Animometer/tests/resources/main.js:
2779         (Animator.prototype.animate):
2780
2781 2015-10-27  Jon Lee  <jonlee@apple.com>
2782
2783         Add an option to make the graphics benchmark runs a specific test
2784         https://bugs.webkit.org/show_bug.cgi?id=150528
2785         rdar://problem/23246614
2786
2787         Reviewed by Zalan Bujtas.
2788
2789         Add a checkbox that lets the user list all of the available tests, and select
2790         the ones to run repeatedly. The test checkboxes will update the state of the suite
2791         checkbox. The selected tests are stored in localStorage to make it easy to do
2792         repeated runs.
2793
2794         * Animometer/runner/animometer.html: Add a checkbox to show individual tests.
2795         Update other markup.
2796         * Animometer/runner/resources/animometer.css: Make the settings area a little wider
2797         to accommodate the longer names of the tests
2798         * Animometer/runner/resources/animometer.js:
2799         (startBenchmark): Change the way that the suites are fed into the benchmark
2800         runner. Go through each of the suites and their tests, and create a new Suite
2801         with just the enabled tests. While enumerating store the enabled tests into
2802         localStorage.
2803         (initialize): Initialization routine (taking over populateSettings). When the
2804         checkbox for showing tests is toggled, add or remove a class on #suites to show
2805         the individual tests.
2806         (updateSuiteSelection): Called whenever the user toggles the checkbox for a suite.
2807         Either select all or none of the tests.
2808         (updateTestSelection): Called whenever the user toggles the checkbox for a test.
2809         (updateSuiteCheckbox): Update the state of the test's suite's checkbox to
2810         indeterminate if there is at least one enabled test, unchecked if none are selected,
2811         and checked if all are selected.
2812         (localStorageNameForTest): Helper function to get the name of the test to use as
2813         a key to localStorage.
2814         (populateSettings): Add the tests for each suite into an inner list.
2815
2816 2015-10-26  Said Abou-Hallawa  <sabouhallawa@apple.com>
2817
2818         Add an option to output the results of the graphics benchmark in JSON format
2819         https://bugs.webkit.org/show_bug.cgi?id=150484
2820         <rdar://problem/23243721>
2821
2822         Reviewed by Darin Adler.
2823
2824         * Animometer/resources/extensions.js:
2825         (ResultsDashboard): A new class to hold the iterations results.
2826         (ResultsDashboard.prototype.push): Appends an iteration results;
2827         (ResultsDashboard.prototype.toJSON): Converts the iterations results to JSON format.
2828
2829         (RecordTable.prototype.clear): Clears the results table.
2830         (RecordTable.prototype._showTitles): Shows the header titles and appends the sub-titles to a queue.
2831         (RecordTable.prototype._showHeader): Shows the table header titles.
2832         (RecordTable.prototype._showEmpty): Shows an empty table cell.
2833         (RecordTable.prototype._showValue): Shows a number value in the results table.
2834         (RecordTable.prototype._showSamples): Shows a button for the sampled data graph.
2835         (RecordTable.prototype._showTest): Shows the results of a single test.
2836         (RecordTable.prototype._showSuite): Shows the results of a single suite.
2837         (RecordTable.prototype.showRecord): Shows a single iteration for a single test.
2838         (RecordTable.prototype.showIterations): Shows the results of all the suites of the iterations.
2839
2840         (ResultsTable): RecordTable was renamed to ResultsTable.
2841         (ResultsTable.prototype.clear): Clears the table element.
2842         (ResultsTable.prototype._showHeaderRow): Shows a row in the results table header.
2843         (ResultsTable.prototype._showHeader): Shows the results table header.
2844         (ResultsTable.prototype._showEmpty): Shows an empty table cell.
2845         (ResultsTable.prototype._showText): Shows a string in a new table cell.
2846         (ResultsTable.prototype._showFixedNumber): Shows a number in a new table cell.
2847         (ResultsTable.prototype._showGraph): Shows a button for the sampled data graph.
2848         (ResultsTable.prototype._showJSON): Shows a button for the sampled data JSON.
2849         (ResultsTable.prototype._showTest): Shows the results of a single test.
2850         (ResultsTable.prototype._showSuite): Shows the results of a single suite.
2851         (ResultsTable.prototype._showIteration): Shows the results of a single iteration.
2852         (ResultsTable.prototype.showRecord): Shows a single iteration for a single test.
2853         (ResultsTable.prototype.showIterations): Shows all the results.
2854         (RecordTable): Deleted.
2855         (RecordTable.prototype.clear): Deleted.
2856         (RecordTable.prototype._showTitles): Deleted.
2857         (RecordTable.prototype._showHeader): Deleted.
2858         (RecordTable.prototype._showEmpty): Deleted.
2859         (RecordTable.prototype._showValue): Deleted.
2860         (RecordTable.prototype._showSamples): Deleted.
2861         (RecordTable.prototype._showTest): Deleted.
2862         (RecordTable.prototype._showSuite): Deleted.
2863         (RecordTable.prototype.showRecord): Deleted.
2864         (RecordTable.prototype.showIterations): Deleted.
2865
2866         * Animometer/resources/sampler.js:
2867         (Sampler.prototype.startSampling): Use forEach.
2868         (Sampler.prototype.sample): Use forEach.
2869         (Sampler.prototype.toJSON): Converts the sampler data to JSON format.
2870
2871         * Animometer/resources/strings.js: Added.
2872         This new file will be used to associate the strings used by the benchmark
2873         with IDs. A string can be changed in one place without having to change
2874         all the instances of this string in multiple files. There two groups of
2875         strings in this file. The first one is used by the UI elements and the second
2876         group is used when constructing the results JSON.
2877
2878         * Animometer/runner/animometer.html:
2879         * Animometer/runner/resources/animometer.css:
2880
2881         * Animometer/runner/resources/animometer.js:
2882         (window.benchmarkRunnerClient.willAddTestFrame):
2883         (window.benchmarkRunnerClient.willStartFirstIteration):
2884         (window.benchmarkRunnerClient.didRunSuites):
2885         (window.benchmarkRunnerClient.didFinishLastIteration):
2886         Make benchmarkRunnerClient uses ResultsDashboard instead of _iterationsSamplers
2887         Get the JSON from ResultsDashboard.toJSON() and pass it to ResultsTable.showIterations().
2888         Also set the textContent of the "#json" textarea with the results JSON.
2889
2890         (showResults): Delete unneeded code.
2891         (showJson): Shows the "json" section.
2892         (showTestGraph): Rename showGraph() to be showTestGraph().
2893         (showTestJSON): Shows the JSON of a single testResults.
2894         (showGraph): Deleted.
2895
2896         * Animometer/runner/resources/tests.js:
2897         Use the string table instead of putting literal strings.
2898
2899         * Animometer/tests/resources/stage.js:
2900         (StageBenchmark.prototype.showResults):
2901         Fix the parameters which are passed to RecordTable.showRecord().
2902
2903         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2904         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2905         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2906         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2907         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2908         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2909         * Animometer/tests/examples/canvas-electrons.html:
2910         * Animometer/tests/examples/canvas-stars.html:
2911         * Animometer/tests/simple/simple-canvas-paths.html:
2912         * Animometer/tests/template/template-canvas.html:
2913         * Animometer/tests/template/template-css.html:
2914         * Animometer/tests/template/template-svg.html:
2915         * Animometer/tests/text/layering-text.html:
2916         Include the new strings.js file in all the test files.
2917
2918 2015-10-12  Jon Lee  <jonlee@apple.com>
2919
2920         Add canvas line dash test
2921         https://bugs.webkit.org/show_bug.cgi?id=150078
2922         <rdar://problem/23082347>
2923
2924         Reviewed by Dean Jackson.
2925
2926         * Animometer/runner/resources/tests.js: Add line dash test.
2927         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2928         (CanvasLineDashStage): Create a new stage with a default dash pattern and stroke style.
2929         Maintain a step which will animate the dash.
2930         (CanvasLineDashStage.prototype.animate): Render the line path with the dash. Increment
2931         the dash offset to animate.
2932         (CanvasPathBenchmark.prototype.createStage): Add the test.
2933
2934 2015-10-12  Jon Lee  <jonlee@apple.com>
2935
2936         Add canvas line path tests
2937         https://bugs.webkit.org/show_bug.cgi?id=150076
2938         <rdar://problem/23082285>
2939
2940         Reviewed by Dean Jackson.
2941
2942         * Animometer/runner/resources/tests.js: Add new line path tests, with different
2943         line joins.
2944         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2945         (CanvasLinePathStage): The stage is the same as the SimpleCanvasPathStrokeStage
2946         but sets the lineJoin on the context.
2947         (CanvasPathBenchmark.prototype.createStage): Add the tests.
2948
2949 2015-10-12  Jon Lee  <jonlee@apple.com>
2950
2951         Add missing paint objects for arc and arcTo fills
2952         https://bugs.webkit.org/show_bug.cgi?id=150075
2953         <rdar://problem/23082233>
2954
2955         Reviewed by Dean Jackson.
2956
2957         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add missing paint objects
2958         for arcTo and arc segment fills.
2959         (CanvasArcToSegmentFill):
2960         (CanvasArcToSegmentFill.prototype.draw):
2961         (CanvasArcSegmentFill):
2962         (CanvasArcSegmentFill.prototype.draw):
2963
2964 2015-10-12  Jon Lee  <jonlee@apple.com>
2965
2966         Add canvas line segment tests
2967         https://bugs.webkit.org/show_bug.cgi?id=150073
2968         <rdar://problem/23082138>
2969
2970         Reviewed by Dean Jackson.
2971
2972         * Animometer/runner/resources/tests.js: Add new line segment tests, with different
2973         line caps.
2974         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2975         (CanvasLineSegment): Add new line segment paint object.
2976         (CanvasLineSegmentStage): Create a new stage that sets the lineCap.
2977
2978 2015-10-12  Jon Lee  <jonlee@apple.com>
2979
2980         Add canvas path fill tests
2981         https://bugs.webkit.org/show_bug.cgi?id=150071
2982         <rdar://problem/23082001>
2983
2984         Reviewed by Dean Jackson.
2985
2986         * Animometer/runner/resources/tests.js: Add new pathTypes for path fills.
2987         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2988         (CanvasLinePoint): Add basic point for a line, and call lineTo.
2989         (SimpleCanvasPathFillStage): Add a new stage similar to SimpleCanvasPathStrokeStage.
2990         (CanvasPathBenchmark.prototype.createStage): Add the tests.
2991
2992 2015-10-12  Jon Lee  <jonlee@apple.com>
2993
2994         Add canvas path tests
2995         https://bugs.webkit.org/show_bug.cgi?id=150067
2996         rdar://problem/23081463
2997
2998         Reviewed by Dean Jackson.
2999
3000         * Animometer/runner/resources/tests.js: Add a quadratic and bezier path test.
3001
3002         * Animometer/tests/simple/resources/simple-canvas.js:
3003         (SimpleCanvasStage.prototype.tune): This kind of test joins all of the segments
3004         into one long path, and tries to render that one path. Random points make it
3005         difficult to tell what is going on, so add a parameter to the constructor to
3006         confine the area where the random coordinates can land. The more complicated the
3007         case is, the larger an area the path will cover. Add an artificial minimum so
3008         that the first 200 points aren't confined to a space that is too small.
3009
3010         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3011         (SimpleCanvasPathStrokeStage): Add a new kind of stage that inherits from
3012         SimpleCanvasStage. Each time the frame animates a random line width and stroke
3013         color are chosen. The path setup is done outside of each paint object.
3014         (CanvasQuadraticPoint): This point just calls quadraticCurveTo.
3015         (CanvasPathBenchmark.prototype.createStage): Add the tests.
3016
3017 2015-10-12  Jon Lee  <jonlee@apple.com>
3018
3019         Add basic canvas tests
3020         https://bugs.webkit.org/show_bug.cgi?id=150066
3021         rdar://problem/23081143
3022
3023         Reviewed by Dean Jackson.
3024
3025         This adds a new test suite that will cover all of the path-based canvas calls.
3026         The patch will be divided up to cover tests with similar techniques.
3027
3028         The simplest version uses a SimpleCanvasStage.
3029
3030         * Animometer/runner/resources/tests.js: Add tests for quadratic, bezier, arcTo,
3031         arc, and rect segments. Also include arcTo, arc, and rect fills.
3032         * Animometer/tests/resources/stage.js:
3033         (Stage.prototype.randomBool): Added for counterclockwise property for arc segments.
3034         (Stage.prototype.randomInt): Fix how values are rounded, used by randomBool. It should
3035         round instead of flooring everything.
3036         * Animometer/tests/simple/resources/simple-canvas.js: Added. Defines common classes
3037         used by all simple canvas tests. The page reads best bottom to top.
3038         (SimpleCanvasStage): Basic stage. Pass a canvasObject which will be used to create new
3039         objects as needed in tune().
3040         (SimpleCanvasStage.prototype.tune): Modeled on other tests. Adds and removed objects
3041         as specified by the provided |count|.
3042         (SimpleCanvasStage.prototype.animate): Iterate over all the objects and ask them to draw.
3043         There is no "animating" of the objects; they will just paint statically on the canvas.
3044         (SimpleCanvasAnimator): Basic animator clears the canvas prior to painting.
3045         (SimpleCanvasBenchmark): Hard-code the feedback loop parameters instead of including
3046         them in the query parameters to the test URLs.
3047         (SimpleCanvasBenchmark.prototype.createAnimator):
3048         * Animometer/tests/simple/simple-canvas-paths.html: Added.
3049
3050         * Animometer/tests/simple/resources/simple-canvas-paths.js: Added. There is no "animating"
3051         of these objects--they just paint statically on the canvas.
3052         (CanvasQuadraticSegment): Paint a quadratic segment stroke.
3053         (CanvasBezierSegment): Paint a bezier segment stroke.
3054         (CanvasArcToSegment): Paint an arcTo stroke.
3055         (CanvasArcSegment): Paint an arc stroke.
3056         (CanvasRect): Paint a rect.
3057         (CanvasRectFill): Paint a filled rect.
3058
3059         (CanvasPathBenchmark):
3060         (CanvasPathBenchmark.prototype.createStage): Look for the pathType and create the
3061         stage using the right paint object.
3062         (window.benchmarkClient.create):
3063
3064 2015-10-12  Jon Lee  <jonlee@apple.com>
3065
3066         Refactor tune() to pass in an integer-based count
3067         https://bugs.webkit.org/show_bug.cgi?id=150060
3068         <rdar://problem/23079425>
3069
3070         Reviewed by Dean Jackson.
3071
3072         All of the tune functions do an initial step of flooring the
3073         # of painting objects to add or remove. Factor that out since
3074         the complexity of all of these tests is always expressed in terms
3075         of countable items.
3076
3077         * Animometer/tests/resources/main.js:
3078         (Benchmark.prototype.update): Update the tuneValue.
3079
3080         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3081         (BouncingParticlesStage.prototype.tune): Remove the count adjustment.
3082         * Animometer/tests/examples/resources/canvas-electrons.js:
3083         (CanvasElectronsStage.prototype.tune): Ditto.
3084         * Animometer/tests/examples/resources/canvas-stars.js:
3085         (CanvasStarsStage.prototype.tune): Ditto.
3086         * Animometer/tests/text/resources/layering-text.js:
3087         (LayeringTextStage.prototype.tune): Ditto.
3088
3089 2015-10-12  Jon Lee  <jonlee@apple.com>
3090
3091         Store test-interval in localStorage
3092         https://bugs.webkit.org/show_bug.cgi?id=150055
3093         <rdar://problem/23078879>
3094
3095         Reviewed by Dean Jackson.
3096
3097         * Animometer/runner/resources/animometer.js:
3098         (populateSettings): Keep track of the specified test interval in localStorage
3099         to make it easy to repeat a test suite.
3100
3101 2015-10-12  Jon Lee  <jonlee@apple.com>
3102
3103         Remove "../tests/" from the URLs of all tests
3104         https://bugs.webkit.org/show_bug.cgi?id=150054
3105         <rdar://problem/23078784>
3106
3107         Reviewed by Dean Jackson.
3108
3109         Presumably all tests will be running from the tests/ directory,
3110         so we don't have to specify it in all of the test URLs.
3111
3112         * Animometer/runner/resources/benchmark-runner.js:
3113         (BenchmarkRunnerState.prototype.prepareCurrentTest): Prepend
3114         "../tests/" to all tests.
3115         * Animometer/runner/resources/tests.js: Remove "../tests/" from
3116         all URLs.
3117
3118 2015-10-12  Jon Lee  <jonlee@apple.com>
3119
3120         Refactor test suites to a separate class.
3121         https://bugs.webkit.org/show_bug.cgi?id=150053
3122         <rdar://problem/23078645>
3123
3124         Reviewed by Dean Jackson.
3125
3126         Create a Suite class to refactor out prepare() and run().
3127         Generate the checkboxes representing the suites using Suites
3128         instead of maintaining a separate list. Also, save the
3129         selections out to localStorage.
3130
3131         * Animometer/runner/animometer.html: Remove the explicitly listed
3132         suites. These will be generated from Suites instead.
3133         * Animometer/runner/resources/animometer.js:
3134         (populateSettings): Iterate through Suites, and create the
3135         label and checkbox. Attach the Suite object to the checkbox so
3136         when the benchmark is started, we get direct access. Initialize
3137         the checkmark based on its value in localStorage. Set this to
3138         run when DOMContentLoaded is dispatched.
3139         (startBenchmark): Grab all of the checkboxes, inspect their
3140         values, add it to enabledSuites if selected. Remember whether
3141         the suite was enabled in localStorage, so that it's easy to do
3142         repeated runs.
3143         * Animometer/runner/resources/tests.js:
3144         (Suite): Create a new Suite class. Refactor out prepare() and
3145         run(), since all of them have the same implementation. Populate
3146         Suites with Suite instances instead of generic objects.
3147
3148 2015-10-12  Jon Lee  <jonlee@apple.com>
3149
3150         Update graph styles for legibility.
3151         https://bugs.webkit.org/show_bug.cgi?id=150052
3152         <rdar://problem/23078503>
3153
3154         Reviewed by Dean Jackson.
3155
3156         * Animometer/runner/resources/animometer.css: Update colors and
3157         stroke thicknesses to make the graphs easier to read.
3158         (.smaple-time): Correct to .sample-time
3159         * Animometer/runner/resources/graph.js:
3160         (graph): Ditto.
3161
3162 2015-10-12  Jon Lee  <jonlee@apple.com>
3163
3164         Update graph styles for legibility.
3165         https://bugs.webkit.org/show_bug.cgi?id=150052
3166         <rdar://problem/23078503>
3167
3168         Reviewed by Dean Jackson.
3169
3170         * Animometer/runner/resources/animometer.css: Update colors and
3171         stroke thicknesses to make the graphs easier to read.
3172         (.smaple-time): Correct to .sample-time
3173         * Animometer/runner/resources/graph.js:
3174         (graph): Ditto.
3175
3176 2015-10-12  Filip Pizlo  <fpizlo@apple.com>
3177
3178         Unreviewed, revert an unintended commit.
3179
3180         * JetStream/Octane2/crypto.js:
3181         (montRevert):
3182         (montReduce):
3183
3184 2015-10-05  Said Abou-Hallawa  <sabouhallawa@apple.com>
3185
3186         Add a graphics benchmark
3187         https://bugs.webkit.org/show_bug.cgi?id=149053
3188         <rdar://problem/18984169>
3189
3190         Reviewed by Dean Jackson.
3191
3192         Instead of measuring the FPS of the animation, this benchmark measures the
3193         test complexity when rendering at a set-point FPS which should be lower
3194         than 60 FPS. This benchmark tries to stay at the set-point FPS by using
3195         a closed loop control system PID function. The gain of the system is passed
3196         as a parameter when running the test. Measuring the FPS faithfully results
3197         very fluctuating values. A Kalman filter is used to give a better estimate
3198         for the current FPS.
3199
3200         The animation of the tests is done manually. requestAnimationFrame() is
3201         called with a callback. Inside this callback, the test is animating by
3202         changing the positions of the elements inside the page. The test complexity
3203         may change also if the current FPS is not equal to the desired FPS.
3204
3205         In this patch, the benchmark and the tests are included. The shared code
3206         and the tests runner are included in separate patches.
3207
3208         * Animometer/runner/animometer.html:
3209         * Animometer/runner/resources/animometer.js:
3210         Add two new examples for more complex animation techniques.
3211         Add an option to show/hide the test running results which is off by default.
3212
3213         * Animometer/runner/resources/tests.js: Added.
3214         (suiteFromName): Returns a suite given its name.
3215         (testFromName): Returns a test given its suite and name.
3216
3217         * Animometer/tests: Added.
3218         This directory includes all the test suites to be run by the benchmark.
3219         runner. All the tests should try to run on three stages: CSS, canvas and
3220         SVG.
3221
3222         * Animometer/tests/bouncing-particles: Added.
3223         * Animometer/tests/bouncing-particles/resources: Added.
3224         The bouncing particles test is an example of a simple animation technique.
3225
3226         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html: Added.
3227         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html: Added.
3228         * Animometer/tests/bouncing-particles/bouncing-css-images.html: Added.
3229         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html: Added.
3230         * Animometer/tests/bouncing-particles/bouncing-svg-images.html: Added.
3231         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html: Added.
3232         Bouncing particles test pages.
3233
3234         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js: Added.
3235         (BouncingParticle): Base class for a bouncing particle.
3236         (BouncingParticle.prototype.center): Returns the center point or the particle.
3237         (BouncingParticle.prototype.animate): Moves the particle based on its current position, angle and velocity.
3238
3239         (BouncingParticlesAnimator): A sub class of Animator.
3240
3241         (BouncingParticlesStage): Represents the container of all the bouncing particles.
3242         (BouncingParticlesStage.prototype.parseShapeParamters): Gets the shape parameters for shape animating tests.
3243         (BouncingParticlesStage.prototype.randomRotater): Creates a rotater for the particles.
3244         (BouncingParticlesStage.prototype.animate): Animates all the particles.
3245         (BouncingParticlesStage.prototype.tune): Changes the test by adding or removing particles.
3246
3247         (BouncingParticlesBenchmark): Runs the benchmark for bouncing particles test.
3248         (BouncingParticlesBenchmark.prototype.createAnimator): Creates an animator of type BouncingParticlesAnimator.
3249
3250         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js: Added.
3251         (BouncingCssShape): A sub class of BouncingParticle for animating CSS shapes.
3252         (BouncingCssShape.prototype._createSpan): Creates a <span> element and takes the shape and clipping classes into consideration.
3253         (BouncingCssShape.prototype._move): Moves the particle to a new location. Apply transform since it does not require layout.
3254         (BouncingCssShape.prototype.animate): Rotates and moves the shape to a new location.
3255
3256         (BouncingCssShapesStage): A sub class of BouncingParticlesStage for animating CSS shapes.
3257         (BouncingCssShapesStage.prototype.createParticle): Creates a particle of type BouncingCssShape.
3258         (BouncingCssShapesStage.prototype.particleWillBeRemoved): Removes the corresponding element form the parent children list.
3259
3260         (BouncingCssShapesBenchmark): A sub class of BouncingParticlesBenchmark for animating CSS shapes.
3261         (BouncingCssShapesBenchmark.prototype.createStage): Creates a stage of type BouncingCssShapesStage.
3262         (window.benchmarkClient.create): Creates a benchmark of type BouncingCssShapesBenchmark.
3263
3264         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js: Added.
3265         (BouncingCssImage): A sub class of BouncingParticle for animating CSS images.
3266         (BouncingCssImage.prototype._move): Move the particle to a new location. Apply transform since it does not require layout.
3267         (BouncingCssImage.prototype.animate): Rotates and moves the shape to a new location.
3268
3269         (BouncingCssImagesStage): A sub class of BouncingParticlesStage for animating CSS images.
3270         (BouncingCssImagesStage.prototype.createParticle): Creates a particle of type BouncingCssImage.
3271         (BouncingCssImagesStage.prototype.particleWillBeRemoved): Removes the corresponding element form the parent children list.
3272
3273         (BouncingCssImagesBenchmark): A sub class of BouncingParticlesBenchmark for animating CSS images.
3274         (BouncingCssImagesBenchmark.prototype.createStage): Creates a stage of type BouncingCssImagesStage.
3275         (window.benchmarkClient.create): Creates a benchmark of type BouncingCssImagesBenchmark.
3276
3277         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js: Added.
3278         (BouncingCanvasParticle): A base sub-class of BouncingParticle for animating canvas particles.
3279         (BouncingCanvasParticle.prototype._applyRotation): Apply the particle rotation-around-center transform to the canvas context.
3280         (BouncingCanvasParticle.prototype._applyClipping): Apply the particle clipping to the canvas context.
3281         (BouncingCanvasParticle.prototype._draw): A non-implemented version of the drawing function.
3282         (BouncingCanvasParticle.prototype.animate): Carries out all the steps to redraw the canvas particle.
3283
3284         (BouncingCanvasParticlesStage): A base sub-class of BouncingParticlesStage for animating canvas particles.
3285
3286         (BouncingCanvasParticlesAnimator): A concrete sub-class of BouncingParticlesAnimator for animating canvas particles.
3287         (BouncingCanvasParticlesAnimator.prototype.animate): Overrides the base class method to clear the canvas before redrawing the stage.
3288
3289         (BouncingCanvasParticlesBenchmark): A base sub-class of StageBenchmark for animating canvas particles.
3290         (BouncingCanvasParticlesBenchmark.prototype.createAnimator): Creates the canvas particles animator.
3291
3292         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js: Added.
3293         (BouncingCanvasShape): A concrete sub-class of BouncingCanvasParticle for animating canvas shapes.
3294         (BouncingCanvasShape.prototype._applyFill): Sets the fillStyle in the canvas context.
3295         (BouncingCanvasShape.prototype._drawShape): Carries out the actual drawing.
3296         (BouncingCanvasShape.prototype._draw): Carries out all the steps to draw the shape.
3297
3298         (BouncingCanvasShapesStage): A concrete sub-class of BouncingCanvasParticle for animating canvas shapes.
3299         (BouncingCanvasShapesStage.prototype.createParticle): Creates a particle of type BouncingCanvasShape.
3300
3301         (BouncingCanvasShapesBenchmark): A concrete sub-class of BouncingCanvasParticlesBenchmark for animating canvas shapes.
3302         (BouncingCanvasShapesBenchmark.prototype.createStage): Creates a stage of type BouncingCanvasShapesStage.
3303         (window.benchmarkClient.create): Creates a benchmark of type BouncingCanvasShapesBenchmark.
3304
3305         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js: Added.
3306         (BouncingCanvasImage): A concrete sub-class of BouncingCanvasParticle for animating canvas images.
3307         (BouncingCanvasImage.prototype._draw): Draws an image on the context of a canvas.
3308
3309         (BouncingCanvasImagesStage): A concrete sub-class of BouncingCanvasParticlesBenchmark for animating canvas images.
3310         (BouncingCanvasImagesStage.prototype.createParticle): Creates a particle of type BouncingCanvasImage.
3311
3312         (BouncingCanvasImagesBenchmark): A concrete sub-class of BouncingCanvasParticlesBenchmark for animating canvas images.
3313         (BouncingCanvasImagesBenchmark.prototype.createStage): Creates a stage of type BouncingCanvasImagesStage.
3314         (window.benchmarkClient.create): Creates a benchmark of type BouncingCanvasImagesBenchmark.
3315
3316         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js: Added.
3317         (BouncingSvgParticle): A base sub-class of BouncingParticle for animating SVG particles.
3318         (BouncingSvgParticle.prototype._applyClipping): Apply the particle clipping by setting the 'clip-path' attribute of the SVGElement.
3319         (BouncingSvgParticle.prototype._move): Moves the particle to a new location. Apply transform since it does not require layout.
3320         (BouncingSvgParticle.prototype.animate): Rotates and moves the shape to a new location.
3321         (BouncingSvgParticlesStage): A sub class of BouncingParticlesStage for animating SVGElements.
3322         (BouncingSvgParticlesStage.prototype._createDefs): Creates an SVGDefsElement.
3323         (BouncingSvgParticlesStage.prototype._ensureDefsIsCreated): Ensures there is only one SVGDefsElement is created.
3324         (BouncingSvgParticlesStage.prototype._createClipStar): Creates an SVGClipPathElement and sets its 'd' attribute to a star like shape.
3325         (BouncingSvgParticlesStage.prototype.ensureClipStarIsCreated): Ensure there is only one star SVGClipPathElement is created.
3326         (BouncingSvgParticlesStage.prototype.particleWillBeRemoved): Remove the corresponding element form the parent children list.
3327
3328         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js: Added.
3329         (BouncingSvgShape): A concrete sub-class of BouncingSVGParticle for animating SVG shapes.
3330         (BouncingSvgShape.prototype._createShape): Creates an SVG shape.
3331         (BouncingSvgShape.prototype._applyFill): Applies the selected fill style to the SVG shape.
3332
3333         (BouncingSvgShapesStage): A concrete sub-class of BouncingSvgParticlesStage for animating SVG shapes.
3334         (BouncingSvgShapesStage.prototype.createGradient): Creates an SVGLinearGradientElement.
3335         (BouncingSvgShapesStage.prototype.createParticle): Creates a particle of type BouncingSvgShape.
3336         (BouncingSvgShapesStage.prototype.particleWillBeRemoved): Ensures the attached SVGLinearGradientElement is removed from the SVGDefsElement.
3337
3338         (BouncingSvgShapesBenchmark): A concrete sub-class of BouncingParticlesBenchmark for animating SVG images.
3339         (BouncingSvgShapesBenchmark.prototype.createStage): Creates a stage of type BouncingSvgShapesStage.
3340         (window.benchmarkClient.create): Creates a benchmark of type BouncingSvgShapesBenchmark.
3341
3342         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js: Added.
3343         (BouncingSvgImage): A concrete sub-class of BouncingSVGParticle for animating SVG images.
3344
3345         (BouncingSvgImagesStage): A concrete sub-class of BouncingSVGParticlesBenchmark for animating SVG images.
3346         (BouncingSvgImagesStage.prototype.createParticle): Creates a particle of type BouncingSvgImage.
3347
3348         (BouncingSvgImagesBenchmark): A concrete sub-class of BouncingParticlesBenchmark for animating SVG images.
3349         (BouncingSvgImagesBenchmark.prototype.createStage): Creates a stage of type BouncingSvgImagesStage.
3350         (window.benchmarkClient.create): Creates a benchmark of type BouncingSvgImagesBenchmark.
3351
3352         * Animometer/tests/examples: Added.
3353         * Animometer/tests/examples/canvas-electrons.html: Added.
3354         * Animometer/tests/examples/canvas-stars.html: Added.
3355         Examples test pages.
3356
3357         * Animometer/tests/examples/resources: Added.
3358         * Animometer/tests/examples/resources/canvas-electrons.js: Added.
3359         (CanvasElectron): An object which draws and animate a electron object on a canvas stage.
3360         (CanvasElectron.prototype._draw): Draws the electron object.
3361         (CanvasElectron.prototype.animate): Animates the electron object.
3362
3363         (CanvasElectronsStage): A concrete sub-class of Stage for animating electrons.
3364         (CanvasElectronsStage.prototype.tune): Changes the test by adding or removing elements.
3365         (CanvasElectronsStage.prototype.animate): Animates the test elements.
3366
3367         (CanvasElectronsAnimator): A concrete sub-class of StageAnimator for animating canvas electrons.
3368         (CanvasElectronsAnimator.prototype.animate): Overrides the base class method to clear the canvas before redrawing the stage.
3369
3370         (CanvasElectronsBenchmark): A concrete sub-class of StageBenchmark for animating electrons.
3371         (CanvasElectronsBenchmark.prototype.createStage): Creates a stage of CanvasElectronsStage.
3372         (CanvasElectronsBenchmark.prototype.createAnimator): Creates an animator of type CanvasElectronsAnimator.
3373         (window.benchmarkClient.create): Creates a benchmark of type CanvasElectronsBenchmark.
3374
3375         * Animometer/tests/examples/resources/canvas-stars.js: Added.
3376         (CanvasStar): An object which draws and animate a star object on a canvas stage.
3377         (CanvasStar.prototype._draw): Draws the star object.
3378         (CanvasStar.prototype.animate): Animates the star object.
3379
3380         (CanvasStarsStage): A concrete sub-class of Stage for animating stars.
3381         (CanvasStarsStage.prototype.tune): Changes the test by adding or removing elements.
3382         (CanvasStarsStage.prototype.animate): Animates the test elements.
3383
3384         (CanvasStarsAnimator): A concrete sub-class of StageAnimator for animating canvas stars.
3385         (CanvasStarsAnimator.prototype.animate): Overrides the base class method to clear the canvas before redrawing the stage.
3386
3387         (CanvasStarsBenchmark): A concrete sub-class of Benchmark for animating stars.
3388         (CanvasStarsBenchmark.prototype.createStage): Creates a stage of CanvasStarsStage.
3389         (CanvasStarsBenchmark.prototype.createAnimator): Creates an animator of type CanvasStarsAnimator.
3390         (window.benchmarkClient.create): Creates a benchmark of type CanvasStarsBenchmark.
3391
3392         * Animometer/tests/resources: Added.
3393         This directory includes the script which is required to run an adaptive
3394         graphics benchmark. From an empty test page, the set of classes in this
3395         directory are responsible for measuring the current frame rate and
3396         changing the test to reach a desired FPS. It keeps asking the test page
3397         to tune itself by a certain value to increase or decrease the frame rate.
3398         It's also responsible for sampling the test state and the corresponding
3399         frame rate.
3400
3401         * Animometer/tests/resources/main.js: Added.
3402         (BenchmarkState): Tracks the state of the benchmark test.
3403         (BenchmarkState.prototype._timeOffset): Returns the timeOffset of a stage.
3404         (BenchmarkState.prototype._message): Returns the message of a stage.
3405         (BenchmarkState.prototype.update): Sets the currentTimeOffset to a new value.
3406         (BenchmarkState.prototype.samplingTimeOffset): Returns the timeOffset of the sampling stage.
3407         (BenchmarkState.prototype.currentStage): Returns the current stage of the benchmark.
3408         (BenchmarkState.prototype.currentMessage): Returns the message of the current stage and timeOffset.
3409         (BenchmarkState.prototype.currentProgress): Returns a percentage of how much the benchmark is running.
3410
3411         (Animator): Manages animating the test.
3412         (Animator.prototype.start): Called if animating using setInterval is requested.
3413         (Animator.prototype.timeDelta): Returns the current timeDelta
3414         (Animator.prototype.animate): Manages the test animation.
3415         (Animator.prototype.animateLoop): Called if animating using requestAnimationFrame is requested.
3416
3417         (Benchmark): Manages running the test benchmark and recording the sampled data.
3418         (Benchmark.prototype.start): Starts the benchmark.
3419         (Benchmark.prototype.update): Called from the animator.animate() to change the complexity of the test.
3420         (Benchmark.prototype.record): Shows the current (not final) results of the benchmark.
3421         (Benchmark.prototype.resolveWhenFinished): Spins until the benchmark is finished and returns its results.
3422         (Benchmark.prototype.run): Starts the test, runs it, waits until it is finished and return its results.
3423         (window.runBenchmark): Called from the benchmark runner through the suite controller run-callback.
3424
3425         * Animometer/tests/resources/math.js: Added.
3426         (Matrix): A matrix object.
3427         (Vector3): A vector of size 3 object.
3428         (Matrix3): A matrix of size 3x3 object.
3429
3430         (PIDController): Closed-loop controller for a set-point y.
3431         (PIDController.prototype._sat): Limits the output to a certain range.
3432         (PIDController.prototype.tune): Given the current output of a system, it produces a new pid value for tuning it.
3433
3434         (KalmanEstimator): Implement Kalman filter to get an estimate for a sampled data point.
3435         (KalmanEstimator.prototype.estimate): Returns an estimate for for a sampled data point.
3436
3437         * Animometer/tests/resources/utilities.js: Added.
3438         (window.Utilities._parse): Given a separator character, it pareses a string to a set of <key, value> pairs.
3439         (window.Utilities.parseParameters): Parses a test parameters.
3440         (window.Utilities.parseArguments): Parses a tag arguments.
3441         (window.Utilities.extendObject): Adds the attributes and their values of an object to another object.
3442         (window.Utilities.copyObject): Copies the attributes and their values of an object to a new object.
3443         (window.Utilities.mergeObjects): Copies the attributes and their values of two objects to a new object.
3444         (window.Utilities.createSvgElement): Creates an SVGElement given its name and its attributes.
3445
3446         * Animometer/tests/resources/stage.css: Added.
3447         * Animometer/tests/resources/stage.js: Added.
3448         (Rotater): Manages rotating an angle within a fixed time interval.
3449         (Rotater.prototype.get interval): Returns the time interval which is required to rotate 360 degrees.
3450         (Rotater.prototype.next): Moves the current time by a delta.
3451         (Rotater.prototype.degree): Returns the current rotating degree.
3452         (Rotater.prototype.rotateZ): Returns CSS formatted transform rotateZ() string for the current degree.
3453         (Rotater.prototype.rotate): Returns SVG formatted transform rotate() string for the current degree.
3454
3455         (Stage): A base class for managing the test complexity and test animation.
3456         (Stage.prototype.get size): Returns the size of the stage excluding the CSS padding.
3457         (Stage.prototype.random): Returns a random float.
3458         (Stage.prototype.randomInt): Returns a random integer.
3459         (Stage.prototype.randomPosition): Returns a random position.
3460         (Stage.prototype.randomSquareSize): Returns a square size.
3461         (Stage.prototype.randomVelocity): Returns a random velocity.
3462         (Stage.prototype.randomAngle): Returns a random angle.
3463         (Stage.prototype.randomColor): Returns a random color not too dark and not too light.
3464         (Stage.prototype.randomRotater): Creates a random rotater. Its velocity depends on choosing a random rotation time interval.
3465         (Stage.prototype.tune): A not-implemented version of this function.
3466         (Stage.prototype.animate): A not-implemented version of this function.
3467         (Stage.prototype.clear): Clears the stage from all its animation elements.
3468
3469         (StageAnimator): A base class for the stage-based animators.
3470         (StageAnimator.prototype.animate): Calls Animator.animate() which updates the test page and then calls Stage.animate() to force redraw.
3471
3472         (StageBenchmark): A base class for the stage-based benchmarks.
3473         (StageBenchmark.prototype.createStage): Creates the default stage.
3474         (StageBenchmark.prototype.createAnimator): Creates the default animator.
3475         (StageBenchmark.prototype.tune): Delegates the call to stage.
3476         (StageBenchmark.prototype.clear): Delegates the call to stage.
3477         (StageBenchmark.prototype.showResults): Shows the results/progress through its recordTable and progressBar.
3478
3479         * Animometer/tests/resources/yin-yang.png: Added.
3480         * Animometer/tests/resources/yin-yang.svg: Added.
3481         These images are shared among all the tests.
3482
3483         * Animometer/tests/template: Added.
3484         * Animometer/tests/template/resources: Added.
3485         This directory includes template tests which do nothing. They can be used
3486         to author new tests. Animated items can be created, moved and redrawn by
3487         removing the TODO comments in the script files and writing actual code.
3488
3489         * Animometer/tests/template/template-css.html: Added.
3490         * Animometer/tests/template/template-canvas.html: Added.
3491         * Animometer/tests/template/template-svg.html: Added.
3492         Template test pages. They can be used as they are. CSS attributes or hidden
3493         elements can be added to these derived test pages if needed.
3494
3495         * Animometer/tests/template/resources/template-css.js: Added.
3496
3497         (TemplateCssStage): A stage to create and animate HTMLElements.
3498         (TemplateCssStage.prototype.tune): Changes the test by adding or removing elements.
3499         (TemplateCssStage.prototype.animate): Animates the test elements.
3500         (TemplateCssBenchmark):
3501         (TemplateCssBenchmark.prototype.createStage): Creates the test stage.
3502         (window.benchmarkClient.create): Creates a benchmark of type TemplateCssBenchmark.
3503
3504         * Animometer/tests/template/resources/template-canvas.js: Added.
3505         (TemplateCanvasObject):
3506         (TemplateCanvasObject.prototype._draw): Draws the objects on the canvas context.
3507         (TemplateCanvasObject.prototype.animate): Moves and redraws the object.
3508         (TemplateCanvasStage): A stage to create and animate drawing elements.
3509         (TemplateCanvasStage.prototype.tune): hanges the test by adding or removing elements.
3510         (TemplateCanvasStage.prototype.animate):  Animates the test elements.
3511         (TemplateCanvasAnimator.prototype.animate): Starts the animation every frame.
3512         (TemplateCanvasBenchmark):
3513         (TemplateCanvasBenchmark.prototype.createStage): Creates a stage of type TemplateCanvasStage.
3514         (TemplateCanvasBenchmark.prototype.createAnimator): Creates a animator of type TemplateCanvasAnimator.
3515         (window.benchmarkClient.create): Creates a benchmark of type TemplateCanvasBenchmark.
3516
3517         * Animometer/tests/template/resources/template-svg.js: Added.
3518         (TemplateSvgStage): A stage to create and animate SVGElements.
3519         (TemplateSvgStage.prototype.tune): Changes the test by adding or removing elements.
3520         (TemplateSvgStage.prototype.animate): Animates the test elements.
3521         (TemplateSvgBenchmark.prototype.createStage): Creates a stage of type TemplateSvgStage.
3522         (window.benchmarkClient.create): Creates a benchmark of type TemplateSvgBenchmark.
3523
3524         * Animometer/tests/text: Added.
3525         * Animometer/tests/text/resources: Added.
3526         This directory includes the text animating tests which currently runs
3527         on CSS stage only.
3528
3529         * Animometer/tests/text/layering-text.html: Added.
3530         Text test page.
3531
3532         * Animometer/tests/text/resources/layering-text.js: Added.
3533         (LayeringTextStage): Represents the container of all the stacked text layers.
3534         (LayeringTextStage.parseTextItem): Parses a textItem which may be an opening tag, a closing tag or a self-closing tag.
3535         (LayeringTextStage.isOpeningTextItem): Returns true if the textItem is an opening tag e.g. '<ol>'.
3536         (LayeringTextStage.isClosingTextItem): Returns true if  the textItem is an closing tag e.g. '</ol>.
3537         (LayeringTextStage.textItemsFlags.LayeringTextStage.textItems.map): Calculates and stores isOpening and isClosing flags for each textItem.
3538         (LayeringTextStage.isColorableTextItem): Returns true if the textItem is self-closing tag e.g. '<p>...</p>'.
3539         (LayeringTextStage.isInsertableTextItem): Returns true if the textItems causes a new element to be added to the text layers.
3540         (LayeringTextStage.colorableTextItems.LayeringTextStage.textItemsFlags.filter): Number of colorable textItems.
3541         (LayeringTextStage.insertableTextItems.LayeringTextStage.textItemsFlags.filter): Number of insertable textItems.
3542         (LayeringTextStage.colorIndexToTextElementIndex): Maps from colorIndex [0..colorableTextItems-1] to textElementIndex [0..insertableTextItems-1].
3543         (LayeringTextStage.prototype._nextTextItem): Moves the _textItemIndex one step forward in a loop [0..LayeringTextStage.textItems.length-1].
3544         (LayeringTextStage.prototype._previousTextItem): Moves the _textItemIndex one step backward in a loop.
3545         (LayeringTextStage.prototype._pushTextElement): Creates a new textItemElement and adds it to the topmost container <div>.
3546         (LayeringTextStage.prototype._popTextElement): Removes the last textItemElement from the topmost container <div>.
3547         (LayeringTextStage.prototype._colorTextItem): Changes the background color of a single colorable textElement. The index advances in a circle [0..colorableTextItems-1].
3548         (LayeringTextStage.prototype.animate): Changes the background color and the text color of the textElements such that a redraw is enforced.
3549         (LayeringTextStage.prototype.tune): Adds or removes textElements to the stage.
3550
3551         (LayeringTextBenchmark): Runs the benchmark for the layering text test.
3552         (LayeringTextBenchmark.prototype.createStage): Creates a stage of type LayeringTextStage.
3553         (window.benchmarkClient.create): Creates a benchmark of type LayeringTextBenchmark.
3554
3555 2015-10-02  Said Abou-Hallawa  <sabouhallawa@apple.com>
3556
3557         Add shared code for a new a graphics benchmark
3558         https://bugs.webkit.org/show_bug.cgi?id=149691
3559
3560         Reviewed by Ryosuke Niwa.
3561
3562         This set of classes will be shared and used by the tests and the runner
3563         of a new graphics benchmark.
3564
3565         * Animometer/resources: Added.
3566         * Animometer/resources/algorithm.js: Added.
3567         (Array.prototype.swap): Swaps two elements in an array.
3568         (Heap): Binary Min/Max Heap object
3569         (Heap.prototype._parentIndex): Given the child node index, it returns the parent index.
3570         (Heap.prototype._leftIndex): Given the parent node index, it returns the left node index.
3571         (Heap.prototype._rightIndex): Given the parent node index, it returns the right node index.
3572         (Heap.prototype._childIndex): Given the parent node index, it returns the child index that may violate the heap property.
3573         (Heap.prototype.init): Initializes the heap state.
3574         (Heap.prototype.top): Returns the value stored at the top of the heap.
3575         (Heap.prototype.push): Pushes a new node at the top of the heap.
3576         (Heap.prototype.pop): Extracts the top node of the heap.
3577         (Heap.prototype._bubble): Fixes the heap property by moving upward.
3578         (Heap.prototype._sink): Fixes the heap property by moving downward.
3579         (Heap.prototype.str): Prints the nodes of the heap to a string.
3580         (Heap.prototype.values): Returns the last "size" heap elements values.
3581
3582         (Algorithm.createMinHeap): Creates a size-bounded min-heap object.
3583         (Algorithm.createMaxHeap): Creates a size-bounded max-heap object.
3584
3585         * Animometer/resources/extensions.js: Added.
3586         (Point): Point object but can be used as size also.
3587         (Point.pointOnCircle): Given, the radius of the circle and the angle of the point, it returns a point object.
3588         (Point.pointOnEllipse): Given, the radiuses of the ellipse and the angle of the point, it returns a point object.
3589         (Point.prototype.get width): Should be called when the point is used as size.
3590         (Point.prototype.get height): Should be called when the point is used as size.
3591         (Point.prototype.get center): Should be called when the point is used as size.
3592         (Point.prototype.add): Returns a new point = this + other.
3593         (Point.prototype.subtract): Returns a new point = this - other.
3594         (Point.prototype.multiply): Returns a new point = this * other.
3595         (Point.prototype.move): Moves the point in a given direction, velocity, time period.
3596
3597         (Insets): Represents borders of a container.
3598         (Insets.prototype.get width): Returns left + right.
3599         (Insets.prototype.get height): Returns top + bottom.
3600
3601         (SimplePromise):
3602         (SimplePromise.prototype.then):
3603         (SimplePromise.prototype.resolve):
3604         Moved from Animometer/runner/resources/benchmark-runner.js since tests also need it.
3605
3606         (Options): Benchmark running options as they are set by the user.
3607
3608         (ProgressBar): Manages a progress bar element. The progress bar is divided into equal length ranges.
3609         (ProgressBar.prototype._progressToPercent): Converts the progress into a percentage.
3610         (ProgressBar.prototype.incRange): Moves to the next range (a range is the running time of a single test).
3611         (ProgressBar.prototype.setPos): Draws the current progress in the current range.
3612
3613         (RecordTable): Shows the results of running a benchmark in a tabular form.
3614         (RecordTable.prototype.clear): Clears the results table.
3615         (RecordTable.prototype._showTitles): Shows the header titles and appends the sub-titles to a queue.
3616         (RecordTable.prototype._showHeader): Shows the table header titles.
3617         (RecordTable.prototype._showEmpty): Shows an empty table cell.
3618         (RecordTable.prototype._showValue): Shows a number value in the results table.
3619         (RecordTable.prototype._showSamples): Shows a button for the sampled data graph.
3620         (RecordTable.prototype._showTest): Shows the results of a single test.
3621         (RecordTable.prototype._showSuite): Shows the results of a single suite.
3622         (RecordTable.prototype.showRecord): Shows a single iteration for a single test.
3623         (RecordTable.prototype.showIterations): Shows the results of all the suites of the iterations.
3624
3625         * Animometer/resources/sampler.js: Added.
3626         (Statistics.sampleMean): Returns the sample mean.
3627         (Statistics.unbiasedSampleStandardDeviation): Returns the unbiased sample variance (i.e. with Bessel's correction)
3628         (Statistics.geometricMean): Returns the geometric mean.
3629
3630         (Experiment): Represents a sampling experiment.
3631         (Experiment.prototype._init): Called when the object is created and when startSampling() is called.
3632         (Experiment.prototype.startSampling): Called after warmup period. Restarts collecting sampled data points.
3633         (Experiment.prototype.sample): Add a new data point.
3634         (Experiment.prototype.mean): Returns the sample mean for the current sampled data points.
3635         (Experiment.prototype.standardDeviation): Returns the sample standard deviation for the current sampled data points.
3636         (Experiment.prototype.percentage): Returns the percentage of the standard deviation divided to the mean.
3637         (Experiment.prototype.confidenceIntervalDelta): Calculates the confidence delta for the current sampled data given a confidence level.
3638         (Experiment.prototype.concern): Returns the average of the worst given percentage from the sampled data.
3639         (Experiment.prototype.score): Returns a score for the sampled data. It is the geometric mean of sampleMean and concern.
3640
3641         (Sampler): Represents a compound experiment. It manages sampling multiple data points at the same time offset.
3642         (Sampler.prototype.startSampling): Called after warming up period. Restarts collecting sampled data points.
3643         (Sampler.prototype.sample): Add a new data vector at a given time offset.
3644
3645 2015-10-02  Said Abou-Hallawa  <sabouhallawa@apple.com>
3646
3647         Add the test runner for a new a graphics benchmark
3648         https://bugs.webkit.org/show_bug.cgi?id=149683
3649
3650         Reviewed by Ryosuke Niwa.
3651
3652         The test runner collects the selected test suites and the running options
3653         from its home page. It loops through all the tests, runs them and collects
3654         their running results. At the end, it shows summary results and a final
3655         score. It can also show a chart for a test sampled data.
3656
3657         * Animometer: Added.
3658         * Animometer/runner: Added.
3659         * Animometer/runner/resources: Added.
3660
3661         * Animometer/runner/animometer.html: Added.
3662         * Animometer/runner/resources/animometer.css: Added.
3663         The benchmark runner page and css.
3664
3665         * Animometer/runner/resources/animometer.js: Added.
3666         (window.benchmarkRunnerClient.willAddTestFrame): Called after the test <iframe> is created.
3667         (window.benchmarkRunnerClient.didRunTest): Called after running a test is finished.
3668         (window.benchmarkRunnerClient.willStartFirstIteration): Called at the beginning before running any test.
3669         (window.benchmarkRunnerClient.didRunSuites): Called after running all tests of a suite.
3670         (window.benchmarkRunnerClient.didFinishLastIteration): Called after running the last test.
3671
3672         (showSection): Shows a section in the animometer.html page.
3673         (startTest): Called when the "Start Test" button is clicked.
3674         (showResults): Called after finishing all the tests.
3675         (showGraph): Called when "Click..." button in the "Samples" column of the results table is clicked
3676
3677         * Animometer/runner/resources/benchmark-runner.js: Copied from PerformanceTests/Speedometer/resources/benchmark-runner.js.
3678         (BenchmarkRunnerState): Tracks the current running <suite, test>
3679         (BenchmarkRunnerState.prototype.currentSuite): Returns the current running suite.
3680         (BenchmarkRunnerState.prototype.currentTest): Returns the current running test.
3681         (BenchmarkRunnerState.prototype.isFirstTest): Returns true if we are running the first test in the current suite.
3682         (BenchmarkRunnerState.prototype.next): Advances to the next test.
3683         (BenchmarkRunnerState.prototype.prepareCurrentTest): Creates a new <iframe> and waits for it to load a test.
3684
3685         (BenchmarkRunner): Manages running the tests and communicating with the benchmarkRunnerClient.
3686         (BenchmarkRunner.prototype.waitForElement): Waits for an element to be created.
3687         (BenchmarkRunner.prototype._appendFrame): Creates a new <iframe> element.
3688         (BenchmarkRunner.prototype._removeFrame): Removed the current <iframe> element.
3689         (BenchmarkRunner.prototype._runTestAndRecordResults): Runs the current test and saves its results.
3690         (BenchmarkRunner.prototype.step): Either runs the current test if there is or start a new iteration.
3691         (BenchmarkRunner.prototype.runAllSteps): Loops to run all the tests and move to the next iteration.
3692         (this._runNextIteration): Starts a new iteration or show the results.
3693         (BenchmarkRunner.prototype.runMultipleIterations): Loops to run all the iterations and show the results
3694         (BenchmarkRunner.prototype._finalize): Finalizes the current iteration and starts a new one.
3695
3696         (SimplePromise): Deleted.
3697         (SimplePromise.prototype.then): Deleted.
3698         (SimplePromise.prototype.resolve): Deleted.
3699        &