Perf test Animation/css-accelerated-animation.html failing
[WebKit.git] / PerformanceTests / ChangeLog
1 2016-09-09  Simon Fraser  <simon.fraser@apple.com>
2
3         Perf test Animation/css-accelerated-animation.html failing
4         https://bugs.webkit.org/show_bug.cgi?id=161795
5
6         Skip Animation/css-accelerated-animation.html since this only works as a MobileSafari
7         perf test.
8
9         * Skipped:
10
11 2016-09-08  Simon Fraser  <simon.fraser@apple.com>
12
13         Add a content-animation test with accelerated CSS animations
14         https://bugs.webkit.org/show_bug.cgi?id=161776
15
16         Reviewed by Dean Jackson.
17
18         Add a test that measures the frame rate of accelerated CSS animations.
19
20         This is like css-animation.html (which animates 'left' and 'top') but animates
21         transforms instead. In order to get animation in X and Y we make two nested elements
22         and set transformX() on one, and transformY() on the other.
23
24         * Animation/css-accelerated-animation.html: Added.
25
26 2016-08-23  Saam Barati  <sbarati@apple.com>
27
28         It should be easy to run ES6SampleBench from the jsc shell
29         https://bugs.webkit.org/show_bug.cgi?id=161085
30
31         Reviewed by Yusuke Suzuki.
32
33         This patch makes ES6 sample bench runnable through the `jsc` shell.
34         To do that, you need to be in the PerformanceTests/ES6SampleBench
35         directory and run `jsc cli.js`. To make this work, the benchmark
36         is now aware of being run in two modes: via the browser, and via
37         the shell. Each entry point will set a variable `isInBrowser`,
38         and the benchmark will do different things based on if that
39         variable is true or false.
40
41         * ES6SampleBench/Air/benchmark.js:
42         * ES6SampleBench/Air/stress-test.js:
43         * ES6SampleBench/Basic/benchmark.js:
44         (runBenchmark):
45         * ES6SampleBench/Basic/stress-test.js:
46         * ES6SampleBench/air_benchmark.js:
47         * ES6SampleBench/basic_benchmark.js:
48         * ES6SampleBench/cli.js: Added.
49         (return.doRun):
50         (makeBenchmarkRunner):
51         * ES6SampleBench/driver.js:
52         (Driver):
53         (Driver.prototype._recomputeSummary):
54         (Driver.prototype._iterate.window.setTimeout):
55         (Driver.prototype._iterate):
56         (Driver.prototype._updateIterations):
57         * ES6SampleBench/glue.js:
58         (reportResult):
59         * ES6SampleBench/index.html:
60         * ES6SampleBench/results.js:
61         (Results):
62         (Results.prototype.reportRunning):
63         (Results.prototype.reportDone):
64         (Results.prototype.reportError):
65         * ES6SampleBench/stats.js:
66         (Stats):
67         (Stats.prototype.toString):
68         (Stats.prototype._update):
69
70 2016-08-01  Said Abou-Hallawa  <sabouhallawa@apple.com>
71
72         Add an option to run the MotionMark tests with classic tile size (512x512)
73         https://bugs.webkit.org/show_bug.cgi?id=160371
74
75         Reviewed by Darin Adler.
76
77         Setting the body to large size (3000x3000) and overflow to scroll forces
78         the classic tile size (512x512). This option does not affect the canvas
79         tests because the canvas is displayed on one tile regardless of its size.
80
81         * Animometer/developer.html:
82         * Animometer/resources/debug-runner/animometer.css:
83         (body.showing-test-container.tiles-big):
84         (body.showing-test-container.tiles-classic):
85         * Animometer/resources/debug-runner/animometer.js:
86         * Animometer/resources/runner/animometer.js:
87         (window.benchmarkController.startBenchmark):
88
89 2016-06-29  Filip Pizlo  <fpizlo@apple.com>
90
91         Generators violate bytecode liveness validation
92         https://bugs.webkit.org/show_bug.cgi?id=159279
93
94         Reviewed by Yusuke Suzuki.
95
96         Add Basic to our test harness.
97
98         Also made some cosmetic changes to the benchmark harness.
99
100         * ES6SampleBench/Basic/basic-tests.yaml: Added.
101         * ES6SampleBench/Basic/stress-test.js: Added.
102         (preciseTime):
103         * ES6SampleBench/driver.js:
104         (Driver):
105         (Driver.prototype.start):
106         (Driver.prototype.reportError):
107         * ES6SampleBench/glue.js:
108         * ES6SampleBench/index.html:
109
110 2016-06-28  Filip Pizlo  <fpizlo@apple.com>
111
112         ES6SampleBench should have a harness
113         https://bugs.webkit.org/show_bug.cgi?id=159246
114
115         Reviewed by Saam Barati.
116         
117         This adds a simple web harness for ES6SampleBench. It runs Air and Basic 10 times for 200
118         iterations each and reports three metrics:
119         
120         First iteration: the time it takes for the first iteration to run. This is the first
121         iteration after the benchmark is loaded into the iframe, so it's representative of what
122         would happen if one of these workloads only ran for a short time.
123         
124         Worst 2%: of the last 199 iterations, the average of the worst 2% iterations. If code like
125         any of these workloads was used in an important event handler, you'd want that code to run
126         well in the worst case in addition to having great throughput.
127         
128         Steady state: the total of the last 199 iterations. This is representative of what would
129         happen if you ran code like this for a long time.
130         
131         The total score is the geomean of the firstIteration/worstCase/steadyState numbers of the
132         two benchmarks.
133         
134         The harness does statistics using Student's T-distribution confidence intervals.
135
136         * ES6SampleBench/Basic/benchmark.js:
137         (Benchmark):
138         * ES6SampleBench/air_benchmark.js: Added.
139         * ES6SampleBench/basic_benchmark.js: Added.
140         * ES6SampleBench/driver.js: Added.
141         (Driver):
142         (Driver.prototype.addBenchmark):
143         (Driver.prototype.start):
144         (Driver.prototype.reportResult):
145         (Driver.prototype.reportError):
146         (Driver.prototype._recomputeSummary.Geomean):
147         (Driver.prototype._recomputeSummary.Geomean.prototype.add):
148         (Driver.prototype._recomputeSummary.Geomean.prototype.get result):
149         (Driver.prototype._recomputeSummary):
150         (Driver.prototype._iterate):
151         (Driver.prototype._updateIterations):
152         * ES6SampleBench/glue.js: Added.
153         * ES6SampleBench/index.html: Added.
154         * ES6SampleBench/results.js: Added.
155         (Results):
156         (Results.prototype.get benchmark):
157         (Results.prototype.reset):
158         (Results.prototype.reportRunning):
159         (Results.prototype.reportDone):
160         (Results.prototype.reportResult.averageAbovePercentile):
161         (Results.prototype.reportResult):
162         (Results.prototype.reportError):
163         * ES6SampleBench/stats.js: Added.
164         (Stats):
165         (Stats.prototype.reset):
166         (Stats.prototype.add):
167         (Stats.prototype.get numIterations):
168         (Stats.prototype.valueForIteration):
169         (Stats.get result.tDist):
170         (Stats.prototype.get result):
171         (Stats.prototype.toString):
172         (Stats.prototype._update):
173         * ES6SampleBench/style.css: Added.
174         (body):
175         (body, th, tr):
176         (h1, h2, h3, h4):
177         (h1):
178         (h2):
179         (h3):
180         (hr):
181         (address):
182         (img):
183         (.underline):
184         (ol.loweralpha):
185         (ol.upperalpha):
186         (ol.lowerroman):
187         (ol.upperroman):
188         (ol.arabic):
189         (.banner-link:link, .banner-link:visited):
190         (:link, :visited):
191         (h4 :link, h4 :visited, h5 :link, h5 :visited, h6 :link, h6 :visited):
192         (.anchor:link, .anchor:visited):
193         (* > .anchor:link, * > .anchor:visited):
194         (span:hover .anchor):
195         (a.forbidden, span.forbidden):
196         (a.missing:hover):
197         (a.closed:link, a.closed:visited, span.closed):
198         (pre):
199         (div.code):
200         (div.code pre):
201         (dt):
202         (dd):
203         (dd:last-child):
204         (.site-logo):
205         (.site-logo .tagline):
206         (table):
207         (#contents):
208         (p):
209         (p:last-child):
210         (th):
211         (td):
212
213 2016-06-28  Jon Lee  <jonlee@apple.com>
214
215         Update focus test
216         https://bugs.webkit.org/show_bug.cgi?id=159242
217         rdar://problem/27070007
218
219         Reviewed by Dean Jackson.
220         Provisionally reviewed by Said Abou-Hallawa.
221
222         Move previous test to dom suite, and update the test for better reporting of frame rate, although
223         it uses a different rendering path.
224
225         * Animometer/resources/debug-runner/tests.js: Add to dom suite.
226         * Animometer/tests/dom/focus.html: Copied from PerformanceTests/Animometer/tests/master/focus.html.
227         * Animometer/tests/dom/resources/focus.js: Copied from PerformanceTests/Animometer/tests/master/resources/focus.js.
228         * Animometer/tests/master/focus.html: Remove center element.
229         * Animometer/tests/master/resources/focus.js: Use narrower size range with smaller particles. Remove the
230         container elements. Inline getBlurValue and getOpacityValue since they are only called once.
231
232 2016-06-28  Filip Pizlo  <fpizlo@apple.com>
233
234         Move Air.js and Basic into ES6SampleBench
235
236         Rubber stamped by Geoffrey Garen.
237         
238         We want to group our ES6 benchmarks together, and eventually, we want to give them a
239         common harness.
240
241         * Air.js: Removed.
242         * Air.js/README.md: Removed.
243         * Air.js/airjs-tests.yaml: Removed.
244         * Air.js/all.js: Removed.
245         * Air.js/allocate_stack.js: Removed.
246         * Air.js/arg.js: Removed.
247         * Air.js/basic_block.js: Removed.
248         * Air.js/benchmark.js: Removed.
249         * Air.js/code.js: Removed.
250         * Air.js/custom.js: Removed.
251         * Air.js/frequented_block.js: Removed.
252         * Air.js/insertion_set.js: Removed.
253         * Air.js/inst.js: Removed.
254         * Air.js/liveness.js: Removed.
255         * Air.js/make_dist.sh: Removed.
256         * Air.js/opcode.js: Removed.
257         * Air.js/payload-airjs-ACLj8C.js: Removed.
258         * Air.js/payload-gbemu-executeIteration.js: Removed.
259         * Air.js/payload-imaging-gaussian-blur-gaussianBlur.js: Removed.
260         * Air.js/payload-typescript-scanIdentifier.js: Removed.
261         * Air.js/reg.js: Removed.
262         * Air.js/stack_slot.js: Removed.
263         * Air.js/stress-test.js: Removed.
264         * Air.js/strip-hash.rb: Removed.
265         * Air.js/symbols.js: Removed.
266         * Air.js/test.html: Removed.
267         * Air.js/test.js: Removed.
268         * Air.js/tmp.js: Removed.
269         * Air.js/tmp_base.js: Removed.
270         * Air.js/util.js: Removed.
271         * Basic: Removed.
272         * Basic/ast.js: Removed.
273         * Basic/basic.js: Removed.
274         * Basic/benchmark.js: Removed.
275         * Basic/caseless_map.js: Removed.
276         * Basic/lexer.js: Removed.
277         * Basic/number.js: Removed.
278         * Basic/parser.js: Removed.
279         * Basic/random.js: Removed.
280         * Basic/state.js: Removed.
281         * Basic/test.html: Removed.
282         * Basic/test.js: Removed.
283         * Basic/util.js: Removed.
284         * ES6SampleBench: Added.
285         * ES6SampleBench/Air: Copied from PerformanceTests/Air.js.
286         * ES6SampleBench/Basic: Copied from PerformanceTests/Basic.
287         * Skipped:
288
289 2016-06-24  Filip Pizlo  <fpizlo@apple.com>
290
291         Add a ES6 generator benchmark
292         https://bugs.webkit.org/show_bug.cgi?id=159101
293
294         Rubber stamped by Keith Miller.
295         
296         This adds a Basic interpreter loosely based on ECMA-55:
297         
298         http://www.ecma-international.org/publications/files/ECMA-ST-WITHDRAWN/ECMA-55,%201st%20Edition,%20January%201978.pdf
299         
300         It includes a lexer that is a generator, a parser that uses regular expressions, and an AST
301         walk interpreter where the walking functions for statements are generators that call each
302         other with yield*. This enables the interpreter to look like an AST walk even though it can
303         yield at INPUT and PRINT statements.
304         
305         This also uses for-of, classes, Map, and WeakMap. It also uses deprecated-but-awesome RegExp
306         features like RegExp.lastMatch and RegExp.rightContext. I did it that way because this is
307         how I've always written lexers in dynamic languages; see offlineasm's lex() method in
308         parser.rb for example.
309         
310         The benchmark runs a handful of simple Basic programs. The longest-running one computes
311         prime numbers.
312         
313         Includes a command-line and web harness. On my machine it runs in 2-3 seconds.
314
315         * Basic: Added.
316         * Basic/ast.js: Added.
317         (Basic.NumberApply):
318         (Basic.Variable):
319         (Basic.Const):
320         (Basic.NumberPow):
321         (Basic.NumberMul):
322         (Basic.NumberDiv):
323         (Basic.NumberNeg):
324         (Basic.NumberAdd):
325         (Basic.NumberSub):
326         (Basic.StringVar):
327         (Basic.Equals):
328         (Basic.NotEquals):
329         (Basic.LessThan):
330         (Basic.GreaterThan):
331         (Basic.LessEqual):
332         (Basic.GreaterEqual):
333         (Basic.GoTo):
334         (Basic.GoSub):
335         (Basic.Def):
336         (Basic.Let):
337         (Basic.If):
338         (Basic.Return):
339         (Basic.Stop):
340         (Basic.On):
341         (sideState.shouldStop):
342         (Basic.For):
343         (Basic.Next):
344         (Basic.Print):
345         (Basic.Input):
346         (Basic.Read):
347         (Basic.Restore):
348         (Basic.Dim):
349         (Basic.Randomize):
350         (Basic.End):
351         (Basic.Program):
352         * Basic/basic.js: Added.
353         (prepare):
354         (simulate):
355         * Basic/benchmark.js: Added.
356         (Benchmark):
357         (Benchmark.prototype.runIteration.expect):
358         (Benchmark.prototype.runIteration):
359         (runBenchmark):
360         * Basic/caseless_map.js: Added.
361         (CaselessMap):
362         * Basic/lexer.js: Added.
363         (lex.consumeWhitespace):
364         (lex.consume):
365         (lex):
366         * Basic/lexer_test.js: Added.
367         * Basic/number.js: Added.
368         (NumberValue):
369         (NumberValue.prototype.get value):
370         (NumberValue.prototype.apply):
371         (NumberValue.prototype.leftApply):
372         (NumberValue.prototype.assign):
373         (NumberArray.):
374         (NumberArray):
375         (NumberArray.prototype.apply):
376         (NumberArray.prototype.leftApply):
377         (NumberFunction):
378         (NumberFunction.prototype.apply):
379         (NumberFunction.prototype.leftApply):
380         (NativeFunction):
381         (NativeFunction.prototype.apply):
382         (NativeFunction.prototype.leftApply):
383         * Basic/parser.js: Added.
384         (parse):
385         (parse.pushToken):
386         (parse.peekToken):
387         (parse.consumeKind):
388         (parse.consumeToken):
389         (parse.parseVariable):
390         (parse.parseNumericExpression.parsePrimary):
391         (parse.parseNumericExpression.parseFactor):
392         (parse.parseNumericExpression.parseTerm):
393         (parse.parseNumericExpression):
394         (parse.parseConstant):
395         (parse.parseStringExpression):
396         (parse.isStringExpression):
397         (parse.parseRelationalExpression):
398         (parse.parseNonNegativeInteger):
399         (parse.parseGoToStatement):
400         (parse.parseGoSubStatement):
401         (parse.parseStatement):
402         (parse.parseStatements):
403         * Basic/random.js: Added.
404         (createRNG):
405         (createRNGWithFixedSeed):
406         (createRNGWithRandomSeed):
407         * Basic/state.js: Added.
408         (State):
409         (State.prototype.getValue):
410         (State.prototype.getSideState):
411         (State.prototype.abort):
412         (State.prototype.validate):
413         * Basic/test.html: Added.
414         * Basic/test.js: Added.
415         * Basic/util.js: Added.
416         (this.performance.performance.now.currentTime):
417         (else.this.preciseTime.currentTime):
418         (else.currentTime):
419         * Skipped: Make sure that we don't run Basic yet.
420
421 2016-06-21  Jon Lee  <jonlee@apple.com>
422
423         Update canvas size when benchmark begins
424         https://bugs.webkit.org/show_bug.cgi?id=159010
425
426         Reviewed by Dean Jackson.
427
428         Previously we would evaluate the media queries and assign the canvas size to the test
429         on body.onload. Instead, do it once the user starts the benchmark.
430
431         * Animometer/resources/debug-runner/animometer.js: Move benchmarkController.determineCanvasSize()
432         to benchmarkController._startBenchmark.
433         * Animometer/resources/runner/animometer.js: Ditto.
434
435 2016-06-21  Jon Lee  <jonlee@apple.com>
436
437         Add new timestamp option
438         https://bugs.webkit.org/show_bug.cgi?id=159006
439
440         Reviewed by Dean Jackson.
441
442         Add a new option to take timestamps from the rAF callback.
443
444         * Animometer/developer.html: Added option.
445         * Animometer/tests/resources/main.js:
446         (Benchmark): Fall back to using the rAF timestamp if performance.now()
447         is not available.
448         (Benchmark._animateLoop): Update how timestamp is set. Prefer to use
449         local var instead of accessing private var.
450
451 2016-06-21  Jon Lee  <jonlee@apple.com>
452
453         Improvements to Animometer benchmark
454         https://bugs.webkit.org/show_bug.cgi?id=157738
455
456         Reviewed by Dean Jackson.
457         Provisionally reviewed by Said Abou-Hallawa.
458
459         Update tests.
460
461         * Animometer/tests/master/text.html: Ensure only three text sizes for
462         the three canvases.
463         * Animometer/tests/master/focus.html: Reduce the text size to fit with smaller
464         particle sizes.
465         * Animometer/tests/master/resources/focus.js: Remove the quadratic distribution for
466         particle sizes, and make it linear. Reduce the size variance. Shuffle the math to
467         reduce some calculations per frame. Fix the placement of the particles which might
468         otherwise be culled.
469         * Animometer/tests/master/resources/image-data.js: Reduce the particle size
470         to encourage larger scores.
471
472 2016-06-21  Jon Lee  <jonlee@apple.com>
473
474         Improvements to Animometer benchmark
475         https://bugs.webkit.org/show_bug.cgi?id=157738
476
477         Reviewed by Dean Jackson.
478         Provisionally reviewed by Said Abou-Hallawa.
479
480         Include confidence interval for the final score, and store the canvas
481         size in the serialization so that it is accurately shown in results.
482
483         * Animometer/developer.html: Add a "confidence" div.
484         * Animometer/index.html: Ditto. Convert "mean" to "confidence".
485         * Animometer/resources/debug-runner/animometer.js: Look at options, and
486         if the configuration is included, update the body class based on it
487         (similar to what we do when we first load the page). That way, if you
488         drag-and-drop previous results in, that configuration is reflected in
489         the dashboard. Show the full confidence interval.
490
491         * Animometer/resources/debug-runner/animometer.css:
492         * Animometer/resources/debug-runner/animometer.js: Style update.
493         * Animometer/resources/runner/animometer.css:
494
495         * Animometer/resources/runner/animometer.js:
496         (_processData): Propagate the confidence interval values out and calculate
497         the lower and upper bounds. For now, shortcut the aggregate calculation,
498         since we only go through one iteration.
499         (this._processData.calculateScore): Propagate the confidence interval out
500         to be next to the score. Depending on the controller these values are
501         calculated differently.
502         (this._processData._getResultsProperty): Convenience function.
503         (this._processData.get score): Refactor.
504         (this._processData.get scoreLowerBound): Get the aggregate lower bound.
505         (this._processData.get scoreUpperBound): Get the aggregate upper bound.
506         (window.sectionsManager.setSectionScore):
507         (window.benchmarkController._startBenchmark): When the benchmark starts, note
508         the canvas size and add it to options. That way it will be automatically be
509         serialized.
510         (window.benchmarkController.showResults): Include the maximum deviation
511         percentage.
512         * Animometer/resources/runner/lines.svg: Make the background line up with the
513         skew.
514         * Animometer/resources/runner/tests.js:
515         (Headers.details.text): Refactor.
516         * Animometer/resources/statistics.js:
517         (Statistics.largestDeviationPercentage): Convenience function to calculate
518         the deviation percentage on either end and return the largest deviation.
519         * Animometer/resources/strings.js:
520
521         Allow specifying a regression profile to use instead of taking the one
522         with the lowest error.
523
524         Address an issue in the focus test when the regression calculated ends
525         up overestimating the change point, causing a cascade of tougher
526         ramps. The reason behind this is that at max complexity of an initial
527         ramp, the frame length is very high, and it influences the second
528         segment of the piecewise regression strongly, causing it to be very
529         steep. As a result, the first segment, expected to be flat, ends up
530         covering a higher range of complexity. That makes the change point
531         much higher than it should be. To avoid this, we will add a sanity
532         check on the maximum value of the ramp. If the regression's projected
533         value at the maximum complexity of the current ramp is very slow (less
534         than 20 fps), 1) reduce the maximum complexity by 20%, and 2) do not
535         include the regression's change point in the change point estimator.
536         That estimator is used as the midpoint of the next ramp, and including
537         the change point from a poor regression can bake in the error. The
538         controller already knows how to adjust for ramps that are too easy for
539         the system.
540
541         * Animometer/resources/runner/animometer.js:
542         (this._processData.findRegression): Takes a preferred profile and gives that to
543         Regression.
544         (this._processData.calculateScore): With the ramp controller, take the profile
545         of the ramp that was used the most when calculating the ramp's regression. That
546         profile is what is used for the test's score.
547         * Animometer/resources/statistics.js:
548         (Regression.Utilities.createClass): Update to take an options object which can
549         specify a profile to calculate with. Otherwise it will continue to use both and
550         select the one with the lower error.
551         (_calculateRegression): Fix an issue where we claim 0 error if the regression
552         calculation fails due to divide-by-zero. Instead reject that regression calculation
553         by giving it Number.MAX_VALUE.
554         * Animometer/resources/strings.js: New strings for marking a regression as flat
555         or slope.
556         * Animometer/tests/resources/main.js:
557         (RampController): Rename the thresholds for clarity. Add a threshold that, if
558         exceeded, will lower the maximum complexity of the next ramp.
559         (tune): Relax the cdf check to consider whether the interval definitely falls in
560         the desired frame length threshold.
561         (processSamples): Include the profile in the ramp.
562
563         Update ramp controller test. Increase the length of the test to 30 seconds, and extend
564         the interval to 120 ms during sampling. Improve the estimation of the ramp parameters.
565
566         * Animometer/developer.html: Change default to 30 seconds, and don't show the progress bar
567         by default.
568         * Animometer/resources/runner/animometer.js: Change default to 30 seconds.
569         * Animometer/tests/resources/main.js: A number of improvements to the ramp controller, in
570         the order in which they appear in the patch:
571
572         - With a longer test length use longer ramps with longer intervals to get more data at each
573         complexity. Keep the 100 ms interval length during the ramp up phase since we don't need to
574         spend more time there to find the right order of magnitude, but increase it during the
575         ramps to 120 ms.
576         - The ramp linearly interpolates the complexity to render based on its timestamp, but it would
577         never sample the minimum complexity. Instead of lerping max to min complexity from time
578         0 to t where t is the ramp length, instead lerp from 0 to (t - intervalSampleLength) so that
579         we can have at least one interval sample at the min complexity for that ramp.
580         - Some regression calculations only come out with one line segment rather than the two
581         we expect. This could be due to a noisy ramp or the ramp's range is too narrow. If that's the
582         case, influence the minimum complexity of the next ramp towards the lowest bound of 1, so that
583         we ensure that at least part of the ramp is covering a complexity range that the system can
584         handle at full 60.
585         - Remove an assignment to interpolatedFrameLength since that is never subsequently used.
586
587         Update the format used to serialize the results for analysis.
588
589         Each data point used to have named properties for fields like complexity and frame rate.
590         In addition the serialized numbers had rounding errors that took up many characters.
591         Update the format by introducing a new data container called SampleData, which contains a
592         field map. The map maps a string to an array index. Each data point is an array, so, to
593         get a stat, use the field map to get the array index into the data point. This allows future
594         versions to track other data, and reduces the size of the output string by two-thirds.
595
596         * Animometer/resources/extensions.js:
597         (Utilities.toFixedNumber): Add convenience function that truncates the number to a fixed
598         precision, and converts it back to a number.
599         (SampleData): New class that contains sample data and a field map that maps properties to
600         an array index.
601         (get length): Number of data points.
602         (addField): Add a field to the field map.
603         (push): Add a data point.
604         (sort): Sort the data.
605         (slice): Return new SampleData object with sliced data.
606         (forEach): Iterate over the data with provided function.
607         (createDatum):
608         (getFieldInDatum): Returns the data point associated with the field name by looking it up
609         in the field map in the datum provided, which can be the datum object itself (an array) or
610         an index into the data member variable.
611         (setFieldInDatum): Sets the data point associated with the field name.
612         (at): Returns the data point at the provided index.
613         (toArray): Serializes the data where the field map serves as property names for each point.
614
615         * Animometer/resources/debug-runner/graph.js:
616         (updateGraphData): Remove unused _testData. Convert the data to the old array format for the
617         graph to use, since the old format was much easier to work with when displaying the graphs.
618         (onGraphTypeChanged): For some controllers, no alternative score or mean is provided.
619         * Animometer/resources/runner/animometer.css:
620         * Animometer/resources/runner/animometer.js: Refactor to use SampleData. Update JSON output
621         to only go to 3 digits of precision for purposes of reducing the data size.
622         * Animometer/resources/strings.js: Add new strings to put into the field maps.
623         * Animometer/tests/resources/main.js: Refactor to use SampleData.
624
625         * Animometer/developer.html:
626         * Animometer/index.html: Restructure results table for both pages. Add charset attribute to
627         tests.js include.
628         * Animometer/resources/debug-runner/animometer.css: Clear out styles from release runner.
629         * Animometer/resources/debug-runner/graph.js:
630         (onGraphTypeChanged): Update score and mean if bootstrap results are available from the
631         controller, since not all controllers do bootstrapping.
632         * Animometer/resources/debug-runner/tests.js: Update header text.
633         * Animometer/resources/runner/animometer.css: Include confidence interval in results.
634         * Animometer/resources/runner/animometer.js:
635         (ResultsTable._addHeader): Header contents can be HTML, so use innerHTML instead.
636         (ResultsTable._addBody): Add tbody element.
637         (ResultsTable._addTest): Allow a data cell to invoke a JS function to get its contents.
638         (window.benchmarkController.showResults): Add table that includes tests' confidence intervals.
639         * Animometer/resources/runner/tests.js:
640         (Headers.details.text): Add new details table that includes bootstrap confidence interval.
641         The interval can be asymmetric, but for simplicity, report the maximum deviation percentage
642         on either side of the bootstrap median.
643         * Animometer/resources/statistics.js:
644         (bootstrap): Include the confidence percentage in the return object.
645
646         Report canvas size in results.
647
648         * Animometer/developer.html: Add markup to indicate whether a small, medium, or large
649         canvas was used.
650         * Animometer/index.html: Ditto.
651         * Animometer/resources/debug-runner/animometer.js: Call determineCanvasSize().
652         * Animometer/resources/runner/animometer.css: Update styles to set the canvas based on the
653         body class size.
654         * Animometer/resources/runner/animometer.js:
655         (window.benchmarkController.initialize): Update styles to set the canvas based on the
656         body class size.
657         (window.benchmarkController.determineCanvasSize): Run various media queries and set the body
658         class based on the size of the device.
659
660         * Animometer/developer.html: Refactor to include the main CSS file, and redo
661         the layout so that it doesn't rely on flexbox.
662         * Animometer/resources/debug-runner/animometer.css:
663         * Animometer/resources/debug-runner/animometer.js:
664         (updateDisplay): Since various parts of the script alter the body class, we can't
665         replace the className directly. Instead, remove all display-based values and then add
666         the one that was selected.
667         * Animometer/resources/debug-runner/graph.js:
668         (updateGraphData): To set the size of the graph, use window.innerHeight.
669         * Animometer/resources/runner/animometer.js:
670         (window.sectionsManager.showSection): Since various parts of the script alter the body
671         class, we can't replace the className directly. Remove all of the section classes
672         individually and then add the one desired.
673         * Animometer/tests/resources/stage.css: Remove -apple-system as a font to use in the
674         stage.
675
676 2016-06-12  Filip Pizlo  <fpizlo@apple.com>
677
678         Fix round-down goof in Air.js's ShuffleCustom.forEachArg
679         https://bugs.webkit.org/show_bug.cgi?id=158674
680
681         Reviewed by Michael Saboff.
682         
683         x / 3 * 3 is not how you round down to multiples of 3 in JavaScript. You need to do
684         Math.floor(x / 3) * 3 instead.
685         
686         This is a benign change, because having extra arguments to a Shuffle is not something we
687         actually take advantage of yet. But I think it's best to match the original C++ code's
688         intent.
689
690         * Air.js/custom.js:
691         (const.ShuffleCustom.forEachArg):
692
693 2016-06-11  Filip Pizlo  <fpizlo@apple.com>
694
695         Unreviewed, skip Air.js. It got unskipped when I renamed it from JSAir.
696
697         * Skipped:
698
699 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
700
701         Make it easy to package Air.js
702         https://bugs.webkit.org/show_bug.cgi?id=158652
703
704         Reviewed by Benjamin Poulain.
705         
706         If you want to give Air.js to someone, you can now do:
707         
708         cd PerformanceTests/Air.js
709         ./make_dist.sh
710         
711         This will create Air.js.tar.gz and a directory called Air.js. If you want to send someone
712         the benchmark, just send either of those things and tell them to look at index.html.
713         
714         You may have to edit make_dist.sh for wherever you have Markdown.pl. You can get that from
715         https://daringfireball.net/projects/markdown/
716
717         * Air.js/make_dist.sh: Added.
718         * Air.js/test.html:
719
720 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
721
722         Unreviewed, make the link to test.html into an actual link.
723
724         * Air.js/README.md:
725
726 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
727
728         Fix some text in Air.js/README.md
729         https://bugs.webkit.org/show_bug.cgi?id=158650
730
731         Reviewed by Benjamin Poulain.
732         
733         I read the text again and found bugs:
734         
735         - We never actually say how to run the benchmark. This change adds a blurb about how to run
736           it.
737
738         - We both say that allocateStack is responsible for the bulk of the running time and that
739           we haven't measured where the bulk of the time is spent. This changes the text to say that
740           it was a goal to make allocateStack be the hottest part of the benchmark, but that we did
741           not measure this.
742
743         * Air.js/README.md:
744
745 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
746
747         Air.js should have some documentation
748         https://bugs.webkit.org/show_bug.cgi?id=158648
749
750         Reviewed by Keith Miller.
751         
752         I want to be able to point people at a document if they want to know more about this
753         benchmark.
754
755         * Air.js/README.md: Added.
756
757 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
758
759         Rename JSAir to Air.js.
760
761         Rubber stamped by Mark Lam.
762
763         * Air.js: Copied from PerformanceTests/JSAir.
764         * Air.js/airjs-tests.yaml: Copied from PerformanceTests/JSAir/jsair-tests.yaml.
765         * Air.js/benchmark.js: Copied from PerformanceTests/JSAir/benchmark.js.
766         (Benchmark):
767         * Air.js/jsair-tests.yaml: Removed.
768         * Air.js/payload-airjs-ACLj8C.js: Copied from PerformanceTests/JSAir/payload-jsair-ACLj8C.js.
769         * Air.js/payload-jsair-ACLj8C.js: Removed.
770         * Air.js/stress-test.js: Copied from PerformanceTests/JSAir/stress-test.js.
771         * Air.js/test.html: Copied from PerformanceTests/JSAir/test.html.
772         * Air.js/test.js: Copied from PerformanceTests/JSAir/test.js.
773         * JSAir: Removed.
774         * JSAir/all.js: Removed.
775         * JSAir/allocate_stack.js: Removed.
776         * JSAir/arg.js: Removed.
777         * JSAir/basic_block.js: Removed.
778         * JSAir/benchmark.js: Removed.
779         * JSAir/code.js: Removed.
780         * JSAir/custom.js: Removed.
781         * JSAir/frequented_block.js: Removed.
782         * JSAir/insertion_set.js: Removed.
783         * JSAir/inst.js: Removed.
784         * JSAir/jsair-tests.yaml: Removed.
785         * JSAir/liveness.js: Removed.
786         * JSAir/opcode.js: Removed.
787         * JSAir/payload-gbemu-executeIteration.js: Removed.
788         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js: Removed.
789         * JSAir/payload-jsair-ACLj8C.js: Removed.
790         * JSAir/payload-typescript-scanIdentifier.js: Removed.
791         * JSAir/reg.js: Removed.
792         * JSAir/stack_slot.js: Removed.
793         * JSAir/stress-test.js: Removed.
794         * JSAir/strip-hash.rb: Removed.
795         * JSAir/symbols.js: Removed.
796         * JSAir/test.html: Removed.
797         * JSAir/test.js: Removed.
798         * JSAir/tmp.js: Removed.
799         * JSAir/tmp_base.js: Removed.
800         * JSAir/util.js: Removed.
801
802 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
803
804         JSC Stress Test failing: jsair-tests.yaml/test.js.ftl-eager-no-cjit
805         https://bugs.webkit.org/show_bug.cgi?id=158571
806
807         Reviewed by Keith Miller.
808         
809         Introduce a different harness for run-jsc-stress-tests, which runs for a minimum of 10
810         iterations and then tries to do any number of "bonus" iterations until it's been running for
811         two seconds. Since this is the sort of test that isn't really meant to stress anything in
812         particular, I think it's OK if it is time-limited in this way. The worst case is that some
813         of its failures will be flaky, but I think that they would have been flaky anyway given the
814         complexity of the test.
815
816         * JSAir/benchmark.js:
817         (Benchmark):
818         (Benchmark.prototype.runIteration):
819         (benchmark): Deleted.
820         * JSAir/jsair-tests.yaml:
821         * JSAir/stress-test.js: Added.
822         (preciseTime):
823         * JSAir/test.html:
824         * JSAir/test.js:
825
826 2016-06-09  Filip Pizlo  <fpizlo@apple.com>
827
828         Unreviewed, teach the perf bots not to run JSAir.
829
830         * Skipped:
831
832 2016-06-08  Filip Pizlo  <fpizlo@apple.com>
833
834         Use more ES6 features in JSAir
835         https://bugs.webkit.org/show_bug.cgi?id=158497
836
837         Reviewed by Keith Miller.
838         
839         This improves JSAir with the following ES6 features suggested by JoePeck:
840         
841         - String interpolation.
842         - Destructuring inside PatchCustom.
843         - Default arguments.
844         
845         All of these things are on hot paths.
846         
847         Note that I didn't use string interpolation everywhere that I could, only in those places
848         where it made the code more readable. In Ruby, I used the style that if the interpolation
849         expression has any non-trivial stuff (like a ternary operator, a chain of calls, or embedded
850         strings) then it's better to use regular strcat. I think that's what I carried over to here.
851         
852         Note that the previous change (Add result validation to JSAir) also made the Proxy code not
853         dead, though it's not necessarily on the hot path. The Proxy isn't called into frequently
854         but it's used from a function that is otherwise hot, so if calling into the Proxy prevents
855         that function from being optimized then it will hurt so good.
856         
857         I also reenabled tail calls in a few places.
858         
859         This change doesn't seem to change the performance of the benchmark for us. That's expected
860         since these ES6 features are cheap. Note that this claim doesn't include Proxy, which was
861         added in a separate change and that change did make the benchmark overall more expensive.
862
863         * JSAir/allocate_stack.js:
864         (allocateStack):
865         * JSAir/arg.js:
866         (Arg.createBitImm64):
867         (Arg.createAddr):
868         (Arg.createStack):
869         (Arg.logScale):
870         (Arg.createIndex):
871         * JSAir/basic_block.js:
872         (BasicBlock.get headerString):
873         (BasicBlock.prototype.get if):
874         (BasicBlock):
875         * JSAir/benchmark.js:
876         (benchmark):
877         * JSAir/code.js:
878         (Code):
879         (Code.prototype.addBlock):
880         (Code.prototype.addStackSlot):
881         (Code.prototype.newTmp):
882         (Code.prototype.get size):
883         (Code.prototype.get blocks):
884         (Code.prototype.get stackSlots):
885         (Code.prototype.tmps):
886         (Code.prototype.get callArgAreaSize):
887         (Code.prototype.toString):
888         * JSAir/custom.js:
889         (const.PatchCustom.forEachArg):
890         * JSAir/inst.js:
891         (Inst):
892         * JSAir/reg.js:
893         (Reg.prototype.toString):
894         * JSAir/util.js:
895         (symbolName):
896         (lowerSymbolName):
897
898 2016-06-07  Filip Pizlo  <fpizlo@apple.com>
899
900         Add result validation to JSAir
901         https://bugs.webkit.org/show_bug.cgi?id=158493
902
903         Reviewed by Saam Barati.
904         
905         This adds the ability to hash a Code in a way that matches the C++ code's hashing of Code.
906         This allows us to check if the Code that JSAir sees is the code that C++ saw. We use this to
907         check the Code before and after allocateStack, and compare against hashes we got from C++.
908         
909         Doing this uncovered bugs. roundUpToMultipleOf wasn't doing anything. allocateStack was not
910         allocating things correctly because I was concatting a Set to an Array, which doesn't really
911         work. Now these bugs are fixed.
912         
913         The checking step adds to the running time so I reduced the number of iterations. The
914         benchmark spends a decent amount of its time computing Code hashes; I think it's around 1/3
915         total. This is probably OK. It's better to verify the results even if the running time is
916         not all in the "core" of the algorithm.
917         
918         Also add a run-jsc-stress-tests yaml file to allow this to run as a test.
919
920         * JSAir/allocate_stack.js:
921         * JSAir/arg.js:
922         (Arg.createImm):
923         (Arg.createBigImm):
924         (Arg.createBitImm):
925         (Arg.createBitImm64):
926         (Arg.createWidth):
927         (Arg.createSpecial):
928         (Arg.prototype.get kind):
929         (Arg.prototype.get isTmp):
930         (Arg.prototype.get isImm):
931         (Arg.prototype.get isSomeImm):
932         (Arg.prototype.get isSomeBigImm):
933         (Arg.prototype.get isCondition):
934         (Arg.prototype.get isWidth):
935         (Arg.prototype.get isSpecial):
936         (Arg.prototype.get isAlive):
937         (Arg.prototype.get tmp):
938         (Arg.prototype.get value):
939         (Arg.prototype.get lowValue):
940         (Arg.prototype.get highValue):
941         (Arg.prototype.get base):
942         (Arg.prototype.get isGP):
943         (Arg.prototype.get isFP):
944         (Arg.prototype.isValidForm):
945         (Arg.prototype.get isInvertible):
946         (Arg.kindCode):
947         (Arg.prototype.hash):
948         (Arg.prototype.toString):
949         (Arg):
950         * JSAir/basic_block.js:
951         (BasicBlock.get successorBlocks):
952         * JSAir/benchmark.js:
953         (benchmark):
954         * JSAir/code.js:
955         (Code.prototype.setFrameSize):
956         (Code.prototype.hash):
957         (Code.prototype.toString):
958         (Code):
959         * JSAir/inst.js:
960         (Inst.prototype.get hasNonArgEffects):
961         (Inst.prototype.hash):
962         (Inst.prototype.toString):
963         (Inst):
964         * JSAir/jsair-tests.yaml: Added.
965         * JSAir/opcode.js:
966         (Inst_forEachArg):
967         (Inst_hasNonArgEffects):
968         (opcodeCode):
969         * JSAir/payload-gbemu-executeIteration.js:
970         (createPayloadGbemuExecuteIteration):
971         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js:
972         (createPayloadImagingGaussianBlurGaussianBlur):
973         * JSAir/payload-jsair-ACLj8C.js:
974         (createPayloadJSAirACLj8C):
975         * JSAir/payload-typescript-scanIdentifier.js:
976         (createPayloadTypescriptScanIdentifier):
977         * JSAir/reg.js:
978         (Reg.prototype.get isReg):
979         (Reg.prototype.hash):
980         (Reg.prototype.toString):
981         * JSAir/stack_slot.js:
982         (StackSlot.prototype.setOffsetFromFP):
983         (StackSlot.prototype.hash):
984         (StackSlot.prototype.toString):
985         * JSAir/symbols.js:
986         (relCondCode):
987         (resCondCode):
988         (doubleCondCode):
989         * JSAir/test.html:
990         * JSAir/tmp.js:
991         (Tmp.prototype.get isReg):
992         (Tmp.prototype.hash):
993         (Tmp.prototype.toString):
994         * JSAir/util.js:
995         (roundUpToMultipleOf):
996         (symbolName):
997
998 2016-06-07  Filip Pizlo  <fpizlo@apple.com>
999
1000         Implement Air::allocateStack() in ES6 to see how much of a bad idea that is
1001         https://bugs.webkit.org/show_bug.cgi?id=158318
1002
1003         Reviewed by Saam Barati.
1004         
1005         This adds a new benchmark for us to play with called JSAir. It's a complete ES6
1006         implementation of Air's allocateStack() phase along with all of Air needed to run that
1007         phase. This includes things like stack slots, registers, temporaries, basic blocks,
1008         instructions, and all of the code for iterating over, inspecting, and modifying those
1009         things.
1010         
1011         To make this work, JSC can now dump Air just before allocateStack() in the form of JS code
1012         that creates a Code object that matches exactly what C++ Air saw. This benchmark comprises
1013         four Air IRs:
1014         
1015         - Octane/gbemu's largest function, executeIteration.
1016         - Kraken/imaging-gaussian-blur's largest function in OSR entry mode, gaussuanBlur.
1017         - Octane/typescript's largest function that is actually hot, scanIdentifier.
1018         - JSAir's largest hot function, which is anonymous, so we call it by its hash (ACLj8C).
1019         
1020         This runs in about 2 seconds on my machine in JSC trunk. It includes both a commandline
1021         harness and a web harness. JSAir is almost exactly 100x slower in ES6 in WebKit than the
1022         C++ Air::allocateStack() phase on which it is based.
1023         
1024         JSAir uses the following ES6 features:
1025         
1026         - Symbol.
1027         - for-of.
1028         - arrow functions.
1029         - Map/Set.
1030         - let/const.
1031         - classes.
1032         
1033         All of these things are used in anger and should end up on the hot path. There is also code
1034         that uses Proxies, but it ends up being dead.
1035         
1036         We can improve this even more:
1037         I still need to add result validation: https://bugs.webkit.org/show_bug.cgi?id=158493
1038         I want to make it use more ES6 features: https://bugs.webkit.org/show_bug.cgi?id=158497
1039         
1040         * JSAir: Added.
1041         * JSAir/all.js: Added.
1042         * JSAir/allocate_stack.js: Added.
1043         (allocateStack.attemptAssignment):
1044         (allocateStack.assign):
1045         (allocateStack.interfere):
1046         (allocateStack.):
1047         (allocateStack):
1048         * JSAir/arg.js: Added.
1049         (Arg):
1050         (Arg.isAnyUse):
1051         (Arg.isColdUse):
1052         (Arg.isWarmUse):
1053         (Arg.cooled):
1054         (Arg.isEarlyUse):
1055         (Arg.isLateUse):
1056         (Arg.isAnyDef):
1057         (Arg.isEarlyDef):
1058         (Arg.isLateDef):
1059         (Arg.isZDef):
1060         (Arg.typeForB3Type):
1061         (Arg.widthForB3Type):
1062         (Arg.conservativeWidth):
1063         (Arg.minimumWidth):
1064         (Arg.bytes):
1065         (Arg.widthForBytes):
1066         (Arg.createTmp):
1067         (Arg.fromReg):
1068         (Arg.createImm):
1069         (Arg.createBigImm):
1070         (Arg.createBitImm):
1071         (Arg.createBitImm64):
1072         (Arg.createAddr):
1073         (Arg.createStack):
1074         (Arg.createCallArg):
1075         (Arg.createStackAddr):
1076         (Arg.isValidScale):
1077         (Arg.logScale):
1078         (Arg.createIndex):
1079         (Arg.createRelCond):
1080         (Arg.createResCond):
1081         (Arg.createDoubleCond):
1082         (Arg.createWidth):
1083         (Arg.prototype.get kind):
1084         (Arg.prototype.get isTmp):
1085         (Arg.prototype.get isImm):
1086         (Arg.prototype.get isBigImm):
1087         (Arg.prototype.get isBitImm):
1088         (Arg.prototype.get isBitImm64):
1089         (Arg.prototype.get isSomeImm):
1090         (Arg.prototype.get isAddr):
1091         (Arg.prototype.get isStack):
1092         (Arg.prototype.get isCallArg):
1093         (Arg.prototype.get isIndex):
1094         (Arg.prototype.get isMemory):
1095         (Arg.prototype.get isStackMemory):
1096         (Arg.prototype.get isRelCond):
1097         (Arg.prototype.get isResCond):
1098         (Arg.prototype.get isDoubleCond):
1099         (Arg.prototype.get isCondition):
1100         (Arg.prototype.get isWidth):
1101         (Arg.prototype.get isAlive):
1102         (Arg.prototype.get tmp):
1103         (Arg.prototype.get value):
1104         (Arg.prototype.get base):
1105         (Arg.prototype.get hasOffset):
1106         (Arg.prototype.get offset):
1107         (Arg.prototype.get stackSlot):
1108         (Arg.prototype.get index):
1109         (Arg.prototype.get scale):
1110         (Arg.prototype.get logScale):
1111         (Arg.prototype.get width):
1112         (Arg.prototype.get isGPTmp):
1113         (Arg.prototype.get isFPTmp):
1114         (Arg.prototype.get isGP):
1115         (Arg.prototype.get isFP):
1116         (Arg.prototype.get hasType):
1117         (Arg.prototype.get type):
1118         (Arg.prototype.isType):
1119         (Arg.prototype.isCompatibleType):
1120         (Arg.prototype.get isGPR):
1121         (Arg.prototype.get gpr):
1122         (Arg.prototype.get isFPR):
1123         (Arg.prototype.get fpr):
1124         (Arg.prototype.get isReg):
1125         (Arg.prototype.get reg):
1126         (Arg.isValidImmForm):
1127         (Arg.isValidBitImmForm):
1128         (Arg.isValidBitImm64Form):
1129         (Arg.isValidAddrForm):
1130         (Arg.isValidIndexForm):
1131         (Arg.prototype.isValidForm):
1132         (Arg.prototype.forEachTmpFast):
1133         (Arg.prototype.usesTmp):
1134         (Arg.prototype.forEachTmp):
1135         (Arg.prototype.is):
1136         (Arg.prototype.as):
1137         (Arg.prototype.forEachFast):
1138         (Arg.prototype.forEach):
1139         (Arg.extract):
1140         (Arg.forEachFast):
1141         (Arg.forEach):
1142         (Arg.prototype.get condition):
1143         (Arg.prototype.get isInvertible):
1144         (Arg.prototype.toString):
1145         * JSAir/basic_block.js: Added.
1146         (BasicBlock):
1147         (BasicBlock.prototype.get index):
1148         (BasicBlock.prototype.get size):
1149         (BasicBlock.prototype.Symbol.iterator):
1150         (BasicBlock.prototype.at):
1151         (BasicBlock.get last):
1152         (BasicBlock.get insts):
1153         (BasicBlock.get numSuccessors):
1154         (BasicBlock.get successors):
1155         (BasicBlock.get successorBlocks.):
1156         (BasicBlock.get successorBlocks):
1157         (BasicBlock.set get numPredecessors):
1158         (BasicBlock.get predecessors):
1159         (BasicBlock.get frequency):
1160         (BasicBlock.get headerString):
1161         (BasicBlock.get footerString):
1162         * JSAir/benchmark.js: Added.
1163         (benchmark):
1164         * JSAir/code.js: Added.
1165         (Code):
1166         (Code.prototype.addBlock):
1167         (Code.prototype.addStackSlot):
1168         (Code.prototype.newTmp):
1169         (Code.prototype.get size):
1170         (Code.prototype.at):
1171         (Code.prototype.Symbol.iterator):
1172         (Code.prototype.get blocks):
1173         (Code.prototype.get stackSlots):
1174         (Code.prototype.tmps):
1175         (Code.prototype.get callArgAreaSize):
1176         (Code.prototype.requestCallArgAreaSize):
1177         (Code.prototype.get frameSize):
1178         (Code.prototype.setFrameSize):
1179         (Code.prototype.toString):
1180         * JSAir/custom.js: Added.
1181         (const.ShuffleCustom.forEachArg):
1182         (const.ShuffleCustom.hasNonArgNonControlEffects):
1183         (const.PatchCustom.forEachArg):
1184         (const.PatchCustom.hasNonArgNonControlEffects):
1185         (const.CCallCustom.forEachArg):
1186         (const.CCallCustom.hasNonArgNonControlEffects):
1187         (const.ColdCCallCustom.forEachArg):
1188         (const.ColdCCallCustom.hasNonArgNonControlEffects):
1189         * JSAir/frequented_block.js: Added.
1190         (FrequentedBlock):
1191         (FrequentedBlock.prototype.toString):
1192         * JSAir/insertion_set.js: Added.
1193         (Insertion):
1194         (Insertion.prototype.get index):
1195         (Insertion.prototype.get element):
1196         (Insertion.prototype.lessThan):
1197         (InsertionSet):
1198         (InsertionSet.prototype.appendInsertion):
1199         (InsertionSet.prototype.append):
1200         (InsertionSet.prototype.execute):
1201         * JSAir/inst.js: Added.
1202         (Inst):
1203         (Inst.prototype.append):
1204         (Inst.prototype.clear):
1205         (Inst.prototype.get opcode):
1206         (Inst.prototype.get args):
1207         (Inst.prototype.visitArg):
1208         (Inst.prototype.forEachTmpFast):
1209         (Inst.prototype.forEachArg):
1210         (Inst.prototype.forEachTmp):
1211         (Inst.prototype.forEach):
1212         (Inst.forEachDef):
1213         (Inst.forEachDefWithExtraClobberedRegs):
1214         (Inst.prototype.get hasNonArgEffects):
1215         (Inst.prototype.toString):
1216         * JSAir/liveness.js: Added.
1217         (Liveness):
1218         (Liveness.prototype.get thing):
1219         (Liveness.prototype.get code):
1220         (Liveness.prototype.get liveAtHead):
1221         (Liveness.prototype.get liveAtTail):
1222         (Liveness.prototype.localCalc.LocalCalc):
1223         (Liveness.prototype.localCalc.LocalCalc.prototype.get liveSet):
1224         (Liveness.prototype.localCalc.LocalCalc.prototype.execute):
1225         (Liveness.prototype.localCalc):
1226         * JSAir/opcode.js: Added.
1227         (Inst_forEachArg):
1228         (Inst_hasNonArgEffects):
1229         * JSAir/payload-gbemu-executeIteration.js: Added.
1230         (createPayloadGbemuExecuteIteration):
1231         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js: Added.
1232         (createPayloadImagingGaussianBlurGaussianBlur):
1233         * JSAir/payload-jsair-ACLj8C.js: Added.
1234         (createPayloadJSAirACLj8C):
1235         * JSAir/payload-typescript-scanIdentifier.js: Added.
1236         (createPayloadTypescriptScanIdentifier):
1237         * JSAir/reg.js: Added.
1238         (Reg):
1239         (Reg.fromReg):
1240         (Reg.prototype.get index):
1241         (Reg.prototype.get type):
1242         (Reg.prototype.get name):
1243         (Reg.prototype.get isCalleeSave):
1244         (Reg.prototype.get isReg):
1245         (Reg.prototype.toString):
1246         (Reg.extract):
1247         (Reg.forEachFast):
1248         (Reg.forEach):
1249         (newGPR):
1250         (Reg.gprs.Reg.fprs.Reg.calleeSaveGPRs.Reg.calleeSaveFPRs.Reg.calleeSaves):
1251         * JSAir/stack_slot.js: Added.
1252         (StackSlot):
1253         (StackSlot.prototype.get byteSize):
1254         (StackSlot.prototype.get kind):
1255         (StackSlot.prototype.get isLocked):
1256         (StackSlot.prototype.get isSpill):
1257         (StackSlot.prototype.get index):
1258         (StackSlot.prototype.ensureSize):
1259         (StackSlot.prototype.get alignment):
1260         (StackSlot.prototype.get offsetFromFP):
1261         (StackSlot.prototype.setOffsetFromFP):
1262         (StackSlot.prototype.toString):
1263         (StackSlot.extract):
1264         (StackSlot.forEachFast):
1265         (StackSlot.forEach):
1266         * JSAir/symbols.js: Added.
1267         * JSAir/test.html: Added.
1268         * JSAir/test.js: Added.
1269         * JSAir/tmp.js: Added.
1270         (Tmp):
1271         (Tmp.fromReg):
1272         (Tmp.prototype.get index):
1273         (Tmp.prototype.get type):
1274         (Tmp.prototype.get isReg):
1275         (Tmp.prototype.toString):
1276         (Tmp.extract):
1277         (Tmp.forEachFast):
1278         (Tmp.forEach):
1279         * JSAir/tmp_base.js: Added.
1280         (TmpBase.prototype.get isGP):
1281         (TmpBase.prototype.get isFP):
1282         (TmpBase.prototype.get isGPR):
1283         (TmpBase.prototype.get isFPR):
1284         (TmpBase.prototype.get reg):
1285         (TmpBase.prototype.get gpr):
1286         (TmpBase.prototype.get fpr):
1287         (TmpBase):
1288         * JSAir/util.js: Added.
1289         (isRepresentableAsInt32):
1290         (addIndexed):
1291         (roundUpToMultipleOf):
1292         (symbolName):
1293         (mergeIntoSet):
1294         (nonEmptyRangesOverlap):
1295         (rangesOverlap):
1296         (removeAllMatching):
1297         (swap):
1298         (bubble):
1299         (bubbleSort):
1300         (currentTime):
1301         (else.currentTime):
1302
1303 2016-05-26  Yusuke Suzuki  <utatane.tea@gmail.com>
1304
1305         [JSC] Allow JSBench to use precise time
1306         https://bugs.webkit.org/show_bug.cgi?id=158050
1307
1308         Reviewed by Geoffrey Garen.
1309
1310         * JSBench/amazon-chrome-win/urem.js:
1311         (else.window.performance.window.performance.now.currentTimeInMS):
1312         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1313         (else.else.currentTimeInMS):
1314         (onload.cb):
1315         (onload):
1316         * JSBench/amazon-chrome/urem.js:
1317         (else.window.performance.window.performance.now.currentTimeInMS):
1318         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1319         (else.else.currentTimeInMS):
1320         (onload.cb):
1321         (onload):
1322         * JSBench/amazon-firefox-win/urm.js:
1323         (else.window.performance.window.performance.now.currentTimeInMS):
1324         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1325         (else.else.currentTimeInMS):
1326         (onload.cb):
1327         (onload):
1328         * JSBench/amazon-firefox/urm.js:
1329         (else.window.performance.window.performance.now.currentTimeInMS):
1330         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1331         (else.else.currentTimeInMS):
1332         (onload.cb):
1333         (onload):
1334         * JSBench/amazon-safari/urem.js:
1335         (else.window.performance.window.performance.now.currentTimeInMS):
1336         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1337         (else.else.currentTimeInMS):
1338         (onload.cb):
1339         (onload):
1340         * JSBench/facebook-chrome-win/urem.js:
1341         (else.window.performance.window.performance.now.currentTimeInMS):
1342         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1343         (else.else.currentTimeInMS):
1344         (onload.cb):
1345         (onload):
1346         * JSBench/facebook-chrome/urem.js:
1347         (else.window.performance.window.performance.now.currentTimeInMS):
1348         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1349         (else.else.currentTimeInMS):
1350         (onload.cb):
1351         (onload):
1352         * JSBench/facebook-firefox-win/urem.js:
1353         (else.window.performance.window.performance.now.currentTimeInMS):
1354         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1355         (else.else.currentTimeInMS):
1356         (onload.cb):
1357         (onload):
1358         * JSBench/facebook-firefox/urem.js:
1359         (else.window.performance.window.performance.now.currentTimeInMS):
1360         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1361         (else.else.currentTimeInMS):
1362         (onload.cb):
1363         (onload):
1364         * JSBench/facebook-safari/urem.js:
1365         (else.window.performance.window.performance.now.currentTimeInMS):
1366         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1367         (else.else.currentTimeInMS):
1368         (onload.cb):
1369         (onload):
1370         * JSBench/google-chrome-win/urem.js:
1371         (else.window.performance.window.performance.now.currentTimeInMS):
1372         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1373         (else.else.currentTimeInMS):
1374         (onload.cb):
1375         (onload):
1376         * JSBench/google-chrome/urem.js:
1377         (else.window.performance.window.performance.now.currentTimeInMS):
1378         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1379         (else.else.currentTimeInMS):
1380         (onload.cb):
1381         (onload):
1382         * JSBench/google-firefox-win/urem.js:
1383         (else.window.performance.window.performance.now.currentTimeInMS):
1384         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1385         (else.else.currentTimeInMS):
1386         (onload.cb):
1387         (onload):
1388         * JSBench/google-firefox/uem.js:
1389         (else.window.performance.window.performance.now.currentTimeInMS):
1390         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1391         (else.else.currentTimeInMS):
1392         (onload.cb):
1393         (onload):
1394         * JSBench/google-safari/urem.js:
1395         (else.window.performance.window.performance.now.currentTimeInMS):
1396         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1397         (else.else.currentTimeInMS):
1398         (onload.cb):
1399         (onload):
1400         * JSBench/harness.js:
1401         (runBenchmark.window.currentTimeInMS):
1402         (runBenchmark.else.window.currentTimeInMS):
1403         * JSBench/twitter-chrome-win/rem.js:
1404         (else.window.performance.window.performance.now.currentTimeInMS):
1405         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1406         (else.else.currentTimeInMS):
1407         (onload.cb):
1408         (onload):
1409         * JSBench/twitter-chrome/urem.js:
1410         (else.window.performance.window.performance.now.currentTimeInMS):
1411         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1412         (else.else.currentTimeInMS):
1413         (onload.cb):
1414         (onload):
1415         * JSBench/twitter-firefox-win/urem.js:
1416         (else.window.performance.window.performance.now.currentTimeInMS):
1417         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1418         (else.else.currentTimeInMS):
1419         (onload.cb):
1420         (onload):
1421         * JSBench/twitter-firefox/urem.js:
1422         (else.window.performance.window.performance.now.currentTimeInMS):
1423         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1424         (else.else.currentTimeInMS):
1425         (onload.cb):
1426         (onload):
1427         * JSBench/twitter-safari/urem.js:
1428         (else.window.performance.window.performance.now.currentTimeInMS):
1429         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1430         (else.else.currentTimeInMS):
1431         (onload.cb):
1432         (onload):
1433         * JSBench/yahoo-chrome-win/urem.js:
1434         (else.window.performance.window.performance.now.currentTimeInMS):
1435         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1436         (else.else.currentTimeInMS):
1437         (onload.cb):
1438         (onload):
1439         * JSBench/yahoo-chrome/urem.js:
1440         (else.window.performance.window.performance.now.currentTimeInMS):
1441         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1442         (else.else.currentTimeInMS):
1443         (onload.cb):
1444         (onload):
1445         * JSBench/yahoo-firefox-win/urem.js:
1446         (else.window.performance.window.performance.now.currentTimeInMS):
1447         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1448         (else.else.currentTimeInMS):
1449         (onload.cb):
1450         (onload):
1451         * JSBench/yahoo-firefox/urem.js:
1452         (else.window.performance.window.performance.now.currentTimeInMS):
1453         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1454         (else.else.currentTimeInMS):
1455         (onload.cb):
1456         (onload):
1457         * JSBench/yahoo-safari/urem.js:
1458         (else.window.performance.window.performance.now.currentTimeInMS):
1459         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1460         (else.else.currentTimeInMS):
1461         (onload.cb):
1462         (onload):
1463
1464 2016-05-25  Geoffrey Garen  <ggaren@apple.com>
1465
1466         replaceable own properties seem to ignore replacement after property caching
1467         https://bugs.webkit.org/show_bug.cgi?id=158091
1468
1469         Reviewed by Darin Adler.
1470
1471         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
1472         * MallocBench/MallocBench/Benchmark.cpp:
1473         * MallocBench/MallocBench/Interpreter.cpp:
1474         (Interpreter::doMallocOp):
1475         * MallocBench/MallocBench/Interpreter.h:
1476         * MallocBench/MallocBench/fastMallocLog.63316.ops: Added.
1477         * MallocBench/MallocBench/jetstream.cpp: Added.
1478         (benchmark_jetstream):
1479         * MallocBench/MallocBench/jetstream.h: Added.
1480
1481 2016-05-25  Keith Miller  <keith_miller@apple.com>
1482
1483         Unreviewed, add JSBench to the skipped list for now since it doesn't
1484         work currently.
1485
1486         * Skipped:
1487
1488 2016-05-17  Keith Miller  <keith_miller@apple.com>
1489         We should have JSBench in PerformanceTests
1490         https://bugs.webkit.org/show_bug.cgi?id=157952
1491
1492         Rubber-stamped by Saam Barati.
1493
1494         There are some slight changes to the layout of the test directory
1495         to make it work nicely with run-jsc-benchmarks. Before JSBench
1496         had each of the browser specific sub-tests in a sub-directory.
1497         These have been flattened e.g. amazon/safari/ has become
1498         amazon-safari/.
1499
1500         * JSBench/amazon-chrome-win/urem.html: Added.
1501         * JSBench/amazon-chrome-win/urem.js: Added.
1502         * JSBench/amazon-chrome/urem.html: Added.
1503         * JSBench/amazon-chrome/urem.js: Added.
1504         * JSBench/amazon-firefox-win/urm.html: Added.
1505         * JSBench/amazon-firefox-win/urm.js: Added.
1506         * JSBench/amazon-firefox/urm.html: Added.
1507         * JSBench/amazon-firefox/urm.js: Added.
1508         * JSBench/amazon-safari/urem.html: Added.
1509         * JSBench/amazon-safari/urem.js: Added.
1510         * JSBench/browsercheck.js: Added.
1511         * JSBench/facebook-chrome-win/urem.html: Added.
1512         * JSBench/facebook-chrome-win/urem.js: Added.
1513         * JSBench/facebook-chrome/urem.html: Added.
1514         * JSBench/facebook-chrome/urem.js: Added.
1515         * JSBench/facebook-firefox-win/urem.html: Added.
1516         * JSBench/facebook-firefox-win/urem.js: Added.
1517         * JSBench/facebook-firefox/urem.html: Added.
1518         * JSBench/facebook-firefox/urem.js: Added.
1519         * JSBench/facebook-safari/urem.html: Added.
1520         * JSBench/facebook-safari/urem.js: Added.
1521         * JSBench/google-chrome-win/urem.html: Added.
1522         * JSBench/google-chrome-win/urem.js: Added.
1523         * JSBench/google-chrome/urem.html: Added.
1524         * JSBench/google-chrome/urem.js: Added.
1525         * JSBench/google-firefox-win/urem.html: Added.
1526         * JSBench/google-firefox-win/urem.js: Added.
1527         * JSBench/google-firefox/uem.html: Added.
1528         * JSBench/google-firefox/uem.js: Added.
1529         * JSBench/google-safari/urem.html: Added.
1530         * JSBench/google-safari/urem.js: Added.
1531         * JSBench/harness.html: Added.
1532         * JSBench/harness.js: Added.
1533         * JSBench/harness.py: Added.
1534         * JSBench/index.html: Added.
1535         * JSBench/reload.html: Added.
1536         * JSBench/twitter-chrome-win/rem.html: Added.
1537         * JSBench/twitter-chrome-win/rem.js: Added.
1538         * JSBench/twitter-chrome/urem.html: Added.
1539         * JSBench/twitter-chrome/urem.js: Added.
1540         * JSBench/twitter-firefox-win/urem.html: Added.
1541         * JSBench/twitter-firefox-win/urem.js: Added.
1542         * JSBench/twitter-firefox/urem.html: Added.
1543         * JSBench/twitter-firefox/urem.js: Added.
1544         * JSBench/twitter-safari/urem.html: Added.
1545         * JSBench/twitter-safari/urem.js: Added.
1546         * JSBench/yahoo-chrome-win/urem.html: Added.
1547         * JSBench/yahoo-chrome-win/urem.js: Added.
1548         * JSBench/yahoo-chrome/urem.html: Added.
1549         * JSBench/yahoo-chrome/urem.js: Added.
1550         * JSBench/yahoo-firefox-win/urem.html: Added.
1551         * JSBench/yahoo-firefox-win/urem.js: Added.
1552         * JSBench/yahoo-firefox/urem.html: Added.
1553         * JSBench/yahoo-firefox/urem.js: Added.
1554         * JSBench/yahoo-safari/urem.html: Added.
1555         * JSBench/yahoo-safari/urem.js: Added.
1556
1557 2016-05-20  Ryosuke Niwa  <rniwa@webkit.org>
1558
1559         run-benchmark's results should contain Animometer's debug output
1560         https://bugs.webkit.org/show_bug.cgi?id=157941
1561
1562         Reviewed by Stephanie Lewis.
1563
1564         Made developer.html support the JSON generated by run-benchmark which stores everything under debugOutput.
1565
1566         * Animometer/resources/debug-runner/animometer.js:
1567         (Utilities.initialize): Unwrap debugOutput in the case run-benchmark's result JSON is used.
1568
1569 2016-05-18  Timothy Hatcher  <timothy@apple.com>
1570
1571         Make Animometer work in all browsers
1572         https://bugs.webkit.org/show_bug.cgi?id=157855
1573         rdar://problem/26338521
1574
1575         Reviewed by Jon Lee.
1576
1577         * Animometer/resources/runner/logo.svg: Use a symbol instead
1578         of putting the id on the root svg. This works in all browsers.
1579
1580 2016-05-07  Timothy Hatcher  <timothy@apple.com>
1581
1582         Update Animometer design
1583         https://bugs.webkit.org/show_bug.cgi?id=157449
1584
1585         Reviewed by Darin Adler.
1586
1587         * Animometer/developer.html: Stop including runner/animometer.css.
1588         * Animometer/index.html: Udpated elements to fit new styles.
1589
1590         * Animometer/resources/debug-runner/animometer.css:
1591         Copy the old runner/animometer.css to here so the debug runner is unaffected.
1592
1593         * Animometer/resources/runner/animometer.css:
1594         New styles for the design. Drop flex box for broad browser support.
1595
1596         * Animometer/resources/runner/animometer.js:
1597         (ResultsTable.clear): Use textContent.
1598         (window.sectionsManager.showSection): Add class to the body.
1599         (window.sectionsManager.setSectionScore): Use textContent, not innerHTML.
1600
1601         * Animometer/resources/runner/crystal.svg: Added.
1602         * Animometer/resources/runner/lines.svg: Added.
1603         * Animometer/resources/runner/logo.svg: Added.
1604
1605         * Animometer/resources/runner/tests.js: Shorten test name and title case them.
1606
1607 2016-05-06  Manuel Rego Casasnovas  <rego@igalia.com>
1608
1609         [css-grid] Unprefix CSS Grid Layout properties
1610         https://bugs.webkit.org/show_bug.cgi?id=157137
1611
1612         Reviewed by Simon Fraser.
1613
1614         Remove "-webkit" prefix from all the grid layout properties,
1615         including the display value.
1616         Update the source code to remove the prefix where it was used too.
1617
1618         * Layout/auto-grid-lots-of-data.html:
1619         * Layout/fixed-grid-lots-of-data.html:
1620         * Layout/fixed-grid-lots-of-stretched-data.html:
1621
1622 2016-04-25  Geoffrey Garen  <ggaren@apple.com>
1623
1624         bmalloc: Misc improvements to MallocBench
1625         https://bugs.webkit.org/show_bug.cgi?id=157004
1626
1627         Reviewed by Darin Adler.
1628
1629         * MallocBench/run-malloc-benchmarks: Added --memory and --memory_warning
1630         modes for focused memory testing.
1631
1632         * MallocBench/MallocBench/Benchmark.cpp:
1633         (Benchmark::printReport): Clarified output.
1634
1635         (Benchmark::currentMemoryBytes): Added compressed memory because top
1636         does the same. (It always happens to zero in the benchmarks we run. But
1637         this is good for sanity.)
1638
1639         * MallocBench/MallocBench/CommandLine.cpp: Moved up to 8 runs to reduce
1640         variance.
1641
1642         * MallocBench/MallocBench/alloc_free.cpp:
1643         (benchmark_alloc_free): Cycle a single allocation in order to stress
1644         the effect of merging on calls to madvise.
1645
1646         * MallocBench/MallocBench/big.cpp:
1647         (benchmark_big): Graduated to 8kB-128kB because medium tests up to 8 and
1648         our large allocator doesn't kick in until 64kB.
1649
1650         * MallocBench/MallocBench/medium.cpp:
1651         (benchmark_medium): Test all the way down to 1kB because our large
1652         allocator used to service 1kB allocations and 1kB is an interesting
1653         middle size where memory is unusually large but allocation throughput
1654         still matters.
1655
1656         * MallocBench/MallocBench/stress.cpp:
1657         (benchmark_stress): Reduced the churn count to match stress_aligned
1658         because this test was taking too long to complete.
1659
1660         * MallocBench/MallocBench/stress_aligned.cpp:
1661         (benchmark_stress_aligned): Our new large allocator can handle even
1662         more absurdly large values.
1663
1664 2016-04-25  Simon Fraser  <simon.fraser@apple.com>
1665
1666         Add a content animation test that uses SVG animation.
1667         https://bugs.webkit.org/show_bug.cgi?id=156827
1668
1669         * Animation/svg-animation.html: Added.
1670         * Skipped:
1671
1672 2016-04-22  Simon Fraser  <simon.fraser@apple.com>
1673
1674         Skip two content animation tests which are only meant for iOS testing.
1675
1676         * Animation/css-animation.html: Added.
1677         * Animation/raf-animation.html: Added.
1678
1679         * Skipped:
1680
1681 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
1682
1683         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
1684         https://bugs.webkit.org/show_bug.cgi?id=156827
1685
1686         Add two files missing from the previous commit.
1687
1688         * Animation/css-animation.html: Added.
1689         * Animation/raf-animation.html: Added.
1690
1691 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
1692
1693         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
1694         https://bugs.webkit.org/show_bug.cgi?id=156827
1695
1696         Reviewed by Stephanie Lewis.
1697
1698         Two new files for the content-animation suite.
1699
1700         After patching for use in the benchmark, these tests are a little different to other benchmarks.
1701         The test content itself does not collect performance data; the tests spit out a boilerplate JSON
1702         result with a placeholder for framerate, which is collected in native code.
1703
1704         When run as a benchmark, test completion involves a couple of bounces between the test and MobileSafari.
1705         Test completion is initiated by a setTimeout() in the test, at which point location.hash is set to "#done".
1706         MobileSafari detects that, and asynchronously dumps performance data. Once this is complete, MobileSafari
1707         changes the URL has to "#submit", which triggers the XHR to the test relay that indicates the test is
1708         complete.
1709
1710         * Animation/css-animation.html: Added.
1711         * Animation/raf-animation.html: Added.
1712
1713 2016-04-15  Jon Lee  <jonlee@apple.com>
1714
1715         Animometer test could report a NaN
1716         https://bugs.webkit.org/show_bug.cgi?id=156646
1717
1718         Reviewed by Darin Adler.
1719         Provisionally reviewed by Said Abou-Hallawa.
1720
1721         * Animometer/tests/resources/main.js:
1722         (didFinishInterval): The ramp controller has a first phase where it ramps up the complexity and
1723         reacts based on how well the system handles the load. The assumption was that it would handle at least
1724         1 particle easily. That is not always the case. As a result, an interpolation calculation could
1725         end up setting an upper bound of NaN.
1726
1727         This occurs because we never get out of the first tier, so this._lastTierComplexity is undefined.
1728         Now that we guarantee a minimum complexity of 1, modify the conditional to check for this._lastTierComplexity
1729         before interpolating the upper bound of the first ramp. In the case where the system struggles with
1730         1 particle, set it to currentComplexity.
1731
1732 2016-04-09  Jon Lee  <jonlee@apple.com>
1733
1734         Update Animometer to accommodate different screens
1735         https://bugs.webkit.org/show_bug.cgi?id=156449
1736
1737         Reviewed by Darin Adler.
1738         Provisionally reviewed by Said Abou-Hallawa.
1739
1740         * Animometer/index.html: Wrap button in a container to add padding at the bottom.
1741         * Animometer/resources/debug-runner/animometer.css:
1742         (@media screen and (min-device-width: 1800px)): Deleted.
1743         (@media screen and (min-width: 1800px)): Cannot use min-device-width since it may match incorrectly.
1744         (screen and (max-device-height: 414px) and (orientation: landscape)): Some devices swap device width
1745         and height with orientation change.
1746         * Animometer/resources/runner/animometer.css: Similar.
1747         (screen and (min-device-width: 1024px) and (orientation: landscape)):
1748         (screen and (max-device-height: 414px) and (orientation: landscape)):
1749         (.frame-container): On smaller iPhones, adding 1px prevents the navigation bars from appearing.
1750         (@media screen and (min-device-width: 768px) and (max-device-width: 1024px)): Deleted.
1751         (@media (min-device-height: 768px) and (max-device-height: 1024px)): Target iPad Airs and similar.
1752         (@media screen and (min-device-width: 1024px) and (max-device-width: 1366px)): Deleted.
1753         (@media screen and (max-device-width: 1024px) and (min-device-height: 1366px)): Target iPad Pro.
1754         (#results footer): Add padding below the button for testing again.
1755         * Animometer/tests/master/multiply.html: Remove the center text.
1756         * Animometer/tests/master/resources/text.js: Update the test so that in every frame the text moves.
1757         * Animometer/tests/master/text.html: Update the text sizing depending on the size of the device.
1758
1759 2016-04-08  Jon Lee  <jonlee@apple.com>
1760
1761         Have Animometer benchmark always start with complexity of 1
1762         https://bugs.webkit.org/show_bug.cgi?id=156432
1763
1764         Reviewed by Ryosuke Niwa.
1765
1766         * Animometer/tests/resources/main.js: Update the default Controller and RampController to
1767         set its minimum complexities to 1 instead of 0.
1768
1769 2016-04-08  Jon Lee  <jonlee@apple.com>
1770
1771         Fix SVG benchmark test
1772         https://bugs.webkit.org/show_bug.cgi?id=156410
1773
1774         Reviewed by Dean Jackson.
1775
1776         * Animometer/resources/extensions.js: Update Point.zero to be a static Point.
1777         * Animometer/tests/simple/resources/tiled-canvas-image.js:
1778         (Stage.call._setupTiles): Refactor.
1779         * Animometer/tests/master/resources/particles.js:
1780         (Particle.prototype.reset): Use Point.center.
1781         (complexity): We are not using a gradient background anymore, so remove the +1.
1782         * Animometer/tests/master/resources/svg-particles.js: Update to use SVG transform
1783         instead of CSS transform.
1784
1785 2016-04-06  Jon Lee  <jonlee@apple.com>
1786
1787         Update master benchmark with SVG test
1788         https://bugs.webkit.org/show_bug.cgi?id=156273
1789
1790         Reviewed by Dean Jackson.
1791         Provisionally reviewed by Said Abou-Hallawa.
1792
1793         Switch masks tests for SVG path test.
1794
1795         * Animometer/resources/debug-runner/tests.js: Move mask test here.
1796         * Animometer/resources/runner/tests.js: Add SVG test here.
1797         * Animometer/tests/dom/particles.html: Renamed from PerformanceTests/Animometer/tests/master/particles.html.
1798         * Animometer/tests/dom/resources/dom-particles.js: Renamed from PerformanceTests/Animometer/tests/master/resources/dom-particles.js.
1799
1800         * Animometer/tests/master/resources/particles.js: Add minPosition for bounds checking. Prevents particle from being
1801         partially obscured.
1802         * Animometer/tests/master/resources/svg-particles.js: Added.
1803         (Particle): The particle is either a path object or a rect using a path as a clip. The
1804         same path is used either way. For each particle create a linear gradient with a random
1805         rotation.
1806         (SVGParticlesStage): Look in #shapes to see how many different kinds of paths are available.
1807         This makes the test more generic in case other shapes need to be tested.
1808         * Animometer/tests/master/svg-particles.html: Added. Have two defs, one that houses each
1809         particle's gradient, and one that holds the shape templates.
1810
1811 2016-03-27  Hunseop Jeong  <hs85.jeong@samsung.com>
1812
1813         [EFL] REGRESSION(r188793): It made 200 layout tests and Bindings/event-target-wrapper.html performance test fail
1814         https://bugs.webkit.org/show_bug.cgi?id=148470 
1815
1816         Reviewed by Darin Adler.
1817
1818         * Skipped: Unskip the Bindings/event-target-wrapper test.
1819
1820 2016-03-23  Jon Lee  <jonlee@apple.com>
1821
1822         Update focus and leaves tests
1823         https://bugs.webkit.org/show_bug.cgi?id=155825
1824
1825         Reviewed by Simon Fraser.
1826
1827         Particles would improperly disappear, before they were fully off stage. Update the calculation.
1828         * Animometer/tests/dom/resources/leaves.js:
1829         * Animometer/tests/master/resources/leaves.js:
1830
1831         * Animometer/tests/master/focus.html: Update the center element styling.
1832         * Animometer/tests/master/resources/focus.js:
1833         (FocusElement.Utilities.createClass): Give enough space in the container for each particle for the blur
1834         to spread. It should be about 3x more space than the blur radius on each side.
1835         (Stage.call.initialize): Ditto for the center element.
1836
1837 2016-03-23  Jon Lee  <jonlee@apple.com>
1838
1839         Update support for other platforms
1840         https://bugs.webkit.org/show_bug.cgi?id=155824
1841
1842         Reviewed by Simon Fraser.
1843
1844         * Animometer/resources/debug-runner/animometer.css: Remove extraneous media query. All of it should
1845         be handled in the release stylesheet.
1846         * Animometer/resources/debug-runner/animometer.js: Add support for browsers that return an HTMLCollection
1847         when retrieving radio elements with a name, instead of the selected value.
1848         * Animometer/resources/runner/animometer.css: Adjust the queries for devices of varying widths.
1849         (.frame-container): Move overflow:hidden to #stage.
1850         * Animometer/tests/master/resources/stage.css: Consolidate into tests/resources/stage.css.
1851         * Animometer/tests/resources/stage.css:
1852         (body): Remove overflow:hidden.
1853         (#stage): Set overflow:hidden here.
1854         (#center-text): Moved from master/resources/stage.css.
1855
1856         Update stylesheet hrefs.
1857         * Animometer/tests/master/canvas-stage.html:
1858         * Animometer/tests/master/focus.html:
1859         * Animometer/tests/master/leaves.html:
1860         * Animometer/tests/master/multiply.html:
1861         * Animometer/tests/master/particles.html:
1862         * Animometer/tests/master/text.html: Adjust text size to fit in the device screen.
1863
1864 2016-03-23  Jon Lee  <jonlee@apple.com>
1865
1866         Make the benchmark require device to be in landscape orientation
1867         https://bugs.webkit.org/show_bug.cgi?id=155822
1868         rdar://problem/25258650
1869
1870         Reviewed by Ryosuke Niwa.
1871
1872         Check that the device is in landscape orientation. If not, disable the button to start it,
1873         and show a warning message.
1874
1875         * Animometer/developer.html: Add a message about how the browser should be set up. Include a
1876         warning message that appears if the orientation is incorrect on mobile devices.
1877         * Animometer/index.html: Ditto.
1878
1879         * Animometer/resources/debug-runner/animometer.css: Migrate the .hidden rule into the release
1880         stylesheet. Update the style to accommodate the new UI.
1881         * Animometer/resources/runner/animometer.css:
1882
1883         * Animometer/resources/runner/animometer.js:
1884         (window.benchmarkController.initialize): Add the orientation listener is needed.
1885         (window.benchmarkController.addOrientationListenerIfNecessary): Only mobile devices need this. Check
1886         to see for support of window.orientation.
1887         (window.benchmarkController._orientationChanged): Toggle the warning based on whether we match the
1888         landscape query. Set a state variable, which is needed for the debug harness. Call updateStartButtonState.
1889         (window.benchmarkController.updateStartButtonState):
1890         * Animometer/resources/debug-runner/animometer.js: Change _updateStartButtonState to return
1891         a boolean about whether at least one test is selected. That will be used in
1892         benchmarkController.updateStartButtonState(). Move the load event listener to the release version.
1893         (window.benchmarkController.updateStartButtonState): Override the release version, and also check
1894         that at least one test is selected.
1895
1896 2016-03-22  Geoffrey Garen  <ggaren@apple.com>
1897
1898         MallocBench: consolidate regression testing for aligned allocation
1899         https://bugs.webkit.org/show_bug.cgi?id=155762
1900
1901         Reviewed by Michael Saboff.
1902
1903         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
1904         * MallocBench/MallocBench/Benchmark.cpp:
1905         * MallocBench/MallocBench/memalign.cpp: Removed.
1906         * MallocBench/MallocBench/memalign.h: Removed. The stress_aligned test
1907         covers this and much more.
1908
1909         * MallocBench/MallocBench/stress_aligned.cpp:
1910         (benchmark_stress_aligned): Include specific tests for extreme sizes
1911         and alignments.
1912
1913 2016-03-21  Jon Lee  <jonlee@apple.com>
1914
1915         Update benchmark tests
1916         https://bugs.webkit.org/show_bug.cgi?id=155723
1917
1918         Reviewed by Darin Adler.
1919         Provisionally reviewed by Said Abou-Hallawa.
1920
1921         Add quadratic and bezier segments to the canvas path test.
1922
1923         * Animometer/resources/runner/tests.js: Some of the query strings are unnecessary.
1924         Rename the test.
1925         * Animometer/tests/master/resources/canvas-stage.js:
1926         (tune): Update to be able to take an array of possible constructors. Choose one randomly.
1927         * Animometer/tests/master/resources/canvas-tests.js:
1928         (CanvasLinePoint.Utilities.createClass): Move the point selection out to a separate
1929         function called randomPoint() for reuse. Move X_LOOPS, Y_LOOPS, and offsets into the
1930         class definition.
1931         (randomPoint): Scale the grid down a little bit so that the lines along the edge of the
1932         canvas are not cut off when the stroke size is thick.
1933         (CanvasQuadraticSegment): Added.
1934         (CanvasBezierSegment): Added.
1935         (SimpleCanvasStage): Pass in an array of the different segment types. Since line segments
1936         are short compared to the curved ones, make it twice as likely to render a line segment.
1937         (SimpleCanvasStage.animate): Update the drawing code so that we render all line segments.
1938
1939         Add a helper method that selects a random element from an array.
1940
1941         * Animometer/tests/resources/main.js:
1942         (Stage.randomElementInArray): Select a random element from the provided array.
1943
1944         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Refactor.
1945         * Animometer/tests/dom/resources/leaves.js: Ditto.
1946         * Animometer/tests/master/resources/dom-particles.js: Ditto.
1947         * Animometer/tests/master/resources/image-data.js: Ditto.
1948         * Animometer/tests/master/resources/leaves.js: Ditto.
1949         * Animometer/tests/simple/resources/simple-canvas-paths.js: Ditto.
1950
1951         Add canvas tests that includes all stroke and fill paths. This makes it possible to avoid having to
1952         include the full simple canvas suite for perf testing.
1953
1954         * Animometer/resources/debug-runner/tests.js: Add new tests. Move the canvas test into the Canvas
1955         suite.
1956         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add a CanvasStroke and CanvasFill particle
1957         that random selects an object to render.
1958
1959         * Animometer/resources/debug-runner/tests.js: Move 3D suite before basic canvas suite.
1960         When updating the perf bot script, we will include the suites up to this one, but exclude
1961         the basic canvas suite.
1962
1963         Move compositing transforms test to HTML suite and remove the empty Miscellaneous suite.
1964
1965         * Animometer/resources/debug-runner/tests.js:
1966         * Animometer/tests/dom/compositing-transforms.html: Renamed from PerformanceTests/Animometer/tests/misc/compositing-transforms.html.
1967         * Animometer/tests/dom/resources/compositing-transforms.js: Renamed from PerformanceTests/Animometer/tests/misc/resources/compositing-transforms.js.
1968
1969         Clean up miscellaneous test suite. Add a canvas ellipse test, and remove the other
1970         canvas tests.
1971
1972         * Animometer/resources/debug-runner/tests.js: Add ellipse tests to the simple suite.
1973         * Animometer/tests/misc/canvas-electrons.html: Removed.
1974         * Animometer/tests/misc/canvas-stars.html: Removed.
1975         * Animometer/tests/misc/resources/canvas-electrons.js: Removed.
1976         * Animometer/tests/misc/resources/canvas-stars.js: Removed.
1977         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add ellipse primitives.
1978
1979         Merge text tests together into one.
1980
1981         * Animometer/resources/runner/tests.js: Remove international.html.
1982         * Animometer/tests/master/international.html: Removed.
1983         * Animometer/tests/master/resources/text.js:
1984         (animate): Update styling. Manually calculate gradients for the shadow particles.
1985         Reduce the step size for y direction to avoid cutting text off at the margins. Increase
1986         step for x since there will be a little more room.
1987         * Animometer/tests/master/text.html: Add more translations and lay it out in a table.
1988
1989 2016-03-20  Jon Lee  <jonlee@apple.com>
1990
1991         Add a link to show debug data
1992         https://bugs.webkit.org/show_bug.cgi?id=155724
1993
1994         Reviewed by Simon Fraser.
1995
1996         * Animometer/developer.html: Attach the onclick handler to the score.
1997         * Animometer/index.html: Ditto.
1998
1999 2016-03-18  Dean Jackson  <dino@apple.com>
2000
2001         Add a basic WebGL test to Animometer
2002         https://bugs.webkit.org/show_bug.cgi?id=155475
2003         <rdar://problem/25156860>
2004
2005         Reviewed by Simon Fraser and Jon Lee.
2006
2007         Add a pretty simple WebGL test to Animometer
2008         which tries to draw a number of animated triangles.
2009         The result still needs a bit of tuning.
2010
2011         * Animometer/resources/debug-runner/tests.js: Add a new
2012         Suite for "3D" tests.
2013         * Animometer/tests/3d/resources/webgl.js: Added.
2014         * Animometer/tests/3d/webgl.html: Added.
2015
2016 2016-03-18  Jon Lee  <jonlee@apple.com>
2017
2018         Add support for statically linking to a specific test
2019         https://bugs.webkit.org/show_bug.cgi?id=155631
2020
2021         Rubber-stamped by Darin Adler.
2022
2023         * Animometer/developer.html: Update to call restartBenchmark instead so that it works for
2024         both the preset and the manually set test sessions.
2025         * Animometer/resources/debug-runner/animometer.css:
2026         (.tree .link): Style the "link" UI.
2027         * Animometer/resources/debug-runner/animometer.js: Move updateDisplay from suitesManager
2028         to optionsManager since this is a visual option and has nothing to do with the suites
2029         settings. Update the construction of the test UI by including a "link" after each test.
2030         Clicking on that link brings up a JS prompt with a URL and a query string with the current
2031         parameters of the controller, and selected test. Pasting this URL into the location bar will
2032         automatically start running the selected test.
2033         (suitesManager.suitesFromQueryString): Iterate through the Suites and tests and find the one
2034         that matches the provided parameters. Returns an object similar to the form in
2035         suitesManager.updateLocalStorageFromUI.
2036         (benchmarkController.initialize): After settings up the events and options, try parsing the
2037         query string and running the benchmark immediately. Otherwise, fall back to the form.
2038         (benchmarkController.startBenchmark): Store the options and suites into member variables for
2039         reuse in restartBenchmark.
2040         (benchmarkController.startBenchmarkImmediatelyIfEncoded): Convert the query string to an object.
2041         If that's successful, find the suite and test referenced in the query string. Start the benchmark if
2042         the search for the test succeeded.
2043         * Animometer/resources/extensions.js:
2044         (Utilities.stripNonASCIICharacters): Helper method to convert the name of the suite and test
2045         into a query-string-friendly version.
2046         (Utilities.convertObjectToQueryString): Helper method to convert an object to query string
2047         format.
2048         (Utilities.convertQueryStringToObject): Helper method to convert query string into an object
2049         with properties and values.
2050
2051 2016-03-16  Jon Lee  <jonlee@apple.com>
2052
2053         Add a new benchmark test
2054         https://bugs.webkit.org/show_bug.cgi?id=155570
2055
2056         Reviewed by Simon Fraser.
2057
2058         New Leaves test includes various image sizes and opacity.
2059
2060         * Animometer/resources/debug-runner/tests.js: Add it to the HTML test suite.
2061         * Animometer/tests/dom/leaves.html: Added.
2062         * Animometer/tests/dom/resources/leaves.js: Added. Override the
2063         (Particle.call.reset): Uses a range of sizes, and opacity.
2064         (Particle.call.animate): Opacity goes up then down. When it hits 0, reset the particle.
2065         (Particle.call.move): Set transform and opacity.
2066         * Animometer/tests/master/resources/leaves.js: Get rid of the closure so that it
2067         can be used in this test. Update the relative path so that it works in both the master
2068         and dom test suite.
2069
2070 2016-03-15  Simon Fraser  <simon.fraser@apple.com>
2071
2072         Add developer Animometer test that bounces P3-tagged images
2073         https://bugs.webkit.org/show_bug.cgi?id=155511
2074
2075         Reviewed by Tim Horton.
2076         
2077         Add a test for rendering performance of tagged images. The 5 images are tagged
2078         with the Display P3 colorspace.
2079
2080         * Animometer/resources/debug-runner/tests.js:
2081         * Animometer/tests/bouncing-particles/bouncing-tagged-images.html: Added.
2082         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Added.
2083         * Animometer/tests/bouncing-particles/resources/image1.jpg: Added.
2084         * Animometer/tests/bouncing-particles/resources/image2.jpg: Added.
2085         * Animometer/tests/bouncing-particles/resources/image3.jpg: Added.
2086         * Animometer/tests/bouncing-particles/resources/image4.jpg: Added.
2087         * Animometer/tests/bouncing-particles/resources/image5.jpg: Added.
2088
2089 2016-03-09  Jon Lee  <jonlee@apple.com>
2090
2091         Enhance existing Animometer tests
2092         https://bugs.webkit.org/show_bug.cgi?id=155261
2093
2094         Reviewed by Simon Fraser.
2095
2096         * Animometer/tests/master/resources/canvas-tests.js: Add a gradient to
2097         the filled circles. To expose more of the gradient, add another circle.
2098         (SimpleCanvasStage.call.animate): For each frame, create a gradient with
2099         undulating stop points and colors. Fill the circles twice; once with
2100         the solid color, and once with the gradient.
2101
2102         * Animometer/tests/master/resources/dom-particles.js: Refactor the
2103         emission variables into a separate stage for this test. Add a colorOffset
2104         variable to make the colors of each particle slightly different, since
2105         the ramp controller can add large numbers of particles all at once, which
2106         would otherwise get all the same color.
2107         * Animometer/tests/master/resources/particles.js:
2108         (initialize): Remove the code specific to the SVG mask test.
2109
2110         * Animometer/tests/master/resources/image-data.js:
2111         (initialize): Remove unused local variable.
2112         * Animometer/tests/master/resources/multiply.js:
2113         (initialize): Make the test harder by adding more total particles.
2114
2115 2016-03-09  Jon Lee  <jonlee@apple.com>
2116
2117         Add text tests
2118         https://bugs.webkit.org/show_bug.cgi?id=155257
2119
2120         Reviewed by Simon Fraser.
2121
2122         * Animometer/resources/extensions.js:
2123         (UnitBezier.Utilities.createClass): Add a class that computes Bezier points
2124         assuming that two of the control points are at (0,0) and (1,1). Taken from
2125         WebCore/platform/graphics/UnitBezier.h
2126         * Animometer/resources/runner/tests.js: Add a test for English text and one
2127         for international text.
2128         * Animometer/tests/master/international.html: Added.
2129         * Animometer/tests/master/resources/text.js: Added. The test assumes there is
2130         #template div which it will copy. The copies are placed behind the template, and
2131         are set with different colors each frame. They are moved around with CSS transform.
2132         * Animometer/tests/master/text.html: Added.
2133
2134         Remove the other text tests, since these ones cover the same techniques.
2135         * Animometer/tests/text/layering-text.html: Removed.
2136         * Animometer/tests/text/resources/layering-text.js: Removed.
2137         * Animometer/tests/text/resources/text-boxes.js: Removed.
2138         * Animometer/tests/text/text-boxes.html: Removed.
2139         * Animometer/resources/debug-runner/tests.js:
2140
2141 2016-03-09  Jon Lee  <jonlee@apple.com>
2142
2143         Add a new image test
2144         https://bugs.webkit.org/show_bug.cgi?id=155232
2145
2146         Reviewed by Dean Jackson.
2147         Provisionally reviewed by Said Abou-Hallawa.
2148
2149         The image test renders PNGs and moves them with translate and rotate
2150         transforms. Each particle has a lifetime, and when the lifetime ends or
2151         the particle goes offscreen, it resets itself somewhere on the stage.
2152
2153         * Animometer/resources/debug-runner/tests.js: Remove the CSS bouncing PNG
2154         images test, because this one tests the same technique.
2155         * Animometer/resources/runner/tests.js: Added here as "Leaves".
2156         * Animometer/tests/master/leaves.html: Added.
2157         * Animometer/tests/master/resources/particles.js: Refactor out the parts
2158         specific to the DOM particles test. Consequently make velocity a public
2159         member.
2160         (initialize): The options parameter is never used, so remove it.
2161         (animate): Remove unused local variable.
2162         * Animometer/tests/master/resources/leaves.js: Maintains a focal point that
2163         moves back and forth across the canvas. That point affects the velocity
2164         of the particles. When the focal point is on the leftmost side, it is
2165         between [-6, -2], and set in reset(). When the focal point is on the rightmost
2166         side, it will be from [2, 6].
2167         * Animometer/tests/master/resources/dom-particles.js: Move JS specific to
2168         this test here from particles.js.
2169
2170         New images.
2171         * Animometer/tests/master/resources/compass100.png: Added.
2172         * Animometer/tests/master/resources/console100.png: Added.
2173         * Animometer/tests/master/resources/contribute100.png: Added.
2174         * Animometer/tests/master/resources/debugger100.png: Added.
2175         * Animometer/tests/master/resources/inspector100.png: Added.
2176         * Animometer/tests/master/resources/layout100.png: Added.
2177         * Animometer/tests/master/resources/performance100.png: Added.
2178         * Animometer/tests/master/resources/script100.png: Added.
2179         * Animometer/tests/master/resources/shortcuts100.png: Added.
2180         * Animometer/tests/master/resources/standards100.png: Added.
2181         * Animometer/tests/master/resources/storage100.png: Added.
2182         * Animometer/tests/master/resources/styles100.png: Added.
2183         * Animometer/tests/master/resources/timeline100.png: Added.
2184
2185 2016-03-03  Jon Lee  <jonlee@apple.com>
2186
2187         Add ability to retrieve raw data from release harness
2188         https://bugs.webkit.org/show_bug.cgi?id=155026
2189
2190         Reviewed by Simon Fraser.
2191
2192         * Animometer/developer.html: Remove the special UI in the debug
2193         harness.
2194         * Animometer/resources/runner/animometer.css: Add styles for the
2195         overlay.
2196         * Animometer/resources/runner/animometer.js: Let 'j' show the JSON
2197         results, but only if the overlay doesn't exist. Add 'esc' key to dismiss
2198         the overlay.
2199         (window.benchmarkController.selectResults): Cycle the cases around
2200         so that the first 's' press selects both the benchmark score and
2201         the individual test scores.
2202         * Animometer/resources/debug-runner/animometer.css: Remove
2203         unneeded rules.
2204         * Animometer/resources/debug-runner/animometer.js: Make the same
2205         call to handleKeyPress.
2206
2207 2016-03-03  Jon Lee  <jonlee@apple.com>
2208
2209         Make sure multiply test particles have at least some opacity
2210         https://bugs.webkit.org/show_bug.cgi?id=155027
2211
2212         Reviewed by Simon Fraser.
2213
2214         * Animometer/tests/master/resources/multiply.js:
2215         (initialize): Have the elements spin a little faster to make it
2216         more obvious when the system is being stressed.
2217         (_addTile):
2218         (animate): Make sure each element being animated has at least 1%
2219         opacity.
2220
2221 2016-03-03  Jon Lee  <jonlee@apple.com>
2222
2223         Update image test
2224         https://bugs.webkit.org/show_bug.cgi?id=154962
2225
2226         Rubber-stamped by Darin Adler.
2227
2228         * Animometer/tests/master/image-data.html: Make each canvas have a compositing layer.
2229         * Animometer/tests/master/resources/image-data.js:
2230         (initialize): Update to load multiple images serially.
2231         (_loadImage):
2232         (tune): Use display instead of visibility. When showing an element anew, move it somewhere else.
2233         (_createTestElement): Set up the element, refactor out placement of element to _refreshElement.
2234         (_refreshElement): Place element in a tile grid.
2235         (animate):
2236         (_getRandomNeighboringPixelIndex): Use a more conservative distribution to make the effect last a little longer.
2237         * Animometer/tests/master/resources/compass.svg: Added.
2238         * Animometer/tests/master/resources/console.svg: Added.
2239         * Animometer/tests/master/resources/contribute.svg: Added.
2240         * Animometer/tests/master/resources/debugger.svg: Added.
2241         * Animometer/tests/master/resources/inspector.svg: Added.
2242         * Animometer/tests/master/resources/layout.svg: Added.
2243         * Animometer/tests/master/resources/performance.svg: Added.
2244         * Animometer/tests/master/resources/script.svg: Added.
2245         * Animometer/tests/master/resources/shortcuts.svg: Added.
2246         * Animometer/tests/master/resources/standards.svg: Added.
2247         * Animometer/tests/master/resources/storage.svg: Added.
2248         * Animometer/tests/master/resources/styles.svg: Added.
2249         * Animometer/tests/master/resources/timeline.svg: Added.
2250
2251 2016-03-02  Jon Lee  <jonlee@apple.com>
2252
2253         Add some new controllers, and refine tests
2254         https://bugs.webkit.org/show_bug.cgi?id=154914
2255
2256         Reviewed by Simon Fraser.
2257
2258         Improve tests.
2259
2260         * Animometer/tests/master/focus.html: Move each particle into a layer. Put the particle
2261         in a container element. Expand the container element by the max blur radius, and clip
2262         overflow. This way, when the blur is applied, it avoids causing layer resizes.
2263         * Animometer/tests/master/resources/focus.js:
2264         (FocusElement.Utilities.createClass): Create a container element, and put the particle
2265         inside.
2266         (hide): Set display:none.
2267         (show): Set display:block.
2268         (animate): Apply filters to the container element.
2269         (FocusStage.call.initialize): Instead of inserting and removing elements from the DOM,
2270         keep them in the stage, but set the display style instead. Use this._offsetIndex to
2271         keep track of which elements are displayed.
2272         (FocusStage.call.animate): Move some calculations around to avoid doing unneeded math.
2273         (FocusStage.call.getBlurValue): Make sure elements are always blurred.
2274         (FocusStage.call.getOpacityValue): Make sure elements have some opacity.
2275         * Animometer/tests/master/resources/multiply.js: Have the particles on the edge of the
2276         stage appear less black when the complexity gets large enough.
2277         (tune): Have this._distanceFactor calculate the factor. Avoid calculating square root each
2278         frame.
2279
2280 2016-03-02  Jon Lee  <jonlee@apple.com>
2281
2282         Add some new controllers, and refine tests
2283         https://bugs.webkit.org/show_bug.cgi?id=154914
2284
2285         Reviewed by Simon Fraser.
2286
2287         Add a controller that centers around 30 fps instead of 60 fps.
2288
2289         * Animometer/developer.html: Add a new option.
2290         * Animometer/resources/debug-runner/animometer.js:
2291         * Animometer/resources/runner/animometer.js:
2292         (this._processData.findRegression): When calculating the complexity-frameLength regression,
2293         check the controller, and use a 30 fps baseline if needed.
2294         * Animometer/resources/statistics.js:
2295         (Regression.Utilities.createClass): Update to allow clients to specify the baseline
2296         frame length.
2297         * Animometer/tests/resources/main.js:
2298         (tune): Override some of the constants in RampController. Move those constants out for
2299         easier reading.
2300
2301         Add a fixed controller, with no step.
2302
2303         * Animometer/developer.html: Add a controller that takes no step.
2304         * Animometer/resources/debug-runner/animometer.js:
2305         * Animometer/tests/resources/main.js:
2306         (Rotater.Utilities.createClass):
2307
2308         Switch to ramp controller as default.
2309
2310         * Animometer/developer.html: Increase the test length to 20 seconds.
2311         * Animometer/resources/debug-runner/animometer.js: Rename the "adjustment" field to "controller"
2312         since that is a more accurate description.
2313         * Animometer/resources/debug-runner/graph.js:
2314         * Animometer/resources/runner/animometer.js: Update preferences for release suite.
2315
2316 2016-02-26  Jon Lee  <jonlee@apple.com>
2317
2318         Address Dean's comments in 154673.
2319
2320         * Animometer/developer.html:
2321         * Animometer/resources/debug-runner/animometer.js:
2322         * Animometer/resources/debug-runner/graph.js:
2323
2324 2016-02-25  Jon Lee  <jonlee@apple.com>
2325
2326         Update animation benchmark and tests
2327         https://bugs.webkit.org/show_bug.cgi?id=154673
2328
2329         Reviewed by Dean Jackson.
2330
2331         Update test visuals.
2332
2333         * Animometer/tests/master/resources/canvas-tests.js:
2334         (CanvasLineSegment.Utilities.createClass): Line segments near the edge of the stage get clipped.
2335         Update circle position and radius to minimize impact.
2336         * Animometer/tests/master/resources/particles.js: Get rid of rotating gradient background, and
2337         have 3 locations for emitting particles.
2338         * Animometer/tests/master/resources/multiply.js: Update distance metric so that fringe tiles get
2339         more color.
2340         (initialize): Fix some of the math for laying out the tiles.
2341         (animate): When a tile isn't used, set visibility: hidden.
2342
2343 2016-02-24  Jon Lee  <jonlee@apple.com>
2344
2345         Update animation benchmark and tests
2346         https://bugs.webkit.org/show_bug.cgi?id=154673
2347
2348         Reviewed by Dean Jackson.
2349
2350         Update the ramp controller.
2351
2352         The controller refines the complexity interval to test across.
2353
2354         * Animometer/resources/statistics.js: Add functions that estimate cumulative distribution function.
2355         (Regression): For the flat regression, force the first segment to be at 60 fps.
2356         (valueAt): Add convenience function to return interpolated value based on the regression used.
2357         (_calculateRegression): Include the number of points included for both segments, and the piecewise
2358         errors.
2359         * Animometer/tests/resources/math.js: Make the Kalman estimator subclass Experiment, and allow it
2360         to be reset.
2361
2362         * Animometer/tests/resources/main.js: Initialize the tier such that it starts at 10^0 = 1.
2363         Increase the number of ramps. Maintain three FPS thresholds-- the frame rate of interest, a limit
2364         on the lowest FPS we care to go for later interpolation, and a minimum FPS threshold we want to
2365         aim for each ramp. Also keep three estimators: a running average of the change point, a minimum
2366         boundary for each ramp, and an estimator for all the frames within an interval. The first two
2367         are used to determine the parameters of the next ramp, and the latter allows us to refine the
2368         parameters.
2369         (update): During the tier phase, it is possible that the highest complexity possible for a test
2370         won't stress the system enough to trigger stopping the tier phase and transitioning to the ramps.
2371         If the complexity doesn't change when going to the next tier, we've maxed the test out, and move
2372         on. When the tier phase completed, turn off Controller.frameLengthEstimator, which estimates the
2373         FPS at each tier.
2374         (tune): At each interval, look at the confidence distribution of being on the 60 FPS side or the
2375         slow side. If the slowest FPS we achieve at the ramp's maximum complexity is not at least
2376         _fpsRampSlowThreshold, then increase the maximum complexity. If we ever achieve 60 FPS, increase
2377         the ramp's minimum complexity to that level. If, at an even lower complexity, a glitch causes the
2378         FPS to drop, we reset the minimum complexity.
2379
2380         Have the bootstrap calculation occur between tests. Clean up harness.
2381
2382         * Animometer/resources/debug-runner/animometer.js: Run bootstrap after a test has
2383         completed to avoid doing all of it at the end before showing the results. Clean up
2384         parameters being passed around.
2385         * Animometer/resources/debug-runner/tests.js:
2386         (text):
2387         * Animometer/resources/runner/animometer.js:
2388         (this._processData.calculateScore): Save the results to the same object holding the data.
2389         (this._processData._processData): In the case where a file is dragged, calculate the score
2390         serially. Grab the results object and move it to the results variable and remove it from
2391         the data object. This avoids serializing the results into the JSON.
2392         (this._processData.findRegression): Include the samples used for bootstrapping. Reduce the
2393         resample size to shorten the wait.
2394         * Animometer/resources/runner/benchmark-runner.js:
2395         * Animometer/resources/statistics.js:
2396         (bootstrap): Update how bootstrapData is sorted. In some regression results the mix of
2397         floats and integers causes an alphabetical sort to occur.
2398         * Animometer/resources/strings.js:
2399
2400         Add meta charset so that encodings between harness and test match.
2401
2402         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2403         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2404         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2405         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2406         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2407         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2408         * Animometer/tests/master/canvas-stage.html:
2409         * Animometer/tests/master/focus.html:
2410         * Animometer/tests/master/image-data.html:
2411         * Animometer/tests/master/multiply.html:
2412         * Animometer/tests/master/particles.html:
2413         * Animometer/tests/misc/canvas-electrons.html:
2414         * Animometer/tests/misc/canvas-stars.html:
2415         * Animometer/tests/misc/compositing-transforms.html:
2416         * Animometer/tests/simple/simple-canvas-paths.html:
2417         * Animometer/tests/simple/tiled-canvas-image.html:
2418         * Animometer/tests/template/template-canvas.html:
2419         * Animometer/tests/template/template-css.html:
2420         * Animometer/tests/template/template-svg.html:
2421         * Animometer/tests/text/layering-text.html:
2422         * Animometer/tests/text/text-boxes.html:
2423
2424         Update test harness reporting.
2425
2426         * Animometer/developer.html: Add missing meta charset.
2427         * Animometer/index.html: Remove unnecessary utf-8 declaration.
2428         * Animometer/resources/debug-runner/animometer.css: Add convenience classes for
2429         formatting the results table.
2430         * Animometer/resources/debug-runner/animometer.js: Adjust which stats are shown.
2431         * Animometer/resources/debug-runner/tests.js: Display bootstrapping statistics.
2432         * Animometer/resources/strings.js: Move strings not used by the release harness.
2433
2434         Switch to a pseudo-random number generator.
2435
2436         * Animometer/resources/statistics.js: Add a Pseudo class, with a simple
2437         pseudo-random number generator.
2438         (_calculateRegression): Reset the generator before running bootstrap.
2439         (bootstrap): Deleted.
2440
2441         Replace Math.random with Pseudo.random.
2442         * Animometer/tests/master/resources/canvas-tests.js:
2443         * Animometer/tests/master/resources/focus.js:
2444         * Animometer/tests/master/resources/particles.js:
2445         * Animometer/tests/resources/main.js:
2446
2447         Use bootstrapping to get confidence interval in the breakpoint.
2448
2449         For the ramp controller, calculate the piecewise regression, and then use
2450         bootstrapping in order to find the 95% confidence interval. Use the raw data.
2451
2452         * Animometer/developer.html: Default to the complexity graph. Add a legend
2453         checkbox to toggle visibility of the bootstrap score and histogram.
2454         * Animometer/resources/debug-runner/animometer.css: Make some more space to show
2455         the old raw and average scores in the legend. Add new styles for the data.
2456         * Animometer/resources/debug-runner/graph.js:
2457         (_addRegressionLine): Allow passing an array for the variance bar tied to the
2458         regression line. Now |stdev| is |range|.
2459         (createComplexityGraph): Add bootstrap median, and overlay a histogram of
2460         the bootstrap samples. Switch raw samples from circles to X's.
2461         (onComplexityGraphOptionsChanged): Allow toggling of the bootstrap data.
2462         (onGraphTypeChanged): Move the regressions for the raw and average samples to the
2463         legend. In the subtitle use the bootstrap median, and include the 95% confidence
2464         interval.
2465         * Animometer/resources/runner/animometer.js:
2466         (this._processData.findRegression): Factor out the code that determines which
2467         samples to include when calculating the piecewise regression. For series that have
2468         many samples, or a wider range of recorded complexities, throw away the 2.5%
2469         lowest and highest samples before calculating the regression. Keep all samples
2470         if the number of samples to regress is small or the range of complexities is
2471         narrow.
2472         (this._processData._calculateScore): Factor out regression calculation to
2473         findRegression(). Bootstrap the change point of the regression. The score is the
2474         median.
2475         * Animometer/resources/statistics.js:
2476         (_calculateRegression): Correct an issue in the calculation of the regression, where
2477         the denominator can be 0.
2478         (bootstrap): Template for bootstrapping. Create a bootstrap sample array, Create
2479         re-samples by random selection with replacement. Return the 95% confidence samples,
2480         the bootstrap median, mean, and the data itself.
2481         * Animometer/resources/strings.js: Add bootstrap.
2482         * Animometer/tests/resources/main.js:
2483         (processSamples): Don't prematurely cut the sample data.
2484
2485         Fix graph drawing.
2486
2487         * Animometer/resources/debug-runner/animometer.js: Add spacing in the JSON output.
2488         Multiple tests output a lot of JSON and can hang when selecting JSON with no whitespace.
2489         * Animometer/resources/debug-runner/animometer.css:
2490         (#complexity-graph .series.raw circle): Update the color.
2491         * Animometer/resources/debug-runner/graph.js: Use the FPS axis instead of the
2492         complexity axis, which can vary in domain. For determining the complexity domain,
2493         only use samples after samplingTimeOffset.
2494
2495         Allow dropping results JSON.
2496
2497         * Animometer/developer.html: Add a button.
2498         * Animometer/resources/debug-runner/animometer.css:
2499         * Animometer/resources/debug-runner/animometer.js: Read the data and go straight
2500         to the dashboard. With JSON output, write out only the options and the raw data.
2501
2502         Teach the harness to evaluate the samples and determine the test score.
2503
2504         This will allow us to update how the score is calculated separately from the samples recorded.
2505         This also prepares the harness to be able to accept JSON of prior runs.
2506
2507         * Animometer/resources/strings.js: Clean up and remove unneeded strings and reduce some of the
2508         hierarchy.
2509         * Animometer/resources/debug-runner/tests.js: Update to use the new strings.
2510
2511         * Animometer/tests/resources/main.js: Allow all controllers to show a complexity-FPS graph.
2512         (_processComplexitySamples): Factor out some of the sample processing done in the ramp
2513         controller for the benefit of the other controllers. |complexitySamples| contains a list of
2514         samples. Sort the samples by complexity. Optionally remove the top x% of samples.
2515         Group them, and calculate distribution of samples within the same complexity, and add those as
2516         new entries into |complexityAverageSamples|.
2517         (Controller.processSamples): Move the code responsible for determining the complexity and FPS
2518         scores out to ResultsDashboard. The structure of the data returned by the controller is:
2519
2520         {
2521             controller: [time-regression, time-regression, ...], // optional, data specific to controller
2522             marks: [...],
2523             samples: {                    // all of the sample data
2524                 controller: [...],
2525                 complexity: [...],        // processed from controller samples
2526                 complexityAverage: [...], // processed from complexity samples
2527             }
2528         }
2529
2530         (AdaptiveController.processSamples): Adding the target frame length is no longer necessary; we
2531         now pass the test options to the graph.
2532         (Regression): Move to statistics.js.
2533         * Animometer/resources/statistics.js: Move Regression to here. Add a check if the sampling range
2534         only contains one sample, since we cannot calculate a regression from one sample point.
2535
2536         Teach the test harness to evaluate the data.
2537         * Animometer/resources/runner/animometer.js:
2538         (ResultsDashboard): Store the options used to run the test and the computed results/score separately
2539         from the data. The results are stored as:
2540
2541         {
2542             score: /* geomean of iteration score */,
2543             iterationsResults: [
2544                 {
2545                     score: /* geomean of tests */,
2546                     testsResults: {
2547                         suiteName: {
2548                             testName: {
2549                                 controller: {
2550                                     average:
2551                                     concern:
2552                                     stdev:
2553                                     percent:
2554                                 },
2555                                 frameLength: { ... },
2556                                 complexity: {
2557                                     complexity:
2558                                     stdev:
2559                                     segment1:
2560                                     segment2:
2561                                 },
2562                                 complexityAverage: { ... }
2563                             },
2564                             testName: { ... },
2565                         },
2566                         ... next suite ...
2567                     }
2568                 },
2569                 { ...next iteration... }
2570             ]
2571         }
2572
2573         * Animometer/resources/debug-runner/animometer.js: Pass options around instead of relying
2574         on what was selected in the form. This will later allow for dropping previous results, and
2575         using those runs' options when calculating scores.
2576         (ResultsTable._addGraphButton): Simplify button action by using attached test data.
2577         * Animometer/resources/debug-runner/graph.js: Refactor to use the data.
2578
2579         Consolidate JS files, and move statistics out to a separate JS.
2580
2581         Preparation for having the Controller only handle recording and storage of the samples,
2582         and leave the evaluation of the test score out to the harness. Move Experiment to
2583         a new statistics.js, where Regression will also eventually go. Get rid of algorithm.js
2584         and move it to utilities.js since the Heap is used only for Experiments.
2585
2586         * Animometer/tests/resources/algorithm.js: Removed. Heap is in utilities.js.
2587         * Animometer/tests/resources/sampler.js: Removed. Experiment is in statistics.js,
2588         Sampler in main.js.
2589         * Animometer/tests/resources/main.js: Move Sampler here.
2590         * Animometer/resources/statistics.js: Added. Move Statistics and Experiment here.
2591         * Animometer/resources/extensions.js: Move Heap here. Attach static method to create
2592         a max or min heap to Heap, instead of a new Algorithm object.
2593
2594         Update JS files.
2595         * Animometer/developer.html:
2596         * Animometer/index.html:
2597         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2598         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2599         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2600         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2601         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2602         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2603         * Animometer/tests/master/canvas-stage.html:
2604         * Animometer/tests/master/focus.html:
2605         * Animometer/tests/master/image-data.html:
2606         * Animometer/tests/master/multiply.html:
2607         * Animometer/tests/master/particles.html:
2608         * Animometer/tests/misc/canvas-electrons.html:
2609         * Animometer/tests/misc/canvas-stars.html:
2610         * Animometer/tests/misc/compositing-transforms.html:
2611         * Animometer/tests/simple/simple-canvas-paths.html:
2612         * Animometer/tests/simple/tiled-canvas-image.html:
2613         * Animometer/tests/template/template-canvas.html:
2614         * Animometer/tests/template/template-css.html:
2615         * Animometer/tests/template/template-svg.html:
2616         * Animometer/tests/text/layering-text.html:
2617         * Animometer/tests/text/text-boxes.html:
2618
2619         Fix the cursor in the graph analysis when the min
2620         complexity is not 0.
2621
2622         * Animometer/resources/debug-runner/graph.js:
2623         (_addRegression):
2624         (createComplexityGraph):
2625
2626 2016-02-23  Geoffrey Garen  <ggaren@apple.com>
2627
2628         Fix some issues in MallocBench
2629         https://bugs.webkit.org/show_bug.cgi?id=154600
2630
2631         Reviewed by Oliver Hunt.
2632
2633         * MallocBench/MallocBench.xcodeproj/project.pbxproj: Make nimlang.ops
2634         a part of the build so that it copies to the right place for execution.
2635
2636         * MallocBench/MallocBench/Interpreter.cpp:
2637         (Interpreter::Interpreter): Don't try to open .ops files for writing
2638         because we're only going to read and we might need extra permissions to
2639         write.
2640
2641         (Interpreter::~Interpreter): Give more context when opening a file fails
2642         to help with debugging.
2643
2644         * MallocBench/MallocBench/stress.cpp:
2645         (benchmark_stress): Reduce iterations to complete in less than 10 seconds.
2646
2647 2016-02-23  Michael Saboff  <msaboff@apple.com>
2648
2649         Unreviewed change to revert extraneous changes made part of change set 196955.
2650
2651         * MallocBench/MallocBench/Interpreter.cpp:
2652         (Interpreter::doMallocOp):
2653         (Interpreter::Thread::switchTo):
2654         (writeData): Deleted.
2655
2656 2016-02-19  Michael Saboff  <msaboff@apple.com>
2657
2658         MallocBench: Added recording for nimlang website, new recording details and added new options
2659         https://bugs.webkit.org/show_bug.cgi?id=154485
2660
2661         Reviewed by Geoff Garen.
2662
2663         Added new capabilities to MallocBench.  These include:
2664             Added a recording of http://nim-lang.org/docs/lib.html.
2665             Added thread id to the recording and the ability to playback switching threads in MallocBench
2666             Added aligned allocations to recordings and the ability to playback
2667             Added --use-thread-id option to honor recorded thread ids
2668             Added --detailed-report to output remaining allocations by size after playback
2669             Added --no-warmup to not run the warm up iteration
2670
2671         Changed the way that options are passed down to the benchmarks.  Instead of passing individual
2672         boolean or numeric option values, just pass a reference the CommandLine itself.  Each benchmark
2673         can access the options that are appropriate.  The Benchmark class also uses the options for
2674         is parallel, run counts and warm up.
2675
2676         Added thread id and aligned malloc to the Op by noticing that structure padding and Opcode allowed
2677         for another 32 bits of data.  Breaking that unused 32 bits into a 16 bit thread id value and a
2678         16 bit log base 2 of the alignment for aligned malloc allowed for existing recordings to playback
2679         without any incompatibilities.
2680
2681         Threaded operation is simulated by creating threads as needed.  As long as the next Op's thread id
2682         is the same as the last, operation continues as normal.  When the next Op has a different thread id,
2683         we switch to that thread using the shared Op stream to continue playing back.  There is a mutex to
2684         assure that only one thread is really running at a time and a condition variable used to wait
2685         that the current thread id matches each block thread's thread id.  This doesn't simulate true
2686         concurrent threading, but is instead plays back Ops recorded for multiple thread faithfully.
2687
2688         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2689         * MallocBench/MallocBench/Benchmark.cpp:
2690         (deallocateHeap):
2691         (Benchmark::Benchmark):
2692         (Benchmark::runOnce):
2693         (Benchmark::run):
2694         * MallocBench/MallocBench/Benchmark.h:
2695         (Benchmark::isValid):
2696         * MallocBench/MallocBench/CommandLine.cpp:
2697         (CommandLine::printUsage):
2698         * MallocBench/MallocBench/CommandLine.h:
2699         (CommandLine::isValid):
2700         (CommandLine::benchmarkName):
2701         (CommandLine::isParallel):
2702         (CommandLine::useThreadID):
2703         (CommandLine::detailedReport):
2704         (CommandLine::warmUp):
2705         (CommandLine::heapSize):
2706         (CommandLine::runs):
2707         * MallocBench/MallocBench/Interpreter.cpp:
2708         (Interpreter::Interpreter):
2709         (Interpreter::run):
2710         (Interpreter::readOps):
2711         (Interpreter::doOnSameThread):
2712         (Interpreter::switchToThread):
2713         (Interpreter::detailedReport):
2714         (compute2toPower):
2715         (writeData):
2716         (Interpreter::doMallocOp):
2717         (Interpreter::Thread::Thread):
2718         (Interpreter::Thread::stop):
2719         (Interpreter::Thread::~Thread):
2720         (Interpreter::Thread::runThread):
2721         (Interpreter::Thread::waitToRun):
2722         (Interpreter::Thread::switchTo):
2723         * MallocBench/MallocBench/Interpreter.h:
2724         (Interpreter::Thread::isMainThread):
2725         * MallocBench/MallocBench/alloc_free.cpp: Added.
2726         (benchmark_alloc_free):
2727         * MallocBench/MallocBench/alloc_free.h: Added.
2728         * MallocBench/MallocBench/balloon.cpp:
2729         (benchmark_balloon):
2730         * MallocBench/MallocBench/balloon.h:
2731         * MallocBench/MallocBench/big.cpp:
2732         (benchmark_big):
2733         * MallocBench/MallocBench/big.h:
2734         * MallocBench/MallocBench/churn.cpp:
2735         (benchmark_churn):
2736         * MallocBench/MallocBench/churn.h:
2737         * MallocBench/MallocBench/facebook.cpp:
2738         (benchmark_facebook):
2739         * MallocBench/MallocBench/facebook.h:
2740         * MallocBench/MallocBench/flickr.cpp:
2741         (benchmark_flickr):
2742         (benchmark_flickr_memory_warning):
2743         * MallocBench/MallocBench/flickr.h:
2744         * MallocBench/MallocBench/fragment.cpp:
2745         (validate):
2746         (benchmark_fragment):
2747         (benchmark_fragment_iterate):
2748         * MallocBench/MallocBench/fragment.h:
2749         * MallocBench/MallocBench/list.cpp:
2750         (benchmark_list_allocate):
2751         (benchmark_list_traverse):
2752         * MallocBench/MallocBench/list.h:
2753         * MallocBench/MallocBench/main.cpp:
2754         (main):
2755         * MallocBench/MallocBench/medium.cpp:
2756         (benchmark_medium):
2757         * MallocBench/MallocBench/medium.h:
2758         * MallocBench/MallocBench/memalign.cpp:
2759         (test):
2760         (benchmark_memalign):
2761         * MallocBench/MallocBench/memalign.h:
2762         * MallocBench/MallocBench/message.cpp:
2763         (benchmark_message_one):
2764         (benchmark_message_many):
2765         * MallocBench/MallocBench/message.h:
2766         * MallocBench/MallocBench/nimlang.cpp: Added.
2767         (benchmark_nimlang):
2768         * MallocBench/MallocBench/nimlang.h: Added.
2769         * MallocBench/MallocBench/nimlang.ops: Added.
2770         * MallocBench/MallocBench/realloc.cpp:
2771         (benchmark_realloc):
2772         * MallocBench/MallocBench/realloc.h:
2773         * MallocBench/MallocBench/reddit.cpp:
2774         (benchmark_reddit):
2775         (benchmark_reddit_memory_warning):
2776         * MallocBench/MallocBench/reddit.h:
2777         * MallocBench/MallocBench/stress.cpp:
2778         (deallocate):
2779         (benchmark_stress):
2780         * MallocBench/MallocBench/stress.h:
2781         * MallocBench/MallocBench/stress_aligned.cpp:
2782         (benchmark_stress_aligned):
2783         * MallocBench/MallocBench/stress_aligned.h:
2784         * MallocBench/MallocBench/theverge.cpp:
2785         (benchmark_theverge):
2786         (benchmark_theverge_memory_warning):
2787         * MallocBench/MallocBench/theverge.h:
2788         * MallocBench/MallocBench/tree.cpp:
2789         (benchmark_tree_allocate):
2790         (benchmark_tree_traverse):
2791         (benchmark_tree_churn):
2792         * MallocBench/MallocBench/tree.h:
2793         * MallocBench/run-malloc-benchmarks:
2794
2795 2016-02-11  Jon Lee  <jonlee@apple.com>
2796
2797         Fix a missing refactoring.
2798
2799         * Animometer/tests/master/resources/multiply.js:
2800         (animate): Move to Utilities.lerp.
2801         (_lerp): Deleted.
2802
2803 2016-02-10  Jon Lee  <jonlee@apple.com>
2804
2805         Add new benchmark tests.
2806         https://bugs.webkit.org/show_bug.cgi?id=154063
2807
2808         Provisionally reviewed by Said Abou-Hallawa.
2809
2810         Add tests for get/put image data, filters, opacity, and css transforms.
2811
2812         * Animometer/resources/runner/benchmark-runner.js:
2813         (_runBenchmarkAndRecordResults): Update the body background color to match that of
2814         the stage.
2815         (this._runNextIteration): Clear the background color style for the results page.
2816         * Animometer/resources/runner/tests.js:
2817         * Animometer/tests/master/focus.html: Added.
2818         * Animometer/tests/master/image-data.html: Added.
2819         * Animometer/tests/master/multiply.html: Added.
2820         * Animometer/tests/master/resources/focus.js: Added.
2821         * Animometer/tests/master/resources/image-data.js: Added.
2822         * Animometer/tests/master/resources/multiply.js: Added.
2823         * Animometer/tests/master/resources/stage.css: Move common styles out.
2824         * Animometer/tests/resources/main.js: Update Stage.randomBool to use Math.random.
2825         Add Stage.randomSign for randomly setting a direction. Add the notion of the
2826         current timestamp of the test to Benchmark, since some animations cycle through
2827         colors and rely on an incremental counter like the time.
2828
2829 2016-02-09  Said Abou-Hallawa  <sabouhallawa@apple.com>
2830
2831         Add internal benchmark tests for CSS mix-blend-modes and filters
2832         https://bugs.webkit.org/show_bug.cgi?id=154058
2833
2834         Provisionally reviewed by Jon Lee.
2835
2836         * Animometer/resources/debug-runner/tests.js: Include the new tests in the
2837         "HTML suite" of the debug runner.
2838
2839         * Animometer/resources/extensions.js:
2840         (Utilities.browserPrefix):
2841         (Utilities.setElementPrefixedProperty): Utility functions to allow setting
2842         prefixed style properties.
2843
2844         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
2845         Set the mix-blend-mode and the filter to some random values if the options
2846         of the test requested that.
2847
2848         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
2849         (parseShapeParameters): Parse the url options "blend" and "filter" and set
2850         the corresponding flags.
2851
2852         * Animometer/tests/resources/main.js:
2853         (randomStyleMixBlendMode):
2854         (randomStyleFilter): Return random mix-blend-mode and filter.
2855
2856 2016-02-08  Jon Lee  <jonlee@apple.com>
2857
2858         Add a ramp controller
2859         https://bugs.webkit.org/show_bug.cgi?id=154028
2860
2861         Provisionally reviewed by Said Abou-Hallawa.
2862
2863         Enhance the graph to include a complexity-fps graph, in addition
2864         to the time graph.
2865
2866         * Animometer/developer.html: Add a ramp option.
2867         * Animometer/resources/debug-runner/animometer.css: Update the style.
2868         * Animometer/resources/strings.js: Flatten the Strings.text constants.
2869         * Animometer/resources/debug-runner/animometer.js:
2870         (ResultsTable.call._addGraphButton): Refactor.
2871         (ResultsTable.call._addTest): Add regression data.
2872         (benchmarkController): Add a form that allows the user to switch between the two forms,
2873         Add a form that allows the user to toggle different data. Hide certain header columns
2874         depending on the selected controller.
2875         * Animometer/resources/debug-runner/graph.js: Add the complexity regressions.
2876         * Animometer/resources/debug-runner/tests.js: Add headers for the ramp results.
2877         * Animometer/resources/runner/animometer.js:
2878         (ResultsTable): If a header is disabled don't include them in _flattenedHeaders.
2879         * Animometer/tests/resources/main.js:
2880         (Controller): Allow options to specify the capacity for sample arrays.
2881         (Regression): A piecewise regression that tries to fit a slope and a flat profile.
2882         (_calculateRegression): Options can fix the slope and bias when calculating the minimal
2883         error. Sweep across the samples in time (which could be backward depending on the controller)
2884         and calculate the intersection point.
2885         (RampController): This controller assumes that the target frame rate is below
2886         58 FPS. It runs in two stages. The first stage quickly determines the order of
2887         magnitude of objects needed to stress the system by the setting the complexity
2888         to increasingly difficult tiers. Perform a series of ramps descending from a
2889         high-water mark of complexity. The complexity needed to reach the target frame
2890         length is done by performing a piecewise regression on each ramp, and track a
2891         running average of these values. For the next ramp, make that running average
2892         the center of the ramp. With a minimum complexity of 0, the high-water mark is
2893         twice that average. The score is based on the highest complexity that can
2894         reach 60 fps.
2895
2896 2016-02-08  Jon Lee  <jonlee@apple.com>
2897
2898         Address Said's comments on the benchmark, and do some clean up.
2899
2900         * Animometer/developer.html:
2901         * Animometer/resources/debug-runner/animometer.css: Add styles for averages.
2902         * Animometer/resources/debug-runner/animometer.js: Use the right
2903         Strings constants.
2904         * Animometer/resources/debug-runner/graph.js:
2905         (_addRegressionLine): Add missing code to draw the line and standard
2906         deviation highlight.
2907         (onGraphTypeChanged): Remove unneeded variables
2908         (onTimeGraphOptionsChanged):
2909         * Animometer/resources/runner/benchmark-runner.js:
2910         (_runBenchmarkAndRecordResults): Rename samplers to suiteResults and
2911         _suitesSamplers to _suitesResults.
2912         * Animometer/tests/resources/main.js:
2913         (results): Call processSamples().
2914         (update): Change sampling timestamp comparison.
2915         (_animateLoop): Move shouldStop call to before the update.
2916         * Animometer/tests/resources/sampler.js:
2917         (process): Rename to processSamples().
2918
2919 2016-02-07  Jon Lee  <jonlee@apple.com>
2920
2921         Teach Controller to measure intervals, and turn off the frame length estimator.
2922
2923         * Animometer/tests/resources/main.js: Default interval length is 100 ms.
2924         (start): Set the first interval.
2925         (_measureAndResetInterval): Reports the average frame length of the interval that just
2926         completed, and sets up the next interval.
2927         (update): If there is no length, then just use the estimator per frame, otherwise the
2928         estimator measures per interval. Add a didFinishInterval for subclasses to process
2929         prior to recording the sample. Update tune() to include whether an interval had
2930         finished.
2931         (StepController): Step controllers don't measure on an interval basis.
2932
2933 2016-02-07  Jon Lee  <jonlee@apple.com>
2934
2935         Minor refactoring. Rename Controller._estimator to Controller._frameLengthEstimator
2936         and switch the parameters for start(), update(), and tune(), so that the timestamp
2937         is first and stage is second.
2938
2939         * Animometer/tests/resources/main.js:
2940
2941 2016-02-07  Jon Lee  <jonlee@apple.com>
2942
2943         Move ResultsTable functionality not needed for release tests out.
2944         Move reporting of score and mean to selection of the time-based graph.
2945
2946         * Animometer/developer.html: Rename graph-options to time-graph-options.
2947         * Animometer/resources/debug-runner/animometer.js:
2948         (DeveloperResultsTable): Moved from runner/animometer.js. Switch from mean
2949         values to "average" objects which can hold stdev. Move graph button and
2950         calculation of noisy measurements here. Sophisticated header processing
2951         is not needed in release suite.
2952         (populateTable): Use DeveloperResultsTable.
2953         * Animometer/resources/debug-runner/graph.js: Pull time graph creation to
2954         its own function, and add a new onGraphTypeChanged handler in preparation
2955         of a complexity graph to be added later.
2956         * Animometer/resources/runner/animometer.js:
2957         (ResultsTable): Simplify to just handle test names and scores.
2958
2959 2016-02-07  Jon Lee  <jonlee@apple.com>
2960
2961         Tests: reuse objects already made.
2962
2963         Avoid thrash of object creation and removal by maintaining an index that
2964         moves along the array as the adjust values change. If the tune value
2965         requires more objects than the maximum size of the object array, then create
2966         new objects. This means that the object array size never decreases.
2967
2968         * Animometer/tests/master/resources/canvas-stage.js: Maintain a separate
2969         offsetIndex. For these tests, we want to avoid drawing the oldest objects,
2970         so the scene will draw the object at offsetIndex to the end of the array.
2971         (tune): Reverse the logic since "removal" of objects is much simpler and
2972         involves simply changing the offsetIndex.
2973         (animate): Update the for loop to draw from offsetIndex to the end.
2974         (complexity): Update the definition.
2975         * Animometer/tests/master/resources/canvas-tests.js: Maintain a separate
2976         offsetIndex. For these tests, we want to avoid drawing the newest objects,
2977         so the scene will draw the object at index 0 to the object at offsetIndex.
2978         (SimpleCanvasStage.animate): Fly-by removal of local stage variable,
2979         which is unneeded. Update the for loop to draw from offsetIndex to the end.
2980         * Animometer/tests/simple/resources/simple-canvas-paths.js:
2981         (SimpleCanvasStage.animate): Update the for loop to draw from 0 to
2982         offsetIndex.
2983         * Animometer/tests/simple/resources/simple-canvas.js:
2984         (tune): Update logic. Here, offsetIndex represents the boundary of the last
2985         index to render.
2986         (animate): Update the for loop to draw from 0 to offsetIndex.
2987         (complexity): Update the definition.
2988
2989 2016-02-07  Jon Lee  <jonlee@apple.com>
2990
2991         Tests: refactor and update styles.
2992
2993         * Animometer/tests/resources/main.js: Add helper methods that return
2994         a color that hue rotates based on the date, and a counter value that
2995         increases based on the date. Fix randomInt() to not bias against the min and
2996         max values.
2997
2998         * Animometer/tests/master/resources/canvas-tests.js: Use new helper methods.
2999         * Animometer/tests/master/resources/dom-particles.js: Ditto.
3000         * Animometer/tests/master/resources/particles.js: Ditto.
3001         * Animometer/tests/simple/resources/simple-canvas-paths.js: Refactor to
3002         use a rotating color instead of a random color. The fast switching of color
3003         is too vivid to watch.
3004
3005         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3006         (BouncingSvgParticlesStage.call.createGradient): Fix the gradient so
3007         that the last stop is located at the end.
3008
3009 2016-02-07  Jon Lee  <jonlee@apple.com>
3010
3011         Refactor tune() to not return the complexity of the scene.
3012
3013         We have stage.complexity() now, so returning the complexity through tune
3014         is unnecessary.
3015
3016         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3017         * Animometer/tests/master/resources/canvas-stage.js:
3018         * Animometer/tests/master/resources/particles.js:
3019         * Animometer/tests/misc/resources/canvas-electrons.js:
3020         * Animometer/tests/misc/resources/canvas-stars.js:
3021         * Animometer/tests/resources/main.js:
3022         * Animometer/tests/simple/resources/simple-canvas.js:
3023         * Animometer/tests/simple/resources/tiled-canvas-image.js:
3024         * Animometer/tests/template/resources/template-canvas.js:
3025         * Animometer/tests/template/resources/template-css.js:
3026         * Animometer/tests/template/resources/template-svg.js:
3027         * Animometer/tests/text/resources/layering-text.js:
3028
3029 2016-02-07  Jon Lee  <jonlee@apple.com>
3030
3031         Make the fixed controller a step controller instead. Halfway through the test
3032         it will bump up the complexity 4-fold. Calculate the step timestamp using options
3033         instead of a separate parameter to the Controller constructor.
3034
3035         * Animometer/developer.html: Change value to "step"
3036         * Animometer/resources/debug-runner/animometer.js:
3037         (window.suitesManager.updateEditsElementsState): Show number inputs when set to "step".
3038         * Animometer/tests/resources/main.js:
3039         (update): Provide a hook for subclasses to tune.
3040         (StepController): Maintain a flag determining whether we've stepped, and the time
3041         we should step.
3042         (Benchmark): Use the new StepController.
3043
3044 2016-02-07  Jon Lee  <jonlee@apple.com>
3045
3046         Adjust the FPS graph scale.
3047
3048         Instead of making the FPS graph linearly scale, scale it based on the frame length,
3049         but show the data in terms of FPS. Because it is inversely proportional, and most
3050         of the data never gets below 20, concentrate the axis from 20-60 FPS, since otherwise
3051         over half of the available graph space ends up blank.
3052
3053         This means we should convert all of the FPS data to frame length data.
3054
3055         * Animometer/resources/debug-runner/graph.js: Update the domain to be based on
3056         frame length in milliseconds instead of FPS. Update the cursor to consider all of the
3057         values being shown, and then pick the min and max values to represent the length of the
3058         cursor.
3059         * Animometer/resources/runner/animometer.js:
3060         * Animometer/resources/strings.js:
3061         * Animometer/tests/resources/main.js:
3062         (processSamples): Add the ability to only sample a range of the data instead of everything
3063         after an offset index. Update sampler to record the frame lengths instead of the frame
3064         rate.
3065
3066 2016-02-07  Jon Lee  <jonlee@apple.com>
3067
3068         Add option to use different methods for retrieving a timestamp.
3069
3070         * Animometer/developer.html: Add performance.now and Date.now options.
3071         * Animometer/resources/runner/animometer.js: Default to performance.now.
3072         (window.benchmarkController.startBenchmark):
3073         * Animometer/tests/resources/main.js: Tie the desired method to _getTimestamp.
3074         (run): Use _getTimestamp.
3075         (_animateLoop): Ditto.
3076
3077 2016-02-07  Jon Lee  <jonlee@apple.com>
3078
3079         Allow adding any number of markers to the graph. The markers can be labeled
3080         and contain timestamp and sample index data. Make it a part of the controller
3081         rather than keeping it in the sampler.
3082
3083         * Animometer/resources/debug-runner/animometer.css: Add styles for markers
3084         * Animometer/resources/debug-runner/graph.js: Create the markers and add
3085         text labels.
3086         * Animometer/resources/runner/animometer.js: Assume the samplingTimeOffset
3087         is just one of the marks provided.
3088         * Animometer/resources/strings.js: Add Strings.json.marks.
3089         * Animometer/tests/resources/main.js:
3090         (Controller): Keep marks here. They are keyed by the marker name, so no two
3091         markers should have the same name.
3092         (recordFirstSample): Refactor to use mark.
3093         (mark): Allows for arbitrary data if needed later. The timestamp maintained
3094         is relative to the absolute start timestamp.
3095         (containsMark): Checks whether a mark with a specific comment exists.
3096         (processSamples): Removes the _startTimestamp offset from the marks before
3097         setting it in results.
3098         * Animometer/tests/resources/sampler.js: Remove marks.
3099
3100 2016-02-07  Jon Lee  <jonlee@apple.com>
3101
3102         Get rid of options member variable in Benchmark.
3103
3104         Options are only needed when initializing the stage or benchmark, so there's no
3105         need to also keep a reference to it.
3106
3107         * Animometer/tests/resources/main.js: Get rid of options variable in Benchmark.
3108         Pass options to Controllers and Stages.
3109         (Controller.Utilities.createClass):
3110         (Benchmark.Utilities.createClass):
3111         (get options): Deleted.
3112
3113         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
3114         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
3115         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
3116         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
3117         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
3118         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3119         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
3120         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3121         * Animometer/tests/master/resources/canvas-stage.js:
3122         * Animometer/tests/master/resources/canvas-tests.js:
3123         * Animometer/tests/master/resources/particles.js:
3124         * Animometer/tests/misc/resources/canvas-electrons.js:
3125         * Animometer/tests/misc/resources/canvas-stars.js:
3126         * Animometer/tests/misc/resources/compositing-transforms.js:
3127         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3128         * Animometer/tests/simple/resources/tiled-canvas-image.js:
3129         * Animometer/tests/template/resources/template-canvas.js:
3130         * Animometer/tests/template/resources/template-css.js:
3131         * Animometer/tests/template/resources/template-svg.js:
3132         * Animometer/tests/text/resources/layering-text.js:
3133
3134 2016-02-07  Jon Lee  <jonlee@apple.com>
3135
3136         Update how the benchmark is run
3137         https://bugs.webkit.org/show_bug.cgi?id=153960
3138
3139         Provisionally reviewed by Said Abou-Hallawa.
3140
3141         Introduce the notion of a Controller. It is responsible for recording, updating,
3142         and processing the statistics and complexity of the benchmark. This allows
3143         plugging in different Controllers.
3144
3145         This strips most of the functionality from Animator and BenchmarkState, so fold
3146         what's left into Benchmark. Now, Benchmarks only own a stage and a controller, but
3147         are responsible for driving the animation loop.
3148
3149         Rewrite Animator._shouldRequestAnotherFrame into two different Controllers. One
3150         maintains a fixed complexity, and the other adapts the complexity to meet a
3151         fixed FPS.
3152
3153         Fix the Kalman estimator to be modeled on a scalar variable with no model.
3154
3155         * Animometer/tests/resources/main.js: Remove BenchmarkState and Animator, and
3156         replace it with a Controller. Add a FixedController and refactor the previous controller
3157         to an AdaptiveController.
3158
3159         (Controller): Controllers own the estimator and the sampler. When a new frame is
3160         displayed, the animation loop calls update(). The estimator and sampler record
3161         stats, then tune. Samplers can track multiple series of data. The basic controller
3162         tracks timestamp, complexity, and estimated frame rate.
3163                 The Kalman estimation is based on the frame length rather than the frame
3164         rate. Because FPS is inverse proportional to frame length, in the case where the measured
3165         frame length is very small, the FPS ends up being a wildly large number (in the order of
3166         600-1000 "FPS"), and it pulls the estimator up drastically enough that it takes a while
3167         for it to settle back down. Using frame length reduces the impact of these spikes.
3168                 Converging the estimation takes enough time to avoid initializing it immediately
3169         when the benchmark starts. Instead, the benchmark runs for a brief period of time (100ms)
3170         before running it in earnest. Allow controllers an opportunity to set the complexity
3171         before starting recording.
3172                 When the benchmark is complete, the controller has an opportunity to process
3173         the samples. The default implementation calculates the raw FPS based on the time
3174         difference of the samples, and calculates the complexity score. This is moved from
3175         Benchmark.processSamples.
3176
3177         (Controller): Initialize timestamps. These are at first relative to the start of the
3178         benchmark, but are offset by the absolute start time during start(). By default maintain
3179         3 data series, but subclasses can override.
3180         (start): Calls recordFirstSample() for subclasses to override if needed.
3181         (recordFirstSample): For basic controller, start sampling at the beginning.
3182         (update): Update the frame length estimator and sample.
3183         (shouldStop): Checks that the time is before _endTimestamp.
3184         (results): Returns the processed samples.
3185         (processSamples): Iterate through the sample data and collate them. Include scores.
3186
3187         (FixedComplexityController): Controller that tunes the stage to the desired complexity
3188         prior to starting, and keeps it at that complexity.
3189
3190         (AdaptiveController): Have the estimator estimate the interval frame rate instead of the
3191         raw frame rate.
3192                 The previous version of this controller ignored the frame that came after the
3193         adjustment. The raw FPS show that whatever noise the scene change adds is negligible
3194         compared to the noise of the system overall. Stop ignoring that frame and include all
3195         frames in the measurements.
3196
3197         (Benchmark): Remove dependency on animator, and instantiate a runner based on what is
3198         selected. Most of the loop's functionality is in Controller, so remove here.
3199         (Benchmark.run): Remove start() since it is only called from run(), and fold it in here.
3200         (Benchmark._animateLoop): Fold in from Animator.animateLoop. Let the benchmark run for
3201         a brief period before calling Controller.start().
3202
3203         * Animometer/tests/resources/math.js: Fix the Kalman estimator. The filter estimates
3204         a scalar variable, and makes basic assumptions regarding the model. As a result
3205         none of the linear algebra classes are needed, so remove Matrix, Vector3, and Matrix3.
3206         (SimpleKalmanEstimator): Calculate the gain based on the provided process and
3207         measurement errors.
3208         (KalmanEstimator): Deleted.
3209         (IdentityEstimator): Deleted.
3210         (PIDController): Refactor to use the Utilities.createClass() helper.
3211
3212         The Kalman filter algorithm is explained here http://greg.czerniak.info/guides/kalman1/.
3213         The state, represented by a scalar, is the estimated frame length. There is no user
3214         transition of the state, and the state is the same as the measurement. With this model,
3215         the estimation error converges, so calculate the gain ahead of time.
3216
3217         * Animometer/developer.html: Remove fixed-after-warmup since it is not useful.
3218         Replace the option to toggle the estimator, and make it possible to customize the
3219         estimator's error parameters. Show raw FPS by default, and remove interval FPS,
3220         which will be shown instead of the filtered raw FPS.
3221         * Animometer/resources/debug-runner/animometer.css: Put the header behind the graph.
3222         Remove #intervalFPS rules; move the color to #filteredFPS.
3223         * Animometer/resources/debug-runner/graph.js:
3224         (updateGraphData): Update the hr style to force the layout to be calculated
3225         correctly. Change the tick format to be in terms of seconds, since the timestamps
3226         are in milliseconds. Remove interval data.
3227         * Animometer/resources/runner/animometer.js:
3228         (window.benchmarkController.startBenchmark): Set Kalman parameters.
3229         * Animometer/resources/runner/benchmark-runner.js:
3230         (_runBenchmarkAndRecordResults): When a benchmark completes, expect it to return
3231         the final data, rather than passing a sampler from the controller. This avoids
3232         needing to expose the sampler variable in the benchmark.
3233         * Animometer/tests/resources/sampler.js:
3234         (process): Move the setting of the target frame rate to AdaptiveController.
3235
3236 2016-02-06  Jon Lee  <jonlee@apple.com>
3237
3238         Code clean up: Move Rotater function closer to Stage static methods.
3239         The Rotater is used together with those methods; keep them close.
3240
3241         * Animometer/tests/resources/main.js:
3242
3243 2016-02-06  Jon Lee  <jonlee@apple.com>
3244
3245         Update the JS includes due to ResultsTable move.
3246
3247         * Animometer/developer.html:
3248         * Animometer/index.html:
3249
3250 2016-02-06  Jon Lee  <jonlee@apple.com>
3251
3252         Move createElement and createSVGElement to Utilities.
3253
3254         * Animometer/resources/extensions.js:
3255         (Utilities.createElement): Added.
3256         (Utilities.createSVGElement): Added.
3257         (DocumentExtension.createElement): Deleted.
3258         (DocumentExtension.createSvgElement): Deleted.
3259
3260         * Animometer/resources/debug-runner/animometer.js:
3261         * Animometer/resources/runner/animometer.js:
3262         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
3263         * Animometer/tests/bouncing-particles/resources/bouncing-svg-particles.js:
3264         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3265
3266 2016-02-06  Jon Lee  <jonlee@apple.com>
3267
3268         Add a convenience function for creating a class.
3269
3270         The pattern for creating a class is common enough to add as a Utilities
3271         helper function. It also makes it easy to collapse class definitions when
3272         editing.
3273
3274         * Animometer/resources/debug-runner/animometer.js: Move ProgressBar definition,
3275         since it is only used here.
3276         * Animometer/resources/runner/animometer.js: Move ResultsDashboard and
3277         ResultsTable definition, since it is only used here.
3278         * Animometer/resources/extensions.js: Move Utilities definition to the top. Convert
3279         Point, Insets, SimplePromise.
3280         (ProgressBar): Moved to animometer.js.
3281         (ResultsDashboard): Moved to animometer.js.
3282         (ResultsTable): Moved to animometer.js.
3283         * Animometer/resources/runner/benchmark-runner.js: Convert BenchmarkRunnerState,
3284         BenchmarkRunner.
3285         * Animometer/tests/resources/main.js: Convert Rotater, Stage, Animator, Benchmark.
3286         * Animometer/tests/resources/sampler.js: Convert Experiment, Sampler.
3287
3288         Convert test primitives.
3289         * Animometer/tests/master/resources/canvas-tests.js: Convert CanvasLineSegment,
3290         CanvasArc, CanvasLinePoint.
3291         * Animometer/tests/simple/resources/simple-canvas-paths.js: Convert CanvasLineSegment,
3292         CanvasLinePoint, CanvasQuadraticSegment, CanvasQuadraticPoint, CanvasBezierSegment,
3293         CanvasBezierPoint, CanvasArcToSegment, CanvasArcToSegmentFill, CanvasArcSegment,
3294         CanvasArcSegmentFill, CanvasRect, CanvasRectFill.
3295         * Animometer/tests/simple/resources/tiled-canvas-image.js: Convert CanvasImageTile.
3296
3297 2016-02-06  Jon Lee  <jonlee@apple.com>
3298
3299         Minor improvements to debug harness.
3300
3301         * Animometer/developer.html:
3302         * Animometer/resources/debug-runner/animometer.css:
3303         (#suites): Put the complexity text boxes closer to the test names.
3304         (#options):
3305         (#rawFPS circle): Make the interval FPS appear as a separate data series, with a line.
3306         (#intervalFPS path):
3307         (#intervalFPS circle):
3308         * Animometer/resources/debug-runner/animometer.js:
3309         (window.optionsManager.updateLocalStorageFromUI): Convert number inputs from text.
3310         (window.suitesManager._onChangeTestCheckbox): Refactor to take a checkbox.
3311         (window.suitesManager._createTestElement): Enhance such that typing into the complexity
3312         input will automatically select that test for running.
3313         (window.suitesManager.updateLocalStorageFromJSON): Make the harness work for private
3314         browsing.
3315         * Animometer/resources/debug-runner/graph.js: Separate the intervalFPS data, and show
3316         more accuracy in timestamps.
3317
3318 2016-02-06  Jon Lee  <jonlee@apple.com>
3319
3320         Refactor helper methods for getting random values for a stage.
3321
3322         Instead of requiring a Stage instance, just attach it to the Stage object.
3323
3324         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
3325         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
3326         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3327         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3328         * Animometer/tests/master/resources/canvas-tests.js:
3329         * Animometer/tests/master/resources/particles.js:
3330         * Animometer/tests/misc/resources/canvas-electrons.js:
3331         * Animometer/tests/misc/resources/canvas-stars.js:
3332         * Animometer/tests/misc/resources/compositing-transforms.js:
3333         * Animometer/tests/resources/main.js:
3334         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3335
3336 2016-02-05  Said Abou-Hallawa  <sabouhallawa@apple.com>
3337
3338         Add a new graphics test for CanvasRenderingContext2D functions: getImageData and putImageData
3339         https://bugs.webkit.org/show_bug.cgi?id=151716
3340
3341         Reviewed by Darin Adler.
3342
3343         The purpose of this test is to measure the performance of getImageData
3344         and putImageData functions. This test draws a background on the canvas
3345         and then gets some random tiles from this background and draw them in
3346         destinations different from their original sources.
3347
3348         * Animometer/resources/debug-runner/tests.js: Adding the new test to the canvas simple tests suite.
3349
3350         * Animometer/resources/extensions.js:
3351         (Array.prototype.shuffle): Shuffles the elements of an array.
3352
3353         (Point.zero): Returns a new Point object whose x and y are equal zero.
3354         (Point.prototype.str): Used for debugging the Point object.
3355
3356         * Animometer/tests/simple/resources/tiled-canvas-image.js: Added.
3357         (CanvasImageTile):
3358         (CanvasImageTile.prototype.getImageData):
3359         (CanvasImageTile.prototype.putImageData):
3360         (Stage.call.initialize):
3361         (Stage.call._createTiles):
3362         (Stage.call._nextTilePosition):
3363         (Stage.call.tune):
3364         (Stage.call._drawBackground):
3365         (Stage.call.animate):
3366         (Stage.call.complexity):
3367         (Stage.call):
3368         * Animometer/tests/simple/tiled-canvas-image.html: Added.
3369
3370 2016-01-07  Jon Lee  <jonlee@apple.com>
3371
3372         Fix new test.
3373
3374         * Animometer/resources/runner/tests.js: Wrong URL from an
3375         old patch.
3376         * Animometer/tests/master/particles.html:
3377         * Animometer/tests/master/resources/dom-particles.js:
3378         (Particle.call.reset): Figured out a simpler way to set up
3379         the particles.
3380         (this.move.reset): Deleted.
3381         (this.move._applyAttributes): Deleted.