Unreviewed, rolling out r209725.
[WebKit-https.git] / PerformanceTests / ChangeLog
1 2016-12-12  Brady Eidson  <beidson@apple.com>
2
3         More IndexedDB perf tests.
4         https://bugs.webkit.org/show_bug.cgi?id=165634
5
6         Reviewed by Sam Weinig.
7
8         * IndexedDB/index-multientry.html:
9         * IndexedDB/large-number-of-inserts-responsiveness.html: Added.
10         * IndexedDB/large-number-of-inserts.html: Added.
11         * IndexedDB/objectstore-cursor.html: Added. Runtime cut in 1/4th compared to r209672.
12
13         * resources/runner.js:
14
15 2016-12-12  Commit Queue  <commit-queue@webkit.org>
16
17         Unreviewed, rolling out r209672.
18         https://bugs.webkit.org/show_bug.cgi?id=165766
19
20         IndexedDB/objectstore-cursor.html perf test always times out
21         (Requested by ap on #webkit).
22
23         Reverted changeset:
24
25         "More IndexedDB perf tests."
26         https://bugs.webkit.org/show_bug.cgi?id=165634
27         http://trac.webkit.org/changeset/209672
28
29 2016-12-10  Brady Eidson  <beidson@apple.com>
30
31         More IndexedDB perf tests.
32         https://bugs.webkit.org/show_bug.cgi?id=165634
33
34         Reviewed by Sam Weinig.
35
36         * IndexedDB/index-multientry.html:
37         * IndexedDB/large-number-of-inserts-responsiveness.html: Added.
38         * IndexedDB/large-number-of-inserts.html: Added.
39         * IndexedDB/objectstore-cursor.html: Added.
40         
41         * resources/runner.js: Add "track responsiveness" functionality to PerfTestRunner.
42
43 2016-12-06  Filip Pizlo  <fpizlo@apple.com>
44
45         Concurrent GC should be stable enough to land enabled
46         https://bugs.webkit.org/show_bug.cgi?id=164990
47
48         Reviewed by Geoffrey Garen.
49         
50         Made CDjs more configurable and refined the "large.js" configuration. I was using that one and
51         the new "long.js" configuration to tune concurrent eden GCs.
52         
53         Added a new way of running Splay in browser, which using chartjs to plot the execution times of
54         2000 iterations. This includes the minified chartjs.
55
56         * JetStream/Octane2/splay-detail.html: Added.
57         * JetStream/cdjs/benchmark.js:
58         (benchmarkImpl):
59         (benchmark):
60         * JetStream/cdjs/long.js: Added.
61
62 2016-12-07  Brady Eidson  <beidson@apple.com>
63
64         Add IDB perf tests stressing key size.
65         https://bugs.webkit.org/show_bug.cgi?id=165567
66
67         Reviewed by Alex Christensen.
68
69         * IndexedDB/large-array-keys.html: Added.
70         * IndexedDB/large-binary-keys.html: Added.
71         * IndexedDB/large-string-keys.html: Added.
72
73 2016-12-05  Brady Eidson  <beidson@apple.com>
74
75         Add an IndexedDB perf test to PerformanceTests.
76         https://bugs.webkit.org/show_bug.cgi?id=165430
77
78         Reviewed by Alex Christensen.
79
80         * IndexedDB/index-multientry.html: Added.
81
82 2016-12-02  Filip Pizlo  <fpizlo@apple.com>
83
84         ES6SampleBench should report an average for Steady State so that all of the numbers are comparable
85         https://bugs.webkit.org/show_bug.cgi?id=165325
86
87         Reviewed by Saam Barati.
88
89         This makes all of the numbers that ES6SampleBench reports comparable to each other: they all speak of the time
90         it took to run an iteration of something.
91
92         * ES6SampleBench/results.js:
93         (Results.prototype.reportResult):
94
95 2016-11-18  Jer Noble  <jer.noble@apple.com>
96
97         Add some performance tests for various aspects of media loading and playback.
98         https://bugs.webkit.org/show_bug.cgi?id=164977
99
100         Reviewed by Darin Adler.
101
102         Add new tests for a few aspects of media playback; namely: how quickly  media elements fire
103         the "canplaythrough" event when all data is immediately available, how quickly HLS playback
104         switches resolutions, and at what playback rate MSE-backed video can play without dropping
105         frames. Skip these tests by default, as they're not runnable on all ports, and they require
106         a webserver (run-webkit-httpd) to complete on macOS.
107
108         * Media/HLSCanPlayThrough.html: Added.
109         * Media/HLSGearChange.html: Added.
110         * Media/MSECanPlayThrough.html: Added.
111         * Media/MSEPlaybackRate.html: Added.
112         * Media/StandardCanPlayThrough.html: Added.
113         * Media/hls/1080p/iframe_index.m3u8: Added.
114         * Media/hls/1080p/prog_index.m3u8: Added.
115         * Media/hls/1080p/test.ts: Added.
116         * Media/hls/480p/iframe_index.m3u8: Added.
117         * Media/hls/480p/prog_index.m3u8: Added.
118         * Media/hls/480p/test.ts: Added.
119         * Media/hls/720p/iframe_index.m3u8: Added.
120         * Media/hls/720p/prog_index.m3u8: Added.
121         * Media/hls/720p/test.ts: Added.
122         * Media/hls/720p/test.ts.back: Added.
123         * Media/hls/index.m3u8: Added.
124         * Media/media-source-loader.js: Added.
125         (MediaSourceLoader):
126         (MediaSourceLoader.prototype.loadManifest):
127         (MediaSourceLoader.prototype.loadManifestSucceeded):
128         (MediaSourceLoader.prototype.loadManifestFailed):
129         (MediaSourceLoader.prototype.loadMediaData):
130         (MediaSourceLoader.prototype.loadMediaDataSucceeded):
131         (MediaSourceLoader.prototype.loadMediaDataFailed):
132         (MediaSourceLoader.prototype.get type):
133         (MediaSourceLoader.prototype.get duration):
134         (MediaSourceLoader.prototype.get initSegment):
135         (MediaSourceLoader.prototype.get mediaSegmentsLength):
136         (MediaSourceLoader.prototype.mediaSegments):
137         (MediaSourceLoader.prototype.get everyMediaSegment):
138         * Media/test-fragmented-video.json: Added.
139         * Media/test-fragmented-video.mp4: Added.
140         * Media/test.mp4: Added.
141         * Skipped:
142
143 2016-11-18  Filip Pizlo  <fpizlo@apple.com>
144
145         Concurrent GC should be able to run splay in debug mode and earley/raytrace in release mode with no perf regression
146         https://bugs.webkit.org/show_bug.cgi?id=164282
147
148         Reviewed by Geoffrey Garen and Oliver Hunt.
149         
150         CDjs is a fun benchmark for stressing concurrent GCs, but to really give the GC a good
151         workout you need to increase the amount of work that the test does. This adds a second
152         configuration of the benchmark that has more aircraft. It uses much more memory and causes us
153         to do more GCs and those GCs take longer.
154
155         * JetStream/cdjs/benchmark.js:
156         (benchmarkImpl):
157         (benchmark):
158         * JetStream/cdjs/large.js: Added.
159
160 2016-11-14  Filip Pizlo  <fpizlo@apple.com>
161
162         Unreviewed, revert unintended change.
163
164         * ES6SampleBench/Air/benchmark.js:
165
166 2016-10-03  Saam Barati  <sbarati@apple.com>
167
168         MapHash should speculate on the type of its child node
169         https://bugs.webkit.org/show_bug.cgi?id=161922
170
171         Reviewed by Filip Pizlo.
172
173         I gave the main generator a name so it's easier to see what
174         it is when using the sampling profiler.
175
176         * ES6SampleBench/Basic/ast.js:
177         (Basic.Program):
178
179 2016-09-19  Sergio Villar Senin  <svillar@igalia.com>
180
181         [css-grid] Remove the x2 computation of row sizes with indefinite heights
182         https://bugs.webkit.org/show_bug.cgi?id=162150
183
184         Reviewed by Darin Adler.
185
186         Added a new test case which checks the layout performance of grids inside other grids, i.e,
187         grids acting both as grid container and grid item.
188
189         * Layout/nested-grid.html: Added.
190
191 2016-09-09  Simon Fraser  <simon.fraser@apple.com>
192
193         Perf test Animation/css-accelerated-animation.html failing
194         https://bugs.webkit.org/show_bug.cgi?id=161795
195
196         Skip Animation/css-accelerated-animation.html since this only works as a MobileSafari
197         perf test.
198
199         * Skipped:
200
201 2016-09-08  Simon Fraser  <simon.fraser@apple.com>
202
203         Add a content-animation test with accelerated CSS animations
204         https://bugs.webkit.org/show_bug.cgi?id=161776
205
206         Reviewed by Dean Jackson.
207
208         Add a test that measures the frame rate of accelerated CSS animations.
209
210         This is like css-animation.html (which animates 'left' and 'top') but animates
211         transforms instead. In order to get animation in X and Y we make two nested elements
212         and set transformX() on one, and transformY() on the other.
213
214         * Animation/css-accelerated-animation.html: Added.
215
216 2016-08-23  Saam Barati  <sbarati@apple.com>
217
218         It should be easy to run ES6SampleBench from the jsc shell
219         https://bugs.webkit.org/show_bug.cgi?id=161085
220
221         Reviewed by Yusuke Suzuki.
222
223         This patch makes ES6 sample bench runnable through the `jsc` shell.
224         To do that, you need to be in the PerformanceTests/ES6SampleBench
225         directory and run `jsc cli.js`. To make this work, the benchmark
226         is now aware of being run in two modes: via the browser, and via
227         the shell. Each entry point will set a variable `isInBrowser`,
228         and the benchmark will do different things based on if that
229         variable is true or false.
230
231         * ES6SampleBench/Air/benchmark.js:
232         * ES6SampleBench/Air/stress-test.js:
233         * ES6SampleBench/Basic/benchmark.js:
234         (runBenchmark):
235         * ES6SampleBench/Basic/stress-test.js:
236         * ES6SampleBench/air_benchmark.js:
237         * ES6SampleBench/basic_benchmark.js:
238         * ES6SampleBench/cli.js: Added.
239         (return.doRun):
240         (makeBenchmarkRunner):
241         * ES6SampleBench/driver.js:
242         (Driver):
243         (Driver.prototype._recomputeSummary):
244         (Driver.prototype._iterate.window.setTimeout):
245         (Driver.prototype._iterate):
246         (Driver.prototype._updateIterations):
247         * ES6SampleBench/glue.js:
248         (reportResult):
249         * ES6SampleBench/index.html:
250         * ES6SampleBench/results.js:
251         (Results):
252         (Results.prototype.reportRunning):
253         (Results.prototype.reportDone):
254         (Results.prototype.reportError):
255         * ES6SampleBench/stats.js:
256         (Stats):
257         (Stats.prototype.toString):
258         (Stats.prototype._update):
259
260 2016-08-01  Said Abou-Hallawa  <sabouhallawa@apple.com>
261
262         Add an option to run the MotionMark tests with classic tile size (512x512)
263         https://bugs.webkit.org/show_bug.cgi?id=160371
264
265         Reviewed by Darin Adler.
266
267         Setting the body to large size (3000x3000) and overflow to scroll forces
268         the classic tile size (512x512). This option does not affect the canvas
269         tests because the canvas is displayed on one tile regardless of its size.
270
271         * Animometer/developer.html:
272         * Animometer/resources/debug-runner/animometer.css:
273         (body.showing-test-container.tiles-big):
274         (body.showing-test-container.tiles-classic):
275         * Animometer/resources/debug-runner/animometer.js:
276         * Animometer/resources/runner/animometer.js:
277         (window.benchmarkController.startBenchmark):
278
279 2016-06-29  Filip Pizlo  <fpizlo@apple.com>
280
281         Generators violate bytecode liveness validation
282         https://bugs.webkit.org/show_bug.cgi?id=159279
283
284         Reviewed by Yusuke Suzuki.
285
286         Add Basic to our test harness.
287
288         Also made some cosmetic changes to the benchmark harness.
289
290         * ES6SampleBench/Basic/basic-tests.yaml: Added.
291         * ES6SampleBench/Basic/stress-test.js: Added.
292         (preciseTime):
293         * ES6SampleBench/driver.js:
294         (Driver):
295         (Driver.prototype.start):
296         (Driver.prototype.reportError):
297         * ES6SampleBench/glue.js:
298         * ES6SampleBench/index.html:
299
300 2016-06-28  Filip Pizlo  <fpizlo@apple.com>
301
302         ES6SampleBench should have a harness
303         https://bugs.webkit.org/show_bug.cgi?id=159246
304
305         Reviewed by Saam Barati.
306         
307         This adds a simple web harness for ES6SampleBench. It runs Air and Basic 10 times for 200
308         iterations each and reports three metrics:
309         
310         First iteration: the time it takes for the first iteration to run. This is the first
311         iteration after the benchmark is loaded into the iframe, so it's representative of what
312         would happen if one of these workloads only ran for a short time.
313         
314         Worst 2%: of the last 199 iterations, the average of the worst 2% iterations. If code like
315         any of these workloads was used in an important event handler, you'd want that code to run
316         well in the worst case in addition to having great throughput.
317         
318         Steady state: the total of the last 199 iterations. This is representative of what would
319         happen if you ran code like this for a long time.
320         
321         The total score is the geomean of the firstIteration/worstCase/steadyState numbers of the
322         two benchmarks.
323         
324         The harness does statistics using Student's T-distribution confidence intervals.
325
326         * ES6SampleBench/Basic/benchmark.js:
327         (Benchmark):
328         * ES6SampleBench/air_benchmark.js: Added.
329         * ES6SampleBench/basic_benchmark.js: Added.
330         * ES6SampleBench/driver.js: Added.
331         (Driver):
332         (Driver.prototype.addBenchmark):
333         (Driver.prototype.start):
334         (Driver.prototype.reportResult):
335         (Driver.prototype.reportError):
336         (Driver.prototype._recomputeSummary.Geomean):
337         (Driver.prototype._recomputeSummary.Geomean.prototype.add):
338         (Driver.prototype._recomputeSummary.Geomean.prototype.get result):
339         (Driver.prototype._recomputeSummary):
340         (Driver.prototype._iterate):
341         (Driver.prototype._updateIterations):
342         * ES6SampleBench/glue.js: Added.
343         * ES6SampleBench/index.html: Added.
344         * ES6SampleBench/results.js: Added.
345         (Results):
346         (Results.prototype.get benchmark):
347         (Results.prototype.reset):
348         (Results.prototype.reportRunning):
349         (Results.prototype.reportDone):
350         (Results.prototype.reportResult.averageAbovePercentile):
351         (Results.prototype.reportResult):
352         (Results.prototype.reportError):
353         * ES6SampleBench/stats.js: Added.
354         (Stats):
355         (Stats.prototype.reset):
356         (Stats.prototype.add):
357         (Stats.prototype.get numIterations):
358         (Stats.prototype.valueForIteration):
359         (Stats.get result.tDist):
360         (Stats.prototype.get result):
361         (Stats.prototype.toString):
362         (Stats.prototype._update):
363         * ES6SampleBench/style.css: Added.
364         (body):
365         (body, th, tr):
366         (h1, h2, h3, h4):
367         (h1):
368         (h2):
369         (h3):
370         (hr):
371         (address):
372         (img):
373         (.underline):
374         (ol.loweralpha):
375         (ol.upperalpha):
376         (ol.lowerroman):
377         (ol.upperroman):
378         (ol.arabic):
379         (.banner-link:link, .banner-link:visited):
380         (:link, :visited):
381         (h4 :link, h4 :visited, h5 :link, h5 :visited, h6 :link, h6 :visited):
382         (.anchor:link, .anchor:visited):
383         (* > .anchor:link, * > .anchor:visited):
384         (span:hover .anchor):
385         (a.forbidden, span.forbidden):
386         (a.missing:hover):
387         (a.closed:link, a.closed:visited, span.closed):
388         (pre):
389         (div.code):
390         (div.code pre):
391         (dt):
392         (dd):
393         (dd:last-child):
394         (.site-logo):
395         (.site-logo .tagline):
396         (table):
397         (#contents):
398         (p):
399         (p:last-child):
400         (th):
401         (td):
402
403 2016-06-28  Jon Lee  <jonlee@apple.com>
404
405         Update focus test
406         https://bugs.webkit.org/show_bug.cgi?id=159242
407         rdar://problem/27070007
408
409         Reviewed by Dean Jackson.
410         Provisionally reviewed by Said Abou-Hallawa.
411
412         Move previous test to dom suite, and update the test for better reporting of frame rate, although
413         it uses a different rendering path.
414
415         * Animometer/resources/debug-runner/tests.js: Add to dom suite.
416         * Animometer/tests/dom/focus.html: Copied from PerformanceTests/Animometer/tests/master/focus.html.
417         * Animometer/tests/dom/resources/focus.js: Copied from PerformanceTests/Animometer/tests/master/resources/focus.js.
418         * Animometer/tests/master/focus.html: Remove center element.
419         * Animometer/tests/master/resources/focus.js: Use narrower size range with smaller particles. Remove the
420         container elements. Inline getBlurValue and getOpacityValue since they are only called once.
421
422 2016-06-28  Filip Pizlo  <fpizlo@apple.com>
423
424         Move Air.js and Basic into ES6SampleBench
425
426         Rubber stamped by Geoffrey Garen.
427         
428         We want to group our ES6 benchmarks together, and eventually, we want to give them a
429         common harness.
430
431         * Air.js: Removed.
432         * Air.js/README.md: Removed.
433         * Air.js/airjs-tests.yaml: Removed.
434         * Air.js/all.js: Removed.
435         * Air.js/allocate_stack.js: Removed.
436         * Air.js/arg.js: Removed.
437         * Air.js/basic_block.js: Removed.
438         * Air.js/benchmark.js: Removed.
439         * Air.js/code.js: Removed.
440         * Air.js/custom.js: Removed.
441         * Air.js/frequented_block.js: Removed.
442         * Air.js/insertion_set.js: Removed.
443         * Air.js/inst.js: Removed.
444         * Air.js/liveness.js: Removed.
445         * Air.js/make_dist.sh: Removed.
446         * Air.js/opcode.js: Removed.
447         * Air.js/payload-airjs-ACLj8C.js: Removed.
448         * Air.js/payload-gbemu-executeIteration.js: Removed.
449         * Air.js/payload-imaging-gaussian-blur-gaussianBlur.js: Removed.
450         * Air.js/payload-typescript-scanIdentifier.js: Removed.
451         * Air.js/reg.js: Removed.
452         * Air.js/stack_slot.js: Removed.
453         * Air.js/stress-test.js: Removed.
454         * Air.js/strip-hash.rb: Removed.
455         * Air.js/symbols.js: Removed.
456         * Air.js/test.html: Removed.
457         * Air.js/test.js: Removed.
458         * Air.js/tmp.js: Removed.
459         * Air.js/tmp_base.js: Removed.
460         * Air.js/util.js: Removed.
461         * Basic: Removed.
462         * Basic/ast.js: Removed.
463         * Basic/basic.js: Removed.
464         * Basic/benchmark.js: Removed.
465         * Basic/caseless_map.js: Removed.
466         * Basic/lexer.js: Removed.
467         * Basic/number.js: Removed.
468         * Basic/parser.js: Removed.
469         * Basic/random.js: Removed.
470         * Basic/state.js: Removed.
471         * Basic/test.html: Removed.
472         * Basic/test.js: Removed.
473         * Basic/util.js: Removed.
474         * ES6SampleBench: Added.
475         * ES6SampleBench/Air: Copied from PerformanceTests/Air.js.
476         * ES6SampleBench/Basic: Copied from PerformanceTests/Basic.
477         * Skipped:
478
479 2016-06-24  Filip Pizlo  <fpizlo@apple.com>
480
481         Add a ES6 generator benchmark
482         https://bugs.webkit.org/show_bug.cgi?id=159101
483
484         Rubber stamped by Keith Miller.
485         
486         This adds a Basic interpreter loosely based on ECMA-55:
487         
488         http://www.ecma-international.org/publications/files/ECMA-ST-WITHDRAWN/ECMA-55,%201st%20Edition,%20January%201978.pdf
489         
490         It includes a lexer that is a generator, a parser that uses regular expressions, and an AST
491         walk interpreter where the walking functions for statements are generators that call each
492         other with yield*. This enables the interpreter to look like an AST walk even though it can
493         yield at INPUT and PRINT statements.
494         
495         This also uses for-of, classes, Map, and WeakMap. It also uses deprecated-but-awesome RegExp
496         features like RegExp.lastMatch and RegExp.rightContext. I did it that way because this is
497         how I've always written lexers in dynamic languages; see offlineasm's lex() method in
498         parser.rb for example.
499         
500         The benchmark runs a handful of simple Basic programs. The longest-running one computes
501         prime numbers.
502         
503         Includes a command-line and web harness. On my machine it runs in 2-3 seconds.
504
505         * Basic: Added.
506         * Basic/ast.js: Added.
507         (Basic.NumberApply):
508         (Basic.Variable):
509         (Basic.Const):
510         (Basic.NumberPow):
511         (Basic.NumberMul):
512         (Basic.NumberDiv):
513         (Basic.NumberNeg):
514         (Basic.NumberAdd):
515         (Basic.NumberSub):
516         (Basic.StringVar):
517         (Basic.Equals):
518         (Basic.NotEquals):
519         (Basic.LessThan):
520         (Basic.GreaterThan):
521         (Basic.LessEqual):
522         (Basic.GreaterEqual):
523         (Basic.GoTo):
524         (Basic.GoSub):
525         (Basic.Def):
526         (Basic.Let):
527         (Basic.If):
528         (Basic.Return):
529         (Basic.Stop):
530         (Basic.On):
531         (sideState.shouldStop):
532         (Basic.For):
533         (Basic.Next):
534         (Basic.Print):
535         (Basic.Input):
536         (Basic.Read):
537         (Basic.Restore):
538         (Basic.Dim):
539         (Basic.Randomize):
540         (Basic.End):
541         (Basic.Program):
542         * Basic/basic.js: Added.
543         (prepare):
544         (simulate):
545         * Basic/benchmark.js: Added.
546         (Benchmark):
547         (Benchmark.prototype.runIteration.expect):
548         (Benchmark.prototype.runIteration):
549         (runBenchmark):
550         * Basic/caseless_map.js: Added.
551         (CaselessMap):
552         * Basic/lexer.js: Added.
553         (lex.consumeWhitespace):
554         (lex.consume):
555         (lex):
556         * Basic/lexer_test.js: Added.
557         * Basic/number.js: Added.
558         (NumberValue):
559         (NumberValue.prototype.get value):
560         (NumberValue.prototype.apply):
561         (NumberValue.prototype.leftApply):
562         (NumberValue.prototype.assign):
563         (NumberArray.):
564         (NumberArray):
565         (NumberArray.prototype.apply):
566         (NumberArray.prototype.leftApply):
567         (NumberFunction):
568         (NumberFunction.prototype.apply):
569         (NumberFunction.prototype.leftApply):
570         (NativeFunction):
571         (NativeFunction.prototype.apply):
572         (NativeFunction.prototype.leftApply):
573         * Basic/parser.js: Added.
574         (parse):
575         (parse.pushToken):
576         (parse.peekToken):
577         (parse.consumeKind):
578         (parse.consumeToken):
579         (parse.parseVariable):
580         (parse.parseNumericExpression.parsePrimary):
581         (parse.parseNumericExpression.parseFactor):
582         (parse.parseNumericExpression.parseTerm):
583         (parse.parseNumericExpression):
584         (parse.parseConstant):
585         (parse.parseStringExpression):
586         (parse.isStringExpression):
587         (parse.parseRelationalExpression):
588         (parse.parseNonNegativeInteger):
589         (parse.parseGoToStatement):
590         (parse.parseGoSubStatement):
591         (parse.parseStatement):
592         (parse.parseStatements):
593         * Basic/random.js: Added.
594         (createRNG):
595         (createRNGWithFixedSeed):
596         (createRNGWithRandomSeed):
597         * Basic/state.js: Added.
598         (State):
599         (State.prototype.getValue):
600         (State.prototype.getSideState):
601         (State.prototype.abort):
602         (State.prototype.validate):
603         * Basic/test.html: Added.
604         * Basic/test.js: Added.
605         * Basic/util.js: Added.
606         (this.performance.performance.now.currentTime):
607         (else.this.preciseTime.currentTime):
608         (else.currentTime):
609         * Skipped: Make sure that we don't run Basic yet.
610
611 2016-06-21  Jon Lee  <jonlee@apple.com>
612
613         Update canvas size when benchmark begins
614         https://bugs.webkit.org/show_bug.cgi?id=159010
615
616         Reviewed by Dean Jackson.
617
618         Previously we would evaluate the media queries and assign the canvas size to the test
619         on body.onload. Instead, do it once the user starts the benchmark.
620
621         * Animometer/resources/debug-runner/animometer.js: Move benchmarkController.determineCanvasSize()
622         to benchmarkController._startBenchmark.
623         * Animometer/resources/runner/animometer.js: Ditto.
624
625 2016-06-21  Jon Lee  <jonlee@apple.com>
626
627         Add new timestamp option
628         https://bugs.webkit.org/show_bug.cgi?id=159006
629
630         Reviewed by Dean Jackson.
631
632         Add a new option to take timestamps from the rAF callback.
633
634         * Animometer/developer.html: Added option.
635         * Animometer/tests/resources/main.js:
636         (Benchmark): Fall back to using the rAF timestamp if performance.now()
637         is not available.
638         (Benchmark._animateLoop): Update how timestamp is set. Prefer to use
639         local var instead of accessing private var.
640
641 2016-06-21  Jon Lee  <jonlee@apple.com>
642
643         Improvements to Animometer benchmark
644         https://bugs.webkit.org/show_bug.cgi?id=157738
645
646         Reviewed by Dean Jackson.
647         Provisionally reviewed by Said Abou-Hallawa.
648
649         Update tests.
650
651         * Animometer/tests/master/text.html: Ensure only three text sizes for
652         the three canvases.
653         * Animometer/tests/master/focus.html: Reduce the text size to fit with smaller
654         particle sizes.
655         * Animometer/tests/master/resources/focus.js: Remove the quadratic distribution for
656         particle sizes, and make it linear. Reduce the size variance. Shuffle the math to
657         reduce some calculations per frame. Fix the placement of the particles which might
658         otherwise be culled.
659         * Animometer/tests/master/resources/image-data.js: Reduce the particle size
660         to encourage larger scores.
661
662 2016-06-21  Jon Lee  <jonlee@apple.com>
663
664         Improvements to Animometer benchmark
665         https://bugs.webkit.org/show_bug.cgi?id=157738
666
667         Reviewed by Dean Jackson.
668         Provisionally reviewed by Said Abou-Hallawa.
669
670         Include confidence interval for the final score, and store the canvas
671         size in the serialization so that it is accurately shown in results.
672
673         * Animometer/developer.html: Add a "confidence" div.
674         * Animometer/index.html: Ditto. Convert "mean" to "confidence".
675         * Animometer/resources/debug-runner/animometer.js: Look at options, and
676         if the configuration is included, update the body class based on it
677         (similar to what we do when we first load the page). That way, if you
678         drag-and-drop previous results in, that configuration is reflected in
679         the dashboard. Show the full confidence interval.
680
681         * Animometer/resources/debug-runner/animometer.css:
682         * Animometer/resources/debug-runner/animometer.js: Style update.
683         * Animometer/resources/runner/animometer.css:
684
685         * Animometer/resources/runner/animometer.js:
686         (_processData): Propagate the confidence interval values out and calculate
687         the lower and upper bounds. For now, shortcut the aggregate calculation,
688         since we only go through one iteration.
689         (this._processData.calculateScore): Propagate the confidence interval out
690         to be next to the score. Depending on the controller these values are
691         calculated differently.
692         (this._processData._getResultsProperty): Convenience function.
693         (this._processData.get score): Refactor.
694         (this._processData.get scoreLowerBound): Get the aggregate lower bound.
695         (this._processData.get scoreUpperBound): Get the aggregate upper bound.
696         (window.sectionsManager.setSectionScore):
697         (window.benchmarkController._startBenchmark): When the benchmark starts, note
698         the canvas size and add it to options. That way it will be automatically be
699         serialized.
700         (window.benchmarkController.showResults): Include the maximum deviation
701         percentage.
702         * Animometer/resources/runner/lines.svg: Make the background line up with the
703         skew.
704         * Animometer/resources/runner/tests.js:
705         (Headers.details.text): Refactor.
706         * Animometer/resources/statistics.js:
707         (Statistics.largestDeviationPercentage): Convenience function to calculate
708         the deviation percentage on either end and return the largest deviation.
709         * Animometer/resources/strings.js:
710
711         Allow specifying a regression profile to use instead of taking the one
712         with the lowest error.
713
714         Address an issue in the focus test when the regression calculated ends
715         up overestimating the change point, causing a cascade of tougher
716         ramps. The reason behind this is that at max complexity of an initial
717         ramp, the frame length is very high, and it influences the second
718         segment of the piecewise regression strongly, causing it to be very
719         steep. As a result, the first segment, expected to be flat, ends up
720         covering a higher range of complexity. That makes the change point
721         much higher than it should be. To avoid this, we will add a sanity
722         check on the maximum value of the ramp. If the regression's projected
723         value at the maximum complexity of the current ramp is very slow (less
724         than 20 fps), 1) reduce the maximum complexity by 20%, and 2) do not
725         include the regression's change point in the change point estimator.
726         That estimator is used as the midpoint of the next ramp, and including
727         the change point from a poor regression can bake in the error. The
728         controller already knows how to adjust for ramps that are too easy for
729         the system.
730
731         * Animometer/resources/runner/animometer.js:
732         (this._processData.findRegression): Takes a preferred profile and gives that to
733         Regression.
734         (this._processData.calculateScore): With the ramp controller, take the profile
735         of the ramp that was used the most when calculating the ramp's regression. That
736         profile is what is used for the test's score.
737         * Animometer/resources/statistics.js:
738         (Regression.Utilities.createClass): Update to take an options object which can
739         specify a profile to calculate with. Otherwise it will continue to use both and
740         select the one with the lower error.
741         (_calculateRegression): Fix an issue where we claim 0 error if the regression
742         calculation fails due to divide-by-zero. Instead reject that regression calculation
743         by giving it Number.MAX_VALUE.
744         * Animometer/resources/strings.js: New strings for marking a regression as flat
745         or slope.
746         * Animometer/tests/resources/main.js:
747         (RampController): Rename the thresholds for clarity. Add a threshold that, if
748         exceeded, will lower the maximum complexity of the next ramp.
749         (tune): Relax the cdf check to consider whether the interval definitely falls in
750         the desired frame length threshold.
751         (processSamples): Include the profile in the ramp.
752
753         Update ramp controller test. Increase the length of the test to 30 seconds, and extend
754         the interval to 120 ms during sampling. Improve the estimation of the ramp parameters.
755
756         * Animometer/developer.html: Change default to 30 seconds, and don't show the progress bar
757         by default.
758         * Animometer/resources/runner/animometer.js: Change default to 30 seconds.
759         * Animometer/tests/resources/main.js: A number of improvements to the ramp controller, in
760         the order in which they appear in the patch:
761
762         - With a longer test length use longer ramps with longer intervals to get more data at each
763         complexity. Keep the 100 ms interval length during the ramp up phase since we don't need to
764         spend more time there to find the right order of magnitude, but increase it during the
765         ramps to 120 ms.
766         - The ramp linearly interpolates the complexity to render based on its timestamp, but it would
767         never sample the minimum complexity. Instead of lerping max to min complexity from time
768         0 to t where t is the ramp length, instead lerp from 0 to (t - intervalSampleLength) so that
769         we can have at least one interval sample at the min complexity for that ramp.
770         - Some regression calculations only come out with one line segment rather than the two
771         we expect. This could be due to a noisy ramp or the ramp's range is too narrow. If that's the
772         case, influence the minimum complexity of the next ramp towards the lowest bound of 1, so that
773         we ensure that at least part of the ramp is covering a complexity range that the system can
774         handle at full 60.
775         - Remove an assignment to interpolatedFrameLength since that is never subsequently used.
776
777         Update the format used to serialize the results for analysis.
778
779         Each data point used to have named properties for fields like complexity and frame rate.
780         In addition the serialized numbers had rounding errors that took up many characters.
781         Update the format by introducing a new data container called SampleData, which contains a
782         field map. The map maps a string to an array index. Each data point is an array, so, to
783         get a stat, use the field map to get the array index into the data point. This allows future
784         versions to track other data, and reduces the size of the output string by two-thirds.
785
786         * Animometer/resources/extensions.js:
787         (Utilities.toFixedNumber): Add convenience function that truncates the number to a fixed
788         precision, and converts it back to a number.
789         (SampleData): New class that contains sample data and a field map that maps properties to
790         an array index.
791         (get length): Number of data points.
792         (addField): Add a field to the field map.
793         (push): Add a data point.
794         (sort): Sort the data.
795         (slice): Return new SampleData object with sliced data.
796         (forEach): Iterate over the data with provided function.
797         (createDatum):
798         (getFieldInDatum): Returns the data point associated with the field name by looking it up
799         in the field map in the datum provided, which can be the datum object itself (an array) or
800         an index into the data member variable.
801         (setFieldInDatum): Sets the data point associated with the field name.
802         (at): Returns the data point at the provided index.
803         (toArray): Serializes the data where the field map serves as property names for each point.
804
805         * Animometer/resources/debug-runner/graph.js:
806         (updateGraphData): Remove unused _testData. Convert the data to the old array format for the
807         graph to use, since the old format was much easier to work with when displaying the graphs.
808         (onGraphTypeChanged): For some controllers, no alternative score or mean is provided.
809         * Animometer/resources/runner/animometer.css:
810         * Animometer/resources/runner/animometer.js: Refactor to use SampleData. Update JSON output
811         to only go to 3 digits of precision for purposes of reducing the data size.
812         * Animometer/resources/strings.js: Add new strings to put into the field maps.
813         * Animometer/tests/resources/main.js: Refactor to use SampleData.
814
815         * Animometer/developer.html:
816         * Animometer/index.html: Restructure results table for both pages. Add charset attribute to
817         tests.js include.
818         * Animometer/resources/debug-runner/animometer.css: Clear out styles from release runner.
819         * Animometer/resources/debug-runner/graph.js:
820         (onGraphTypeChanged): Update score and mean if bootstrap results are available from the
821         controller, since not all controllers do bootstrapping.
822         * Animometer/resources/debug-runner/tests.js: Update header text.
823         * Animometer/resources/runner/animometer.css: Include confidence interval in results.
824         * Animometer/resources/runner/animometer.js:
825         (ResultsTable._addHeader): Header contents can be HTML, so use innerHTML instead.
826         (ResultsTable._addBody): Add tbody element.
827         (ResultsTable._addTest): Allow a data cell to invoke a JS function to get its contents.
828         (window.benchmarkController.showResults): Add table that includes tests' confidence intervals.
829         * Animometer/resources/runner/tests.js:
830         (Headers.details.text): Add new details table that includes bootstrap confidence interval.
831         The interval can be asymmetric, but for simplicity, report the maximum deviation percentage
832         on either side of the bootstrap median.
833         * Animometer/resources/statistics.js:
834         (bootstrap): Include the confidence percentage in the return object.
835
836         Report canvas size in results.
837
838         * Animometer/developer.html: Add markup to indicate whether a small, medium, or large
839         canvas was used.
840         * Animometer/index.html: Ditto.
841         * Animometer/resources/debug-runner/animometer.js: Call determineCanvasSize().
842         * Animometer/resources/runner/animometer.css: Update styles to set the canvas based on the
843         body class size.
844         * Animometer/resources/runner/animometer.js:
845         (window.benchmarkController.initialize): Update styles to set the canvas based on the
846         body class size.
847         (window.benchmarkController.determineCanvasSize): Run various media queries and set the body
848         class based on the size of the device.
849
850         * Animometer/developer.html: Refactor to include the main CSS file, and redo
851         the layout so that it doesn't rely on flexbox.
852         * Animometer/resources/debug-runner/animometer.css:
853         * Animometer/resources/debug-runner/animometer.js:
854         (updateDisplay): Since various parts of the script alter the body class, we can't
855         replace the className directly. Instead, remove all display-based values and then add
856         the one that was selected.
857         * Animometer/resources/debug-runner/graph.js:
858         (updateGraphData): To set the size of the graph, use window.innerHeight.
859         * Animometer/resources/runner/animometer.js:
860         (window.sectionsManager.showSection): Since various parts of the script alter the body
861         class, we can't replace the className directly. Remove all of the section classes
862         individually and then add the one desired.
863         * Animometer/tests/resources/stage.css: Remove -apple-system as a font to use in the
864         stage.
865
866 2016-06-12  Filip Pizlo  <fpizlo@apple.com>
867
868         Fix round-down goof in Air.js's ShuffleCustom.forEachArg
869         https://bugs.webkit.org/show_bug.cgi?id=158674
870
871         Reviewed by Michael Saboff.
872         
873         x / 3 * 3 is not how you round down to multiples of 3 in JavaScript. You need to do
874         Math.floor(x / 3) * 3 instead.
875         
876         This is a benign change, because having extra arguments to a Shuffle is not something we
877         actually take advantage of yet. But I think it's best to match the original C++ code's
878         intent.
879
880         * Air.js/custom.js:
881         (const.ShuffleCustom.forEachArg):
882
883 2016-06-11  Filip Pizlo  <fpizlo@apple.com>
884
885         Unreviewed, skip Air.js. It got unskipped when I renamed it from JSAir.
886
887         * Skipped:
888
889 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
890
891         Make it easy to package Air.js
892         https://bugs.webkit.org/show_bug.cgi?id=158652
893
894         Reviewed by Benjamin Poulain.
895         
896         If you want to give Air.js to someone, you can now do:
897         
898         cd PerformanceTests/Air.js
899         ./make_dist.sh
900         
901         This will create Air.js.tar.gz and a directory called Air.js. If you want to send someone
902         the benchmark, just send either of those things and tell them to look at index.html.
903         
904         You may have to edit make_dist.sh for wherever you have Markdown.pl. You can get that from
905         https://daringfireball.net/projects/markdown/
906
907         * Air.js/make_dist.sh: Added.
908         * Air.js/test.html:
909
910 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
911
912         Unreviewed, make the link to test.html into an actual link.
913
914         * Air.js/README.md:
915
916 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
917
918         Fix some text in Air.js/README.md
919         https://bugs.webkit.org/show_bug.cgi?id=158650
920
921         Reviewed by Benjamin Poulain.
922         
923         I read the text again and found bugs:
924         
925         - We never actually say how to run the benchmark. This change adds a blurb about how to run
926           it.
927
928         - We both say that allocateStack is responsible for the bulk of the running time and that
929           we haven't measured where the bulk of the time is spent. This changes the text to say that
930           it was a goal to make allocateStack be the hottest part of the benchmark, but that we did
931           not measure this.
932
933         * Air.js/README.md:
934
935 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
936
937         Air.js should have some documentation
938         https://bugs.webkit.org/show_bug.cgi?id=158648
939
940         Reviewed by Keith Miller.
941         
942         I want to be able to point people at a document if they want to know more about this
943         benchmark.
944
945         * Air.js/README.md: Added.
946
947 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
948
949         Rename JSAir to Air.js.
950
951         Rubber stamped by Mark Lam.
952
953         * Air.js: Copied from PerformanceTests/JSAir.
954         * Air.js/airjs-tests.yaml: Copied from PerformanceTests/JSAir/jsair-tests.yaml.
955         * Air.js/benchmark.js: Copied from PerformanceTests/JSAir/benchmark.js.
956         (Benchmark):
957         * Air.js/jsair-tests.yaml: Removed.
958         * Air.js/payload-airjs-ACLj8C.js: Copied from PerformanceTests/JSAir/payload-jsair-ACLj8C.js.
959         * Air.js/payload-jsair-ACLj8C.js: Removed.
960         * Air.js/stress-test.js: Copied from PerformanceTests/JSAir/stress-test.js.
961         * Air.js/test.html: Copied from PerformanceTests/JSAir/test.html.
962         * Air.js/test.js: Copied from PerformanceTests/JSAir/test.js.
963         * JSAir: Removed.
964         * JSAir/all.js: Removed.
965         * JSAir/allocate_stack.js: Removed.
966         * JSAir/arg.js: Removed.
967         * JSAir/basic_block.js: Removed.
968         * JSAir/benchmark.js: Removed.
969         * JSAir/code.js: Removed.
970         * JSAir/custom.js: Removed.
971         * JSAir/frequented_block.js: Removed.
972         * JSAir/insertion_set.js: Removed.
973         * JSAir/inst.js: Removed.
974         * JSAir/jsair-tests.yaml: Removed.
975         * JSAir/liveness.js: Removed.
976         * JSAir/opcode.js: Removed.
977         * JSAir/payload-gbemu-executeIteration.js: Removed.
978         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js: Removed.
979         * JSAir/payload-jsair-ACLj8C.js: Removed.
980         * JSAir/payload-typescript-scanIdentifier.js: Removed.
981         * JSAir/reg.js: Removed.
982         * JSAir/stack_slot.js: Removed.
983         * JSAir/stress-test.js: Removed.
984         * JSAir/strip-hash.rb: Removed.
985         * JSAir/symbols.js: Removed.
986         * JSAir/test.html: Removed.
987         * JSAir/test.js: Removed.
988         * JSAir/tmp.js: Removed.
989         * JSAir/tmp_base.js: Removed.
990         * JSAir/util.js: Removed.
991
992 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
993
994         JSC Stress Test failing: jsair-tests.yaml/test.js.ftl-eager-no-cjit
995         https://bugs.webkit.org/show_bug.cgi?id=158571
996
997         Reviewed by Keith Miller.
998         
999         Introduce a different harness for run-jsc-stress-tests, which runs for a minimum of 10
1000         iterations and then tries to do any number of "bonus" iterations until it's been running for
1001         two seconds. Since this is the sort of test that isn't really meant to stress anything in
1002         particular, I think it's OK if it is time-limited in this way. The worst case is that some
1003         of its failures will be flaky, but I think that they would have been flaky anyway given the
1004         complexity of the test.
1005
1006         * JSAir/benchmark.js:
1007         (Benchmark):
1008         (Benchmark.prototype.runIteration):
1009         (benchmark): Deleted.
1010         * JSAir/jsair-tests.yaml:
1011         * JSAir/stress-test.js: Added.
1012         (preciseTime):
1013         * JSAir/test.html:
1014         * JSAir/test.js:
1015
1016 2016-06-09  Filip Pizlo  <fpizlo@apple.com>
1017
1018         Unreviewed, teach the perf bots not to run JSAir.
1019
1020         * Skipped:
1021
1022 2016-06-08  Filip Pizlo  <fpizlo@apple.com>
1023
1024         Use more ES6 features in JSAir
1025         https://bugs.webkit.org/show_bug.cgi?id=158497
1026
1027         Reviewed by Keith Miller.
1028         
1029         This improves JSAir with the following ES6 features suggested by JoePeck:
1030         
1031         - String interpolation.
1032         - Destructuring inside PatchCustom.
1033         - Default arguments.
1034         
1035         All of these things are on hot paths.
1036         
1037         Note that I didn't use string interpolation everywhere that I could, only in those places
1038         where it made the code more readable. In Ruby, I used the style that if the interpolation
1039         expression has any non-trivial stuff (like a ternary operator, a chain of calls, or embedded
1040         strings) then it's better to use regular strcat. I think that's what I carried over to here.
1041         
1042         Note that the previous change (Add result validation to JSAir) also made the Proxy code not
1043         dead, though it's not necessarily on the hot path. The Proxy isn't called into frequently
1044         but it's used from a function that is otherwise hot, so if calling into the Proxy prevents
1045         that function from being optimized then it will hurt so good.
1046         
1047         I also reenabled tail calls in a few places.
1048         
1049         This change doesn't seem to change the performance of the benchmark for us. That's expected
1050         since these ES6 features are cheap. Note that this claim doesn't include Proxy, which was
1051         added in a separate change and that change did make the benchmark overall more expensive.
1052
1053         * JSAir/allocate_stack.js:
1054         (allocateStack):
1055         * JSAir/arg.js:
1056         (Arg.createBitImm64):
1057         (Arg.createAddr):
1058         (Arg.createStack):
1059         (Arg.logScale):
1060         (Arg.createIndex):
1061         * JSAir/basic_block.js:
1062         (BasicBlock.get headerString):
1063         (BasicBlock.prototype.get if):
1064         (BasicBlock):
1065         * JSAir/benchmark.js:
1066         (benchmark):
1067         * JSAir/code.js:
1068         (Code):
1069         (Code.prototype.addBlock):
1070         (Code.prototype.addStackSlot):
1071         (Code.prototype.newTmp):
1072         (Code.prototype.get size):
1073         (Code.prototype.get blocks):
1074         (Code.prototype.get stackSlots):
1075         (Code.prototype.tmps):
1076         (Code.prototype.get callArgAreaSize):
1077         (Code.prototype.toString):
1078         * JSAir/custom.js:
1079         (const.PatchCustom.forEachArg):
1080         * JSAir/inst.js:
1081         (Inst):
1082         * JSAir/reg.js:
1083         (Reg.prototype.toString):
1084         * JSAir/util.js:
1085         (symbolName):
1086         (lowerSymbolName):
1087
1088 2016-06-07  Filip Pizlo  <fpizlo@apple.com>
1089
1090         Add result validation to JSAir
1091         https://bugs.webkit.org/show_bug.cgi?id=158493
1092
1093         Reviewed by Saam Barati.
1094         
1095         This adds the ability to hash a Code in a way that matches the C++ code's hashing of Code.
1096         This allows us to check if the Code that JSAir sees is the code that C++ saw. We use this to
1097         check the Code before and after allocateStack, and compare against hashes we got from C++.
1098         
1099         Doing this uncovered bugs. roundUpToMultipleOf wasn't doing anything. allocateStack was not
1100         allocating things correctly because I was concatting a Set to an Array, which doesn't really
1101         work. Now these bugs are fixed.
1102         
1103         The checking step adds to the running time so I reduced the number of iterations. The
1104         benchmark spends a decent amount of its time computing Code hashes; I think it's around 1/3
1105         total. This is probably OK. It's better to verify the results even if the running time is
1106         not all in the "core" of the algorithm.
1107         
1108         Also add a run-jsc-stress-tests yaml file to allow this to run as a test.
1109
1110         * JSAir/allocate_stack.js:
1111         * JSAir/arg.js:
1112         (Arg.createImm):
1113         (Arg.createBigImm):
1114         (Arg.createBitImm):
1115         (Arg.createBitImm64):
1116         (Arg.createWidth):
1117         (Arg.createSpecial):
1118         (Arg.prototype.get kind):
1119         (Arg.prototype.get isTmp):
1120         (Arg.prototype.get isImm):
1121         (Arg.prototype.get isSomeImm):
1122         (Arg.prototype.get isSomeBigImm):
1123         (Arg.prototype.get isCondition):
1124         (Arg.prototype.get isWidth):
1125         (Arg.prototype.get isSpecial):
1126         (Arg.prototype.get isAlive):
1127         (Arg.prototype.get tmp):
1128         (Arg.prototype.get value):
1129         (Arg.prototype.get lowValue):
1130         (Arg.prototype.get highValue):
1131         (Arg.prototype.get base):
1132         (Arg.prototype.get isGP):
1133         (Arg.prototype.get isFP):
1134         (Arg.prototype.isValidForm):
1135         (Arg.prototype.get isInvertible):
1136         (Arg.kindCode):
1137         (Arg.prototype.hash):
1138         (Arg.prototype.toString):
1139         (Arg):
1140         * JSAir/basic_block.js:
1141         (BasicBlock.get successorBlocks):
1142         * JSAir/benchmark.js:
1143         (benchmark):
1144         * JSAir/code.js:
1145         (Code.prototype.setFrameSize):
1146         (Code.prototype.hash):
1147         (Code.prototype.toString):
1148         (Code):
1149         * JSAir/inst.js:
1150         (Inst.prototype.get hasNonArgEffects):
1151         (Inst.prototype.hash):
1152         (Inst.prototype.toString):
1153         (Inst):
1154         * JSAir/jsair-tests.yaml: Added.
1155         * JSAir/opcode.js:
1156         (Inst_forEachArg):
1157         (Inst_hasNonArgEffects):
1158         (opcodeCode):
1159         * JSAir/payload-gbemu-executeIteration.js:
1160         (createPayloadGbemuExecuteIteration):
1161         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js:
1162         (createPayloadImagingGaussianBlurGaussianBlur):
1163         * JSAir/payload-jsair-ACLj8C.js:
1164         (createPayloadJSAirACLj8C):
1165         * JSAir/payload-typescript-scanIdentifier.js:
1166         (createPayloadTypescriptScanIdentifier):
1167         * JSAir/reg.js:
1168         (Reg.prototype.get isReg):
1169         (Reg.prototype.hash):
1170         (Reg.prototype.toString):
1171         * JSAir/stack_slot.js:
1172         (StackSlot.prototype.setOffsetFromFP):
1173         (StackSlot.prototype.hash):
1174         (StackSlot.prototype.toString):
1175         * JSAir/symbols.js:
1176         (relCondCode):
1177         (resCondCode):
1178         (doubleCondCode):
1179         * JSAir/test.html:
1180         * JSAir/tmp.js:
1181         (Tmp.prototype.get isReg):
1182         (Tmp.prototype.hash):
1183         (Tmp.prototype.toString):
1184         * JSAir/util.js:
1185         (roundUpToMultipleOf):
1186         (symbolName):
1187
1188 2016-06-07  Filip Pizlo  <fpizlo@apple.com>
1189
1190         Implement Air::allocateStack() in ES6 to see how much of a bad idea that is
1191         https://bugs.webkit.org/show_bug.cgi?id=158318
1192
1193         Reviewed by Saam Barati.
1194         
1195         This adds a new benchmark for us to play with called JSAir. It's a complete ES6
1196         implementation of Air's allocateStack() phase along with all of Air needed to run that
1197         phase. This includes things like stack slots, registers, temporaries, basic blocks,
1198         instructions, and all of the code for iterating over, inspecting, and modifying those
1199         things.
1200         
1201         To make this work, JSC can now dump Air just before allocateStack() in the form of JS code
1202         that creates a Code object that matches exactly what C++ Air saw. This benchmark comprises
1203         four Air IRs:
1204         
1205         - Octane/gbemu's largest function, executeIteration.
1206         - Kraken/imaging-gaussian-blur's largest function in OSR entry mode, gaussuanBlur.
1207         - Octane/typescript's largest function that is actually hot, scanIdentifier.
1208         - JSAir's largest hot function, which is anonymous, so we call it by its hash (ACLj8C).
1209         
1210         This runs in about 2 seconds on my machine in JSC trunk. It includes both a commandline
1211         harness and a web harness. JSAir is almost exactly 100x slower in ES6 in WebKit than the
1212         C++ Air::allocateStack() phase on which it is based.
1213         
1214         JSAir uses the following ES6 features:
1215         
1216         - Symbol.
1217         - for-of.
1218         - arrow functions.
1219         - Map/Set.
1220         - let/const.
1221         - classes.
1222         
1223         All of these things are used in anger and should end up on the hot path. There is also code
1224         that uses Proxies, but it ends up being dead.
1225         
1226         We can improve this even more:
1227         I still need to add result validation: https://bugs.webkit.org/show_bug.cgi?id=158493
1228         I want to make it use more ES6 features: https://bugs.webkit.org/show_bug.cgi?id=158497
1229         
1230         * JSAir: Added.
1231         * JSAir/all.js: Added.
1232         * JSAir/allocate_stack.js: Added.
1233         (allocateStack.attemptAssignment):
1234         (allocateStack.assign):
1235         (allocateStack.interfere):
1236         (allocateStack.):
1237         (allocateStack):
1238         * JSAir/arg.js: Added.
1239         (Arg):
1240         (Arg.isAnyUse):
1241         (Arg.isColdUse):
1242         (Arg.isWarmUse):
1243         (Arg.cooled):
1244         (Arg.isEarlyUse):
1245         (Arg.isLateUse):
1246         (Arg.isAnyDef):
1247         (Arg.isEarlyDef):
1248         (Arg.isLateDef):
1249         (Arg.isZDef):
1250         (Arg.typeForB3Type):
1251         (Arg.widthForB3Type):
1252         (Arg.conservativeWidth):
1253         (Arg.minimumWidth):
1254         (Arg.bytes):
1255         (Arg.widthForBytes):
1256         (Arg.createTmp):
1257         (Arg.fromReg):
1258         (Arg.createImm):
1259         (Arg.createBigImm):
1260         (Arg.createBitImm):
1261         (Arg.createBitImm64):
1262         (Arg.createAddr):
1263         (Arg.createStack):
1264         (Arg.createCallArg):
1265         (Arg.createStackAddr):
1266         (Arg.isValidScale):
1267         (Arg.logScale):
1268         (Arg.createIndex):
1269         (Arg.createRelCond):
1270         (Arg.createResCond):
1271         (Arg.createDoubleCond):
1272         (Arg.createWidth):
1273         (Arg.prototype.get kind):
1274         (Arg.prototype.get isTmp):
1275         (Arg.prototype.get isImm):
1276         (Arg.prototype.get isBigImm):
1277         (Arg.prototype.get isBitImm):
1278         (Arg.prototype.get isBitImm64):
1279         (Arg.prototype.get isSomeImm):
1280         (Arg.prototype.get isAddr):
1281         (Arg.prototype.get isStack):
1282         (Arg.prototype.get isCallArg):
1283         (Arg.prototype.get isIndex):
1284         (Arg.prototype.get isMemory):
1285         (Arg.prototype.get isStackMemory):
1286         (Arg.prototype.get isRelCond):
1287         (Arg.prototype.get isResCond):
1288         (Arg.prototype.get isDoubleCond):
1289         (Arg.prototype.get isCondition):
1290         (Arg.prototype.get isWidth):
1291         (Arg.prototype.get isAlive):
1292         (Arg.prototype.get tmp):
1293         (Arg.prototype.get value):
1294         (Arg.prototype.get base):
1295         (Arg.prototype.get hasOffset):
1296         (Arg.prototype.get offset):
1297         (Arg.prototype.get stackSlot):
1298         (Arg.prototype.get index):
1299         (Arg.prototype.get scale):
1300         (Arg.prototype.get logScale):
1301         (Arg.prototype.get width):
1302         (Arg.prototype.get isGPTmp):
1303         (Arg.prototype.get isFPTmp):
1304         (Arg.prototype.get isGP):
1305         (Arg.prototype.get isFP):
1306         (Arg.prototype.get hasType):
1307         (Arg.prototype.get type):
1308         (Arg.prototype.isType):
1309         (Arg.prototype.isCompatibleType):
1310         (Arg.prototype.get isGPR):
1311         (Arg.prototype.get gpr):
1312         (Arg.prototype.get isFPR):
1313         (Arg.prototype.get fpr):
1314         (Arg.prototype.get isReg):
1315         (Arg.prototype.get reg):
1316         (Arg.isValidImmForm):
1317         (Arg.isValidBitImmForm):
1318         (Arg.isValidBitImm64Form):
1319         (Arg.isValidAddrForm):
1320         (Arg.isValidIndexForm):
1321         (Arg.prototype.isValidForm):
1322         (Arg.prototype.forEachTmpFast):
1323         (Arg.prototype.usesTmp):
1324         (Arg.prototype.forEachTmp):
1325         (Arg.prototype.is):
1326         (Arg.prototype.as):
1327         (Arg.prototype.forEachFast):
1328         (Arg.prototype.forEach):
1329         (Arg.extract):
1330         (Arg.forEachFast):
1331         (Arg.forEach):
1332         (Arg.prototype.get condition):
1333         (Arg.prototype.get isInvertible):
1334         (Arg.prototype.toString):
1335         * JSAir/basic_block.js: Added.
1336         (BasicBlock):
1337         (BasicBlock.prototype.get index):
1338         (BasicBlock.prototype.get size):
1339         (BasicBlock.prototype.Symbol.iterator):
1340         (BasicBlock.prototype.at):
1341         (BasicBlock.get last):
1342         (BasicBlock.get insts):
1343         (BasicBlock.get numSuccessors):
1344         (BasicBlock.get successors):
1345         (BasicBlock.get successorBlocks.):
1346         (BasicBlock.get successorBlocks):
1347         (BasicBlock.set get numPredecessors):
1348         (BasicBlock.get predecessors):
1349         (BasicBlock.get frequency):
1350         (BasicBlock.get headerString):
1351         (BasicBlock.get footerString):
1352         * JSAir/benchmark.js: Added.
1353         (benchmark):
1354         * JSAir/code.js: Added.
1355         (Code):
1356         (Code.prototype.addBlock):
1357         (Code.prototype.addStackSlot):
1358         (Code.prototype.newTmp):
1359         (Code.prototype.get size):
1360         (Code.prototype.at):
1361         (Code.prototype.Symbol.iterator):
1362         (Code.prototype.get blocks):
1363         (Code.prototype.get stackSlots):
1364         (Code.prototype.tmps):
1365         (Code.prototype.get callArgAreaSize):
1366         (Code.prototype.requestCallArgAreaSize):
1367         (Code.prototype.get frameSize):
1368         (Code.prototype.setFrameSize):
1369         (Code.prototype.toString):
1370         * JSAir/custom.js: Added.
1371         (const.ShuffleCustom.forEachArg):
1372         (const.ShuffleCustom.hasNonArgNonControlEffects):
1373         (const.PatchCustom.forEachArg):
1374         (const.PatchCustom.hasNonArgNonControlEffects):
1375         (const.CCallCustom.forEachArg):
1376         (const.CCallCustom.hasNonArgNonControlEffects):
1377         (const.ColdCCallCustom.forEachArg):
1378         (const.ColdCCallCustom.hasNonArgNonControlEffects):
1379         * JSAir/frequented_block.js: Added.
1380         (FrequentedBlock):
1381         (FrequentedBlock.prototype.toString):
1382         * JSAir/insertion_set.js: Added.
1383         (Insertion):
1384         (Insertion.prototype.get index):
1385         (Insertion.prototype.get element):
1386         (Insertion.prototype.lessThan):
1387         (InsertionSet):
1388         (InsertionSet.prototype.appendInsertion):
1389         (InsertionSet.prototype.append):
1390         (InsertionSet.prototype.execute):
1391         * JSAir/inst.js: Added.
1392         (Inst):
1393         (Inst.prototype.append):
1394         (Inst.prototype.clear):
1395         (Inst.prototype.get opcode):
1396         (Inst.prototype.get args):
1397         (Inst.prototype.visitArg):
1398         (Inst.prototype.forEachTmpFast):
1399         (Inst.prototype.forEachArg):
1400         (Inst.prototype.forEachTmp):
1401         (Inst.prototype.forEach):
1402         (Inst.forEachDef):
1403         (Inst.forEachDefWithExtraClobberedRegs):
1404         (Inst.prototype.get hasNonArgEffects):
1405         (Inst.prototype.toString):
1406         * JSAir/liveness.js: Added.
1407         (Liveness):
1408         (Liveness.prototype.get thing):
1409         (Liveness.prototype.get code):
1410         (Liveness.prototype.get liveAtHead):
1411         (Liveness.prototype.get liveAtTail):
1412         (Liveness.prototype.localCalc.LocalCalc):
1413         (Liveness.prototype.localCalc.LocalCalc.prototype.get liveSet):
1414         (Liveness.prototype.localCalc.LocalCalc.prototype.execute):
1415         (Liveness.prototype.localCalc):
1416         * JSAir/opcode.js: Added.
1417         (Inst_forEachArg):
1418         (Inst_hasNonArgEffects):
1419         * JSAir/payload-gbemu-executeIteration.js: Added.
1420         (createPayloadGbemuExecuteIteration):
1421         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js: Added.
1422         (createPayloadImagingGaussianBlurGaussianBlur):
1423         * JSAir/payload-jsair-ACLj8C.js: Added.
1424         (createPayloadJSAirACLj8C):
1425         * JSAir/payload-typescript-scanIdentifier.js: Added.
1426         (createPayloadTypescriptScanIdentifier):
1427         * JSAir/reg.js: Added.
1428         (Reg):
1429         (Reg.fromReg):
1430         (Reg.prototype.get index):
1431         (Reg.prototype.get type):
1432         (Reg.prototype.get name):
1433         (Reg.prototype.get isCalleeSave):
1434         (Reg.prototype.get isReg):
1435         (Reg.prototype.toString):
1436         (Reg.extract):
1437         (Reg.forEachFast):
1438         (Reg.forEach):
1439         (newGPR):
1440         (Reg.gprs.Reg.fprs.Reg.calleeSaveGPRs.Reg.calleeSaveFPRs.Reg.calleeSaves):
1441         * JSAir/stack_slot.js: Added.
1442         (StackSlot):
1443         (StackSlot.prototype.get byteSize):
1444         (StackSlot.prototype.get kind):
1445         (StackSlot.prototype.get isLocked):
1446         (StackSlot.prototype.get isSpill):
1447         (StackSlot.prototype.get index):
1448         (StackSlot.prototype.ensureSize):
1449         (StackSlot.prototype.get alignment):
1450         (StackSlot.prototype.get offsetFromFP):
1451         (StackSlot.prototype.setOffsetFromFP):
1452         (StackSlot.prototype.toString):
1453         (StackSlot.extract):
1454         (StackSlot.forEachFast):
1455         (StackSlot.forEach):
1456         * JSAir/symbols.js: Added.
1457         * JSAir/test.html: Added.
1458         * JSAir/test.js: Added.
1459         * JSAir/tmp.js: Added.
1460         (Tmp):
1461         (Tmp.fromReg):
1462         (Tmp.prototype.get index):
1463         (Tmp.prototype.get type):
1464         (Tmp.prototype.get isReg):
1465         (Tmp.prototype.toString):
1466         (Tmp.extract):
1467         (Tmp.forEachFast):
1468         (Tmp.forEach):
1469         * JSAir/tmp_base.js: Added.
1470         (TmpBase.prototype.get isGP):
1471         (TmpBase.prototype.get isFP):
1472         (TmpBase.prototype.get isGPR):
1473         (TmpBase.prototype.get isFPR):
1474         (TmpBase.prototype.get reg):
1475         (TmpBase.prototype.get gpr):
1476         (TmpBase.prototype.get fpr):
1477         (TmpBase):
1478         * JSAir/util.js: Added.
1479         (isRepresentableAsInt32):
1480         (addIndexed):
1481         (roundUpToMultipleOf):
1482         (symbolName):
1483         (mergeIntoSet):
1484         (nonEmptyRangesOverlap):
1485         (rangesOverlap):
1486         (removeAllMatching):
1487         (swap):
1488         (bubble):
1489         (bubbleSort):
1490         (currentTime):
1491         (else.currentTime):
1492
1493 2016-05-26  Yusuke Suzuki  <utatane.tea@gmail.com>
1494
1495         [JSC] Allow JSBench to use precise time
1496         https://bugs.webkit.org/show_bug.cgi?id=158050
1497
1498         Reviewed by Geoffrey Garen.
1499
1500         * JSBench/amazon-chrome-win/urem.js:
1501         (else.window.performance.window.performance.now.currentTimeInMS):
1502         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1503         (else.else.currentTimeInMS):
1504         (onload.cb):
1505         (onload):
1506         * JSBench/amazon-chrome/urem.js:
1507         (else.window.performance.window.performance.now.currentTimeInMS):
1508         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1509         (else.else.currentTimeInMS):
1510         (onload.cb):
1511         (onload):
1512         * JSBench/amazon-firefox-win/urm.js:
1513         (else.window.performance.window.performance.now.currentTimeInMS):
1514         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1515         (else.else.currentTimeInMS):
1516         (onload.cb):
1517         (onload):
1518         * JSBench/amazon-firefox/urm.js:
1519         (else.window.performance.window.performance.now.currentTimeInMS):
1520         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1521         (else.else.currentTimeInMS):
1522         (onload.cb):
1523         (onload):
1524         * JSBench/amazon-safari/urem.js:
1525         (else.window.performance.window.performance.now.currentTimeInMS):
1526         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1527         (else.else.currentTimeInMS):
1528         (onload.cb):
1529         (onload):
1530         * JSBench/facebook-chrome-win/urem.js:
1531         (else.window.performance.window.performance.now.currentTimeInMS):
1532         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1533         (else.else.currentTimeInMS):
1534         (onload.cb):
1535         (onload):
1536         * JSBench/facebook-chrome/urem.js:
1537         (else.window.performance.window.performance.now.currentTimeInMS):
1538         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1539         (else.else.currentTimeInMS):
1540         (onload.cb):
1541         (onload):
1542         * JSBench/facebook-firefox-win/urem.js:
1543         (else.window.performance.window.performance.now.currentTimeInMS):
1544         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1545         (else.else.currentTimeInMS):
1546         (onload.cb):
1547         (onload):
1548         * JSBench/facebook-firefox/urem.js:
1549         (else.window.performance.window.performance.now.currentTimeInMS):
1550         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1551         (else.else.currentTimeInMS):
1552         (onload.cb):
1553         (onload):
1554         * JSBench/facebook-safari/urem.js:
1555         (else.window.performance.window.performance.now.currentTimeInMS):
1556         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1557         (else.else.currentTimeInMS):
1558         (onload.cb):
1559         (onload):
1560         * JSBench/google-chrome-win/urem.js:
1561         (else.window.performance.window.performance.now.currentTimeInMS):
1562         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1563         (else.else.currentTimeInMS):
1564         (onload.cb):
1565         (onload):
1566         * JSBench/google-chrome/urem.js:
1567         (else.window.performance.window.performance.now.currentTimeInMS):
1568         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1569         (else.else.currentTimeInMS):
1570         (onload.cb):
1571         (onload):
1572         * JSBench/google-firefox-win/urem.js:
1573         (else.window.performance.window.performance.now.currentTimeInMS):
1574         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1575         (else.else.currentTimeInMS):
1576         (onload.cb):
1577         (onload):
1578         * JSBench/google-firefox/uem.js:
1579         (else.window.performance.window.performance.now.currentTimeInMS):
1580         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1581         (else.else.currentTimeInMS):
1582         (onload.cb):
1583         (onload):
1584         * JSBench/google-safari/urem.js:
1585         (else.window.performance.window.performance.now.currentTimeInMS):
1586         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1587         (else.else.currentTimeInMS):
1588         (onload.cb):
1589         (onload):
1590         * JSBench/harness.js:
1591         (runBenchmark.window.currentTimeInMS):
1592         (runBenchmark.else.window.currentTimeInMS):
1593         * JSBench/twitter-chrome-win/rem.js:
1594         (else.window.performance.window.performance.now.currentTimeInMS):
1595         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1596         (else.else.currentTimeInMS):
1597         (onload.cb):
1598         (onload):
1599         * JSBench/twitter-chrome/urem.js:
1600         (else.window.performance.window.performance.now.currentTimeInMS):
1601         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1602         (else.else.currentTimeInMS):
1603         (onload.cb):
1604         (onload):
1605         * JSBench/twitter-firefox-win/urem.js:
1606         (else.window.performance.window.performance.now.currentTimeInMS):
1607         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1608         (else.else.currentTimeInMS):
1609         (onload.cb):
1610         (onload):
1611         * JSBench/twitter-firefox/urem.js:
1612         (else.window.performance.window.performance.now.currentTimeInMS):
1613         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1614         (else.else.currentTimeInMS):
1615         (onload.cb):
1616         (onload):
1617         * JSBench/twitter-safari/urem.js:
1618         (else.window.performance.window.performance.now.currentTimeInMS):
1619         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1620         (else.else.currentTimeInMS):
1621         (onload.cb):
1622         (onload):
1623         * JSBench/yahoo-chrome-win/urem.js:
1624         (else.window.performance.window.performance.now.currentTimeInMS):
1625         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1626         (else.else.currentTimeInMS):
1627         (onload.cb):
1628         (onload):
1629         * JSBench/yahoo-chrome/urem.js:
1630         (else.window.performance.window.performance.now.currentTimeInMS):
1631         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1632         (else.else.currentTimeInMS):
1633         (onload.cb):
1634         (onload):
1635         * JSBench/yahoo-firefox-win/urem.js:
1636         (else.window.performance.window.performance.now.currentTimeInMS):
1637         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1638         (else.else.currentTimeInMS):
1639         (onload.cb):
1640         (onload):
1641         * JSBench/yahoo-firefox/urem.js:
1642         (else.window.performance.window.performance.now.currentTimeInMS):
1643         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1644         (else.else.currentTimeInMS):
1645         (onload.cb):
1646         (onload):
1647         * JSBench/yahoo-safari/urem.js:
1648         (else.window.performance.window.performance.now.currentTimeInMS):
1649         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1650         (else.else.currentTimeInMS):
1651         (onload.cb):
1652         (onload):
1653
1654 2016-05-25  Geoffrey Garen  <ggaren@apple.com>
1655
1656         replaceable own properties seem to ignore replacement after property caching
1657         https://bugs.webkit.org/show_bug.cgi?id=158091
1658
1659         Reviewed by Darin Adler.
1660
1661         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
1662         * MallocBench/MallocBench/Benchmark.cpp:
1663         * MallocBench/MallocBench/Interpreter.cpp:
1664         (Interpreter::doMallocOp):
1665         * MallocBench/MallocBench/Interpreter.h:
1666         * MallocBench/MallocBench/fastMallocLog.63316.ops: Added.
1667         * MallocBench/MallocBench/jetstream.cpp: Added.
1668         (benchmark_jetstream):
1669         * MallocBench/MallocBench/jetstream.h: Added.
1670
1671 2016-05-25  Keith Miller  <keith_miller@apple.com>
1672
1673         Unreviewed, add JSBench to the skipped list for now since it doesn't
1674         work currently.
1675
1676         * Skipped:
1677
1678 2016-05-17  Keith Miller  <keith_miller@apple.com>
1679         We should have JSBench in PerformanceTests
1680         https://bugs.webkit.org/show_bug.cgi?id=157952
1681
1682         Rubber-stamped by Saam Barati.
1683
1684         There are some slight changes to the layout of the test directory
1685         to make it work nicely with run-jsc-benchmarks. Before JSBench
1686         had each of the browser specific sub-tests in a sub-directory.
1687         These have been flattened e.g. amazon/safari/ has become
1688         amazon-safari/.
1689
1690         * JSBench/amazon-chrome-win/urem.html: Added.
1691         * JSBench/amazon-chrome-win/urem.js: Added.
1692         * JSBench/amazon-chrome/urem.html: Added.
1693         * JSBench/amazon-chrome/urem.js: Added.
1694         * JSBench/amazon-firefox-win/urm.html: Added.
1695         * JSBench/amazon-firefox-win/urm.js: Added.
1696         * JSBench/amazon-firefox/urm.html: Added.
1697         * JSBench/amazon-firefox/urm.js: Added.
1698         * JSBench/amazon-safari/urem.html: Added.
1699         * JSBench/amazon-safari/urem.js: Added.
1700         * JSBench/browsercheck.js: Added.
1701         * JSBench/facebook-chrome-win/urem.html: Added.
1702         * JSBench/facebook-chrome-win/urem.js: Added.
1703         * JSBench/facebook-chrome/urem.html: Added.
1704         * JSBench/facebook-chrome/urem.js: Added.
1705         * JSBench/facebook-firefox-win/urem.html: Added.
1706         * JSBench/facebook-firefox-win/urem.js: Added.
1707         * JSBench/facebook-firefox/urem.html: Added.
1708         * JSBench/facebook-firefox/urem.js: Added.
1709         * JSBench/facebook-safari/urem.html: Added.
1710         * JSBench/facebook-safari/urem.js: Added.
1711         * JSBench/google-chrome-win/urem.html: Added.
1712         * JSBench/google-chrome-win/urem.js: Added.
1713         * JSBench/google-chrome/urem.html: Added.
1714         * JSBench/google-chrome/urem.js: Added.
1715         * JSBench/google-firefox-win/urem.html: Added.
1716         * JSBench/google-firefox-win/urem.js: Added.
1717         * JSBench/google-firefox/uem.html: Added.
1718         * JSBench/google-firefox/uem.js: Added.
1719         * JSBench/google-safari/urem.html: Added.
1720         * JSBench/google-safari/urem.js: Added.
1721         * JSBench/harness.html: Added.
1722         * JSBench/harness.js: Added.
1723         * JSBench/harness.py: Added.
1724         * JSBench/index.html: Added.
1725         * JSBench/reload.html: Added.
1726         * JSBench/twitter-chrome-win/rem.html: Added.
1727         * JSBench/twitter-chrome-win/rem.js: Added.
1728         * JSBench/twitter-chrome/urem.html: Added.
1729         * JSBench/twitter-chrome/urem.js: Added.
1730         * JSBench/twitter-firefox-win/urem.html: Added.
1731         * JSBench/twitter-firefox-win/urem.js: Added.
1732         * JSBench/twitter-firefox/urem.html: Added.
1733         * JSBench/twitter-firefox/urem.js: Added.
1734         * JSBench/twitter-safari/urem.html: Added.
1735         * JSBench/twitter-safari/urem.js: Added.
1736         * JSBench/yahoo-chrome-win/urem.html: Added.
1737         * JSBench/yahoo-chrome-win/urem.js: Added.
1738         * JSBench/yahoo-chrome/urem.html: Added.
1739         * JSBench/yahoo-chrome/urem.js: Added.
1740         * JSBench/yahoo-firefox-win/urem.html: Added.
1741         * JSBench/yahoo-firefox-win/urem.js: Added.
1742         * JSBench/yahoo-firefox/urem.html: Added.
1743         * JSBench/yahoo-firefox/urem.js: Added.
1744         * JSBench/yahoo-safari/urem.html: Added.
1745         * JSBench/yahoo-safari/urem.js: Added.
1746
1747 2016-05-20  Ryosuke Niwa  <rniwa@webkit.org>
1748
1749         run-benchmark's results should contain Animometer's debug output
1750         https://bugs.webkit.org/show_bug.cgi?id=157941
1751
1752         Reviewed by Stephanie Lewis.
1753
1754         Made developer.html support the JSON generated by run-benchmark which stores everything under debugOutput.
1755
1756         * Animometer/resources/debug-runner/animometer.js:
1757         (Utilities.initialize): Unwrap debugOutput in the case run-benchmark's result JSON is used.
1758
1759 2016-05-18  Timothy Hatcher  <timothy@apple.com>
1760
1761         Make Animometer work in all browsers
1762         https://bugs.webkit.org/show_bug.cgi?id=157855
1763         rdar://problem/26338521
1764
1765         Reviewed by Jon Lee.
1766
1767         * Animometer/resources/runner/logo.svg: Use a symbol instead
1768         of putting the id on the root svg. This works in all browsers.
1769
1770 2016-05-07  Timothy Hatcher  <timothy@apple.com>
1771
1772         Update Animometer design
1773         https://bugs.webkit.org/show_bug.cgi?id=157449
1774
1775         Reviewed by Darin Adler.
1776
1777         * Animometer/developer.html: Stop including runner/animometer.css.
1778         * Animometer/index.html: Udpated elements to fit new styles.
1779
1780         * Animometer/resources/debug-runner/animometer.css:
1781         Copy the old runner/animometer.css to here so the debug runner is unaffected.
1782
1783         * Animometer/resources/runner/animometer.css:
1784         New styles for the design. Drop flex box for broad browser support.
1785
1786         * Animometer/resources/runner/animometer.js:
1787         (ResultsTable.clear): Use textContent.
1788         (window.sectionsManager.showSection): Add class to the body.
1789         (window.sectionsManager.setSectionScore): Use textContent, not innerHTML.
1790
1791         * Animometer/resources/runner/crystal.svg: Added.
1792         * Animometer/resources/runner/lines.svg: Added.
1793         * Animometer/resources/runner/logo.svg: Added.
1794
1795         * Animometer/resources/runner/tests.js: Shorten test name and title case them.
1796
1797 2016-05-06  Manuel Rego Casasnovas  <rego@igalia.com>
1798
1799         [css-grid] Unprefix CSS Grid Layout properties
1800         https://bugs.webkit.org/show_bug.cgi?id=157137
1801
1802         Reviewed by Simon Fraser.
1803
1804         Remove "-webkit" prefix from all the grid layout properties,
1805         including the display value.
1806         Update the source code to remove the prefix where it was used too.
1807
1808         * Layout/auto-grid-lots-of-data.html:
1809         * Layout/fixed-grid-lots-of-data.html:
1810         * Layout/fixed-grid-lots-of-stretched-data.html:
1811
1812 2016-04-25  Geoffrey Garen  <ggaren@apple.com>
1813
1814         bmalloc: Misc improvements to MallocBench
1815         https://bugs.webkit.org/show_bug.cgi?id=157004
1816
1817         Reviewed by Darin Adler.
1818
1819         * MallocBench/run-malloc-benchmarks: Added --memory and --memory_warning
1820         modes for focused memory testing.
1821
1822         * MallocBench/MallocBench/Benchmark.cpp:
1823         (Benchmark::printReport): Clarified output.
1824
1825         (Benchmark::currentMemoryBytes): Added compressed memory because top
1826         does the same. (It always happens to zero in the benchmarks we run. But
1827         this is good for sanity.)
1828
1829         * MallocBench/MallocBench/CommandLine.cpp: Moved up to 8 runs to reduce
1830         variance.
1831
1832         * MallocBench/MallocBench/alloc_free.cpp:
1833         (benchmark_alloc_free): Cycle a single allocation in order to stress
1834         the effect of merging on calls to madvise.
1835
1836         * MallocBench/MallocBench/big.cpp:
1837         (benchmark_big): Graduated to 8kB-128kB because medium tests up to 8 and
1838         our large allocator doesn't kick in until 64kB.
1839
1840         * MallocBench/MallocBench/medium.cpp:
1841         (benchmark_medium): Test all the way down to 1kB because our large
1842         allocator used to service 1kB allocations and 1kB is an interesting
1843         middle size where memory is unusually large but allocation throughput
1844         still matters.
1845
1846         * MallocBench/MallocBench/stress.cpp:
1847         (benchmark_stress): Reduced the churn count to match stress_aligned
1848         because this test was taking too long to complete.
1849
1850         * MallocBench/MallocBench/stress_aligned.cpp:
1851         (benchmark_stress_aligned): Our new large allocator can handle even
1852         more absurdly large values.
1853
1854 2016-04-25  Simon Fraser  <simon.fraser@apple.com>
1855
1856         Add a content animation test that uses SVG animation.
1857         https://bugs.webkit.org/show_bug.cgi?id=156827
1858
1859         * Animation/svg-animation.html: Added.
1860         * Skipped:
1861
1862 2016-04-22  Simon Fraser  <simon.fraser@apple.com>
1863
1864         Skip two content animation tests which are only meant for iOS testing.
1865
1866         * Animation/css-animation.html: Added.
1867         * Animation/raf-animation.html: Added.
1868
1869         * Skipped:
1870
1871 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
1872
1873         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
1874         https://bugs.webkit.org/show_bug.cgi?id=156827
1875
1876         Add two files missing from the previous commit.
1877
1878         * Animation/css-animation.html: Added.
1879         * Animation/raf-animation.html: Added.
1880
1881 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
1882
1883         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
1884         https://bugs.webkit.org/show_bug.cgi?id=156827
1885
1886         Reviewed by Stephanie Lewis.
1887
1888         Two new files for the content-animation suite.
1889
1890         After patching for use in the benchmark, these tests are a little different to other benchmarks.
1891         The test content itself does not collect performance data; the tests spit out a boilerplate JSON
1892         result with a placeholder for framerate, which is collected in native code.
1893
1894         When run as a benchmark, test completion involves a couple of bounces between the test and MobileSafari.
1895         Test completion is initiated by a setTimeout() in the test, at which point location.hash is set to "#done".
1896         MobileSafari detects that, and asynchronously dumps performance data. Once this is complete, MobileSafari
1897         changes the URL has to "#submit", which triggers the XHR to the test relay that indicates the test is
1898         complete.
1899
1900         * Animation/css-animation.html: Added.
1901         * Animation/raf-animation.html: Added.
1902
1903 2016-04-15  Jon Lee  <jonlee@apple.com>
1904
1905         Animometer test could report a NaN
1906         https://bugs.webkit.org/show_bug.cgi?id=156646
1907
1908         Reviewed by Darin Adler.
1909         Provisionally reviewed by Said Abou-Hallawa.
1910
1911         * Animometer/tests/resources/main.js:
1912         (didFinishInterval): The ramp controller has a first phase where it ramps up the complexity and
1913         reacts based on how well the system handles the load. The assumption was that it would handle at least
1914         1 particle easily. That is not always the case. As a result, an interpolation calculation could
1915         end up setting an upper bound of NaN.
1916
1917         This occurs because we never get out of the first tier, so this._lastTierComplexity is undefined.
1918         Now that we guarantee a minimum complexity of 1, modify the conditional to check for this._lastTierComplexity
1919         before interpolating the upper bound of the first ramp. In the case where the system struggles with
1920         1 particle, set it to currentComplexity.
1921
1922 2016-04-09  Jon Lee  <jonlee@apple.com>
1923
1924         Update Animometer to accommodate different screens
1925         https://bugs.webkit.org/show_bug.cgi?id=156449
1926
1927         Reviewed by Darin Adler.
1928         Provisionally reviewed by Said Abou-Hallawa.
1929
1930         * Animometer/index.html: Wrap button in a container to add padding at the bottom.
1931         * Animometer/resources/debug-runner/animometer.css:
1932         (@media screen and (min-device-width: 1800px)): Deleted.
1933         (@media screen and (min-width: 1800px)): Cannot use min-device-width since it may match incorrectly.
1934         (screen and (max-device-height: 414px) and (orientation: landscape)): Some devices swap device width
1935         and height with orientation change.
1936         * Animometer/resources/runner/animometer.css: Similar.
1937         (screen and (min-device-width: 1024px) and (orientation: landscape)):
1938         (screen and (max-device-height: 414px) and (orientation: landscape)):
1939         (.frame-container): On smaller iPhones, adding 1px prevents the navigation bars from appearing.
1940         (@media screen and (min-device-width: 768px) and (max-device-width: 1024px)): Deleted.
1941         (@media (min-device-height: 768px) and (max-device-height: 1024px)): Target iPad Airs and similar.
1942         (@media screen and (min-device-width: 1024px) and (max-device-width: 1366px)): Deleted.
1943         (@media screen and (max-device-width: 1024px) and (min-device-height: 1366px)): Target iPad Pro.
1944         (#results footer): Add padding below the button for testing again.
1945         * Animometer/tests/master/multiply.html: Remove the center text.
1946         * Animometer/tests/master/resources/text.js: Update the test so that in every frame the text moves.
1947         * Animometer/tests/master/text.html: Update the text sizing depending on the size of the device.
1948
1949 2016-04-08  Jon Lee  <jonlee@apple.com>
1950
1951         Have Animometer benchmark always start with complexity of 1
1952         https://bugs.webkit.org/show_bug.cgi?id=156432
1953
1954         Reviewed by Ryosuke Niwa.
1955
1956         * Animometer/tests/resources/main.js: Update the default Controller and RampController to
1957         set its minimum complexities to 1 instead of 0.
1958
1959 2016-04-08  Jon Lee  <jonlee@apple.com>
1960
1961         Fix SVG benchmark test
1962         https://bugs.webkit.org/show_bug.cgi?id=156410
1963
1964         Reviewed by Dean Jackson.
1965
1966         * Animometer/resources/extensions.js: Update Point.zero to be a static Point.
1967         * Animometer/tests/simple/resources/tiled-canvas-image.js:
1968         (Stage.call._setupTiles): Refactor.
1969         * Animometer/tests/master/resources/particles.js:
1970         (Particle.prototype.reset): Use Point.center.
1971         (complexity): We are not using a gradient background anymore, so remove the +1.
1972         * Animometer/tests/master/resources/svg-particles.js: Update to use SVG transform
1973         instead of CSS transform.
1974
1975 2016-04-06  Jon Lee  <jonlee@apple.com>
1976
1977         Update master benchmark with SVG test
1978         https://bugs.webkit.org/show_bug.cgi?id=156273
1979
1980         Reviewed by Dean Jackson.
1981         Provisionally reviewed by Said Abou-Hallawa.
1982
1983         Switch masks tests for SVG path test.
1984
1985         * Animometer/resources/debug-runner/tests.js: Move mask test here.
1986         * Animometer/resources/runner/tests.js: Add SVG test here.
1987         * Animometer/tests/dom/particles.html: Renamed from PerformanceTests/Animometer/tests/master/particles.html.
1988         * Animometer/tests/dom/resources/dom-particles.js: Renamed from PerformanceTests/Animometer/tests/master/resources/dom-particles.js.
1989
1990         * Animometer/tests/master/resources/particles.js: Add minPosition for bounds checking. Prevents particle from being
1991         partially obscured.
1992         * Animometer/tests/master/resources/svg-particles.js: Added.
1993         (Particle): The particle is either a path object or a rect using a path as a clip. The
1994         same path is used either way. For each particle create a linear gradient with a random
1995         rotation.
1996         (SVGParticlesStage): Look in #shapes to see how many different kinds of paths are available.
1997         This makes the test more generic in case other shapes need to be tested.
1998         * Animometer/tests/master/svg-particles.html: Added. Have two defs, one that houses each
1999         particle's gradient, and one that holds the shape templates.
2000
2001 2016-03-27  Hunseop Jeong  <hs85.jeong@samsung.com>
2002
2003         [EFL] REGRESSION(r188793): It made 200 layout tests and Bindings/event-target-wrapper.html performance test fail
2004         https://bugs.webkit.org/show_bug.cgi?id=148470 
2005
2006         Reviewed by Darin Adler.
2007
2008         * Skipped: Unskip the Bindings/event-target-wrapper test.
2009
2010 2016-03-23  Jon Lee  <jonlee@apple.com>
2011
2012         Update focus and leaves tests
2013         https://bugs.webkit.org/show_bug.cgi?id=155825
2014
2015         Reviewed by Simon Fraser.
2016
2017         Particles would improperly disappear, before they were fully off stage. Update the calculation.
2018         * Animometer/tests/dom/resources/leaves.js:
2019         * Animometer/tests/master/resources/leaves.js:
2020
2021         * Animometer/tests/master/focus.html: Update the center element styling.
2022         * Animometer/tests/master/resources/focus.js:
2023         (FocusElement.Utilities.createClass): Give enough space in the container for each particle for the blur
2024         to spread. It should be about 3x more space than the blur radius on each side.
2025         (Stage.call.initialize): Ditto for the center element.
2026
2027 2016-03-23  Jon Lee  <jonlee@apple.com>
2028
2029         Update support for other platforms
2030         https://bugs.webkit.org/show_bug.cgi?id=155824
2031
2032         Reviewed by Simon Fraser.
2033
2034         * Animometer/resources/debug-runner/animometer.css: Remove extraneous media query. All of it should
2035         be handled in the release stylesheet.
2036         * Animometer/resources/debug-runner/animometer.js: Add support for browsers that return an HTMLCollection
2037         when retrieving radio elements with a name, instead of the selected value.
2038         * Animometer/resources/runner/animometer.css: Adjust the queries for devices of varying widths.
2039         (.frame-container): Move overflow:hidden to #stage.
2040         * Animometer/tests/master/resources/stage.css: Consolidate into tests/resources/stage.css.
2041         * Animometer/tests/resources/stage.css:
2042         (body): Remove overflow:hidden.
2043         (#stage): Set overflow:hidden here.
2044         (#center-text): Moved from master/resources/stage.css.
2045
2046         Update stylesheet hrefs.
2047         * Animometer/tests/master/canvas-stage.html:
2048         * Animometer/tests/master/focus.html:
2049         * Animometer/tests/master/leaves.html:
2050         * Animometer/tests/master/multiply.html:
2051         * Animometer/tests/master/particles.html:
2052         * Animometer/tests/master/text.html: Adjust text size to fit in the device screen.
2053
2054 2016-03-23  Jon Lee  <jonlee@apple.com>
2055
2056         Make the benchmark require device to be in landscape orientation
2057         https://bugs.webkit.org/show_bug.cgi?id=155822
2058         rdar://problem/25258650
2059
2060         Reviewed by Ryosuke Niwa.
2061
2062         Check that the device is in landscape orientation. If not, disable the button to start it,
2063         and show a warning message.
2064
2065         * Animometer/developer.html: Add a message about how the browser should be set up. Include a
2066         warning message that appears if the orientation is incorrect on mobile devices.
2067         * Animometer/index.html: Ditto.
2068
2069         * Animometer/resources/debug-runner/animometer.css: Migrate the .hidden rule into the release
2070         stylesheet. Update the style to accommodate the new UI.
2071         * Animometer/resources/runner/animometer.css:
2072
2073         * Animometer/resources/runner/animometer.js:
2074         (window.benchmarkController.initialize): Add the orientation listener is needed.
2075         (window.benchmarkController.addOrientationListenerIfNecessary): Only mobile devices need this. Check
2076         to see for support of window.orientation.
2077         (window.benchmarkController._orientationChanged): Toggle the warning based on whether we match the
2078         landscape query. Set a state variable, which is needed for the debug harness. Call updateStartButtonState.
2079         (window.benchmarkController.updateStartButtonState):
2080         * Animometer/resources/debug-runner/animometer.js: Change _updateStartButtonState to return
2081         a boolean about whether at least one test is selected. That will be used in
2082         benchmarkController.updateStartButtonState(). Move the load event listener to the release version.
2083         (window.benchmarkController.updateStartButtonState): Override the release version, and also check
2084         that at least one test is selected.
2085
2086 2016-03-22  Geoffrey Garen  <ggaren@apple.com>
2087
2088         MallocBench: consolidate regression testing for aligned allocation
2089         https://bugs.webkit.org/show_bug.cgi?id=155762
2090
2091         Reviewed by Michael Saboff.
2092
2093         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2094         * MallocBench/MallocBench/Benchmark.cpp:
2095         * MallocBench/MallocBench/memalign.cpp: Removed.
2096         * MallocBench/MallocBench/memalign.h: Removed. The stress_aligned test
2097         covers this and much more.
2098
2099         * MallocBench/MallocBench/stress_aligned.cpp:
2100         (benchmark_stress_aligned): Include specific tests for extreme sizes
2101         and alignments.
2102
2103 2016-03-21  Jon Lee  <jonlee@apple.com>
2104
2105         Update benchmark tests
2106         https://bugs.webkit.org/show_bug.cgi?id=155723
2107
2108         Reviewed by Darin Adler.
2109         Provisionally reviewed by Said Abou-Hallawa.
2110
2111         Add quadratic and bezier segments to the canvas path test.
2112
2113         * Animometer/resources/runner/tests.js: Some of the query strings are unnecessary.
2114         Rename the test.
2115         * Animometer/tests/master/resources/canvas-stage.js:
2116         (tune): Update to be able to take an array of possible constructors. Choose one randomly.
2117         * Animometer/tests/master/resources/canvas-tests.js:
2118         (CanvasLinePoint.Utilities.createClass): Move the point selection out to a separate
2119         function called randomPoint() for reuse. Move X_LOOPS, Y_LOOPS, and offsets into the
2120         class definition.
2121         (randomPoint): Scale the grid down a little bit so that the lines along the edge of the
2122         canvas are not cut off when the stroke size is thick.
2123         (CanvasQuadraticSegment): Added.
2124         (CanvasBezierSegment): Added.
2125         (SimpleCanvasStage): Pass in an array of the different segment types. Since line segments
2126         are short compared to the curved ones, make it twice as likely to render a line segment.
2127         (SimpleCanvasStage.animate): Update the drawing code so that we render all line segments.
2128
2129         Add a helper method that selects a random element from an array.
2130
2131         * Animometer/tests/resources/main.js:
2132         (Stage.randomElementInArray): Select a random element from the provided array.
2133
2134         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Refactor.
2135         * Animometer/tests/dom/resources/leaves.js: Ditto.
2136         * Animometer/tests/master/resources/dom-particles.js: Ditto.
2137         * Animometer/tests/master/resources/image-data.js: Ditto.
2138         * Animometer/tests/master/resources/leaves.js: Ditto.
2139         * Animometer/tests/simple/resources/simple-canvas-paths.js: Ditto.
2140
2141         Add canvas tests that includes all stroke and fill paths. This makes it possible to avoid having to
2142         include the full simple canvas suite for perf testing.
2143
2144         * Animometer/resources/debug-runner/tests.js: Add new tests. Move the canvas test into the Canvas
2145         suite.
2146         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add a CanvasStroke and CanvasFill particle
2147         that random selects an object to render.
2148
2149         * Animometer/resources/debug-runner/tests.js: Move 3D suite before basic canvas suite.
2150         When updating the perf bot script, we will include the suites up to this one, but exclude
2151         the basic canvas suite.
2152
2153         Move compositing transforms test to HTML suite and remove the empty Miscellaneous suite.
2154
2155         * Animometer/resources/debug-runner/tests.js:
2156         * Animometer/tests/dom/compositing-transforms.html: Renamed from PerformanceTests/Animometer/tests/misc/compositing-transforms.html.
2157         * Animometer/tests/dom/resources/compositing-transforms.js: Renamed from PerformanceTests/Animometer/tests/misc/resources/compositing-transforms.js.
2158
2159         Clean up miscellaneous test suite. Add a canvas ellipse test, and remove the other
2160         canvas tests.
2161
2162         * Animometer/resources/debug-runner/tests.js: Add ellipse tests to the simple suite.
2163         * Animometer/tests/misc/canvas-electrons.html: Removed.
2164         * Animometer/tests/misc/canvas-stars.html: Removed.
2165         * Animometer/tests/misc/resources/canvas-electrons.js: Removed.
2166         * Animometer/tests/misc/resources/canvas-stars.js: Removed.
2167         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add ellipse primitives.
2168
2169         Merge text tests together into one.
2170
2171         * Animometer/resources/runner/tests.js: Remove international.html.
2172         * Animometer/tests/master/international.html: Removed.
2173         * Animometer/tests/master/resources/text.js:
2174         (animate): Update styling. Manually calculate gradients for the shadow particles.
2175         Reduce the step size for y direction to avoid cutting text off at the margins. Increase
2176         step for x since there will be a little more room.
2177         * Animometer/tests/master/text.html: Add more translations and lay it out in a table.
2178
2179 2016-03-20  Jon Lee  <jonlee@apple.com>
2180
2181         Add a link to show debug data
2182         https://bugs.webkit.org/show_bug.cgi?id=155724
2183
2184         Reviewed by Simon Fraser.
2185
2186         * Animometer/developer.html: Attach the onclick handler to the score.
2187         * Animometer/index.html: Ditto.
2188
2189 2016-03-18  Dean Jackson  <dino@apple.com>
2190
2191         Add a basic WebGL test to Animometer
2192         https://bugs.webkit.org/show_bug.cgi?id=155475
2193         <rdar://problem/25156860>
2194
2195         Reviewed by Simon Fraser and Jon Lee.
2196
2197         Add a pretty simple WebGL test to Animometer
2198         which tries to draw a number of animated triangles.
2199         The result still needs a bit of tuning.
2200
2201         * Animometer/resources/debug-runner/tests.js: Add a new
2202         Suite for "3D" tests.
2203         * Animometer/tests/3d/resources/webgl.js: Added.
2204         * Animometer/tests/3d/webgl.html: Added.
2205
2206 2016-03-18  Jon Lee  <jonlee@apple.com>
2207
2208         Add support for statically linking to a specific test
2209         https://bugs.webkit.org/show_bug.cgi?id=155631
2210
2211         Rubber-stamped by Darin Adler.
2212
2213         * Animometer/developer.html: Update to call restartBenchmark instead so that it works for
2214         both the preset and the manually set test sessions.
2215         * Animometer/resources/debug-runner/animometer.css:
2216         (.tree .link): Style the "link" UI.
2217         * Animometer/resources/debug-runner/animometer.js: Move updateDisplay from suitesManager
2218         to optionsManager since this is a visual option and has nothing to do with the suites
2219         settings. Update the construction of the test UI by including a "link" after each test.
2220         Clicking on that link brings up a JS prompt with a URL and a query string with the current
2221         parameters of the controller, and selected test. Pasting this URL into the location bar will
2222         automatically start running the selected test.
2223         (suitesManager.suitesFromQueryString): Iterate through the Suites and tests and find the one
2224         that matches the provided parameters. Returns an object similar to the form in
2225         suitesManager.updateLocalStorageFromUI.
2226         (benchmarkController.initialize): After settings up the events and options, try parsing the
2227         query string and running the benchmark immediately. Otherwise, fall back to the form.
2228         (benchmarkController.startBenchmark): Store the options and suites into member variables for
2229         reuse in restartBenchmark.
2230         (benchmarkController.startBenchmarkImmediatelyIfEncoded): Convert the query string to an object.
2231         If that's successful, find the suite and test referenced in the query string. Start the benchmark if
2232         the search for the test succeeded.
2233         * Animometer/resources/extensions.js:
2234         (Utilities.stripNonASCIICharacters): Helper method to convert the name of the suite and test
2235         into a query-string-friendly version.
2236         (Utilities.convertObjectToQueryString): Helper method to convert an object to query string
2237         format.
2238         (Utilities.convertQueryStringToObject): Helper method to convert query string into an object
2239         with properties and values.
2240
2241 2016-03-16  Jon Lee  <jonlee@apple.com>
2242
2243         Add a new benchmark test
2244         https://bugs.webkit.org/show_bug.cgi?id=155570
2245
2246         Reviewed by Simon Fraser.
2247
2248         New Leaves test includes various image sizes and opacity.
2249
2250         * Animometer/resources/debug-runner/tests.js: Add it to the HTML test suite.
2251         * Animometer/tests/dom/leaves.html: Added.
2252         * Animometer/tests/dom/resources/leaves.js: Added. Override the
2253         (Particle.call.reset): Uses a range of sizes, and opacity.
2254         (Particle.call.animate): Opacity goes up then down. When it hits 0, reset the particle.
2255         (Particle.call.move): Set transform and opacity.
2256         * Animometer/tests/master/resources/leaves.js: Get rid of the closure so that it
2257         can be used in this test. Update the relative path so that it works in both the master
2258         and dom test suite.
2259
2260 2016-03-15  Simon Fraser  <simon.fraser@apple.com>
2261
2262         Add developer Animometer test that bounces P3-tagged images
2263         https://bugs.webkit.org/show_bug.cgi?id=155511
2264
2265         Reviewed by Tim Horton.
2266         
2267         Add a test for rendering performance of tagged images. The 5 images are tagged
2268         with the Display P3 colorspace.
2269
2270         * Animometer/resources/debug-runner/tests.js:
2271         * Animometer/tests/bouncing-particles/bouncing-tagged-images.html: Added.
2272         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Added.
2273         * Animometer/tests/bouncing-particles/resources/image1.jpg: Added.
2274         * Animometer/tests/bouncing-particles/resources/image2.jpg: Added.
2275         * Animometer/tests/bouncing-particles/resources/image3.jpg: Added.
2276         * Animometer/tests/bouncing-particles/resources/image4.jpg: Added.
2277         * Animometer/tests/bouncing-particles/resources/image5.jpg: Added.
2278
2279 2016-03-09  Jon Lee  <jonlee@apple.com>
2280
2281         Enhance existing Animometer tests
2282         https://bugs.webkit.org/show_bug.cgi?id=155261
2283
2284         Reviewed by Simon Fraser.
2285
2286         * Animometer/tests/master/resources/canvas-tests.js: Add a gradient to
2287         the filled circles. To expose more of the gradient, add another circle.
2288         (SimpleCanvasStage.call.animate): For each frame, create a gradient with
2289         undulating stop points and colors. Fill the circles twice; once with
2290         the solid color, and once with the gradient.
2291
2292         * Animometer/tests/master/resources/dom-particles.js: Refactor the
2293         emission variables into a separate stage for this test. Add a colorOffset
2294         variable to make the colors of each particle slightly different, since
2295         the ramp controller can add large numbers of particles all at once, which
2296         would otherwise get all the same color.
2297         * Animometer/tests/master/resources/particles.js:
2298         (initialize): Remove the code specific to the SVG mask test.
2299
2300         * Animometer/tests/master/resources/image-data.js:
2301         (initialize): Remove unused local variable.
2302         * Animometer/tests/master/resources/multiply.js:
2303         (initialize): Make the test harder by adding more total particles.
2304
2305 2016-03-09  Jon Lee  <jonlee@apple.com>
2306
2307         Add text tests
2308         https://bugs.webkit.org/show_bug.cgi?id=155257
2309
2310         Reviewed by Simon Fraser.
2311
2312         * Animometer/resources/extensions.js:
2313         (UnitBezier.Utilities.createClass): Add a class that computes Bezier points
2314         assuming that two of the control points are at (0,0) and (1,1). Taken from
2315         WebCore/platform/graphics/UnitBezier.h
2316         * Animometer/resources/runner/tests.js: Add a test for English text and one
2317         for international text.
2318         * Animometer/tests/master/international.html: Added.
2319         * Animometer/tests/master/resources/text.js: Added. The test assumes there is
2320         #template div which it will copy. The copies are placed behind the template, and
2321         are set with different colors each frame. They are moved around with CSS transform.
2322         * Animometer/tests/master/text.html: Added.
2323
2324         Remove the other text tests, since these ones cover the same techniques.
2325         * Animometer/tests/text/layering-text.html: Removed.
2326         * Animometer/tests/text/resources/layering-text.js: Removed.
2327         * Animometer/tests/text/resources/text-boxes.js: Removed.
2328         * Animometer/tests/text/text-boxes.html: Removed.
2329         * Animometer/resources/debug-runner/tests.js:
2330
2331 2016-03-09  Jon Lee  <jonlee@apple.com>
2332
2333         Add a new image test
2334         https://bugs.webkit.org/show_bug.cgi?id=155232
2335
2336         Reviewed by Dean Jackson.
2337         Provisionally reviewed by Said Abou-Hallawa.
2338
2339         The image test renders PNGs and moves them with translate and rotate
2340         transforms. Each particle has a lifetime, and when the lifetime ends or
2341         the particle goes offscreen, it resets itself somewhere on the stage.
2342
2343         * Animometer/resources/debug-runner/tests.js: Remove the CSS bouncing PNG
2344         images test, because this one tests the same technique.
2345         * Animometer/resources/runner/tests.js: Added here as "Leaves".
2346         * Animometer/tests/master/leaves.html: Added.
2347         * Animometer/tests/master/resources/particles.js: Refactor out the parts
2348         specific to the DOM particles test. Consequently make velocity a public
2349         member.
2350         (initialize): The options parameter is never used, so remove it.
2351         (animate): Remove unused local variable.
2352         * Animometer/tests/master/resources/leaves.js: Maintains a focal point that
2353         moves back and forth across the canvas. That point affects the velocity
2354         of the particles. When the focal point is on the leftmost side, it is
2355         between [-6, -2], and set in reset(). When the focal point is on the rightmost
2356         side, it will be from [2, 6].
2357         * Animometer/tests/master/resources/dom-particles.js: Move JS specific to
2358         this test here from particles.js.
2359
2360         New images.
2361         * Animometer/tests/master/resources/compass100.png: Added.
2362         * Animometer/tests/master/resources/console100.png: Added.
2363         * Animometer/tests/master/resources/contribute100.png: Added.
2364         * Animometer/tests/master/resources/debugger100.png: Added.
2365         * Animometer/tests/master/resources/inspector100.png: Added.
2366         * Animometer/tests/master/resources/layout100.png: Added.
2367         * Animometer/tests/master/resources/performance100.png: Added.
2368         * Animometer/tests/master/resources/script100.png: Added.
2369         * Animometer/tests/master/resources/shortcuts100.png: Added.
2370         * Animometer/tests/master/resources/standards100.png: Added.
2371         * Animometer/tests/master/resources/storage100.png: Added.
2372         * Animometer/tests/master/resources/styles100.png: Added.
2373         * Animometer/tests/master/resources/timeline100.png: Added.
2374
2375 2016-03-03  Jon Lee  <jonlee@apple.com>
2376
2377         Add ability to retrieve raw data from release harness
2378         https://bugs.webkit.org/show_bug.cgi?id=155026
2379
2380         Reviewed by Simon Fraser.
2381
2382         * Animometer/developer.html: Remove the special UI in the debug
2383         harness.
2384         * Animometer/resources/runner/animometer.css: Add styles for the
2385         overlay.
2386         * Animometer/resources/runner/animometer.js: Let 'j' show the JSON
2387         results, but only if the overlay doesn't exist. Add 'esc' key to dismiss
2388         the overlay.
2389         (window.benchmarkController.selectResults): Cycle the cases around
2390         so that the first 's' press selects both the benchmark score and
2391         the individual test scores.
2392         * Animometer/resources/debug-runner/animometer.css: Remove
2393         unneeded rules.
2394         * Animometer/resources/debug-runner/animometer.js: Make the same
2395         call to handleKeyPress.
2396
2397 2016-03-03  Jon Lee  <jonlee@apple.com>
2398
2399         Make sure multiply test particles have at least some opacity
2400         https://bugs.webkit.org/show_bug.cgi?id=155027
2401
2402         Reviewed by Simon Fraser.
2403
2404         * Animometer/tests/master/resources/multiply.js:
2405         (initialize): Have the elements spin a little faster to make it
2406         more obvious when the system is being stressed.
2407         (_addTile):
2408         (animate): Make sure each element being animated has at least 1%
2409         opacity.
2410
2411 2016-03-03  Jon Lee  <jonlee@apple.com>
2412
2413         Update image test
2414         https://bugs.webkit.org/show_bug.cgi?id=154962
2415
2416         Rubber-stamped by Darin Adler.
2417
2418         * Animometer/tests/master/image-data.html: Make each canvas have a compositing layer.
2419         * Animometer/tests/master/resources/image-data.js:
2420         (initialize): Update to load multiple images serially.
2421         (_loadImage):
2422         (tune): Use display instead of visibility. When showing an element anew, move it somewhere else.
2423         (_createTestElement): Set up the element, refactor out placement of element to _refreshElement.
2424         (_refreshElement): Place element in a tile grid.
2425         (animate):
2426         (_getRandomNeighboringPixelIndex): Use a more conservative distribution to make the effect last a little longer.
2427         * Animometer/tests/master/resources/compass.svg: Added.
2428         * Animometer/tests/master/resources/console.svg: Added.
2429         * Animometer/tests/master/resources/contribute.svg: Added.
2430         * Animometer/tests/master/resources/debugger.svg: Added.
2431         * Animometer/tests/master/resources/inspector.svg: Added.
2432         * Animometer/tests/master/resources/layout.svg: Added.
2433         * Animometer/tests/master/resources/performance.svg: Added.
2434         * Animometer/tests/master/resources/script.svg: Added.
2435         * Animometer/tests/master/resources/shortcuts.svg: Added.
2436         * Animometer/tests/master/resources/standards.svg: Added.
2437         * Animometer/tests/master/resources/storage.svg: Added.
2438         * Animometer/tests/master/resources/styles.svg: Added.
2439         * Animometer/tests/master/resources/timeline.svg: Added.
2440
2441 2016-03-02  Jon Lee  <jonlee@apple.com>
2442
2443         Add some new controllers, and refine tests
2444         https://bugs.webkit.org/show_bug.cgi?id=154914
2445
2446         Reviewed by Simon Fraser.
2447
2448         Improve tests.
2449
2450         * Animometer/tests/master/focus.html: Move each particle into a layer. Put the particle
2451         in a container element. Expand the container element by the max blur radius, and clip
2452         overflow. This way, when the blur is applied, it avoids causing layer resizes.
2453         * Animometer/tests/master/resources/focus.js:
2454         (FocusElement.Utilities.createClass): Create a container element, and put the particle
2455         inside.
2456         (hide): Set display:none.
2457         (show): Set display:block.
2458         (animate): Apply filters to the container element.
2459         (FocusStage.call.initialize): Instead of inserting and removing elements from the DOM,
2460         keep them in the stage, but set the display style instead. Use this._offsetIndex to
2461         keep track of which elements are displayed.
2462         (FocusStage.call.animate): Move some calculations around to avoid doing unneeded math.
2463         (FocusStage.call.getBlurValue): Make sure elements are always blurred.
2464         (FocusStage.call.getOpacityValue): Make sure elements have some opacity.
2465         * Animometer/tests/master/resources/multiply.js: Have the particles on the edge of the
2466         stage appear less black when the complexity gets large enough.
2467         (tune): Have this._distanceFactor calculate the factor. Avoid calculating square root each
2468         frame.
2469
2470 2016-03-02  Jon Lee  <jonlee@apple.com>
2471
2472         Add some new controllers, and refine tests
2473         https://bugs.webkit.org/show_bug.cgi?id=154914
2474
2475         Reviewed by Simon Fraser.
2476
2477         Add a controller that centers around 30 fps instead of 60 fps.
2478
2479         * Animometer/developer.html: Add a new option.
2480         * Animometer/resources/debug-runner/animometer.js:
2481         * Animometer/resources/runner/animometer.js:
2482         (this._processData.findRegression): When calculating the complexity-frameLength regression,
2483         check the controller, and use a 30 fps baseline if needed.
2484         * Animometer/resources/statistics.js:
2485         (Regression.Utilities.createClass): Update to allow clients to specify the baseline
2486         frame length.
2487         * Animometer/tests/resources/main.js:
2488         (tune): Override some of the constants in RampController. Move those constants out for
2489         easier reading.
2490
2491         Add a fixed controller, with no step.
2492
2493         * Animometer/developer.html: Add a controller that takes no step.
2494         * Animometer/resources/debug-runner/animometer.js:
2495         * Animometer/tests/resources/main.js:
2496         (Rotater.Utilities.createClass):
2497
2498         Switch to ramp controller as default.
2499
2500         * Animometer/developer.html: Increase the test length to 20 seconds.
2501         * Animometer/resources/debug-runner/animometer.js: Rename the "adjustment" field to "controller"
2502         since that is a more accurate description.
2503         * Animometer/resources/debug-runner/graph.js:
2504         * Animometer/resources/runner/animometer.js: Update preferences for release suite.
2505
2506 2016-02-26  Jon Lee  <jonlee@apple.com>
2507
2508         Address Dean's comments in 154673.
2509
2510         * Animometer/developer.html:
2511         * Animometer/resources/debug-runner/animometer.js:
2512         * Animometer/resources/debug-runner/graph.js:
2513
2514 2016-02-25  Jon Lee  <jonlee@apple.com>
2515
2516         Update animation benchmark and tests
2517         https://bugs.webkit.org/show_bug.cgi?id=154673
2518
2519         Reviewed by Dean Jackson.
2520
2521         Update test visuals.
2522
2523         * Animometer/tests/master/resources/canvas-tests.js:
2524         (CanvasLineSegment.Utilities.createClass): Line segments near the edge of the stage get clipped.
2525         Update circle position and radius to minimize impact.
2526         * Animometer/tests/master/resources/particles.js: Get rid of rotating gradient background, and
2527         have 3 locations for emitting particles.
2528         * Animometer/tests/master/resources/multiply.js: Update distance metric so that fringe tiles get
2529         more color.
2530         (initialize): Fix some of the math for laying out the tiles.
2531         (animate): When a tile isn't used, set visibility: hidden.
2532
2533 2016-02-24  Jon Lee  <jonlee@apple.com>
2534
2535         Update animation benchmark and tests
2536         https://bugs.webkit.org/show_bug.cgi?id=154673
2537
2538         Reviewed by Dean Jackson.
2539
2540         Update the ramp controller.
2541
2542         The controller refines the complexity interval to test across.
2543
2544         * Animometer/resources/statistics.js: Add functions that estimate cumulative distribution function.
2545         (Regression): For the flat regression, force the first segment to be at 60 fps.
2546         (valueAt): Add convenience function to return interpolated value based on the regression used.
2547         (_calculateRegression): Include the number of points included for both segments, and the piecewise
2548         errors.
2549         * Animometer/tests/resources/math.js: Make the Kalman estimator subclass Experiment, and allow it
2550         to be reset.
2551
2552         * Animometer/tests/resources/main.js: Initialize the tier such that it starts at 10^0 = 1.
2553         Increase the number of ramps. Maintain three FPS thresholds-- the frame rate of interest, a limit
2554         on the lowest FPS we care to go for later interpolation, and a minimum FPS threshold we want to
2555         aim for each ramp. Also keep three estimators: a running average of the change point, a minimum
2556         boundary for each ramp, and an estimator for all the frames within an interval. The first two
2557         are used to determine the parameters of the next ramp, and the latter allows us to refine the
2558         parameters.
2559         (update): During the tier phase, it is possible that the highest complexity possible for a test
2560         won't stress the system enough to trigger stopping the tier phase and transitioning to the ramps.
2561         If the complexity doesn't change when going to the next tier, we've maxed the test out, and move
2562         on. When the tier phase completed, turn off Controller.frameLengthEstimator, which estimates the
2563         FPS at each tier.
2564         (tune): At each interval, look at the confidence distribution of being on the 60 FPS side or the
2565         slow side. If the slowest FPS we achieve at the ramp's maximum complexity is not at least
2566         _fpsRampSlowThreshold, then increase the maximum complexity. If we ever achieve 60 FPS, increase
2567         the ramp's minimum complexity to that level. If, at an even lower complexity, a glitch causes the
2568         FPS to drop, we reset the minimum complexity.
2569
2570         Have the bootstrap calculation occur between tests. Clean up harness.
2571
2572         * Animometer/resources/debug-runner/animometer.js: Run bootstrap after a test has
2573         completed to avoid doing all of it at the end before showing the results. Clean up
2574         parameters being passed around.
2575         * Animometer/resources/debug-runner/tests.js:
2576         (text):
2577         * Animometer/resources/runner/animometer.js:
2578         (this._processData.calculateScore): Save the results to the same object holding the data.
2579         (this._processData._processData): In the case where a file is dragged, calculate the score
2580         serially. Grab the results object and move it to the results variable and remove it from
2581         the data object. This avoids serializing the results into the JSON.
2582         (this._processData.findRegression): Include the samples used for bootstrapping. Reduce the
2583         resample size to shorten the wait.
2584         * Animometer/resources/runner/benchmark-runner.js:
2585         * Animometer/resources/statistics.js:
2586         (bootstrap): Update how bootstrapData is sorted. In some regression results the mix of
2587         floats and integers causes an alphabetical sort to occur.
2588         * Animometer/resources/strings.js:
2589
2590         Add meta charset so that encodings between harness and test match.
2591
2592         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2593         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2594         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2595         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2596         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2597         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2598         * Animometer/tests/master/canvas-stage.html:
2599         * Animometer/tests/master/focus.html:
2600         * Animometer/tests/master/image-data.html:
2601         * Animometer/tests/master/multiply.html:
2602         * Animometer/tests/master/particles.html:
2603         * Animometer/tests/misc/canvas-electrons.html:
2604         * Animometer/tests/misc/canvas-stars.html:
2605         * Animometer/tests/misc/compositing-transforms.html:
2606         * Animometer/tests/simple/simple-canvas-paths.html:
2607         * Animometer/tests/simple/tiled-canvas-image.html:
2608         * Animometer/tests/template/template-canvas.html:
2609         * Animometer/tests/template/template-css.html:
2610         * Animometer/tests/template/template-svg.html:
2611         * Animometer/tests/text/layering-text.html:
2612         * Animometer/tests/text/text-boxes.html:
2613
2614         Update test harness reporting.
2615
2616         * Animometer/developer.html: Add missing meta charset.
2617         * Animometer/index.html: Remove unnecessary utf-8 declaration.
2618         * Animometer/resources/debug-runner/animometer.css: Add convenience classes for
2619         formatting the results table.
2620         * Animometer/resources/debug-runner/animometer.js: Adjust which stats are shown.
2621         * Animometer/resources/debug-runner/tests.js: Display bootstrapping statistics.
2622         * Animometer/resources/strings.js: Move strings not used by the release harness.
2623
2624         Switch to a pseudo-random number generator.
2625
2626         * Animometer/resources/statistics.js: Add a Pseudo class, with a simple
2627         pseudo-random number generator.
2628         (_calculateRegression): Reset the generator before running bootstrap.
2629         (bootstrap): Deleted.
2630
2631         Replace Math.random with Pseudo.random.
2632         * Animometer/tests/master/resources/canvas-tests.js:
2633         * Animometer/tests/master/resources/focus.js:
2634         * Animometer/tests/master/resources/particles.js:
2635         * Animometer/tests/resources/main.js:
2636
2637         Use bootstrapping to get confidence interval in the breakpoint.
2638
2639         For the ramp controller, calculate the piecewise regression, and then use
2640         bootstrapping in order to find the 95% confidence interval. Use the raw data.
2641
2642         * Animometer/developer.html: Default to the complexity graph. Add a legend
2643         checkbox to toggle visibility of the bootstrap score and histogram.
2644         * Animometer/resources/debug-runner/animometer.css: Make some more space to show
2645         the old raw and average scores in the legend. Add new styles for the data.
2646         * Animometer/resources/debug-runner/graph.js:
2647         (_addRegressionLine): Allow passing an array for the variance bar tied to the
2648         regression line. Now |stdev| is |range|.
2649         (createComplexityGraph): Add bootstrap median, and overlay a histogram of
2650         the bootstrap samples. Switch raw samples from circles to X's.
2651         (onComplexityGraphOptionsChanged): Allow toggling of the bootstrap data.
2652         (onGraphTypeChanged): Move the regressions for the raw and average samples to the
2653         legend. In the subtitle use the bootstrap median, and include the 95% confidence
2654         interval.
2655         * Animometer/resources/runner/animometer.js:
2656         (this._processData.findRegression): Factor out the code that determines which
2657         samples to include when calculating the piecewise regression. For series that have
2658         many samples, or a wider range of recorded complexities, throw away the 2.5%
2659         lowest and highest samples before calculating the regression. Keep all samples
2660         if the number of samples to regress is small or the range of complexities is
2661         narrow.
2662         (this._processData._calculateScore): Factor out regression calculation to
2663         findRegression(). Bootstrap the change point of the regression. The score is the
2664         median.
2665         * Animometer/resources/statistics.js:
2666         (_calculateRegression): Correct an issue in the calculation of the regression, where
2667         the denominator can be 0.
2668         (bootstrap): Template for bootstrapping. Create a bootstrap sample array, Create
2669         re-samples by random selection with replacement. Return the 95% confidence samples,
2670         the bootstrap median, mean, and the data itself.
2671         * Animometer/resources/strings.js: Add bootstrap.
2672         * Animometer/tests/resources/main.js:
2673         (processSamples): Don't prematurely cut the sample data.
2674
2675         Fix graph drawing.
2676
2677         * Animometer/resources/debug-runner/animometer.js: Add spacing in the JSON output.
2678         Multiple tests output a lot of JSON and can hang when selecting JSON with no whitespace.
2679         * Animometer/resources/debug-runner/animometer.css:
2680         (#complexity-graph .series.raw circle): Update the color.
2681         * Animometer/resources/debug-runner/graph.js: Use the FPS axis instead of the
2682         complexity axis, which can vary in domain. For determining the complexity domain,
2683         only use samples after samplingTimeOffset.
2684
2685         Allow dropping results JSON.
2686
2687         * Animometer/developer.html: Add a button.
2688         * Animometer/resources/debug-runner/animometer.css:
2689         * Animometer/resources/debug-runner/animometer.js: Read the data and go straight
2690         to the dashboard. With JSON output, write out only the options and the raw data.
2691
2692         Teach the harness to evaluate the samples and determine the test score.
2693
2694         This will allow us to update how the score is calculated separately from the samples recorded.
2695         This also prepares the harness to be able to accept JSON of prior runs.
2696
2697         * Animometer/resources/strings.js: Clean up and remove unneeded strings and reduce some of the
2698         hierarchy.
2699         * Animometer/resources/debug-runner/tests.js: Update to use the new strings.
2700
2701         * Animometer/tests/resources/main.js: Allow all controllers to show a complexity-FPS graph.
2702         (_processComplexitySamples): Factor out some of the sample processing done in the ramp
2703         controller for the benefit of the other controllers. |complexitySamples| contains a list of
2704         samples. Sort the samples by complexity. Optionally remove the top x% of samples.
2705         Group them, and calculate distribution of samples within the same complexity, and add those as
2706         new entries into |complexityAverageSamples|.
2707         (Controller.processSamples): Move the code responsible for determining the complexity and FPS
2708         scores out to ResultsDashboard. The structure of the data returned by the controller is:
2709
2710         {
2711             controller: [time-regression, time-regression, ...], // optional, data specific to controller
2712             marks: [...],
2713             samples: {                    // all of the sample data
2714                 controller: [...],
2715                 complexity: [...],        // processed from controller samples
2716                 complexityAverage: [...], // processed from complexity samples
2717             }
2718         }
2719
2720         (AdaptiveController.processSamples): Adding the target frame length is no longer necessary; we
2721         now pass the test options to the graph.
2722         (Regression): Move to statistics.js.
2723         * Animometer/resources/statistics.js: Move Regression to here. Add a check if the sampling range
2724         only contains one sample, since we cannot calculate a regression from one sample point.
2725
2726         Teach the test harness to evaluate the data.
2727         * Animometer/resources/runner/animometer.js:
2728         (ResultsDashboard): Store the options used to run the test and the computed results/score separately
2729         from the data. The results are stored as:
2730
2731         {
2732             score: /* geomean of iteration score */,
2733             iterationsResults: [
2734                 {
2735                     score: /* geomean of tests */,
2736                     testsResults: {
2737                         suiteName: {
2738                             testName: {
2739                                 controller: {
2740                                     average:
2741                                     concern:
2742                                     stdev:
2743                                     percent:
2744                                 },
2745                                 frameLength: { ... },
2746                                 complexity: {
2747                                     complexity:
2748                                     stdev:
2749                                     segment1:
2750                                     segment2:
2751                                 },
2752                                 complexityAverage: { ... }
2753                             },
2754                             testName: { ... },
2755                         },
2756                         ... next suite ...
2757                     }
2758                 },
2759                 { ...next iteration... }
2760             ]
2761         }
2762
2763         * Animometer/resources/debug-runner/animometer.js: Pass options around instead of relying
2764         on what was selected in the form. This will later allow for dropping previous results, and
2765         using those runs' options when calculating scores.
2766         (ResultsTable._addGraphButton): Simplify button action by using attached test data.
2767         * Animometer/resources/debug-runner/graph.js: Refactor to use the data.
2768
2769         Consolidate JS files, and move statistics out to a separate JS.
2770
2771         Preparation for having the Controller only handle recording and storage of the samples,
2772         and leave the evaluation of the test score out to the harness. Move Experiment to
2773         a new statistics.js, where Regression will also eventually go. Get rid of algorithm.js
2774         and move it to utilities.js since the Heap is used only for Experiments.
2775
2776         * Animometer/tests/resources/algorithm.js: Removed. Heap is in utilities.js.
2777         * Animometer/tests/resources/sampler.js: Removed. Experiment is in statistics.js,
2778         Sampler in main.js.
2779         * Animometer/tests/resources/main.js: Move Sampler here.
2780         * Animometer/resources/statistics.js: Added. Move Statistics and Experiment here.
2781         * Animometer/resources/extensions.js: Move Heap here. Attach static method to create
2782         a max or min heap to Heap, instead of a new Algorithm object.
2783
2784         Update JS files.
2785         * Animometer/developer.html:
2786         * Animometer/index.html:
2787         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2788         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2789         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2790         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2791         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2792         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2793         * Animometer/tests/master/canvas-stage.html:
2794         * Animometer/tests/master/focus.html:
2795         * Animometer/tests/master/image-data.html:
2796         * Animometer/tests/master/multiply.html:
2797         * Animometer/tests/master/particles.html:
2798         * Animometer/tests/misc/canvas-electrons.html:
2799         * Animometer/tests/misc/canvas-stars.html:
2800         * Animometer/tests/misc/compositing-transforms.html:
2801         * Animometer/tests/simple/simple-canvas-paths.html:
2802         * Animometer/tests/simple/tiled-canvas-image.html:
2803         * Animometer/tests/template/template-canvas.html:
2804         * Animometer/tests/template/template-css.html:
2805         * Animometer/tests/template/template-svg.html:
2806         * Animometer/tests/text/layering-text.html:
2807         * Animometer/tests/text/text-boxes.html:
2808
2809         Fix the cursor in the graph analysis when the min
2810         complexity is not 0.
2811
2812         * Animometer/resources/debug-runner/graph.js:
2813         (_addRegression):
2814         (createComplexityGraph):
2815
2816 2016-02-23  Geoffrey Garen  <ggaren@apple.com>
2817
2818         Fix some issues in MallocBench
2819         https://bugs.webkit.org/show_bug.cgi?id=154600
2820
2821         Reviewed by Oliver Hunt.
2822
2823         * MallocBench/MallocBench.xcodeproj/project.pbxproj: Make nimlang.ops
2824         a part of the build so that it copies to the right place for execution.
2825
2826         * MallocBench/MallocBench/Interpreter.cpp:
2827         (Interpreter::Interpreter): Don't try to open .ops files for writing
2828         because we're only going to read and we might need extra permissions to
2829         write.
2830
2831         (Interpreter::~Interpreter): Give more context when opening a file fails
2832         to help with debugging.
2833
2834         * MallocBench/MallocBench/stress.cpp:
2835         (benchmark_stress): Reduce iterations to complete in less than 10 seconds.
2836
2837 2016-02-23  Michael Saboff  <msaboff@apple.com>
2838
2839         Unreviewed change to revert extraneous changes made part of change set 196955.
2840
2841         * MallocBench/MallocBench/Interpreter.cpp:
2842         (Interpreter::doMallocOp):
2843         (Interpreter::Thread::switchTo):
2844         (writeData): Deleted.
2845
2846 2016-02-19  Michael Saboff  <msaboff@apple.com>
2847
2848         MallocBench: Added recording for nimlang website, new recording details and added new options
2849         https://bugs.webkit.org/show_bug.cgi?id=154485
2850
2851         Reviewed by Geoff Garen.
2852
2853         Added new capabilities to MallocBench.  These include:
2854             Added a recording of http://nim-lang.org/docs/lib.html.
2855             Added thread id to the recording and the ability to playback switching threads in MallocBench
2856             Added aligned allocations to recordings and the ability to playback
2857             Added --use-thread-id option to honor recorded thread ids
2858             Added --detailed-report to output remaining allocations by size after playback
2859             Added --no-warmup to not run the warm up iteration
2860
2861         Changed the way that options are passed down to the benchmarks.  Instead of passing individual
2862         boolean or numeric option values, just pass a reference the CommandLine itself.  Each benchmark
2863         can access the options that are appropriate.  The Benchmark class also uses the options for
2864         is parallel, run counts and warm up.
2865
2866         Added thread id and aligned malloc to the Op by noticing that structure padding and Opcode allowed
2867         for another 32 bits of data.  Breaking that unused 32 bits into a 16 bit thread id value and a
2868         16 bit log base 2 of the alignment for aligned malloc allowed for existing recordings to playback
2869         without any incompatibilities.
2870
2871         Threaded operation is simulated by creating threads as needed.  As long as the next Op's thread id
2872         is the same as the last, operation continues as normal.  When the next Op has a different thread id,
2873         we switch to that thread using the shared Op stream to continue playing back.  There is a mutex to
2874         assure that only one thread is really running at a time and a condition variable used to wait
2875         that the current thread id matches each block thread's thread id.  This doesn't simulate true
2876         concurrent threading, but is instead plays back Ops recorded for multiple thread faithfully.
2877
2878         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2879         * MallocBench/MallocBench/Benchmark.cpp:
2880         (deallocateHeap):
2881         (Benchmark::Benchmark):
2882         (Benchmark::runOnce):
2883         (Benchmark::run):
2884         * MallocBench/MallocBench/Benchmark.h:
2885         (Benchmark::isValid):
2886         * MallocBench/MallocBench/CommandLine.cpp:
2887         (CommandLine::printUsage):
2888         * MallocBench/MallocBench/CommandLine.h:
2889         (CommandLine::isValid):
2890         (CommandLine::benchmarkName):
2891         (CommandLine::isParallel):
2892         (CommandLine::useThreadID):
2893         (CommandLine::detailedReport):
2894         (CommandLine::warmUp):
2895         (CommandLine::heapSize):
2896         (CommandLine::runs):
2897         * MallocBench/MallocBench/Interpreter.cpp:
2898         (Interpreter::Interpreter):
2899         (Interpreter::run):
2900         (Interpreter::readOps):
2901         (Interpreter::doOnSameThread):
2902         (Interpreter::switchToThread):
2903         (Interpreter::detailedReport):
2904         (compute2toPower):
2905         (writeData):
2906         (Interpreter::doMallocOp):
2907         (Interpreter::Thread::Thread):
2908         (Interpreter::Thread::stop):
2909         (Interpreter::Thread::~Thread):
2910         (Interpreter::Thread::runThread):
2911         (Interpreter::Thread::waitToRun):
2912         (Interpreter::Thread::switchTo):
2913         * MallocBench/MallocBench/Interpreter.h:
2914         (Interpreter::Thread::isMainThread):
2915         * MallocBench/MallocBench/alloc_free.cpp: Added.
2916         (benchmark_alloc_free):
2917         * MallocBench/MallocBench/alloc_free.h: Added.
2918         * MallocBench/MallocBench/balloon.cpp:
2919         (benchmark_balloon):
2920         * MallocBench/MallocBench/balloon.h:
2921         * MallocBench/MallocBench/big.cpp:
2922         (benchmark_big):
2923         * MallocBench/MallocBench/big.h:
2924         * MallocBench/MallocBench/churn.cpp:
2925         (benchmark_churn):
2926         * MallocBench/MallocBench/churn.h:
2927         * MallocBench/MallocBench/facebook.cpp:
2928         (benchmark_facebook):
2929         * MallocBench/MallocBench/facebook.h:
2930         * MallocBench/MallocBench/flickr.cpp:
2931         (benchmark_flickr):
2932         (benchmark_flickr_memory_warning):
2933         * MallocBench/MallocBench/flickr.h:
2934         * MallocBench/MallocBench/fragment.cpp:
2935         (validate):
2936         (benchmark_fragment):
2937         (benchmark_fragment_iterate):
2938         * MallocBench/MallocBench/fragment.h:
2939         * MallocBench/MallocBench/list.cpp:
2940         (benchmark_list_allocate):
2941         (benchmark_list_traverse):
2942         * MallocBench/MallocBench/list.h:
2943         * MallocBench/MallocBench/main.cpp:
2944         (main):
2945         * MallocBench/MallocBench/medium.cpp:
2946         (benchmark_medium):
2947         * MallocBench/MallocBench/medium.h:
2948         * MallocBench/MallocBench/memalign.cpp:
2949         (test):
2950         (benchmark_memalign):
2951         * MallocBench/MallocBench/memalign.h:
2952         * MallocBench/MallocBench/message.cpp:
2953         (benchmark_message_one):
2954         (benchmark_message_many):
2955         * MallocBench/MallocBench/message.h:
2956         * MallocBench/MallocBench/nimlang.cpp: Added.
2957         (benchmark_nimlang):
2958         * MallocBench/MallocBench/nimlang.h: Added.
2959         * MallocBench/MallocBench/nimlang.ops: Added.
2960         * MallocBench/MallocBench/realloc.cpp:
2961         (benchmark_realloc):
2962         * MallocBench/MallocBench/realloc.h:
2963         * MallocBench/MallocBench/reddit.cpp:
2964         (benchmark_reddit):
2965         (benchmark_reddit_memory_warning):
2966         * MallocBench/MallocBench/reddit.h:
2967         * MallocBench/MallocBench/stress.cpp:
2968         (deallocate):
2969         (benchmark_stress):
2970         * MallocBench/MallocBench/stress.h:
2971         * MallocBench/MallocBench/stress_aligned.cpp:
2972         (benchmark_stress_aligned):
2973         * MallocBench/MallocBench/stress_aligned.h:
2974         * MallocBench/MallocBench/theverge.cpp:
2975         (benchmark_theverge):
2976         (benchmark_theverge_memory_warning):
2977         * MallocBench/MallocBench/theverge.h:
2978         * MallocBench/MallocBench/tree.cpp:
2979         (benchmark_tree_allocate):
2980         (benchmark_tree_traverse):
2981         (benchmark_tree_churn):
2982         * MallocBench/MallocBench/tree.h:
2983         * MallocBench/run-malloc-benchmarks:
2984
2985 2016-02-11  Jon Lee  <jonlee@apple.com>
2986
2987         Fix a missing refactoring.
2988
2989         * Animometer/tests/master/resources/multiply.js:
2990         (animate): Move to Utilities.lerp.
2991         (_lerp): Deleted.
2992
2993 2016-02-10  Jon Lee  <jonlee@apple.com>
2994
2995         Add new benchmark tests.
2996         https://bugs.webkit.org/show_bug.cgi?id=154063
2997
2998         Provisionally reviewed by Said Abou-Hallawa.
2999
3000         Add tests for get/put image data, filters, opacity, and css transforms.
3001
3002         * Animometer/resources/runner/benchmark-runner.js:
3003         (_runBenchmarkAndRecordResults): Update the body background color to match that of
3004         the stage.
3005         (this._runNextIteration): Clear the background color style for the results page.
3006         * Animometer/resources/runner/tests.js:
3007         * Animometer/tests/master/focus.html: Added.
3008         * Animometer/tests/master/image-data.html: Added.
3009         * Animometer/tests/master/multiply.html: Added.
3010         * Animometer/tests/master/resources/focus.js: Added.
3011         * Animometer/tests/master/resources/image-data.js: Added.
3012         * Animometer/tests/master/resources/multiply.js: Added.
3013         * Animometer/tests/master/resources/stage.css: Move common styles out.
3014         * Animometer/tests/resources/main.js: Update Stage.randomBool to use Math.random.
3015         Add Stage.randomSign for randomly setting a direction. Add the notion of the
3016         current timestamp of the test to Benchmark, since some animations cycle through
3017         colors and rely on an incremental counter like the time.
3018
3019 2016-02-09  Said Abou-Hallawa  <sabouhallawa@apple.com>
3020
3021         Add internal benchmark tests for CSS mix-blend-modes and filters
3022         https://bugs.webkit.org/show_bug.cgi?id=154058
3023
3024         Provisionally reviewed by Jon Lee.
3025
3026         * Animometer/resources/debug-runner/tests.js: Include the new tests in the
3027         "HTML suite" of the debug runner.
3028
3029         * Animometer/resources/extensions.js:
3030         (Utilities.browserPrefix):
3031         (Utilities.setElementPrefixedProperty): Utility functions to allow setting
3032         prefixed style properties.
3033
3034         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
3035         Set the mix-blend-mode and the filter to some random values if the options
3036         of the test requested that.
3037
3038         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3039         (parseShapeParameters): Parse the url options "blend" and "filter" and set
3040         the corresponding flags.
3041
3042         * Animometer/tests/resources/main.js:
3043         (randomStyleMixBlendMode):
3044         (randomStyleFilter): Return random mix-blend-mode and filter.
3045
3046 2016-02-08  Jon Lee  <jonlee@apple.com>
3047
3048         Add a ramp controller
3049         https://bugs.webkit.org/show_bug.cgi?id=154028
3050
3051         Provisionally reviewed by Said Abou-Hallawa.
3052
3053         Enhance the graph to include a complexity-fps graph, in addition
3054         to the time graph.
3055
3056         * Animometer/developer.html: Add a ramp option.
3057         * Animometer/resources/debug-runner/animometer.css: Update the style.
3058         * Animometer/resources/strings.js: Flatten the Strings.text constants.
3059         * Animometer/resources/debug-runner/animometer.js:
3060         (ResultsTable.call._addGraphButton): Refactor.
3061         (ResultsTable.call._addTest): Add regression data.
3062         (benchmarkController): Add a form that allows the user to switch between the two forms,
3063         Add a form that allows the user to toggle different data. Hide certain header columns
3064         depending on the selected controller.
3065         * Animometer/resources/debug-runner/graph.js: Add the complexity regressions.
3066         * Animometer/resources/debug-runner/tests.js: Add headers for the ramp results.
3067         * Animometer/resources/runner/animometer.js:
3068         (ResultsTable): If a header is disabled don't include them in _flattenedHeaders.
3069         * Animometer/tests/resources/main.js:
3070         (Controller): Allow options to specify the capacity for sample arrays.
3071         (Regression): A piecewise regression that tries to fit a slope and a flat profile.
3072         (_calculateRegression): Options can fix the slope and bias when calculating the minimal
3073         error. Sweep across the samples in time (which could be backward depending on the controller)
3074         and calculate the intersection point.
3075         (RampController): This controller assumes that the target frame rate is below
3076         58 FPS. It runs in two stages. The first stage quickly determines the order of
3077         magnitude of objects needed to stress the system by the setting the complexity
3078         to increasingly difficult tiers. Perform a series of ramps descending from a
3079         high-water mark of complexity. The complexity needed to reach the target frame
3080         length is done by performing a piecewise regression on each ramp, and track a
3081         running average of these values. For the next ramp, make that running average
3082         the center of the ramp. With a minimum complexity of 0, the high-water mark is
3083         twice that average. The score is based on the highest complexity that can
3084         reach 60 fps.
3085
3086 2016-02-08  Jon Lee  <jonlee@apple.com>
3087
3088         Address Said's comments on the benchmark, and do some clean up.
3089
3090         * Animometer/developer.html:
3091         * Animometer/resources/debug-runner/animometer.css: Add styles for averages.
3092         * Animometer/resources/debug-runner/animometer.js: Use the right
3093         Strings constants.
3094         * Animometer/resources/debug-runner/graph.js:
3095         (_addRegressionLine): Add missing code to draw the line and standard
3096         deviation highlight.
3097         (onGraphTypeChanged): Remove unneeded variables
3098         (onTimeGraphOptionsChanged):
3099         * Animometer/resources/runner/benchmark-runner.js:
3100         (_runBenchmarkAndRecordResults): Rename samplers to suiteResults and
3101         _suitesSamplers to _suitesResults.
3102         * Animometer/tests/resources/main.js:
3103         (results): Call processSamples().
3104         (update): Change sampling timestamp comparison.
3105         (_animateLoop): Move shouldStop call to before the update.
3106         * Animometer/tests/resources/sampler.js:
3107         (process): Rename to processSamples().
3108
3109 2016-02-07  Jon Lee  <jonlee@apple.com>
3110
3111         Teach Controller to measure intervals, and turn off the frame length estimator.
3112
3113         * Animometer/tests/resources/main.js: Default interval length is 100 ms.
3114         (start): Set the first interval.
3115         (_measureAndResetInterval): Reports the average frame length of the interval that just
3116         completed, and sets up the next interval.
3117         (update): If there is no length, then just use the estimator per frame, otherwise the
3118         estimator measures per interval. Add a didFinishInterval for subclasses to process
3119         prior to recording the sample. Update tune() to include whether an interval had
3120         finished.
3121         (StepController): Step controllers don't measure on an interval basis.
3122
3123 2016-02-07  Jon Lee  <jonlee@apple.com>
3124
3125         Minor refactoring. Rename Controller._estimator to Controller._frameLengthEstimator
3126         and switch the parameters for start(), update(), and tune(), so that the timestamp
3127         is first and stage is second.
3128
3129         * Animometer/tests/resources/main.js:
3130
3131 2016-02-07  Jon Lee  <jonlee@apple.com>
3132
3133         Move ResultsTable functionality not needed for release tests out.
3134         Move reporting of score and mean to selection of the time-based graph.
3135
3136         * Animometer/developer.html: Rename graph-options to time-graph-options.
3137         * Animometer/resources/debug-runner/animometer.js:
3138         (DeveloperResultsTable): Moved from runner/animometer.js. Switch from mean
3139         values to "average" objects which can hold stdev. Move graph button and
3140         calculation of noisy measurements here. Sophisticated header processing
3141         is not needed in release suite.
3142         (populateTable): Use DeveloperResultsTable.
3143         * Animometer/resources/debug-runner/graph.js: Pull time graph creation to
3144         its own function, and add a new onGraphTypeChanged handler in preparation
3145         of a complexity graph to be added later.
3146         * Animometer/resources/runner/animometer.js:
3147         (ResultsTable): Simplify to just handle test names and scores.
3148
3149 2016-02-07  Jon Lee  <jonlee@apple.com>
3150
3151         Tests: reuse objects already made.
3152
3153         Avoid thrash of object creation and removal by maintaining an index that
3154         moves along the array as the adjust values change. If the tune value
3155         requires more objects than the maximum size of the object array, then create
3156         new objects. This means that the object array size never decreases.
3157
3158         * Animometer/tests/master/resources/canvas-stage.js: Maintain a separate
3159         offsetIndex. For these tests, we want to avoid drawing the oldest objects,
3160         so the scene will draw the object at offsetIndex to the end of the array.
3161         (tune): Reverse the logic since "removal" of objects is much simpler and
3162         involves simply changing the offsetIndex.
3163         (animate): Update the for loop to draw from offsetIndex to the end.
3164         (complexity): Update the definition.
3165         * Animometer/tests/master/resources/canvas-tests.js: Maintain a separate
3166         offsetIndex. For these tests, we want to avoid drawing the newest objects,
3167         so the scene will draw the object at index 0 to the object at offsetIndex.
3168         (SimpleCanvasStage.animate): Fly-by removal of local stage variable,
3169         which is unneeded. Update the for loop to draw from offsetIndex to the end.
3170         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3171         (SimpleCanvasStage.animate): Update the for loop to draw from 0 to
3172         offsetIndex.
3173         * Animometer/tests/simple/resources/simple-canvas.js:
3174         (tune): Update logic. Here, offsetIndex represents the boundary of the last
3175         index to render.
3176         (animate): Update the for loop to draw from 0 to offsetIndex.
3177         (complexity): Update the definition.
3178
3179 2016-02-07  Jon Lee  <jonlee@apple.com>
3180
3181         Tests: refactor and update styles.
3182
3183         * Animometer/tests/resources/main.js: Add helper methods that return
3184         a color that hue rotates based on the date, and a counter value that
3185         increases based on the date. Fix randomInt() to not bias against the min and
3186         max values.
3187
3188         * Animometer/tests/master/resources/canvas-tests.js: Use new helper methods.
3189         * Animometer/tests/master/resources/dom-particles.js: Ditto.
3190         * Animometer/tests/master/resources/particles.js: Ditto.
3191         * Animometer/tests/simple/resources/simple-canvas-paths.js: Refactor to
3192         use a rotating color instead of a random color. The fast switching of color
3193         is too vivid to watch.
3194
3195         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3196         (BouncingSvgParticlesStage.call.createGradient): Fix the gradient so
3197         that the last stop is located at the end.
3198
3199 2016-02-07  Jon Lee  <jonlee@apple.com>
3200
3201         Refactor tune() to not return the complexity of the scene.
3202
3203         We have stage.complexity() now, so returning the complexity through tune
3204         is unnecessary.
3205
3206         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3207         * Animometer/tests/master/resources/canvas-stage.js:
3208         * Animometer/tests/master/resources/particles.js:
3209         * Animometer/tests/misc/resources/canvas-electrons.js:
3210         * Animometer/tests/misc/resources/canvas-stars.js:
3211         * Animometer/tests/resources/main.js:
3212         * Animometer/tests/simple/resources/simple-canvas.js:
3213         * Animometer/tests/simple/resources/tiled-canvas-image.js:
3214         * Animometer/tests/template/resources/template-canvas.js:
3215         * Animometer/tests/template/resources/template-css.js:
3216         * Animometer/tests/template/resources/template-svg.js:
3217         * Animometer/tests/text/resources/layering-text.js:
3218
3219 2016-02-07  Jon Lee  <jonlee@apple.com>
3220
3221         Make the fixed controller a step controller instead. Halfway through the test
3222         it will bump up the complexity 4-fold. Calculate the step timestamp using options
3223         instead of a separate parameter to the Controller constructor.
3224
3225         * Animometer/developer.html: Change value to "step"
3226         * Animometer/resources/debug-runner/animometer.js:
3227         (window.suitesManager.updateEditsElementsState): Show number inputs when set to "step".
3228         * Animometer/tests/resources/main.js:
3229         (update): Provide a hook for subclasses to tune.
3230         (StepController): Maintain a flag determining whether we've stepped, and the time
3231         we should step.
3232         (Benchmark): Use the new StepController.
3233
3234 2016-02-07  Jon Lee  <jonlee@apple.com>
3235
3236         Adjust the FPS graph scale.
3237
3238         Instead of making the FPS graph linearly scale, scale it based on the frame length,
3239         but show the data in terms of FPS. Because it is inversely proportional, and most
3240         of the data never gets below 20, concentrate the axis from 20-60 FPS, since otherwise
3241         over half of the available graph space ends up blank.
3242
3243         This means we should convert all of the FPS data to frame length data.
3244
3245         * Animometer/resources/debug-runner/graph.js: Update the domain to be based on
3246         frame length in milliseconds instead of FPS. Update the cursor to consider all of the
3247         values being shown, and then pick the min and max values to represent the length of the
3248         cursor.
3249         * Animometer/resources/runner/animometer.js:
3250         * Animometer/resources/strings.js:
3251         * Animometer/tests/resources/main.js:
3252         (processSamples): Add the ability to only sample a range of the data instead of everything
3253         after an offset index. Update sampler to record the frame lengths instead of the frame
3254         rate.
3255
3256 2016-02-07  Jon Lee  <jonlee@apple.com>
3257
3258         Add option to use different methods for retrieving a timestamp.
3259
3260         * Animometer/developer.html: Add performance.now and Date.now options.
3261         * Animometer/resources/runner/animometer.js: Default to performance.now.
3262         (window.benchmarkController.startBenchmark):
3263         * Animometer/tests/resources/main.js: Tie the desired method to _getTimestamp.
3264         (run): Use _getTimestamp.
3265         (_animateLoop): Ditto.
3266
3267 2016-02-07  Jon Lee  <jonlee@apple.com>
3268
3269         Allow adding any number of markers to the graph. The markers can be labeled
3270         and contain timestamp and sample index data. Make it a part of the controller
3271         rather than keeping it in the sampler.
3272
3273         * Animometer/resources/debug-runner/animometer.css: Add styles for markers
3274         * Animometer/resources/debug-runner/graph.js: Create the markers and add
3275         text labels.
3276         * Animometer/resources/runner/animometer.js: Assume the samplingTimeOffset
3277         is just one of the marks provided.
3278         * Animometer/resources/strings.js: Add Strings.json.marks.
3279         * Animometer/tests/resources/main.js:
3280         (Controller): Keep marks here. They are keyed by the marker name, so no two
3281         markers should have the same name.
3282         (recordFirstSample): Refactor to use mark.
3283         (mark): Allows for arbitrary data if needed later. The timestamp maintained
3284         is relative to the absolute start timestamp.
3285         (containsMark): Checks whether a mark with a specific comment exists.
3286         (processSamples): Removes the _startTimestamp offset from the marks before
3287         setting it in results.
3288         * Animometer/tests/resources/sampler.js: Remove marks.
3289
3290 2016-02-07  Jon Lee  <jonlee@apple.com>
3291
3292         Get rid of options member variable in Benchmark.
3293
3294         Options are only needed when initializing the stage or benchmark, so there's no
3295         need to also keep a reference to it.
3296
3297         * Animometer/tests/resources/main.js: Get rid of options variable in Benchmark.
3298         Pass options to Controllers and Stages.
3299         (Controller.Utilities.createClass):
3300         (Benchmark.Utilities.createClass):
3301         (get options): Deleted.
3302
3303         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
3304         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
3305         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
3306         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
3307         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
3308         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3309         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
3310         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3311         * Animometer/tests/master/resources/canvas-stage.js:
3312         * Animometer/tests/master/resources/canvas-tests.js:
3313         * Animometer/tests/master/resources/particles.js:
3314         * Animometer/tests/misc/resources/canvas-electrons.js:
3315         * Animometer/tests/misc/resources/canvas-stars.js:
3316         * Animometer/tests/misc/resources/compositing-transforms.js:
3317         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3318         * Animometer/tests/simple/resources/tiled-canvas-image.js:
3319         * Animometer/tests/template/resources/template-canvas.js:
3320         * Animometer/tests/template/resources/template-css.js:
3321         * Animometer/tests/template/resources/template-svg.js:
3322         * Animometer/tests/text/resources/layering-text.js:
3323
3324 2016-02-07  Jon Lee  <jonlee@apple.com>
3325
3326         Update how the benchmark is run
3327         https://bugs.webkit.org/show_bug.cgi?id=153960
3328
3329         Provisionally reviewed by Said Abou-Hallawa.
3330
3331         Introduce the notion of a Controller. It is responsible for recording, updating,
3332         and processing the statistics and complexity of the benchmark. This allows
3333         plugging in different Controllers.
3334
3335         This strips most of the functionality from Animator and BenchmarkState, so fold
3336         what's left into Benchmark.&n