Add a PerfTest targeting IDBIndex.get().
[WebKit-https.git] / PerformanceTests / ChangeLog
1 2016-12-13  Brady Eidson  <beidson@apple.com>
2
3         Add a PerfTest targeting IDBIndex.get().
4         https://bugs.webkit.org/show_bug.cgi?id=165803
5
6         Reviewed by Alex Christensen.
7
8         * IndexedDB/index-get.html: Added.
9
10 2016-12-12  Brady Eidson  <beidson@apple.com>
11
12         More IndexedDB perf tests.
13         https://bugs.webkit.org/show_bug.cgi?id=165634
14
15         Reviewed by Sam Weinig.
16
17         * IndexedDB/index-multientry.html:
18         * IndexedDB/large-number-of-inserts-responsiveness.html: Added.
19         * IndexedDB/large-number-of-inserts.html: Added.
20         * IndexedDB/objectstore-cursor.html: Added. Runtime cut in 1/4th compared to r209672.
21
22         * resources/runner.js:
23
24 2016-12-12  Commit Queue  <commit-queue@webkit.org>
25
26         Unreviewed, rolling out r209672.
27         https://bugs.webkit.org/show_bug.cgi?id=165766
28
29         IndexedDB/objectstore-cursor.html perf test always times out
30         (Requested by ap on #webkit).
31
32         Reverted changeset:
33
34         "More IndexedDB perf tests."
35         https://bugs.webkit.org/show_bug.cgi?id=165634
36         http://trac.webkit.org/changeset/209672
37
38 2016-12-10  Brady Eidson  <beidson@apple.com>
39
40         More IndexedDB perf tests.
41         https://bugs.webkit.org/show_bug.cgi?id=165634
42
43         Reviewed by Sam Weinig.
44
45         * IndexedDB/index-multientry.html:
46         * IndexedDB/large-number-of-inserts-responsiveness.html: Added.
47         * IndexedDB/large-number-of-inserts.html: Added.
48         * IndexedDB/objectstore-cursor.html: Added.
49         
50         * resources/runner.js: Add "track responsiveness" functionality to PerfTestRunner.
51
52 2016-12-06  Filip Pizlo  <fpizlo@apple.com>
53
54         Concurrent GC should be stable enough to land enabled
55         https://bugs.webkit.org/show_bug.cgi?id=164990
56
57         Reviewed by Geoffrey Garen.
58         
59         Made CDjs more configurable and refined the "large.js" configuration. I was using that one and
60         the new "long.js" configuration to tune concurrent eden GCs.
61         
62         Added a new way of running Splay in browser, which using chartjs to plot the execution times of
63         2000 iterations. This includes the minified chartjs.
64
65         * JetStream/Octane2/splay-detail.html: Added.
66         * JetStream/cdjs/benchmark.js:
67         (benchmarkImpl):
68         (benchmark):
69         * JetStream/cdjs/long.js: Added.
70
71 2016-12-07  Brady Eidson  <beidson@apple.com>
72
73         Add IDB perf tests stressing key size.
74         https://bugs.webkit.org/show_bug.cgi?id=165567
75
76         Reviewed by Alex Christensen.
77
78         * IndexedDB/large-array-keys.html: Added.
79         * IndexedDB/large-binary-keys.html: Added.
80         * IndexedDB/large-string-keys.html: Added.
81
82 2016-12-05  Brady Eidson  <beidson@apple.com>
83
84         Add an IndexedDB perf test to PerformanceTests.
85         https://bugs.webkit.org/show_bug.cgi?id=165430
86
87         Reviewed by Alex Christensen.
88
89         * IndexedDB/index-multientry.html: Added.
90
91 2016-12-02  Filip Pizlo  <fpizlo@apple.com>
92
93         ES6SampleBench should report an average for Steady State so that all of the numbers are comparable
94         https://bugs.webkit.org/show_bug.cgi?id=165325
95
96         Reviewed by Saam Barati.
97
98         This makes all of the numbers that ES6SampleBench reports comparable to each other: they all speak of the time
99         it took to run an iteration of something.
100
101         * ES6SampleBench/results.js:
102         (Results.prototype.reportResult):
103
104 2016-11-18  Jer Noble  <jer.noble@apple.com>
105
106         Add some performance tests for various aspects of media loading and playback.
107         https://bugs.webkit.org/show_bug.cgi?id=164977
108
109         Reviewed by Darin Adler.
110
111         Add new tests for a few aspects of media playback; namely: how quickly  media elements fire
112         the "canplaythrough" event when all data is immediately available, how quickly HLS playback
113         switches resolutions, and at what playback rate MSE-backed video can play without dropping
114         frames. Skip these tests by default, as they're not runnable on all ports, and they require
115         a webserver (run-webkit-httpd) to complete on macOS.
116
117         * Media/HLSCanPlayThrough.html: Added.
118         * Media/HLSGearChange.html: Added.
119         * Media/MSECanPlayThrough.html: Added.
120         * Media/MSEPlaybackRate.html: Added.
121         * Media/StandardCanPlayThrough.html: Added.
122         * Media/hls/1080p/iframe_index.m3u8: Added.
123         * Media/hls/1080p/prog_index.m3u8: Added.
124         * Media/hls/1080p/test.ts: Added.
125         * Media/hls/480p/iframe_index.m3u8: Added.
126         * Media/hls/480p/prog_index.m3u8: Added.
127         * Media/hls/480p/test.ts: Added.
128         * Media/hls/720p/iframe_index.m3u8: Added.
129         * Media/hls/720p/prog_index.m3u8: Added.
130         * Media/hls/720p/test.ts: Added.
131         * Media/hls/720p/test.ts.back: Added.
132         * Media/hls/index.m3u8: Added.
133         * Media/media-source-loader.js: Added.
134         (MediaSourceLoader):
135         (MediaSourceLoader.prototype.loadManifest):
136         (MediaSourceLoader.prototype.loadManifestSucceeded):
137         (MediaSourceLoader.prototype.loadManifestFailed):
138         (MediaSourceLoader.prototype.loadMediaData):
139         (MediaSourceLoader.prototype.loadMediaDataSucceeded):
140         (MediaSourceLoader.prototype.loadMediaDataFailed):
141         (MediaSourceLoader.prototype.get type):
142         (MediaSourceLoader.prototype.get duration):
143         (MediaSourceLoader.prototype.get initSegment):
144         (MediaSourceLoader.prototype.get mediaSegmentsLength):
145         (MediaSourceLoader.prototype.mediaSegments):
146         (MediaSourceLoader.prototype.get everyMediaSegment):
147         * Media/test-fragmented-video.json: Added.
148         * Media/test-fragmented-video.mp4: Added.
149         * Media/test.mp4: Added.
150         * Skipped:
151
152 2016-11-18  Filip Pizlo  <fpizlo@apple.com>
153
154         Concurrent GC should be able to run splay in debug mode and earley/raytrace in release mode with no perf regression
155         https://bugs.webkit.org/show_bug.cgi?id=164282
156
157         Reviewed by Geoffrey Garen and Oliver Hunt.
158         
159         CDjs is a fun benchmark for stressing concurrent GCs, but to really give the GC a good
160         workout you need to increase the amount of work that the test does. This adds a second
161         configuration of the benchmark that has more aircraft. It uses much more memory and causes us
162         to do more GCs and those GCs take longer.
163
164         * JetStream/cdjs/benchmark.js:
165         (benchmarkImpl):
166         (benchmark):
167         * JetStream/cdjs/large.js: Added.
168
169 2016-11-14  Filip Pizlo  <fpizlo@apple.com>
170
171         Unreviewed, revert unintended change.
172
173         * ES6SampleBench/Air/benchmark.js:
174
175 2016-10-03  Saam Barati  <sbarati@apple.com>
176
177         MapHash should speculate on the type of its child node
178         https://bugs.webkit.org/show_bug.cgi?id=161922
179
180         Reviewed by Filip Pizlo.
181
182         I gave the main generator a name so it's easier to see what
183         it is when using the sampling profiler.
184
185         * ES6SampleBench/Basic/ast.js:
186         (Basic.Program):
187
188 2016-09-19  Sergio Villar Senin  <svillar@igalia.com>
189
190         [css-grid] Remove the x2 computation of row sizes with indefinite heights
191         https://bugs.webkit.org/show_bug.cgi?id=162150
192
193         Reviewed by Darin Adler.
194
195         Added a new test case which checks the layout performance of grids inside other grids, i.e,
196         grids acting both as grid container and grid item.
197
198         * Layout/nested-grid.html: Added.
199
200 2016-09-09  Simon Fraser  <simon.fraser@apple.com>
201
202         Perf test Animation/css-accelerated-animation.html failing
203         https://bugs.webkit.org/show_bug.cgi?id=161795
204
205         Skip Animation/css-accelerated-animation.html since this only works as a MobileSafari
206         perf test.
207
208         * Skipped:
209
210 2016-09-08  Simon Fraser  <simon.fraser@apple.com>
211
212         Add a content-animation test with accelerated CSS animations
213         https://bugs.webkit.org/show_bug.cgi?id=161776
214
215         Reviewed by Dean Jackson.
216
217         Add a test that measures the frame rate of accelerated CSS animations.
218
219         This is like css-animation.html (which animates 'left' and 'top') but animates
220         transforms instead. In order to get animation in X and Y we make two nested elements
221         and set transformX() on one, and transformY() on the other.
222
223         * Animation/css-accelerated-animation.html: Added.
224
225 2016-08-23  Saam Barati  <sbarati@apple.com>
226
227         It should be easy to run ES6SampleBench from the jsc shell
228         https://bugs.webkit.org/show_bug.cgi?id=161085
229
230         Reviewed by Yusuke Suzuki.
231
232         This patch makes ES6 sample bench runnable through the `jsc` shell.
233         To do that, you need to be in the PerformanceTests/ES6SampleBench
234         directory and run `jsc cli.js`. To make this work, the benchmark
235         is now aware of being run in two modes: via the browser, and via
236         the shell. Each entry point will set a variable `isInBrowser`,
237         and the benchmark will do different things based on if that
238         variable is true or false.
239
240         * ES6SampleBench/Air/benchmark.js:
241         * ES6SampleBench/Air/stress-test.js:
242         * ES6SampleBench/Basic/benchmark.js:
243         (runBenchmark):
244         * ES6SampleBench/Basic/stress-test.js:
245         * ES6SampleBench/air_benchmark.js:
246         * ES6SampleBench/basic_benchmark.js:
247         * ES6SampleBench/cli.js: Added.
248         (return.doRun):
249         (makeBenchmarkRunner):
250         * ES6SampleBench/driver.js:
251         (Driver):
252         (Driver.prototype._recomputeSummary):
253         (Driver.prototype._iterate.window.setTimeout):
254         (Driver.prototype._iterate):
255         (Driver.prototype._updateIterations):
256         * ES6SampleBench/glue.js:
257         (reportResult):
258         * ES6SampleBench/index.html:
259         * ES6SampleBench/results.js:
260         (Results):
261         (Results.prototype.reportRunning):
262         (Results.prototype.reportDone):
263         (Results.prototype.reportError):
264         * ES6SampleBench/stats.js:
265         (Stats):
266         (Stats.prototype.toString):
267         (Stats.prototype._update):
268
269 2016-08-01  Said Abou-Hallawa  <sabouhallawa@apple.com>
270
271         Add an option to run the MotionMark tests with classic tile size (512x512)
272         https://bugs.webkit.org/show_bug.cgi?id=160371
273
274         Reviewed by Darin Adler.
275
276         Setting the body to large size (3000x3000) and overflow to scroll forces
277         the classic tile size (512x512). This option does not affect the canvas
278         tests because the canvas is displayed on one tile regardless of its size.
279
280         * Animometer/developer.html:
281         * Animometer/resources/debug-runner/animometer.css:
282         (body.showing-test-container.tiles-big):
283         (body.showing-test-container.tiles-classic):
284         * Animometer/resources/debug-runner/animometer.js:
285         * Animometer/resources/runner/animometer.js:
286         (window.benchmarkController.startBenchmark):
287
288 2016-06-29  Filip Pizlo  <fpizlo@apple.com>
289
290         Generators violate bytecode liveness validation
291         https://bugs.webkit.org/show_bug.cgi?id=159279
292
293         Reviewed by Yusuke Suzuki.
294
295         Add Basic to our test harness.
296
297         Also made some cosmetic changes to the benchmark harness.
298
299         * ES6SampleBench/Basic/basic-tests.yaml: Added.
300         * ES6SampleBench/Basic/stress-test.js: Added.
301         (preciseTime):
302         * ES6SampleBench/driver.js:
303         (Driver):
304         (Driver.prototype.start):
305         (Driver.prototype.reportError):
306         * ES6SampleBench/glue.js:
307         * ES6SampleBench/index.html:
308
309 2016-06-28  Filip Pizlo  <fpizlo@apple.com>
310
311         ES6SampleBench should have a harness
312         https://bugs.webkit.org/show_bug.cgi?id=159246
313
314         Reviewed by Saam Barati.
315         
316         This adds a simple web harness for ES6SampleBench. It runs Air and Basic 10 times for 200
317         iterations each and reports three metrics:
318         
319         First iteration: the time it takes for the first iteration to run. This is the first
320         iteration after the benchmark is loaded into the iframe, so it's representative of what
321         would happen if one of these workloads only ran for a short time.
322         
323         Worst 2%: of the last 199 iterations, the average of the worst 2% iterations. If code like
324         any of these workloads was used in an important event handler, you'd want that code to run
325         well in the worst case in addition to having great throughput.
326         
327         Steady state: the total of the last 199 iterations. This is representative of what would
328         happen if you ran code like this for a long time.
329         
330         The total score is the geomean of the firstIteration/worstCase/steadyState numbers of the
331         two benchmarks.
332         
333         The harness does statistics using Student's T-distribution confidence intervals.
334
335         * ES6SampleBench/Basic/benchmark.js:
336         (Benchmark):
337         * ES6SampleBench/air_benchmark.js: Added.
338         * ES6SampleBench/basic_benchmark.js: Added.
339         * ES6SampleBench/driver.js: Added.
340         (Driver):
341         (Driver.prototype.addBenchmark):
342         (Driver.prototype.start):
343         (Driver.prototype.reportResult):
344         (Driver.prototype.reportError):
345         (Driver.prototype._recomputeSummary.Geomean):
346         (Driver.prototype._recomputeSummary.Geomean.prototype.add):
347         (Driver.prototype._recomputeSummary.Geomean.prototype.get result):
348         (Driver.prototype._recomputeSummary):
349         (Driver.prototype._iterate):
350         (Driver.prototype._updateIterations):
351         * ES6SampleBench/glue.js: Added.
352         * ES6SampleBench/index.html: Added.
353         * ES6SampleBench/results.js: Added.
354         (Results):
355         (Results.prototype.get benchmark):
356         (Results.prototype.reset):
357         (Results.prototype.reportRunning):
358         (Results.prototype.reportDone):
359         (Results.prototype.reportResult.averageAbovePercentile):
360         (Results.prototype.reportResult):
361         (Results.prototype.reportError):
362         * ES6SampleBench/stats.js: Added.
363         (Stats):
364         (Stats.prototype.reset):
365         (Stats.prototype.add):
366         (Stats.prototype.get numIterations):
367         (Stats.prototype.valueForIteration):
368         (Stats.get result.tDist):
369         (Stats.prototype.get result):
370         (Stats.prototype.toString):
371         (Stats.prototype._update):
372         * ES6SampleBench/style.css: Added.
373         (body):
374         (body, th, tr):
375         (h1, h2, h3, h4):
376         (h1):
377         (h2):
378         (h3):
379         (hr):
380         (address):
381         (img):
382         (.underline):
383         (ol.loweralpha):
384         (ol.upperalpha):
385         (ol.lowerroman):
386         (ol.upperroman):
387         (ol.arabic):
388         (.banner-link:link, .banner-link:visited):
389         (:link, :visited):
390         (h4 :link, h4 :visited, h5 :link, h5 :visited, h6 :link, h6 :visited):
391         (.anchor:link, .anchor:visited):
392         (* > .anchor:link, * > .anchor:visited):
393         (span:hover .anchor):
394         (a.forbidden, span.forbidden):
395         (a.missing:hover):
396         (a.closed:link, a.closed:visited, span.closed):
397         (pre):
398         (div.code):
399         (div.code pre):
400         (dt):
401         (dd):
402         (dd:last-child):
403         (.site-logo):
404         (.site-logo .tagline):
405         (table):
406         (#contents):
407         (p):
408         (p:last-child):
409         (th):
410         (td):
411
412 2016-06-28  Jon Lee  <jonlee@apple.com>
413
414         Update focus test
415         https://bugs.webkit.org/show_bug.cgi?id=159242
416         rdar://problem/27070007
417
418         Reviewed by Dean Jackson.
419         Provisionally reviewed by Said Abou-Hallawa.
420
421         Move previous test to dom suite, and update the test for better reporting of frame rate, although
422         it uses a different rendering path.
423
424         * Animometer/resources/debug-runner/tests.js: Add to dom suite.
425         * Animometer/tests/dom/focus.html: Copied from PerformanceTests/Animometer/tests/master/focus.html.
426         * Animometer/tests/dom/resources/focus.js: Copied from PerformanceTests/Animometer/tests/master/resources/focus.js.
427         * Animometer/tests/master/focus.html: Remove center element.
428         * Animometer/tests/master/resources/focus.js: Use narrower size range with smaller particles. Remove the
429         container elements. Inline getBlurValue and getOpacityValue since they are only called once.
430
431 2016-06-28  Filip Pizlo  <fpizlo@apple.com>
432
433         Move Air.js and Basic into ES6SampleBench
434
435         Rubber stamped by Geoffrey Garen.
436         
437         We want to group our ES6 benchmarks together, and eventually, we want to give them a
438         common harness.
439
440         * Air.js: Removed.
441         * Air.js/README.md: Removed.
442         * Air.js/airjs-tests.yaml: Removed.
443         * Air.js/all.js: Removed.
444         * Air.js/allocate_stack.js: Removed.
445         * Air.js/arg.js: Removed.
446         * Air.js/basic_block.js: Removed.
447         * Air.js/benchmark.js: Removed.
448         * Air.js/code.js: Removed.
449         * Air.js/custom.js: Removed.
450         * Air.js/frequented_block.js: Removed.
451         * Air.js/insertion_set.js: Removed.
452         * Air.js/inst.js: Removed.
453         * Air.js/liveness.js: Removed.
454         * Air.js/make_dist.sh: Removed.
455         * Air.js/opcode.js: Removed.
456         * Air.js/payload-airjs-ACLj8C.js: Removed.
457         * Air.js/payload-gbemu-executeIteration.js: Removed.
458         * Air.js/payload-imaging-gaussian-blur-gaussianBlur.js: Removed.
459         * Air.js/payload-typescript-scanIdentifier.js: Removed.
460         * Air.js/reg.js: Removed.
461         * Air.js/stack_slot.js: Removed.
462         * Air.js/stress-test.js: Removed.
463         * Air.js/strip-hash.rb: Removed.
464         * Air.js/symbols.js: Removed.
465         * Air.js/test.html: Removed.
466         * Air.js/test.js: Removed.
467         * Air.js/tmp.js: Removed.
468         * Air.js/tmp_base.js: Removed.
469         * Air.js/util.js: Removed.
470         * Basic: Removed.
471         * Basic/ast.js: Removed.
472         * Basic/basic.js: Removed.
473         * Basic/benchmark.js: Removed.
474         * Basic/caseless_map.js: Removed.
475         * Basic/lexer.js: Removed.
476         * Basic/number.js: Removed.
477         * Basic/parser.js: Removed.
478         * Basic/random.js: Removed.
479         * Basic/state.js: Removed.
480         * Basic/test.html: Removed.
481         * Basic/test.js: Removed.
482         * Basic/util.js: Removed.
483         * ES6SampleBench: Added.
484         * ES6SampleBench/Air: Copied from PerformanceTests/Air.js.
485         * ES6SampleBench/Basic: Copied from PerformanceTests/Basic.
486         * Skipped:
487
488 2016-06-24  Filip Pizlo  <fpizlo@apple.com>
489
490         Add a ES6 generator benchmark
491         https://bugs.webkit.org/show_bug.cgi?id=159101
492
493         Rubber stamped by Keith Miller.
494         
495         This adds a Basic interpreter loosely based on ECMA-55:
496         
497         http://www.ecma-international.org/publications/files/ECMA-ST-WITHDRAWN/ECMA-55,%201st%20Edition,%20January%201978.pdf
498         
499         It includes a lexer that is a generator, a parser that uses regular expressions, and an AST
500         walk interpreter where the walking functions for statements are generators that call each
501         other with yield*. This enables the interpreter to look like an AST walk even though it can
502         yield at INPUT and PRINT statements.
503         
504         This also uses for-of, classes, Map, and WeakMap. It also uses deprecated-but-awesome RegExp
505         features like RegExp.lastMatch and RegExp.rightContext. I did it that way because this is
506         how I've always written lexers in dynamic languages; see offlineasm's lex() method in
507         parser.rb for example.
508         
509         The benchmark runs a handful of simple Basic programs. The longest-running one computes
510         prime numbers.
511         
512         Includes a command-line and web harness. On my machine it runs in 2-3 seconds.
513
514         * Basic: Added.
515         * Basic/ast.js: Added.
516         (Basic.NumberApply):
517         (Basic.Variable):
518         (Basic.Const):
519         (Basic.NumberPow):
520         (Basic.NumberMul):
521         (Basic.NumberDiv):
522         (Basic.NumberNeg):
523         (Basic.NumberAdd):
524         (Basic.NumberSub):
525         (Basic.StringVar):
526         (Basic.Equals):
527         (Basic.NotEquals):
528         (Basic.LessThan):
529         (Basic.GreaterThan):
530         (Basic.LessEqual):
531         (Basic.GreaterEqual):
532         (Basic.GoTo):
533         (Basic.GoSub):
534         (Basic.Def):
535         (Basic.Let):
536         (Basic.If):
537         (Basic.Return):
538         (Basic.Stop):
539         (Basic.On):
540         (sideState.shouldStop):
541         (Basic.For):
542         (Basic.Next):
543         (Basic.Print):
544         (Basic.Input):
545         (Basic.Read):
546         (Basic.Restore):
547         (Basic.Dim):
548         (Basic.Randomize):
549         (Basic.End):
550         (Basic.Program):
551         * Basic/basic.js: Added.
552         (prepare):
553         (simulate):
554         * Basic/benchmark.js: Added.
555         (Benchmark):
556         (Benchmark.prototype.runIteration.expect):
557         (Benchmark.prototype.runIteration):
558         (runBenchmark):
559         * Basic/caseless_map.js: Added.
560         (CaselessMap):
561         * Basic/lexer.js: Added.
562         (lex.consumeWhitespace):
563         (lex.consume):
564         (lex):
565         * Basic/lexer_test.js: Added.
566         * Basic/number.js: Added.
567         (NumberValue):
568         (NumberValue.prototype.get value):
569         (NumberValue.prototype.apply):
570         (NumberValue.prototype.leftApply):
571         (NumberValue.prototype.assign):
572         (NumberArray.):
573         (NumberArray):
574         (NumberArray.prototype.apply):
575         (NumberArray.prototype.leftApply):
576         (NumberFunction):
577         (NumberFunction.prototype.apply):
578         (NumberFunction.prototype.leftApply):
579         (NativeFunction):
580         (NativeFunction.prototype.apply):
581         (NativeFunction.prototype.leftApply):
582         * Basic/parser.js: Added.
583         (parse):
584         (parse.pushToken):
585         (parse.peekToken):
586         (parse.consumeKind):
587         (parse.consumeToken):
588         (parse.parseVariable):
589         (parse.parseNumericExpression.parsePrimary):
590         (parse.parseNumericExpression.parseFactor):
591         (parse.parseNumericExpression.parseTerm):
592         (parse.parseNumericExpression):
593         (parse.parseConstant):
594         (parse.parseStringExpression):
595         (parse.isStringExpression):
596         (parse.parseRelationalExpression):
597         (parse.parseNonNegativeInteger):
598         (parse.parseGoToStatement):
599         (parse.parseGoSubStatement):
600         (parse.parseStatement):
601         (parse.parseStatements):
602         * Basic/random.js: Added.
603         (createRNG):
604         (createRNGWithFixedSeed):
605         (createRNGWithRandomSeed):
606         * Basic/state.js: Added.
607         (State):
608         (State.prototype.getValue):
609         (State.prototype.getSideState):
610         (State.prototype.abort):
611         (State.prototype.validate):
612         * Basic/test.html: Added.
613         * Basic/test.js: Added.
614         * Basic/util.js: Added.
615         (this.performance.performance.now.currentTime):
616         (else.this.preciseTime.currentTime):
617         (else.currentTime):
618         * Skipped: Make sure that we don't run Basic yet.
619
620 2016-06-21  Jon Lee  <jonlee@apple.com>
621
622         Update canvas size when benchmark begins
623         https://bugs.webkit.org/show_bug.cgi?id=159010
624
625         Reviewed by Dean Jackson.
626
627         Previously we would evaluate the media queries and assign the canvas size to the test
628         on body.onload. Instead, do it once the user starts the benchmark.
629
630         * Animometer/resources/debug-runner/animometer.js: Move benchmarkController.determineCanvasSize()
631         to benchmarkController._startBenchmark.
632         * Animometer/resources/runner/animometer.js: Ditto.
633
634 2016-06-21  Jon Lee  <jonlee@apple.com>
635
636         Add new timestamp option
637         https://bugs.webkit.org/show_bug.cgi?id=159006
638
639         Reviewed by Dean Jackson.
640
641         Add a new option to take timestamps from the rAF callback.
642
643         * Animometer/developer.html: Added option.
644         * Animometer/tests/resources/main.js:
645         (Benchmark): Fall back to using the rAF timestamp if performance.now()
646         is not available.
647         (Benchmark._animateLoop): Update how timestamp is set. Prefer to use
648         local var instead of accessing private var.
649
650 2016-06-21  Jon Lee  <jonlee@apple.com>
651
652         Improvements to Animometer benchmark
653         https://bugs.webkit.org/show_bug.cgi?id=157738
654
655         Reviewed by Dean Jackson.
656         Provisionally reviewed by Said Abou-Hallawa.
657
658         Update tests.
659
660         * Animometer/tests/master/text.html: Ensure only three text sizes for
661         the three canvases.
662         * Animometer/tests/master/focus.html: Reduce the text size to fit with smaller
663         particle sizes.
664         * Animometer/tests/master/resources/focus.js: Remove the quadratic distribution for
665         particle sizes, and make it linear. Reduce the size variance. Shuffle the math to
666         reduce some calculations per frame. Fix the placement of the particles which might
667         otherwise be culled.
668         * Animometer/tests/master/resources/image-data.js: Reduce the particle size
669         to encourage larger scores.
670
671 2016-06-21  Jon Lee  <jonlee@apple.com>
672
673         Improvements to Animometer benchmark
674         https://bugs.webkit.org/show_bug.cgi?id=157738
675
676         Reviewed by Dean Jackson.
677         Provisionally reviewed by Said Abou-Hallawa.
678
679         Include confidence interval for the final score, and store the canvas
680         size in the serialization so that it is accurately shown in results.
681
682         * Animometer/developer.html: Add a "confidence" div.
683         * Animometer/index.html: Ditto. Convert "mean" to "confidence".
684         * Animometer/resources/debug-runner/animometer.js: Look at options, and
685         if the configuration is included, update the body class based on it
686         (similar to what we do when we first load the page). That way, if you
687         drag-and-drop previous results in, that configuration is reflected in
688         the dashboard. Show the full confidence interval.
689
690         * Animometer/resources/debug-runner/animometer.css:
691         * Animometer/resources/debug-runner/animometer.js: Style update.
692         * Animometer/resources/runner/animometer.css:
693
694         * Animometer/resources/runner/animometer.js:
695         (_processData): Propagate the confidence interval values out and calculate
696         the lower and upper bounds. For now, shortcut the aggregate calculation,
697         since we only go through one iteration.
698         (this._processData.calculateScore): Propagate the confidence interval out
699         to be next to the score. Depending on the controller these values are
700         calculated differently.
701         (this._processData._getResultsProperty): Convenience function.
702         (this._processData.get score): Refactor.
703         (this._processData.get scoreLowerBound): Get the aggregate lower bound.
704         (this._processData.get scoreUpperBound): Get the aggregate upper bound.
705         (window.sectionsManager.setSectionScore):
706         (window.benchmarkController._startBenchmark): When the benchmark starts, note
707         the canvas size and add it to options. That way it will be automatically be
708         serialized.
709         (window.benchmarkController.showResults): Include the maximum deviation
710         percentage.
711         * Animometer/resources/runner/lines.svg: Make the background line up with the
712         skew.
713         * Animometer/resources/runner/tests.js:
714         (Headers.details.text): Refactor.
715         * Animometer/resources/statistics.js:
716         (Statistics.largestDeviationPercentage): Convenience function to calculate
717         the deviation percentage on either end and return the largest deviation.
718         * Animometer/resources/strings.js:
719
720         Allow specifying a regression profile to use instead of taking the one
721         with the lowest error.
722
723         Address an issue in the focus test when the regression calculated ends
724         up overestimating the change point, causing a cascade of tougher
725         ramps. The reason behind this is that at max complexity of an initial
726         ramp, the frame length is very high, and it influences the second
727         segment of the piecewise regression strongly, causing it to be very
728         steep. As a result, the first segment, expected to be flat, ends up
729         covering a higher range of complexity. That makes the change point
730         much higher than it should be. To avoid this, we will add a sanity
731         check on the maximum value of the ramp. If the regression's projected
732         value at the maximum complexity of the current ramp is very slow (less
733         than 20 fps), 1) reduce the maximum complexity by 20%, and 2) do not
734         include the regression's change point in the change point estimator.
735         That estimator is used as the midpoint of the next ramp, and including
736         the change point from a poor regression can bake in the error. The
737         controller already knows how to adjust for ramps that are too easy for
738         the system.
739
740         * Animometer/resources/runner/animometer.js:
741         (this._processData.findRegression): Takes a preferred profile and gives that to
742         Regression.
743         (this._processData.calculateScore): With the ramp controller, take the profile
744         of the ramp that was used the most when calculating the ramp's regression. That
745         profile is what is used for the test's score.
746         * Animometer/resources/statistics.js:
747         (Regression.Utilities.createClass): Update to take an options object which can
748         specify a profile to calculate with. Otherwise it will continue to use both and
749         select the one with the lower error.
750         (_calculateRegression): Fix an issue where we claim 0 error if the regression
751         calculation fails due to divide-by-zero. Instead reject that regression calculation
752         by giving it Number.MAX_VALUE.
753         * Animometer/resources/strings.js: New strings for marking a regression as flat
754         or slope.
755         * Animometer/tests/resources/main.js:
756         (RampController): Rename the thresholds for clarity. Add a threshold that, if
757         exceeded, will lower the maximum complexity of the next ramp.
758         (tune): Relax the cdf check to consider whether the interval definitely falls in
759         the desired frame length threshold.
760         (processSamples): Include the profile in the ramp.
761
762         Update ramp controller test. Increase the length of the test to 30 seconds, and extend
763         the interval to 120 ms during sampling. Improve the estimation of the ramp parameters.
764
765         * Animometer/developer.html: Change default to 30 seconds, and don't show the progress bar
766         by default.
767         * Animometer/resources/runner/animometer.js: Change default to 30 seconds.
768         * Animometer/tests/resources/main.js: A number of improvements to the ramp controller, in
769         the order in which they appear in the patch:
770
771         - With a longer test length use longer ramps with longer intervals to get more data at each
772         complexity. Keep the 100 ms interval length during the ramp up phase since we don't need to
773         spend more time there to find the right order of magnitude, but increase it during the
774         ramps to 120 ms.
775         - The ramp linearly interpolates the complexity to render based on its timestamp, but it would
776         never sample the minimum complexity. Instead of lerping max to min complexity from time
777         0 to t where t is the ramp length, instead lerp from 0 to (t - intervalSampleLength) so that
778         we can have at least one interval sample at the min complexity for that ramp.
779         - Some regression calculations only come out with one line segment rather than the two
780         we expect. This could be due to a noisy ramp or the ramp's range is too narrow. If that's the
781         case, influence the minimum complexity of the next ramp towards the lowest bound of 1, so that
782         we ensure that at least part of the ramp is covering a complexity range that the system can
783         handle at full 60.
784         - Remove an assignment to interpolatedFrameLength since that is never subsequently used.
785
786         Update the format used to serialize the results for analysis.
787
788         Each data point used to have named properties for fields like complexity and frame rate.
789         In addition the serialized numbers had rounding errors that took up many characters.
790         Update the format by introducing a new data container called SampleData, which contains a
791         field map. The map maps a string to an array index. Each data point is an array, so, to
792         get a stat, use the field map to get the array index into the data point. This allows future
793         versions to track other data, and reduces the size of the output string by two-thirds.
794
795         * Animometer/resources/extensions.js:
796         (Utilities.toFixedNumber): Add convenience function that truncates the number to a fixed
797         precision, and converts it back to a number.
798         (SampleData): New class that contains sample data and a field map that maps properties to
799         an array index.
800         (get length): Number of data points.
801         (addField): Add a field to the field map.
802         (push): Add a data point.
803         (sort): Sort the data.
804         (slice): Return new SampleData object with sliced data.
805         (forEach): Iterate over the data with provided function.
806         (createDatum):
807         (getFieldInDatum): Returns the data point associated with the field name by looking it up
808         in the field map in the datum provided, which can be the datum object itself (an array) or
809         an index into the data member variable.
810         (setFieldInDatum): Sets the data point associated with the field name.
811         (at): Returns the data point at the provided index.
812         (toArray): Serializes the data where the field map serves as property names for each point.
813
814         * Animometer/resources/debug-runner/graph.js:
815         (updateGraphData): Remove unused _testData. Convert the data to the old array format for the
816         graph to use, since the old format was much easier to work with when displaying the graphs.
817         (onGraphTypeChanged): For some controllers, no alternative score or mean is provided.
818         * Animometer/resources/runner/animometer.css:
819         * Animometer/resources/runner/animometer.js: Refactor to use SampleData. Update JSON output
820         to only go to 3 digits of precision for purposes of reducing the data size.
821         * Animometer/resources/strings.js: Add new strings to put into the field maps.
822         * Animometer/tests/resources/main.js: Refactor to use SampleData.
823
824         * Animometer/developer.html:
825         * Animometer/index.html: Restructure results table for both pages. Add charset attribute to
826         tests.js include.
827         * Animometer/resources/debug-runner/animometer.css: Clear out styles from release runner.
828         * Animometer/resources/debug-runner/graph.js:
829         (onGraphTypeChanged): Update score and mean if bootstrap results are available from the
830         controller, since not all controllers do bootstrapping.
831         * Animometer/resources/debug-runner/tests.js: Update header text.
832         * Animometer/resources/runner/animometer.css: Include confidence interval in results.
833         * Animometer/resources/runner/animometer.js:
834         (ResultsTable._addHeader): Header contents can be HTML, so use innerHTML instead.
835         (ResultsTable._addBody): Add tbody element.
836         (ResultsTable._addTest): Allow a data cell to invoke a JS function to get its contents.
837         (window.benchmarkController.showResults): Add table that includes tests' confidence intervals.
838         * Animometer/resources/runner/tests.js:
839         (Headers.details.text): Add new details table that includes bootstrap confidence interval.
840         The interval can be asymmetric, but for simplicity, report the maximum deviation percentage
841         on either side of the bootstrap median.
842         * Animometer/resources/statistics.js:
843         (bootstrap): Include the confidence percentage in the return object.
844
845         Report canvas size in results.
846
847         * Animometer/developer.html: Add markup to indicate whether a small, medium, or large
848         canvas was used.
849         * Animometer/index.html: Ditto.
850         * Animometer/resources/debug-runner/animometer.js: Call determineCanvasSize().
851         * Animometer/resources/runner/animometer.css: Update styles to set the canvas based on the
852         body class size.
853         * Animometer/resources/runner/animometer.js:
854         (window.benchmarkController.initialize): Update styles to set the canvas based on the
855         body class size.
856         (window.benchmarkController.determineCanvasSize): Run various media queries and set the body
857         class based on the size of the device.
858
859         * Animometer/developer.html: Refactor to include the main CSS file, and redo
860         the layout so that it doesn't rely on flexbox.
861         * Animometer/resources/debug-runner/animometer.css:
862         * Animometer/resources/debug-runner/animometer.js:
863         (updateDisplay): Since various parts of the script alter the body class, we can't
864         replace the className directly. Instead, remove all display-based values and then add
865         the one that was selected.
866         * Animometer/resources/debug-runner/graph.js:
867         (updateGraphData): To set the size of the graph, use window.innerHeight.
868         * Animometer/resources/runner/animometer.js:
869         (window.sectionsManager.showSection): Since various parts of the script alter the body
870         class, we can't replace the className directly. Remove all of the section classes
871         individually and then add the one desired.
872         * Animometer/tests/resources/stage.css: Remove -apple-system as a font to use in the
873         stage.
874
875 2016-06-12  Filip Pizlo  <fpizlo@apple.com>
876
877         Fix round-down goof in Air.js's ShuffleCustom.forEachArg
878         https://bugs.webkit.org/show_bug.cgi?id=158674
879
880         Reviewed by Michael Saboff.
881         
882         x / 3 * 3 is not how you round down to multiples of 3 in JavaScript. You need to do
883         Math.floor(x / 3) * 3 instead.
884         
885         This is a benign change, because having extra arguments to a Shuffle is not something we
886         actually take advantage of yet. But I think it's best to match the original C++ code's
887         intent.
888
889         * Air.js/custom.js:
890         (const.ShuffleCustom.forEachArg):
891
892 2016-06-11  Filip Pizlo  <fpizlo@apple.com>
893
894         Unreviewed, skip Air.js. It got unskipped when I renamed it from JSAir.
895
896         * Skipped:
897
898 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
899
900         Make it easy to package Air.js
901         https://bugs.webkit.org/show_bug.cgi?id=158652
902
903         Reviewed by Benjamin Poulain.
904         
905         If you want to give Air.js to someone, you can now do:
906         
907         cd PerformanceTests/Air.js
908         ./make_dist.sh
909         
910         This will create Air.js.tar.gz and a directory called Air.js. If you want to send someone
911         the benchmark, just send either of those things and tell them to look at index.html.
912         
913         You may have to edit make_dist.sh for wherever you have Markdown.pl. You can get that from
914         https://daringfireball.net/projects/markdown/
915
916         * Air.js/make_dist.sh: Added.
917         * Air.js/test.html:
918
919 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
920
921         Unreviewed, make the link to test.html into an actual link.
922
923         * Air.js/README.md:
924
925 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
926
927         Fix some text in Air.js/README.md
928         https://bugs.webkit.org/show_bug.cgi?id=158650
929
930         Reviewed by Benjamin Poulain.
931         
932         I read the text again and found bugs:
933         
934         - We never actually say how to run the benchmark. This change adds a blurb about how to run
935           it.
936
937         - We both say that allocateStack is responsible for the bulk of the running time and that
938           we haven't measured where the bulk of the time is spent. This changes the text to say that
939           it was a goal to make allocateStack be the hottest part of the benchmark, but that we did
940           not measure this.
941
942         * Air.js/README.md:
943
944 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
945
946         Air.js should have some documentation
947         https://bugs.webkit.org/show_bug.cgi?id=158648
948
949         Reviewed by Keith Miller.
950         
951         I want to be able to point people at a document if they want to know more about this
952         benchmark.
953
954         * Air.js/README.md: Added.
955
956 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
957
958         Rename JSAir to Air.js.
959
960         Rubber stamped by Mark Lam.
961
962         * Air.js: Copied from PerformanceTests/JSAir.
963         * Air.js/airjs-tests.yaml: Copied from PerformanceTests/JSAir/jsair-tests.yaml.
964         * Air.js/benchmark.js: Copied from PerformanceTests/JSAir/benchmark.js.
965         (Benchmark):
966         * Air.js/jsair-tests.yaml: Removed.
967         * Air.js/payload-airjs-ACLj8C.js: Copied from PerformanceTests/JSAir/payload-jsair-ACLj8C.js.
968         * Air.js/payload-jsair-ACLj8C.js: Removed.
969         * Air.js/stress-test.js: Copied from PerformanceTests/JSAir/stress-test.js.
970         * Air.js/test.html: Copied from PerformanceTests/JSAir/test.html.
971         * Air.js/test.js: Copied from PerformanceTests/JSAir/test.js.
972         * JSAir: Removed.
973         * JSAir/all.js: Removed.
974         * JSAir/allocate_stack.js: Removed.
975         * JSAir/arg.js: Removed.
976         * JSAir/basic_block.js: Removed.
977         * JSAir/benchmark.js: Removed.
978         * JSAir/code.js: Removed.
979         * JSAir/custom.js: Removed.
980         * JSAir/frequented_block.js: Removed.
981         * JSAir/insertion_set.js: Removed.
982         * JSAir/inst.js: Removed.
983         * JSAir/jsair-tests.yaml: Removed.
984         * JSAir/liveness.js: Removed.
985         * JSAir/opcode.js: Removed.
986         * JSAir/payload-gbemu-executeIteration.js: Removed.
987         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js: Removed.
988         * JSAir/payload-jsair-ACLj8C.js: Removed.
989         * JSAir/payload-typescript-scanIdentifier.js: Removed.
990         * JSAir/reg.js: Removed.
991         * JSAir/stack_slot.js: Removed.
992         * JSAir/stress-test.js: Removed.
993         * JSAir/strip-hash.rb: Removed.
994         * JSAir/symbols.js: Removed.
995         * JSAir/test.html: Removed.
996         * JSAir/test.js: Removed.
997         * JSAir/tmp.js: Removed.
998         * JSAir/tmp_base.js: Removed.
999         * JSAir/util.js: Removed.
1000
1001 2016-06-10  Filip Pizlo  <fpizlo@apple.com>
1002
1003         JSC Stress Test failing: jsair-tests.yaml/test.js.ftl-eager-no-cjit
1004         https://bugs.webkit.org/show_bug.cgi?id=158571
1005
1006         Reviewed by Keith Miller.
1007         
1008         Introduce a different harness for run-jsc-stress-tests, which runs for a minimum of 10
1009         iterations and then tries to do any number of "bonus" iterations until it's been running for
1010         two seconds. Since this is the sort of test that isn't really meant to stress anything in
1011         particular, I think it's OK if it is time-limited in this way. The worst case is that some
1012         of its failures will be flaky, but I think that they would have been flaky anyway given the
1013         complexity of the test.
1014
1015         * JSAir/benchmark.js:
1016         (Benchmark):
1017         (Benchmark.prototype.runIteration):
1018         (benchmark): Deleted.
1019         * JSAir/jsair-tests.yaml:
1020         * JSAir/stress-test.js: Added.
1021         (preciseTime):
1022         * JSAir/test.html:
1023         * JSAir/test.js:
1024
1025 2016-06-09  Filip Pizlo  <fpizlo@apple.com>
1026
1027         Unreviewed, teach the perf bots not to run JSAir.
1028
1029         * Skipped:
1030
1031 2016-06-08  Filip Pizlo  <fpizlo@apple.com>
1032
1033         Use more ES6 features in JSAir
1034         https://bugs.webkit.org/show_bug.cgi?id=158497
1035
1036         Reviewed by Keith Miller.
1037         
1038         This improves JSAir with the following ES6 features suggested by JoePeck:
1039         
1040         - String interpolation.
1041         - Destructuring inside PatchCustom.
1042         - Default arguments.
1043         
1044         All of these things are on hot paths.
1045         
1046         Note that I didn't use string interpolation everywhere that I could, only in those places
1047         where it made the code more readable. In Ruby, I used the style that if the interpolation
1048         expression has any non-trivial stuff (like a ternary operator, a chain of calls, or embedded
1049         strings) then it's better to use regular strcat. I think that's what I carried over to here.
1050         
1051         Note that the previous change (Add result validation to JSAir) also made the Proxy code not
1052         dead, though it's not necessarily on the hot path. The Proxy isn't called into frequently
1053         but it's used from a function that is otherwise hot, so if calling into the Proxy prevents
1054         that function from being optimized then it will hurt so good.
1055         
1056         I also reenabled tail calls in a few places.
1057         
1058         This change doesn't seem to change the performance of the benchmark for us. That's expected
1059         since these ES6 features are cheap. Note that this claim doesn't include Proxy, which was
1060         added in a separate change and that change did make the benchmark overall more expensive.
1061
1062         * JSAir/allocate_stack.js:
1063         (allocateStack):
1064         * JSAir/arg.js:
1065         (Arg.createBitImm64):
1066         (Arg.createAddr):
1067         (Arg.createStack):
1068         (Arg.logScale):
1069         (Arg.createIndex):
1070         * JSAir/basic_block.js:
1071         (BasicBlock.get headerString):
1072         (BasicBlock.prototype.get if):
1073         (BasicBlock):
1074         * JSAir/benchmark.js:
1075         (benchmark):
1076         * JSAir/code.js:
1077         (Code):
1078         (Code.prototype.addBlock):
1079         (Code.prototype.addStackSlot):
1080         (Code.prototype.newTmp):
1081         (Code.prototype.get size):
1082         (Code.prototype.get blocks):
1083         (Code.prototype.get stackSlots):
1084         (Code.prototype.tmps):
1085         (Code.prototype.get callArgAreaSize):
1086         (Code.prototype.toString):
1087         * JSAir/custom.js:
1088         (const.PatchCustom.forEachArg):
1089         * JSAir/inst.js:
1090         (Inst):
1091         * JSAir/reg.js:
1092         (Reg.prototype.toString):
1093         * JSAir/util.js:
1094         (symbolName):
1095         (lowerSymbolName):
1096
1097 2016-06-07  Filip Pizlo  <fpizlo@apple.com>
1098
1099         Add result validation to JSAir
1100         https://bugs.webkit.org/show_bug.cgi?id=158493
1101
1102         Reviewed by Saam Barati.
1103         
1104         This adds the ability to hash a Code in a way that matches the C++ code's hashing of Code.
1105         This allows us to check if the Code that JSAir sees is the code that C++ saw. We use this to
1106         check the Code before and after allocateStack, and compare against hashes we got from C++.
1107         
1108         Doing this uncovered bugs. roundUpToMultipleOf wasn't doing anything. allocateStack was not
1109         allocating things correctly because I was concatting a Set to an Array, which doesn't really
1110         work. Now these bugs are fixed.
1111         
1112         The checking step adds to the running time so I reduced the number of iterations. The
1113         benchmark spends a decent amount of its time computing Code hashes; I think it's around 1/3
1114         total. This is probably OK. It's better to verify the results even if the running time is
1115         not all in the "core" of the algorithm.
1116         
1117         Also add a run-jsc-stress-tests yaml file to allow this to run as a test.
1118
1119         * JSAir/allocate_stack.js:
1120         * JSAir/arg.js:
1121         (Arg.createImm):
1122         (Arg.createBigImm):
1123         (Arg.createBitImm):
1124         (Arg.createBitImm64):
1125         (Arg.createWidth):
1126         (Arg.createSpecial):
1127         (Arg.prototype.get kind):
1128         (Arg.prototype.get isTmp):
1129         (Arg.prototype.get isImm):
1130         (Arg.prototype.get isSomeImm):
1131         (Arg.prototype.get isSomeBigImm):
1132         (Arg.prototype.get isCondition):
1133         (Arg.prototype.get isWidth):
1134         (Arg.prototype.get isSpecial):
1135         (Arg.prototype.get isAlive):
1136         (Arg.prototype.get tmp):
1137         (Arg.prototype.get value):
1138         (Arg.prototype.get lowValue):
1139         (Arg.prototype.get highValue):
1140         (Arg.prototype.get base):
1141         (Arg.prototype.get isGP):
1142         (Arg.prototype.get isFP):
1143         (Arg.prototype.isValidForm):
1144         (Arg.prototype.get isInvertible):
1145         (Arg.kindCode):
1146         (Arg.prototype.hash):
1147         (Arg.prototype.toString):
1148         (Arg):
1149         * JSAir/basic_block.js:
1150         (BasicBlock.get successorBlocks):
1151         * JSAir/benchmark.js:
1152         (benchmark):
1153         * JSAir/code.js:
1154         (Code.prototype.setFrameSize):
1155         (Code.prototype.hash):
1156         (Code.prototype.toString):
1157         (Code):
1158         * JSAir/inst.js:
1159         (Inst.prototype.get hasNonArgEffects):
1160         (Inst.prototype.hash):
1161         (Inst.prototype.toString):
1162         (Inst):
1163         * JSAir/jsair-tests.yaml: Added.
1164         * JSAir/opcode.js:
1165         (Inst_forEachArg):
1166         (Inst_hasNonArgEffects):
1167         (opcodeCode):
1168         * JSAir/payload-gbemu-executeIteration.js:
1169         (createPayloadGbemuExecuteIteration):
1170         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js:
1171         (createPayloadImagingGaussianBlurGaussianBlur):
1172         * JSAir/payload-jsair-ACLj8C.js:
1173         (createPayloadJSAirACLj8C):
1174         * JSAir/payload-typescript-scanIdentifier.js:
1175         (createPayloadTypescriptScanIdentifier):
1176         * JSAir/reg.js:
1177         (Reg.prototype.get isReg):
1178         (Reg.prototype.hash):
1179         (Reg.prototype.toString):
1180         * JSAir/stack_slot.js:
1181         (StackSlot.prototype.setOffsetFromFP):
1182         (StackSlot.prototype.hash):
1183         (StackSlot.prototype.toString):
1184         * JSAir/symbols.js:
1185         (relCondCode):
1186         (resCondCode):
1187         (doubleCondCode):
1188         * JSAir/test.html:
1189         * JSAir/tmp.js:
1190         (Tmp.prototype.get isReg):
1191         (Tmp.prototype.hash):
1192         (Tmp.prototype.toString):
1193         * JSAir/util.js:
1194         (roundUpToMultipleOf):
1195         (symbolName):
1196
1197 2016-06-07  Filip Pizlo  <fpizlo@apple.com>
1198
1199         Implement Air::allocateStack() in ES6 to see how much of a bad idea that is
1200         https://bugs.webkit.org/show_bug.cgi?id=158318
1201
1202         Reviewed by Saam Barati.
1203         
1204         This adds a new benchmark for us to play with called JSAir. It's a complete ES6
1205         implementation of Air's allocateStack() phase along with all of Air needed to run that
1206         phase. This includes things like stack slots, registers, temporaries, basic blocks,
1207         instructions, and all of the code for iterating over, inspecting, and modifying those
1208         things.
1209         
1210         To make this work, JSC can now dump Air just before allocateStack() in the form of JS code
1211         that creates a Code object that matches exactly what C++ Air saw. This benchmark comprises
1212         four Air IRs:
1213         
1214         - Octane/gbemu's largest function, executeIteration.
1215         - Kraken/imaging-gaussian-blur's largest function in OSR entry mode, gaussuanBlur.
1216         - Octane/typescript's largest function that is actually hot, scanIdentifier.
1217         - JSAir's largest hot function, which is anonymous, so we call it by its hash (ACLj8C).
1218         
1219         This runs in about 2 seconds on my machine in JSC trunk. It includes both a commandline
1220         harness and a web harness. JSAir is almost exactly 100x slower in ES6 in WebKit than the
1221         C++ Air::allocateStack() phase on which it is based.
1222         
1223         JSAir uses the following ES6 features:
1224         
1225         - Symbol.
1226         - for-of.
1227         - arrow functions.
1228         - Map/Set.
1229         - let/const.
1230         - classes.
1231         
1232         All of these things are used in anger and should end up on the hot path. There is also code
1233         that uses Proxies, but it ends up being dead.
1234         
1235         We can improve this even more:
1236         I still need to add result validation: https://bugs.webkit.org/show_bug.cgi?id=158493
1237         I want to make it use more ES6 features: https://bugs.webkit.org/show_bug.cgi?id=158497
1238         
1239         * JSAir: Added.
1240         * JSAir/all.js: Added.
1241         * JSAir/allocate_stack.js: Added.
1242         (allocateStack.attemptAssignment):
1243         (allocateStack.assign):
1244         (allocateStack.interfere):
1245         (allocateStack.):
1246         (allocateStack):
1247         * JSAir/arg.js: Added.
1248         (Arg):
1249         (Arg.isAnyUse):
1250         (Arg.isColdUse):
1251         (Arg.isWarmUse):
1252         (Arg.cooled):
1253         (Arg.isEarlyUse):
1254         (Arg.isLateUse):
1255         (Arg.isAnyDef):
1256         (Arg.isEarlyDef):
1257         (Arg.isLateDef):
1258         (Arg.isZDef):
1259         (Arg.typeForB3Type):
1260         (Arg.widthForB3Type):
1261         (Arg.conservativeWidth):
1262         (Arg.minimumWidth):
1263         (Arg.bytes):
1264         (Arg.widthForBytes):
1265         (Arg.createTmp):
1266         (Arg.fromReg):
1267         (Arg.createImm):
1268         (Arg.createBigImm):
1269         (Arg.createBitImm):
1270         (Arg.createBitImm64):
1271         (Arg.createAddr):
1272         (Arg.createStack):
1273         (Arg.createCallArg):
1274         (Arg.createStackAddr):
1275         (Arg.isValidScale):
1276         (Arg.logScale):
1277         (Arg.createIndex):
1278         (Arg.createRelCond):
1279         (Arg.createResCond):
1280         (Arg.createDoubleCond):
1281         (Arg.createWidth):
1282         (Arg.prototype.get kind):
1283         (Arg.prototype.get isTmp):
1284         (Arg.prototype.get isImm):
1285         (Arg.prototype.get isBigImm):
1286         (Arg.prototype.get isBitImm):
1287         (Arg.prototype.get isBitImm64):
1288         (Arg.prototype.get isSomeImm):
1289         (Arg.prototype.get isAddr):
1290         (Arg.prototype.get isStack):
1291         (Arg.prototype.get isCallArg):
1292         (Arg.prototype.get isIndex):
1293         (Arg.prototype.get isMemory):
1294         (Arg.prototype.get isStackMemory):
1295         (Arg.prototype.get isRelCond):
1296         (Arg.prototype.get isResCond):
1297         (Arg.prototype.get isDoubleCond):
1298         (Arg.prototype.get isCondition):
1299         (Arg.prototype.get isWidth):
1300         (Arg.prototype.get isAlive):
1301         (Arg.prototype.get tmp):
1302         (Arg.prototype.get value):
1303         (Arg.prototype.get base):
1304         (Arg.prototype.get hasOffset):
1305         (Arg.prototype.get offset):
1306         (Arg.prototype.get stackSlot):
1307         (Arg.prototype.get index):
1308         (Arg.prototype.get scale):
1309         (Arg.prototype.get logScale):
1310         (Arg.prototype.get width):
1311         (Arg.prototype.get isGPTmp):
1312         (Arg.prototype.get isFPTmp):
1313         (Arg.prototype.get isGP):
1314         (Arg.prototype.get isFP):
1315         (Arg.prototype.get hasType):
1316         (Arg.prototype.get type):
1317         (Arg.prototype.isType):
1318         (Arg.prototype.isCompatibleType):
1319         (Arg.prototype.get isGPR):
1320         (Arg.prototype.get gpr):
1321         (Arg.prototype.get isFPR):
1322         (Arg.prototype.get fpr):
1323         (Arg.prototype.get isReg):
1324         (Arg.prototype.get reg):
1325         (Arg.isValidImmForm):
1326         (Arg.isValidBitImmForm):
1327         (Arg.isValidBitImm64Form):
1328         (Arg.isValidAddrForm):
1329         (Arg.isValidIndexForm):
1330         (Arg.prototype.isValidForm):
1331         (Arg.prototype.forEachTmpFast):
1332         (Arg.prototype.usesTmp):
1333         (Arg.prototype.forEachTmp):
1334         (Arg.prototype.is):
1335         (Arg.prototype.as):
1336         (Arg.prototype.forEachFast):
1337         (Arg.prototype.forEach):
1338         (Arg.extract):
1339         (Arg.forEachFast):
1340         (Arg.forEach):
1341         (Arg.prototype.get condition):
1342         (Arg.prototype.get isInvertible):
1343         (Arg.prototype.toString):
1344         * JSAir/basic_block.js: Added.
1345         (BasicBlock):
1346         (BasicBlock.prototype.get index):
1347         (BasicBlock.prototype.get size):
1348         (BasicBlock.prototype.Symbol.iterator):
1349         (BasicBlock.prototype.at):
1350         (BasicBlock.get last):
1351         (BasicBlock.get insts):
1352         (BasicBlock.get numSuccessors):
1353         (BasicBlock.get successors):
1354         (BasicBlock.get successorBlocks.):
1355         (BasicBlock.get successorBlocks):
1356         (BasicBlock.set get numPredecessors):
1357         (BasicBlock.get predecessors):
1358         (BasicBlock.get frequency):
1359         (BasicBlock.get headerString):
1360         (BasicBlock.get footerString):
1361         * JSAir/benchmark.js: Added.
1362         (benchmark):
1363         * JSAir/code.js: Added.
1364         (Code):
1365         (Code.prototype.addBlock):
1366         (Code.prototype.addStackSlot):
1367         (Code.prototype.newTmp):
1368         (Code.prototype.get size):
1369         (Code.prototype.at):
1370         (Code.prototype.Symbol.iterator):
1371         (Code.prototype.get blocks):
1372         (Code.prototype.get stackSlots):
1373         (Code.prototype.tmps):
1374         (Code.prototype.get callArgAreaSize):
1375         (Code.prototype.requestCallArgAreaSize):
1376         (Code.prototype.get frameSize):
1377         (Code.prototype.setFrameSize):
1378         (Code.prototype.toString):
1379         * JSAir/custom.js: Added.
1380         (const.ShuffleCustom.forEachArg):
1381         (const.ShuffleCustom.hasNonArgNonControlEffects):
1382         (const.PatchCustom.forEachArg):
1383         (const.PatchCustom.hasNonArgNonControlEffects):
1384         (const.CCallCustom.forEachArg):
1385         (const.CCallCustom.hasNonArgNonControlEffects):
1386         (const.ColdCCallCustom.forEachArg):
1387         (const.ColdCCallCustom.hasNonArgNonControlEffects):
1388         * JSAir/frequented_block.js: Added.
1389         (FrequentedBlock):
1390         (FrequentedBlock.prototype.toString):
1391         * JSAir/insertion_set.js: Added.
1392         (Insertion):
1393         (Insertion.prototype.get index):
1394         (Insertion.prototype.get element):
1395         (Insertion.prototype.lessThan):
1396         (InsertionSet):
1397         (InsertionSet.prototype.appendInsertion):
1398         (InsertionSet.prototype.append):
1399         (InsertionSet.prototype.execute):
1400         * JSAir/inst.js: Added.
1401         (Inst):
1402         (Inst.prototype.append):
1403         (Inst.prototype.clear):
1404         (Inst.prototype.get opcode):
1405         (Inst.prototype.get args):
1406         (Inst.prototype.visitArg):
1407         (Inst.prototype.forEachTmpFast):
1408         (Inst.prototype.forEachArg):
1409         (Inst.prototype.forEachTmp):
1410         (Inst.prototype.forEach):
1411         (Inst.forEachDef):
1412         (Inst.forEachDefWithExtraClobberedRegs):
1413         (Inst.prototype.get hasNonArgEffects):
1414         (Inst.prototype.toString):
1415         * JSAir/liveness.js: Added.
1416         (Liveness):
1417         (Liveness.prototype.get thing):
1418         (Liveness.prototype.get code):
1419         (Liveness.prototype.get liveAtHead):
1420         (Liveness.prototype.get liveAtTail):
1421         (Liveness.prototype.localCalc.LocalCalc):
1422         (Liveness.prototype.localCalc.LocalCalc.prototype.get liveSet):
1423         (Liveness.prototype.localCalc.LocalCalc.prototype.execute):
1424         (Liveness.prototype.localCalc):
1425         * JSAir/opcode.js: Added.
1426         (Inst_forEachArg):
1427         (Inst_hasNonArgEffects):
1428         * JSAir/payload-gbemu-executeIteration.js: Added.
1429         (createPayloadGbemuExecuteIteration):
1430         * JSAir/payload-imaging-gaussian-blur-gaussianBlur.js: Added.
1431         (createPayloadImagingGaussianBlurGaussianBlur):
1432         * JSAir/payload-jsair-ACLj8C.js: Added.
1433         (createPayloadJSAirACLj8C):
1434         * JSAir/payload-typescript-scanIdentifier.js: Added.
1435         (createPayloadTypescriptScanIdentifier):
1436         * JSAir/reg.js: Added.
1437         (Reg):
1438         (Reg.fromReg):
1439         (Reg.prototype.get index):
1440         (Reg.prototype.get type):
1441         (Reg.prototype.get name):
1442         (Reg.prototype.get isCalleeSave):
1443         (Reg.prototype.get isReg):
1444         (Reg.prototype.toString):
1445         (Reg.extract):
1446         (Reg.forEachFast):
1447         (Reg.forEach):
1448         (newGPR):
1449         (Reg.gprs.Reg.fprs.Reg.calleeSaveGPRs.Reg.calleeSaveFPRs.Reg.calleeSaves):
1450         * JSAir/stack_slot.js: Added.
1451         (StackSlot):
1452         (StackSlot.prototype.get byteSize):
1453         (StackSlot.prototype.get kind):
1454         (StackSlot.prototype.get isLocked):
1455         (StackSlot.prototype.get isSpill):
1456         (StackSlot.prototype.get index):
1457         (StackSlot.prototype.ensureSize):
1458         (StackSlot.prototype.get alignment):
1459         (StackSlot.prototype.get offsetFromFP):
1460         (StackSlot.prototype.setOffsetFromFP):
1461         (StackSlot.prototype.toString):
1462         (StackSlot.extract):
1463         (StackSlot.forEachFast):
1464         (StackSlot.forEach):
1465         * JSAir/symbols.js: Added.
1466         * JSAir/test.html: Added.
1467         * JSAir/test.js: Added.
1468         * JSAir/tmp.js: Added.
1469         (Tmp):
1470         (Tmp.fromReg):
1471         (Tmp.prototype.get index):
1472         (Tmp.prototype.get type):
1473         (Tmp.prototype.get isReg):
1474         (Tmp.prototype.toString):
1475         (Tmp.extract):
1476         (Tmp.forEachFast):
1477         (Tmp.forEach):
1478         * JSAir/tmp_base.js: Added.
1479         (TmpBase.prototype.get isGP):
1480         (TmpBase.prototype.get isFP):
1481         (TmpBase.prototype.get isGPR):
1482         (TmpBase.prototype.get isFPR):
1483         (TmpBase.prototype.get reg):
1484         (TmpBase.prototype.get gpr):
1485         (TmpBase.prototype.get fpr):
1486         (TmpBase):
1487         * JSAir/util.js: Added.
1488         (isRepresentableAsInt32):
1489         (addIndexed):
1490         (roundUpToMultipleOf):
1491         (symbolName):
1492         (mergeIntoSet):
1493         (nonEmptyRangesOverlap):
1494         (rangesOverlap):
1495         (removeAllMatching):
1496         (swap):
1497         (bubble):
1498         (bubbleSort):
1499         (currentTime):
1500         (else.currentTime):
1501
1502 2016-05-26  Yusuke Suzuki  <utatane.tea@gmail.com>
1503
1504         [JSC] Allow JSBench to use precise time
1505         https://bugs.webkit.org/show_bug.cgi?id=158050
1506
1507         Reviewed by Geoffrey Garen.
1508
1509         * JSBench/amazon-chrome-win/urem.js:
1510         (else.window.performance.window.performance.now.currentTimeInMS):
1511         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1512         (else.else.currentTimeInMS):
1513         (onload.cb):
1514         (onload):
1515         * JSBench/amazon-chrome/urem.js:
1516         (else.window.performance.window.performance.now.currentTimeInMS):
1517         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1518         (else.else.currentTimeInMS):
1519         (onload.cb):
1520         (onload):
1521         * JSBench/amazon-firefox-win/urm.js:
1522         (else.window.performance.window.performance.now.currentTimeInMS):
1523         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1524         (else.else.currentTimeInMS):
1525         (onload.cb):
1526         (onload):
1527         * JSBench/amazon-firefox/urm.js:
1528         (else.window.performance.window.performance.now.currentTimeInMS):
1529         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1530         (else.else.currentTimeInMS):
1531         (onload.cb):
1532         (onload):
1533         * JSBench/amazon-safari/urem.js:
1534         (else.window.performance.window.performance.now.currentTimeInMS):
1535         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1536         (else.else.currentTimeInMS):
1537         (onload.cb):
1538         (onload):
1539         * JSBench/facebook-chrome-win/urem.js:
1540         (else.window.performance.window.performance.now.currentTimeInMS):
1541         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1542         (else.else.currentTimeInMS):
1543         (onload.cb):
1544         (onload):
1545         * JSBench/facebook-chrome/urem.js:
1546         (else.window.performance.window.performance.now.currentTimeInMS):
1547         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1548         (else.else.currentTimeInMS):
1549         (onload.cb):
1550         (onload):
1551         * JSBench/facebook-firefox-win/urem.js:
1552         (else.window.performance.window.performance.now.currentTimeInMS):
1553         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1554         (else.else.currentTimeInMS):
1555         (onload.cb):
1556         (onload):
1557         * JSBench/facebook-firefox/urem.js:
1558         (else.window.performance.window.performance.now.currentTimeInMS):
1559         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1560         (else.else.currentTimeInMS):
1561         (onload.cb):
1562         (onload):
1563         * JSBench/facebook-safari/urem.js:
1564         (else.window.performance.window.performance.now.currentTimeInMS):
1565         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1566         (else.else.currentTimeInMS):
1567         (onload.cb):
1568         (onload):
1569         * JSBench/google-chrome-win/urem.js:
1570         (else.window.performance.window.performance.now.currentTimeInMS):
1571         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1572         (else.else.currentTimeInMS):
1573         (onload.cb):
1574         (onload):
1575         * JSBench/google-chrome/urem.js:
1576         (else.window.performance.window.performance.now.currentTimeInMS):
1577         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1578         (else.else.currentTimeInMS):
1579         (onload.cb):
1580         (onload):
1581         * JSBench/google-firefox-win/urem.js:
1582         (else.window.performance.window.performance.now.currentTimeInMS):
1583         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1584         (else.else.currentTimeInMS):
1585         (onload.cb):
1586         (onload):
1587         * JSBench/google-firefox/uem.js:
1588         (else.window.performance.window.performance.now.currentTimeInMS):
1589         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1590         (else.else.currentTimeInMS):
1591         (onload.cb):
1592         (onload):
1593         * JSBench/google-safari/urem.js:
1594         (else.window.performance.window.performance.now.currentTimeInMS):
1595         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1596         (else.else.currentTimeInMS):
1597         (onload.cb):
1598         (onload):
1599         * JSBench/harness.js:
1600         (runBenchmark.window.currentTimeInMS):
1601         (runBenchmark.else.window.currentTimeInMS):
1602         * JSBench/twitter-chrome-win/rem.js:
1603         (else.window.performance.window.performance.now.currentTimeInMS):
1604         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1605         (else.else.currentTimeInMS):
1606         (onload.cb):
1607         (onload):
1608         * JSBench/twitter-chrome/urem.js:
1609         (else.window.performance.window.performance.now.currentTimeInMS):
1610         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1611         (else.else.currentTimeInMS):
1612         (onload.cb):
1613         (onload):
1614         * JSBench/twitter-firefox-win/urem.js:
1615         (else.window.performance.window.performance.now.currentTimeInMS):
1616         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1617         (else.else.currentTimeInMS):
1618         (onload.cb):
1619         (onload):
1620         * JSBench/twitter-firefox/urem.js:
1621         (else.window.performance.window.performance.now.currentTimeInMS):
1622         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1623         (else.else.currentTimeInMS):
1624         (onload.cb):
1625         (onload):
1626         * JSBench/twitter-safari/urem.js:
1627         (else.window.performance.window.performance.now.currentTimeInMS):
1628         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1629         (else.else.currentTimeInMS):
1630         (onload.cb):
1631         (onload):
1632         * JSBench/yahoo-chrome-win/urem.js:
1633         (else.window.performance.window.performance.now.currentTimeInMS):
1634         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1635         (else.else.currentTimeInMS):
1636         (onload.cb):
1637         (onload):
1638         * JSBench/yahoo-chrome/urem.js:
1639         (else.window.performance.window.performance.now.currentTimeInMS):
1640         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1641         (else.else.currentTimeInMS):
1642         (onload.cb):
1643         (onload):
1644         * JSBench/yahoo-firefox-win/urem.js:
1645         (else.window.performance.window.performance.now.currentTimeInMS):
1646         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1647         (else.else.currentTimeInMS):
1648         (onload.cb):
1649         (onload):
1650         * JSBench/yahoo-firefox/urem.js:
1651         (else.window.performance.window.performance.now.currentTimeInMS):
1652         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1653         (else.else.currentTimeInMS):
1654         (onload.cb):
1655         (onload):
1656         * JSBench/yahoo-safari/urem.js:
1657         (else.window.performance.window.performance.now.currentTimeInMS):
1658         (else.else.typeof.preciseTime.string_appeared_here.currentTimeInMS):
1659         (else.else.currentTimeInMS):
1660         (onload.cb):
1661         (onload):
1662
1663 2016-05-25  Geoffrey Garen  <ggaren@apple.com>
1664
1665         replaceable own properties seem to ignore replacement after property caching
1666         https://bugs.webkit.org/show_bug.cgi?id=158091
1667
1668         Reviewed by Darin Adler.
1669
1670         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
1671         * MallocBench/MallocBench/Benchmark.cpp:
1672         * MallocBench/MallocBench/Interpreter.cpp:
1673         (Interpreter::doMallocOp):
1674         * MallocBench/MallocBench/Interpreter.h:
1675         * MallocBench/MallocBench/fastMallocLog.63316.ops: Added.
1676         * MallocBench/MallocBench/jetstream.cpp: Added.
1677         (benchmark_jetstream):
1678         * MallocBench/MallocBench/jetstream.h: Added.
1679
1680 2016-05-25  Keith Miller  <keith_miller@apple.com>
1681
1682         Unreviewed, add JSBench to the skipped list for now since it doesn't
1683         work currently.
1684
1685         * Skipped:
1686
1687 2016-05-17  Keith Miller  <keith_miller@apple.com>
1688         We should have JSBench in PerformanceTests
1689         https://bugs.webkit.org/show_bug.cgi?id=157952
1690
1691         Rubber-stamped by Saam Barati.
1692
1693         There are some slight changes to the layout of the test directory
1694         to make it work nicely with run-jsc-benchmarks. Before JSBench
1695         had each of the browser specific sub-tests in a sub-directory.
1696         These have been flattened e.g. amazon/safari/ has become
1697         amazon-safari/.
1698
1699         * JSBench/amazon-chrome-win/urem.html: Added.
1700         * JSBench/amazon-chrome-win/urem.js: Added.
1701         * JSBench/amazon-chrome/urem.html: Added.
1702         * JSBench/amazon-chrome/urem.js: Added.
1703         * JSBench/amazon-firefox-win/urm.html: Added.
1704         * JSBench/amazon-firefox-win/urm.js: Added.
1705         * JSBench/amazon-firefox/urm.html: Added.
1706         * JSBench/amazon-firefox/urm.js: Added.
1707         * JSBench/amazon-safari/urem.html: Added.
1708         * JSBench/amazon-safari/urem.js: Added.
1709         * JSBench/browsercheck.js: Added.
1710         * JSBench/facebook-chrome-win/urem.html: Added.
1711         * JSBench/facebook-chrome-win/urem.js: Added.
1712         * JSBench/facebook-chrome/urem.html: Added.
1713         * JSBench/facebook-chrome/urem.js: Added.
1714         * JSBench/facebook-firefox-win/urem.html: Added.
1715         * JSBench/facebook-firefox-win/urem.js: Added.
1716         * JSBench/facebook-firefox/urem.html: Added.
1717         * JSBench/facebook-firefox/urem.js: Added.
1718         * JSBench/facebook-safari/urem.html: Added.
1719         * JSBench/facebook-safari/urem.js: Added.
1720         * JSBench/google-chrome-win/urem.html: Added.
1721         * JSBench/google-chrome-win/urem.js: Added.
1722         * JSBench/google-chrome/urem.html: Added.
1723         * JSBench/google-chrome/urem.js: Added.
1724         * JSBench/google-firefox-win/urem.html: Added.
1725         * JSBench/google-firefox-win/urem.js: Added.
1726         * JSBench/google-firefox/uem.html: Added.
1727         * JSBench/google-firefox/uem.js: Added.
1728         * JSBench/google-safari/urem.html: Added.
1729         * JSBench/google-safari/urem.js: Added.
1730         * JSBench/harness.html: Added.
1731         * JSBench/harness.js: Added.
1732         * JSBench/harness.py: Added.
1733         * JSBench/index.html: Added.
1734         * JSBench/reload.html: Added.
1735         * JSBench/twitter-chrome-win/rem.html: Added.
1736         * JSBench/twitter-chrome-win/rem.js: Added.
1737         * JSBench/twitter-chrome/urem.html: Added.
1738         * JSBench/twitter-chrome/urem.js: Added.
1739         * JSBench/twitter-firefox-win/urem.html: Added.
1740         * JSBench/twitter-firefox-win/urem.js: Added.
1741         * JSBench/twitter-firefox/urem.html: Added.
1742         * JSBench/twitter-firefox/urem.js: Added.
1743         * JSBench/twitter-safari/urem.html: Added.
1744         * JSBench/twitter-safari/urem.js: Added.
1745         * JSBench/yahoo-chrome-win/urem.html: Added.
1746         * JSBench/yahoo-chrome-win/urem.js: Added.
1747         * JSBench/yahoo-chrome/urem.html: Added.
1748         * JSBench/yahoo-chrome/urem.js: Added.
1749         * JSBench/yahoo-firefox-win/urem.html: Added.
1750         * JSBench/yahoo-firefox-win/urem.js: Added.
1751         * JSBench/yahoo-firefox/urem.html: Added.
1752         * JSBench/yahoo-firefox/urem.js: Added.
1753         * JSBench/yahoo-safari/urem.html: Added.
1754         * JSBench/yahoo-safari/urem.js: Added.
1755
1756 2016-05-20  Ryosuke Niwa  <rniwa@webkit.org>
1757
1758         run-benchmark's results should contain Animometer's debug output
1759         https://bugs.webkit.org/show_bug.cgi?id=157941
1760
1761         Reviewed by Stephanie Lewis.
1762
1763         Made developer.html support the JSON generated by run-benchmark which stores everything under debugOutput.
1764
1765         * Animometer/resources/debug-runner/animometer.js:
1766         (Utilities.initialize): Unwrap debugOutput in the case run-benchmark's result JSON is used.
1767
1768 2016-05-18  Timothy Hatcher  <timothy@apple.com>
1769
1770         Make Animometer work in all browsers
1771         https://bugs.webkit.org/show_bug.cgi?id=157855
1772         rdar://problem/26338521
1773
1774         Reviewed by Jon Lee.
1775
1776         * Animometer/resources/runner/logo.svg: Use a symbol instead
1777         of putting the id on the root svg. This works in all browsers.
1778
1779 2016-05-07  Timothy Hatcher  <timothy@apple.com>
1780
1781         Update Animometer design
1782         https://bugs.webkit.org/show_bug.cgi?id=157449
1783
1784         Reviewed by Darin Adler.
1785
1786         * Animometer/developer.html: Stop including runner/animometer.css.
1787         * Animometer/index.html: Udpated elements to fit new styles.
1788
1789         * Animometer/resources/debug-runner/animometer.css:
1790         Copy the old runner/animometer.css to here so the debug runner is unaffected.
1791
1792         * Animometer/resources/runner/animometer.css:
1793         New styles for the design. Drop flex box for broad browser support.
1794
1795         * Animometer/resources/runner/animometer.js:
1796         (ResultsTable.clear): Use textContent.
1797         (window.sectionsManager.showSection): Add class to the body.
1798         (window.sectionsManager.setSectionScore): Use textContent, not innerHTML.
1799
1800         * Animometer/resources/runner/crystal.svg: Added.
1801         * Animometer/resources/runner/lines.svg: Added.
1802         * Animometer/resources/runner/logo.svg: Added.
1803
1804         * Animometer/resources/runner/tests.js: Shorten test name and title case them.
1805
1806 2016-05-06  Manuel Rego Casasnovas  <rego@igalia.com>
1807
1808         [css-grid] Unprefix CSS Grid Layout properties
1809         https://bugs.webkit.org/show_bug.cgi?id=157137
1810
1811         Reviewed by Simon Fraser.
1812
1813         Remove "-webkit" prefix from all the grid layout properties,
1814         including the display value.
1815         Update the source code to remove the prefix where it was used too.
1816
1817         * Layout/auto-grid-lots-of-data.html:
1818         * Layout/fixed-grid-lots-of-data.html:
1819         * Layout/fixed-grid-lots-of-stretched-data.html:
1820
1821 2016-04-25  Geoffrey Garen  <ggaren@apple.com>
1822
1823         bmalloc: Misc improvements to MallocBench
1824         https://bugs.webkit.org/show_bug.cgi?id=157004
1825
1826         Reviewed by Darin Adler.
1827
1828         * MallocBench/run-malloc-benchmarks: Added --memory and --memory_warning
1829         modes for focused memory testing.
1830
1831         * MallocBench/MallocBench/Benchmark.cpp:
1832         (Benchmark::printReport): Clarified output.
1833
1834         (Benchmark::currentMemoryBytes): Added compressed memory because top
1835         does the same. (It always happens to zero in the benchmarks we run. But
1836         this is good for sanity.)
1837
1838         * MallocBench/MallocBench/CommandLine.cpp: Moved up to 8 runs to reduce
1839         variance.
1840
1841         * MallocBench/MallocBench/alloc_free.cpp:
1842         (benchmark_alloc_free): Cycle a single allocation in order to stress
1843         the effect of merging on calls to madvise.
1844
1845         * MallocBench/MallocBench/big.cpp:
1846         (benchmark_big): Graduated to 8kB-128kB because medium tests up to 8 and
1847         our large allocator doesn't kick in until 64kB.
1848
1849         * MallocBench/MallocBench/medium.cpp:
1850         (benchmark_medium): Test all the way down to 1kB because our large
1851         allocator used to service 1kB allocations and 1kB is an interesting
1852         middle size where memory is unusually large but allocation throughput
1853         still matters.
1854
1855         * MallocBench/MallocBench/stress.cpp:
1856         (benchmark_stress): Reduced the churn count to match stress_aligned
1857         because this test was taking too long to complete.
1858
1859         * MallocBench/MallocBench/stress_aligned.cpp:
1860         (benchmark_stress_aligned): Our new large allocator can handle even
1861         more absurdly large values.
1862
1863 2016-04-25  Simon Fraser  <simon.fraser@apple.com>
1864
1865         Add a content animation test that uses SVG animation.
1866         https://bugs.webkit.org/show_bug.cgi?id=156827
1867
1868         * Animation/svg-animation.html: Added.
1869         * Skipped:
1870
1871 2016-04-22  Simon Fraser  <simon.fraser@apple.com>
1872
1873         Skip two content animation tests which are only meant for iOS testing.
1874
1875         * Animation/css-animation.html: Added.
1876         * Animation/raf-animation.html: Added.
1877
1878         * Skipped:
1879
1880 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
1881
1882         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
1883         https://bugs.webkit.org/show_bug.cgi?id=156827
1884
1885         Add two files missing from the previous commit.
1886
1887         * Animation/css-animation.html: Added.
1888         * Animation/raf-animation.html: Added.
1889
1890 2016-04-20  Simon Fraser  <simon.fraser@apple.com>
1891
1892         Add content animation tests to benchmark_runner, and allow the runner to collect device data as part of the results
1893         https://bugs.webkit.org/show_bug.cgi?id=156827
1894
1895         Reviewed by Stephanie Lewis.
1896
1897         Two new files for the content-animation suite.
1898
1899         After patching for use in the benchmark, these tests are a little different to other benchmarks.
1900         The test content itself does not collect performance data; the tests spit out a boilerplate JSON
1901         result with a placeholder for framerate, which is collected in native code.
1902
1903         When run as a benchmark, test completion involves a couple of bounces between the test and MobileSafari.
1904         Test completion is initiated by a setTimeout() in the test, at which point location.hash is set to "#done".
1905         MobileSafari detects that, and asynchronously dumps performance data. Once this is complete, MobileSafari
1906         changes the URL has to "#submit", which triggers the XHR to the test relay that indicates the test is
1907         complete.
1908
1909         * Animation/css-animation.html: Added.
1910         * Animation/raf-animation.html: Added.
1911
1912 2016-04-15  Jon Lee  <jonlee@apple.com>
1913
1914         Animometer test could report a NaN
1915         https://bugs.webkit.org/show_bug.cgi?id=156646
1916
1917         Reviewed by Darin Adler.
1918         Provisionally reviewed by Said Abou-Hallawa.
1919
1920         * Animometer/tests/resources/main.js:
1921         (didFinishInterval): The ramp controller has a first phase where it ramps up the complexity and
1922         reacts based on how well the system handles the load. The assumption was that it would handle at least
1923         1 particle easily. That is not always the case. As a result, an interpolation calculation could
1924         end up setting an upper bound of NaN.
1925
1926         This occurs because we never get out of the first tier, so this._lastTierComplexity is undefined.
1927         Now that we guarantee a minimum complexity of 1, modify the conditional to check for this._lastTierComplexity
1928         before interpolating the upper bound of the first ramp. In the case where the system struggles with
1929         1 particle, set it to currentComplexity.
1930
1931 2016-04-09  Jon Lee  <jonlee@apple.com>
1932
1933         Update Animometer to accommodate different screens
1934         https://bugs.webkit.org/show_bug.cgi?id=156449
1935
1936         Reviewed by Darin Adler.
1937         Provisionally reviewed by Said Abou-Hallawa.
1938
1939         * Animometer/index.html: Wrap button in a container to add padding at the bottom.
1940         * Animometer/resources/debug-runner/animometer.css:
1941         (@media screen and (min-device-width: 1800px)): Deleted.
1942         (@media screen and (min-width: 1800px)): Cannot use min-device-width since it may match incorrectly.
1943         (screen and (max-device-height: 414px) and (orientation: landscape)): Some devices swap device width
1944         and height with orientation change.
1945         * Animometer/resources/runner/animometer.css: Similar.
1946         (screen and (min-device-width: 1024px) and (orientation: landscape)):
1947         (screen and (max-device-height: 414px) and (orientation: landscape)):
1948         (.frame-container): On smaller iPhones, adding 1px prevents the navigation bars from appearing.
1949         (@media screen and (min-device-width: 768px) and (max-device-width: 1024px)): Deleted.
1950         (@media (min-device-height: 768px) and (max-device-height: 1024px)): Target iPad Airs and similar.
1951         (@media screen and (min-device-width: 1024px) and (max-device-width: 1366px)): Deleted.
1952         (@media screen and (max-device-width: 1024px) and (min-device-height: 1366px)): Target iPad Pro.
1953         (#results footer): Add padding below the button for testing again.
1954         * Animometer/tests/master/multiply.html: Remove the center text.
1955         * Animometer/tests/master/resources/text.js: Update the test so that in every frame the text moves.
1956         * Animometer/tests/master/text.html: Update the text sizing depending on the size of the device.
1957
1958 2016-04-08  Jon Lee  <jonlee@apple.com>
1959
1960         Have Animometer benchmark always start with complexity of 1
1961         https://bugs.webkit.org/show_bug.cgi?id=156432
1962
1963         Reviewed by Ryosuke Niwa.
1964
1965         * Animometer/tests/resources/main.js: Update the default Controller and RampController to
1966         set its minimum complexities to 1 instead of 0.
1967
1968 2016-04-08  Jon Lee  <jonlee@apple.com>
1969
1970         Fix SVG benchmark test
1971         https://bugs.webkit.org/show_bug.cgi?id=156410
1972
1973         Reviewed by Dean Jackson.
1974
1975         * Animometer/resources/extensions.js: Update Point.zero to be a static Point.
1976         * Animometer/tests/simple/resources/tiled-canvas-image.js:
1977         (Stage.call._setupTiles): Refactor.
1978         * Animometer/tests/master/resources/particles.js:
1979         (Particle.prototype.reset): Use Point.center.
1980         (complexity): We are not using a gradient background anymore, so remove the +1.
1981         * Animometer/tests/master/resources/svg-particles.js: Update to use SVG transform
1982         instead of CSS transform.
1983
1984 2016-04-06  Jon Lee  <jonlee@apple.com>
1985
1986         Update master benchmark with SVG test
1987         https://bugs.webkit.org/show_bug.cgi?id=156273
1988
1989         Reviewed by Dean Jackson.
1990         Provisionally reviewed by Said Abou-Hallawa.
1991
1992         Switch masks tests for SVG path test.
1993
1994         * Animometer/resources/debug-runner/tests.js: Move mask test here.
1995         * Animometer/resources/runner/tests.js: Add SVG test here.
1996         * Animometer/tests/dom/particles.html: Renamed from PerformanceTests/Animometer/tests/master/particles.html.
1997         * Animometer/tests/dom/resources/dom-particles.js: Renamed from PerformanceTests/Animometer/tests/master/resources/dom-particles.js.
1998
1999         * Animometer/tests/master/resources/particles.js: Add minPosition for bounds checking. Prevents particle from being
2000         partially obscured.
2001         * Animometer/tests/master/resources/svg-particles.js: Added.
2002         (Particle): The particle is either a path object or a rect using a path as a clip. The
2003         same path is used either way. For each particle create a linear gradient with a random
2004         rotation.
2005         (SVGParticlesStage): Look in #shapes to see how many different kinds of paths are available.
2006         This makes the test more generic in case other shapes need to be tested.
2007         * Animometer/tests/master/svg-particles.html: Added. Have two defs, one that houses each
2008         particle's gradient, and one that holds the shape templates.
2009
2010 2016-03-27  Hunseop Jeong  <hs85.jeong@samsung.com>
2011
2012         [EFL] REGRESSION(r188793): It made 200 layout tests and Bindings/event-target-wrapper.html performance test fail
2013         https://bugs.webkit.org/show_bug.cgi?id=148470 
2014
2015         Reviewed by Darin Adler.
2016
2017         * Skipped: Unskip the Bindings/event-target-wrapper test.
2018
2019 2016-03-23  Jon Lee  <jonlee@apple.com>
2020
2021         Update focus and leaves tests
2022         https://bugs.webkit.org/show_bug.cgi?id=155825
2023
2024         Reviewed by Simon Fraser.
2025
2026         Particles would improperly disappear, before they were fully off stage. Update the calculation.
2027         * Animometer/tests/dom/resources/leaves.js:
2028         * Animometer/tests/master/resources/leaves.js:
2029
2030         * Animometer/tests/master/focus.html: Update the center element styling.
2031         * Animometer/tests/master/resources/focus.js:
2032         (FocusElement.Utilities.createClass): Give enough space in the container for each particle for the blur
2033         to spread. It should be about 3x more space than the blur radius on each side.
2034         (Stage.call.initialize): Ditto for the center element.
2035
2036 2016-03-23  Jon Lee  <jonlee@apple.com>
2037
2038         Update support for other platforms
2039         https://bugs.webkit.org/show_bug.cgi?id=155824
2040
2041         Reviewed by Simon Fraser.
2042
2043         * Animometer/resources/debug-runner/animometer.css: Remove extraneous media query. All of it should
2044         be handled in the release stylesheet.
2045         * Animometer/resources/debug-runner/animometer.js: Add support for browsers that return an HTMLCollection
2046         when retrieving radio elements with a name, instead of the selected value.
2047         * Animometer/resources/runner/animometer.css: Adjust the queries for devices of varying widths.
2048         (.frame-container): Move overflow:hidden to #stage.
2049         * Animometer/tests/master/resources/stage.css: Consolidate into tests/resources/stage.css.
2050         * Animometer/tests/resources/stage.css:
2051         (body): Remove overflow:hidden.
2052         (#stage): Set overflow:hidden here.
2053         (#center-text): Moved from master/resources/stage.css.
2054
2055         Update stylesheet hrefs.
2056         * Animometer/tests/master/canvas-stage.html:
2057         * Animometer/tests/master/focus.html:
2058         * Animometer/tests/master/leaves.html:
2059         * Animometer/tests/master/multiply.html:
2060         * Animometer/tests/master/particles.html:
2061         * Animometer/tests/master/text.html: Adjust text size to fit in the device screen.
2062
2063 2016-03-23  Jon Lee  <jonlee@apple.com>
2064
2065         Make the benchmark require device to be in landscape orientation
2066         https://bugs.webkit.org/show_bug.cgi?id=155822
2067         rdar://problem/25258650
2068
2069         Reviewed by Ryosuke Niwa.
2070
2071         Check that the device is in landscape orientation. If not, disable the button to start it,
2072         and show a warning message.
2073
2074         * Animometer/developer.html: Add a message about how the browser should be set up. Include a
2075         warning message that appears if the orientation is incorrect on mobile devices.
2076         * Animometer/index.html: Ditto.
2077
2078         * Animometer/resources/debug-runner/animometer.css: Migrate the .hidden rule into the release
2079         stylesheet. Update the style to accommodate the new UI.
2080         * Animometer/resources/runner/animometer.css:
2081
2082         * Animometer/resources/runner/animometer.js:
2083         (window.benchmarkController.initialize): Add the orientation listener is needed.
2084         (window.benchmarkController.addOrientationListenerIfNecessary): Only mobile devices need this. Check
2085         to see for support of window.orientation.
2086         (window.benchmarkController._orientationChanged): Toggle the warning based on whether we match the
2087         landscape query. Set a state variable, which is needed for the debug harness. Call updateStartButtonState.
2088         (window.benchmarkController.updateStartButtonState):
2089         * Animometer/resources/debug-runner/animometer.js: Change _updateStartButtonState to return
2090         a boolean about whether at least one test is selected. That will be used in
2091         benchmarkController.updateStartButtonState(). Move the load event listener to the release version.
2092         (window.benchmarkController.updateStartButtonState): Override the release version, and also check
2093         that at least one test is selected.
2094
2095 2016-03-22  Geoffrey Garen  <ggaren@apple.com>
2096
2097         MallocBench: consolidate regression testing for aligned allocation
2098         https://bugs.webkit.org/show_bug.cgi?id=155762
2099
2100         Reviewed by Michael Saboff.
2101
2102         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2103         * MallocBench/MallocBench/Benchmark.cpp:
2104         * MallocBench/MallocBench/memalign.cpp: Removed.
2105         * MallocBench/MallocBench/memalign.h: Removed. The stress_aligned test
2106         covers this and much more.
2107
2108         * MallocBench/MallocBench/stress_aligned.cpp:
2109         (benchmark_stress_aligned): Include specific tests for extreme sizes
2110         and alignments.
2111
2112 2016-03-21  Jon Lee  <jonlee@apple.com>
2113
2114         Update benchmark tests
2115         https://bugs.webkit.org/show_bug.cgi?id=155723
2116
2117         Reviewed by Darin Adler.
2118         Provisionally reviewed by Said Abou-Hallawa.
2119
2120         Add quadratic and bezier segments to the canvas path test.
2121
2122         * Animometer/resources/runner/tests.js: Some of the query strings are unnecessary.
2123         Rename the test.
2124         * Animometer/tests/master/resources/canvas-stage.js:
2125         (tune): Update to be able to take an array of possible constructors. Choose one randomly.
2126         * Animometer/tests/master/resources/canvas-tests.js:
2127         (CanvasLinePoint.Utilities.createClass): Move the point selection out to a separate
2128         function called randomPoint() for reuse. Move X_LOOPS, Y_LOOPS, and offsets into the
2129         class definition.
2130         (randomPoint): Scale the grid down a little bit so that the lines along the edge of the
2131         canvas are not cut off when the stroke size is thick.
2132         (CanvasQuadraticSegment): Added.
2133         (CanvasBezierSegment): Added.
2134         (SimpleCanvasStage): Pass in an array of the different segment types. Since line segments
2135         are short compared to the curved ones, make it twice as likely to render a line segment.
2136         (SimpleCanvasStage.animate): Update the drawing code so that we render all line segments.
2137
2138         Add a helper method that selects a random element from an array.
2139
2140         * Animometer/tests/resources/main.js:
2141         (Stage.randomElementInArray): Select a random element from the provided array.
2142
2143         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Refactor.
2144         * Animometer/tests/dom/resources/leaves.js: Ditto.
2145         * Animometer/tests/master/resources/dom-particles.js: Ditto.
2146         * Animometer/tests/master/resources/image-data.js: Ditto.
2147         * Animometer/tests/master/resources/leaves.js: Ditto.
2148         * Animometer/tests/simple/resources/simple-canvas-paths.js: Ditto.
2149
2150         Add canvas tests that includes all stroke and fill paths. This makes it possible to avoid having to
2151         include the full simple canvas suite for perf testing.
2152
2153         * Animometer/resources/debug-runner/tests.js: Add new tests. Move the canvas test into the Canvas
2154         suite.
2155         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add a CanvasStroke and CanvasFill particle
2156         that random selects an object to render.
2157
2158         * Animometer/resources/debug-runner/tests.js: Move 3D suite before basic canvas suite.
2159         When updating the perf bot script, we will include the suites up to this one, but exclude
2160         the basic canvas suite.
2161
2162         Move compositing transforms test to HTML suite and remove the empty Miscellaneous suite.
2163
2164         * Animometer/resources/debug-runner/tests.js:
2165         * Animometer/tests/dom/compositing-transforms.html: Renamed from PerformanceTests/Animometer/tests/misc/compositing-transforms.html.
2166         * Animometer/tests/dom/resources/compositing-transforms.js: Renamed from PerformanceTests/Animometer/tests/misc/resources/compositing-transforms.js.
2167
2168         Clean up miscellaneous test suite. Add a canvas ellipse test, and remove the other
2169         canvas tests.
2170
2171         * Animometer/resources/debug-runner/tests.js: Add ellipse tests to the simple suite.
2172         * Animometer/tests/misc/canvas-electrons.html: Removed.
2173         * Animometer/tests/misc/canvas-stars.html: Removed.
2174         * Animometer/tests/misc/resources/canvas-electrons.js: Removed.
2175         * Animometer/tests/misc/resources/canvas-stars.js: Removed.
2176         * Animometer/tests/simple/resources/simple-canvas-paths.js: Add ellipse primitives.
2177
2178         Merge text tests together into one.
2179
2180         * Animometer/resources/runner/tests.js: Remove international.html.
2181         * Animometer/tests/master/international.html: Removed.
2182         * Animometer/tests/master/resources/text.js:
2183         (animate): Update styling. Manually calculate gradients for the shadow particles.
2184         Reduce the step size for y direction to avoid cutting text off at the margins. Increase
2185         step for x since there will be a little more room.
2186         * Animometer/tests/master/text.html: Add more translations and lay it out in a table.
2187
2188 2016-03-20  Jon Lee  <jonlee@apple.com>
2189
2190         Add a link to show debug data
2191         https://bugs.webkit.org/show_bug.cgi?id=155724
2192
2193         Reviewed by Simon Fraser.
2194
2195         * Animometer/developer.html: Attach the onclick handler to the score.
2196         * Animometer/index.html: Ditto.
2197
2198 2016-03-18  Dean Jackson  <dino@apple.com>
2199
2200         Add a basic WebGL test to Animometer
2201         https://bugs.webkit.org/show_bug.cgi?id=155475
2202         <rdar://problem/25156860>
2203
2204         Reviewed by Simon Fraser and Jon Lee.
2205
2206         Add a pretty simple WebGL test to Animometer
2207         which tries to draw a number of animated triangles.
2208         The result still needs a bit of tuning.
2209
2210         * Animometer/resources/debug-runner/tests.js: Add a new
2211         Suite for "3D" tests.
2212         * Animometer/tests/3d/resources/webgl.js: Added.
2213         * Animometer/tests/3d/webgl.html: Added.
2214
2215 2016-03-18  Jon Lee  <jonlee@apple.com>
2216
2217         Add support for statically linking to a specific test
2218         https://bugs.webkit.org/show_bug.cgi?id=155631
2219
2220         Rubber-stamped by Darin Adler.
2221
2222         * Animometer/developer.html: Update to call restartBenchmark instead so that it works for
2223         both the preset and the manually set test sessions.
2224         * Animometer/resources/debug-runner/animometer.css:
2225         (.tree .link): Style the "link" UI.
2226         * Animometer/resources/debug-runner/animometer.js: Move updateDisplay from suitesManager
2227         to optionsManager since this is a visual option and has nothing to do with the suites
2228         settings. Update the construction of the test UI by including a "link" after each test.
2229         Clicking on that link brings up a JS prompt with a URL and a query string with the current
2230         parameters of the controller, and selected test. Pasting this URL into the location bar will
2231         automatically start running the selected test.
2232         (suitesManager.suitesFromQueryString): Iterate through the Suites and tests and find the one
2233         that matches the provided parameters. Returns an object similar to the form in
2234         suitesManager.updateLocalStorageFromUI.
2235         (benchmarkController.initialize): After settings up the events and options, try parsing the
2236         query string and running the benchmark immediately. Otherwise, fall back to the form.
2237         (benchmarkController.startBenchmark): Store the options and suites into member variables for
2238         reuse in restartBenchmark.
2239         (benchmarkController.startBenchmarkImmediatelyIfEncoded): Convert the query string to an object.
2240         If that's successful, find the suite and test referenced in the query string. Start the benchmark if
2241         the search for the test succeeded.
2242         * Animometer/resources/extensions.js:
2243         (Utilities.stripNonASCIICharacters): Helper method to convert the name of the suite and test
2244         into a query-string-friendly version.
2245         (Utilities.convertObjectToQueryString): Helper method to convert an object to query string
2246         format.
2247         (Utilities.convertQueryStringToObject): Helper method to convert query string into an object
2248         with properties and values.
2249
2250 2016-03-16  Jon Lee  <jonlee@apple.com>
2251
2252         Add a new benchmark test
2253         https://bugs.webkit.org/show_bug.cgi?id=155570
2254
2255         Reviewed by Simon Fraser.
2256
2257         New Leaves test includes various image sizes and opacity.
2258
2259         * Animometer/resources/debug-runner/tests.js: Add it to the HTML test suite.
2260         * Animometer/tests/dom/leaves.html: Added.
2261         * Animometer/tests/dom/resources/leaves.js: Added. Override the
2262         (Particle.call.reset): Uses a range of sizes, and opacity.
2263         (Particle.call.animate): Opacity goes up then down. When it hits 0, reset the particle.
2264         (Particle.call.move): Set transform and opacity.
2265         * Animometer/tests/master/resources/leaves.js: Get rid of the closure so that it
2266         can be used in this test. Update the relative path so that it works in both the master
2267         and dom test suite.
2268
2269 2016-03-15  Simon Fraser  <simon.fraser@apple.com>
2270
2271         Add developer Animometer test that bounces P3-tagged images
2272         https://bugs.webkit.org/show_bug.cgi?id=155511
2273
2274         Reviewed by Tim Horton.
2275         
2276         Add a test for rendering performance of tagged images. The 5 images are tagged
2277         with the Display P3 colorspace.
2278
2279         * Animometer/resources/debug-runner/tests.js:
2280         * Animometer/tests/bouncing-particles/bouncing-tagged-images.html: Added.
2281         * Animometer/tests/bouncing-particles/resources/bouncing-tagged-images.js: Added.
2282         * Animometer/tests/bouncing-particles/resources/image1.jpg: Added.
2283         * Animometer/tests/bouncing-particles/resources/image2.jpg: Added.
2284         * Animometer/tests/bouncing-particles/resources/image3.jpg: Added.
2285         * Animometer/tests/bouncing-particles/resources/image4.jpg: Added.
2286         * Animometer/tests/bouncing-particles/resources/image5.jpg: Added.
2287
2288 2016-03-09  Jon Lee  <jonlee@apple.com>
2289
2290         Enhance existing Animometer tests
2291         https://bugs.webkit.org/show_bug.cgi?id=155261
2292
2293         Reviewed by Simon Fraser.
2294
2295         * Animometer/tests/master/resources/canvas-tests.js: Add a gradient to
2296         the filled circles. To expose more of the gradient, add another circle.
2297         (SimpleCanvasStage.call.animate): For each frame, create a gradient with
2298         undulating stop points and colors. Fill the circles twice; once with
2299         the solid color, and once with the gradient.
2300
2301         * Animometer/tests/master/resources/dom-particles.js: Refactor the
2302         emission variables into a separate stage for this test. Add a colorOffset
2303         variable to make the colors of each particle slightly different, since
2304         the ramp controller can add large numbers of particles all at once, which
2305         would otherwise get all the same color.
2306         * Animometer/tests/master/resources/particles.js:
2307         (initialize): Remove the code specific to the SVG mask test.
2308
2309         * Animometer/tests/master/resources/image-data.js:
2310         (initialize): Remove unused local variable.
2311         * Animometer/tests/master/resources/multiply.js:
2312         (initialize): Make the test harder by adding more total particles.
2313
2314 2016-03-09  Jon Lee  <jonlee@apple.com>
2315
2316         Add text tests
2317         https://bugs.webkit.org/show_bug.cgi?id=155257
2318
2319         Reviewed by Simon Fraser.
2320
2321         * Animometer/resources/extensions.js:
2322         (UnitBezier.Utilities.createClass): Add a class that computes Bezier points
2323         assuming that two of the control points are at (0,0) and (1,1). Taken from
2324         WebCore/platform/graphics/UnitBezier.h
2325         * Animometer/resources/runner/tests.js: Add a test for English text and one
2326         for international text.
2327         * Animometer/tests/master/international.html: Added.
2328         * Animometer/tests/master/resources/text.js: Added. The test assumes there is
2329         #template div which it will copy. The copies are placed behind the template, and
2330         are set with different colors each frame. They are moved around with CSS transform.
2331         * Animometer/tests/master/text.html: Added.
2332
2333         Remove the other text tests, since these ones cover the same techniques.
2334         * Animometer/tests/text/layering-text.html: Removed.
2335         * Animometer/tests/text/resources/layering-text.js: Removed.
2336         * Animometer/tests/text/resources/text-boxes.js: Removed.
2337         * Animometer/tests/text/text-boxes.html: Removed.
2338         * Animometer/resources/debug-runner/tests.js:
2339
2340 2016-03-09  Jon Lee  <jonlee@apple.com>
2341
2342         Add a new image test
2343         https://bugs.webkit.org/show_bug.cgi?id=155232
2344
2345         Reviewed by Dean Jackson.
2346         Provisionally reviewed by Said Abou-Hallawa.
2347
2348         The image test renders PNGs and moves them with translate and rotate
2349         transforms. Each particle has a lifetime, and when the lifetime ends or
2350         the particle goes offscreen, it resets itself somewhere on the stage.
2351
2352         * Animometer/resources/debug-runner/tests.js: Remove the CSS bouncing PNG
2353         images test, because this one tests the same technique.
2354         * Animometer/resources/runner/tests.js: Added here as "Leaves".
2355         * Animometer/tests/master/leaves.html: Added.
2356         * Animometer/tests/master/resources/particles.js: Refactor out the parts
2357         specific to the DOM particles test. Consequently make velocity a public
2358         member.
2359         (initialize): The options parameter is never used, so remove it.
2360         (animate): Remove unused local variable.
2361         * Animometer/tests/master/resources/leaves.js: Maintains a focal point that
2362         moves back and forth across the canvas. That point affects the velocity
2363         of the particles. When the focal point is on the leftmost side, it is
2364         between [-6, -2], and set in reset(). When the focal point is on the rightmost
2365         side, it will be from [2, 6].
2366         * Animometer/tests/master/resources/dom-particles.js: Move JS specific to
2367         this test here from particles.js.
2368
2369         New images.
2370         * Animometer/tests/master/resources/compass100.png: Added.
2371         * Animometer/tests/master/resources/console100.png: Added.
2372         * Animometer/tests/master/resources/contribute100.png: Added.
2373         * Animometer/tests/master/resources/debugger100.png: Added.
2374         * Animometer/tests/master/resources/inspector100.png: Added.
2375         * Animometer/tests/master/resources/layout100.png: Added.
2376         * Animometer/tests/master/resources/performance100.png: Added.
2377         * Animometer/tests/master/resources/script100.png: Added.
2378         * Animometer/tests/master/resources/shortcuts100.png: Added.
2379         * Animometer/tests/master/resources/standards100.png: Added.
2380         * Animometer/tests/master/resources/storage100.png: Added.
2381         * Animometer/tests/master/resources/styles100.png: Added.
2382         * Animometer/tests/master/resources/timeline100.png: Added.
2383
2384 2016-03-03  Jon Lee  <jonlee@apple.com>
2385
2386         Add ability to retrieve raw data from release harness
2387         https://bugs.webkit.org/show_bug.cgi?id=155026
2388
2389         Reviewed by Simon Fraser.
2390
2391         * Animometer/developer.html: Remove the special UI in the debug
2392         harness.
2393         * Animometer/resources/runner/animometer.css: Add styles for the
2394         overlay.
2395         * Animometer/resources/runner/animometer.js: Let 'j' show the JSON
2396         results, but only if the overlay doesn't exist. Add 'esc' key to dismiss
2397         the overlay.
2398         (window.benchmarkController.selectResults): Cycle the cases around
2399         so that the first 's' press selects both the benchmark score and
2400         the individual test scores.
2401         * Animometer/resources/debug-runner/animometer.css: Remove
2402         unneeded rules.
2403         * Animometer/resources/debug-runner/animometer.js: Make the same
2404         call to handleKeyPress.
2405
2406 2016-03-03  Jon Lee  <jonlee@apple.com>
2407
2408         Make sure multiply test particles have at least some opacity
2409         https://bugs.webkit.org/show_bug.cgi?id=155027
2410
2411         Reviewed by Simon Fraser.
2412
2413         * Animometer/tests/master/resources/multiply.js:
2414         (initialize): Have the elements spin a little faster to make it
2415         more obvious when the system is being stressed.
2416         (_addTile):
2417         (animate): Make sure each element being animated has at least 1%
2418         opacity.
2419
2420 2016-03-03  Jon Lee  <jonlee@apple.com>
2421
2422         Update image test
2423         https://bugs.webkit.org/show_bug.cgi?id=154962
2424
2425         Rubber-stamped by Darin Adler.
2426
2427         * Animometer/tests/master/image-data.html: Make each canvas have a compositing layer.
2428         * Animometer/tests/master/resources/image-data.js:
2429         (initialize): Update to load multiple images serially.
2430         (_loadImage):
2431         (tune): Use display instead of visibility. When showing an element anew, move it somewhere else.
2432         (_createTestElement): Set up the element, refactor out placement of element to _refreshElement.
2433         (_refreshElement): Place element in a tile grid.
2434         (animate):
2435         (_getRandomNeighboringPixelIndex): Use a more conservative distribution to make the effect last a little longer.
2436         * Animometer/tests/master/resources/compass.svg: Added.
2437         * Animometer/tests/master/resources/console.svg: Added.
2438         * Animometer/tests/master/resources/contribute.svg: Added.
2439         * Animometer/tests/master/resources/debugger.svg: Added.
2440         * Animometer/tests/master/resources/inspector.svg: Added.
2441         * Animometer/tests/master/resources/layout.svg: Added.
2442         * Animometer/tests/master/resources/performance.svg: Added.
2443         * Animometer/tests/master/resources/script.svg: Added.
2444         * Animometer/tests/master/resources/shortcuts.svg: Added.
2445         * Animometer/tests/master/resources/standards.svg: Added.
2446         * Animometer/tests/master/resources/storage.svg: Added.
2447         * Animometer/tests/master/resources/styles.svg: Added.
2448         * Animometer/tests/master/resources/timeline.svg: Added.
2449
2450 2016-03-02  Jon Lee  <jonlee@apple.com>
2451
2452         Add some new controllers, and refine tests
2453         https://bugs.webkit.org/show_bug.cgi?id=154914
2454
2455         Reviewed by Simon Fraser.
2456
2457         Improve tests.
2458
2459         * Animometer/tests/master/focus.html: Move each particle into a layer. Put the particle
2460         in a container element. Expand the container element by the max blur radius, and clip
2461         overflow. This way, when the blur is applied, it avoids causing layer resizes.
2462         * Animometer/tests/master/resources/focus.js:
2463         (FocusElement.Utilities.createClass): Create a container element, and put the particle
2464         inside.
2465         (hide): Set display:none.
2466         (show): Set display:block.
2467         (animate): Apply filters to the container element.
2468         (FocusStage.call.initialize): Instead of inserting and removing elements from the DOM,
2469         keep them in the stage, but set the display style instead. Use this._offsetIndex to
2470         keep track of which elements are displayed.
2471         (FocusStage.call.animate): Move some calculations around to avoid doing unneeded math.
2472         (FocusStage.call.getBlurValue): Make sure elements are always blurred.
2473         (FocusStage.call.getOpacityValue): Make sure elements have some opacity.
2474         * Animometer/tests/master/resources/multiply.js: Have the particles on the edge of the
2475         stage appear less black when the complexity gets large enough.
2476         (tune): Have this._distanceFactor calculate the factor. Avoid calculating square root each
2477         frame.
2478
2479 2016-03-02  Jon Lee  <jonlee@apple.com>
2480
2481         Add some new controllers, and refine tests
2482         https://bugs.webkit.org/show_bug.cgi?id=154914
2483
2484         Reviewed by Simon Fraser.
2485
2486         Add a controller that centers around 30 fps instead of 60 fps.
2487
2488         * Animometer/developer.html: Add a new option.
2489         * Animometer/resources/debug-runner/animometer.js:
2490         * Animometer/resources/runner/animometer.js:
2491         (this._processData.findRegression): When calculating the complexity-frameLength regression,
2492         check the controller, and use a 30 fps baseline if needed.
2493         * Animometer/resources/statistics.js:
2494         (Regression.Utilities.createClass): Update to allow clients to specify the baseline
2495         frame length.
2496         * Animometer/tests/resources/main.js:
2497         (tune): Override some of the constants in RampController. Move those constants out for
2498         easier reading.
2499
2500         Add a fixed controller, with no step.
2501
2502         * Animometer/developer.html: Add a controller that takes no step.
2503         * Animometer/resources/debug-runner/animometer.js:
2504         * Animometer/tests/resources/main.js:
2505         (Rotater.Utilities.createClass):
2506
2507         Switch to ramp controller as default.
2508
2509         * Animometer/developer.html: Increase the test length to 20 seconds.
2510         * Animometer/resources/debug-runner/animometer.js: Rename the "adjustment" field to "controller"
2511         since that is a more accurate description.
2512         * Animometer/resources/debug-runner/graph.js:
2513         * Animometer/resources/runner/animometer.js: Update preferences for release suite.
2514
2515 2016-02-26  Jon Lee  <jonlee@apple.com>
2516
2517         Address Dean's comments in 154673.
2518
2519         * Animometer/developer.html:
2520         * Animometer/resources/debug-runner/animometer.js:
2521         * Animometer/resources/debug-runner/graph.js:
2522
2523 2016-02-25  Jon Lee  <jonlee@apple.com>
2524
2525         Update animation benchmark and tests
2526         https://bugs.webkit.org/show_bug.cgi?id=154673
2527
2528         Reviewed by Dean Jackson.
2529
2530         Update test visuals.
2531
2532         * Animometer/tests/master/resources/canvas-tests.js:
2533         (CanvasLineSegment.Utilities.createClass): Line segments near the edge of the stage get clipped.
2534         Update circle position and radius to minimize impact.
2535         * Animometer/tests/master/resources/particles.js: Get rid of rotating gradient background, and
2536         have 3 locations for emitting particles.
2537         * Animometer/tests/master/resources/multiply.js: Update distance metric so that fringe tiles get
2538         more color.
2539         (initialize): Fix some of the math for laying out the tiles.
2540         (animate): When a tile isn't used, set visibility: hidden.
2541
2542 2016-02-24  Jon Lee  <jonlee@apple.com>
2543
2544         Update animation benchmark and tests
2545         https://bugs.webkit.org/show_bug.cgi?id=154673
2546
2547         Reviewed by Dean Jackson.
2548
2549         Update the ramp controller.
2550
2551         The controller refines the complexity interval to test across.
2552
2553         * Animometer/resources/statistics.js: Add functions that estimate cumulative distribution function.
2554         (Regression): For the flat regression, force the first segment to be at 60 fps.
2555         (valueAt): Add convenience function to return interpolated value based on the regression used.
2556         (_calculateRegression): Include the number of points included for both segments, and the piecewise
2557         errors.
2558         * Animometer/tests/resources/math.js: Make the Kalman estimator subclass Experiment, and allow it
2559         to be reset.
2560
2561         * Animometer/tests/resources/main.js: Initialize the tier such that it starts at 10^0 = 1.
2562         Increase the number of ramps. Maintain three FPS thresholds-- the frame rate of interest, a limit
2563         on the lowest FPS we care to go for later interpolation, and a minimum FPS threshold we want to
2564         aim for each ramp. Also keep three estimators: a running average of the change point, a minimum
2565         boundary for each ramp, and an estimator for all the frames within an interval. The first two
2566         are used to determine the parameters of the next ramp, and the latter allows us to refine the
2567         parameters.
2568         (update): During the tier phase, it is possible that the highest complexity possible for a test
2569         won't stress the system enough to trigger stopping the tier phase and transitioning to the ramps.
2570         If the complexity doesn't change when going to the next tier, we've maxed the test out, and move
2571         on. When the tier phase completed, turn off Controller.frameLengthEstimator, which estimates the
2572         FPS at each tier.
2573         (tune): At each interval, look at the confidence distribution of being on the 60 FPS side or the
2574         slow side. If the slowest FPS we achieve at the ramp's maximum complexity is not at least
2575         _fpsRampSlowThreshold, then increase the maximum complexity. If we ever achieve 60 FPS, increase
2576         the ramp's minimum complexity to that level. If, at an even lower complexity, a glitch causes the
2577         FPS to drop, we reset the minimum complexity.
2578
2579         Have the bootstrap calculation occur between tests. Clean up harness.
2580
2581         * Animometer/resources/debug-runner/animometer.js: Run bootstrap after a test has
2582         completed to avoid doing all of it at the end before showing the results. Clean up
2583         parameters being passed around.
2584         * Animometer/resources/debug-runner/tests.js:
2585         (text):
2586         * Animometer/resources/runner/animometer.js:
2587         (this._processData.calculateScore): Save the results to the same object holding the data.
2588         (this._processData._processData): In the case where a file is dragged, calculate the score
2589         serially. Grab the results object and move it to the results variable and remove it from
2590         the data object. This avoids serializing the results into the JSON.
2591         (this._processData.findRegression): Include the samples used for bootstrapping. Reduce the
2592         resample size to shorten the wait.
2593         * Animometer/resources/runner/benchmark-runner.js:
2594         * Animometer/resources/statistics.js:
2595         (bootstrap): Update how bootstrapData is sorted. In some regression results the mix of
2596         floats and integers causes an alphabetical sort to occur.
2597         * Animometer/resources/strings.js:
2598
2599         Add meta charset so that encodings between harness and test match.
2600
2601         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2602         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2603         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2604         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2605         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2606         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2607         * Animometer/tests/master/canvas-stage.html:
2608         * Animometer/tests/master/focus.html:
2609         * Animometer/tests/master/image-data.html:
2610         * Animometer/tests/master/multiply.html:
2611         * Animometer/tests/master/particles.html:
2612         * Animometer/tests/misc/canvas-electrons.html:
2613         * Animometer/tests/misc/canvas-stars.html:
2614         * Animometer/tests/misc/compositing-transforms.html:
2615         * Animometer/tests/simple/simple-canvas-paths.html:
2616         * Animometer/tests/simple/tiled-canvas-image.html:
2617         * Animometer/tests/template/template-canvas.html:
2618         * Animometer/tests/template/template-css.html:
2619         * Animometer/tests/template/template-svg.html:
2620         * Animometer/tests/text/layering-text.html:
2621         * Animometer/tests/text/text-boxes.html:
2622
2623         Update test harness reporting.
2624
2625         * Animometer/developer.html: Add missing meta charset.
2626         * Animometer/index.html: Remove unnecessary utf-8 declaration.
2627         * Animometer/resources/debug-runner/animometer.css: Add convenience classes for
2628         formatting the results table.
2629         * Animometer/resources/debug-runner/animometer.js: Adjust which stats are shown.
2630         * Animometer/resources/debug-runner/tests.js: Display bootstrapping statistics.
2631         * Animometer/resources/strings.js: Move strings not used by the release harness.
2632
2633         Switch to a pseudo-random number generator.
2634
2635         * Animometer/resources/statistics.js: Add a Pseudo class, with a simple
2636         pseudo-random number generator.
2637         (_calculateRegression): Reset the generator before running bootstrap.
2638         (bootstrap): Deleted.
2639
2640         Replace Math.random with Pseudo.random.
2641         * Animometer/tests/master/resources/canvas-tests.js:
2642         * Animometer/tests/master/resources/focus.js:
2643         * Animometer/tests/master/resources/particles.js:
2644         * Animometer/tests/resources/main.js:
2645
2646         Use bootstrapping to get confidence interval in the breakpoint.
2647
2648         For the ramp controller, calculate the piecewise regression, and then use
2649         bootstrapping in order to find the 95% confidence interval. Use the raw data.
2650
2651         * Animometer/developer.html: Default to the complexity graph. Add a legend
2652         checkbox to toggle visibility of the bootstrap score and histogram.
2653         * Animometer/resources/debug-runner/animometer.css: Make some more space to show
2654         the old raw and average scores in the legend. Add new styles for the data.
2655         * Animometer/resources/debug-runner/graph.js:
2656         (_addRegressionLine): Allow passing an array for the variance bar tied to the
2657         regression line. Now |stdev| is |range|.
2658         (createComplexityGraph): Add bootstrap median, and overlay a histogram of
2659         the bootstrap samples. Switch raw samples from circles to X's.
2660         (onComplexityGraphOptionsChanged): Allow toggling of the bootstrap data.
2661         (onGraphTypeChanged): Move the regressions for the raw and average samples to the
2662         legend. In the subtitle use the bootstrap median, and include the 95% confidence
2663         interval.
2664         * Animometer/resources/runner/animometer.js:
2665         (this._processData.findRegression): Factor out the code that determines which
2666         samples to include when calculating the piecewise regression. For series that have
2667         many samples, or a wider range of recorded complexities, throw away the 2.5%
2668         lowest and highest samples before calculating the regression. Keep all samples
2669         if the number of samples to regress is small or the range of complexities is
2670         narrow.
2671         (this._processData._calculateScore): Factor out regression calculation to
2672         findRegression(). Bootstrap the change point of the regression. The score is the
2673         median.
2674         * Animometer/resources/statistics.js:
2675         (_calculateRegression): Correct an issue in the calculation of the regression, where
2676         the denominator can be 0.
2677         (bootstrap): Template for bootstrapping. Create a bootstrap sample array, Create
2678         re-samples by random selection with replacement. Return the 95% confidence samples,
2679         the bootstrap median, mean, and the data itself.
2680         * Animometer/resources/strings.js: Add bootstrap.
2681         * Animometer/tests/resources/main.js:
2682         (processSamples): Don't prematurely cut the sample data.
2683
2684         Fix graph drawing.
2685
2686         * Animometer/resources/debug-runner/animometer.js: Add spacing in the JSON output.
2687         Multiple tests output a lot of JSON and can hang when selecting JSON with no whitespace.
2688         * Animometer/resources/debug-runner/animometer.css:
2689         (#complexity-graph .series.raw circle): Update the color.
2690         * Animometer/resources/debug-runner/graph.js: Use the FPS axis instead of the
2691         complexity axis, which can vary in domain. For determining the complexity domain,
2692         only use samples after samplingTimeOffset.
2693
2694         Allow dropping results JSON.
2695
2696         * Animometer/developer.html: Add a button.
2697         * Animometer/resources/debug-runner/animometer.css:
2698         * Animometer/resources/debug-runner/animometer.js: Read the data and go straight
2699         to the dashboard. With JSON output, write out only the options and the raw data.
2700
2701         Teach the harness to evaluate the samples and determine the test score.
2702
2703         This will allow us to update how the score is calculated separately from the samples recorded.
2704         This also prepares the harness to be able to accept JSON of prior runs.
2705
2706         * Animometer/resources/strings.js: Clean up and remove unneeded strings and reduce some of the
2707         hierarchy.
2708         * Animometer/resources/debug-runner/tests.js: Update to use the new strings.
2709
2710         * Animometer/tests/resources/main.js: Allow all controllers to show a complexity-FPS graph.
2711         (_processComplexitySamples): Factor out some of the sample processing done in the ramp
2712         controller for the benefit of the other controllers. |complexitySamples| contains a list of
2713         samples. Sort the samples by complexity. Optionally remove the top x% of samples.
2714         Group them, and calculate distribution of samples within the same complexity, and add those as
2715         new entries into |complexityAverageSamples|.
2716         (Controller.processSamples): Move the code responsible for determining the complexity and FPS
2717         scores out to ResultsDashboard. The structure of the data returned by the controller is:
2718
2719         {
2720             controller: [time-regression, time-regression, ...], // optional, data specific to controller
2721             marks: [...],
2722             samples: {                    // all of the sample data
2723                 controller: [...],
2724                 complexity: [...],        // processed from controller samples
2725                 complexityAverage: [...], // processed from complexity samples
2726             }
2727         }
2728
2729         (AdaptiveController.processSamples): Adding the target frame length is no longer necessary; we
2730         now pass the test options to the graph.
2731         (Regression): Move to statistics.js.
2732         * Animometer/resources/statistics.js: Move Regression to here. Add a check if the sampling range
2733         only contains one sample, since we cannot calculate a regression from one sample point.
2734
2735         Teach the test harness to evaluate the data.
2736         * Animometer/resources/runner/animometer.js:
2737         (ResultsDashboard): Store the options used to run the test and the computed results/score separately
2738         from the data. The results are stored as:
2739
2740         {
2741             score: /* geomean of iteration score */,
2742             iterationsResults: [
2743                 {
2744                     score: /* geomean of tests */,
2745                     testsResults: {
2746                         suiteName: {
2747                             testName: {
2748                                 controller: {
2749                                     average:
2750                                     concern:
2751                                     stdev:
2752                                     percent:
2753                                 },
2754                                 frameLength: { ... },
2755                                 complexity: {
2756                                     complexity:
2757                                     stdev:
2758                                     segment1:
2759                                     segment2:
2760                                 },
2761                                 complexityAverage: { ... }
2762                             },
2763                             testName: { ... },
2764                         },
2765                         ... next suite ...
2766                     }
2767                 },
2768                 { ...next iteration... }
2769             ]
2770         }
2771
2772         * Animometer/resources/debug-runner/animometer.js: Pass options around instead of relying
2773         on what was selected in the form. This will later allow for dropping previous results, and
2774         using those runs' options when calculating scores.
2775         (ResultsTable._addGraphButton): Simplify button action by using attached test data.
2776         * Animometer/resources/debug-runner/graph.js: Refactor to use the data.
2777
2778         Consolidate JS files, and move statistics out to a separate JS.
2779
2780         Preparation for having the Controller only handle recording and storage of the samples,
2781         and leave the evaluation of the test score out to the harness. Move Experiment to
2782         a new statistics.js, where Regression will also eventually go. Get rid of algorithm.js
2783         and move it to utilities.js since the Heap is used only for Experiments.
2784
2785         * Animometer/tests/resources/algorithm.js: Removed. Heap is in utilities.js.
2786         * Animometer/tests/resources/sampler.js: Removed. Experiment is in statistics.js,
2787         Sampler in main.js.
2788         * Animometer/tests/resources/main.js: Move Sampler here.
2789         * Animometer/resources/statistics.js: Added. Move Statistics and Experiment here.
2790         * Animometer/resources/extensions.js: Move Heap here. Attach static method to create
2791         a max or min heap to Heap, instead of a new Algorithm object.
2792
2793         Update JS files.
2794         * Animometer/developer.html:
2795         * Animometer/index.html:
2796         * Animometer/tests/bouncing-particles/bouncing-canvas-images.html:
2797         * Animometer/tests/bouncing-particles/bouncing-canvas-shapes.html:
2798         * Animometer/tests/bouncing-particles/bouncing-css-images.html:
2799         * Animometer/tests/bouncing-particles/bouncing-css-shapes.html:
2800         * Animometer/tests/bouncing-particles/bouncing-svg-images.html:
2801         * Animometer/tests/bouncing-particles/bouncing-svg-shapes.html:
2802         * Animometer/tests/master/canvas-stage.html:
2803         * Animometer/tests/master/focus.html:
2804         * Animometer/tests/master/image-data.html:
2805         * Animometer/tests/master/multiply.html:
2806         * Animometer/tests/master/particles.html:
2807         * Animometer/tests/misc/canvas-electrons.html:
2808         * Animometer/tests/misc/canvas-stars.html:
2809         * Animometer/tests/misc/compositing-transforms.html:
2810         * Animometer/tests/simple/simple-canvas-paths.html:
2811         * Animometer/tests/simple/tiled-canvas-image.html:
2812         * Animometer/tests/template/template-canvas.html:
2813         * Animometer/tests/template/template-css.html:
2814         * Animometer/tests/template/template-svg.html:
2815         * Animometer/tests/text/layering-text.html:
2816         * Animometer/tests/text/text-boxes.html:
2817
2818         Fix the cursor in the graph analysis when the min
2819         complexity is not 0.
2820
2821         * Animometer/resources/debug-runner/graph.js:
2822         (_addRegression):
2823         (createComplexityGraph):
2824
2825 2016-02-23  Geoffrey Garen  <ggaren@apple.com>
2826
2827         Fix some issues in MallocBench
2828         https://bugs.webkit.org/show_bug.cgi?id=154600
2829
2830         Reviewed by Oliver Hunt.
2831
2832         * MallocBench/MallocBench.xcodeproj/project.pbxproj: Make nimlang.ops
2833         a part of the build so that it copies to the right place for execution.
2834
2835         * MallocBench/MallocBench/Interpreter.cpp:
2836         (Interpreter::Interpreter): Don't try to open .ops files for writing
2837         because we're only going to read and we might need extra permissions to
2838         write.
2839
2840         (Interpreter::~Interpreter): Give more context when opening a file fails
2841         to help with debugging.
2842
2843         * MallocBench/MallocBench/stress.cpp:
2844         (benchmark_stress): Reduce iterations to complete in less than 10 seconds.
2845
2846 2016-02-23  Michael Saboff  <msaboff@apple.com>
2847
2848         Unreviewed change to revert extraneous changes made part of change set 196955.
2849
2850         * MallocBench/MallocBench/Interpreter.cpp:
2851         (Interpreter::doMallocOp):
2852         (Interpreter::Thread::switchTo):
2853         (writeData): Deleted.
2854
2855 2016-02-19  Michael Saboff  <msaboff@apple.com>
2856
2857         MallocBench: Added recording for nimlang website, new recording details and added new options
2858         https://bugs.webkit.org/show_bug.cgi?id=154485
2859
2860         Reviewed by Geoff Garen.
2861
2862         Added new capabilities to MallocBench.  These include:
2863             Added a recording of http://nim-lang.org/docs/lib.html.
2864             Added thread id to the recording and the ability to playback switching threads in MallocBench
2865             Added aligned allocations to recordings and the ability to playback
2866             Added --use-thread-id option to honor recorded thread ids
2867             Added --detailed-report to output remaining allocations by size after playback
2868             Added --no-warmup to not run the warm up iteration
2869
2870         Changed the way that options are passed down to the benchmarks.  Instead of passing individual
2871         boolean or numeric option values, just pass a reference the CommandLine itself.  Each benchmark
2872         can access the options that are appropriate.  The Benchmark class also uses the options for
2873         is parallel, run counts and warm up.
2874
2875         Added thread id and aligned malloc to the Op by noticing that structure padding and Opcode allowed
2876         for another 32 bits of data.  Breaking that unused 32 bits into a 16 bit thread id value and a
2877         16 bit log base 2 of the alignment for aligned malloc allowed for existing recordings to playback
2878         without any incompatibilities.
2879
2880         Threaded operation is simulated by creating threads as needed.  As long as the next Op's thread id
2881         is the same as the last, operation continues as normal.  When the next Op has a different thread id,
2882         we switch to that thread using the shared Op stream to continue playing back.  There is a mutex to
2883         assure that only one thread is really running at a time and a condition variable used to wait
2884         that the current thread id matches each block thread's thread id.  This doesn't simulate true
2885         concurrent threading, but is instead plays back Ops recorded for multiple thread faithfully.
2886
2887         * MallocBench/MallocBench.xcodeproj/project.pbxproj:
2888         * MallocBench/MallocBench/Benchmark.cpp:
2889         (deallocateHeap):
2890         (Benchmark::Benchmark):
2891         (Benchmark::runOnce):
2892         (Benchmark::run):
2893         * MallocBench/MallocBench/Benchmark.h:
2894         (Benchmark::isValid):
2895         * MallocBench/MallocBench/CommandLine.cpp:
2896         (CommandLine::printUsage):
2897         * MallocBench/MallocBench/CommandLine.h:
2898         (CommandLine::isValid):
2899         (CommandLine::benchmarkName):
2900         (CommandLine::isParallel):
2901         (CommandLine::useThreadID):
2902         (CommandLine::detailedReport):
2903         (CommandLine::warmUp):
2904         (CommandLine::heapSize):
2905         (CommandLine::runs):
2906         * MallocBench/MallocBench/Interpreter.cpp:
2907         (Interpreter::Interpreter):
2908         (Interpreter::run):
2909         (Interpreter::readOps):
2910         (Interpreter::doOnSameThread):
2911         (Interpreter::switchToThread):
2912         (Interpreter::detailedReport):
2913         (compute2toPower):
2914         (writeData):
2915         (Interpreter::doMallocOp):
2916         (Interpreter::Thread::Thread):
2917         (Interpreter::Thread::stop):
2918         (Interpreter::Thread::~Thread):
2919         (Interpreter::Thread::runThread):
2920         (Interpreter::Thread::waitToRun):
2921         (Interpreter::Thread::switchTo):
2922         * MallocBench/MallocBench/Interpreter.h:
2923         (Interpreter::Thread::isMainThread):
2924         * MallocBench/MallocBench/alloc_free.cpp: Added.
2925         (benchmark_alloc_free):
2926         * MallocBench/MallocBench/alloc_free.h: Added.
2927         * MallocBench/MallocBench/balloon.cpp:
2928         (benchmark_balloon):
2929         * MallocBench/MallocBench/balloon.h:
2930         * MallocBench/MallocBench/big.cpp:
2931         (benchmark_big):
2932         * MallocBench/MallocBench/big.h:
2933         * MallocBench/MallocBench/churn.cpp:
2934         (benchmark_churn):
2935         * MallocBench/MallocBench/churn.h:
2936         * MallocBench/MallocBench/facebook.cpp:
2937         (benchmark_facebook):
2938         * MallocBench/MallocBench/facebook.h:
2939         * MallocBench/MallocBench/flickr.cpp:
2940         (benchmark_flickr):
2941         (benchmark_flickr_memory_warning):
2942         * MallocBench/MallocBench/flickr.h:
2943         * MallocBench/MallocBench/fragment.cpp:
2944         (validate):
2945         (benchmark_fragment):
2946         (benchmark_fragment_iterate):
2947         * MallocBench/MallocBench/fragment.h:
2948         * MallocBench/MallocBench/list.cpp:
2949         (benchmark_list_allocate):
2950         (benchmark_list_traverse):
2951         * MallocBench/MallocBench/list.h:
2952         * MallocBench/MallocBench/main.cpp:
2953         (main):
2954         * MallocBench/MallocBench/medium.cpp:
2955         (benchmark_medium):
2956         * MallocBench/MallocBench/medium.h:
2957         * MallocBench/MallocBench/memalign.cpp:
2958         (test):
2959         (benchmark_memalign):
2960         * MallocBench/MallocBench/memalign.h:
2961         * MallocBench/MallocBench/message.cpp:
2962         (benchmark_message_one):
2963         (benchmark_message_many):
2964         * MallocBench/MallocBench/message.h:
2965         * MallocBench/MallocBench/nimlang.cpp: Added.
2966         (benchmark_nimlang):
2967         * MallocBench/MallocBench/nimlang.h: Added.
2968         * MallocBench/MallocBench/nimlang.ops: Added.
2969         * MallocBench/MallocBench/realloc.cpp:
2970         (benchmark_realloc):
2971         * MallocBench/MallocBench/realloc.h:
2972         * MallocBench/MallocBench/reddit.cpp:
2973         (benchmark_reddit):
2974         (benchmark_reddit_memory_warning):
2975         * MallocBench/MallocBench/reddit.h:
2976         * MallocBench/MallocBench/stress.cpp:
2977         (deallocate):
2978         (benchmark_stress):
2979         * MallocBench/MallocBench/stress.h:
2980         * MallocBench/MallocBench/stress_aligned.cpp:
2981         (benchmark_stress_aligned):
2982         * MallocBench/MallocBench/stress_aligned.h:
2983         * MallocBench/MallocBench/theverge.cpp:
2984         (benchmark_theverge):
2985         (benchmark_theverge_memory_warning):
2986         * MallocBench/MallocBench/theverge.h:
2987         * MallocBench/MallocBench/tree.cpp:
2988         (benchmark_tree_allocate):
2989         (benchmark_tree_traverse):
2990         (benchmark_tree_churn):
2991         * MallocBench/MallocBench/tree.h:
2992         * MallocBench/run-malloc-benchmarks:
2993
2994 2016-02-11  Jon Lee  <jonlee@apple.com>
2995
2996         Fix a missing refactoring.
2997
2998         * Animometer/tests/master/resources/multiply.js:
2999         (animate): Move to Utilities.lerp.
3000         (_lerp): Deleted.
3001
3002 2016-02-10  Jon Lee  <jonlee@apple.com>
3003
3004         Add new benchmark tests.
3005         https://bugs.webkit.org/show_bug.cgi?id=154063
3006
3007         Provisionally reviewed by Said Abou-Hallawa.
3008
3009         Add tests for get/put image data, filters, opacity, and css transforms.
3010
3011         * Animometer/resources/runner/benchmark-runner.js:
3012         (_runBenchmarkAndRecordResults): Update the body background color to match that of
3013         the stage.
3014         (this._runNextIteration): Clear the background color style for the results page.
3015         * Animometer/resources/runner/tests.js:
3016         * Animometer/tests/master/focus.html: Added.
3017         * Animometer/tests/master/image-data.html: Added.
3018         * Animometer/tests/master/multiply.html: Added.
3019         * Animometer/tests/master/resources/focus.js: Added.
3020         * Animometer/tests/master/resources/image-data.js: Added.
3021         * Animometer/tests/master/resources/multiply.js: Added.
3022         * Animometer/tests/master/resources/stage.css: Move common styles out.
3023         * Animometer/tests/resources/main.js: Update Stage.randomBool to use Math.random.
3024         Add Stage.randomSign for randomly setting a direction. Add the notion of the
3025         current timestamp of the test to Benchmark, since some animations cycle through
3026         colors and rely on an incremental counter like the time.
3027
3028 2016-02-09  Said Abou-Hallawa  <sabouhallawa@apple.com>
3029
3030         Add internal benchmark tests for CSS mix-blend-modes and filters
3031         https://bugs.webkit.org/show_bug.cgi?id=154058
3032
3033         Provisionally reviewed by Jon Lee.
3034
3035         * Animometer/resources/debug-runner/tests.js: Include the new tests in the
3036         "HTML suite" of the debug runner.
3037
3038         * Animometer/resources/extensions.js:
3039         (Utilities.browserPrefix):
3040         (Utilities.setElementPrefixedProperty): Utility functions to allow setting
3041         prefixed style properties.
3042
3043         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
3044         Set the mix-blend-mode and the filter to some random values if the options
3045         of the test requested that.
3046
3047         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3048         (parseShapeParameters): Parse the url options "blend" and "filter" and set
3049         the corresponding flags.
3050
3051         * Animometer/tests/resources/main.js:
3052         (randomStyleMixBlendMode):
3053         (randomStyleFilter): Return random mix-blend-mode and filter.
3054
3055 2016-02-08  Jon Lee  <jonlee@apple.com>
3056
3057         Add a ramp controller
3058         https://bugs.webkit.org/show_bug.cgi?id=154028
3059
3060         Provisionally reviewed by Said Abou-Hallawa.
3061
3062         Enhance the graph to include a complexity-fps graph, in addition
3063         to the time graph.
3064
3065         * Animometer/developer.html: Add a ramp option.
3066         * Animometer/resources/debug-runner/animometer.css: Update the style.
3067         * Animometer/resources/strings.js: Flatten the Strings.text constants.
3068         * Animometer/resources/debug-runner/animometer.js:
3069         (ResultsTable.call._addGraphButton): Refactor.
3070         (ResultsTable.call._addTest): Add regression data.
3071         (benchmarkController): Add a form that allows the user to switch between the two forms,
3072         Add a form that allows the user to toggle different data. Hide certain header columns
3073         depending on the selected controller.
3074         * Animometer/resources/debug-runner/graph.js: Add the complexity regressions.
3075         * Animometer/resources/debug-runner/tests.js: Add headers for the ramp results.
3076         * Animometer/resources/runner/animometer.js:
3077         (ResultsTable): If a header is disabled don't include them in _flattenedHeaders.
3078         * Animometer/tests/resources/main.js:
3079         (Controller): Allow options to specify the capacity for sample arrays.
3080         (Regression): A piecewise regression that tries to fit a slope and a flat profile.
3081         (_calculateRegression): Options can fix the slope and bias when calculating the minimal
3082         error. Sweep across the samples in time (which could be backward depending on the controller)
3083         and calculate the intersection point.
3084         (RampController): This controller assumes that the target frame rate is below
3085         58 FPS. It runs in two stages. The first stage quickly determines the order of
3086         magnitude of objects needed to stress the system by the setting the complexity
3087         to increasingly difficult tiers. Perform a series of ramps descending from a
3088         high-water mark of complexity. The complexity needed to reach the target frame
3089         length is done by performing a piecewise regression on each ramp, and track a
3090         running average of these values. For the next ramp, make that running average
3091         the center of the ramp. With a minimum complexity of 0, the high-water mark is
3092         twice that average. The score is based on the highest complexity that can
3093         reach 60 fps.
3094
3095 2016-02-08  Jon Lee  <jonlee@apple.com>
3096
3097         Address Said's comments on the benchmark, and do some clean up.
3098
3099         * Animometer/developer.html:
3100         * Animometer/resources/debug-runner/animometer.css: Add styles for averages.
3101         * Animometer/resources/debug-runner/animometer.js: Use the right
3102         Strings constants.
3103         * Animometer/resources/debug-runner/graph.js:
3104         (_addRegressionLine): Add missing code to draw the line and standard
3105         deviation highlight.
3106         (onGraphTypeChanged): Remove unneeded variables
3107         (onTimeGraphOptionsChanged):
3108         * Animometer/resources/runner/benchmark-runner.js:
3109         (_runBenchmarkAndRecordResults): Rename samplers to suiteResults and
3110         _suitesSamplers to _suitesResults.
3111         * Animometer/tests/resources/main.js:
3112         (results): Call processSamples().
3113         (update): Change sampling timestamp comparison.
3114         (_animateLoop): Move shouldStop call to before the update.
3115         * Animometer/tests/resources/sampler.js:
3116         (process): Rename to processSamples().
3117
3118 2016-02-07  Jon Lee  <jonlee@apple.com>
3119
3120         Teach Controller to measure intervals, and turn off the frame length estimator.
3121
3122         * Animometer/tests/resources/main.js: Default interval length is 100 ms.
3123         (start): Set the first interval.
3124         (_measureAndResetInterval): Reports the average frame length of the interval that just
3125         completed, and sets up the next interval.
3126         (update): If there is no length, then just use the estimator per frame, otherwise the
3127         estimator measures per interval. Add a didFinishInterval for subclasses to process
3128         prior to recording the sample. Update tune() to include whether an interval had
3129         finished.
3130         (StepController): Step controllers don't measure on an interval basis.
3131
3132 2016-02-07  Jon Lee  <jonlee@apple.com>
3133
3134         Minor refactoring. Rename Controller._estimator to Controller._frameLengthEstimator
3135         and switch the parameters for start(), update(), and tune(), so that the timestamp
3136         is first and stage is second.
3137
3138         * Animometer/tests/resources/main.js:
3139
3140 2016-02-07  Jon Lee  <jonlee@apple.com>
3141
3142         Move ResultsTable functionality not needed for release tests out.
3143         Move reporting of score and mean to selection of the time-based graph.
3144
3145         * Animometer/developer.html: Rename graph-options to time-graph-options.
3146         * Animometer/resources/debug-runner/animometer.js:
3147         (DeveloperResultsTable): Moved from runner/animometer.js. Switch from mean
3148         values to "average" objects which can hold stdev. Move graph button and
3149         calculation of noisy measurements here. Sophisticated header processing
3150         is not needed in release suite.
3151         (populateTable): Use DeveloperResultsTable.
3152         * Animometer/resources/debug-runner/graph.js: Pull time graph creation to
3153         its own function, and add a new onGraphTypeChanged handler in preparation
3154         of a complexity graph to be added later.
3155         * Animometer/resources/runner/animometer.js:
3156         (ResultsTable): Simplify to just handle test names and scores.
3157
3158 2016-02-07  Jon Lee  <jonlee@apple.com>
3159
3160         Tests: reuse objects already made.
3161
3162         Avoid thrash of object creation and removal by maintaining an index that
3163         moves along the array as the adjust values change. If the tune value
3164         requires more objects than the maximum size of the object array, then create
3165         new objects. This means that the object array size never decreases.
3166
3167         * Animometer/tests/master/resources/canvas-stage.js: Maintain a separate
3168         offsetIndex. For these tests, we want to avoid drawing the oldest objects,
3169         so the scene will draw the object at offsetIndex to the end of the array.
3170         (tune): Reverse the logic since "removal" of objects is much simpler and
3171         involves simply changing the offsetIndex.
3172         (animate): Update the for loop to draw from offsetIndex to the end.
3173         (complexity): Update the definition.
3174         * Animometer/tests/master/resources/canvas-tests.js: Maintain a separate
3175         offsetIndex. For these tests, we want to avoid drawing the newest objects,
3176         so the scene will draw the object at index 0 to the object at offsetIndex.
3177         (SimpleCanvasStage.animate): Fly-by removal of local stage variable,
3178         which is unneeded. Update the for loop to draw from offsetIndex to the end.
3179         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3180         (SimpleCanvasStage.animate): Update the for loop to draw from 0 to
3181         offsetIndex.
3182         * Animometer/tests/simple/resources/simple-canvas.js:
3183         (tune): Update logic. Here, offsetIndex represents the boundary of the last
3184         index to render.
3185         (animate): Update the for loop to draw from 0 to offsetIndex.
3186         (complexity): Update the definition.
3187
3188 2016-02-07  Jon Lee  <jonlee@apple.com>
3189
3190         Tests: refactor and update styles.
3191
3192         * Animometer/tests/resources/main.js: Add helper methods that return
3193         a color that hue rotates based on the date, and a counter value that
3194         increases based on the date. Fix randomInt() to not bias against the min and
3195         max values.
3196
3197         * Animometer/tests/master/resources/canvas-tests.js: Use new helper methods.
3198         * Animometer/tests/master/resources/dom-particles.js: Ditto.
3199         * Animometer/tests/master/resources/particles.js: Ditto.
3200         * Animometer/tests/simple/resources/simple-canvas-paths.js: Refactor to
3201         use a rotating color instead of a random color. The fast switching of color
3202         is too vivid to watch.
3203
3204         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3205         (BouncingSvgParticlesStage.call.createGradient): Fix the gradient so
3206         that the last stop is located at the end.
3207
3208 2016-02-07  Jon Lee  <jonlee@apple.com>
3209
3210         Refactor tune() to not return the complexity of the scene.
3211
3212         We have stage.complexity() now, so returning the complexity through tune
3213         is unnecessary.
3214
3215         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3216         * Animometer/tests/master/resources/canvas-stage.js:
3217         * Animometer/tests/master/resources/particles.js:
3218         * Animometer/tests/misc/resources/canvas-electrons.js:
3219         * Animometer/tests/misc/resources/canvas-stars.js:
3220         * Animometer/tests/resources/main.js:
3221         * Animometer/tests/simple/resources/simple-canvas.js:
3222         * Animometer/tests/simple/resources/tiled-canvas-image.js:
3223         * Animometer/tests/template/resources/template-canvas.js:
3224         * Animometer/tests/template/resources/template-css.js:
3225         * Animometer/tests/template/resources/template-svg.js:
3226         * Animometer/tests/text/resources/layering-text.js:
3227
3228 2016-02-07  Jon Lee  <jonlee@apple.com>
3229
3230         Make the fixed controller a step controller instead. Halfway through the test
3231         it will bump up the complexity 4-fold. Calculate the step timestamp using options
3232         instead of a separate parameter to the Controller constructor.
3233
3234         * Animometer/developer.html: Change value to "step"
3235         * Animometer/resources/debug-runner/animometer.js:
3236         (window.suitesManager.updateEditsElementsState): Show number inputs when set to "step".
3237         * Animometer/tests/resources/main.js:
3238         (update): Provide a hook for subclasses to tune.
3239         (StepController): Maintain a flag determining whether we've stepped, and the time
3240         we should step.
3241         (Benchmark): Use the new StepController.
3242
3243 2016-02-07  Jon Lee  <jonlee@apple.com>
3244
3245         Adjust the FPS graph scale.
3246
3247         Instead of making the FPS graph linearly scale, scale it based on the frame length,
3248         but show the data in terms of FPS. Because it is inversely proportional, and most
3249         of the data never gets below 20, concentrate the axis from 20-60 FPS, since otherwise
3250         over half of the available graph space ends up blank.
3251
3252         This means we should convert all of the FPS data to frame length data.
3253
3254         * Animometer/resources/debug-runner/graph.js: Update the domain to be based on
3255         frame length in milliseconds instead of FPS. Update the cursor to consider all of the
3256         values being shown, and then pick the min and max values to represent the length of the
3257         cursor.
3258         * Animometer/resources/runner/animometer.js:
3259         * Animometer/resources/strings.js:
3260         * Animometer/tests/resources/main.js:
3261         (processSamples): Add the ability to only sample a range of the data instead of everything
3262         after an offset index. Update sampler to record the frame lengths instead of the frame
3263         rate.
3264
3265 2016-02-07  Jon Lee  <jonlee@apple.com>
3266
3267         Add option to use different methods for retrieving a timestamp.
3268
3269         * Animometer/developer.html: Add performance.now and Date.now options.
3270         * Animometer/resources/runner/animometer.js: Default to performance.now.
3271         (window.benchmarkController.startBenchmark):
3272         * Animometer/tests/resources/main.js: Tie the desired method to _getTimestamp.
3273         (run): Use _getTimestamp.
3274         (_animateLoop): Ditto.
3275
3276 2016-02-07  Jon Lee  <jonlee@apple.com>
3277
3278         Allow adding any number of markers to the graph. The markers can be labeled
3279         and contain timestamp and sample index data. Make it a part of the controller
3280         rather than keeping it in the sampler.
3281
3282         * Animometer/resources/debug-runner/animometer.css: Add styles for markers
3283         * Animometer/resources/debug-runner/graph.js: Create the markers and add
3284         text labels.
3285         * Animometer/resources/runner/animometer.js: Assume the samplingTimeOffset
3286         is just one of the marks provided.
3287         * Animometer/resources/strings.js: Add Strings.json.marks.
3288         * Animometer/tests/resources/main.js:
3289         (Controller): Keep marks here. They are keyed by the marker name, so no two
3290         markers should have the same name.
3291         (recordFirstSample): Refactor to use mark.
3292         (mark): Allows for arbitrary data if needed later. The timestamp maintained
3293         is relative to the absolute start timestamp.
3294         (containsMark): Checks whether a mark with a specific comment exists.
3295         (processSamples): Removes the _startTimestamp offset from the marks before
3296         setting it in results.
3297         * Animometer/tests/resources/sampler.js: Remove marks.
3298
3299 2016-02-07  Jon Lee  <jonlee@apple.com>
3300
3301         Get rid of options member variable in Benchmark.
3302
3303         Options are only needed when initializing the stage or benchmark, so there's no
3304         need to also keep a reference to it.
3305
3306         * Animometer/tests/resources/main.js: Get rid of options variable in Benchmark.
3307         Pass options to Controllers and Stages.
3308         (Controller.Utilities.createClass):
3309         (Benchmark.Utilities.createClass):
3310         (get options): Deleted.
3311
3312         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-images.js:
3313         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-particles.js:
3314         * Animometer/tests/bouncing-particles/resources/bouncing-canvas-shapes.js:
3315         * Animometer/tests/bouncing-particles/resources/bouncing-css-images.js:
3316         * Animometer/tests/bouncing-particles/resources/bouncing-css-shapes.js:
3317         * Animometer/tests/bouncing-particles/resources/bouncing-particles.js:
3318         * Animometer/tests/bouncing-particles/resources/bouncing-svg-images.js:
3319         * Animometer/tests/bouncing-particles/resources/bouncing-svg-shapes.js:
3320         * Animometer/tests/master/resources/canvas-stage.js:
3321         * Animometer/tests/master/resources/canvas-tests.js:
3322         * Animometer/tests/master/resources/particles.js:
3323         * Animometer/tests/misc/resources/canvas-electrons.js:
3324         * Animometer/tests/misc/resources/canvas-stars.js:
3325         * Animometer/tests/misc/resources/compositing-transforms.js:
3326         * Animometer/tests/simple/resources/simple-canvas-paths.js:
3327         * Animometer/tests/simple/resources/tiled-canvas-image.js:
3328         * Animometer/tests/template/resources/template-canvas.js:
3329         * Animometer/tests/template/resources/template-css.js:
3330         * Animometer/tests/template/resources/template-svg.js:
3331         * Animometer/tests/text/resources/layering-text.js:
3332
3333 2016-02-07  Jon Lee  <jonlee@apple.com>
3334
3335         Update how the benchmark is run
3336         https://bugs.webkit.org/show_bug.cgi?id=153960
3337