webkitpy: Implement device type specific expected results (Part 2)
[WebKit-https.git] / Tools / Scripts / webkitpy / layout_tests / controllers / layout_test_finder_unittest.py
1 # Copyright (c) 2015, Canon Inc. All rights reserved.
2 #
3 # Redistribution and use in source and binary forms, with or without
4 # modification, are permitted provided that the following conditions
5 # are met:
6 # 1.  Redistributions of source code must retain the above copyright
7 #     notice, this list of conditions and the following disclaimer.
8 # 2.  Redistributions in binary form must reproduce the above copyright
9 #     notice, this list of conditions and the following disclaimer in the
10 #     documentation and/gcor other materials provided with the distribution.
11 # 3.  Neither the name of Canon Inc. nor the names of
12 #     its contributors may be used to endorse or promote products derived
13 #     from this software without specific prior written permission.
14 #
15 # THIS SOFTWARE IS PROVIDED BY CANON INC. AND ITS CONTRIBUTORS "AS IS" AND ANY
16 # EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
17 # WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
18 # DISCLAIMED. IN NO EVENT SHALL CANON INC. AND ITS CONTRIBUTORS BE LIABLE FOR
19 # ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
20 # DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR
21 # SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER
22 # CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY,
23 # OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
24 # OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
25
26 import optparse
27 import unittest
28
29 from collections import OrderedDict
30
31 from webkitpy.common.host_mock import MockHost
32 from webkitpy.common.system.filesystem_mock import MockFileSystem
33 from webkitpy.layout_tests.controllers.layout_test_finder import LayoutTestFinder
34 from webkitpy.port.test import TestPort
35
36
37 class MockPort(TestPort):
38     def __init__(self, host):
39         super(MockPort, self).__init__(host)
40
41     def tests(self, paths):
42         return [path for path in paths if path.endswith('.html')]
43
44
45 class LayoutTestFinderTests(unittest.TestCase):
46     def touched_files(self, touched_files, fs=None):
47         host = MockHost()
48         if fs:
49             host.filesystem = fs
50         else:
51             fs = host.filesystem
52         port = MockPort(host)
53         return (fs, LayoutTestFinder(port, optparse.Values({'skipped': 'always', 'skip_failing_tests': False, 'http': True})).find_touched_tests(touched_files))
54
55     def test_touched_test(self):
56         paths = ['LayoutTests/test.html', 'LayoutTests/test', 'test2.html', 'Source/test1.html']
57         fs, touched_tests = self.touched_files(paths)
58         self.assertItemsEqual(touched_tests, ['test.html'])
59
60     def test_expected_touched_test(self):
61         paths = ['LayoutTests/test-expected.txt', 'LayoutTests/no-test-expected.txt']
62         fs = MockFileSystem()
63         fs.write_text_file('/test.checkout/LayoutTests/test.html', 'This is a test')
64         fs, touched_tests = self.touched_files(paths, fs)
65         self.assertItemsEqual(touched_tests, ['test.html'])
66
67     def test_platform_expected_touched_test(self):
68         paths = ['LayoutTests/platform/mock/test-expected.txt', 'LayoutTests/platform/mock/no-test-expected.txt']
69         fs = MockFileSystem()
70         fs.write_text_file('/test.checkout/LayoutTests/test.html', 'This is a test')
71         fs, touched_tests = self.touched_files(paths, fs)
72         self.assertItemsEqual(touched_tests, ['test.html'])
73
74     def test_platform_duplicate_touched_test(self):
75         paths = ['LayoutTests/test1.html', 'LayoutTests/test1.html', 'LayoutTests/platform/mock1/test2-expected.txt', 'LayoutTests/platform/mock2/test2-expected.txt']
76         fs = MockFileSystem()
77         fs.write_text_file('/test.checkout/LayoutTests/test2.html', 'This is a test')
78         fs, touched_tests = self.touched_files(paths, fs)
79         self.assertItemsEqual(touched_tests, ['test1.html', 'test2.html'])
80
81     def test_touched_but_skipped_test(self):
82         host = MockHost()
83         port = MockPort(host)
84
85         expectations_dict = OrderedDict()
86         expectations_dict['expectations'] = 'test1.html [ Skip ]\ntest3.html [ Skip ]\n'
87         port.expectations_dict = lambda **kwargs: expectations_dict
88         port.test_exists = lambda test: True
89
90         paths = ['LayoutTests/test0.html', 'LayoutTests/test1.html', 'LayoutTests/test2-expected.txt', 'LayoutTests/test3-expected.txt']
91         host.filesystem.write_text_file('/test.checkout/LayoutTests/test2.html', 'This is a test to be runned')
92         host.filesystem.write_text_file('/test.checkout/LayoutTests/test3.html', 'This is a test to be skipped')
93
94         touched_tests = LayoutTestFinder(port, optparse.Values({'skipped': 'always', 'skip_failing_tests': False, 'http': True})).find_touched_tests(paths)
95         self.assertItemsEqual(touched_tests, ['test0.html', 'test2.html'])