0e39de12851128264ab852a84dc0d399c1a0178f
[WebKit-https.git] / Source / WebCore / platform / text / TextCodecUTF16.cpp
1 /*
2  * Copyright (C) 2004, 2006, 2008, 2010 Apple Inc. All rights reserved.
3  *
4  * Redistribution and use in source and binary forms, with or without
5  * modification, are permitted provided that the following conditions
6  * are met:
7  * 1. Redistributions of source code must retain the above copyright
8  *    notice, this list of conditions and the following disclaimer.
9  * 2. Redistributions in binary form must reproduce the above copyright
10  *    notice, this list of conditions and the following disclaimer in the
11  *    documentation and/or other materials provided with the distribution.
12  *
13  * THIS SOFTWARE IS PROVIDED BY APPLE INC. ``AS IS'' AND ANY
14  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
15  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
16  * PURPOSE ARE DISCLAIMED.  IN NO EVENT SHALL APPLE INC. OR
17  * CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL,
18  * EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO,
19  * PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR
20  * PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY
21  * OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
22  * (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
23  * OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE. 
24  */
25
26 #include "config.h"
27 #include "TextCodecUTF16.h"
28
29 #include <wtf/text/CString.h>
30 #include <wtf/text/StringBuffer.h>
31 #include <wtf/text/WTFString.h>
32
33 namespace WebCore {
34
35 void TextCodecUTF16::registerEncodingNames(EncodingNameRegistrar registrar)
36 {
37     registrar("UTF-16LE", "UTF-16LE");
38     registrar("UTF-16BE", "UTF-16BE");
39
40     registrar("ISO-10646-UCS-2", "UTF-16LE");
41     registrar("UCS-2", "UTF-16LE");
42     registrar("UTF-16", "UTF-16LE");
43     registrar("Unicode", "UTF-16LE");
44     registrar("csUnicode", "UTF-16LE");
45     registrar("unicodeFEFF", "UTF-16LE");
46
47     registrar("unicodeFFFE", "UTF-16BE");
48 }
49
50 static std::unique_ptr<TextCodec> newStreamingTextDecoderUTF16LE(const TextEncoding&, const void*)
51 {
52     return std::make_unique<TextCodecUTF16>(true);
53 }
54
55 static std::unique_ptr<TextCodec> newStreamingTextDecoderUTF16BE(const TextEncoding&, const void*)
56 {
57     return std::make_unique<TextCodecUTF16>(false);
58 }
59
60 void TextCodecUTF16::registerCodecs(TextCodecRegistrar registrar)
61 {
62     registrar("UTF-16LE", newStreamingTextDecoderUTF16LE, 0);
63     registrar("UTF-16BE", newStreamingTextDecoderUTF16BE, 0);
64 }
65
66 String TextCodecUTF16::decode(const char* bytes, size_t length, bool, bool, bool&)
67 {
68     if (!length)
69         return String();
70
71     // FIXME: This should generate an error if there is an unpaired surrogate.
72
73     const unsigned char* p = reinterpret_cast<const unsigned char*>(bytes);
74     size_t numBytes = length + m_haveBufferedByte;
75     size_t numChars = numBytes / 2;
76
77     StringBuffer<UChar> buffer(numChars);
78     UChar* q = buffer.characters();
79
80     if (m_haveBufferedByte) {
81         UChar c;
82         if (m_littleEndian)
83             c = m_bufferedByte | (p[0] << 8);
84         else
85             c = (m_bufferedByte << 8) | p[0];
86         *q++ = c;
87         m_haveBufferedByte = false;
88         p += 1;
89         numChars -= 1;
90     }
91
92     if (m_littleEndian) {
93         for (size_t i = 0; i < numChars; ++i) {
94             UChar c = p[0] | (p[1] << 8);
95             p += 2;
96             *q++ = c;
97         }
98     } else {
99         for (size_t i = 0; i < numChars; ++i) {
100             UChar c = (p[0] << 8) | p[1];
101             p += 2;
102             *q++ = c;
103         }
104     }
105
106     if (numBytes & 1) {
107         ASSERT(!m_haveBufferedByte);
108         m_haveBufferedByte = true;
109         m_bufferedByte = p[0];
110     }
111
112     buffer.shrink(q - buffer.characters());
113
114     return String::adopt(WTFMove(buffer));
115 }
116
117 CString TextCodecUTF16::encode(const UChar* characters, size_t length, UnencodableHandling)
118 {
119     // We need to be sure we can double the length without overflowing.
120     // Since the passed-in length is the length of an actual existing
121     // character buffer, each character is two bytes, and we know
122     // the buffer doesn't occupy the entire address space, we can
123     // assert here that doubling the length does not overflow size_t
124     // and there's no need for a runtime check.
125     ASSERT(length <= std::numeric_limits<size_t>::max() / 2);
126
127     char* bytes;
128     CString string = CString::newUninitialized(length * 2, bytes);
129
130     // FIXME: CString is not a reasonable data structure for encoded UTF-16, which will have
131     // null characters inside it. Perhaps the result of encode should not be a CString.
132     if (m_littleEndian) {
133         for (size_t i = 0; i < length; ++i) {
134             UChar c = characters[i];
135             bytes[i * 2] = c;
136             bytes[i * 2 + 1] = c >> 8;
137         }
138     } else {
139         for (size_t i = 0; i < length; ++i) {
140             UChar c = characters[i];
141             bytes[i * 2] = c >> 8;
142             bytes[i * 2 + 1] = c;
143         }
144     }
145
146     return string;
147 }
148
149 } // namespace WebCore