| 1 | //===--- UnicodeCharSets.h - Contains important sets of characters --------===// |
|---|---|
| 2 | // |
| 3 | // Part of the LLVM Project, under the Apache License v2.0 with LLVM Exceptions. |
| 4 | // See https://llvm.org/LICENSE.txt for license information. |
| 5 | // SPDX-License-Identifier: Apache-2.0 WITH LLVM-exception |
| 6 | // |
| 7 | //===----------------------------------------------------------------------===// |
| 8 | #ifndef LLVM_CLANG_LIB_LEX_UNICODECHARSETS_H |
| 9 | #define LLVM_CLANG_LIB_LEX_UNICODECHARSETS_H |
| 10 | |
| 11 | #include "llvm/Support/UnicodeCharRanges.h" |
| 12 | |
| 13 | namespace clang { |
| 14 | extern const llvm::sys::UnicodeCharSet::CharRanges GeneratedXIDStartRanges; |
| 15 | extern const llvm::sys::UnicodeCharSet::CharRanges GeneratedXIDContinueRanges; |
| 16 | extern const llvm::sys::UnicodeCharSet::CharRanges |
| 17 | GeneratedMathematicalNotationProfileIDStartRanges; |
| 18 | extern const llvm::sys::UnicodeCharSet::CharRanges |
| 19 | GeneratedMathematicalNotationProfileIDContinueRanges; |
| 20 | } // namespace clang |
| 21 | |
| 22 | // C11 D.1, C++11 [charname.allowed] |
| 23 | static const llvm::sys::UnicodeCharRange C11AllowedIDCharRanges[] = { |
| 24 | // 1 |
| 25 | { .Lower: 0x00A8, .Upper: 0x00A8 }, { .Lower: 0x00AA, .Upper: 0x00AA }, { .Lower: 0x00AD, .Upper: 0x00AD }, |
| 26 | { .Lower: 0x00AF, .Upper: 0x00AF }, { .Lower: 0x00B2, .Upper: 0x00B5 }, { .Lower: 0x00B7, .Upper: 0x00BA }, |
| 27 | { .Lower: 0x00BC, .Upper: 0x00BE }, { .Lower: 0x00C0, .Upper: 0x00D6 }, { .Lower: 0x00D8, .Upper: 0x00F6 }, |
| 28 | { .Lower: 0x00F8, .Upper: 0x00FF }, |
| 29 | // 2 |
| 30 | { .Lower: 0x0100, .Upper: 0x167F }, { .Lower: 0x1681, .Upper: 0x180D }, { .Lower: 0x180F, .Upper: 0x1FFF }, |
| 31 | // 3 |
| 32 | { .Lower: 0x200B, .Upper: 0x200D }, { .Lower: 0x202A, .Upper: 0x202E }, { .Lower: 0x203F, .Upper: 0x2040 }, |
| 33 | { .Lower: 0x2054, .Upper: 0x2054 }, { .Lower: 0x2060, .Upper: 0x206F }, |
| 34 | // 4 |
| 35 | { .Lower: 0x2070, .Upper: 0x218F }, { .Lower: 0x2460, .Upper: 0x24FF }, { .Lower: 0x2776, .Upper: 0x2793 }, |
| 36 | { .Lower: 0x2C00, .Upper: 0x2DFF }, { .Lower: 0x2E80, .Upper: 0x2FFF }, |
| 37 | // 5 |
| 38 | { .Lower: 0x3004, .Upper: 0x3007 }, { .Lower: 0x3021, .Upper: 0x302F }, { .Lower: 0x3031, .Upper: 0x303F }, |
| 39 | // 6 |
| 40 | { .Lower: 0x3040, .Upper: 0xD7FF }, |
| 41 | // 7 |
| 42 | { .Lower: 0xF900, .Upper: 0xFD3D }, { .Lower: 0xFD40, .Upper: 0xFDCF }, { .Lower: 0xFDF0, .Upper: 0xFE44 }, |
| 43 | { .Lower: 0xFE47, .Upper: 0xFFFD }, |
| 44 | // 8 |
| 45 | { .Lower: 0x10000, .Upper: 0x1FFFD }, { .Lower: 0x20000, .Upper: 0x2FFFD }, { .Lower: 0x30000, .Upper: 0x3FFFD }, |
| 46 | { .Lower: 0x40000, .Upper: 0x4FFFD }, { .Lower: 0x50000, .Upper: 0x5FFFD }, { .Lower: 0x60000, .Upper: 0x6FFFD }, |
| 47 | { .Lower: 0x70000, .Upper: 0x7FFFD }, { .Lower: 0x80000, .Upper: 0x8FFFD }, { .Lower: 0x90000, .Upper: 0x9FFFD }, |
| 48 | { .Lower: 0xA0000, .Upper: 0xAFFFD }, { .Lower: 0xB0000, .Upper: 0xBFFFD }, { .Lower: 0xC0000, .Upper: 0xCFFFD }, |
| 49 | { .Lower: 0xD0000, .Upper: 0xDFFFD }, { .Lower: 0xE0000, .Upper: 0xEFFFD } |
| 50 | }; |
| 51 | |
| 52 | // C99 Annex D |
| 53 | static const llvm::sys::UnicodeCharRange C99AllowedIDCharRanges[] = { |
| 54 | // Latin (1) |
| 55 | { .Lower: 0x00AA, .Upper: 0x00AA }, |
| 56 | |
| 57 | // Special characters (1) |
| 58 | { .Lower: 0x00B5, .Upper: 0x00B5 }, { .Lower: 0x00B7, .Upper: 0x00B7 }, |
| 59 | |
| 60 | // Latin (2) |
| 61 | { .Lower: 0x00BA, .Upper: 0x00BA }, { .Lower: 0x00C0, .Upper: 0x00D6 }, { .Lower: 0x00D8, .Upper: 0x00F6 }, |
| 62 | { .Lower: 0x00F8, .Upper: 0x01F5 }, { .Lower: 0x01FA, .Upper: 0x0217 }, { .Lower: 0x0250, .Upper: 0x02A8 }, |
| 63 | |
| 64 | // Special characters (2) |
| 65 | { .Lower: 0x02B0, .Upper: 0x02B8 }, { .Lower: 0x02BB, .Upper: 0x02BB }, { .Lower: 0x02BD, .Upper: 0x02C1 }, |
| 66 | { .Lower: 0x02D0, .Upper: 0x02D1 }, { .Lower: 0x02E0, .Upper: 0x02E4 }, { .Lower: 0x037A, .Upper: 0x037A }, |
| 67 | |
| 68 | // Greek (1) |
| 69 | { .Lower: 0x0386, .Upper: 0x0386 }, { .Lower: 0x0388, .Upper: 0x038A }, { .Lower: 0x038C, .Upper: 0x038C }, |
| 70 | { .Lower: 0x038E, .Upper: 0x03A1 }, { .Lower: 0x03A3, .Upper: 0x03CE }, { .Lower: 0x03D0, .Upper: 0x03D6 }, |
| 71 | { .Lower: 0x03DA, .Upper: 0x03DA }, { .Lower: 0x03DC, .Upper: 0x03DC }, { .Lower: 0x03DE, .Upper: 0x03DE }, |
| 72 | { .Lower: 0x03E0, .Upper: 0x03E0 }, { .Lower: 0x03E2, .Upper: 0x03F3 }, |
| 73 | |
| 74 | // Cyrillic |
| 75 | { .Lower: 0x0401, .Upper: 0x040C }, { .Lower: 0x040E, .Upper: 0x044F }, { .Lower: 0x0451, .Upper: 0x045C }, |
| 76 | { .Lower: 0x045E, .Upper: 0x0481 }, { .Lower: 0x0490, .Upper: 0x04C4 }, { .Lower: 0x04C7, .Upper: 0x04C8 }, |
| 77 | { .Lower: 0x04CB, .Upper: 0x04CC }, { .Lower: 0x04D0, .Upper: 0x04EB }, { .Lower: 0x04EE, .Upper: 0x04F5 }, |
| 78 | { .Lower: 0x04F8, .Upper: 0x04F9 }, |
| 79 | |
| 80 | // Armenian (1) |
| 81 | { .Lower: 0x0531, .Upper: 0x0556 }, |
| 82 | |
| 83 | // Special characters (3) |
| 84 | { .Lower: 0x0559, .Upper: 0x0559 }, |
| 85 | |
| 86 | // Armenian (2) |
| 87 | { .Lower: 0x0561, .Upper: 0x0587 }, |
| 88 | |
| 89 | // Hebrew |
| 90 | { .Lower: 0x05B0, .Upper: 0x05B9 }, { .Lower: 0x05BB, .Upper: 0x05BD }, { .Lower: 0x05BF, .Upper: 0x05BF }, |
| 91 | { .Lower: 0x05C1, .Upper: 0x05C2 }, { .Lower: 0x05D0, .Upper: 0x05EA }, { .Lower: 0x05F0, .Upper: 0x05F2 }, |
| 92 | |
| 93 | // Arabic (1) |
| 94 | { .Lower: 0x0621, .Upper: 0x063A }, { .Lower: 0x0640, .Upper: 0x0652 }, |
| 95 | |
| 96 | // Digits (1) |
| 97 | { .Lower: 0x0660, .Upper: 0x0669 }, |
| 98 | |
| 99 | // Arabic (2) |
| 100 | { .Lower: 0x0670, .Upper: 0x06B7 }, { .Lower: 0x06BA, .Upper: 0x06BE }, { .Lower: 0x06C0, .Upper: 0x06CE }, |
| 101 | { .Lower: 0x06D0, .Upper: 0x06DC }, { .Lower: 0x06E5, .Upper: 0x06E8 }, { .Lower: 0x06EA, .Upper: 0x06ED }, |
| 102 | |
| 103 | // Digits (2) |
| 104 | { .Lower: 0x06F0, .Upper: 0x06F9 }, |
| 105 | |
| 106 | // Devanagari and Special character 0x093D. |
| 107 | { .Lower: 0x0901, .Upper: 0x0903 }, { .Lower: 0x0905, .Upper: 0x0939 }, { .Lower: 0x093D, .Upper: 0x094D }, |
| 108 | { .Lower: 0x0950, .Upper: 0x0952 }, { .Lower: 0x0958, .Upper: 0x0963 }, |
| 109 | |
| 110 | // Digits (3) |
| 111 | { .Lower: 0x0966, .Upper: 0x096F }, |
| 112 | |
| 113 | // Bengali (1) |
| 114 | { .Lower: 0x0981, .Upper: 0x0983 }, { .Lower: 0x0985, .Upper: 0x098C }, { .Lower: 0x098F, .Upper: 0x0990 }, |
| 115 | { .Lower: 0x0993, .Upper: 0x09A8 }, { .Lower: 0x09AA, .Upper: 0x09B0 }, { .Lower: 0x09B2, .Upper: 0x09B2 }, |
| 116 | { .Lower: 0x09B6, .Upper: 0x09B9 }, { .Lower: 0x09BE, .Upper: 0x09C4 }, { .Lower: 0x09C7, .Upper: 0x09C8 }, |
| 117 | { .Lower: 0x09CB, .Upper: 0x09CD }, { .Lower: 0x09DC, .Upper: 0x09DD }, { .Lower: 0x09DF, .Upper: 0x09E3 }, |
| 118 | |
| 119 | // Digits (4) |
| 120 | { .Lower: 0x09E6, .Upper: 0x09EF }, |
| 121 | |
| 122 | // Bengali (2) |
| 123 | { .Lower: 0x09F0, .Upper: 0x09F1 }, |
| 124 | |
| 125 | // Gurmukhi (1) |
| 126 | { .Lower: 0x0A02, .Upper: 0x0A02 }, { .Lower: 0x0A05, .Upper: 0x0A0A }, { .Lower: 0x0A0F, .Upper: 0x0A10 }, |
| 127 | { .Lower: 0x0A13, .Upper: 0x0A28 }, { .Lower: 0x0A2A, .Upper: 0x0A30 }, { .Lower: 0x0A32, .Upper: 0x0A33 }, |
| 128 | { .Lower: 0x0A35, .Upper: 0x0A36 }, { .Lower: 0x0A38, .Upper: 0x0A39 }, { .Lower: 0x0A3E, .Upper: 0x0A42 }, |
| 129 | { .Lower: 0x0A47, .Upper: 0x0A48 }, { .Lower: 0x0A4B, .Upper: 0x0A4D }, { .Lower: 0x0A59, .Upper: 0x0A5C }, |
| 130 | { .Lower: 0x0A5E, .Upper: 0x0A5E }, |
| 131 | |
| 132 | // Digits (5) |
| 133 | { .Lower: 0x0A66, .Upper: 0x0A6F }, |
| 134 | |
| 135 | // Gurmukhi (2) |
| 136 | { .Lower: 0x0A74, .Upper: 0x0A74 }, |
| 137 | |
| 138 | // Gujarti |
| 139 | { .Lower: 0x0A81, .Upper: 0x0A83 }, { .Lower: 0x0A85, .Upper: 0x0A8B }, { .Lower: 0x0A8D, .Upper: 0x0A8D }, |
| 140 | { .Lower: 0x0A8F, .Upper: 0x0A91 }, { .Lower: 0x0A93, .Upper: 0x0AA8 }, { .Lower: 0x0AAA, .Upper: 0x0AB0 }, |
| 141 | { .Lower: 0x0AB2, .Upper: 0x0AB3 }, { .Lower: 0x0AB5, .Upper: 0x0AB9 }, { .Lower: 0x0ABD, .Upper: 0x0AC5 }, |
| 142 | { .Lower: 0x0AC7, .Upper: 0x0AC9 }, { .Lower: 0x0ACB, .Upper: 0x0ACD }, { .Lower: 0x0AD0, .Upper: 0x0AD0 }, |
| 143 | { .Lower: 0x0AE0, .Upper: 0x0AE0 }, |
| 144 | |
| 145 | // Digits (6) |
| 146 | { .Lower: 0x0AE6, .Upper: 0x0AEF }, |
| 147 | |
| 148 | // Oriya and Special character 0x0B3D |
| 149 | { .Lower: 0x0B01, .Upper: 0x0B03 }, { .Lower: 0x0B05, .Upper: 0x0B0C }, { .Lower: 0x0B0F, .Upper: 0x0B10 }, |
| 150 | { .Lower: 0x0B13, .Upper: 0x0B28 }, { .Lower: 0x0B2A, .Upper: 0x0B30 }, { .Lower: 0x0B32, .Upper: 0x0B33 }, |
| 151 | { .Lower: 0x0B36, .Upper: 0x0B39 }, { .Lower: 0x0B3D, .Upper: 0x0B43 }, { .Lower: 0x0B47, .Upper: 0x0B48 }, |
| 152 | { .Lower: 0x0B4B, .Upper: 0x0B4D }, { .Lower: 0x0B5C, .Upper: 0x0B5D }, { .Lower: 0x0B5F, .Upper: 0x0B61 }, |
| 153 | |
| 154 | // Digits (7) |
| 155 | { .Lower: 0x0B66, .Upper: 0x0B6F }, |
| 156 | |
| 157 | // Tamil |
| 158 | { .Lower: 0x0B82, .Upper: 0x0B83 }, { .Lower: 0x0B85, .Upper: 0x0B8A }, { .Lower: 0x0B8E, .Upper: 0x0B90 }, |
| 159 | { .Lower: 0x0B92, .Upper: 0x0B95 }, { .Lower: 0x0B99, .Upper: 0x0B9A }, { .Lower: 0x0B9C, .Upper: 0x0B9C }, |
| 160 | { .Lower: 0x0B9E, .Upper: 0x0B9F }, { .Lower: 0x0BA3, .Upper: 0x0BA4 }, { .Lower: 0x0BA8, .Upper: 0x0BAA }, |
| 161 | { .Lower: 0x0BAE, .Upper: 0x0BB5 }, { .Lower: 0x0BB7, .Upper: 0x0BB9 }, { .Lower: 0x0BBE, .Upper: 0x0BC2 }, |
| 162 | { .Lower: 0x0BC6, .Upper: 0x0BC8 }, { .Lower: 0x0BCA, .Upper: 0x0BCD }, |
| 163 | |
| 164 | // Digits (8) |
| 165 | { .Lower: 0x0BE7, .Upper: 0x0BEF }, |
| 166 | |
| 167 | // Telugu |
| 168 | { .Lower: 0x0C01, .Upper: 0x0C03 }, { .Lower: 0x0C05, .Upper: 0x0C0C }, { .Lower: 0x0C0E, .Upper: 0x0C10 }, |
| 169 | { .Lower: 0x0C12, .Upper: 0x0C28 }, { .Lower: 0x0C2A, .Upper: 0x0C33 }, { .Lower: 0x0C35, .Upper: 0x0C39 }, |
| 170 | { .Lower: 0x0C3E, .Upper: 0x0C44 }, { .Lower: 0x0C46, .Upper: 0x0C48 }, { .Lower: 0x0C4A, .Upper: 0x0C4D }, |
| 171 | { .Lower: 0x0C60, .Upper: 0x0C61 }, |
| 172 | |
| 173 | // Digits (9) |
| 174 | { .Lower: 0x0C66, .Upper: 0x0C6F }, |
| 175 | |
| 176 | // Kannada |
| 177 | { .Lower: 0x0C82, .Upper: 0x0C83 }, { .Lower: 0x0C85, .Upper: 0x0C8C }, { .Lower: 0x0C8E, .Upper: 0x0C90 }, |
| 178 | { .Lower: 0x0C92, .Upper: 0x0CA8 }, { .Lower: 0x0CAA, .Upper: 0x0CB3 }, { .Lower: 0x0CB5, .Upper: 0x0CB9 }, |
| 179 | { .Lower: 0x0CBE, .Upper: 0x0CC4 }, { .Lower: 0x0CC6, .Upper: 0x0CC8 }, { .Lower: 0x0CCA, .Upper: 0x0CCD }, |
| 180 | { .Lower: 0x0CDE, .Upper: 0x0CDE }, { .Lower: 0x0CE0, .Upper: 0x0CE1 }, |
| 181 | |
| 182 | // Digits (10) |
| 183 | { .Lower: 0x0CE6, .Upper: 0x0CEF }, |
| 184 | |
| 185 | // Malayam |
| 186 | { .Lower: 0x0D02, .Upper: 0x0D03 }, { .Lower: 0x0D05, .Upper: 0x0D0C }, { .Lower: 0x0D0E, .Upper: 0x0D10 }, |
| 187 | { .Lower: 0x0D12, .Upper: 0x0D28 }, { .Lower: 0x0D2A, .Upper: 0x0D39 }, { .Lower: 0x0D3E, .Upper: 0x0D43 }, |
| 188 | { .Lower: 0x0D46, .Upper: 0x0D48 }, { .Lower: 0x0D4A, .Upper: 0x0D4D }, { .Lower: 0x0D60, .Upper: 0x0D61 }, |
| 189 | |
| 190 | // Digits (11) |
| 191 | { .Lower: 0x0D66, .Upper: 0x0D6F }, |
| 192 | |
| 193 | // Thai...including Digits { 0x0E50, 0x0E59 } |
| 194 | { .Lower: 0x0E01, .Upper: 0x0E3A }, { .Lower: 0x0E40, .Upper: 0x0E5B }, |
| 195 | |
| 196 | // Lao (1) |
| 197 | { .Lower: 0x0E81, .Upper: 0x0E82 }, { .Lower: 0x0E84, .Upper: 0x0E84 }, { .Lower: 0x0E87, .Upper: 0x0E88 }, |
| 198 | { .Lower: 0x0E8A, .Upper: 0x0E8A }, { .Lower: 0x0E8D, .Upper: 0x0E8D }, { .Lower: 0x0E94, .Upper: 0x0E97 }, |
| 199 | { .Lower: 0x0E99, .Upper: 0x0E9F }, { .Lower: 0x0EA1, .Upper: 0x0EA3 }, { .Lower: 0x0EA5, .Upper: 0x0EA5 }, |
| 200 | { .Lower: 0x0EA7, .Upper: 0x0EA7 }, { .Lower: 0x0EAA, .Upper: 0x0EAB }, { .Lower: 0x0EAD, .Upper: 0x0EAE }, |
| 201 | { .Lower: 0x0EB0, .Upper: 0x0EB9 }, { .Lower: 0x0EBB, .Upper: 0x0EBD }, { .Lower: 0x0EC0, .Upper: 0x0EC4 }, |
| 202 | { .Lower: 0x0EC6, .Upper: 0x0EC6 }, { .Lower: 0x0EC8, .Upper: 0x0ECD }, |
| 203 | |
| 204 | // Digits (12) |
| 205 | { .Lower: 0x0ED0, .Upper: 0x0ED9 }, |
| 206 | |
| 207 | // Lao (2) |
| 208 | { .Lower: 0x0EDC, .Upper: 0x0EDD }, |
| 209 | |
| 210 | // Tibetan (1) |
| 211 | { .Lower: 0x0F00, .Upper: 0x0F00 }, { .Lower: 0x0F18, .Upper: 0x0F19 }, |
| 212 | |
| 213 | // Digits (13) |
| 214 | { .Lower: 0x0F20, .Upper: 0x0F33 }, |
| 215 | |
| 216 | // Tibetan (2) |
| 217 | { .Lower: 0x0F35, .Upper: 0x0F35 }, { .Lower: 0x0F37, .Upper: 0x0F37 }, { .Lower: 0x0F39, .Upper: 0x0F39 }, |
| 218 | { .Lower: 0x0F3E, .Upper: 0x0F47 }, { .Lower: 0x0F49, .Upper: 0x0F69 }, { .Lower: 0x0F71, .Upper: 0x0F84 }, |
| 219 | { .Lower: 0x0F86, .Upper: 0x0F8B }, { .Lower: 0x0F90, .Upper: 0x0F95 }, { .Lower: 0x0F97, .Upper: 0x0F97 }, |
| 220 | { .Lower: 0x0F99, .Upper: 0x0FAD }, { .Lower: 0x0FB1, .Upper: 0x0FB7 }, { .Lower: 0x0FB9, .Upper: 0x0FB9 }, |
| 221 | |
| 222 | // Georgian |
| 223 | { .Lower: 0x10A0, .Upper: 0x10C5 }, { .Lower: 0x10D0, .Upper: 0x10F6 }, |
| 224 | |
| 225 | // Latin (3) |
| 226 | { .Lower: 0x1E00, .Upper: 0x1E9B }, { .Lower: 0x1EA0, .Upper: 0x1EF9 }, |
| 227 | |
| 228 | // Greek (2) |
| 229 | { .Lower: 0x1F00, .Upper: 0x1F15 }, { .Lower: 0x1F18, .Upper: 0x1F1D }, { .Lower: 0x1F20, .Upper: 0x1F45 }, |
| 230 | { .Lower: 0x1F48, .Upper: 0x1F4D }, { .Lower: 0x1F50, .Upper: 0x1F57 }, { .Lower: 0x1F59, .Upper: 0x1F59 }, |
| 231 | { .Lower: 0x1F5B, .Upper: 0x1F5B }, { .Lower: 0x1F5D, .Upper: 0x1F5D }, { .Lower: 0x1F5F, .Upper: 0x1F7D }, |
| 232 | { .Lower: 0x1F80, .Upper: 0x1FB4 }, { .Lower: 0x1FB6, .Upper: 0x1FBC }, |
| 233 | |
| 234 | // Special characters (4) |
| 235 | { .Lower: 0x1FBE, .Upper: 0x1FBE }, |
| 236 | |
| 237 | // Greek (3) |
| 238 | { .Lower: 0x1FC2, .Upper: 0x1FC4 }, { .Lower: 0x1FC6, .Upper: 0x1FCC }, { .Lower: 0x1FD0, .Upper: 0x1FD3 }, |
| 239 | { .Lower: 0x1FD6, .Upper: 0x1FDB }, { .Lower: 0x1FE0, .Upper: 0x1FEC }, { .Lower: 0x1FF2, .Upper: 0x1FF4 }, |
| 240 | { .Lower: 0x1FF6, .Upper: 0x1FFC }, |
| 241 | |
| 242 | // Special characters (5) |
| 243 | { .Lower: 0x203F, .Upper: 0x2040 }, |
| 244 | |
| 245 | // Latin (4) |
| 246 | { .Lower: 0x207F, .Upper: 0x207F }, |
| 247 | |
| 248 | // Special characters (6) |
| 249 | { .Lower: 0x2102, .Upper: 0x2102 }, { .Lower: 0x2107, .Upper: 0x2107 }, { .Lower: 0x210A, .Upper: 0x2113 }, |
| 250 | { .Lower: 0x2115, .Upper: 0x2115 }, { .Lower: 0x2118, .Upper: 0x211D }, { .Lower: 0x2124, .Upper: 0x2124 }, |
| 251 | { .Lower: 0x2126, .Upper: 0x2126 }, { .Lower: 0x2128, .Upper: 0x2128 }, { .Lower: 0x212A, .Upper: 0x2131 }, |
| 252 | { .Lower: 0x2133, .Upper: 0x2138 }, { .Lower: 0x2160, .Upper: 0x2182 }, { .Lower: 0x3005, .Upper: 0x3007 }, |
| 253 | { .Lower: 0x3021, .Upper: 0x3029 }, |
| 254 | |
| 255 | // Hiragana |
| 256 | { .Lower: 0x3041, .Upper: 0x3093 }, { .Lower: 0x309B, .Upper: 0x309C }, |
| 257 | |
| 258 | // Katakana |
| 259 | { .Lower: 0x30A1, .Upper: 0x30F6 }, { .Lower: 0x30FB, .Upper: 0x30FC }, |
| 260 | |
| 261 | // Bopmofo [sic] |
| 262 | { .Lower: 0x3105, .Upper: 0x312C }, |
| 263 | |
| 264 | // CJK Unified Ideographs |
| 265 | { .Lower: 0x4E00, .Upper: 0x9FA5 }, |
| 266 | |
| 267 | // Hangul, |
| 268 | { .Lower: 0xAC00, .Upper: 0xD7A3 } |
| 269 | }; |
| 270 | |
| 271 | // C11 D.2, C++11 [charname.disallowed] |
| 272 | static const llvm::sys::UnicodeCharRange C11DisallowedInitialIDCharRanges[] = { |
| 273 | { .Lower: 0x0300, .Upper: 0x036F }, { .Lower: 0x1DC0, .Upper: 0x1DFF }, { .Lower: 0x20D0, .Upper: 0x20FF }, |
| 274 | { .Lower: 0xFE20, .Upper: 0xFE2F } |
| 275 | }; |
| 276 | |
| 277 | // C99 6.4.2.1p3: The initial character [of an identifier] shall not be a |
| 278 | // universal character name designating a digit. |
| 279 | // C99 Annex D defines these characters as "Digits". |
| 280 | static const llvm::sys::UnicodeCharRange C99DisallowedInitialIDCharRanges[] = { |
| 281 | { .Lower: 0x0660, .Upper: 0x0669 }, { .Lower: 0x06F0, .Upper: 0x06F9 }, { .Lower: 0x0966, .Upper: 0x096F }, |
| 282 | { .Lower: 0x09E6, .Upper: 0x09EF }, { .Lower: 0x0A66, .Upper: 0x0A6F }, { .Lower: 0x0AE6, .Upper: 0x0AEF }, |
| 283 | { .Lower: 0x0B66, .Upper: 0x0B6F }, { .Lower: 0x0BE7, .Upper: 0x0BEF }, { .Lower: 0x0C66, .Upper: 0x0C6F }, |
| 284 | { .Lower: 0x0CE6, .Upper: 0x0CEF }, { .Lower: 0x0D66, .Upper: 0x0D6F }, { .Lower: 0x0E50, .Upper: 0x0E59 }, |
| 285 | { .Lower: 0x0ED0, .Upper: 0x0ED9 }, { .Lower: 0x0F20, .Upper: 0x0F33 } |
| 286 | }; |
| 287 | |
| 288 | // Unicode v6.2, chapter 6.2, table 6-2. |
| 289 | static const llvm::sys::UnicodeCharRange UnicodeWhitespaceCharRanges[] = { |
| 290 | { .Lower: 0x0085, .Upper: 0x0085 }, { .Lower: 0x00A0, .Upper: 0x00A0 }, { .Lower: 0x1680, .Upper: 0x1680 }, |
| 291 | { .Lower: 0x180E, .Upper: 0x180E }, { .Lower: 0x2000, .Upper: 0x200A }, { .Lower: 0x2028, .Upper: 0x2029 }, |
| 292 | { .Lower: 0x202F, .Upper: 0x202F }, { .Lower: 0x205F, .Upper: 0x205F }, { .Lower: 0x3000, .Upper: 0x3000 } |
| 293 | }; |
| 294 | |
| 295 | #endif |
| 296 |
Generated while processing llvm_projects/clang/lib/Lex/Lexer.cpp
Generated on 2026-Oct-10 from project llvm_projects revision b1dd93c6a
Powered by 
Code Browser 2.1
Generator usage only permitted with license.