1f4a2713aSLionel Sambuc //===--- UnicodeCharSets.h - Contains important sets of characters --------===// 2f4a2713aSLionel Sambuc // 3f4a2713aSLionel Sambuc // The LLVM Compiler Infrastructure 4f4a2713aSLionel Sambuc // 5f4a2713aSLionel Sambuc // This file is distributed under the University of Illinois Open Source 6f4a2713aSLionel Sambuc // License. See LICENSE.TXT for details. 7f4a2713aSLionel Sambuc // 8f4a2713aSLionel Sambuc //===----------------------------------------------------------------------===// 9*0a6a1f1dSLionel Sambuc #ifndef LLVM_CLANG_LIB_LEX_UNICODECHARSETS_H 10*0a6a1f1dSLionel Sambuc #define LLVM_CLANG_LIB_LEX_UNICODECHARSETS_H 11f4a2713aSLionel Sambuc 12f4a2713aSLionel Sambuc #include "llvm/Support/UnicodeCharRanges.h" 13f4a2713aSLionel Sambuc 14f4a2713aSLionel Sambuc // C11 D.1, C++11 [charname.allowed] 15f4a2713aSLionel Sambuc static const llvm::sys::UnicodeCharRange C11AllowedIDCharRanges[] = { 16f4a2713aSLionel Sambuc // 1 17f4a2713aSLionel Sambuc { 0x00A8, 0x00A8 }, { 0x00AA, 0x00AA }, { 0x00AD, 0x00AD }, 18f4a2713aSLionel Sambuc { 0x00AF, 0x00AF }, { 0x00B2, 0x00B5 }, { 0x00B7, 0x00BA }, 19f4a2713aSLionel Sambuc { 0x00BC, 0x00BE }, { 0x00C0, 0x00D6 }, { 0x00D8, 0x00F6 }, 20f4a2713aSLionel Sambuc { 0x00F8, 0x00FF }, 21f4a2713aSLionel Sambuc // 2 22f4a2713aSLionel Sambuc { 0x0100, 0x167F }, { 0x1681, 0x180D }, { 0x180F, 0x1FFF }, 23f4a2713aSLionel Sambuc // 3 24f4a2713aSLionel Sambuc { 0x200B, 0x200D }, { 0x202A, 0x202E }, { 0x203F, 0x2040 }, 25f4a2713aSLionel Sambuc { 0x2054, 0x2054 }, { 0x2060, 0x206F }, 26f4a2713aSLionel Sambuc // 4 27f4a2713aSLionel Sambuc { 0x2070, 0x218F }, { 0x2460, 0x24FF }, { 0x2776, 0x2793 }, 28f4a2713aSLionel Sambuc { 0x2C00, 0x2DFF }, { 0x2E80, 0x2FFF }, 29f4a2713aSLionel Sambuc // 5 30f4a2713aSLionel Sambuc { 0x3004, 0x3007 }, { 0x3021, 0x302F }, { 0x3031, 0x303F }, 31f4a2713aSLionel Sambuc // 6 32f4a2713aSLionel Sambuc { 0x3040, 0xD7FF }, 33f4a2713aSLionel Sambuc // 7 34f4a2713aSLionel Sambuc { 0xF900, 0xFD3D }, { 0xFD40, 0xFDCF }, { 0xFDF0, 0xFE44 }, 35f4a2713aSLionel Sambuc { 0xFE47, 0xFFFD }, 36f4a2713aSLionel Sambuc // 8 37f4a2713aSLionel Sambuc { 0x10000, 0x1FFFD }, { 0x20000, 0x2FFFD }, { 0x30000, 0x3FFFD }, 38f4a2713aSLionel Sambuc { 0x40000, 0x4FFFD }, { 0x50000, 0x5FFFD }, { 0x60000, 0x6FFFD }, 39f4a2713aSLionel Sambuc { 0x70000, 0x7FFFD }, { 0x80000, 0x8FFFD }, { 0x90000, 0x9FFFD }, 40f4a2713aSLionel Sambuc { 0xA0000, 0xAFFFD }, { 0xB0000, 0xBFFFD }, { 0xC0000, 0xCFFFD }, 41f4a2713aSLionel Sambuc { 0xD0000, 0xDFFFD }, { 0xE0000, 0xEFFFD } 42f4a2713aSLionel Sambuc }; 43f4a2713aSLionel Sambuc 44f4a2713aSLionel Sambuc // C++03 [extendid] 45f4a2713aSLionel Sambuc // Note that this is not the same as C++98, but we don't distinguish C++98 46f4a2713aSLionel Sambuc // and C++03 in Clang. 47f4a2713aSLionel Sambuc static const llvm::sys::UnicodeCharRange CXX03AllowedIDCharRanges[] = { 48f4a2713aSLionel Sambuc // Latin 49f4a2713aSLionel Sambuc { 0x00C0, 0x00D6 }, { 0x00D8, 0x00F6 }, { 0x00F8, 0x01F5 }, 50f4a2713aSLionel Sambuc { 0x01FA, 0x0217 }, { 0x0250, 0x02A8 }, 51f4a2713aSLionel Sambuc 52f4a2713aSLionel Sambuc // Greek 53f4a2713aSLionel Sambuc { 0x0384, 0x0384 }, { 0x0388, 0x038A }, { 0x038C, 0x038C }, 54f4a2713aSLionel Sambuc { 0x038E, 0x03A1 }, { 0x03A3, 0x03CE }, { 0x03D0, 0x03D6 }, 55f4a2713aSLionel Sambuc { 0x03DA, 0x03DA }, { 0x03DC, 0x03DC }, { 0x03DE, 0x03DE }, 56f4a2713aSLionel Sambuc { 0x03E0, 0x03E0 }, { 0x03E2, 0x03F3 }, 57f4a2713aSLionel Sambuc 58f4a2713aSLionel Sambuc // Cyrillic 59f4a2713aSLionel Sambuc { 0x0401, 0x040D }, { 0x040F, 0x044F }, { 0x0451, 0x045C }, 60f4a2713aSLionel Sambuc { 0x045E, 0x0481 }, { 0x0490, 0x04C4 }, { 0x04C7, 0x04C8 }, 61f4a2713aSLionel Sambuc { 0x04CB, 0x04CC }, { 0x04D0, 0x04EB }, { 0x04EE, 0x04F5 }, 62f4a2713aSLionel Sambuc { 0x04F8, 0x04F9 }, 63f4a2713aSLionel Sambuc 64f4a2713aSLionel Sambuc // Armenian 65f4a2713aSLionel Sambuc { 0x0531, 0x0556 }, { 0x0561, 0x0587 }, 66f4a2713aSLionel Sambuc 67f4a2713aSLionel Sambuc // Hebrew 68f4a2713aSLionel Sambuc { 0x05D0, 0x05EA }, { 0x05F0, 0x05F4 }, 69f4a2713aSLionel Sambuc 70f4a2713aSLionel Sambuc // Arabic 71f4a2713aSLionel Sambuc { 0x0621, 0x063A }, { 0x0640, 0x0652 }, { 0x0670, 0x06B7 }, 72f4a2713aSLionel Sambuc { 0x06BA, 0x06BE }, { 0x06C0, 0x06CE }, { 0x06E5, 0x06E7 }, 73f4a2713aSLionel Sambuc 74f4a2713aSLionel Sambuc // Devanagari 75f4a2713aSLionel Sambuc { 0x0905, 0x0939 }, { 0x0958, 0x0962 }, 76f4a2713aSLionel Sambuc 77f4a2713aSLionel Sambuc // Bengali 78f4a2713aSLionel Sambuc { 0x0985, 0x098C }, { 0x098F, 0x0990 }, { 0x0993, 0x09A8 }, 79f4a2713aSLionel Sambuc { 0x09AA, 0x09B0 }, { 0x09B2, 0x09B2 }, { 0x09B6, 0x09B9 }, 80f4a2713aSLionel Sambuc { 0x09DC, 0x09DD }, { 0x09DF, 0x09E1 }, { 0x09F0, 0x09F1 }, 81f4a2713aSLionel Sambuc 82f4a2713aSLionel Sambuc // Gurmukhi 83f4a2713aSLionel Sambuc { 0x0A05, 0x0A0A }, { 0x0A0F, 0x0A10 }, { 0x0A13, 0x0A28 }, 84f4a2713aSLionel Sambuc { 0x0A2A, 0x0A30 }, { 0x0A32, 0x0A33 }, { 0x0A35, 0x0A36 }, 85f4a2713aSLionel Sambuc { 0x0A38, 0x0A39 }, { 0x0A59, 0x0A5C }, { 0x0A5E, 0x0A5E }, 86f4a2713aSLionel Sambuc 87f4a2713aSLionel Sambuc // Gujarti 88f4a2713aSLionel Sambuc { 0x0A85, 0x0A8B }, { 0x0A8D, 0x0A8D }, { 0x0A8F, 0x0A91 }, 89f4a2713aSLionel Sambuc { 0x0A93, 0x0AA8 }, { 0x0AAA, 0x0AB0 }, { 0x0AB2, 0x0AB3 }, 90f4a2713aSLionel Sambuc { 0x0AB5, 0x0AB9 }, { 0x0AE0, 0x0AE0 }, 91f4a2713aSLionel Sambuc 92f4a2713aSLionel Sambuc // Oriya 93f4a2713aSLionel Sambuc { 0x0B05, 0x0B0C }, { 0x0B0F, 0x0B10 }, { 0x0B13, 0x0B28 }, 94f4a2713aSLionel Sambuc { 0x0B2A, 0x0B30 }, { 0x0B32, 0x0B33 }, { 0x0B36, 0x0B39 }, 95f4a2713aSLionel Sambuc { 0x0B5C, 0x0B5D }, { 0x0B5F, 0x0B61 }, 96f4a2713aSLionel Sambuc 97f4a2713aSLionel Sambuc // Tamil 98f4a2713aSLionel Sambuc { 0x0B85, 0x0B8A }, { 0x0B8E, 0x0B90 }, { 0x0B92, 0x0B95 }, 99f4a2713aSLionel Sambuc { 0x0B99, 0x0B9A }, { 0x0B9C, 0x0B9C }, { 0x0B9E, 0x0B9F }, 100f4a2713aSLionel Sambuc { 0x0BA3, 0x0BA4 }, { 0x0BA8, 0x0BAA }, { 0x0BAE, 0x0BB5 }, 101f4a2713aSLionel Sambuc { 0x0BB7, 0x0BB9 }, 102f4a2713aSLionel Sambuc 103f4a2713aSLionel Sambuc // Telugu 104f4a2713aSLionel Sambuc { 0x0C05, 0x0C0C }, { 0x0C0E, 0x0C10 }, { 0x0C12, 0x0C28 }, 105f4a2713aSLionel Sambuc { 0x0C2A, 0x0C33 }, { 0x0C35, 0x0C39 }, { 0x0C60, 0x0C61 }, 106f4a2713aSLionel Sambuc 107f4a2713aSLionel Sambuc // Kannada 108f4a2713aSLionel Sambuc { 0x0C85, 0x0C8C }, { 0x0C8E, 0x0C90 }, { 0x0C92, 0x0CA8 }, 109f4a2713aSLionel Sambuc { 0x0CAA, 0x0CB3 }, { 0x0CB5, 0x0CB9 }, { 0x0CE0, 0x0CE1 }, 110f4a2713aSLionel Sambuc 111f4a2713aSLionel Sambuc // Malayam 112f4a2713aSLionel Sambuc { 0x0D05, 0x0D0C }, { 0x0D0E, 0x0D10 }, { 0x0D12, 0x0D28 }, 113f4a2713aSLionel Sambuc { 0x0D2A, 0x0D39 }, { 0x0D60, 0x0D61 }, 114f4a2713aSLionel Sambuc 115f4a2713aSLionel Sambuc // Thai 116f4a2713aSLionel Sambuc { 0x0E01, 0x0E30 }, { 0x0E32, 0x0E33 }, { 0x0E40, 0x0E46 }, 117f4a2713aSLionel Sambuc { 0x0E4F, 0x0E5B }, 118f4a2713aSLionel Sambuc 119f4a2713aSLionel Sambuc // Lao 120f4a2713aSLionel Sambuc { 0x0E81, 0x0E82 }, { 0x0E84, 0x0E84 }, { 0x0E87, 0x0E87 }, 121f4a2713aSLionel Sambuc { 0x0E88, 0x0E88 }, { 0x0E8A, 0x0E8A }, { 0x0E8D, 0x0E8D }, 122f4a2713aSLionel Sambuc { 0x0E94, 0x0E97 }, { 0x0E99, 0x0E9F }, { 0x0EA1, 0x0EA3 }, 123f4a2713aSLionel Sambuc { 0x0EA5, 0x0EA5 }, { 0x0EA7, 0x0EA7 }, { 0x0EAA, 0x0EAA }, 124f4a2713aSLionel Sambuc { 0x0EAB, 0x0EAB }, { 0x0EAD, 0x0EB0 }, { 0x0EB2, 0x0EB2 }, 125f4a2713aSLionel Sambuc { 0x0EB3, 0x0EB3 }, { 0x0EBD, 0x0EBD }, { 0x0EC0, 0x0EC4 }, 126f4a2713aSLionel Sambuc { 0x0EC6, 0x0EC6 }, 127f4a2713aSLionel Sambuc 128f4a2713aSLionel Sambuc // Georgian 129f4a2713aSLionel Sambuc { 0x10A0, 0x10C5 }, { 0x10D0, 0x10F6 }, 130f4a2713aSLionel Sambuc 131f4a2713aSLionel Sambuc // Hangul 132f4a2713aSLionel Sambuc { 0x1100, 0x1159 }, { 0x1161, 0x11A2 }, { 0x11A8, 0x11F9 }, 133f4a2713aSLionel Sambuc 134f4a2713aSLionel Sambuc // Latin (2) 135f4a2713aSLionel Sambuc { 0x1E00, 0x1E9A }, { 0x1EA0, 0x1EF9 }, 136f4a2713aSLionel Sambuc 137f4a2713aSLionel Sambuc // Greek (2) 138f4a2713aSLionel Sambuc { 0x1F00, 0x1F15 }, { 0x1F18, 0x1F1D }, { 0x1F20, 0x1F45 }, 139f4a2713aSLionel Sambuc { 0x1F48, 0x1F4D }, { 0x1F50, 0x1F57 }, { 0x1F59, 0x1F59 }, 140f4a2713aSLionel Sambuc { 0x1F5B, 0x1F5B }, { 0x1F5D, 0x1F5D }, { 0x1F5F, 0x1F7D }, 141f4a2713aSLionel Sambuc { 0x1F80, 0x1FB4 }, { 0x1FB6, 0x1FBC }, { 0x1FC2, 0x1FC4 }, 142f4a2713aSLionel Sambuc { 0x1FC6, 0x1FCC }, { 0x1FD0, 0x1FD3 }, { 0x1FD6, 0x1FDB }, 143f4a2713aSLionel Sambuc { 0x1FE0, 0x1FEC }, { 0x1FF2, 0x1FF4 }, { 0x1FF6, 0x1FFC }, 144f4a2713aSLionel Sambuc 145f4a2713aSLionel Sambuc // Hiragana 146f4a2713aSLionel Sambuc { 0x3041, 0x3094 }, { 0x309B, 0x309E }, 147f4a2713aSLionel Sambuc 148f4a2713aSLionel Sambuc // Katakana 149f4a2713aSLionel Sambuc { 0x30A1, 0x30FE }, 150f4a2713aSLionel Sambuc 151f4a2713aSLionel Sambuc // Bopmofo [sic] 152f4a2713aSLionel Sambuc { 0x3105, 0x312C }, 153f4a2713aSLionel Sambuc 154f4a2713aSLionel Sambuc // CJK Unified Ideographs 155f4a2713aSLionel Sambuc { 0x4E00, 0x9FA5 }, { 0xF900, 0xFA2D }, { 0xFB1F, 0xFB36 }, 156f4a2713aSLionel Sambuc { 0xFB38, 0xFB3C }, { 0xFB3E, 0xFB3E }, { 0xFB40, 0xFB41 }, 157f4a2713aSLionel Sambuc { 0xFB42, 0xFB44 }, { 0xFB46, 0xFBB1 }, { 0xFBD3, 0xFD3F }, 158f4a2713aSLionel Sambuc { 0xFD50, 0xFD8F }, { 0xFD92, 0xFDC7 }, { 0xFDF0, 0xFDFB }, 159f4a2713aSLionel Sambuc { 0xFE70, 0xFE72 }, { 0xFE74, 0xFE74 }, { 0xFE76, 0xFEFC }, 160f4a2713aSLionel Sambuc { 0xFF21, 0xFF3A }, { 0xFF41, 0xFF5A }, { 0xFF66, 0xFFBE }, 161f4a2713aSLionel Sambuc { 0xFFC2, 0xFFC7 }, { 0xFFCA, 0xFFCF }, { 0xFFD2, 0xFFD7 }, 162f4a2713aSLionel Sambuc { 0xFFDA, 0xFFDC } 163f4a2713aSLionel Sambuc }; 164f4a2713aSLionel Sambuc 165f4a2713aSLionel Sambuc // C99 Annex D 166f4a2713aSLionel Sambuc static const llvm::sys::UnicodeCharRange C99AllowedIDCharRanges[] = { 167f4a2713aSLionel Sambuc // Latin (1) 168f4a2713aSLionel Sambuc { 0x00AA, 0x00AA }, 169f4a2713aSLionel Sambuc 170f4a2713aSLionel Sambuc // Special characters (1) 171f4a2713aSLionel Sambuc { 0x00B5, 0x00B5 }, { 0x00B7, 0x00B7 }, 172f4a2713aSLionel Sambuc 173f4a2713aSLionel Sambuc // Latin (2) 174f4a2713aSLionel Sambuc { 0x00BA, 0x00BA }, { 0x00C0, 0x00D6 }, { 0x00D8, 0x00F6 }, 175f4a2713aSLionel Sambuc { 0x00F8, 0x01F5 }, { 0x01FA, 0x0217 }, { 0x0250, 0x02A8 }, 176f4a2713aSLionel Sambuc 177f4a2713aSLionel Sambuc // Special characters (2) 178f4a2713aSLionel Sambuc { 0x02B0, 0x02B8 }, { 0x02BB, 0x02BB }, { 0x02BD, 0x02C1 }, 179f4a2713aSLionel Sambuc { 0x02D0, 0x02D1 }, { 0x02E0, 0x02E4 }, { 0x037A, 0x037A }, 180f4a2713aSLionel Sambuc 181f4a2713aSLionel Sambuc // Greek (1) 182f4a2713aSLionel Sambuc { 0x0386, 0x0386 }, { 0x0388, 0x038A }, { 0x038C, 0x038C }, 183f4a2713aSLionel Sambuc { 0x038E, 0x03A1 }, { 0x03A3, 0x03CE }, { 0x03D0, 0x03D6 }, 184f4a2713aSLionel Sambuc { 0x03DA, 0x03DA }, { 0x03DC, 0x03DC }, { 0x03DE, 0x03DE }, 185f4a2713aSLionel Sambuc { 0x03E0, 0x03E0 }, { 0x03E2, 0x03F3 }, 186f4a2713aSLionel Sambuc 187f4a2713aSLionel Sambuc // Cyrillic 188f4a2713aSLionel Sambuc { 0x0401, 0x040C }, { 0x040E, 0x044F }, { 0x0451, 0x045C }, 189f4a2713aSLionel Sambuc { 0x045E, 0x0481 }, { 0x0490, 0x04C4 }, { 0x04C7, 0x04C8 }, 190f4a2713aSLionel Sambuc { 0x04CB, 0x04CC }, { 0x04D0, 0x04EB }, { 0x04EE, 0x04F5 }, 191f4a2713aSLionel Sambuc { 0x04F8, 0x04F9 }, 192f4a2713aSLionel Sambuc 193f4a2713aSLionel Sambuc // Armenian (1) 194f4a2713aSLionel Sambuc { 0x0531, 0x0556 }, 195f4a2713aSLionel Sambuc 196f4a2713aSLionel Sambuc // Special characters (3) 197f4a2713aSLionel Sambuc { 0x0559, 0x0559 }, 198f4a2713aSLionel Sambuc 199f4a2713aSLionel Sambuc // Armenian (2) 200f4a2713aSLionel Sambuc { 0x0561, 0x0587 }, 201f4a2713aSLionel Sambuc 202f4a2713aSLionel Sambuc // Hebrew 203f4a2713aSLionel Sambuc { 0x05B0, 0x05B9 }, { 0x05BB, 0x05BD }, { 0x05BF, 0x05BF }, 204f4a2713aSLionel Sambuc { 0x05C1, 0x05C2 }, { 0x05D0, 0x05EA }, { 0x05F0, 0x05F2 }, 205f4a2713aSLionel Sambuc 206f4a2713aSLionel Sambuc // Arabic (1) 207f4a2713aSLionel Sambuc { 0x0621, 0x063A }, { 0x0640, 0x0652 }, 208f4a2713aSLionel Sambuc 209f4a2713aSLionel Sambuc // Digits (1) 210f4a2713aSLionel Sambuc { 0x0660, 0x0669 }, 211f4a2713aSLionel Sambuc 212f4a2713aSLionel Sambuc // Arabic (2) 213f4a2713aSLionel Sambuc { 0x0670, 0x06B7 }, { 0x06BA, 0x06BE }, { 0x06C0, 0x06CE }, 214f4a2713aSLionel Sambuc { 0x06D0, 0x06DC }, { 0x06E5, 0x06E8 }, { 0x06EA, 0x06ED }, 215f4a2713aSLionel Sambuc 216f4a2713aSLionel Sambuc // Digits (2) 217f4a2713aSLionel Sambuc { 0x06F0, 0x06F9 }, 218f4a2713aSLionel Sambuc 219f4a2713aSLionel Sambuc // Devanagari and Special characeter 0x093D. 220f4a2713aSLionel Sambuc { 0x0901, 0x0903 }, { 0x0905, 0x0939 }, { 0x093D, 0x094D }, 221f4a2713aSLionel Sambuc { 0x0950, 0x0952 }, { 0x0958, 0x0963 }, 222f4a2713aSLionel Sambuc 223f4a2713aSLionel Sambuc // Digits (3) 224f4a2713aSLionel Sambuc { 0x0966, 0x096F }, 225f4a2713aSLionel Sambuc 226f4a2713aSLionel Sambuc // Bengali (1) 227f4a2713aSLionel Sambuc { 0x0981, 0x0983 }, { 0x0985, 0x098C }, { 0x098F, 0x0990 }, 228f4a2713aSLionel Sambuc { 0x0993, 0x09A8 }, { 0x09AA, 0x09B0 }, { 0x09B2, 0x09B2 }, 229f4a2713aSLionel Sambuc { 0x09B6, 0x09B9 }, { 0x09BE, 0x09C4 }, { 0x09C7, 0x09C8 }, 230f4a2713aSLionel Sambuc { 0x09CB, 0x09CD }, { 0x09DC, 0x09DD }, { 0x09DF, 0x09E3 }, 231f4a2713aSLionel Sambuc 232f4a2713aSLionel Sambuc // Digits (4) 233f4a2713aSLionel Sambuc { 0x09E6, 0x09EF }, 234f4a2713aSLionel Sambuc 235f4a2713aSLionel Sambuc // Bengali (2) 236f4a2713aSLionel Sambuc { 0x09F0, 0x09F1 }, 237f4a2713aSLionel Sambuc 238f4a2713aSLionel Sambuc // Gurmukhi (1) 239f4a2713aSLionel Sambuc { 0x0A02, 0x0A02 }, { 0x0A05, 0x0A0A }, { 0x0A0F, 0x0A10 }, 240f4a2713aSLionel Sambuc { 0x0A13, 0x0A28 }, { 0x0A2A, 0x0A30 }, { 0x0A32, 0x0A33 }, 241f4a2713aSLionel Sambuc { 0x0A35, 0x0A36 }, { 0x0A38, 0x0A39 }, { 0x0A3E, 0x0A42 }, 242f4a2713aSLionel Sambuc { 0x0A47, 0x0A48 }, { 0x0A4B, 0x0A4D }, { 0x0A59, 0x0A5C }, 243f4a2713aSLionel Sambuc { 0x0A5E, 0x0A5E }, 244f4a2713aSLionel Sambuc 245f4a2713aSLionel Sambuc // Digits (5) 246f4a2713aSLionel Sambuc { 0x0A66, 0x0A6F }, 247f4a2713aSLionel Sambuc 248f4a2713aSLionel Sambuc // Gurmukhi (2) 249f4a2713aSLionel Sambuc { 0x0A74, 0x0A74 }, 250f4a2713aSLionel Sambuc 251f4a2713aSLionel Sambuc // Gujarti 252f4a2713aSLionel Sambuc { 0x0A81, 0x0A83 }, { 0x0A85, 0x0A8B }, { 0x0A8D, 0x0A8D }, 253f4a2713aSLionel Sambuc { 0x0A8F, 0x0A91 }, { 0x0A93, 0x0AA8 }, { 0x0AAA, 0x0AB0 }, 254f4a2713aSLionel Sambuc { 0x0AB2, 0x0AB3 }, { 0x0AB5, 0x0AB9 }, { 0x0ABD, 0x0AC5 }, 255f4a2713aSLionel Sambuc { 0x0AC7, 0x0AC9 }, { 0x0ACB, 0x0ACD }, { 0x0AD0, 0x0AD0 }, 256f4a2713aSLionel Sambuc { 0x0AE0, 0x0AE0 }, 257f4a2713aSLionel Sambuc 258f4a2713aSLionel Sambuc // Digits (6) 259f4a2713aSLionel Sambuc { 0x0AE6, 0x0AEF }, 260f4a2713aSLionel Sambuc 261f4a2713aSLionel Sambuc // Oriya and Special character 0x0B3D 262f4a2713aSLionel Sambuc { 0x0B01, 0x0B03 }, { 0x0B05, 0x0B0C }, { 0x0B0F, 0x0B10 }, 263f4a2713aSLionel Sambuc { 0x0B13, 0x0B28 }, { 0x0B2A, 0x0B30 }, { 0x0B32, 0x0B33 }, 264f4a2713aSLionel Sambuc { 0x0B36, 0x0B39 }, { 0x0B3D, 0x0B43 }, { 0x0B47, 0x0B48 }, 265f4a2713aSLionel Sambuc { 0x0B4B, 0x0B4D }, { 0x0B5C, 0x0B5D }, { 0x0B5F, 0x0B61 }, 266f4a2713aSLionel Sambuc 267f4a2713aSLionel Sambuc // Digits (7) 268f4a2713aSLionel Sambuc { 0x0B66, 0x0B6F }, 269f4a2713aSLionel Sambuc 270f4a2713aSLionel Sambuc // Tamil 271f4a2713aSLionel Sambuc { 0x0B82, 0x0B83 }, { 0x0B85, 0x0B8A }, { 0x0B8E, 0x0B90 }, 272f4a2713aSLionel Sambuc { 0x0B92, 0x0B95 }, { 0x0B99, 0x0B9A }, { 0x0B9C, 0x0B9C }, 273f4a2713aSLionel Sambuc { 0x0B9E, 0x0B9F }, { 0x0BA3, 0x0BA4 }, { 0x0BA8, 0x0BAA }, 274f4a2713aSLionel Sambuc { 0x0BAE, 0x0BB5 }, { 0x0BB7, 0x0BB9 }, { 0x0BBE, 0x0BC2 }, 275f4a2713aSLionel Sambuc { 0x0BC6, 0x0BC8 }, { 0x0BCA, 0x0BCD }, 276f4a2713aSLionel Sambuc 277f4a2713aSLionel Sambuc // Digits (8) 278f4a2713aSLionel Sambuc { 0x0BE7, 0x0BEF }, 279f4a2713aSLionel Sambuc 280f4a2713aSLionel Sambuc // Telugu 281f4a2713aSLionel Sambuc { 0x0C01, 0x0C03 }, { 0x0C05, 0x0C0C }, { 0x0C0E, 0x0C10 }, 282f4a2713aSLionel Sambuc { 0x0C12, 0x0C28 }, { 0x0C2A, 0x0C33 }, { 0x0C35, 0x0C39 }, 283f4a2713aSLionel Sambuc { 0x0C3E, 0x0C44 }, { 0x0C46, 0x0C48 }, { 0x0C4A, 0x0C4D }, 284f4a2713aSLionel Sambuc { 0x0C60, 0x0C61 }, 285f4a2713aSLionel Sambuc 286f4a2713aSLionel Sambuc // Digits (9) 287f4a2713aSLionel Sambuc { 0x0C66, 0x0C6F }, 288f4a2713aSLionel Sambuc 289f4a2713aSLionel Sambuc // Kannada 290f4a2713aSLionel Sambuc { 0x0C82, 0x0C83 }, { 0x0C85, 0x0C8C }, { 0x0C8E, 0x0C90 }, 291f4a2713aSLionel Sambuc { 0x0C92, 0x0CA8 }, { 0x0CAA, 0x0CB3 }, { 0x0CB5, 0x0CB9 }, 292f4a2713aSLionel Sambuc { 0x0CBE, 0x0CC4 }, { 0x0CC6, 0x0CC8 }, { 0x0CCA, 0x0CCD }, 293f4a2713aSLionel Sambuc { 0x0CDE, 0x0CDE }, { 0x0CE0, 0x0CE1 }, 294f4a2713aSLionel Sambuc 295f4a2713aSLionel Sambuc // Digits (10) 296f4a2713aSLionel Sambuc { 0x0CE6, 0x0CEF }, 297f4a2713aSLionel Sambuc 298f4a2713aSLionel Sambuc // Malayam 299f4a2713aSLionel Sambuc { 0x0D02, 0x0D03 }, { 0x0D05, 0x0D0C }, { 0x0D0E, 0x0D10 }, 300f4a2713aSLionel Sambuc { 0x0D12, 0x0D28 }, { 0x0D2A, 0x0D39 }, { 0x0D3E, 0x0D43 }, 301*0a6a1f1dSLionel Sambuc { 0x0D46, 0x0D48 }, { 0x0D4A, 0x0D4D }, { 0x0D60, 0x0D61 }, 302f4a2713aSLionel Sambuc 303f4a2713aSLionel Sambuc // Digits (11) 304f4a2713aSLionel Sambuc { 0x0D66, 0x0D6F }, 305f4a2713aSLionel Sambuc 306f4a2713aSLionel Sambuc // Thai...including Digits { 0x0E50, 0x0E59 } 307f4a2713aSLionel Sambuc { 0x0E01, 0x0E3A }, { 0x0E40, 0x0E5B }, 308f4a2713aSLionel Sambuc 309f4a2713aSLionel Sambuc // Lao (1) 310f4a2713aSLionel Sambuc { 0x0E81, 0x0E82 }, { 0x0E84, 0x0E84 }, { 0x0E87, 0x0E88 }, 311f4a2713aSLionel Sambuc { 0x0E8A, 0x0E8A }, { 0x0E8D, 0x0E8D }, { 0x0E94, 0x0E97 }, 312f4a2713aSLionel Sambuc { 0x0E99, 0x0E9F }, { 0x0EA1, 0x0EA3 }, { 0x0EA5, 0x0EA5 }, 313f4a2713aSLionel Sambuc { 0x0EA7, 0x0EA7 }, { 0x0EAA, 0x0EAB }, { 0x0EAD, 0x0EAE }, 314f4a2713aSLionel Sambuc { 0x0EB0, 0x0EB9 }, { 0x0EBB, 0x0EBD }, { 0x0EC0, 0x0EC4 }, 315f4a2713aSLionel Sambuc { 0x0EC6, 0x0EC6 }, { 0x0EC8, 0x0ECD }, 316f4a2713aSLionel Sambuc 317f4a2713aSLionel Sambuc // Digits (12) 318f4a2713aSLionel Sambuc { 0x0ED0, 0x0ED9 }, 319f4a2713aSLionel Sambuc 320f4a2713aSLionel Sambuc // Lao (2) 321f4a2713aSLionel Sambuc { 0x0EDC, 0x0EDD }, 322f4a2713aSLionel Sambuc 323f4a2713aSLionel Sambuc // Tibetan (1) 324f4a2713aSLionel Sambuc { 0x0F00, 0x0F00 }, { 0x0F18, 0x0F19 }, 325f4a2713aSLionel Sambuc 326f4a2713aSLionel Sambuc // Digits (13) 327f4a2713aSLionel Sambuc { 0x0F20, 0x0F33 }, 328f4a2713aSLionel Sambuc 329f4a2713aSLionel Sambuc // Tibetan (2) 330f4a2713aSLionel Sambuc { 0x0F35, 0x0F35 }, { 0x0F37, 0x0F37 }, { 0x0F39, 0x0F39 }, 331f4a2713aSLionel Sambuc { 0x0F3E, 0x0F47 }, { 0x0F49, 0x0F69 }, { 0x0F71, 0x0F84 }, 332f4a2713aSLionel Sambuc { 0x0F86, 0x0F8B }, { 0x0F90, 0x0F95 }, { 0x0F97, 0x0F97 }, 333f4a2713aSLionel Sambuc { 0x0F99, 0x0FAD }, { 0x0FB1, 0x0FB7 }, { 0x0FB9, 0x0FB9 }, 334f4a2713aSLionel Sambuc 335f4a2713aSLionel Sambuc // Georgian 336f4a2713aSLionel Sambuc { 0x10A0, 0x10C5 }, { 0x10D0, 0x10F6 }, 337f4a2713aSLionel Sambuc 338f4a2713aSLionel Sambuc // Latin (3) 339f4a2713aSLionel Sambuc { 0x1E00, 0x1E9B }, { 0x1EA0, 0x1EF9 }, 340f4a2713aSLionel Sambuc 341f4a2713aSLionel Sambuc // Greek (2) 342f4a2713aSLionel Sambuc { 0x1F00, 0x1F15 }, { 0x1F18, 0x1F1D }, { 0x1F20, 0x1F45 }, 343f4a2713aSLionel Sambuc { 0x1F48, 0x1F4D }, { 0x1F50, 0x1F57 }, { 0x1F59, 0x1F59 }, 344f4a2713aSLionel Sambuc { 0x1F5B, 0x1F5B }, { 0x1F5D, 0x1F5D }, { 0x1F5F, 0x1F7D }, 345f4a2713aSLionel Sambuc { 0x1F80, 0x1FB4 }, { 0x1FB6, 0x1FBC }, 346f4a2713aSLionel Sambuc 347f4a2713aSLionel Sambuc // Special characters (4) 348f4a2713aSLionel Sambuc { 0x1FBE, 0x1FBE }, 349f4a2713aSLionel Sambuc 350f4a2713aSLionel Sambuc // Greek (3) 351f4a2713aSLionel Sambuc { 0x1FC2, 0x1FC4 }, { 0x1FC6, 0x1FCC }, { 0x1FD0, 0x1FD3 }, 352f4a2713aSLionel Sambuc { 0x1FD6, 0x1FDB }, { 0x1FE0, 0x1FEC }, { 0x1FF2, 0x1FF4 }, 353f4a2713aSLionel Sambuc { 0x1FF6, 0x1FFC }, 354f4a2713aSLionel Sambuc 355f4a2713aSLionel Sambuc // Special characters (5) 356f4a2713aSLionel Sambuc { 0x203F, 0x2040 }, 357f4a2713aSLionel Sambuc 358f4a2713aSLionel Sambuc // Latin (4) 359f4a2713aSLionel Sambuc { 0x207F, 0x207F }, 360f4a2713aSLionel Sambuc 361f4a2713aSLionel Sambuc // Special characters (6) 362f4a2713aSLionel Sambuc { 0x2102, 0x2102 }, { 0x2107, 0x2107 }, { 0x210A, 0x2113 }, 363f4a2713aSLionel Sambuc { 0x2115, 0x2115 }, { 0x2118, 0x211D }, { 0x2124, 0x2124 }, 364f4a2713aSLionel Sambuc { 0x2126, 0x2126 }, { 0x2128, 0x2128 }, { 0x212A, 0x2131 }, 365f4a2713aSLionel Sambuc { 0x2133, 0x2138 }, { 0x2160, 0x2182 }, { 0x3005, 0x3007 }, 366f4a2713aSLionel Sambuc { 0x3021, 0x3029 }, 367f4a2713aSLionel Sambuc 368f4a2713aSLionel Sambuc // Hiragana 369f4a2713aSLionel Sambuc { 0x3041, 0x3093 }, { 0x309B, 0x309C }, 370f4a2713aSLionel Sambuc 371f4a2713aSLionel Sambuc // Katakana 372f4a2713aSLionel Sambuc { 0x30A1, 0x30F6 }, { 0x30FB, 0x30FC }, 373f4a2713aSLionel Sambuc 374f4a2713aSLionel Sambuc // Bopmofo [sic] 375f4a2713aSLionel Sambuc { 0x3105, 0x312C }, 376f4a2713aSLionel Sambuc 377f4a2713aSLionel Sambuc // CJK Unified Ideographs 378f4a2713aSLionel Sambuc { 0x4E00, 0x9FA5 }, 379f4a2713aSLionel Sambuc 380f4a2713aSLionel Sambuc // Hangul, 381f4a2713aSLionel Sambuc { 0xAC00, 0xD7A3 } 382f4a2713aSLionel Sambuc }; 383f4a2713aSLionel Sambuc 384f4a2713aSLionel Sambuc // C11 D.2, C++11 [charname.disallowed] 385f4a2713aSLionel Sambuc static const llvm::sys::UnicodeCharRange C11DisallowedInitialIDCharRanges[] = { 386f4a2713aSLionel Sambuc { 0x0300, 0x036F }, { 0x1DC0, 0x1DFF }, { 0x20D0, 0x20FF }, 387f4a2713aSLionel Sambuc { 0xFE20, 0xFE2F } 388f4a2713aSLionel Sambuc }; 389f4a2713aSLionel Sambuc 390f4a2713aSLionel Sambuc // C99 6.4.2.1p3: The initial character [of an identifier] shall not be a 391f4a2713aSLionel Sambuc // universal character name designating a digit. 392f4a2713aSLionel Sambuc // C99 Annex D defines these characters as "Digits". 393f4a2713aSLionel Sambuc static const llvm::sys::UnicodeCharRange C99DisallowedInitialIDCharRanges[] = { 394f4a2713aSLionel Sambuc { 0x0660, 0x0669 }, { 0x06F0, 0x06F9 }, { 0x0966, 0x096F }, 395f4a2713aSLionel Sambuc { 0x09E6, 0x09EF }, { 0x0A66, 0x0A6F }, { 0x0AE6, 0x0AEF }, 396f4a2713aSLionel Sambuc { 0x0B66, 0x0B6F }, { 0x0BE7, 0x0BEF }, { 0x0C66, 0x0C6F }, 397f4a2713aSLionel Sambuc { 0x0CE6, 0x0CEF }, { 0x0D66, 0x0D6F }, { 0x0E50, 0x0E59 }, 398f4a2713aSLionel Sambuc { 0x0ED0, 0x0ED9 }, { 0x0F20, 0x0F33 } 399f4a2713aSLionel Sambuc }; 400f4a2713aSLionel Sambuc 401f4a2713aSLionel Sambuc // Unicode v6.2, chapter 6.2, table 6-2. 402f4a2713aSLionel Sambuc static const llvm::sys::UnicodeCharRange UnicodeWhitespaceCharRanges[] = { 403f4a2713aSLionel Sambuc { 0x0085, 0x0085 }, { 0x00A0, 0x00A0 }, { 0x1680, 0x1680 }, 404f4a2713aSLionel Sambuc { 0x180E, 0x180E }, { 0x2000, 0x200A }, { 0x2028, 0x2029 }, 405f4a2713aSLionel Sambuc { 0x202F, 0x202F }, { 0x205F, 0x205F }, { 0x3000, 0x3000 } 406f4a2713aSLionel Sambuc }; 407f4a2713aSLionel Sambuc 408f4a2713aSLionel Sambuc #endif 409