addconfig

mms-1b-all/afr/tokens.txt

@@ -1,73 +1,77 @@
-| 22961
-e 19676
-i 9317
-a 8840
-n 8757
-s 7269
-r 7160
-o 6923
-t 6554
-d 6107
-l 4470
-g 3996
-k 3537
-m 2886
-v 2460
-u 2428
-w 2010
-p 1923
-h 1908
-b 1764
-y 1065
-f 963
-' 569
-j 397
-0 250
-c 214
-- 186
-1 183
-ë 171
-ê 105
-2 103
-9 81
-3 71
-4 71
-. 68
-5 68
-6 64
-‘ 61
-8 47
-z 44
-7 37
-x 25
-ï 23
-: 23
-, 15
-/ 15
-q 15
-á 10
-’ 9
-” 8
-; 6
-$ 5
-% 5
-ń 4
-– 4
-í 3
-¥ 3
-ó 2
-ϊ 2
-+ 2
-& 2
-[ 2
-] 2
-² 1
-" 1
-ö 1
-ç 1
-ł 1
-£ 1
-° 1
-ͦ 1
-ú 1
-é 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+i
+a
+n
+s
+r
+o
+t
+d
+l
+g
+k
+m
+v
+u
+w
+p
+h
+b
+y
+f
+'
+j
+0
+c
+-
+1
+ë
+ê
+2
+9
+3
+4
+.
+5
+6
+‘
+8
+z
+7
+x
+ï
+:
+,
+/
+q
+á
+’
+”
+;
+$
+%
+ń
+–
+í
+¥
+ó
+ϊ
++
+&
+[
+]
+²
+"
+ö
+ç
+ł
+£
+°
+ͦ
+ú
+é

mms-1b-all/amh/tokens.txt

@@ -1,335 +1,339 @@
-| 85715
-ን 22176
-በ 11256
-ት 10395
-የ 8670
-ው 10849
-ስ 9576
-ር 10440
-መ 7239
-ል 8332
-ም 12644
-ች 5926
-ይ 7267
-አ 9765
-ለ 9133
-ተ 6544
-እ 11473
-ነ 7507
-ያ 5215
-ና 5732
-ላ 5013
-ከ 5275
-ደ 5557
-ድ 4511
-ብ 4890
-ማ 3266
-ረ 2961
-ግ 4963
-ገ 4498
-ወ 4130
-ታ 3547
-ራ 2968
-ሰ 4459
-ጥ 1832
-ሚ 2132
-ክ 2491
-ባ 2662
-ዎ 955
-ቀ 2619
-ሉ 2613
-ሪ 485
-ጠ 1938
-ካ 1230
-ሳ 1903
-ሆ 2602
-ፍ 1648
-ቅ 1955
-ህ 4031
-ዳ 1704
-ዋ 1001
-ጋ 1775
-ቸ 2155
-ቶ 1460
-ኛ 1032
-ሮ 865
-ጣ 1328
-ፈ 1991
-ሊ 563
-ሎ 937
-ሁ 5544
-0 789
-ሩ 1186
-ቱ 1367
-ቃ 1150
-ዝ 833
-ኖ 767
-ሲ 556
-ዘ 1373
-ቢ 668
-፣ 639
-ዊ 308
-ዲ 1737
-ጊ 783
-1 585
-ጉ 376
-ሞ 1243
-ቦ 206
-ዜ 763
-ሌ 795
-ኑ 899
-ዛ 746
-ጀ 393
-ሽ 292
-ዙ 554
-ኮ 125
-ሜ 169
-ዓ 367
-ዚ 2878
-ቡ 645
-ፊ 513
-ዶ 329
-ሃ 405
-ጎ 231
-ቤ 578
-ቻ 516
-ኒ 59
-ዩ 346
-ዕ 512
-ጨ 313
-ቹ 389
-2 365
-ቁ 483
-ፋ 684
-ቆ 431
-ዱ 783
-ጅ 553
-ኪ 145
-ሬ 336
-ሱ 2664
-a 334
-ቲ 205
-ኤ 222
-ቋ 113
-ሙ 858
-ኔ 632
-ሶ 206
-ፓ 307
-ሻ 221
-ፕ 4
-ሀ 98
-ኝ 855
-ፖ 281
-ኢ 1000
-ጫ 120
-ዮ 392
-ቴ 169
-ሕ 1289
-ጭ 209
-ሥ 1162
-ጃ 115
-ሴ 354
-o 254
-ኩ 240
-ሄ 397
-. 245
-9 245
-ጓ 70
-n 233
-- 232
-ኦ 38
-5 223
-ሸ 222
-e 222
-ቂ 175
-ፎ 162
-4 209
-ኋ 769
-ጡ 417
-i 198
-3 196
-ኘ 205
-ፒ 189
-ጽ 568
-6 181
-r 178
-8 175
-t 165
-ፉ 291
-ጦ 275
-ኙ 114
-s 162
-l 158
-ጂ 233
-ዞ 128
-ቪ 152
-ቷ 56
-ፅ 145
-ጆ 269
-ኃ 3
-c 135
-ሠ 399
-u 129
-ኬ 36
-ዴ 210
-ፃ 81
-ኞ 269
-7 119
-ኳ 185
-m 111
-p 109
-ሂ 50
-ሏ 81
-h 97
-ፀ 67
-። 95
-ሐ 478
-ቫ 89
-ጸ 569
-ሺ 55
-ጤ 41
-, 80
-ፌ 59
-ሯ 62
-g 73
-፡ 72
-ጻ 337
-ዌ 13
-ዥ 44
-ጁ 154
-d 62
-ፐ 61
-b 61
-ቨ 59
-ሹ 61
-/ 57
-ሾ 96
-ቧ 27
-ቬ 52
-ሟ 33
-ቭ 51
-” 50
-ፔ 1
-ጪ 12
-k 46
-f 44
-ቄ 103
-ቺ 41
-y 37
-ፏ 8
-ሷ 96
-ጄ 64
-ዬ 127
-w 34
-v 34
-ሣ 381
-ሦ 122
-ጌ 816
-ዣ 18
-ቾ 17
-ሔ 1155
-ጩ 13
-ሑ 11
-ጧ 31
-ኗ 24
-j 26
-ጮ 84
-ዐ 599
-ቼ 119
-" 24
-: 24
-ኚ 2
-ዦ 25
-ዷ 23
-፤ 20
-ዢ 2
-ዑ 10
-ዉ 19
-ኅ 116
-ኣ 5
-ፆ 3
-ጾ 41
-x 16
-$ 16
-ኡ 1
-ጢ 364
-ቮ 13
-« 13
-» 13
-ፑ 3
-ጹ 127
-% 10
-ዟ 10
-z 9
-ዡ 30
-ጵ 43
-— 7
-ፁ 53
-ጿ 3
-ዪ 53
-? 6
-’ 6
-ሼ 18
-+ 5
-፥ 5
-ዒ 5
-° 5
-ሿ 6
-ዖ 85
-ጐ 125
-õ 4
-– 4
-ኸ 186
-; 4
-ã 3
-¥ 3
-ኺ 1
-ጴ 147
-ጳ 242
-ኜ 26
-' 3
-ጇ 12
-ጺ 2
-‘ 2
-! 2
-² 2
-ቿ 22
-ኰ 47
-ፗ 2
-q 2
-& 2
-£ 2
-ኟ 8
-[ 1
-] 1
-፦ 1
-ኀ 395
-ቈ 221
-ጒ 187
-ኵ 138
-ሓ 103
-ቍ 102
-ቊ 81
-ሡ 63
-ጲ 40
-ጶ 31
-ኹ 28
-ኾ 24
-ሤ 24
-ጕ 21
-ኽ 20
-ኻ 16
-ዔ 14
-ጬ 9
-ጼ 8
-ኄ 5
-ዤ 5
-ኆ 4
-ሖ 3
-ዠ 3
-ጯ 2
-ጱ 2
-ጰ 2
-ሢ 1
-ፄ 1
-ሒ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+ን
+በ
+ት
+የ
+ው
+ስ
+ር
+መ
+ል
+ም
+ች
+ይ
+አ
+ለ
+ተ
+እ
+ነ
+ያ
+ና
+ላ
+ከ
+ደ
+ድ
+ብ
+ማ
+ረ
+ግ
+ገ
+ወ
+ታ
+ራ
+ሰ
+ጥ
+ሚ
+ክ
+ባ
+ዎ
+ቀ
+ሉ
+ሪ
+ጠ
+ካ
+ሳ
+ሆ
+ፍ
+ቅ
+ህ
+ዳ
+ዋ
+ጋ
+ቸ
+ቶ
+ኛ
+ሮ
+ጣ
+ፈ
+ሊ
+ሎ
+ሁ
+0
+ሩ
+ቱ
+ቃ
+ዝ
+ኖ
+ሲ
+ዘ
+ቢ
+፣
+ዊ
+ዲ
+ጊ
+1
+ጉ
+ሞ
+ቦ
+ዜ
+ሌ
+ኑ
+ዛ
+ጀ
+ሽ
+ዙ
+ኮ
+ሜ
+ዓ
+ዚ
+ቡ
+ፊ
+ዶ
+ሃ
+ጎ
+ቤ
+ቻ
+ኒ
+ዩ
+ዕ
+ጨ
+ቹ
+2
+ቁ
+ፋ
+ቆ
+ዱ
+ጅ
+ኪ
+ሬ
+ሱ
+a
+ቲ
+ኤ
+ቋ
+ሙ
+ኔ
+ሶ
+ፓ
+ሻ
+ፕ
+ሀ
+ኝ
+ፖ
+ኢ
+ጫ
+ዮ
+ቴ
+ሕ
+ጭ
+ሥ
+ጃ
+ሴ
+o
+ኩ
+ሄ
+.
+9
+ጓ
+n
+-
+ኦ
+5
+ሸ
+e
+ቂ
+ፎ
+4
+ኋ
+ጡ
+i
+3
+ኘ
+ፒ
+ጽ
+6
+r
+8
+t
+ፉ
+ጦ
+ኙ
+s
+l
+ጂ
+ዞ
+ቪ
+ቷ
+ፅ
+ጆ
+ኃ
+c
+ሠ
+u
+ኬ
+ዴ
+ፃ
+ኞ
+7
+ኳ
+m
+p
+ሂ
+ሏ
+h
+ፀ
+።
+ሐ
+ቫ
+ጸ
+ሺ
+ጤ
+,
+ፌ
+ሯ
+g
+፡
+ጻ
+ዌ
+ዥ
+ጁ
+d
+ፐ
+b
+ቨ
+ሹ
+/
+ሾ
+ቧ
+ቬ
+ሟ
+ቭ
+”
+ፔ
+ጪ
+k
+f
+ቄ
+ቺ
+y
+ፏ
+ሷ
+ጄ
+ዬ
+w
+v
+ሣ
+ሦ
+ጌ
+ዣ
+ቾ
+ሔ
+ጩ
+ሑ
+ጧ
+ኗ
+j
+ጮ
+ዐ
+ቼ
+"
+:
+ኚ
+ዦ
+ዷ
+፤
+ዢ
+ዑ
+ዉ
+ኅ
+ኣ
+ፆ
+ጾ
+x
+$
+ኡ
+ጢ
+ቮ
+«
+»
+ፑ
+ጹ
+%
+ዟ
+z
+ዡ
+ጵ
+—
+ፁ
+ጿ
+ዪ
+?
+’
+ሼ
++
+፥
+ዒ
+°
+ሿ
+ዖ
+ጐ
+õ
+–
+ኸ
+;
+ã
+¥
+ኺ
+ጴ
+ጳ
+ኜ
+'
+ጇ
+ጺ
+‘
+!
+²
+ቿ
+ኰ
+ፗ
+q
+&
+£
+ኟ
+[
+]
+፦
+ኀ
+ቈ
+ጒ
+ኵ
+ሓ
+ቍ
+ቊ
+ሡ
+ጲ
+ጶ
+ኹ
+ኾ
+ሤ
+ጕ
+ኽ
+ኻ
+ዔ
+ጬ
+ጼ
+ኄ
+ዤ
+ኆ
+ሖ
+ዠ
+ጯ
+ጱ
+ጰ
+ሢ
+ፄ
+ሒ

mms-1b-all/ara/tokens.txt

@@ -1,117 +1,121 @@
-| 753464
-ا 414915
-ل 366105
-ي 243376
-م 220617
-ن 218976
-و 200525
-ت 107267
-ر 115296
-ب 117382
-ة 49395
-ع 103441
-د 77178
-ف 85639
-س 85645
-ك 100464
-أ 111253
-ق 62850
-ه 126602
-ح 59914
-ج 42045
-ط 21998
-ى 30642
-ش 25690
-ص 21207
-خ 28556
-إ 35733
-ث 16532
-ض 20734
-ذ 40384
-ً 1092
-ز 11052
-غ 9208
-ء 14858
-ئ 11563
-ّ 614
-ظ 6501
-ُ 340
-0 14
-1 255
-ٍ 236
-آ 6722
-، 179
-ؤ 4278
-2 157
-ِ 131
-9 108
-4 1
-5 6
-3 79
-6 74
-َ 71
-8 70
-ٌ 65
-7 62
-- 168
-. 41
-a 4
-/ 30
-" 28
-n 7
-o 7
-e 6
-: 23
-s 1
-t 10
-٠ 21
-p 19
-g 5
-d 2
-c 1
-l 3
-, 14
-i 9
-١ 11
-m 2
-r 10
-v 10
-b 9
-% 9
-u 3
-h 1
-؛ 6
-٩ 6
-w 1
-— 1
-k 4
-ـ 4
-٣ 4
-x 3
-f 3
-٨ 2
-z 2
-+ 2
-õ 2
-j 2
-٧ 2
-y 1
-چ 1
-٢ 1
-٦ 1
-٪ 1
-× 1
-٥ 1
-ٰ 62
-ی 60
-ۖ 34
-ک 21
-ۚ 19
-ۗ 6
-ۛ 2
-ھ 1
-' 344
-ڨ 1
-ۘ 1
-☭ 1
-– 4
+<s>
+<pad>
+</s>
+<unk>
+|
+ا
+ل
+ي
+م
+ن
+و
+ت
+ر
+ب
+ة
+ع
+د
+ف
+س
+ك
+أ
+ق
+ه
+ح
+ج
+ط
+ى
+ش
+ص
+خ
+إ
+ث
+ض
+ذ
+ً
+ز
+غ
+ء
+ئ
+ّ
+ظ
+ُ
+0
+1
+ٍ
+آ
+،
+ؤ
+2
+ِ
+9
+4
+5
+3
+6
+َ
+8
+ٌ
+7
+-
+.
+a
+/
+"
+n
+o
+e
+:
+s
+t
+٠
+p
+g
+d
+c
+l
+,
+i
+١
+m
+r
+v
+b
+%
+u
+h
+؛
+٩
+w
+—
+k
+ـ
+٣
+x
+f
+٨
+z
++
+õ
+j
+٧
+y
+چ
+٢
+٦
+٪
+×
+٥
+ٰ
+ی
+ۖ
+ک
+ۚ
+ۗ
+ۛ
+ھ
+'
+ڨ
+ۘ
+☭
+–

mms-1b-all/asm/tokens.txt

@@ -1,134 +1,138 @@
-| 124409
-ৰ 50675
-া 49888
-ি 36290
-্ 26337
-ক 37696
-ে 37636
-ত 31682
-ন 27205
-ব 18900
-য 19023
-ল 25377
-প 16522
-স 13837
-ম 15821
-ু 15586
-হ 11198
-ো 22070
-় 10202
-ট 2504
-ছ 4560
-আ 12049
-দ 9901
-ী 6339
-ই 10144
-গ 5310
-জ 6968
-ৱ 4817
-চ 6058
-ৈ 5753
-ষ 3666
-শ 6163
-ভ 3640
-ণ 3092
-এ 4180
-অ 3115
-থ 3705
-ধ 3802
-খ 2877
-ও 7575
-ড 504
-ূ 1800
-উ 1439
-' 2700
-ং 602
-ঁ 7651
-ফ 684
-" 882
-ৃ 1250
-। 573
-0 8
-ঠ 930
-ঘ 774
-র 1953
-1 473
-ঞ 594
-৷ 303
-2 1
-- 1220
-ঙ 402
-9 196
-ৎ 409
-5 148
-3 136
-ঢ 254
-ৌ 478
-4 128
-8 125
-6 120
-০ 119
-a 107
-, 100
-7 96
-. 89
-১ 68
-ঃ 33
-s 64
-২ 56
-৪ 53
-e 52
-c 51
-i 49
-’ 48
-u 48
-n 44
-p 43
-: 43
-m 43
-o 41
-৬ 38
-৫ 38
-t 36
-l 35
-৩ 34
-r 34
-ʼ 29
-/ 28
-g 27
-d 27
-b 24
-৮ 24
-h 22
-৯ 22
-‌ 20
-৭ 18
-ঐ 28
-v 14
-” 13
-$ 12
-ঝ 1
-ঔ 1
-f 11
-; 10
-% 10
-k 9
-z 6
-w 6
-y 6
-— 1
-j 6
-! 5
-x 5
-– 5
-ঈ 1487
-ঋ 10
-õ 4
-° 3
-q 3
-& 2
-̇ 2
-² 2
-£ 2
-+ 2
-‍ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+ৰ
+া
+ি
+্
+ক
+ে
+ত
+ন
+ব
+য
+ল
+প
+স
+ম
+ু
+হ
+ো
+়
+ট
+ছ
+আ
+দ
+ী
+ই
+গ
+জ
+ৱ
+চ
+ৈ
+ষ
+শ
+ভ
+ণ
+এ
+অ
+থ
+ধ
+খ
+ও
+ড
+ূ
+উ
+'
+ং
+ঁ
+ফ
+"
+ৃ
+।
+0
+ঠ
+ঘ
+র
+1
+ঞ
+৷
+2
+-
+ঙ
+9
+ৎ
+5
+3
+ঢ
+ৌ
+4
+8
+6
+০
+a
+,
+7
+.
+১
+ঃ
+s
+২
+৪
+e
+c
+i
+’
+u
+n
+p
+:
+m
+o
+৬
+৫
+t
+l
+৩
+r
+ʼ
+/
+g
+d
+b
+৮
+h
+৯
+‌
+৭
+ঐ
+v
+”
+$
+ঝ
+ঔ
+f
+;
+%
+k
+z
+w
+y
+—
+j
+!
+x
+–
+ঈ
+ঋ
+õ
+°
+q
+&
+̇
+²
+£
++
+‍

mms-1b-all/ast/tokens.txt

@@ -1,76 +1,80 @@
-| 51249
-e 33720
-a 27331
-s 19765
-n 19159
-o 17534
-r 16422
-i 16065
-l 15857
-u 13965
-t 11631
-d 11270
-c 10540
-m 7463
-p 7013
-b 3063
-y 2912
-g 2830
-f 2690
-v 2641
-q 2368
-á 2003
-ó 1929
-x 1830
-h 1733
-í 1565
-’ 1407
-é 861
-z 774
-' 755
-0 627
-ñ 512
-1 440
-ú 380
-k 368
-2 303
-. 265
-9 203
-w 199
-- 187
-4 179
-5 173
-3 162
-8 139
-6 139
-j 124
-” 102
-7 90
-ü 88
-: 57
-, 38
-/ 27
-; 25
-– 17
-ḥ 15
-! 13
-¿ 12
-? 12
-¡ 10
-% 10
-º 9
-$ 6
-— 6
-õ 6
-& 4
-ç 3
-¥ 3
-ś 3
-ª 3
-+ 2
-² 2
-ý 2
-[ 1
-] 1
-ö 1
-ł 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+a
+s
+n
+o
+r
+i
+l
+u
+t
+d
+c
+m
+p
+b
+y
+g
+f
+v
+q
+á
+ó
+x
+h
+í
+’
+é
+z
+'
+0
+ñ
+1
+ú
+k
+2
+.
+9
+w
+-
+4
+5
+3
+8
+6
+j
+”
+7
+ü
+:
+,
+/
+;
+–
+ḥ
+!
+¿
+?
+¡
+%
+º
+$
+—
+õ
+&
+ç
+¥
+ś
+ª
++
+²
+ý
+[
+]
+ö
+ł

mms-1b-all/azj-script_latin/tokens.txt

@@ -1,66 +1,70 @@
-| 99874
-a 62356
-ə 57493
-i 51292
-n 45766
-r 37176
-l 36643
-d 33035
-t 13791
-s 18886
-ı 22592
-m 21796
-y 16817
-e 13311
-k 11097
-b 16339
-u 14388
-o 11683
-ü 13021
-q 10161
-v 7460
-ş 7795
-z 11258
-h 9682
-ç 5276
-c 4343
-x 4381
-f 1705
-g 5890
-ö 6008
-p 2190
-ğ 3906
-- 758
-0 50
-1 18
-̇ 1645
-2 13
-9 205
-4 8
-5 173
-j 143
-3 158
-8 152
-6 1
-7 113
-. 87
-: 57
-w 36
-, 35
-" 24
-/ 18
-% 15
-' 7
-° 5
-+ 4
-$ 4
-õ 4
-? 2
-[ 2
-] 2
-— 2
-– 103
-ú 1
-² 1
-; 1
-! 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+ə
+i
+n
+r
+l
+d
+t
+s
+ı
+m
+y
+e
+k
+b
+u
+o
+ü
+q
+v
+ş
+z
+h
+ç
+c
+x
+f
+g
+ö
+p
+ğ
+-
+0
+1
+̇
+2
+9
+4
+5
+j
+3
+8
+6
+7
+.
+:
+w
+,
+"
+/
+%
+'
+°
++
+$
+õ
+?
+[
+]
+—
+–
+ú
+²
+;
+!

mms-1b-all/bel/tokens.txt

@@ -1,91 +1,95 @@
-| 2382442
-а 2103745
-н 827503
-і 646274
-ы 601477
-р 563290
-с 512691
-т 523900
-е 533265
-к 470754
-л 497013
-о 461338
-я 463462
-д 419227
-м 446632
-п 368943
-ц 392162
-в 388956
-у 399480
-з 337760
-ў 252458
-г 257230
-б 233428
-ь 210829
-э 169318
-ч 181420
-х 146477
-й 127439
-ш 152224
-ж 100739
-ю 83906
-ё 71268
-ф 29047
-» 595
-« 589
-0 523
-- 10596
-' 10312
-1 395
-2 248
-. 240
-9 170
-5 147
-3 116
-— 153
-6 114
-8 111
-7 97
-4 96
-: 66
-a 52
-i 248
-o 35
-e 34
-r 34
-c 31
-l 29
-n 1
-s 25
-, 25
-p 22
-t 18
-v 18
-g 18
-d 17
-/ 15
-h 14
-b 12
-m 8
-y 7
-k 7
-² 6
-и 5
-! 5
-; 5
-° 4
-% 4
-– 12
-[ 3
-] 3
-+ 3
-x 2
-u 2
-f 2
-z 2
-õ 2
-ú 2
-? 2
-j 1
-‒ 19
-ґ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+а
+н
+і
+ы
+р
+с
+т
+е
+к
+л
+о
+я
+д
+м
+п
+ц
+в
+у
+з
+ў
+г
+б
+ь
+э
+ч
+х
+й
+ш
+ж
+ю
+ё
+ф
+»
+«
+0
+-
+'
+1
+2
+.
+9
+5
+3
+—
+6
+8
+7
+4
+:
+a
+i
+o
+e
+r
+c
+l
+n
+s
+,
+p
+t
+v
+g
+d
+/
+h
+b
+m
+y
+k
+²
+и
+!
+;
+°
+%
+–
+[
+]
++
+x
+u
+f
+z
+õ
+ú
+?
+j
+‒
+ґ

mms-1b-all/ben/tokens.txt

@@ -1,132 +1,136 @@
-| 782576
-া 369621
-র 331604
-ে 362833
-্ 197431
-ি 183411
-ন 185762
-ক 179387
-য 145869
-ব 137621
-ত 188910
-স 96140
-ল 102490
-প 82930
-় 72348
-ম 120731
-ট 18536
-ু 67112
-দ 94815
-এ 34960
-হ 59459
-ো 56838
-জ 40457
-গ 35681
-শ 49111
-ছ 46256
-ী 38411
-ই 49640
-থ 28233
-ভ 22241
-অ 18714
-আ 58155
-ং 13400
-ষ 26406
-চ 22006
-ড 12217
-ধ 22635
-ও 26296
-ণ 16379
-খ 31419
-উ 12875
-ফ 5948
-" 798
-ূ 9779
-0 130
-ৃ 7143
-। 597
-ঘ 3297
-1 189
-ঠ 5145
-ঁ 19028
-- 5811
-ঞ 2385
-2 123
-ৈ 1471
-ঙ 3935
-ৌ 3203
-9 39
-5 50
-4 69
-ৎ 2298
-3 52
-ঝ 1613
-০ 11
-6 33
-8 30
-, 117
-' 641
-7 23
-a 87
-১ 59
-. 83
-ঃ 1005
-c 1
-৪ 23
-: 44
-২ 48
-৯ 12
-ঐ 851
-t 38
-s 37
-/ 36
-m 20
-p 36
-৬ 11
-i 3
-৫ 21
-৮ 9
-n 32
-৩ 30
-ঢ 819
-৭ 13
-u 27
-o 1
-r 24
-d 20
-h 19
-e 18
-v 18
-l 7
-g 16
-b 13
-w 12
-ঈ 10229
-; 11
-y 10
-k 10
-x 9
-‍ 8
-% 8
-f 7
-! 6
-ঔ 20
-¥ 6
-õ 6
-ঊ 68
-ঋ 129
-° 5
-q 5
-í 4
-+ 4
-ü 4
-z 4
-[ 3
-] 3
-£ 3
-৷ 2
-? 2
-j 1
-ú 1
-á 1
-— 173
+<s>
+<pad>
+</s>
+<unk>
+|
+া
+র
+ে
+্
+ি
+ন
+ক
+য
+ব
+ত
+স
+ল
+প
+়
+ম
+ট
+ু
+দ
+এ
+হ
+ো
+জ
+গ
+শ
+ছ
+ী
+ই
+থ
+ভ
+অ
+আ
+ং
+ষ
+চ
+ড
+ধ
+ও
+ণ
+খ
+উ
+ফ
+"
+ূ
+0
+ৃ
+।
+ঘ
+1
+ঠ
+ঁ
+-
+ঞ
+2
+ৈ
+ঙ
+ৌ
+9
+5
+4
+ৎ
+3
+ঝ
+০
+6
+8
+,
+'
+7
+a
+১
+.
+ঃ
+c
+৪
+:
+২
+৯
+ঐ
+t
+s
+/
+m
+p
+৬
+i
+৫
+৮
+n
+৩
+ঢ
+৭
+u
+o
+r
+d
+h
+e
+v
+l
+g
+b
+w
+ঈ
+;
+y
+k
+x
+‍
+%
+f
+!
+ঔ
+¥
+õ
+ঊ
+ঋ
+°
+q
+í
++
+ü
+z
+[
+]
+£
+৷
+?
+j
+ú
+á
+—

mms-1b-all/bos/tokens.txt

@@ -1,73 +1,77 @@
-| 60397
-a 36731
-i 32041
-o 29407
-e 29102
-n 21057
-j 16921
-r 16610
-t 15604
-s 14974
-u 14511
-k 11280
-l 10852
-d 10840
-v 10706
-m 10301
-p 9301
-z 6121
-g 5526
-b 4526
-č 3011
-c 3010
-š 2461
-h 2298
-ž 1900
-ć 1573
-f 1061
-. 971
-đ 746
-0 729
-1 540
-2 327
-- 268
-9 233
-y 218
-5 194
-w 188
-4 177
-3 166
-8 154
-6 152
-7 111
-: 97
-/ 53
-, 45
-x 40
-q 32
-; 23
-? 20
-! 18
-– 17
-' 16
-% 11
-ü 10
-á 9
-$ 5
-í 5
-é 4
-+ 4
-õ 4
-— 4
-‘ 3
-’ 3
-° 3
-ó 2
-& 2
-ç 2
-ã 2
-ú 2
-² 2
-[ 2
-] 2
-ł 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+i
+o
+e
+n
+j
+r
+t
+s
+u
+k
+l
+d
+v
+m
+p
+z
+g
+b
+č
+c
+š
+h
+ž
+ć
+f
+.
+đ
+0
+1
+2
+-
+9
+y
+5
+w
+4
+3
+8
+6
+7
+:
+/
+,
+x
+q
+;
+?
+!
+–
+'
+%
+ü
+á
+$
+í
+é
++
+õ
+—
+‘
+’
+°
+ó
+&
+ç
+ã
+ú
+²
+[
+]
+ł

mms-1b-all/bul/tokens.txt

@@ -1,92 +1,96 @@
-| 480961
-а 253357
-и 193780
-о 209323
-е 199247
-т 161025
-н 118245
-р 80643
-с 109822
-в 103688
-к 68705
-д 79897
-л 53701
-п 53354
-з 53492
-м 50721
-я 41649
-ъ 36560
-г 38915
-б 34659
-у 28203
-ч 26070
-ж 15723
-ц 10587
-щ 16842
-й 17394
-х 24363
-ш 13353
-ф 1100
-- 1102
-0 735
-. 639
-1 554
-ю 2123
-2 350
-a 1
-r 220
-9 212
-o 1
-e 1
-5 194
-n 189
-4 180
-i 1
-3 163
-6 160
-t 157
-8 150
-s 148
-c 131
-7 122
-: 120
-p 115
-l 107
-m 103
-g 97
-u 85
-h 67
-d 54
-ь 28
-– 1856
-k 48
-/ 44
-, 41
-; 41
-b 39
-v 38
-y 30
-w 28
-f 28
-! 18
-" 17
-? 15
-ѝ 246
-% 14
-' 9
-q 8
-z 7
-x 7
-j 6
-+ 4
-° 2
-[ 2
-] 2
-á 2
-õ 2
-№ 2
-² 2
-— 873
-` 5
-̀ 16
-ѐ 11
+<s>
+<pad>
+</s>
+<unk>
+|
+а
+и
+о
+е
+т
+н
+р
+с
+в
+к
+д
+л
+п
+з
+м
+я
+ъ
+г
+б
+у
+ч
+ж
+ц
+щ
+й
+х
+ш
+ф
+-
+0
+.
+1
+ю
+2
+a
+r
+9
+o
+e
+5
+n
+4
+i
+3
+6
+t
+8
+s
+c
+7
+:
+p
+l
+m
+g
+u
+h
+d
+ь
+–
+k
+/
+,
+;
+b
+v
+y
+w
+f
+!
+"
+?
+ѝ
+%
+'
+q
+z
+x
+j
++
+°
+[
+]
+á
+õ
+№
+²
+—
+`
+̀
+ѐ

mms-1b-all/cat/tokens.txt

@@ -1,102 +1,106 @@
-| 279102
-e 163821
-a 132466
-s 104262
-r 82135
-i 76435
-n 73875
-l 79307
-t 66732
-o 56213
-d 43484
-u 58576
-c 32368
-m 34012
-p 32062
-v 23355
-g 16599
-b 14416
-' 10239
-f 10561
-q 19389
-h 10706
-é 10902
-x 5777
-ó 3914
-à 5960
-í 2769
-è 3535
-j 6769
-y 2909
-ò 3843
-0 484
-z 467
-1 344
-k 13882
-ç 1240
-- 2946
-2 239
-ú 2288
-w 9364
-· 152
-9 145
-ï 500
-5 136
-4 129
-8 109
-3 107
-6 106
-. 100
-ü 164
-7 53
-: 33
-/ 30
-, 24
-" 10
-% 8
-— 7
-á 494
-² 6
-; 5
-! 4
-– 4
-” 4
-¥ 3
-’ 3
-[ 2
-] 2
-º 2
-ö 3
-& 2
-“ 2
-õ 2
-+ 1
-? 1
-ã 7
-° 1
-ñ 188
-– 85
-— 2016
-ø 21
-ô 18
-ř 15
-ū 14
-ž 8
-č 7
-ı 7
-ş 6
-š 5
-ë 4
-ł 3
-ţ 3
-å 3
-ė 3
-ň 3
-ō 2
-ù 2
-ā 2
-ä 1
-ő 1
-ì 1
-ὑ 1
-ð 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+a
+s
+r
+i
+n
+l
+t
+o
+d
+u
+c
+m
+p
+v
+g
+b
+'
+f
+q
+h
+é
+x
+ó
+à
+í
+è
+j
+y
+ò
+0
+z
+1
+k
+ç
+-
+2
+ú
+w
+·
+9
+ï
+5
+4
+8
+3
+6
+.
+ü
+7
+:
+/
+,
+"
+%
+—
+á
+²
+;
+!
+–
+”
+¥
+’
+[
+]
+º
+ö
+&
+“
+õ
++
+?
+ã
+°
+ñ
+–
+—
+ø
+ô
+ř
+ū
+ž
+č
+ı
+ş
+š
+ë
+ł
+ţ
+å
+ė
+ň
+ō
+ù
+ā
+ä
+ő
+ì
+ὑ
+ð

mms-1b-all/ceb/tokens.txt

@@ -1,70 +1,74 @@
-a 170262
-| 150956
-n 89528
-g 73203
-i 62645
-s 42778
-o 46715
-m 27981
-t 26723
-u 31550
-k 29074
-l 24460
-p 16452
-e 5237
-d 18591
-r 6301
-y 18837
-b 14055
-h 13075
-w 7040
-- 3046
-c 956
-0 126
-f 136
-v 76
-1 70
-. 543
-2 49
-j 1845
-9 9
-5 11
-z 51
-4 41
-8 3
-3 7
-6 6
-x 11
-7 4
-, 112
-: 87
-' 182
-q 64
-; 49
-/ 45
-" 44
-? 21
-! 18
-$ 14
-ü 13
-— 78
-– 12
-á 12
-% 11
-í 7
-ç 6
-+ 5
-& 5
-° 4
-ú 4
-£ 3
-¥ 3
-[ 3
-] 3
-ã 3
-’ 2
-â 2
-õ 2
-ó 2
-² 1
-é 1
+<s>
+<pad>
+</s>
+<unk>
+a
+|
+n
+g
+i
+s
+o
+m
+t
+u
+k
+l
+p
+e
+d
+r
+y
+b
+h
+w
+-
+c
+0
+f
+v
+1
+.
+2
+j
+9
+5
+z
+4
+8
+3
+6
+x
+7
+,
+:
+'
+q
+;
+/
+"
+?
+!
+$
+ü
+—
+–
+á
+%
+í
+ç
++
+&
+°
+ú
+£
+¥
+[
+]
+ã
+’
+â
+õ
+ó
+²
+é

mms-1b-all/ces/tokens.txt

@@ -1,82 +1,86 @@
-| 105027
-o 48988
-e 43999
-n 37790
-a 38664
-t 32056
-s 28673
-i 24958
-v 27128
-l 25729
-r 22145
-k 20219
-d 20333
-p 19262
-m 18512
-u 18322
-í 18123
-c 14287
-h 13806
-z 12868
-á 13199
-y 11300
-j 12323
-b 10377
-ě 10195
-é 7908
-ř 6642
-ž 4894
-ý 5066
-č 5165
-š 4440
-ů 3082
-g 1793
-f 1730
-0 664
-1 501
-ú 843
-2 306
-w 231
-x 350
-9 217
-. 215
-5 194
-4 167
-ň 331
-6 163
-8 160
-3 155
-ó 141
-7 117
-- 20
-ť 137
-ď 121
-/ 50
-: 42
-q 13
-, 38
-– 20
-% 13
-' 4
-" 8
-° 7
-õ 6
-⁠ 4
-ö 9
-! 3
-— 3
-[ 3
-] 3
-ü 5
-; 3
-& 2
-+ 2
-× 2
-² 2
-ç 1
-ā 1
-ã 1
-ł 1
-è 3
-ä 2
-ï 1
+<s>
+<pad>
+</s>
+<unk>
+|
+o
+e
+n
+a
+t
+s
+i
+v
+l
+r
+k
+d
+p
+m
+u
+í
+c
+h
+z
+á
+y
+j
+b
+ě
+é
+ř
+ž
+ý
+č
+š
+ů
+g
+f
+0
+1
+ú
+2
+w
+x
+9
+.
+5
+4
+ň
+6
+8
+3
+ó
+7
+-
+ť
+ď
+/
+:
+q
+,
+–
+%
+'
+"
+°
+õ
+⁠
+ö
+!
+—
+[
+]
+ü
+;
+&
++
+×
+²
+ç
+ā
+ã
+ł
+è
+ä
+ï

mms-1b-all/ckb/tokens.txt

@@ -1,107 +1,111 @@
-| 32097
-ە 24430
-ی 15154
-ا 14932
-و 12597
-ن 11393
-ر 8273
-ک 7984
-ت 7330
-د 6567
-ب 6764
-ێ 6025
-ل 3314
-ۆ 3483
-س 3707
-م 6342
-ش 2549
-گ 2150
-ه 4293
-ئ 2677
-پ 1710
-ز 2061
-ڕ 1650
-ڵ 1849
-خ 1668
-چ 1417
-ج 796
-ژ 677
-ف 572
-ك 43
-ق 621
-، 561
-ڤ 124
-٠ 368
-0 327
-١ 298
-ح 412
-1 223
-٢ 182
-‎ 160
-٩ 155
-2 143
-. 129
-٨ 105
-٥ 96
-5 96
-غ 67
-٤ 93
-- 19
-6 83
-4 79
-3 79
-٣ 79
-٦ 75
-9 70
-a 65
-ھ 303
-8 53
-ع 267
-٧ 50
-/ 49
-7 43
-c 38
-o 34
-: 31
-" 30
-p 27
-n 27
-t 27
-s 26
-d 26
-h 23
-, 22
-' 21
-i 20
-r 19
-v 19
-u 17
-f 17
-e 16
-ى 9
-[ 14
-] 14
-l 13
-m 13
-؛ 12
-g 11
-‏ 11
-b 10
-x 9
-k 8
-w 7
-% 6
-! 6
-y 6
-j 4
-؟ 3
-‌ 2
-ـ 2
-+ 2
-õ 2
-ء 2
-q 1
-z 1
-ي 80
-ؤ 1
-ث 1
+<s>
+<pad>
+</s>
+<unk>
+|
+ە
+ی
+ا
+و
+ن
+ر
+ک
+ت
+د
+ب
+ێ
+ل
+ۆ
+س
+م
+ش
+گ
+ه
+ئ
+پ
+ز
+ڕ
+ڵ
+خ
+چ
+ج
+ژ
+ف
+ك
+ق
+،
+ڤ
+٠
+0
+١
+ح
+1
+٢
+‎
+٩
+2
+.
+٨
+٥
+5
+غ
+٤
+-
+6
+4
+3
+٣
+٦
+9
+a
+ھ
+8
+ع
+٧
+/
+7
+c
+o
+:
+"
+p
+n
+t
+s
+d
+h
+,
+'
+i
+r
+v
+u
+f
+e
+ى
+[
+]
+l
+m
+؛
+g
+‏
+b
+x
+k
+w
+%
+!
+y
+j
+؟
+‌
+ـ
++
+õ
+ء
+q
+z
+ي
+ؤ
+ث

mms-1b-all/cmn-script_simplified/tokens.txt

@@ -1,4491 +1,4495 @@
-的 13574
-在 2652
-一 5821
-是 5720
-有 2085
-和 1875
-了 1065
-人 3013
-这 1036
-a 1
-0 793
-为 3880
-大 2312
-地 1832
-国 3787
-可 890
-他 1267
-1 615
-以 1280
-不 1045
-时 1225
-会 1247
-能 578
-e 554
-到 663
-上 1097
-中 2948
-个 3275
-行 936
-们 395
-n 507
-o 502
-r 492
-于 2651
-发 783
-多 919
-生 1087
-年 1437
-s 433
-来 845
-要 795
-其 837
-斯 1728
-里 714
-i 385
-2 373
-家 1132
-成 1062
-动 934
-用 963
-些 327
-法 758
-出 1111
-t 344
-方 666
-l 337
-对 628
-过 519
-后 1260
-公 871
-物 1359
-之 1107
-也 856
-亚 1218
-或 323
-种 1466
-被 733
-学 1760
-常 448
-前 614
-现 791
-分 863
-自 705
-部 1300
-利 1186
-都 604
-但 237
-最 742
-得 501
-通 534
-而 627
-者 462
-9 271
-子 991
-h 265
-经 570
-因 487
-该 627
-你 91
-就 340
-尔 1604
-特 957
-如 157
-车 608
-5 244
-所 814
-并 386
-作 929
-比 405
-间 567
-表 588
-c 1
-很 221
-它 344
-世 495
-与 982
-加 840
-更 168
-当 426
-进 744
-然 204
-克 1008
-u 218
-区 1926
-球 624
-g 213
-下 1702
-度 413
-名 1295
-场 537
-小 576
-开 477
-体 613
-同 720
-d 209
-语 342
-提 277
-4 205
-3 205
-m 205
-重 453
-称 391
-从 264
-数 453
-意 264
-月 210
-道 693
-定 579
-机 549
-面 382
-美 1154
-新 569
-日 766
-使 493
-文 671
-8 193
-6 192
-将 419
-没 226
-本 1142
-受 258
-目 494
-理 613
-拉 977
-天 569
-入 370
-德 1031
-果 186
-力 420
-西 1268
-旅 73
-罗 701
-我 256
-第 1015
-次 425
-游 243
-队 432
-达 334
-英 347
-手 272
-着 280
-性 464
-由 687
-赛 437
-长 723
-马 736
-起 271
-式 432
-类 371
-示 566
-主 1192
-化 903
-内 700
-说 282
-位 1680
-相 426
-事 656
-此 608
-p 2
-正 343
-水 429
-员 844
-还 320
-电 601
-全 393
-布 562
-海 676
-司 449
-非 529
-应 295
-原 426
-尼 682
-期 556
-外 451
-空 263
-高 619
-议 244
-7 143
-k 142
-战 453
-兰 645
-明 609
-活 238
-教 767
-保 317
-至 304
-管 334
-只 187
-关 481
-情 188
-心 337
-点 342
-样 163
-量 271
-岛 293
-许 189
-那 261
-已 260
-需 98
-约 217
-联 477
-b 130
-认 255
-报 173
-向 245
-变 749
-制 815
-往 150
-节 220
-件 243
-去 191
-军 715
-基 496
-接 282
-城 697
-建 926
-格 540
-选 279
-等 379
-民 977
-看 113
-每 120
-纪 149
-运 402
-科 1875
-奥 409
-代 833
-巴 709
-界 293
-金 413
-航 144
-二 737
-产 415
-据 138
-市 1589
-工 491
-业 733
-阿 739
-合 435
-组 346
-统 346
-计 293
-处 213
-任 878
-持 191
-知 274
-立 467
-实 276
-身 415
-供 131
-风 180
-周 158
-系 507
-政 886
-北 842
-及 716
-几 121
-南 1052
-让 118
-程 293
-三 851
-造 217
-洲 231
-山 851
-获 183
-指 460
-气 168
-少 191
-十 966
-流 267
-星 257
-交 301
-问 140
-尽 29
-f 101
-y 100
-务 264
-好 199
-两 474
-型 228
-州 1716
-影 367
-印 163
-住 131
-无 256
-始 233
-举 201
-速 116
-做 122
-图 652
-查 207
-回 189
-直 236
-维 411
-太 321
-飞 107
-带 245
-光 296
-必 64
-安 539
-己 126
-证 150
-况 64
-今 175
-结 244
-标 185
-击 147
-先 163
-形 345
-解 201
-群 182
-存 203
-取 138
-设 537
-路 569
-平 401
-决 148
-士 737
-近 249
-传 293
-卡 384
-项 184
-网 190
-随 157
-言 143
-感 100
-题 155
-放 178
-伊 382
-头 207
-参 329
-未 155
-口 719
-病 111
-致 164
-确 88
-客 112
-么 81
-雪 56
-包 208
-季 92
-足 264
-历 506
-土 173
-万 206
-导 228
-信 228
-线 429
-像 125
-何 125
-响 124
-规 137
-且 104
-预 69
-座 328
-号 237
-别 202
-各 248
-打 99
-船 56
-想 106
-站 700
-欧 164
-元 289
-普 379
-视 249
-领 241
-括 124
-v 71
-收 147
-助 116
-强 150
-纳 354
-共 453
-字 386
-总 340
-史 425
-神 254
-服 169
-米 221
-府 566
-记 162
-消 68
-古 369
-冰 38
-洛 239
-威 168
-居 284
-票 64
-w 69
-推 112
-堡 176
-引 134
-质 188
-官 317
-告 87
-显 100
-观 188
-萨 364
-河 411
-热 139
-院 487
-律 110
-状 144
-演 307
-离 107
-东 852
-台 570
-局 204
-即 111
-求 104
-越 158
-习 113
-酒 78
-远 90
-警 95
-支 174
-治 664
-曾 500
-份 144
-才 109
-塔 255
-圣 401
-夫 318
-难 71
-希 202
-织 164
-乐 357
-见 175
-把 85
-火 130
-镜 36
-反 221
-野 134
-失 80
-片 201
-抗 91
-门 305
-价 66
-细 101
-首 382
-波 292
-论 200
-医 141
-准 98
-, 61
-容 128
-根 205
-品 278
-试 208
-极 123
-步 96
-林 442
-话 113
-争 150
-班 136
-四 512
-j 58
-级 321
-具 156
-较 119
-完 138
-富 103
-测 116
-园 229
-案 106
-权 154
-转 158
-候 97
-创 175
-续 126
-单 285
-爱 173
-适 48
-费 117
-孩 47
-例 73
-术 228
-商 222
-易 133
-边 157
-户 125
-伤 54
-塞 221
-音 274
-划 114
-石 324
-则 245
-团 253
-故 179
-器 199
-严 64
-给 145
-潜 26
-博 234
-独 127
-识 75
-仅 88
-王 466
-围 130
-装 148
-思 100
-卫 193
-华 478
-须 75
-察 147
-控 114
-复 165
-展 226
-食 143
-早 179
-帮 53
-落 102
-降 58
-便 68
-声 127
-油 69
-义 332
-调 151
-低 80
-互 67
-什 113
-书 291
-签 32
-快 68
-滑 40
-备 129
-染 43
-诉 24
-照 72
-改 264
-命 213
-险 45
-陆 156
-投 107
-验 76
-轻 62
-条 191
-源 180
-育 192
-请 68
-坦 122
-营 149
-望 81
-老 117
-�� 90
-防 108
-景 154
-毒 65
-切 90
-态 107
-列 522
-际 166
-域 178
-初 174
-庭 81
-构 220
-广 381
-苏 260
-众 115
-洋 130
-闻 88
-某 59
-甚 33
-她 258
-象 143
-附 146
-护 146
-办 161
-阳 212
-读 99
-模 185
-移 87
-女 414
-伦 164
-色 487
-千 112
-考 108
-哥 169
-射 113
-研 261
-究 241
-诺 206
-核 80
-乎 39
-鲁 178
-牙 136
-资 214
-播 123
-精 86
-走 61
-龙 293
-算 105
-仍 85
-令 118
-除 93
-留 109
-息 108
-盟 117
-房 84
-瓦 286
-花 400
-底 71
-母 250
-张 211
-埃 201
-愿 35
-白 219
-坏 26
-修 143
-连 171
-艇 14
-录 165
-断 67
-志 115
-死 120
-集 220
-虽 26
-限 133
-送 46
-伯 161
-店 100
-雷 271
-姆 176
-晚 67
-胜 88
-写 90
-济 156
-澳 88
-乘 53
-暴 41
-托 181
-弗 134
-功 124
-夏 70
-再 106
-够 50
-专 266
-汽 33
-宗 254
-绝 56
-索 154
-境 155
-著 87
-施 137
-整 97
-密 154
-止 60
-帕 142
-社 276
-- 3
-沙 194
-钟 48
-注 93
-担 226
-素 119
-耳 124
-距 28
-满 85
-黑 187
-哈 182
-蒂 117
-穿 40
-久 86
-协 149
-跑 20
-微 74
-危 31
-检 75
-庙 69
-效 143
-环 175
-宣 123
-真 165
-缺 45
-置 191
-露 30
-舰 98
-属 1739
-馆 218
-角 227
-追 51
-瑞 131
-序 67
-却 37
-技 134
-翰 41
-洞 37
-败 47
-破 60
-监 118
-俄 195
-亡 63
-念 104
-顿 153
-访 37
-勒 264
-杰 88
-似 103
-奇 131
-增 76
-右 65
-词 80
-另 124
-骑 30
-登 257
-害 60
-徒 47
-换 52
-养 58
-湾 255
-赫 81
-束 52
-焦 23
-校 320
-戈 75
-遗 93
-驶 19
-盖 114
-帝 182
-松 124
-舱 9
-尤 52
-z 31
-木 190
-皮 175
-震 58
-树 116
-典 130
-救 41
-迪 139
-左 90
-驾 19
-炸 31
-码 52
-侵 36
-师 233
-岁 49
-段 124
-势 71
-脑 48
-拿 114
-遇 43
-饮 24
-雨 22
-待 44
-背 77
-找 57
-免 45
-族 312
-短 117
-吃 49
-责 94
-艺 153
-率 97
-麦 85
-激 49
-沿 68
-架 50
-银 107
-评 124
-又 172
-欢 62
-排 95
-购 57
-买 60
-终 127
-毛 233
-简 69
-胞 50
-坐 38
-清 334
-皇 135
-丹 122
-判 56
-摄 58
-儿 191
-x 27
-停 79
-承 115
-半 105
-餐 26
-税 23
-叫 42
-估 16
-临 71
-戏 162
-额 41
-讲 70
-积 82
-植 272
-双 140
-港 249
-袭 43
-恐 33
-频 65
-略 46
-温 126
-宿 34
-五 361
-版 156
-闭 31
-轮 61
-腊 60
-捕 43
-亿 1
-莱 269
-邮 37
-料 110
-夜 52
-订 20
-眼 81
-批 67
-胁 13
-鞋 7
-块 31
-委 280
-摩 101
-森 215
-曼 133
-拥 82
-紧 35
-优 74
-卢 90
-患 37
-症 52
-练 75
-阅 7
-省 631
-味 44
-镇 835
-迫 29
-私 57
-攻 80
-恶 25
-挥 47
-觉 70
-桥 109
-窗 20
-谷 75
-疫 22
-职 229
-援 45
-蒙 184
-障 22
-吉 211
-返 31
-灯 55
-训 59
-湖 219
-输 69
-负 89
-疗 61
-继 121
-择 57
-层 122
-男 147
-竞 37
-授 136
-疾 32
-压 60
-扎 54
-寻 32
-否 48
-佳 58
-% 23
-亲 224
-余 71
-街 187
-唯 77
-冷 25
-菌 64
-午 18
-友 101
-靠 37
-智 44
-贝 195
-趣 31
-罪 42
-厅 57
-疑 32
-依 80
-. 22
-升 132
-毁 21
-般 103
-画 206
-享 35
-福 458
-板 55
-裂 47
-值 61
-筑 186
-岩 76
-六 266
-述 121
-异 106
-艾 74
-农 240
-触 31
-京 293
-箱 12
-署 47
-益 44
-爆 42
-丁 108
-审 52
-乔 68
-肯 171
-旋 55
-冠 76
-尚 104
-液 44
-范 136
-杂 54
-歌 165
-俗 23
-探 44
-坡 44
-熟 24
-奖 186
-退 55
-虑 10
-货 46
-冬 36
-寺 125
-端 91
-采 106
-犯 40
-针 30
-屿 22
-钱 66
-脉 55
-冲 57
-胡 90
-藏 118
-童 48
-虫 158
-督 108
-邻 43
-兵 147
-迎 38
-载 65
-鸟 65
-朗 143
-党 379
-泡 50
-牧 27
-听 43
-七 182
-岸 73
-急 26
-莫 148
-喜 73
-玩 49
-刀 16
-猫 25
-跨 27
-武 245
-吸 56
-撞 27
-恩 155
-耶 142
-媒 55
-室 149
-付 35
-巨 75
-笔 44
-幕 54
-佛 117
-彩 30
-损 29
-拍 55
-九 198
-避 30
-绕 25
-纽 98
-逐 39
-宇 42
-漏 10
-墓 83
-封 100
-突 66
-禁 38
-邦 179
-泰 178
-汗 35
-深 105
-烈 60
-差 61
-芬 60
-屋 65
-陡 2
-赢 26
-血 75
-困 32
-编 145
-污 18
-裁 38
-截 15
-床 29
-陷 27
-驱 26
-迹 47
-健 30
-梵 9
-艘 11
-拒 16
-览 38
-顶 76
-征 93
-散 64
-盛 77
-融 33
-挪 13
-按 60
-归 80
-陵 70
-副 108
-充 42
-剧 207
-延 70
-辆 36
-途 40
-执 59
-隆 189
-透 45
-猎 24
-址 100
-搜 17
-涉 27
-毕 183
-折 31
-俱 65
-遭 56
-弱 12
-兴 167
-句 19
-菜 109
-妇 23
-减 35
-违 11
-翻 33
-敦 62
-” 17
-殿 82
-夺 38
-雅 81
-策 74
-卷 44
-茨 88
-含 69
-禽 16
-坠 5
-占 58
-释 45
-朝 574
-脚 38
-聚 56
-携 7
-呼 37
-百 201
-姿 8
-坚 48
-弓 11
-补 46
-派 210
-售 39
-隐 41
-秘 50
-刚 35
-财 54
-逊 53
-促 23
-杀 81
-席 90
-峡 28
-启 38
-暂 19
-逃 29
-稳 32
-齐 80
-乱 24
-既 7
-飓 10
-幸 35
-尝 13
-彼 23
-柏 44
-磁 41
-彻 19
-灵 92
-红 164
-枪 42
-睡 14
-舒 17
-呈 45
-寄 29
-庆 135
-泄 3
-撒 23
-租 15
-婚 59
-鹿 31
-库 169
-汤 32
-侧 90
-草 345
-溜 15
-刃 2
-稀 18
-瀑 6
-迅 21
-霍 87
-舞 64
-宪 51
-漫 58
-荷 80
-碎 14
-饰 42
-瓜 39
-绩 21
-悉 12
-努 47
-描 65
-脏 16
-菲 79
-革 88
-韦 106
-丝 46
-犹 48
-弹 61
-香 287
-永 121
-允 27
-配 112
-啸 4
-桶 1
-牛 104
-狱 17
-弯 10
-痛 19
-: 14
-嫌 11
-恢 20
-云 120
-耐 5
-软 70
-李 206
-橄 4
-榄 8
-宝 86
-阻 34
-宽 37
-络 57
-父 279
-鱼 230
-浓 20
-倍 12
-汉 273
-暗 40
-盘 53
-贵 80
-康 135
-休 45
-仪 49
-狮 15
-豹 18
-赞 36
-符 44
-村 292
-顾 46
-礼 99
-销 44
-汇 42
-错 37
-措 17
-抵 31
-尿 15
-猛 10
-覆 27
-墙 38
-峭 7
-壁 33
-惧 6
-穴 16
-恒 33
-繁 35
-倾 14
-您 13
-赖 53
-横 45
-赌 8
-泽 92
-操 45
-锡 51
-乡 306
-惯 16
-衡 30
-醒 6
-诸 43
-君 68
-干 113
-碍 18
-溯 9
-顺 90
-诊 6
-抢 9
-羊 42
-琴 45
-妻 68
-款 54
-宜 27
-舍 56
-良 71
-守 102
-梦 39
-葬 41
-锦 57
-课 50
-峰 57
-浪 34
-固 42
-填 10
-阶 70
-译 41
-默 54
-涂 12
-叶 292
-均 102
-曲 197
-档 23
-旧 88
-摧 5
-斜 16
-跟 53
-荣 77
-刺 84
-牌 59
-隔 28
-咖 16
-麻 62
-骨 74
-绘 34
-振 30
-苦 33
-廷 72
-遥 13
-剩 14
-榜 27
-泛 55
-申 54
-喷 12
-阵 45
-奏 53
-纸 24
-稍 9
-铁 303
-昂 62
-鉴 12
-贸 33
-垒 12
-炎 25
-韩 96
-堂 253
-劣 9
-八 252
-丰 90
-殖 40
-煤 11
-撤 25
-祝 19
-龄 14
-毫 7
-虐 4
-殊 27
-烧 26
-黎 64
-尺 20
-蚊 4
-寨 33
-忧 11
-祸 5
-末 84
-楼 113
-慢 20
-柔 22
-旗 87
-穆 84
-厢 6
-央 141
-刻 49
-丘 34
-烦 5
-薄 19
-啡 11
-惠 38
-肺 6
-净 6
-磅 3
-键 33
-辑 72
-扫 8
-墨 45
-乏 12
-缘 45
-静 30
-叠 11
-闲 9
-善 65
-厄 43
-丽 98
-唱 69
-骗 10
-怀 45
-讼 3
-爪 14
-寒 19
-讯 61
-旺 29
-粒 25
-借 22
-削 10
-拜 66
-哪 12
-恰 14
-滩 13
-镖 4
-赏 25
-秀 53
-祖 172
-鸦 6
-衣 38
-秒 5
-洪 55
-谈 23
-柬 17
-埔 24
-径 41
-乌 153
-钉 3
-假 67
-脱 30
-迟 8
-玻 20
-璃 16
-础 42
-娜 42
-辐 46
-爵 65
-籍 173
-谢 84
-拟 39
-寓 9
-敲 3
-暖 15
-宁 157
-硬 35
-楚 40
-冈 63
-廉 27
-沉 29
-桑 169
-凯 65
-药 72
-苹 8
-鼓 19
-尊 25
-糖 34
-颁 34
-缓 15
-/ 9
-狼 21
-燃 22
-藻 27
-储 26
-剪 9
-斗 75
-宾 50
-蚁 5
-吧 15
-' 5
-闹 2
-丧 16
-疼 3
-珀 17
-怎 21
-杉 41
-矶 24
-刑 31
-誉 38
-扩 43
-仰 24
-敏 33
-掉 22
-亦 196
-摆 6
-怕 12
-役 55
-癌 16
-í 8
-氏 332
-泳 17
-跃 26
-颗 22
-培 40
-惊 18
-幅 22
-详 32
-昨 4
-概 40
-堵 5
-懂 5
-框 7
-莎 48
-册 24
-川 222
-伽 14
-猩 10
-绿 50
-姻 15
-葡 58
-萄 56
-辛 54
-剥 2
-晓 15
-拘 6
-误 36
-潮 55
-伸 18
-掷 3
-厚 27
-夷 20
-浮 26
-泊 32
-拨 7
-熊 26
-玛 70
-灾 24
-押 7
-替 26
-• 8
-剑 27
-巢 16
-堆 15
-粗 46
-珍 34
-谋 23
-宴 4
-湿 23
-丢 7
-堕 2
-敌 27
-答 13
-盗 13
-酸 80
-鲜 80
-崎 40
-衔 27
-乳 53
-妮 17
-虎 87
-荡 9
-荐 10
-匈 22
-虚 23
-钢 34
-垫 4
-饭 29
-旁 36
-逮 10
-膀 4
-椅 6
-宙 18
-q 7
-佐 44
-棒 40
-朋 23
-榻 1
-戴 45
-夕 9
-企 58
-肩 9
-材 48
-讨 41
-坎 25
-搭 18
-匹 36
-旦 16
-劳 82
-吐 10
-踪 11
-娱 22
-梅 137
-腰 9
-沃 159
-贯 18
-棕 22
-鹰 19
-齿 54
-忙 18
-励 19
-貌 14
-曝 3
-握 21
-旨 19
-厉 7
-罚 13
-偷 5
-圭 15
-矛 21
-篮 45
-靴 6
-胎 12
-挑 25
-逝 29
-詹 18
-渡 39
-梁 72
-缆 4
-畅 10
-藤 95
-仁 67
-剂 31
-箭 39
-荒 15
-奶 16
-苗 25
-崇 47
-页 21
-吗 22
-瓶 8
-黄 252
-窑 6
-烤 4
-伏 32
-拼 7
-奎 14
-胶 33
-芯 8
-挤 2
-昆 46
-氮 12
-献 40
-闪 12
-坟 15
-朱 60
-颜 46
-歉 6
-巧 12
-陪 6
-臭 8
-裙 5
-怪 19
-罕 12
-贴 13
-弃 23
-缝 7
-隙 5
-裔 41
-拖 8
-纷 16
-杯 42
-郁 6
-亨 29
-帐 8
-池 45
-蛋 38
-欣 13
-悬 23
-鼠 57
-阀 5
-兹 79
-偏 38
-掌 26
-塑 17
-铺 12
-鸡 17
-屠 16
-宰 13
-咬 4
-虹 5
-— 4
-寸 5
-锻 3
-炼 9
-媲 6
-壳 57
-凉 17
-币 39
-捷 39
-疆 39
-厂 71
-巡 54
-塌 3
-亮 43
-憾 2
-秃 1
-õ 6
-烹 1
-饪 1
-斤 5
-睛 7
-刊 19
-谎 3
-瑟 51
-擅 14
-凌 11
-轴 33
-枚 13
-甲 292
-葱 11
-讽 6
-混 42
-° 5
-伐 95
-孙 96
-辨 7
-绪 43
-滋 9
-斐 14
-御 66
-掠 12
-惜 5
-雇 11
-吊 8
-丛 16
-循 24
-贪 8
-嘲 5
-豪 38
-挡 7
-羽 60
-栋 19
-脸 11
-驼 11
-棵 2
-旱 4
-聊 9
-贺 26
-诗 58
-勘 4
-予 49
-疏 33
-遍 27
-卸 5
-伴 19
-咎 2
-奔 6
-镑 5
-赤 41
-钳 5
-迁 56
-陶 37
-袋 23
-昼 3
-妨 3
-· 5
-坑 28
-囚 2
-辞 18
-仇 9
-氢 26
-佩 65
-粉 59
-吞 10
-残 29
-跌 1
-贾 26
-践 13
-涵 10
-逻 20
-尘 7
-邓 26
-坍 5
-坛 22
-腐 14
-％ 5
-鞍 9
-晨 5
-悠 18
-噬 3
-榈 9
-轨 56
-歧 12
-酋 14
-糟 4
-糕 19
-仿 23
-刷 16
-庞 20
-忆 17
-逗 3
-崩 5
-悟 4
-粘 7
-兼 63
-沫 13
-姓 56
-溪 79
-爬 17
-跳 33
-攀 10
-青 199
-滤 7
-缠 5
-圈 41
-笑 20
-鹅 24
-卵 16
-娅 5
-届 85
-肝 13
-祭 23
-驻 103
-怖 12
-忘 7
-抽 17
-篇 20
-抑 11
-谨 8
-慎 7
-诚 14
-聪 12
-戒 10
-腹 49
-盎 4
-腿 9
-壮 32
-暑 4
-抚 26
-漠 11
-麋 4
-幽 13
-掩 4
-倒 19
-贡 58
-厌 7
-涸 4
-宅 24
-犒 4
-肠 19
-氛 4
-猪 32
-逆 11
-碳 19
-添 11
-偶 22
-妹 46
-田 198
-勤 28
-尸 7
-抛 5
-裹 2
-谐 4
-犬 16
-氧 50
-涛 4
-锅 8
-夸 12
-仔 27
-鸭 10
-驯 3
-晰 3
-饱 7
-遮 6
-缩 21
-嘴 14
-尾 114
-鲍 11
-咨 4
-询 12
-仑 17
-竟 4
-陌 3
-轿 6
-兑 1
-润 14
-拔 32
-擦 7
-袖 18
-铅 6
-愤 3
-卉 4
-贫 22
-滚 17
-壤 14
-洁 14
-迈 33
-啮 4
-斑 36
-春 104
-奢 3
-穷 14
-扰 19
-茶 68
-鲨 14
-镫 4
-涯 34
-樱 11
-扬 32
-栏 11
-蜃 1
-颇 10
-蛇 29
-宠 15
-氰 6
-鼎 15
-滕 27
-阱 5
-删 8
-哺 25
-摔 5
-雄 77
-夹 16
-疲 3
-竭 7
-蹈 13
-眨 3
-颠 7
-碰 2
-歇 23
-捉 5
-兄 70
-弟 113
-疟 3
-腺 26
-裕 22
-僧 15
-囊 11
-勋 26
-丈 17
-捐 11
-赠 19
-泥 19
-寂 5
-芝 38
-臣 68
-肥 23
-函 31
-茜 33
-俚 3
-踢 3
-魅 3
-庄 85
-辈 13
-奉 49
-鼻 14
-窃 2
-奋 5
-趁 3
-盾 46
-盲 18
-渔 16
-阪 22
-姐 32
-劫 4
-彰 12
-泵 11
-溢 1
-鞭 13
-狩 5
-徙 7
-沼 10
-枝 37
-饲 7
-： 3
-藉 15
-歪 2
-搞 6
-杜 142
-雕 32
-凹 21
-抓 4
-邀 19
-獭 1
-柜 8
-é 3
-屏 19
-吓 4
-陨 15
-瓣 20
-遣 27
-慨 3
-若 54
-罄 3
-竹 85
-琳 22
-搬 21
-锁 17
-隧 11
-燥 9
-废 48
-纵 14
-忒 4
-弥 14
-驳 7
-卧 8
-眠 9
-勾 4
-丑 18
-宛 9
-+ 3
-邸 7
-唐 140
-麾 2
-氨 19
-驰 3
-喉 6
-咙 3
-缪 1
-碑 34
-焰 4
-搁 1
-浅 22
-介 115
-吁 4
-堤 4
-漂 10
-诈 4
-撰 15
-渐 38
-裸 6
-锋 34
-瞩 3
-矩 23
-猿 10
-牵 14
-冒 10
-撑 3
-狗 30
-炮 44
-插 25
-紊 1
-蚀 2
-蜿 2
-蜒 2
-弄 19
-股 69
-柱 44
-亏 4
-愚 2
-蠢 3
-伟 27
-厕 5
-缭 2
-喱 2
-椰 5
-笨 1
-侯 34
-拴 2
-趾 6
-渊 10
-蒸 7
-抄 7
-摸 5
-勿 5
-捶 2
-碾 2
-滥 2
-翅 24
-诞 12
-吻 16
-巷 3
-厘 3
-县 1649
-吴 90
-耗 9
-萦 2
-婆 40
-愈 12
-陀 21
-螺 97
-剖 3
-吾 22
-淘 13
-汰 11
-胆 30
-膝 4
-叹 3
-绵 14
-拓 18
-灭 40
-乞 8
-狂 7
-炉 13
-鸫 2
-炭 8
-综 28
-帜 4
-橇 1
-帅 15
-掘 7
-淌 2
-漆 4
-趟 2
-招 19
-募 3
-阴 38
-腓 8
-硕 25
-铜 30
-洒 3
-呕 2
-彗 6
-岭 33
-岖 1
-梯 25
-俯 2
-瞰 2
-崖 17
-铃 24
-ó 2
-亥 21
-串 15
-卖 29
-挟 2
-狄 21
-醉 6
-飘 5
-珠 48
-遐 1
-迩 2
-烟 26
-拐 2
-裤 1
-掏 1
-揭 11
-纱 5
-猞 2
-猁 2
-& 2
-慈 24
-诱 6
-扔 3
-赶 13
-赴 22
-喀 25
-弦 16
-璀 2
-璨 2
-欺 4
-淹 3
-禄 23
-遂 16
-纹 49
-馊 2
-喙 6
-耸 2
-泻 3
-诅 2
-咒 6
-杞 2
-沮 2
-粮 17
-佣 4
-稻 15
-蔗 4
-阔 14
-浩 21
-瀚 4
-垠 2
-绸 4
-勃 27
-赔 4
-吼 2
-逼 4
-聘 8
-撼 1
-蜂 15
-亭 18
-映 38
-； 2
-兔 13
-羚 1
-卓 20
-番 22
-晴 6
-啤 6
-撕 3
-肆 3
-懒 5
-鹦 7
-鹉 8
-盆 17
-吵 2
-痴 1
-洽 1
-柯 25
-迄 8
-召 32
-、 2
-糊 7
-肿 12
-瘤 19
-诀 2
-章 97
-隶 100
-堪 74
-摇 16
-婪 1
-津 75
-魁 17
-拦 2
-猜 3
-敛 1
-洗 17
-哦 1
-勇 19
-敢 8
-馈 1
-缴 8
-喘 1
-肴 2
-孔 64
-雀 36
-蜗 21
-榛 1
-毯 1
-债 8
-券 16
-蓄 6
-豁 2
-贷 8
-辅 28
-扭 6
-肢 16
-挽 6
-疽 2
-枢 25
-寰 1
-顷 1
-膨 5
-胀 10
-旬 1
-玉 84
-柿 9
-豆 119
-盔 5
-甄 3
-湍 1
-喂 2
-擎 12
-甘 62
-菊 94
-奸 4
-扮 12
-甩 2
-篷 5
-茵 5
-瑙 16
-崔 31
-呢 11
-匣 2
-缉 3
-桃 60
-棍 3
-篡 2
-挖 7
-翱 2
-翔 12
-忽 6
-摘 3
-伍 32
-镳 2
-拷 1
-逛 2
-薪 8
-骚 5
-敞 3
-钻 14
-抱 11
-韵 6
-艳 8
-抿 2
-肉 47
-磷 10
-硫 14
-狭 15
-窄 4
-莨 2
-菪 2
-躲 9
-欲 10
-肚 6
-猴 12
-凭 13
-棱 13
-臂 12
-贬 7
-尖 45
-哭 12
-屈 25
-栅 4
-桩 2
-诩 2
-涅 53
-锐 10
-杆 18
-蝎 1
-哇 6
-胺 12
-坷 2
-巅 1
-榨 4
-汁 9
-昔 9
-赁 1
-酱 8
-甜 8
-蝽 20
-哲 45
-秩 6
-侦 12
-虔 2
-遏 2
-垃 3
-圾 3
-割 9
-垩 6
-侈 2
-纯 17
-粹 15
-挂 12
-礁 12
-俘 14
-虏 1
-铀 3
-涌 2
-棘 26
-凶 6
-冻 5
-泪 7
-盈 4
-眶 1
-熨 2
-婴 14
-媚 2
-宏 12
-株 14
-砂 18
-盐 42
-氯 11
-钙 4
-套 38
-乃 24
-筋 8
-醇 16
-浴 7
-祇 1
-汀 8
-贿 5
-筒 25
-莉 29
-雌 16
-孟 42
-榴 5
-姬 12
-汐 8
-磨 17
-《 1
-》 1
-艰 4
-泉 53
-牺 4
-牲 6
-零 40
-暹 3
-跋 7
-贼 11
-惕 4
-蚂 4
-惬 1
-惨 4
-惑 3
-骸 9
-ł 1
-踵 1
-遵 19
-郊 32
-罂 10
-粟 12
-碱 10
-蔡 29
-乍 3
-橱 1
-钥 3
-匙 3
-畜 5
-颅 6
-凡 18
-宫 130
-墟 2
-蹄 36
-牢 2
-蕾 11
-扶 14
-噱 1
-疯 1
-烫 1
-袜 2
-吹 6
-祈 5
-祷 3
-巩 3
-冯 19
-蔓 7
-嫩 7
-钛 2
-妙 11
-迷 24
-姊 8
-淡 29
-棺 2
-江 403
-辖 318
-郡 211
-蕨 183
-嘉 172
-蛛 167
-陈 140
-蟹 130
-宋 113
-杨 109
-刘 103
-町 91
-昌 90
-靖 87
-紫 83
-圆 82
-浙 80
-滨 80
-凤 74
-魏 73
-郎 70
-奈 69
-畔 69
-蝶 68
-晋 67
-禾 65
-鹃 64
-徽 63
-董 61
-柳 61
-赵 59
-藓 59
-郑 57
-蓝 56
-井 55
-棋 55
-鳞 54
-翼 53
-绍 52
-徐 51
-吕 51
-乙 50
-灰 50
-秦 50
-辽 49
-仙 49
-叙 48
-皆 48
-秋 48
-虾 47
-阮 47
-陕 47
-幼 46
-乾 45
-熙 45
-析 45
-郭 44
-仓 44
-沟 43
-莲 43
-唇 43
-纲 42
-矿 41
-讷 41
-栖 40
-芒 40
-弘 39
-浦 39
-贞 38
-潘 38
-寿 38
-阁 37
-珊 37
-甸 36
-苣 36
-鳍 36
-翁 35
-缅 35
-苔 35
-奴 35
-曹 35
-茂 34
-蛾 34
-卒 33
-姜 33
-忠 33
-藩 33
-敬 33
-侍 32
-桂 32
-仕 31
-蚤 31
-萧 31
-瑚 31
-龟 30
-溶 30
-恋 30
-厦 30
-堇 30
-昭 29
-胸 29
-晶 29
-孝 29
-祥 29
-桐 29
-契 28
-穗 28
-塘 28
-彭 28
-岳 27
-咸 27
-累 27
-辰 27
-蒲 27
-葛 27
-肃 27
-卿 26
-械 26
-麟 26
-碘 26
-杭 25
-玄 25
-柄 25
-沈 25
-茅 25
-蜱 25
-萤 24
-膜 24
-魔 24
-兽 24
-蛤 24
-茛 24
-鳅 24
-茎 23
-薇 23
-叉 23
-谱 23
-汝 23
-腔 23
-雍 23
-垂 22
-脂 22
-鹤 22
-彦 22
-伞 22
-链 22
-仲 22
-酶 22
-尉 21
-萼 21
-扁 21
-傅 21
-丙 21
-燕 21
-脊 21
-祠 21
-笼 21
-荆 21
-蝠 21
-葵 21
-娘 21
-槭 21
-芳 20
-孢 20
-冕 20
-霸 20
-蜜 20
-妈 20
-瓷 20
-蔷 19
-廊 19
-鬼 19
-铭 19
-卑 19
-慕 19
-柴 19
-椒 19
-蒋 19
-佑 19
-蜥 19
-姚 19
-�� 19
-耀 19
-樟 19
-赐 19
-岗 19
-谦 19
-蒿 19
-忍 19
-拱 19
-凰 18
-檗 18
-钦 18
-辉 18
-琉 18
-锥 18
-袁 18
-桔 18
-戟 18
-拳 18
-蚜 18
-狸 18
-钩 17
-扑 17
-芦 17
-甫 17
-绳 17
-贤 17
-潭 17
-隋 17
-俊 17
-拆 17
-汪 17
-叛 17
-巫 17
-妃 17
-娃 17
-肖 17
-卯 17
-梨 17
-蚓 17
-迦 17
-赋 16
-绣 16
-递 16
-戌 16
-屡 16
-兆 16
-尹 16
-爸 16
-浏 16
-谓 16
-蓬 16
-淮 16
-蜡 16
-坊 16
-催 16
-绒 15
-丞 15
-壬 15
-嫁 15
-芹 15
-儒 15
-蛄 15
-沧 15
-卜 15
-滇 15
-鼩 15
-芋 14
-幻 14
-鸣 14
-舌 14
-戊 14
-腾 14
-侄 14
-雾 14
-肾 14
-颈 14
-湘 14
-慧 14
-嗣 14
-铸 14
-邑 14
-橙 14
-鸿 14
-颖 14
-薹 14
-鲤 14
-屯 14
-坞 13
-酯 13
-诏 13
-叔 13
-恭 13
-褐 13
-梭 13
-衍 13
-坝 13
-岑 13
-薯 13
-邵 13
-蛙 13
-毅 13
-癸 13
-苞 13
-榆 13
-芥 13
-丸 13
-鲷 13
-祯 13
-硝 13
-蕉 13
-蛱 13
-仆 12
-坪 12
-祀 12
-眉 12
-庚 12
-闸 12
-坂 12
-氟 12
-別 12
-阜 12
-噶 12
-纺 12
-妳 12
-稣 12
-蝉 12
-稚 12
-禅 12
-橡 12
-苯 12
-绥 12
-帽 12
-虱 12
-鞘 12
-鳗 12
-烷 12
-札 11
-衰 11
-翠 11
-赚 11
-朔 11
-蜀 11
-薛 11
-蓼 11
-姑 11
-渠 11
-皿 11
-渥 11
-茄 11
-披 11
-魂 11
-荨 11
-镶 11
-吏 11
-侨 11
-羌 11
-娶 11
-铝 11
-闽 11
-逸 11
-苑 10
-琼 10
-啊 10
-稿 10
-绑 10
-朴 10
-喝 10
-荠 10
-淀 10
-妖 10
-槐 10
-苍 10
-埋 10
-邱 10
-凝 10
-灌 10
-耆 10
-趋 10
-肤 10
-厥 10
-蚕 10
-沪 10
-萝 10
-砖 10
-喇 10
-埠 10
-霉 10
-冶 10
-倡 10
-怒 10
-茹 10
-沂 10
-纤 10
-槟 10
-烛 10
-醛 10
-帆 9
-栗 9
-罢 9
-狐 9
-橘 9
-酰 9
-扇 9
-峨 9
-惟 9
-犁 9
-玫 9
-弼 9
-矮 9
-耕 9
-怡 9
-晖 9
-钝 9
-杖 9
-鲸 9
-霞 9
-慰 9
-谟 9
-岐 9
-舟 9
-伪 9
-菩 9
-踏 9
-垦 9
-蛭 9
-牡 9
-蕈 9
-墅 9
-楠 9
-邪 9
-荚 9
-蕊 9
-淳 9
-谭 9
-晃 9
-蚌 9
-鲈 9
-孤 9
-垣 9
-芽 9
-凸 9
-谊 9
-蒜 9
-烯 9
-烃 9
-肽 9
-浆 9
-悦 9
-裴 9
-殉 9
-棠 9
-酉 8
-盒 8
-碧 8
-寅 8
-漳 8
-襄 8
-淫 8
-饼 8
-谁 8
-粤 8
-竺 8
-芭 8
-澜 8
-驹 8
-贩 8
-彝 8
-蚬 8
-锯 8
-莹 8
-鄂 8
-笙 8
-梗 8
-忌 8
-椭 8
-悼 8
-酮 8
-讳 8
-皱 8
-鼱 8
-椎 8
-邢 8
-恨 8
-钠 8
-菱 8
-戎 8
-毗 8
-淄 8
-筹 8
-痕 8
-壶 8
-劝 8
-圳 8
-厝 8
-菀 8
-庐 8
-蟾 8
-藨 8
-蓟 7
-嵩 7
-莓 7
-庶 7
-枯 7
-廖 7
-尧 7
-侠 7
-庸 7
-酿 7
-孚 7
-羁 7
-犀 7
-胃 7
-斩 7
-褶 7
-豫 7
-匠 7
-锤 7
-蝇 7
-骤 7
-泌 7
-弧 7
-蛮 7
-苋 7
-蕴 7
-擢 7
-窝 7
-硅 7
-拂 7
-矾 7
-澎 7
-腭 7
-肋 7
-芪 7
-乂 7
-蔬 7
-冢 7
-悲 7
-禹 7
-铠 7
-纠 7
-準 7
-溧 7
-涡 7
-畸 7
-晕 7
-舜 7
-榕 7
-挝 7
-芙 7
-鳄 7
-噜 7
-庇 7
-鳕 7
-莆 7
-滴 7
-糙 7
-妆 7
-辟 7
-欠 7
-樽 7
-嗜 7
-麓 7
-熔 7
-逍 7
-醚 7
-哩 7
-柽 7
-瑜 7
-沁 7
-螯 7
-芩 7
-藜 7
-溴 7
-濑 6
-煮 6
-邨 6
-肛 6
-缕 6
-鹘 6
-妾 6
-藿 6
-镰 6
-葫 6
-蓉 6
-饶 6
-蕃 6
-檬 6
-黛 6
-琦 6
-沛 6
-酷 6
-琪 6
-伙 6
-孕 6
-芸 6
-渝 6
-彬 6
-窟 6
-罐 6
-坤 6
-涩 6
-畴 6
-茱 6
-赣 6
-桌 6
-浑 6
-禧 6
-妥 6
-笛 6
-蝙 6
-廿 6
-莪 6
-闵 6
-轩 6
-骏 6
-酬 6
-湄 6
-萍 6
-沅 6
-啄 6
-厨 6
-陇 6
-谴 6
-釜 6
-誓 6
-灼 6
-劲 6
-剿 6
-兖 6
-谏 6
-荫 6
-栽 6
-幢 6
-蜘 6
-桨 6
-匡 6
-斥 6
-谣 6
-庵 6
-谥 6
-肇 6
-笋 6
-虞 6
-肪 6
-抬 6
-梓 6
-斛 6
-瑰 6
-俞 6
-啦 6
-铎 6
-绛 6
-喻 6
-诛 6
-嫡 6
-衙 6
-鬣 6
-桤 6
-辩 6
-嵌 6
-蜍 6
-磐 6
-蟒 6
-酵 5
-匝 5
-梢 5
-荀 5
-阐 5
-饿 5
-惹 5
-縻 5
-黔 5
-婿 5
-沽 5
-纶 5
-昊 5
-懋 5
-隍 5
-翌 5
-竖 5
-赦 5
-皂 5
-傲 5
-翊 5
-秉 5
-黏 5
-煌 5
-窦 5
-楝 5
-笠 5
-履 5
-咏 5
-衷 5
-泾 5
-俭 5
-樊 5
-袍 5
-佥 5
-岱 5
-鹏 5
-晤 5
-娄 5
-懿 5
-毙 5
-枣 5
-柑 5
-寮 5
-轰 5
-爷 5
-劾 5
-阎 5
-岬 5
-淋 5
-酥 5
-桓 5
-豚 5
-桉 5
-蝴 5
-凿 5
-鳖 5
-淆 5
-耿 5
-鹭 5
-臧 5
-稽 5
-摊 5
-桦 5
-萌 5
-咕 5
-谍 5
-榧 5
-丫 5
-澄 5
-籽 5
-纂 5
-嘛 5
-矢 5
-跆 5
-锈 5
-颌 5
-棉 5
-於 5
-斋 5
-葶 5
-苈 5
-胤 5
-冀 5
-甬 5
-扣 5
-睦 5
-兜 5
-蔚 5
-晏 5
-侣 5
-隼 5
-钧 5
-睾 5
-獐 5
-帘 5
-畿 4
-菅 4
-鸠 4
-愉 4
-幌 4
-焊 4
-蔽 4
-鼹 4
-骼 4
-垄 4
-鸻 4
-匪 4
-劈 4
-烽 4
-斧 4
-岷 4
-媛 4
-涨 4
-侃 4
-雏 4
-甥 4
-柠 4
-舶 4
-葆 4
-琅 4
-铨 4
-酚 4
-溃 4
-朵 4
-锚 4
-羟 4
-昏 4
-笃 4
-腕 4
-颉 4
-畏 4
-椿 4
-镧 4
-隅 4
-扈 4
-碲 4
-廓 4
-谬 4
-戚 4
-涧 4
-墩 4
-槽 4
-炀 4
-т 4
-萸 4
-聂 4
-颤 4
-祺 4
-栩 4
-诃 4
-鑫 4
-秆 4
-匿 4
-爽 4
-斌 4
-颂 4
-稠 4
-奠 4
-偿 4
-敷 4
-荸 4
-鲫 4
-寇 4
-倪 4
-檐 4
-刹 4
-驴 4
-肼 4
-梾 4
-鸥 4
-聋 4
-惩 4
-牟 4
-菝 4
-葜 4
-孜 4
-哀 4
-菁 4
-凋 4
-炽 4
-傣 4
-矣 4
-僚 4
-柃 4
-碟 4
-勉 4
-莘 4
-镀 4
-翡 4
-歙 4
-邯 4
-苎 4
-銮 4
-瑛 4
-鲹 4
-哉 4
-旭 4
-凑 4
-韶 4
-锂 4
-喔 4
-勐 4
-驿 4
-琮 4
-唤 4
-伺 4
-玮 4
-霖 4
-辗 4
-韧 4
-髓 4
-胄 4
-淑 4
-猬 4
-汛 4
-麝 4
-舅 4
-梧 4
-嫔 4
-汶 4
-羧 4
-辣 4
-谜 4
-钮 4
-渭 4
-鲣 4
-溥 4
-闯 4
-乒 4
-椤 4
-呀 4
-戍 4
-蜕 4
-绅 4
-碗 4
-帛 4
-钯 4
-钾 4
-蔺 4
-谅 4
-釉 4
-崴 4
-鲡 4
-豌 4
-溲 4
-箬 4
-敖 4
-沸 3
-烂 3
-觅 3
-濒 3
-曷 3
-泗 3
-鸽 3
-嘎 3
-汾 3
-嘧 3
-啶 3
-扯 3
-臀 3
-兀 3
-筛 3
-谤 3
-拯 3
-祁 3
-胱 3
-荔 3
-玖 3
-戮 3
-灶 3
-嗓 3
-胰 3
-鲃 3
-妓 3
-佰 3
-匐 3
-剌 3
-枕 3
-玲 3
-孪 3
-掖 3
-谕 3
-孵 3
-憩 3
-舄 3
-捞 3
-凄 3
-菇 3
-颊 3
-宕 3
-稷 3
-泣 3
-脓 3
-镁 3
-纬 3
-肄 3
-卦 3
-幡 3
-浊 3
-龈 3
-晟 3
-叻 3
-郃 3
-膳 3
-挛 3
-竿 3
-慌 3
-皖 3
-璋 3
-腥 3
-莺 3
-濂 3
-瘦 3
-钕 3
-唑 3
-炬 3
-燮 3
-簇 3
-殷 3
-赈 3
-饥 3
-丕 3
-耧 3
-珂 3
-滞 3
-疣 3
-簧 3
-谛 3
-俩 3
-祚 3
-鞑 3
-靼 3
-羲 3
-蚶 3
-仗 3
-棚 3
-溞 3
-蒴 3
-鹳 3
-牻 3
-缔 3
-腧 3
-雉 3
-覃 3
-砌 3
-瓢 3
-狡 3
-纭 3
-棣 3
-歼 3
-帧 3
-珙 3
-莴 3
-亩 3
-蛹 3
-钰 3
-寞 3
-弊 3
-镊 3
-峻 3
-翟 3
-悖 3
-拾 3
-靛 3
-钵 3
-矫 3
-菏 3
-憧 3
-憬 3
-慷 3
-芮 3
-倭 3
-媳 3
-雯 3
-烨 3
-逢 3
-郸 3
-揖 3
-溺 3
-俨 3
-晁 3
-弈 3
-韬 3
-辙 3
-胖 3
-宦 3
-屑 3
-敕 3
-枫 3
-阙 3
-圻 3
-鄞 3
-犍 3
-灿 3
-琰 3
-鸾 3
-霜 3
-祕 3
-翘 3
-缮 3
-钓 3
-鲑 3
-炒 3
-螈 3
-舆 3
-晒 3
-烘 3
-陋 3
-昀 3
-萱 3
-暨 3
-澧 3
-缚 3
-篱 3
-瑶 3
-筱 3
-柚 3
-衅 3
-毋 3
-檀 3
-闍 3
-赉 3
-渗 3
-郓 3
-鳔 3
-葎 3
-橐 3
-迭 3
-殴 3
-缨 3
-溉 3
-陁 3
-钜 3
-莼 3
-邕 3
-乓 3
-襟 3
-瘿 3
-栈 3
-桫 3
-沦 3
-瘾 3
-跖 3
-砍 3
-吨 3
-熬 3
-漕 3
-僵 3
-穹 3
-蛳 3
-绶 3
-牦 3
-粪 3
-漪 3
-曰 3
-洱 3
-湛 3
-苴 3
-黧 3
-鲳 3
-颓 3
-蜈 3
-蚣 3
-铬 3
-匀 3
-饷 3
-胚 3
-珧 3
-螨 3
-匍 3
-罩 3
-蛏 3
-栉 3
-抒 3
-瞭 3
-脐 2
-辇 2
-疮 2
-萎 2
-咽 2
-厍 2
-峙 2
-赭 2
-馅 2
-熄 2
-璜 2
-捆 2
-贰 2
-驸 2
-鲻 2
-焕 2
-褒 2
-蔻 2
-黯 2
-铟 2
-噩 2
-渤 2
-侗 2
-蜴 2
-蜊 2
-莅 2
-砻 2
-傀 2
-儡 2
-鹑 2
-骆 2
-浇 2
-颐 2
-琢 2
-渣 2
-査 2
-莒 2
-̌ 2
-啰 2
-诽 2
-赂 2
-轸 2
-赟 2
-谶 2
-褚 2
-莽 2
-兮 2
-奘 2
-汴 2
-彧 2
-夭 2
-绰 2
-卞 2
-铳 2
-丟 2
-恼 2
-鹋 2
-鹩 2
-鄣 2
-镒 2
-脖 2
-鍊 2
-窥 2
-幂 2
-镛 2
-皋 2
-嘌 2
-呤 2
-禺 2
-栾 2
-潢 2
-笏 2
-潞 2
-珩 2
-呆 2
-滁 2
-稗 2
-瞬 2
-侏 2
-吟 2
-漩 2
-诟 2
-貂 2
-鼬 2
-涪 2
-渎 2
-绯 2
-楞 2
-沆 2
-蛟 2
-蠕 2
-壸 2
-砗 2
-磲 2
-寡 2
-锌 2
-叭 2
-琥 2
-讶 2
-孺 2
-祗 2
-佃 2
-柝 2
-蜻 2
-蜓 2
-菠 2
-缀 2
-鞅 2
-昙 2
-捧 2
-悚 2
-箴 2
-妊 2
-娠 2
-侬 2
-涟 2
-栓 2
-邳 2
-磡 2
-砷 2
-哨 2
-僖 2
-闾 2
-焉 2
-匕 2
-苷 2
-膦 2
-箕 2
-и 2
-̃ 2
-羞 2
-辱 2
-硼 2
-廪 2
-蛎 2
-惰 2
-酌 2
-拮 2
-缇 2
-蘑 2
-刈 2
-蛸 2
-悄 2
-鳌 2
-桧 2
-砸 2
-巳 2
-瑾 2
-抹 2
-喊 2
-杠 2
-瞻 2
-郦 2
-痒 2
-馨 2
-煜 2
-懈 2
-哮 2
-闫 2
-麒 2
-咀 2
-殃 2
-琨 2
-沾 2
-枋 2
-毓 2
-猕 2
-崛 2
-睿 2
-嵯 2
-颍 2
-邺 2
-瑀 2
-淇 2
-噪 2
-鏊 2
-诫 2
-锺 2
-灏 2
-烁 2
-悔 2
-汞 2
-淯 2
-鲱 2
-魄 2
-郝 2
-霆 2
-巾 2
-邹 2
-蓣 2
-榔 2
-壹 2
-秤 2
-閒 2
-荛 2
-夥 2
-谒 2
-掸 2
-莩 2
-糯 2
-皎 2
-坳 2
-喵 2
-弢 2
-凳 2
-啧 2
-琵 2
-匆 2
-阇 2
-猗 2
-腮 2
-淅 2
-肘 2
-疃 2
-蕲 2
-翎 2
-痉 2
-冥 2
-眷 2
-罹 2
-澡 2
-缸 2
-婷 2
-恬 2
-狙 2
-汲 2
-渴 2
-邬 2
-茉 2
-奕 2
-诡 2
-荽 2
-鲢 2
-芃 2
-肟 2
-谚 2
-赃 2
-洮 2
-脆 2
-诵 2
-陲 2
-窜 2
-绢 2
-炔 2
-蕗 2
-鸮 2
-吠 2
-粥 2
-掳 2
-琚 2
-荥 2
-忻 2
-闳 2
-摹 2
-峄 2
-湳 2
-婕 2
-妤 2
-庹 2
-汕 2
-泱 2
-佟 2
-氓 2
-苟 2
-珞 2
-婵 2
-硒 2
-钡 2
-憍 2
-椹 2
-鱿 2
-槲 2
-骠 2
-淖 2
-锰 2
-寥 2
-辜 2
-璇 2
-婉 2
-岚 2
-账 2
-哔 2
-锆 2
-曙 2
-涞 2
-铂 2
-绎 2
-杏 2
-愕 2
-姒 2
-铰 2
-亳 2
-荃 2
-衬 2
-楸 2
-琛 2
-楷 2
-柰 2
-栻 2
-骄 2
-铋 2
-辍 2
-遁 2
-靶 2
-璧 2
-桢 2
-薮 2
-狠 2
-镐 2
-诠 2
-渲 2
-赎 2
-雁 2
-夯 2
-膺 2
-苇 2
-茫 2
-衢 2
-堰 2
-冉 2
-昕 2
-瞧 2
-殆 2
-芎 2
-祉 2
-惘 2
-铆 2
-腈 2
-羰 2
-渚 2
-苁 2
-郯 2
-铵 2
-睹 2
-恕 2
-巽 2
-泸 2
-簪 2
-伎 2
-贻 2
-醋 2
-虻 2
-卤 2
-疍 2
-睫 2
-嗲 2
-鄱 2
-珑 2
-炕 2
-μ 2
-肱 2
-梳 2
-裘 2
-愁 2
-瞄 2
-洵 1
-盱 1
-眙 1
-箩 1
-筐 1
-翥 1
-蟑 1
-螂 1
-漾 1
-叩 1
-胭 1
-腻 1
-沌 1
-煎 1
-琊 1
-勍 1
-徬 1
-惶 1
-疡 1
-渌 1
-泠 1
-胍 1
-酪 1
-浔 1
-歆 1
-镥 1
-傍 1
-佚 1
-俳 1
-塾 1
-鹌 1
-掞 1
-酐 1
-馀 1
-奚 1
-苳 1
-竈 1
-瞎 1
-鳃 1
-霈 1
-榉 1
-唾 1
-俸 1
-柩 1
-荦 1
-ㄟ 1
-昱 1
-捩 1
-慑 1
-忱 1
-瞳 1
-椋 1
-纻 1
-隗 1
-晔 1
-鮎 1
-郴 1
-谠 1
-轶 1
-諲 1
-陂 1
-抖 1
-沔 1
-叟 1
-觚 1
-唛 1
-钌 1
-痢 1
-蹶 1
-偕 1
-喽 1
-骷 1
-髅 1
-膑 1
-蚺 1
-怜 1
-歹 1
-稔 1
-刮 1
-郫 1
-捣 1
-垢 1
-捏 1
-茧 1
-鹂 1
-踩 1
-娟 1
-哄 1
-虬 1
-栃 1
-钲 1
-焮 1
-邾 1
-泼 1
-泮 1
-骂 1
-焚 1
-黾 1
-圩 1
-驭 1
-掛 1
-胪 1
-艮 1
-濡 1
-盼 1
-巯 1
-骰 1
-偲 1
-嫣 1
-睢 1
-鳚 1
-繄 1
-荼 1
-聿 1
-朕 1
-辕 1
-珐 1
-绂 1
-筷 1
-洙 1
-圪 1
-扉 1
-桡 1
-鹛 1
-擂 1
-骁 1
-浉 1
-骥 1
-俣 1
-盂 1
-榖 1
-廆 1
-砾 1
-讚 1
-腱 1
-螟 1
-踊 1
-祋 1
-娣 1
-諡 1
-仄 1
-曜 1
-靳 1
-嘟 1
-妲 1
-矗 1
-検 1
-蒟 1
-泯 1
-瑮 1
-倘 1
-袓 1
-洣 1
-搏 1
-绮 1
-铼 1
-濠 1
-圜 1
-涝 1
-弁 1
-甾 1
-魇 1
-杓 1
-屉 1
-揩 1
-坯 1
-娆 1
-侮 1
-罔 1
-躯 1
-坜 1
-缜 1
-竣 1
-蟥 1
-搔 1
-朽 1
-姨 1
-炊 1
-岔 1
-暝 1
-舫 1
-咆 1
-挠 1
-艷 1
-熠 1
-鋆 1
-茁 1
-拧 1
-瓯 1
-闰 1
-镍 1
-镉 1
-崧 1
-酃 1
-佬 1
-濮 1
-桝 1
-儋 1
-纮 1
-谯 1
-煲 1
-呔 1
-膻 1
-筮 1
-帷 1
-幔 1
-緁 1
-県 1
-儆 1
-庾 1
-荁 1
-菉 1
-汜 1
-傕 1
-膈 1
-胯 1
-鄙 1
-蝌 1
-蚪 1
-鸲 1
-跻 1
-玠 1
-蝾 1
-龚 1
-镎 1
-阖 1
-乖 1
-佤 1
-萃 1
-扼 1
-佼 1
-鸵 1
-笆 1
-呐 1
-峥 1
-帚 1
-埕 1
-蘸 1
-诙 1
-孖 1
-琐 1
-螣 1
-傩 1
-殒 1
-舵 1
-阕 1
-轲 1
-汹 1
-埈 1
-讫 1
-峒 1
-沐 1
-籴 1
-琶 1
-彪 1
-坨 1
-鼷 1
-睁 1
-攸 1
-圹 1
-诹 1
-譬 1
-栀 1
-娥 1
-畋 1
-仞 1
-喹 1
-啉 1
-蹴 1
-憨 1
-俵 1
-髎 1
-铲 1
-焱 1
-皓 1
-鋐 1
-枞 1
-咪 1
-苓 1
-贮 1
-忤 1
-羯 1
-拇 1
-褓 1
-籁 1
-飒 1
-缙 1
-専 1
-诬 1
-泓 1
-哼 1
-雑 1
-簿 1
-熈 1
-讹 1
-浚 1
-绞 1
-攒 1
-俐 1
-韭 1
-蔑 1
-侪 1
-禑 1
-淼 1
-缵 1
-湜 1
-耽 1
-苛 1
-侂 1
-勺 1
-峯 1
-薨 1
-耍 1
-祜 1
-铽 1
-唆 1
-砀 1
-嚓 1
-屹 1
-悫 1
-砵 1
-糠 1
-獴 1
-膛 1
-鲎 1
-隈 1
-钊 1
-脲 1
-呋 1
-喃 1
-玹 1
-厩 1
-溅 1
-犷 1
-灞 1
-杵 1
-镂 1
-禛 1
-扳 1
-枥 1
-挫 1
-呵 1
-込 1
-暎 1
-懔 1
-遑 1
-偃 1
-璹 1
-蠹 1
-佘 1
-妡 1
-紑 1
-暄 1
-喧 1
-叅 1
-螃 1
-惺 1
-蛊 1
-槛 1
-刍 1
-钿 1
-褧 1
-镓 1
-镠 1
-陟 1
-璆 1
-牕 1
-帖 1
-寀 1
-綦 1
-奣 1
-嵗 1
-谌 1
-嫖 1
-挚 1
-钴 1
-赘 1
-荪 1
-怨 1
-惪 1
-鹪 1
-璎 1
-藳 1
-暮 1
-潇 1
-薖 1
-沤 1
-伛 1
-娇 1
-頴 1
-旌 1
-オ 1
-カ 1
-ヤ 1
-ド 1
-舘 1
-栢 1
-耻 1
-嵋 1
-哑 1
-冼 1
-瘰 1
-骘 1
-鼢 1
-狯 1
-霹 1
-雳 1
-萁 1
-芗 1
-峪 1
-臻 1
-赡 1
-攥 1
-泷 1
-呻 1
-瘫 1
-痪 1
-蒺 1
-笮 1
-钹 1
-嫉 1
-榙 1
-骈 1
-鸩 1
-馯 1
-葳 1
-玶 1
-綖 1
-崁 1
-蔵 1
-罘 1
-钪 1
-镗 1
-柞 1
-瓛 1
-裬 1
-蛲 1
-擒 1
-倚 1
-鼐 1
-餵 1
-蠋 1
-嘻 1
-颞 1
-冤 1
-瓮 1
-岫 1
-醮 1
-鲀 1
-澥 1
-婺 1
-楮 1
-倻 1
-酢 1
-苡 1
-阈 1
-硖 1
-硎 1
-倩 1
-腩 1
-寝 1
-撇 1
-宵 1
-撷 1
-疹 1
-徘 1
-徊 1
-薷 1
-斟 1
-斝 1
-邰 1
-尨 1
-槱 1
-沥 1
-锑 1
-尻 1
-皕 1
-饯 1
-搅 1
-拌 1
-钨 1
-铯 1
-唁 1
-轭 1
-萘 1
-稼 1
-霄 1
-嬤 1
-俅 1
-芰 1
-貘 1
-墀 1
-杙 1
-栎 1
-桄 1
-蓍 1
-砝 1
-傉 1
-幺 1
-恍 1
-掰 1
-锶 1
-埗 1
-禀 1
-蓑 1
-蝮 1
-湫 1
-熏 1
-渺 1
-锣 1
-阉 1
-枭 1
-昵 1
-绫 1
-樾 1
-轧 1
-鬃 1
-捍 1
-嵖 1
-岈 1
-绚 1
-鸯 1
-謇 1
-昴 1
-钗 1
-恽 1
-玭 1
-偈 1
-闼 1
-蛉 1
-槚 1
-脾 1
-畲 1
-瓘 1
-涓 1
-钫 1
-浸 1
-胛 1
-烺 1
-篦 1
-珰 1
-剃 1
-嵴 1
-斡 1
-鎏 1
-芷 1
-霓 1
-氖 1
-馔 1
-蟆 1
-驷 1
-阏 1
-愔 1
-淤 1
-眩 1
-爹 1
-铮 1
-剀 1
-濯 1
-炫 1
-塬 1
-顽 1
-砥 1
-樵 1
-倦 1
-郤 1
-玎 1
-沭 1
-琬 1
-嬴 1
-猄 1
-宥 1
-拢 1
-氦 1
-姮 1
-挞 1
-胳 1
-膊 1
-疤 1
-鹬 1
-蟋 1
-蟀 1
-嶷 1
-盏 1
-埇 1
-烙 1
-莞 1
-秧 1
-捡 1
-匮 1
-妍 1
-樨 1
-妒 1
-浞 1
-臼 1
-奂 1
-靡 1
-蜑 1
-臯 1
-谪 1
-黜 1
-痼 1
-懦 1
-棁 1
-笄 1
-牂 1
-牁 1
-褪 1
-簸 1
-湟 1
-佯 1
-瘠 1
-跪 1
-躺 1
-隘 1
-涿 1
-屐 1
-藔 1
-匾 1
-衫 1
-洐 1
-龛 1
-鳟 1
-膏 1
-饴 1
-杻 1
-醯 1
-晦 1
-鞣 1
-荧 1
-嚣 1
-炜 1
-氙 1
-榭 1
-怵 1
-猝 1
-伫 1
-翃 1
-婢 1
-胥 1
-壽 1
-珈 1
-淞 1
-铣 1
-胼 1
-痘 1
-噌 1
-馥 1
-箨 1
-钼 1
-羡 1
-棨 1
-圃 1
-趴 1
-揆 1
-饵 1
-彤 1
-飙 1
-悌 1
-揉 1
-闱 1
-撮 1
-戛 1
-秽 1
-麂 1
-孛 1
-䴕 1
-濉 1
-袒 1
-瑭 1
-愧 1
+<s>
+<pad>
+</s>
+<unk>
+的
+在
+一
+是
+有
+和
+了
+人
+这
+a
+0
+为
+大
+地
+国
+可
+他
+1
+以
+不
+时
+会
+能
+e
+到
+上
+中
+个
+行
+们
+n
+o
+r
+于
+发
+多
+生
+年
+s
+来
+要
+其
+斯
+里
+i
+2
+家
+成
+动
+用
+些
+法
+出
+t
+方
+l
+对
+过
+后
+公
+物
+之
+也
+亚
+或
+种
+被
+学
+常
+前
+现
+分
+自
+部
+利
+都
+但
+最
+得
+通
+而
+者
+9
+子
+h
+经
+因
+该
+你
+就
+尔
+特
+如
+车
+5
+所
+并
+作
+比
+间
+表
+c
+很
+它
+世
+与
+加
+更
+当
+进
+然
+克
+u
+区
+球
+g
+下
+度
+名
+场
+小
+开
+体
+同
+d
+语
+提
+4
+3
+m
+重
+称
+从
+数
+意
+月
+道
+定
+机
+面
+美
+新
+日
+使
+文
+8
+6
+将
+没
+本
+受
+目
+理
+拉
+天
+入
+德
+果
+力
+西
+旅
+罗
+我
+第
+次
+游
+队
+达
+英
+手
+着
+性
+由
+赛
+长
+马
+起
+式
+类
+示
+主
+化
+内
+说
+位
+相
+事
+此
+p
+正
+水
+员
+还
+电
+全
+布
+海
+司
+非
+应
+原
+尼
+期
+外
+空
+高
+议
+7
+k
+战
+兰
+明
+活
+教
+保
+至
+管
+只
+关
+情
+心
+点
+样
+量
+岛
+许
+那
+已
+需
+约
+联
+b
+认
+报
+向
+变
+制
+往
+节
+件
+去
+军
+基
+接
+城
+建
+格
+选
+等
+民
+看
+每
+纪
+运
+科
+奥
+代
+巴
+界
+金
+航
+二
+产
+据
+市
+工
+业
+阿
+合
+组
+统
+计
+处
+任
+持
+知
+立
+实
+身
+供
+风
+周
+系
+政
+北
+及
+几
+南
+让
+程
+三
+造
+洲
+山
+获
+指
+气
+少
+十
+流
+星
+交
+问
+尽
+f
+y
+务
+好
+两
+型
+州
+影
+印
+住
+无
+始
+举
+速
+做
+图
+查
+回
+直
+维
+太
+飞
+带
+光
+必
+安
+己
+证
+况
+今
+结
+标
+击
+先
+形
+解
+群
+存
+取
+设
+路
+平
+决
+士
+近
+传
+卡
+项
+网
+随
+言
+感
+题
+放
+伊
+头
+参
+未
+口
+病
+致
+确
+客
+么
+雪
+包
+季
+足
+历
+土
+万
+导
+信
+线
+像
+何
+响
+规
+且
+预
+座
+号
+别
+各
+打
+船
+想
+站
+欧
+元
+普
+视
+领
+括
+v
+收
+助
+强
+纳
+共
+字
+总
+史
+神
+服
+米
+府
+记
+消
+古
+冰
+洛
+威
+居
+票
+w
+推
+堡
+引
+质
+官
+告
+显
+观
+萨
+河
+热
+院
+律
+状
+演
+离
+东
+台
+局
+即
+求
+越
+习
+酒
+远
+警
+支
+治
+曾
+份
+才
+塔
+圣
+夫
+难
+希
+织
+乐
+见
+把
+火
+镜
+反
+野
+失
+片
+抗
+门
+价
+细
+首
+波
+论
+医
+准
+,
+容
+根
+品
+试
+极
+步
+林
+话
+争
+班
+四
+j
+级
+具
+较
+完
+富
+测
+园
+案
+权
+转
+候
+创
+续
+单
+爱
+适
+费
+孩
+例
+术
+商
+易
+边
+户
+伤
+塞
+音
+划
+石
+则
+团
+故
+器
+严
+给
+潜
+博
+独
+识
+仅
+王
+围
+装
+思
+卫
+华
+须
+察
+控
+复
+展
+食
+早
+帮
+落
+降
+便
+声
+油
+义
+调
+低
+互
+什
+书
+签
+快
+滑
+备
+染
+诉
+照
+改
+命
+险
+陆
+投
+验
+轻
+条
+源
+育
+请
+坦
+营
+望
+老
+超
+防
+景
+毒
+切
+态
+列
+际
+域
+初
+庭
+构
+广
+苏
+众
+洋
+闻
+某
+甚
+她
+象
+附
+护
+办
+阳
+读
+模
+移
+女
+伦
+色
+千
+考
+哥
+射
+研
+究
+诺
+核
+乎
+鲁
+牙
+资
+播
+精
+走
+龙
+算
+仍
+令
+除
+留
+息
+盟
+房
+瓦
+花
+底
+母
+张
+埃
+愿
+白
+坏
+修
+连
+艇
+录
+断
+志
+死
+集
+虽
+限
+送
+伯
+店
+雷
+姆
+晚
+胜
+写
+济
+澳
+乘
+暴
+托
+弗
+功
+夏
+再
+够
+专
+汽
+宗
+绝
+索
+境
+著
+施
+整
+密
+止
+帕
+社
+-
+沙
+钟
+注
+担
+素
+耳
+距
+满
+黑
+哈
+蒂
+穿
+久
+协
+跑
+微
+危
+检
+庙
+效
+环
+宣
+真
+缺
+置
+露
+舰
+属
+馆
+角
+追
+瑞
+序
+却
+技
+翰
+洞
+败
+破
+监
+俄
+亡
+念
+顿
+访
+勒
+杰
+似
+奇
+增
+右
+词
+另
+骑
+登
+害
+徒
+换
+养
+湾
+赫
+束
+焦
+校
+戈
+遗
+驶
+盖
+帝
+松
+舱
+尤
+z
+木
+皮
+震
+树
+典
+救
+迪
+左
+驾
+炸
+码
+侵
+师
+岁
+段
+势
+脑
+拿
+遇
+饮
+雨
+待
+背
+找
+免
+族
+短
+吃
+责
+艺
+率
+麦
+激
+沿
+架
+银
+评
+又
+欢
+排
+购
+买
+终
+毛
+简
+胞
+坐
+清
+皇
+丹
+判
+摄
+儿
+x
+停
+承
+半
+餐
+税
+叫
+估
+临
+戏
+额
+讲
+积
+植
+双
+港
+袭
+恐
+频
+略
+温
+宿
+五
+版
+闭
+轮
+腊
+捕
+亿
+莱
+邮
+料
+夜
+订
+眼
+批
+胁
+鞋
+块
+委
+摩
+森
+曼
+拥
+紧
+优
+卢
+患
+症
+练
+阅
+省
+味
+镇
+迫
+私
+攻
+恶
+挥
+觉
+桥
+窗
+谷
+疫
+职
+援
+蒙
+障
+吉
+返
+灯
+训
+湖
+输
+负
+疗
+继
+择
+层
+男
+竞
+授
+疾
+压
+扎
+寻
+否
+佳
+%
+亲
+余
+街
+唯
+冷
+菌
+午
+友
+靠
+智
+贝
+趣
+罪
+厅
+疑
+依
+.
+升
+毁
+般
+画
+享
+福
+板
+裂
+值
+筑
+岩
+六
+述
+异
+艾
+农
+触
+京
+箱
+署
+益
+爆
+丁
+审
+乔
+肯
+旋
+冠
+尚
+液
+范
+杂
+歌
+俗
+探
+坡
+熟
+奖
+退
+虑
+货
+冬
+寺
+端
+采
+犯
+针
+屿
+钱
+脉
+冲
+胡
+藏
+童
+虫
+督
+邻
+兵
+迎
+载
+鸟
+朗
+党
+泡
+牧
+听
+七
+岸
+急
+莫
+喜
+玩
+刀
+猫
+跨
+武
+吸
+撞
+恩
+耶
+媒
+室
+付
+巨
+笔
+幕
+佛
+彩
+损
+拍
+九
+避
+绕
+纽
+逐
+宇
+漏
+墓
+封
+突
+禁
+邦
+泰
+汗
+深
+烈
+差
+芬
+屋
+陡
+赢
+血
+困
+编
+污
+裁
+截
+床
+陷
+驱
+迹
+健
+梵
+艘
+拒
+览
+顶
+征
+散
+盛
+融
+挪
+按
+归
+陵
+副
+充
+剧
+延
+辆
+途
+执
+隆
+透
+猎
+址
+搜
+涉
+毕
+折
+俱
+遭
+弱
+兴
+句
+菜
+妇
+减
+违
+翻
+敦
+”
+殿
+夺
+雅
+策
+卷
+茨
+含
+禽
+坠
+占
+释
+朝
+脚
+聚
+携
+呼
+百
+姿
+坚
+弓
+补
+派
+售
+隐
+秘
+刚
+财
+逊
+促
+杀
+席
+峡
+启
+暂
+逃
+稳
+齐
+乱
+既
+飓
+幸
+尝
+彼
+柏
+磁
+彻
+灵
+红
+枪
+睡
+舒
+呈
+寄
+庆
+泄
+撒
+租
+婚
+鹿
+库
+汤
+侧
+草
+溜
+刃
+稀
+瀑
+迅
+霍
+舞
+宪
+漫
+荷
+碎
+饰
+瓜
+绩
+悉
+努
+描
+脏
+菲
+革
+韦
+丝
+犹
+弹
+香
+永
+允
+配
+啸
+桶
+牛
+狱
+弯
+痛
+:
+嫌
+恢
+云
+耐
+软
+李
+橄
+榄
+宝
+阻
+宽
+络
+父
+鱼
+浓
+倍
+汉
+暗
+盘
+贵
+康
+休
+仪
+狮
+豹
+赞
+符
+村
+顾
+礼
+销
+汇
+错
+措
+抵
+尿
+猛
+覆
+墙
+峭
+壁
+惧
+穴
+恒
+繁
+倾
+您
+赖
+横
+赌
+泽
+操
+锡
+乡
+惯
+衡
+醒
+诸
+君
+干
+碍
+溯
+顺
+诊
+抢
+羊
+琴
+妻
+款
+宜
+舍
+良
+守
+梦
+葬
+锦
+课
+峰
+浪
+固
+填
+阶
+译
+默
+涂
+叶
+均
+曲
+档
+旧
+摧
+斜
+跟
+荣
+刺
+牌
+隔
+咖
+麻
+骨
+绘
+振
+苦
+廷
+遥
+剩
+榜
+泛
+申
+喷
+阵
+奏
+纸
+稍
+铁
+昂
+鉴
+贸
+垒
+炎
+韩
+堂
+劣
+八
+丰
+殖
+煤
+撤
+祝
+龄
+毫
+虐
+殊
+烧
+黎
+尺
+蚊
+寨
+忧
+祸
+末
+楼
+慢
+柔
+旗
+穆
+厢
+央
+刻
+丘
+烦
+薄
+啡
+惠
+肺
+净
+磅
+键
+辑
+扫
+墨
+乏
+缘
+静
+叠
+闲
+善
+厄
+丽
+唱
+骗
+怀
+讼
+爪
+寒
+讯
+旺
+粒
+借
+削
+拜
+哪
+恰
+滩
+镖
+赏
+秀
+祖
+鸦
+衣
+秒
+洪
+谈
+柬
+埔
+径
+乌
+钉
+假
+脱
+迟
+玻
+璃
+础
+娜
+辐
+爵
+籍
+谢
+拟
+寓
+敲
+暖
+宁
+硬
+楚
+冈
+廉
+沉
+桑
+凯
+药
+苹
+鼓
+尊
+糖
+颁
+缓
+/
+狼
+燃
+藻
+储
+剪
+斗
+宾
+蚁
+吧
+'
+闹
+丧
+疼
+珀
+怎
+杉
+矶
+刑
+誉
+扩
+仰
+敏
+掉
+亦
+摆
+怕
+役
+癌
+í
+氏
+泳
+跃
+颗
+培
+惊
+幅
+详
+昨
+概
+堵
+懂
+框
+莎
+册
+川
+伽
+猩
+绿
+姻
+葡
+萄
+辛
+剥
+晓
+拘
+误
+潮
+伸
+掷
+厚
+夷
+浮
+泊
+拨
+熊
+玛
+灾
+押
+替
+•
+剑
+巢
+堆
+粗
+珍
+谋
+宴
+湿
+丢
+堕
+敌
+答
+盗
+酸
+鲜
+崎
+衔
+乳
+妮
+虎
+荡
+荐
+匈
+虚
+钢
+垫
+饭
+旁
+逮
+膀
+椅
+宙
+q
+佐
+棒
+朋
+榻
+戴
+夕
+企
+肩
+材
+讨
+坎
+搭
+匹
+旦
+劳
+吐
+踪
+娱
+梅
+腰
+沃
+贯
+棕
+鹰
+齿
+忙
+励
+貌
+曝
+握
+旨
+厉
+罚
+偷
+圭
+矛
+篮
+靴
+胎
+挑
+逝
+詹
+渡
+梁
+缆
+畅
+藤
+仁
+剂
+箭
+荒
+奶
+苗
+崇
+页
+吗
+瓶
+黄
+窑
+烤
+伏
+拼
+奎
+胶
+芯
+挤
+昆
+氮
+献
+闪
+坟
+朱
+颜
+歉
+巧
+陪
+臭
+裙
+怪
+罕
+贴
+弃
+缝
+隙
+裔
+拖
+纷
+杯
+郁
+亨
+帐
+池
+蛋
+欣
+悬
+鼠
+阀
+兹
+偏
+掌
+塑
+铺
+鸡
+屠
+宰
+咬
+虹
+—
+寸
+锻
+炼
+媲
+壳
+凉
+币
+捷
+疆
+厂
+巡
+塌
+亮
+憾
+秃
+õ
+烹
+饪
+斤
+睛
+刊
+谎
+瑟
+擅
+凌
+轴
+枚
+甲
+葱
+讽
+混
+°
+伐
+孙
+辨
+绪
+滋
+斐
+御
+掠
+惜
+雇
+吊
+丛
+循
+贪
+嘲
+豪
+挡
+羽
+栋
+脸
+驼
+棵
+旱
+聊
+贺
+诗
+勘
+予
+疏
+遍
+卸
+伴
+咎
+奔
+镑
+赤
+钳
+迁
+陶
+袋
+昼
+妨
+·
+坑
+囚
+辞
+仇
+氢
+佩
+粉
+吞
+残
+跌
+贾
+践
+涵
+逻
+尘
+邓
+坍
+坛
+腐
+％
+鞍
+晨
+悠
+噬
+榈
+轨
+歧
+酋
+糟
+糕
+仿
+刷
+庞
+忆
+逗
+崩
+悟
+粘
+兼
+沫
+姓
+溪
+爬
+跳
+攀
+青
+滤
+缠
+圈
+笑
+鹅
+卵
+娅
+届
+肝
+祭
+驻
+怖
+忘
+抽
+篇
+抑
+谨
+慎
+诚
+聪
+戒
+腹
+盎
+腿
+壮
+暑
+抚
+漠
+麋
+幽
+掩
+倒
+贡
+厌
+涸
+宅
+犒
+肠
+氛
+猪
+逆
+碳
+添
+偶
+妹
+田
+勤
+尸
+抛
+裹
+谐
+犬
+氧
+涛
+锅
+夸
+仔
+鸭
+驯
+晰
+饱
+遮
+缩
+嘴
+尾
+鲍
+咨
+询
+仑
+竟
+陌
+轿
+兑
+润
+拔
+擦
+袖
+铅
+愤
+卉
+贫
+滚
+壤
+洁
+迈
+啮
+斑
+春
+奢
+穷
+扰
+茶
+鲨
+镫
+涯
+樱
+扬
+栏
+蜃
+颇
+蛇
+宠
+氰
+鼎
+滕
+阱
+删
+哺
+摔
+雄
+夹
+疲
+竭
+蹈
+眨
+颠
+碰
+歇
+捉
+兄
+弟
+疟
+腺
+裕
+僧
+囊
+勋
+丈
+捐
+赠
+泥
+寂
+芝
+臣
+肥
+函
+茜
+俚
+踢
+魅
+庄
+辈
+奉
+鼻
+窃
+奋
+趁
+盾
+盲
+渔
+阪
+姐
+劫
+彰
+泵
+溢
+鞭
+狩
+徙
+沼
+枝
+饲
+：
+藉
+歪
+搞
+杜
+雕
+凹
+抓
+邀
+獭
+柜
+é
+屏
+吓
+陨
+瓣
+遣
+慨
+若
+罄
+竹
+琳
+搬
+锁
+隧
+燥
+废
+纵
+忒
+弥
+驳
+卧
+眠
+勾
+丑
+宛
++
+邸
+唐
+麾
+氨
+驰
+喉
+咙
+缪
+碑
+焰
+搁
+浅
+介
+吁
+堤
+漂
+诈
+撰
+渐
+裸
+锋
+瞩
+矩
+猿
+牵
+冒
+撑
+狗
+炮
+插
+紊
+蚀
+蜿
+蜒
+弄
+股
+柱
+亏
+愚
+蠢
+伟
+厕
+缭
+喱
+椰
+笨
+侯
+拴
+趾
+渊
+蒸
+抄
+摸
+勿
+捶
+碾
+滥
+翅
+诞
+吻
+巷
+厘
+县
+吴
+耗
+萦
+婆
+愈
+陀
+螺
+剖
+吾
+淘
+汰
+胆
+膝
+叹
+绵
+拓
+灭
+乞
+狂
+炉
+鸫
+炭
+综
+帜
+橇
+帅
+掘
+淌
+漆
+趟
+招
+募
+阴
+腓
+硕
+铜
+洒
+呕
+彗
+岭
+岖
+梯
+俯
+瞰
+崖
+铃
+ó
+亥
+串
+卖
+挟
+狄
+醉
+飘
+珠
+遐
+迩
+烟
+拐
+裤
+掏
+揭
+纱
+猞
+猁
+&
+慈
+诱
+扔
+赶
+赴
+喀
+弦
+璀
+璨
+欺
+淹
+禄
+遂
+纹
+馊
+喙
+耸
+泻
+诅
+咒
+杞
+沮
+粮
+佣
+稻
+蔗
+阔
+浩
+瀚
+垠
+绸
+勃
+赔
+吼
+逼
+聘
+撼
+蜂
+亭
+映
+；
+兔
+羚
+卓
+番
+晴
+啤
+撕
+肆
+懒
+鹦
+鹉
+盆
+吵
+痴
+洽
+柯
+迄
+召
+、
+糊
+肿
+瘤
+诀
+章
+隶
+堪
+摇
+婪
+津
+魁
+拦
+猜
+敛
+洗
+哦
+勇
+敢
+馈
+缴
+喘
+肴
+孔
+雀
+蜗
+榛
+毯
+债
+券
+蓄
+豁
+贷
+辅
+扭
+肢
+挽
+疽
+枢
+寰
+顷
+膨
+胀
+旬
+玉
+柿
+豆
+盔
+甄
+湍
+喂
+擎
+甘
+菊
+奸
+扮
+甩
+篷
+茵
+瑙
+崔
+呢
+匣
+缉
+桃
+棍
+篡
+挖
+翱
+翔
+忽
+摘
+伍
+镳
+拷
+逛
+薪
+骚
+敞
+钻
+抱
+韵
+艳
+抿
+肉
+磷
+硫
+狭
+窄
+莨
+菪
+躲
+欲
+肚
+猴
+凭
+棱
+臂
+贬
+尖
+哭
+屈
+栅
+桩
+诩
+涅
+锐
+杆
+蝎
+哇
+胺
+坷
+巅
+榨
+汁
+昔
+赁
+酱
+甜
+蝽
+哲
+秩
+侦
+虔
+遏
+垃
+圾
+割
+垩
+侈
+纯
+粹
+挂
+礁
+俘
+虏
+铀
+涌
+棘
+凶
+冻
+泪
+盈
+眶
+熨
+婴
+媚
+宏
+株
+砂
+盐
+氯
+钙
+套
+乃
+筋
+醇
+浴
+祇
+汀
+贿
+筒
+莉
+雌
+孟
+榴
+姬
+汐
+磨
+《
+》
+艰
+泉
+牺
+牲
+零
+暹
+跋
+贼
+惕
+蚂
+惬
+惨
+惑
+骸
+ł
+踵
+遵
+郊
+罂
+粟
+碱
+蔡
+乍
+橱
+钥
+匙
+畜
+颅
+凡
+宫
+墟
+蹄
+牢
+蕾
+扶
+噱
+疯
+烫
+袜
+吹
+祈
+祷
+巩
+冯
+蔓
+嫩
+钛
+妙
+迷
+姊
+淡
+棺
+江
+辖
+郡
+蕨
+嘉
+蛛
+陈
+蟹
+宋
+杨
+刘
+町
+昌
+靖
+紫
+圆
+浙
+滨
+凤
+魏
+郎
+奈
+畔
+蝶
+晋
+禾
+鹃
+徽
+董
+柳
+赵
+藓
+郑
+蓝
+井
+棋
+鳞
+翼
+绍
+徐
+吕
+乙
+灰
+秦
+辽
+仙
+叙
+皆
+秋
+虾
+阮
+陕
+幼
+乾
+熙
+析
+郭
+仓
+沟
+莲
+唇
+纲
+矿
+讷
+栖
+芒
+弘
+浦
+贞
+潘
+寿
+阁
+珊
+甸
+苣
+鳍
+翁
+缅
+苔
+奴
+曹
+茂
+蛾
+卒
+姜
+忠
+藩
+敬
+侍
+桂
+仕
+蚤
+萧
+瑚
+龟
+溶
+恋
+厦
+堇
+昭
+胸
+晶
+孝
+祥
+桐
+契
+穗
+塘
+彭
+岳
+咸
+累
+辰
+蒲
+葛
+肃
+卿
+械
+麟
+碘
+杭
+玄
+柄
+沈
+茅
+蜱
+萤
+膜
+魔
+兽
+蛤
+茛
+鳅
+茎
+薇
+叉
+谱
+汝
+腔
+雍
+垂
+脂
+鹤
+彦
+伞
+链
+仲
+酶
+尉
+萼
+扁
+傅
+丙
+燕
+脊
+祠
+笼
+荆
+蝠
+葵
+娘
+槭
+芳
+孢
+冕
+霸
+蜜
+妈
+瓷
+蔷
+廊
+鬼
+铭
+卑
+慕
+柴
+椒
+蒋
+佑
+蜥
+姚
+肌
+耀
+樟
+赐
+岗
+谦
+蒿
+忍
+拱
+凰
+檗
+钦
+辉
+琉
+锥
+袁
+桔
+戟
+拳
+蚜
+狸
+钩
+扑
+芦
+甫
+绳
+贤
+潭
+隋
+俊
+拆
+汪
+叛
+巫
+妃
+娃
+肖
+卯
+梨
+蚓
+迦
+赋
+绣
+递
+戌
+屡
+兆
+尹
+爸
+浏
+谓
+蓬
+淮
+蜡
+坊
+催
+绒
+丞
+壬
+嫁
+芹
+儒
+蛄
+沧
+卜
+滇
+鼩
+芋
+幻
+鸣
+舌
+戊
+腾
+侄
+雾
+肾
+颈
+湘
+慧
+嗣
+铸
+邑
+橙
+鸿
+颖
+薹
+鲤
+屯
+坞
+酯
+诏
+叔
+恭
+褐
+梭
+衍
+坝
+岑
+薯
+邵
+蛙
+毅
+癸
+苞
+榆
+芥
+丸
+鲷
+祯
+硝
+蕉
+蛱
+仆
+坪
+祀
+眉
+庚
+闸
+坂
+氟
+別
+阜
+噶
+纺
+妳
+稣
+蝉
+稚
+禅
+橡
+苯
+绥
+帽
+虱
+鞘
+鳗
+烷
+札
+衰
+翠
+赚
+朔
+蜀
+薛
+蓼
+姑
+渠
+皿
+渥
+茄
+披
+魂
+荨
+镶
+吏
+侨
+羌
+娶
+铝
+闽
+逸
+苑
+琼
+啊
+稿
+绑
+朴
+喝
+荠
+淀
+妖
+槐
+苍
+埋
+邱
+凝
+灌
+耆
+趋
+肤
+厥
+蚕
+沪
+萝
+砖
+喇
+埠
+霉
+冶
+倡
+怒
+茹
+沂
+纤
+槟
+烛
+醛
+帆
+栗
+罢
+狐
+橘
+酰
+扇
+峨
+惟
+犁
+玫
+弼
+矮
+耕
+怡
+晖
+钝
+杖
+鲸
+霞
+慰
+谟
+岐
+舟
+伪
+菩
+踏
+垦
+蛭
+牡
+蕈
+墅
+楠
+邪
+荚
+蕊
+淳
+谭
+晃
+蚌
+鲈
+孤
+垣
+芽
+凸
+谊
+蒜
+烯
+烃
+肽
+浆
+悦
+裴
+殉
+棠
+酉
+盒
+碧
+寅
+漳
+襄
+淫
+饼
+谁
+粤
+竺
+芭
+澜
+驹
+贩
+彝
+蚬
+锯
+莹
+鄂
+笙
+梗
+忌
+椭
+悼
+酮
+讳
+皱
+鼱
+椎
+邢
+恨
+钠
+菱
+戎
+毗
+淄
+筹
+痕
+壶
+劝
+圳
+厝
+菀
+庐
+蟾
+藨
+蓟
+嵩
+莓
+庶
+枯
+廖
+尧
+侠
+庸
+酿
+孚
+羁
+犀
+胃
+斩
+褶
+豫
+匠
+锤
+蝇
+骤
+泌
+弧
+蛮
+苋
+蕴
+擢
+窝
+硅
+拂
+矾
+澎
+腭
+肋
+芪
+乂
+蔬
+冢
+悲
+禹
+铠
+纠
+準
+溧
+涡
+畸
+晕
+舜
+榕
+挝
+芙
+鳄
+噜
+庇
+鳕
+莆
+滴
+糙
+妆
+辟
+欠
+樽
+嗜
+麓
+熔
+逍
+醚
+哩
+柽
+瑜
+沁
+螯
+芩
+藜
+溴
+濑
+煮
+邨
+肛
+缕
+鹘
+妾
+藿
+镰
+葫
+蓉
+饶
+蕃
+檬
+黛
+琦
+沛
+酷
+琪
+伙
+孕
+芸
+渝
+彬
+窟
+罐
+坤
+涩
+畴
+茱
+赣
+桌
+浑
+禧
+妥
+笛
+蝙
+廿
+莪
+闵
+轩
+骏
+酬
+湄
+萍
+沅
+啄
+厨
+陇
+谴
+釜
+誓
+灼
+劲
+剿
+兖
+谏
+荫
+栽
+幢
+蜘
+桨
+匡
+斥
+谣
+庵
+谥
+肇
+笋
+虞
+肪
+抬
+梓
+斛
+瑰
+俞
+啦
+铎
+绛
+喻
+诛
+嫡
+衙
+鬣
+桤
+辩
+嵌
+蜍
+磐
+蟒
+酵
+匝
+梢
+荀
+阐
+饿
+惹
+縻
+黔
+婿
+沽
+纶
+昊
+懋
+隍
+翌
+竖
+赦
+皂
+傲
+翊
+秉
+黏
+煌
+窦
+楝
+笠
+履
+咏
+衷
+泾
+俭
+樊
+袍
+佥
+岱
+鹏
+晤
+娄
+懿
+毙
+枣
+柑
+寮
+轰
+爷
+劾
+阎
+岬
+淋
+酥
+桓
+豚
+桉
+蝴
+凿
+鳖
+淆
+耿
+鹭
+臧
+稽
+摊
+桦
+萌
+咕
+谍
+榧
+丫
+澄
+籽
+纂
+嘛
+矢
+跆
+锈
+颌
+棉
+於
+斋
+葶
+苈
+胤
+冀
+甬
+扣
+睦
+兜
+蔚
+晏
+侣
+隼
+钧
+睾
+獐
+帘
+畿
+菅
+鸠
+愉
+幌
+焊
+蔽
+鼹
+骼
+垄
+鸻
+匪
+劈
+烽
+斧
+岷
+媛
+涨
+侃
+雏
+甥
+柠
+舶
+葆
+琅
+铨
+酚
+溃
+朵
+锚
+羟
+昏
+笃
+腕
+颉
+畏
+椿
+镧
+隅
+扈
+碲
+廓
+谬
+戚
+涧
+墩
+槽
+炀
+т
+萸
+聂
+颤
+祺
+栩
+诃
+鑫
+秆
+匿
+爽
+斌
+颂
+稠
+奠
+偿
+敷
+荸
+鲫
+寇
+倪
+檐
+刹
+驴
+肼
+梾
+鸥
+聋
+惩
+牟
+菝
+葜
+孜
+哀
+菁
+凋
+炽
+傣
+矣
+僚
+柃
+碟
+勉
+莘
+镀
+翡
+歙
+邯
+苎
+銮
+瑛
+鲹
+哉
+旭
+凑
+韶
+锂
+喔
+勐
+驿
+琮
+唤
+伺
+玮
+霖
+辗
+韧
+髓
+胄
+淑
+猬
+汛
+麝
+舅
+梧
+嫔
+汶
+羧
+辣
+谜
+钮
+渭
+鲣
+溥
+闯
+乒
+椤
+呀
+戍
+蜕
+绅
+碗
+帛
+钯
+钾
+蔺
+谅
+釉
+崴
+鲡
+豌
+溲
+箬
+敖
+沸
+烂
+觅
+濒
+曷
+泗
+鸽
+嘎
+汾
+嘧
+啶
+扯
+臀
+兀
+筛
+谤
+拯
+祁
+胱
+荔
+玖
+戮
+灶
+嗓
+胰
+鲃
+妓
+佰
+匐
+剌
+枕
+玲
+孪
+掖
+谕
+孵
+憩
+舄
+捞
+凄
+菇
+颊
+宕
+稷
+泣
+脓
+镁
+纬
+肄
+卦
+幡
+浊
+龈
+晟
+叻
+郃
+膳
+挛
+竿
+慌
+皖
+璋
+腥
+莺
+濂
+瘦
+钕
+唑
+炬
+燮
+簇
+殷
+赈
+饥
+丕
+耧
+珂
+滞
+疣
+簧
+谛
+俩
+祚
+鞑
+靼
+羲
+蚶
+仗
+棚
+溞
+蒴
+鹳
+牻
+缔
+腧
+雉
+覃
+砌
+瓢
+狡
+纭
+棣
+歼
+帧
+珙
+莴
+亩
+蛹
+钰
+寞
+弊
+镊
+峻
+翟
+悖
+拾
+靛
+钵
+矫
+菏
+憧
+憬
+慷
+芮
+倭
+媳
+雯
+烨
+逢
+郸
+揖
+���
+俨
+晁
+弈
+韬
+辙
+胖
+宦
+屑
+敕
+枫
+阙
+圻
+鄞
+犍
+灿
+琰
+鸾
+霜
+祕
+翘
+缮
+钓
+鲑
+炒
+螈
+舆
+晒
+烘
+陋
+昀
+萱
+暨
+澧
+缚
+篱
+瑶
+筱
+柚
+衅
+毋
+檀
+闍
+赉
+渗
+郓
+鳔
+葎
+橐
+迭
+殴
+缨
+溉
+陁
+钜
+莼
+邕
+乓
+襟
+瘿
+栈
+桫
+沦
+瘾
+跖
+砍
+吨
+熬
+漕
+僵
+穹
+蛳
+绶
+牦
+粪
+漪
+曰
+洱
+湛
+苴
+黧
+鲳
+颓
+蜈
+蚣
+铬
+匀
+饷
+胚
+珧
+螨
+匍
+罩
+蛏
+栉
+抒
+瞭
+脐
+辇
+疮
+萎
+咽
+厍
+峙
+赭
+馅
+熄
+璜
+捆
+贰
+驸
+鲻
+焕
+褒
+蔻
+黯
+铟
+噩
+渤
+侗
+蜴
+蜊
+莅
+砻
+傀
+儡
+鹑
+骆
+浇
+颐
+琢
+渣
+査
+莒
+̌
+啰
+诽
+赂
+轸
+赟
+谶
+褚
+莽
+兮
+奘
+汴
+彧
+夭
+绰
+卞
+铳
+丟
+恼
+鹋
+鹩
+鄣
+镒
+脖
+鍊
+窥
+幂
+镛
+皋
+嘌
+呤
+禺
+栾
+潢
+笏
+潞
+珩
+呆
+滁
+稗
+瞬
+侏
+吟
+漩
+诟
+貂
+鼬
+涪
+渎
+绯
+楞
+沆
+蛟
+蠕
+壸
+砗
+磲
+寡
+锌
+叭
+琥
+讶
+孺
+祗
+佃
+柝
+蜻
+蜓
+菠
+缀
+鞅
+昙
+捧
+悚
+箴
+妊
+娠
+侬
+涟
+栓
+邳
+磡
+砷
+哨
+僖
+闾
+焉
+匕
+苷
+膦
+箕
+и
+̃
+羞
+辱
+硼
+廪
+蛎
+惰
+酌
+拮
+缇
+蘑
+刈
+蛸
+悄
+鳌
+桧
+砸
+巳
+瑾
+抹
+喊
+杠
+瞻
+郦
+痒
+馨
+煜
+懈
+哮
+闫
+麒
+咀
+殃
+琨
+沾
+枋
+毓
+猕
+崛
+睿
+嵯
+颍
+邺
+瑀
+淇
+噪
+鏊
+诫
+锺
+灏
+烁
+悔
+汞
+淯
+鲱
+魄
+郝
+霆
+巾
+邹
+蓣
+榔
+壹
+秤
+閒
+荛
+夥
+谒
+掸
+莩
+糯
+皎
+坳
+喵
+弢
+凳
+啧
+琵
+匆
+阇
+猗
+腮
+淅
+肘
+疃
+蕲
+翎
+痉
+冥
+眷
+罹
+澡
+缸
+婷
+恬
+狙
+汲
+渴
+邬
+茉
+奕
+诡
+荽
+鲢
+芃
+肟
+谚
+赃
+洮
+脆
+诵
+陲
+窜
+绢
+炔
+蕗
+鸮
+吠
+粥
+掳
+琚
+荥
+忻
+闳
+摹
+峄
+湳
+婕
+妤
+庹
+汕
+泱
+佟
+氓
+苟
+珞
+婵
+硒
+钡
+憍
+椹
+鱿
+槲
+骠
+淖
+锰
+寥
+辜
+璇
+婉
+岚
+账
+哔
+锆
+曙
+涞
+铂
+绎
+杏
+愕
+姒
+铰
+亳
+荃
+衬
+楸
+琛
+楷
+柰
+栻
+骄
+铋
+辍
+遁
+靶
+璧
+桢
+薮
+狠
+镐
+诠
+渲
+赎
+雁
+夯
+膺
+苇
+茫
+衢
+堰
+冉
+昕
+瞧
+殆
+芎
+祉
+惘
+铆
+腈
+羰
+渚
+苁
+郯
+铵
+睹
+恕
+巽
+泸
+簪
+伎
+贻
+醋
+虻
+卤
+疍
+睫
+嗲
+鄱
+珑
+炕
+μ
+肱
+梳
+裘
+愁
+瞄
+洵
+盱
+眙
+箩
+筐
+翥
+蟑
+螂
+漾
+叩
+胭
+腻
+沌
+煎
+琊
+勍
+徬
+惶
+疡
+渌
+泠
+胍
+酪
+浔
+歆
+镥
+傍
+佚
+俳
+塾
+鹌
+掞
+酐
+馀
+奚
+苳
+竈
+瞎
+鳃
+霈
+榉
+唾
+俸
+柩
+荦
+ㄟ
+昱
+捩
+慑
+忱
+瞳
+椋
+纻
+隗
+晔
+鮎
+郴
+谠
+轶
+諲
+陂
+抖
+沔
+叟
+觚
+唛
+钌
+痢
+蹶
+偕
+喽
+骷
+髅
+膑
+蚺
+怜
+歹
+稔
+刮
+郫
+捣
+垢
+捏
+茧
+鹂
+踩
+娟
+哄
+虬
+栃
+钲
+焮
+邾
+泼
+泮
+骂
+焚
+黾
+圩
+驭
+掛
+胪
+艮
+濡
+盼
+巯
+骰
+偲
+嫣
+睢
+鳚
+繄
+荼
+聿
+朕
+辕
+珐
+绂
+筷
+洙
+圪
+扉
+桡
+鹛
+擂
+骁
+浉
+骥
+俣
+盂
+榖
+廆
+砾
+讚
+腱
+螟
+踊
+祋
+娣
+諡
+仄
+曜
+靳
+嘟
+妲
+矗
+検
+蒟
+泯
+瑮
+倘
+袓
+洣
+搏
+绮
+铼
+濠
+圜
+涝
+弁
+甾
+魇
+杓
+屉
+揩
+坯
+娆
+侮
+罔
+躯
+坜
+缜
+竣
+蟥
+搔
+朽
+姨
+炊
+岔
+暝
+舫
+咆
+挠
+艷
+熠
+鋆
+茁
+拧
+瓯
+闰
+镍
+镉
+崧
+酃
+佬
+濮
+桝
+儋
+纮
+谯
+煲
+呔
+膻
+筮
+帷
+幔
+緁
+県
+儆
+庾
+荁
+菉
+汜
+傕
+膈
+胯
+鄙
+蝌
+蚪
+鸲
+跻
+玠
+蝾
+龚
+镎
+阖
+乖
+佤
+萃
+扼
+佼
+鸵
+笆
+呐
+峥
+帚
+埕
+蘸
+诙
+孖
+琐
+螣
+傩
+殒
+舵
+阕
+轲
+汹
+埈
+讫
+峒
+沐
+籴
+琶
+彪
+坨
+鼷
+睁
+攸
+圹
+诹
+譬
+栀
+娥
+畋
+仞
+喹
+啉
+蹴
+憨
+俵
+髎
+铲
+焱
+皓
+鋐
+枞
+咪
+苓
+贮
+忤
+羯
+拇
+褓
+籁
+飒
+缙
+専
+诬
+泓
+哼
+雑
+簿
+熈
+讹
+浚
+绞
+攒
+俐
+韭
+蔑
+侪
+禑
+淼
+缵
+湜
+耽
+苛
+侂
+勺
+峯
+薨
+耍
+祜
+铽
+唆
+砀
+嚓
+屹
+悫
+砵
+糠
+獴
+膛
+鲎
+隈
+钊
+脲
+呋
+喃
+玹
+厩
+溅
+犷
+灞
+杵
+镂
+禛
+扳
+枥
+挫
+呵
+込
+暎
+懔
+遑
+偃
+璹
+蠹
+佘
+妡
+紑
+暄
+喧
+叅
+螃
+惺
+蛊
+槛
+刍
+钿
+褧
+镓
+镠
+陟
+璆
+牕
+帖
+寀
+綦
+奣
+嵗
+谌
+嫖
+挚
+钴
+赘
+荪
+怨
+惪
+鹪
+璎
+藳
+暮
+潇
+薖
+沤
+伛
+娇
+頴
+旌
+オ
+カ
+ヤ
+ド
+舘
+栢
+耻
+嵋
+哑
+冼
+瘰
+骘
+鼢
+狯
+霹
+雳
+萁
+芗
+峪
+臻
+赡
+攥
+泷
+呻
+瘫
+痪
+蒺
+笮
+钹
+嫉
+榙
+骈
+鸩
+馯
+葳
+玶
+綖
+崁
+蔵
+罘
+钪
+镗
+柞
+瓛
+裬
+蛲
+擒
+倚
+鼐
+餵
+蠋
+嘻
+颞
+冤
+瓮
+岫
+醮
+鲀
+澥
+婺
+楮
+倻
+酢
+苡
+阈
+硖
+硎
+倩
+腩
+寝
+撇
+宵
+撷
+疹
+徘
+徊
+薷
+斟
+斝
+邰
+尨
+槱
+沥
+锑
+尻
+皕
+饯
+搅
+拌
+钨
+铯
+唁
+轭
+萘
+稼
+霄
+嬤
+俅
+芰
+貘
+墀
+杙
+栎
+桄
+蓍
+砝
+傉
+幺
+恍
+掰
+锶
+埗
+禀
+蓑
+蝮
+湫
+熏
+渺
+锣
+阉
+枭
+昵
+绫
+樾
+轧
+鬃
+捍
+嵖
+岈
+绚
+鸯
+謇
+昴
+钗
+恽
+玭
+偈
+闼
+蛉
+槚
+脾
+畲
+瓘
+涓
+钫
+浸
+胛
+烺
+篦
+珰
+剃
+嵴
+斡
+鎏
+芷
+霓
+氖
+馔
+蟆
+驷
+阏
+愔
+淤
+眩
+爹
+铮
+剀
+濯
+炫
+塬
+顽
+砥
+樵
+倦
+郤
+玎
+沭
+琬
+嬴
+猄
+宥
+拢
+氦
+姮
+挞
+胳
+膊
+疤
+鹬
+蟋
+蟀
+嶷
+盏
+埇
+烙
+莞
+秧
+捡
+匮
+妍
+樨
+妒
+浞
+臼
+奂
+靡
+蜑
+臯
+谪
+黜
+痼
+懦
+棁
+笄
+牂
+牁
+褪
+簸
+湟
+佯
+瘠
+跪
+躺
+隘
+涿
+屐
+藔
+匾
+衫
+洐
+龛
+鳟
+膏
+饴
+杻
+醯
+晦
+鞣
+荧
+嚣
+炜
+氙
+榭
+怵
+猝
+伫
+翃
+婢
+胥
+壽
+珈
+淞
+铣
+胼
+痘
+噌
+馥
+箨
+钼
+羡
+棨
+圃
+趴
+揆
+饵
+彤
+飙
+悌
+揉
+闱
+撮
+戛
+秽
+麂
+孛
+䴕
+濉
+袒
+瑭
+愧

mms-1b-all/cym/tokens.txt

@@ -1,79 +1,83 @@
-| 283373
-a 108040
-d 133852
-n 94923
-e 88233
-y 108946
-i 82967
-r 74069
-o 61519
-l 46299
-w 59650
-h 55187
-g 36279
-f 37847
-t 35683
-s 27999
-u 30526
-c 31354
-m 23422
-b 20198
-' 16052
-p 9059
-0 847
-â 2904
-1 627
-k 45
-ô 971
-2 385
-- 318
-9 279
-j 628
-5 235
-v 77
-4 221
-3 204
-6 196
-8 187
-. 167
-ŵ 442
-7 131
-, 102
-z 6
-ï 246
-ê 106
-x 40
-î 2
-á 204
-q 1
-: 40
-ŷ 490
-/ 31
-$ 18
-é 7
-ü 13
-% 11
-; 8
-í 6
-¥ 6
-õ 6
-ë 8
-ö 4
-ú 4
-+ 4
-" 4
-ç 3
-£ 3
-ò 1
-ã 3
-ì 2
-ä 2
-ó 4
-̇ 2
-° 2
-[ 2
-] 2
-û 76
-à 4
-– 1
-— 210
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+d
+n
+e
+y
+i
+r
+o
+l
+w
+h
+g
+f
+t
+s
+u
+c
+m
+b
+'
+p
+0
+â
+1
+k
+ô
+2
+-
+9
+j
+5
+v
+4
+3
+6
+8
+.
+ŵ
+7
+,
+z
+ï
+ê
+x
+î
+á
+q
+:
+ŷ
+/
+$
+é
+ü
+%
+;
+í
+¥
+õ
+ë
+ö
+ú
++
+"
+ç
+£
+ò
+ã
+ì
+ä
+ó
+̇
+°
+[
+]
+û
+à
+–
+—

mms-1b-all/dan/tokens.txt

@@ -1,71 +1,75 @@
-| 14954
-e 11605
-r 5646
-n 5315
-t 4655
-a 3757
-d 4868
-i 3895
-s 4023
-l 3568
-o 3060
-g 3438
-m 2187
-k 2497
-f 1397
-v 1971
-u 1399
-b 959
-p 861
-h 1496
-å 843
-æ 779
-y 396
-ø 652
-j 667
-c 141
-0 510
-1 408
-- 18
-. 282
-w 2
-2 247
-9 163
-5 147
-4 139
-3 136
-z 7
-6 119
-8 117
-7 83
-x 3
-' 4
-/ 41
-é 4
-q 33
-, 32
-: 31
-$ 12
-​ 10
-% 10
-í 7
-ü 6
-; 6
-" 5
-õ 4
-– 3
-— 9
-° 3
-ö 3
-¥ 3
-& 3
-” 2
-ç 2
-ã 2
-[ 2
-] 2
-á 1
-ł 1
-² 1
-+ 1
-ó 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+r
+n
+t
+a
+d
+i
+s
+l
+o
+g
+m
+k
+f
+v
+u
+b
+p
+h
+å
+æ
+y
+ø
+j
+c
+0
+1
+-
+.
+w
+2
+9
+5
+4
+3
+z
+6
+8
+7
+x
+'
+/
+é
+q
+,
+:
+$
+​
+%
+í
+ü
+;
+"
+õ
+–
+—
+°
+ö
+¥
+&
+”
+ç
+ã
+[
+]
+á
+ł
+²
++
+ó

mms-1b-all/decoding_config.json

@@ -0,0 +1 @@
+{"afr": {"silweight": "0.0", "lmweight": "2.385147446332425", "wordscore": "-0.6905931241640371", "lexiconfile": "mms-1b-all/afr/lexicon.txt", "lmfile": "lms/afr/word_5gram.bin"}, "amh": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/amh/lexicon.txt", "lmfile": "lms/amh/word_5gram.bin"}, "ara": {"silweight": "0.0", "lmweight": "2.0317625700822957", "wordscore": "2.5970029453614405", "lexiconfile": "mms-1b-all/ara/lexicon.txt", "lmfile": "lms/ara/word_5gram.bin"}, "asm": {"silweight": "0.0", "lmweight": "1.8885708618108534", "wordscore": "-2.395792751589805", "lexiconfile": "mms-1b-all/asm/lexicon.txt", "lmfile": "lms/asm/word_5gram.bin"}, "ast": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/ast/lexicon.txt", "lmfile": "lms/ast/word_5gram.bin"}, "azj-script_latin": {"silweight": "0.0", "lmweight": "1.68228632332338", "wordscore": "-1.44649949824222", "lexiconfile": "mms-1b-all/azj-script_latin/lexicon.txt", "lmfile": "lms/azj-script_latin/word_5gram.bin"}, "bel": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/bel/lexicon.txt", "lmfile": "lms/bel/word_5gram.bin"}, "bul": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/bul/lexicon.txt", "lmfile": "lms/bul/word_5gram.bin"}, "ben": {"silweight": "0.0", "lmweight": "2.1623996997922177", "wordscore": "-0.6522236985922509", "lexiconfile": "mms-1b-all/ben/lexicon.txt", "lmfile": "lms/ben/word_5gram.bin"}, "bos": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/bos/lexicon.txt", "lmfile": "lms/bos/word_5gram.bin"}, "cat": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/cat/lexicon.txt", "lmfile": "lms/cat/word_5gram.bin"}, "ceb": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/ceb/lexicon.txt", "lmfile": "lms/ceb/word_5gram.bin"}, "ckb": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/ckb/lexicon.txt", "lmfile": "lms/ckb/word_5gram.bin"}, "cmn-script_simplified": {"silweight": "-1.44649949824222", "lmweight": "1.68228632332338", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/cmn-script_simplified/char_20gram.bin"}, "ces": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/ces/lexicon.txt", "lmfile": "lms/ces/word_5gram.bin"}, "cym": {"silweight": "0.0", "lmweight": "2.520589361645891", "wordscore": "2.070465454029091", "lexiconfile": "mms-1b-all/cym/lexicon.txt", "lmfile": "lms/cym/word_5gram.bin"}, "dan": {"silweight": "0.0", "lmweight": "2.539999639645833", "wordscore": "0.6380305065253138", "lexiconfile": "mms-1b-all/dan/lexicon.txt", "lmfile": "lms/dan/word_5gram.bin"}, "deu": {"silweight": "0.0", "lmweight": "2.451132420162849", "wordscore": "-0.08133478818499906", "lexiconfile": "mms-1b-all/deu/lexicon.txt", "lmfile": "lms/deu/word_5gram.bin"}, "ell": {"silweight": "0.0", "lmweight": "2.8262456394675586", "wordscore": "0.2846454679705426", "lexiconfile": "mms-1b-all/ell/lexicon.txt", "lmfile": "lms/ell/word_5gram.bin"}, "eng": {"silweight": "0.0", "lmweight": "2.045098885474434", "wordscore": "-0.5703951752975143", "lexiconfile": "mms-1b-all/eng/lexicon.txt", "lmfile": "lms/eng/word_5gram.bin"}, "spa": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/spa/lexicon.txt", "lmfile": "lms/spa/word_5gram.bin"}, "est": {"silweight": "0.0", "lmweight": "2.722356530249026", "wordscore": "-2.839819232026769", "lexiconfile": "mms-1b-all/est/lexicon.txt", "lmfile": "lms/est/word_5gram.bin"}, "fas": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/fas/lexicon.txt", "lmfile": "lms/fas/word_5gram.bin"}, "ful": {"silweight": "0.0", "lmweight": "1.0419692415678377", "wordscore": "1.8301669620781338", "lexiconfile": "mms-1b-all/ful/lexicon.txt", "lmfile": "lms/ful/word_5gram.bin"}, "fin": {"silweight": "0.0", "lmweight": "3.263652386134638", "wordscore": "-2.3963548787034226", "lexiconfile": "mms-1b-all/fin/lexicon.txt", "lmfile": "lms/fin/word_5gram.bin"}, "tgl": {"silweight": "0.0", "lmweight": "1.8885708618108534", "wordscore": "-2.395792751589805", "lexiconfile": "mms-1b-all/tgl/lexicon.txt", "lmfile": "lms/tgl/word_5gram.bin"}, "fra": {"silweight": "0.0", "lmweight": "2.520589361645891", "wordscore": "2.070465454029091", "lexiconfile": "mms-1b-all/fra/lexicon.txt", "lmfile": "lms/fra/word_5gram.bin"}, "gle": {"silweight": "0.0", "lmweight": "2.0317625700822957", "wordscore": "2.5970029453614405", "lexiconfile": "mms-1b-all/gle/lexicon.txt", "lmfile": "lms/gle/word_5gram.bin"}, "glg": {"silweight": "0.0", "lmweight": "2.539999639645833", "wordscore": "0.6380305065253138", "lexiconfile": "mms-1b-all/glg/lexicon.txt", "lmfile": "lms/glg/word_5gram.bin"}, "guj": {"silweight": "0.0", "lmweight": "1.68228632332338", "wordscore": "-1.44649949824222", "lexiconfile": "mms-1b-all/guj/lexicon.txt", "lmfile": "lms/guj/word_5gram.bin"}, "hau": {"silweight": "0.0", "lmweight": "2.1623996997922177", "wordscore": "-0.6522236985922509", "lexiconfile": "mms-1b-all/hau/lexicon.txt", "lmfile": "lms/hau/word_5gram.bin"}, "heb": {"silweight": "0.0", "lmweight": "1.9080391062108681", "wordscore": "2.191859566629841", "lexiconfile": "mms-1b-all/heb/lexicon.txt", "lmfile": "lms/heb/word_5gram.bin"}, "hin": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/hin/lexicon.txt", "lmfile": "lms/hin/word_5gram.bin"}, "hrv": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/hrv/lexicon.txt", "lmfile": "lms/hrv/word_5gram.bin"}, "hun": {"silweight": "0.0", "lmweight": "2.045098885474434", "wordscore": "-0.5703951752975143", "lexiconfile": "mms-1b-all/hun/lexicon.txt", "lmfile": "lms/hun/word_5gram.bin"}, "hye": {"silweight": "0.0", "lmweight": "2.1623996997922177", "wordscore": "-0.6522236985922509", "lexiconfile": "mms-1b-all/hye/lexicon.txt", "lmfile": "lms/hye/word_5gram.bin"}, "ind": {"silweight": "0.0", "lmweight": "3.030415687865747", "wordscore": "2.2606222249366485", "lexiconfile": "mms-1b-all/ind/lexicon.txt", "lmfile": "lms/ind/word_5gram.bin"}, "ibo": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/ibo/lexicon.txt", "lmfile": "lms/ibo/word_5gram.bin"}, "isl": {"silweight": "0.0", "lmweight": "2.4510927194744268", "wordscore": "0.939956333937773", "lexiconfile": "mms-1b-all/isl/lexicon.txt", "lmfile": "lms/isl/word_5gram.bin"}, "ita": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/ita/lexicon.txt", "lmfile": "lms/ita/word_5gram.bin"}, "jpn": {"silweight": "2.883099903883612", "lmweight": "1.48055976134075", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/jpn/char_20gram.bin"}, "jav": {"silweight": "0.0", "lmweight": "1.68228632332338", "wordscore": "-1.44649949824222", "lexiconfile": "mms-1b-all/jav/lexicon.txt", "lmfile": "lms/jav/word_5gram.bin"}, "kat": {"silweight": "0.0", "lmweight": "2.194797215342357", "wordscore": "-2.9157497990158863", "lexiconfile": "mms-1b-all/kat/lexicon.txt", "lmfile": "lms/kat/word_5gram.bin"}, "kam": {"silweight": "0.0", "lmweight": "0.32178327421014163", "wordscore": "-1.0796723719647254", "lexiconfile": "mms-1b-all/kam/lexicon.txt", "lmfile": "lms/kam/word_5gram.bin"}, "kea": {"silweight": "0.0", "lmweight": "0.7575653142174246", "wordscore": "-1.8796228304666693", "lexiconfile": "mms-1b-all/kea/lexicon.txt", "lmfile": "lms/kea/word_5gram.bin"}, "kaz": {"silweight": "0.0", "lmweight": "2.8262456394675586", "wordscore": "0.2846454679705426", "lexiconfile": "mms-1b-all/kaz/lexicon.txt", "lmfile": "lms/kaz/word_5gram.bin"}, "khm": {"silweight": "0.6380305065253138", "lmweight": "2.539999639645833", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/khm/char_20gram.bin"}, "kan": {"silweight": "0.0", "lmweight": "2.302604056659554", "wordscore": "-1.258022985583452", "lexiconfile": "mms-1b-all/kan/lexicon.txt", "lmfile": "lms/kan/word_5gram.bin"}, "kor": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/kor/lexicon.txt", "lmfile": "lms/kor/word_5gram.bin"}, "kir": {"silweight": "0.0", "lmweight": "1.906123968037523", "wordscore": "-2.4610538328264377", "lexiconfile": "mms-1b-all/kir/lexicon.txt", "lmfile": "lms/kir/word_5gram.bin"}, "ltz": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/ltz/lexicon.txt", "lmfile": "lms/ltz/word_5gram.bin"}, "lug": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/lug/lexicon.txt", "lmfile": "lms/lug/word_5gram.bin"}, "lin": {"silweight": "0.0", "lmweight": "0.7575653142174246", "wordscore": "-1.8796228304666693", "lexiconfile": "mms-1b-all/lin/lexicon.txt", "lmfile": "lms/lin/word_5gram.bin"}, "lao": {"silweight": "0.6653218406628096", "lmweight": "1.7366873418151347", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/lao/char_20gram.bin"}, "lit": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/lit/lexicon.txt", "lmfile": "lms/lit/word_5gram.bin"}, "luo": {"silweight": "0.0", "lmweight": "0.7642683660095622", "wordscore": "0.40506444372403116", "lexiconfile": "mms-1b-all/luo/lexicon.txt", "lmfile": "lms/luo/word_5gram.bin"}, "lav": {"silweight": "0.0", "lmweight": "1.8885708618108534", "wordscore": "-2.395792751589805", "lexiconfile": "mms-1b-all/lav/lexicon.txt", "lmfile": "lms/lav/word_5gram.bin"}, "mri": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/mri/lexicon.txt", "lmfile": "lms/mri/word_5gram.bin"}, "mkd": {"silweight": "0.0", "lmweight": "2.520589361645891", "wordscore": "2.070465454029091", "lexiconfile": "mms-1b-all/mkd/lexicon.txt", "lmfile": "lms/mkd/word_5gram.bin"}, "mal": {"silweight": "0.0", "lmweight": "2.821133599417625", "wordscore": "-1.346195272127237", "lexiconfile": "mms-1b-all/mal/lexicon.txt", "lmfile": "lms/mal/word_5gram.bin"}, "mon": {"silweight": "0.0", "lmweight": "2.520589361645891", "wordscore": "2.070465454029091", "lexiconfile": "mms-1b-all/mon/lexicon.txt", "lmfile": "lms/mon/word_5gram.bin"}, "mar": {"silweight": "0.0", "lmweight": "2.045098885474434", "wordscore": "-0.5703951752975143", "lexiconfile": "mms-1b-all/mar/lexicon.txt", "lmfile": "lms/mar/word_5gram.bin"}, "zlm": {"silweight": "0.0", "lmweight": "2.722356530249026", "wordscore": "-2.839819232026769", "lexiconfile": "mms-1b-all/zlm/lexicon.txt", "lmfile": "lms/zlm/word_5gram.bin"}, "mlt": {"silweight": "0.0", "lmweight": "2.1623996997922177", "wordscore": "-0.6522236985922509", "lexiconfile": "mms-1b-all/mlt/lexicon.txt", "lmfile": "lms/mlt/word_5gram.bin"}, "mya": {"silweight": "-0.5703951752975143", "lmweight": "2.045098885474434", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/mya/char_20gram.bin"}, "nob": {"silweight": "0.0", "lmweight": "2.4510927194744268", "wordscore": "0.939956333937773", "lexiconfile": "mms-1b-all/nob/lexicon.txt", "lmfile": "lms/nob/word_5gram.bin"}, "npi": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/npi/lexicon.txt", "lmfile": "lms/npi/word_5gram.bin"}, "nld": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/nld/lexicon.txt", "lmfile": "lms/nld/word_5gram.bin"}, "nso": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/nso/lexicon.txt", "lmfile": "lms/nso/word_5gram.bin"}, "nya": {"silweight": "0.0", "lmweight": "1.9080391062108681", "wordscore": "2.191859566629841", "lexiconfile": "mms-1b-all/nya/lexicon.txt", "lmfile": "lms/nya/word_5gram.bin"}, "oci": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/oci/lexicon.txt", "lmfile": "lms/oci/word_5gram.bin"}, "orm": {"silweight": "0.0", "lmweight": "1.9080391062108681", "wordscore": "2.191859566629841", "lexiconfile": "mms-1b-all/orm/lexicon.txt", "lmfile": "lms/orm/word_5gram.bin"}, "ory": {"silweight": "0.0", "lmweight": "2.045098885474434", "wordscore": "-0.5703951752975143", "lexiconfile": "mms-1b-all/ory/lexicon.txt", "lmfile": "lms/ory/word_5gram.bin"}, "pan": {"silweight": "0.0", "lmweight": "2.045098885474434", "wordscore": "-0.5703951752975143", "lexiconfile": "mms-1b-all/pan/lexicon.txt", "lmfile": "lms/pan/word_5gram.bin"}, "pol": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/pol/lexicon.txt", "lmfile": "lms/pol/word_5gram.bin"}, "pus": {"silweight": "0.0", "lmweight": "1.9080391062108681", "wordscore": "2.191859566629841", "lexiconfile": "mms-1b-all/pus/lexicon.txt", "lmfile": "lms/pus/word_5gram.bin"}, "por": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/por/lexicon.txt", "lmfile": "lms/por/word_5gram.bin"}, "ron": {"silweight": "0.0", "lmweight": "2.303811792126163", "wordscore": "-0.6527435440630387", "lexiconfile": "mms-1b-all/ron/lexicon.txt", "lmfile": "lms/ron/word_5gram.bin"}, "rus": {"silweight": "0.0", "lmweight": "2.539999639645833", "wordscore": "0.6380305065253138", "lexiconfile": "mms-1b-all/rus/lexicon.txt", "lmfile": "lms/rus/word_5gram.bin"}, "snd": {"silweight": "0.0", "lmweight": "1.48055976134075", "wordscore": "2.883099903883612", "lexiconfile": "mms-1b-all/snd/lexicon.txt", "lmfile": "lms/snd/word_5gram.bin"}, "slk": {"silweight": "0.0", "lmweight": "2.303811792126163", "wordscore": "-0.6527435440630387", "lexiconfile": "mms-1b-all/slk/lexicon.txt", "lmfile": "lms/slk/word_5gram.bin"}, "slv": {"silweight": "0.0", "lmweight": "2.1623996997922177", "wordscore": "-0.6522236985922509", "lexiconfile": "mms-1b-all/slv/lexicon.txt", "lmfile": "lms/slv/word_5gram.bin"}, "sna": {"silweight": "0.0", "lmweight": "2.194797215342357", "wordscore": "-2.9157497990158863", "lexiconfile": "mms-1b-all/sna/lexicon.txt", "lmfile": "lms/sna/word_5gram.bin"}, "som": {"silweight": "0.0", "lmweight": "1.48055976134075", "wordscore": "2.883099903883612", "lexiconfile": "mms-1b-all/som/lexicon.txt", "lmfile": "lms/som/word_5gram.bin"}, "srp-script_latin": {"silweight": "0.0", "lmweight": "1.7366873418151347", "wordscore": "0.6653218406628096", "lexiconfile": "mms-1b-all/srp-script_latin/lexicon.txt", "lmfile": "lms/srp-script_latin/word_5gram.bin"}, "swe": {"silweight": "0.0", "lmweight": "3.3776874061001925", "wordscore": "1.5477264176418153", "lexiconfile": "mms-1b-all/swe/lexicon.txt", "lmfile": "lms/swe/word_5gram.bin"}, "swh": {"silweight": "0.0", "lmweight": "2.1623996997922177", "wordscore": "-0.6522236985922509", "lexiconfile": "mms-1b-all/swh/lexicon.txt", "lmfile": "lms/swh/word_5gram.bin"}, "tam": {"silweight": "0.0", "lmweight": "2.451132420162849", "wordscore": "-0.08133478818499906", "lexiconfile": "mms-1b-all/tam/lexicon.txt", "lmfile": "lms/tam/word_5gram.bin"}, "tel": {"silweight": "0.0", "lmweight": "1.8022524265246207", "wordscore": "0.9614722717343338", "lexiconfile": "mms-1b-all/tel/lexicon.txt", "lmfile": "lms/tel/word_5gram.bin"}, "tgk": {"silweight": "0.0", "lmweight": "2.303811792126163", "wordscore": "-0.6527435440630387", "lexiconfile": "mms-1b-all/tgk/lexicon.txt", "lmfile": "lms/tgk/word_5gram.bin"}, "tha": {"silweight": "2.5970029453614405", "lmweight": "2.0317625700822957", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/tha/char_20gram.bin"}, "tur": {"silweight": "0.0", "lmweight": "2.302604056659554", "wordscore": "-1.258022985583452", "lexiconfile": "mms-1b-all/tur/lexicon.txt", "lmfile": "lms/tur/word_5gram.bin"}, "ukr": {"silweight": "0.0", "lmweight": "2.4510927194744268", "wordscore": "0.939956333937773", "lexiconfile": "mms-1b-all/ukr/lexicon.txt", "lmfile": "lms/ukr/word_5gram.bin"}, "umb": {"silweight": "0.0", "lmweight": "0.14556815044594318", "wordscore": "-2.8701809408698553", "lexiconfile": "mms-1b-all/umb/lexicon.txt", "lmfile": "lms/umb/word_5gram.bin"}, "urd-script_arabic": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/urd-script_arabic/lexicon.txt", "lmfile": "lms/urd-script_arabic/word_5gram.bin"}, "uzb-script_latin": {"silweight": "0.0", "lmweight": "1.68228632332338", "wordscore": "-1.44649949824222", "lexiconfile": "mms-1b-all/uzb-script_latin/lexicon.txt", "lmfile": "lms/uzb-script_latin/word_5gram.bin"}, "vie": {"silweight": "0.0", "lmweight": "3.246514834031514", "wordscore": "2.096915791118203", "lexiconfile": "mms-1b-all/vie/lexicon.txt", "lmfile": "lms/vie/word_5gram.bin"}, "wol": {"silweight": "0.0", "lmweight": "0.7642683660095622", "wordscore": "0.40506444372403116", "lexiconfile": "mms-1b-all/wol/lexicon.txt", "lmfile": "lms/wol/word_5gram.bin"}, "xho": {"silweight": "0.0", "lmweight": "1.68228632332338", "wordscore": "-1.44649949824222", "lexiconfile": "mms-1b-all/xho/lexicon.txt", "lmfile": "lms/xho/word_5gram.bin"}, "yor": {"silweight": "0.0", "lmweight": "1.9063878166094232", "wordscore": "0.5002922367301874", "lexiconfile": "mms-1b-all/yor/lexicon.txt", "lmfile": "lms/yor/word_5gram.bin"}, "yue-script_traditional": {"silweight": "2.883099903883612", "lmweight": "1.48055976134075", "wordscore": "???", "lexiconfile": null, "lmfile": "lms/yue-script_traditional/char_20gram.bin"}, "zul": {"silweight": "0.0", "lmweight": "1.68228632332338", "wordscore": "-1.44649949824222", "lexiconfile": "mms-1b-all/zul/lexicon.txt", "lmfile": "lms/zul/word_5gram.bin"}}

mms-1b-all/deu/tokens.txt

@@ -1,190 +1,194 @@
-| 159217
-e 131270
-n 80138
-i 59280
-r 54730
-s 52175
-t 49879
-a 41708
-d 40800
-h 42513
-u 32710
-l 26384
-g 23320
-o 18665
-c 23688
-m 20035
-b 16207
-f 10936
-w 14343
-k 7364
-z 7971
-v 6891
-p 3622
-ü 5101
-ä 2938
-ö 2481
-j 3471
-0 30
-- 16
-y 212
-ß 1273
-1 7
-. 478
-2 3
-x 56
-" 245
-9 196
-5 5
-3 6
-4 11
-6 6
-8 1
-q 50
-7 92
-: 45
-/ 40
-, 29
-' 1530
-á 239
-% 11
-° 8
-í 187
-é 57
-& 5
-+ 5
-; 5
-ç 6
-‍ 4
-[ 3
-] 3
-² 3
-¥ 3
-æ 13
-ú 26
-ā 26
-ã 30
-! 2
-õ 2
-ł 53
-‌ 2
-” 2
-$ 1
-ó 150
-– 257
-ō 140
-š 91
-č 56
-ř 48
-ć 42
-â 39
-ø 37
-ž 35
-ı 33
-ş 31
-ô 31
-ý 31
-ñ 28
-ū 28
-ș 26
-́ 24
-ʿ 24
-ë 5
-ě 20
-ś 18
-œ 18
-ț 16
-ī 15
-ə 15
-ʻ 14
-đ 13
-— 12
-ń 12
-′ 12
-ê 11
-å 11
-ă 10
-ð 9
-î 9
-ą 8
-ň 8
-ğ 7
-̇ 7
-ė 7
-ï 6
-ò 5
-ż 5
-ḫ 5
-ź 4
-ů 4
-ő 4
-ę 3
-о 3
-` 3
-ơ 3
-а 3
-и 3
-à 3
-‐ 3
-ì 3
-ġ 3
-ď 2
-ť 2
-ế 2
-с 2
-е 2
-р 2
-ф 2
-м 2
-в 2
-ш 2
-û 2
-μ 2
-ṣ 2
-ả 2
-ạ 2
-辶 1
-ѹ 1
-無 1
-ǐ 1
-ན 1
-་ 1
-カ 1
-臣 1
-比 1
-支 1
-ч 1
-к 1
-ņ 1
-合 1
-̆ 1
-ʾ 1
-ŏ 1
-孙 1
-道 1
-临 1
-尣 1
-ħ 1
-ụ 1
-ắ 1
-黃 1
-城 1
-关 1
-镇 1
-è 1
-̥ 1
-毛 1
-泽 1
-东 1
-§ 1
-þ 1
-ṟ 1
-ē 1
-⟨ 1
-⟩ 1
-ù 1
-≡ 1
-ṭ 1
-ộ 1
-ễ 1
-ằ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+n
+i
+r
+s
+t
+a
+d
+h
+u
+l
+g
+o
+c
+m
+b
+f
+w
+k
+z
+v
+p
+ü
+ä
+ö
+j
+0
+-
+y
+ß
+1
+.
+2
+x
+"
+9
+5
+3
+4
+6
+8
+q
+7
+:
+/
+,
+'
+á
+%
+°
+í
+é
+&
++
+;
+ç
+‍
+[
+]
+²
+¥
+æ
+ú
+ā
+ã
+!
+õ
+ł
+‌
+”
+$
+ó
+–
+ō
+š
+č
+ř
+ć
+â
+ø
+ž
+ı
+ş
+ô
+ý
+ñ
+ū
+ș
+́
+ʿ
+ë
+ě
+ś
+œ
+ț
+ī
+ə
+ʻ
+đ
+—
+ń
+′
+ê
+å
+ă
+ð
+î
+ą
+ň
+ğ
+̇
+ė
+ï
+ò
+ż
+ḫ
+ź
+ů
+ő
+ę
+о
+`
+ơ
+а
+и
+à
+‐
+ì
+ġ
+ď
+ť
+ế
+с
+е
+р
+ф
+м
+в
+ш
+û
+μ
+ṣ
+ả
+ạ
+辶
+ѹ
+無
+ǐ
+ན
+་
+カ
+臣
+比
+支
+ч
+к
+ņ
+合
+̆
+ʾ
+ŏ
+孙
+道
+临
+尣
+ħ
+ụ
+ắ
+黃
+城
+关
+镇
+è
+̥
+毛
+泽
+东
+§
+þ
+ṟ
+ē
+⟨
+⟩
+ù
+≡
+ṭ
+ộ
+ễ
+ằ

mms-1b-all/ell/tokens.txt

@@ -1,98 +1,102 @@
-| 132013
-α 67615
-τ 45556
-ο 51934
-ι 38449
-ε 45522
-ν 40678
-σ 27827
-ρ 21417
-π 23770
-κ 20204
-η 14736
-ς 22501
-μ 18760
-υ 20772
-λ 15212
-ί 16363
-ό 15381
-ά 13608
-έ 12870
-γ 9887
-δ 10341
-ή 7902
-ω 7303
-χ 5131
-ύ 10316
-θ 9429
-φ 4505
-ώ 4512
-β 3171
-ξ 2010
-ζ 2110
-0 175
-a 1136
-1 43
-ψ 785
-e 994
-o 350
-r 436
-i 1388
-n 222
-2 29
-s 352
-. 327
-t 464
-« 280
-» 274
-c 269
-9 6
-l 238
-5 12
-m 451
-h 171
-4 47
-3 8
-6 8
-d 176
-8 2
-u 166
-p 57
-ϊ 29
-g 144
-b 157
-k 3080
-- 7
-7 7
-y 217
-v 84
-w 72
-: 64
-, 64
-f 60
-' 25
-/ 51
-z 35
-j 23
-x 601
-% 20
-ΐ 34
-q 18
-΄ 12
-ϋ 4
-· 9
-² 8
-[ 6
-õ 6
-] 6
-í 5
-! 4
-; 4
-– 2
-é 2
-& 2
-° 2
-$ 2
-+ 1
-́ 3
-â 1
+<s>
+<pad>
+</s>
+<unk>
+|
+α
+τ
+ο
+ι
+ε
+ν
+σ
+ρ
+π
+κ
+η
+ς
+μ
+υ
+λ
+ί
+ό
+ά
+έ
+γ
+δ
+ή
+ω
+χ
+ύ
+θ
+φ
+ώ
+β
+ξ
+ζ
+0
+a
+1
+ψ
+e
+o
+r
+i
+n
+2
+s
+.
+t
+«
+»
+c
+9
+l
+5
+m
+h
+4
+3
+6
+d
+8
+u
+p
+ϊ
+g
+b
+k
+-
+7
+y
+v
+w
+:
+,
+f
+'
+/
+z
+j
+x
+%
+ΐ
+q
+΄
+ϋ
+·
+²
+[
+õ
+]
+í
+!
+;
+–
+é
+&
+°
+$
++
+́
+â

mms-1b-all/eng/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/eng/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/eng/tokens.txt

@@ -1,150 +1,154 @@
-| 715078
-e 377441
-t 272576
-a 226897
-o 238560
-i 187349
-n 195266
-s 182431
-r 161181
-h 223160
-l 107967
-d 133527
-c 58150
-u 85202
-m 72055
-f 69590
-p 44051
-g 58128
-y 63065
-w 75423
-b 45594
-v 31157
-k 18042
-0 106
-x 1852
-j 9196
-1 39
-' 2091
-- 380
-z 1301
-q 880
-2 32
-9 204
-. 173
-5 2
-4 22
-6 11
-3 2
-8 134
-7 97
-, 76
-/ 35
-: 35
-% 16
-$ 13
-á 87
-í 67
-— 59
-; 6
-¥ 6
-ü 181
-é 316
-+ 5
-& 4
-° 4
-[ 4
-] 4
-– 692
-" 4
-” 4
-ç 44
-’ 3
-ã 12
-ó 71
-£ 2
-õ 1
-ú 17
-​ 2
-‘ 1
-ł 10
-ö 100
-! 1
-² 1
-̇ 1
-ä 113
-è 67
-ō 37
-â 35
-ß 30
-ñ 23
-à 22
-ï 16
-ô 15
-ë 11
-ê 11
-č 11
-š 10
-ø 8
-` 8
-́ 10
-ć 7
-ž 6
-œ 6
-î 6
-ð 5
-û 5
-ā 5
-ū 5
-ă 5
-ı 4
-ș 4
-ò 3
-α 3
-ī 3
-ř 2
-κ 2
-æ 2
-ạ 2
-ý 2
-и 2
-к 2
-ʻ 2
-ş 2
-π 2
-ń 2
-ę 1
-ő 1
-ṃ 1
-ụ 1
-å 1
-в 1
-е 1
-л 1
-й 1
-н 1
-я 1
-з 1
-ь 1
-þ 1
-时 1
-尚 1
-先 1
-生 1
-ň 1
-ə 1
-§ 1
-ě 1
-χ 1
-≡ 1
-ē 1
-а 1
-ả 1
-ị 1
-נ 1
-ע 1
-京 1
-都 1
-大 1
-阪 1
-ğ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+t
+a
+o
+i
+n
+s
+r
+h
+l
+d
+c
+u
+m
+f
+p
+g
+y
+w
+b
+v
+k
+0
+x
+j
+1
+'
+-
+z
+q
+2
+9
+.
+5
+4
+6
+3
+8
+7
+,
+/
+:
+%
+$
+á
+í
+—
+;
+¥
+ü
+é
++
+&
+°
+[
+]
+–
+"
+”
+ç
+’
+ã
+ó
+£
+õ
+ú
+​
+‘
+ł
+ö
+!
+²
+̇
+ä
+è
+ō
+â
+ß
+ñ
+à
+ï
+ô
+ë
+ê
+č
+š
+ø
+`
+́
+ć
+ž
+œ
+î
+ð
+û
+ā
+ū
+ă
+ı
+ș
+ò
+α
+ī
+ř
+κ
+æ
+ạ
+ý
+и
+к
+ʻ
+ş
+π
+ń
+ę
+ő
+ṃ
+ụ
+å
+в
+е
+л
+й
+н
+я
+з
+ь
+þ
+时
+尚
+先
+生
+ň
+ə
+§
+ě
+χ
+≡
+ē
+а
+ả
+ị
+נ
+ע
+京
+都
+大
+阪
+ğ

mms-1b-all/est/tokens.txt

@@ -1,70 +1,74 @@
-| 40392
-a 30962
-e 28079
-i 24872
-s 22127
-t 18906
-l 15513
-u 14832
-n 12552
-k 12253
-d 10238
-o 9962
-m 9419
-r 7726
-v 6198
-p 4616
-g 4878
-h 4156
-j 4286
-ä 3469
-õ 2989
-b 2300
-ü 1737
-ö 897
-f 404
-0 570
-1 17
-c 210
-- 419
-2 258
-y 89
-9 200
-" 199
-w 59
-5 160
-. 157
-4 154
-3 143
-8 136
-6 132
-' 42
-7 87
-z 22
-x 21
-š 54
-/ 39
-ž 19
-, 34
-– 29
-q 5
-: 19
-% 11
-; 10
-’ 7
-! 6
-” 5
-— 4
-+ 4
-ç 3
-ł 3
-é 3
-¥ 3
-[ 2
-] 2
-² 2
-° 2
-í 2
-ã 2
-ú 1
-ô 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+e
+i
+s
+t
+l
+u
+n
+k
+d
+o
+m
+r
+v
+p
+g
+h
+j
+ä
+õ
+b
+ü
+ö
+f
+0
+1
+c
+-
+2
+y
+9
+"
+w
+5
+.
+4
+3
+8
+6
+'
+7
+z
+x
+š
+/
+ž
+,
+–
+q
+:
+%
+;
+’
+!
+”
+—
++
+ç
+ł
+é
+¥
+[
+]
+²
+°
+í
+ã
+ú
+ô

mms-1b-all/fas/tokens.txt

@@ -1,114 +1,118 @@
-| 285356
-ا 145657
-ی 93122
-ر 78013
-د 90966
-ن 78737
-ه 64212
-و 65098
-ت 40294
-م 60458
-ب 47120
-س 32463
-ک 18745
-ل 15851
-ش 26504
-ز 20254
-‌ 5255
-گ 14180
-ف 12247
-ق 9028
-خ 19780
-ع 11076
-ج 7140
-ح 7897
-پ 8853
-آ 12676
-ط 3975
-ص 3183
-چ 5510
-غ 1451
-ض 1709
-۰ 518
-ظ 1129
-ذ 1160
-ث 907
-۱ 386
-ً 355
-ئ 711
-ژ 133
-۲ 258
-، 239
-0 196
-۹ 163
-۵ 140
-1 122
-۳ 120
-أ 228
-۴ 104
-۶ 103
-۸ 95
-۷ 81
-4 77
-. 74
-a 4
-5 70
-- 70
-2 61
-3 57
-« 51
-» 51
-8 51
-e 3
-9 46
-6 45
-s 1
-i 6
-r 3
-ء 78
-o 2
-, 35
-n 2
-: 34
-l 5
-d 1
-t 7
-/ 24
-ِ 24
-h 3
-ؤ 129
-7 19
-p 19
-m 18
-b 2
-y 15
-u 2
-k 14
-g 1
-c 3
-v 11
-w 10
-x 2
-ّ 8
-؛ 7
-% 6
-َ 5
-f 5
-٪ 5
-q 4
-‎ 4
-õ 4
-j 3
-+ 3
-ُ 3
-ۀ 1487
-& 2
-z 2
-ي 2
-ك 10892
-ى 25
-ٔ 1651
-ة 4
-– 1
-ے 1
-' 456
+<s>
+<pad>
+</s>
+<unk>
+|
+ا
+ی
+ر
+د
+ن
+ه
+و
+ت
+م
+ب
+س
+ک
+ل
+ش
+ز
+‌
+گ
+ف
+ق
+خ
+ع
+ج
+ح
+پ
+آ
+ط
+ص
+چ
+غ
+ض
+۰
+ظ
+ذ
+ث
+۱
+ً
+ئ
+ژ
+۲
+،
+0
+۹
+۵
+1
+۳
+أ
+۴
+۶
+۸
+۷
+4
+.
+a
+5
+-
+2
+3
+«
+»
+8
+e
+9
+6
+s
+i
+r
+ء
+o
+,
+n
+:
+l
+d
+t
+/
+ِ
+h
+ؤ
+7
+p
+m
+b
+y
+u
+k
+g
+c
+v
+w
+x
+ّ
+؛
+%
+َ
+f
+٪
+q
+‎
+õ
+j
++
+ُ
+ۀ
+&
+z
+ي
+ك
+ى
+ٔ
+ة
+–
+ے
+'

mms-1b-all/fin/tokens.txt

@@ -1,67 +1,71 @@
-| 107927
-a 78912
-i 65411
-t 60794
-n 63683
-e 60951
-s 48002
-l 37107
-o 29344
-k 34494
-u 30838
-ä 37334
-m 22813
-r 10901
-v 14546
-j 17463
-p 10018
-h 16606
-y 7997
-d 5966
-ö 2138
-g 710
-0 639
-b 411
-- 198
-c 46
-1 440
-f 434
-2 295
-9 194
-w 5
-5 165
-4 145
-6 144
-. 144
-3 142
-8 139
-7 91
-z 3
-: 69
-x 2
-q 11
-‎ 33
-, 32
-– 3
-' 241
-/ 17
-š 14
-ž 12
-ü 6
-× 6
-ł 5
-ç 5
-õ 4
-ú 4
-é 3
-" 3
-[ 3
-] 3
-í 3
-ã 3
-̇ 2
-% 2
-ë 2
-+ 2
-á 2
-ó 2
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+i
+t
+n
+e
+s
+l
+o
+k
+u
+ä
+m
+r
+v
+j
+p
+h
+y
+d
+ö
+g
+0
+b
+-
+c
+1
+f
+2
+9
+w
+5
+4
+6
+.
+3
+8
+7
+z
+:
+x
+q
+‎
+,
+–
+'
+/
+š
+ž
+ü
+×
+ł
+ç
+õ
+ú
+é
+"
+[
+]
+í
+ã
+̇
+%
+ë
++
+á
+ó

mms-1b-all/fra/tokens.txt

@@ -1,310 +1,314 @@
-| 779611
-e 511720
-s 313151
-a 234502
-n 232849
-t 228011
-i 241272
-r 214878
-u 239417
-l 181838
-o 192066
-d 122108
-c 104346
-p 98231
-é 54650
-m 91185
-v 71001
-g 27141
-f 36337
-' 42200
-q 42528
-b 21415
-h 28401
-à 17744
-x 13682
-è 13132
-y 7338
-j 27249
-0 631
-z 11081
-k 311
-ê 8277
-- 9876
-1 174
-2 120
-’ 324
-« 285
-» 285
-w 17706
-9 26
-ô 1699
-5 64
-4 128
-3 30
-. 184
-6 23
-8 15
-ç 1711
-î 2526
-7 21
-â 1138
-ù 1012
-û 778
-: 53
-ï 943
-" 51
-/ 44
-, 37
-œ 1815
-% 24
-; 21
-! 12
-° 11
-ü 69
-í 906
-á 1274
-– 292
-õ 19
-? 5
-ë 313
-[ 4
-] 4
-— 874
-ú 197
-+ 3
-ã 131
-$ 3
-ł 261
-ó 783
-² 2
-ö 904
-æ 119
-ÿ 30
-ō 585
-ä 459
-š 335
-ć 309
-č 256
-ñ 224
-ū 187
-ø 163
-ā 142
-ń 123
-ž 118
-ă 117
-å 107
-ș 94
-ß 89
-́ 74
-ş 73
-ı 69
-ř 65
-ț 62
-ý 57
-ð 45
-ś 45
-ż 42
-ę 42
-đ 42
-ī 42
-ò 41
-ą 37
-ě 33
-ő 27
-ė 25
-` 25
-ğ 24
-̇ 20
-α 20
-β 20
-ē 19
-ʻ 17
-ź 17
-ì 16
-ʿ 12
-ṣ 12
-ņ 12
-þ 11
-ʼ 10
-ŏ 9
-σ 8
-π 8
-ả 8
-ň 8
-ư 7
-ʾ 7
-ţ 7
-ː 6
-ễ 6
-γ 6
-ť 6
-ơ 5
-ĩ 5
-ệ 5
-ω 5
-δ 5
-κ 5
-μ 4
-ů 4
-λ 4
-ν 4
-ṭ 4
-ạ 4
-ļ 4
-ḥ 4
-∆ 4
-ľ 4
-ầ 3
-ṇ 3
-ộ 3
-ǃ 3
-ε 3
-ј 3
-ə 3
-± 3
-ل 3
-ا 3
-г 3
-↔ 3
-ǔ 2
-ồ 2
-ề 2
-χ 2
-ờ 2
-ǹ 2
-ρ 2
-е 2
-а 2
-≥ 2
-′ 2
-® 2
-ũ 2
-ṯ 2
-ď 2
-τ 2
-ʉ 2
-ο 2
-ċ 2
-і 2
-ψ 2
-ử 2
-ي 2
-φ 2
-ن 2
-ደ 2
-̱ 2
-ị 2
-星 2
-р 2
-ǎ 2
-の 1
-ひ 1
-ổ 1
-ӌ 1
-ቀ 1
-ű 1
-к 1
-牡 1
-丹 1
-ŵ 1
-ҫ 1
-ậ 1
-я 1
-ḍ 1
-ṅ 1
-ķ 1
-ǫ 1
-ŭ 1
-ế 1
-ɨ 1
-ủ 1
-ǀ 1
-и 1
-з 1
-м 1
-н 1
-め 1
-や 1
-џ 1
-ц 1
-ч 1
-∞ 1
-ẵ 1
-ⱎ 1
-ⱅ 1
-ứ 1
-§ 1
-⋅ 1
-ĺ 1
-☉ 1
-宇 1
-津 1
-保 1
-⊨ 1
-υ 1
-п 1
-ι 1
-ό 1
-ς 1
-西 1
-甌 1
-ከ 1
-厳 1
-三 1
-̐ 1
-い 1
-ố 1
-م 1
-ة 1
-ب 1
-ر 1
-و 1
-د 1
-ħ 1
-∅ 1
-ẓ 1
-∼ 1
-θ 1
-む 1
-も 1
-ጀ 1
-̠ 1
-ζ 1
-գ 1
-北 1
-京 1
-美 1
-术 1
-馆 1
-た 1
-つ 1
-ợ 1
-文 1
-へ 1
-ま 1
-ġ 1
-η 1
-ʽ 1
-э 1
-ớ 1
-ắ 1
-ụ 1
-ỳ 1
-杜 1
-乃 1
-扬 1
-ų 1
-∈ 1
-զ 1
-青 1
-貴 1
-う 1
-ゔ 1
-ꝑ 1
-₽ 1
-ወ 1
-‐ 1
-∨ 1
-̲ 1
-ɑ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+s
+a
+n
+t
+i
+r
+u
+l
+o
+d
+c
+p
+é
+m
+v
+g
+f
+'
+q
+b
+h
+à
+x
+è
+y
+j
+0
+z
+k
+ê
+-
+1
+2
+’
+«
+»
+w
+9
+ô
+5
+4
+3
+.
+6
+8
+ç
+î
+7
+â
+ù
+û
+:
+ï
+"
+/
+,
+œ
+%
+;
+!
+°
+ü
+í
+á
+–
+õ
+?
+ë
+[
+]
+—
+ú
++
+ã
+$
+ł
+ó
+²
+ö
+æ
+ÿ
+ō
+ä
+š
+ć
+č
+ñ
+ū
+ø
+ā
+ń
+ž
+ă
+å
+ș
+ß
+́
+ş
+ı
+ř
+ț
+ý
+ð
+ś
+ż
+ę
+đ
+ī
+ò
+ą
+ě
+ő
+ė
+`
+ğ
+̇
+α
+β
+ē
+ʻ
+ź
+ì
+ʿ
+ṣ
+ņ
+þ
+ʼ
+ŏ
+σ
+π
+ả
+ň
+ư
+ʾ
+ţ
+ː
+ễ
+γ
+ť
+ơ
+ĩ
+ệ
+ω
+δ
+κ
+μ
+ů
+λ
+ν
+ṭ
+ạ
+ļ
+ḥ
+∆
+ľ
+ầ
+ṇ
+ộ
+ǃ
+ε
+ј
+ə
+±
+ل
+ا
+г
+↔
+ǔ
+ồ
+ề
+χ
+ờ
+ǹ
+ρ
+е
+а
+≥
+′
+®
+ũ
+ṯ
+ď
+τ
+ʉ
+ο
+ċ
+і
+ψ
+ử
+ي
+φ
+ن
+ደ
+̱
+ị
+星
+р
+ǎ
+の
+ひ
+ổ
+ӌ
+ቀ
+ű
+к
+牡
+丹
+ŵ
+ҫ
+ậ
+я
+ḍ
+ṅ
+ķ
+ǫ
+ŭ
+ế
+ɨ
+ủ
+ǀ
+и
+з
+м
+н
+め
+や
+џ
+ц
+ч
+∞
+ẵ
+ⱎ
+ⱅ
+ứ
+§
+⋅
+ĺ
+☉
+宇
+津
+保
+⊨
+υ
+п
+ι
+ό
+ς
+西
+甌
+ከ
+厳
+三
+̐
+い
+ố
+م
+ة
+ب
+ر
+و
+د
+ħ
+∅
+ẓ
+∼
+θ
+む
+も
+ጀ
+̠
+ζ
+գ
+北
+京
+美
+术
+馆
+た
+つ
+ợ
+文
+へ
+ま
+ġ
+η
+ʽ
+э
+ớ
+ắ
+ụ
+ỳ
+杜
+乃
+扬
+ų
+∈
+զ
+青
+貴
+う
+ゔ
+ꝑ
+₽
+ወ
+‐
+∨
+̲
+ɑ

mms-1b-all/ful/tokens.txt

@@ -1,81 +1,85 @@
-| 1053558
-a 768845
-e 457100
-i 460504
-o 524339
-n 456889
-d 170262
-u 238410
-m 276010
-t 132454
-b 65658
-r 139929
-l 169588
-h 80970
-k 166380
-j 64655
-g 99848
-w 117919
-s 73230
-y 105588
-f 46579
-ɗ 160919
-ɓ 125560
-p 17579
-c 20297
-v 8204
-0 191
-’ 712
-1 37
-. 532
-z 130
-' 46636
-2 34
-- 5826
-9 4
-5 13
-4 38
-3 12
-6 7
-8 3
-, 164
-q 336
-7 6
-” 78
-x 1
-: 68
-‘ 40
-; 40
-` 33
-/ 29
-? 20
-$ 19
-% 11
-– 12
-! 9
-ü 9
-é 5
-— 4919
-õ 4
-á 4
-× 4
-ã 3
-[ 3
-] 3
-ı 3
-+ 3
-í 3
-& 3
-£ 3
-ç 3
-ş 3
-¥ 3
-è 2
-ŋ 1946
-ó 2
-ƴ 12323
-° 2
-_ 2
-ú 2
-ɲ 2128
-‐ 70
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+e
+i
+o
+n
+d
+u
+m
+t
+b
+r
+l
+h
+k
+j
+g
+w
+s
+y
+f
+ɗ
+ɓ
+p
+c
+v
+0
+’
+1
+.
+z
+'
+2
+-
+9
+5
+4
+3
+6
+8
+,
+q
+7
+”
+x
+:
+‘
+;
+`
+/
+?
+$
+%
+–
+!
+ü
+é
+—
+õ
+á
+×
+ã
+[
+]
+ı
++
+í
+&
+£
+ç
+ş
+¥
+è
+ŋ
+ó
+ƴ
+°
+_
+ú
+ɲ
+‐

mms-1b-all/gle/tokens.txt

@@ -1,74 +1,78 @@
-| 4007
-a 2801
-i 1608
-n 1367
-h 1438
-r 1006
-t 796
-e 840
-s 829
-c 732
-o 747
-l 734
-d 566
-g 588
-u 449
-m 533
-á 434
-í 358
-b 550
-é 293
-f 243
-ú 134
-ó 151
-p 95
-- 51
-0 591
-1 448
-' 17
-k 1
-v 4
-2 287
-y 5
-9 184
-w 2
-. 178
-5 152
-j 2
-6 141
-4 137
-8 127
-3 121
-7 88
-z 76
-x 70
-​ 66
-, 56
-/ 48
-: 42
-q 36
-$ 12
-ü 10
-’ 8
-; 8
-% 7
-— 7
-" 5
-ç 5
-õ 4
-+ 4
-& 4
-ö 3
-” 3
-£ 3
-‘ 3
-° 3
-– 3
-¥ 3
-̇ 2
-ã 2
-! 2
-² 1
-[ 1
-] 1
-ł 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+i
+n
+h
+r
+t
+e
+s
+c
+o
+l
+d
+g
+u
+m
+á
+í
+b
+é
+f
+ú
+ó
+p
+-
+0
+1
+'
+k
+v
+2
+y
+9
+w
+.
+5
+j
+6
+4
+8
+3
+7
+z
+x
+​
+,
+/
+:
+q
+$
+ü
+’
+;
+%
+—
+"
+ç
+õ
++
+&
+ö
+”
+£
+‘
+°
+–
+¥
+̇
+ã
+!
+²
+[
+]
+ł

mms-1b-all/glg/tokens.txt

@@ -1,72 +1,76 @@
-| 25658
-a 16122
-e 14834
-o 13238
-s 9715
-n 9315
-r 8612
-i 8457
-d 6413
-t 6327
-c 5875
-u 4672
-l 4165
-m 3896
-p 3476
-b 1597
-v 1465
-g 1350
-f 1333
-x 1043
-q 811
-h 847
-ó 925
-í 882
-á 870
-é 828
-z 504
-ú 362
-ñ 402
-0 500
-1 362
-k 6
-2 238
-y 6
-w 3
-« 156
-» 152
-9 145
-5 133
-4 124
-3 121
-j 3
-8 111
-6 105
-. 102
-7 68
-: 56
-- 6
-/ 28
-, 27
-' 2
-% 22
-ü 2
-; 16
-º 12
-! 5
-° 5
-& 4
-ª 3
-ç 3
-¥ 3
-? 2
-" 2
-– 9
-ł 2
-+ 2
-ã 1
-ö 1
-[ 1
-] 1
-² 1
-— 19
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+e
+o
+s
+n
+r
+i
+d
+t
+c
+u
+l
+m
+p
+b
+v
+g
+f
+x
+q
+h
+ó
+í
+á
+é
+z
+ú
+ñ
+0
+1
+k
+2
+y
+w
+«
+»
+9
+5
+4
+3
+j
+8
+6
+.
+7
+:
+-
+/
+,
+'
+%
+ü
+;
+º
+!
+°
+&
+ª
+ç
+¥
+?
+"
+–
+ł
++
+ã
+ö
+[
+]
+²
+—

mms-1b-all/guj/tokens.txt

@@ -1,120 +1,124 @@
-| 128150
-ા 57941
-ે 53681
-ર 31768
-ન 32329
-્ 25417
-ક 21291
-ી 21790
-ત 32763
-મ 23524
-વ 17406
-ો 18805
-સ 14274
-ં 20817
-ય 13943
-પ 17675
-િ 9067
-લ 6771
-ુ 14440
-જ 10323
-હ 10368
-ટ 3053
-થ 9681
-છ 7412
-અ 5431
-શ 7720
-ગ 4010
-બ 4455
-દ 6233
-ણ 7700
-આ 5712
-ડ 2160
-એ 5360
-ધ 3335
-ઓ 5659
-ચ 2481
-ૂ 2634
-ફ 1083
-ળ 2778
-ખ 3576
-ભ 3088
-ષ 1962
-ઈ 4877
-ઇ 437
-ઉ 1315
-0 762
-" 744
-ઝ 257
-ઘ 992
-1 573
-. 483
-ૃ 699
-2 365
-- 15
-9 251
-ઠ 700
-ૌ 64
-ૈ 189
-ૉ 219
-5 215
-, 208
-3 208
-4 199
-ૅ 193
-8 174
-6 174
-7 123
-ઢ 243
-ઊ 497
-ઑ 98
-ઞ 333
-: 57
-i 52
-a 45
-s 45
-p 44
-/ 41
-' 550
-n 37
-e 34
-o 32
-c 31
-ઍ 26
-m 25
-t 25
-ઔ 23
-d 23
-ઃ 130
-g 21
-r 21
-u 20
-b 18
-; 15
-v 15
-f 13
-ઋ 8
-$ 12
-x 12
-ઐ 2
-w 11
-h 10
-k 7
-% 7
-l 7
-y 6
-! 6
-+ 5
-[ 3
-] 3
-j 3
-¥ 3
-° 2
-z 2
-q 2
-& 2
-઼ 2
-૮ 2
-૪ 2
-૬ 2
-õ 2
+<s>
+<pad>
+</s>
+<unk>
+|
+ા
+ે
+ર
+ન
+્
+ક
+ી
+ત
+મ
+વ
+ો
+સ
+ં
+ય
+પ
+િ
+લ
+ુ
+જ
+હ
+ટ
+થ
+છ
+અ
+શ
+ગ
+બ
+દ
+ણ
+આ
+ડ
+એ
+ધ
+ઓ
+ચ
+ૂ
+ફ
+ળ
+ખ
+ભ
+ષ
+ઈ
+ઇ
+ઉ
+0
+"
+ઝ
+ઘ
+1
+.
+ૃ
+2
+-
+9
+ઠ
+ૌ
+ૈ
+ૉ
+5
+,
+3
+4
+ૅ
+8
+6
+7
+ઢ
+ઊ
+ઑ
+ઞ
+:
+i
+a
+s
+p
+/
+'
+n
+e
+o
+c
+ઍ
+m
+t
+ઔ
+d
+ઃ
+g
+r
+u
+b
+;
+v
+f
+ઋ
+$
+x
+ઐ
+w
+h
+k
+%
+l
+y
+!
++
+[
+]
+j
+¥
+°
+z
+q
+&
+઼
+૮
+૪
+૬
+õ

mms-1b-all/hau/tokens.txt

@@ -1,80 +1,84 @@
-a 501625
-| 468882
-n 158466
-i 153679
-k 109232
-u 131202
-r 62705
-s 90952
-d 70888
-y 71421
-m 80827
-t 43958
-e 50621
-w 44242
-o 31212
-b 49339
-h 39114
-g 29002
-l 30986
-c 22641
-f 14587
-z 17982
-j 11483
-ƙ 10464
-' 3158
-ɗ 12547
-0 760
-p 61
-1 589
-- 460
-2 370
-v 21
-9 1
-ɓ 2581
-5 224
-4 202
-3 198
-8 178
-6 6
-. 158
-7 2
-, 93
-x 4
-’ 68
-/ 53
-q 3
-: 51
-” 30
-$ 18
-ü 13
-; 12
-ƴ 17
-% 11
-‘ 10
-á 8
-í 1
-õ 6
-° 5
-[ 5
-] 5
-+ 4
-< 4
-> 4
-ç 3
-¥ 3
-é 3
-ã 3
-£ 3
-² 2
-ó 2
-! 2
-ú 2
-& 2
-ā 2104
-ö 1
-ʻ 9
-— 10
-ˈ 5770
-ă 2449
-ū 133
+<s>
+<pad>
+</s>
+<unk>
+a
+|
+n
+i
+k
+u
+r
+s
+d
+y
+m
+t
+e
+w
+o
+b
+h
+g
+l
+c
+f
+z
+j
+ƙ
+'
+ɗ
+0
+p
+1
+-
+2
+v
+9
+ɓ
+5
+4
+3
+8
+6
+.
+7
+,
+x
+’
+/
+q
+:
+”
+$
+ü
+;
+ƴ
+%
+‘
+á
+í
+õ
+°
+[
+]
++
+<
+>
+ç
+¥
+é
+ã
+£
+²
+ó
+!
+ú
+&
+ā
+ö
+ʻ
+—
+ˈ
+ă
+ū

mms-1b-all/heb/tokens.txt

@@ -1,86 +1,90 @@
-| 178590
-י 70684
-ו 77246
-ה 61333
-ל 53178
-ר 34064
-ת 36763
-מ 33943
-ב 34892
-א 61945
-ש 36729
-ם 34431
-נ 25399
-ע 22838
-ד 20085
-ק 9648
-ח 16695
-כ 23175
-פ 8814
-ס 6628
-ג 7043
-ט 4381
-צ 6053
-ן 9521
-ז 5422
-ך 5010
-0 795
-- 102
-1 579
-ף 1291
-' 320
-2 378
-" 373
-ץ 898
-a 244
-9 240
-5 216
-4 208
-. 208
-n 188
-6 184
-3 177
-8 166
-o 152
-r 150
-e 147
-t 140
-7 123
-i 109
-l 106
-p 99
-s 91
-, 90
-c 88
-d 73
-g 72
-m 71
-u 71
-h 60
-: 53
-b 50
-־ 32
-v 31
-k 30
-/ 26
-f 24
-y 19
-w 18
-% 16
-j 9
-z 8
-x 8
-; 6
-õ 4
-$ 4
-ּ 3
-+ 3
-— 591
-[ 3
-] 3
-¥ 3
-q 2
-! 2
-– 2
-? 1
-í 1
+<s>
+<pad>
+</s>
+<unk>
+|
+י
+ו
+ה
+ל
+ר
+ת
+מ
+ב
+א
+ש
+ם
+נ
+ע
+ד
+ק
+ח
+כ
+פ
+ס
+ג
+ט
+צ
+ן
+ז
+ך
+0
+-
+1
+ף
+'
+2
+"
+ץ
+a
+9
+5
+4
+.
+n
+6
+3
+8
+o
+r
+e
+t
+7
+i
+l
+p
+s
+,
+c
+d
+g
+m
+u
+h
+:
+b
+־
+v
+k
+/
+f
+y
+w
+%
+j
+z
+x
+;
+õ
+$
+ּ
++
+—
+[
+]
+¥
+q
+!
+–
+?
+í

mms-1b-all/hin/tokens.txt

@@ -1,123 +1,127 @@
-| 477390
-ा 141913
-क 112716
-े 133876
-र 104411
-् 67425
-स 75384
-ि 62096
-न 79200
-ं 54898
-ह 91419
-ी 60431
-त 65279
-म 65207
-ो 58317
-ल 37165
-य 45862
-प 41575
-व 37047
-ज 29217
-ै 25288
-द 29589
-ब 27459
-ग 23241
-ट 5235
-ु 39388
-ए 15249
-़ 12501
-श 19255
-अ 12741
-ड 7893
-ू 13642
-च 13773
-थ 12342
-आ 10285
-इ 8143
-भ 12904
-औ 12910
-ध 6326
-फ 4892
-ख 10172
-उ 19546
-ष 4452
-ई 3718
-ण 2631
-छ 4979
-0 93
-ॉ 24
-ौ 2543
-1 22
-- 1836
-ओ 2672
-घ 1400
-2 19
-ठ 3217
-ृ 1073
-ढ 1447
-9 133
-5 132
-4 14
-ऐ 1523
-झ 3230
-ऑ 12
-3 3
-6 104
-8 2
-ञ 782
-। 79
-. 68
-a 93
-7 61
-, 57
-o 83
-ँ 9708
-ऊ 1118
-c 27
-t 44
-l 4
-n 32
-e 89
-i 96
-r 57
-/ 27
-p 46
-s 45
-m 29
-: 24
-​ 20
-f 35
-ः 303
-' 541
-g 20
-u 11
-d 19
-b 24
-” 12
-h 2
-% 8
-w 44
-y 11
-¥ 6
-x 8
-+ 4
-v 25
-j 6
-$ 3
-‍ 4794
-! 3
-; 3
-á 3
-° 2
-ú 2
-k 26
-z 2
-õ 2
-— 15
-q 1
-£ 1
-ऋ 6
-ॅ 12
-` 6
-ॆ 2
-ऩ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+ा
+क
+े
+र
+्
+स
+ि
+न
+ं
+ह
+ी
+त
+म
+ो
+ल
+य
+प
+व
+ज
+ै
+द
+ब
+ग
+ट
+ु
+ए
+़
+श
+अ
+ड
+ू
+च
+थ
+आ
+इ
+भ
+औ
+ध
+फ
+ख
+उ
+ष
+ई
+ण
+छ
+0
+ॉ
+ौ
+1
+-
+ओ
+घ
+2
+ठ
+ृ
+ढ
+9
+5
+4
+ऐ
+झ
+ऑ
+3
+6
+8
+ञ
+।
+.
+a
+7
+,
+o
+ँ
+ऊ
+c
+t
+l
+n
+e
+i
+r
+/
+p
+s
+m
+:
+​
+f
+ः
+'
+g
+u
+d
+b
+”
+h
+%
+w
+y
+¥
+x
++
+v
+j
+$
+‍
+!
+;
+á
+°
+ú
+k
+z
+õ
+—
+q
+£
+ऋ
+ॅ
+`
+ॆ
+ऩ

mms-1b-all/hrv/tokens.txt

@@ -1,72 +1,76 @@
-| 284886
-a 177712
-i 160492
-e 138045
-o 152040
-n 105258
-j 80907
-r 87770
-t 79334
-s 75968
-u 69947
-l 46697
-k 52771
-v 56145
-d 54249
-m 56665
-p 50821
-z 29092
-g 25714
-b 20213
-c 14118
-č 6972
-h 11600
-š 6948
-ž 5480
-ć 4335
-f 3522
-0 858
-. 835
-đ 1984
-" 816
-1 641
-2 406
-y 405
-w 438
-9 283
-- 265
-5 245
-4 222
-3 208
-6 204
-8 190
-7 139
-: 100
-/ 66
-x 179
-, 47
-q 10
-' 3
-​ 16
-; 15
-– 12
-% 11
-ü 8
-í 8
-° 8
-! 7
-á 3
-¥ 6
-ç 6
-õ 6
-ö 1
-” 5
-+ 5
-é 4
-ú 3
-[ 3
-] 3
-? 2
-ł 2
-² 2
-ó 2
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+i
+e
+o
+n
+j
+r
+t
+s
+u
+l
+k
+v
+d
+m
+p
+z
+g
+b
+c
+č
+h
+š
+ž
+ć
+f
+0
+.
+đ
+"
+1
+2
+y
+w
+9
+-
+5
+4
+3
+6
+8
+7
+:
+/
+x
+,
+q
+'
+​
+;
+–
+%
+ü
+í
+°
+!
+á
+¥
+ç
+õ
+ö
+”
++
+é
+ú
+[
+]
+?
+ł
+²
+ó

mms-1b-all/hun/tokens.txt

@@ -1,72 +1,76 @@
-| 107422
-e 66431
-a 51633
-t 54173
-l 32252
-s 32826
-n 36048
-k 35824
-o 21820
-r 20066
-z 24615
-i 24601
-á 17697
-g 21773
-é 20502
-m 24249
-y 12637
-b 9398
-v 10581
-d 13876
-h 10004
-ö 6306
-j 8046
-ó 4435
-u 5919
-p 4722
-f 4358
-ő 5050
-c 2091
-í 3759
-ü 3701
-ú 1459
-0 679
-ű 670
-1 562
-- 205
-2 326
-. 320
-" 285
-w 73
-9 241
-5 208
-4 196
-3 180
-6 174
-8 173
-x 20
-7 112
-/ 55
-, 40
-q 6
-” 35
-: 34
-' 2
-% 17
-° 8
-õ 6
-– 133
-— 5
-! 4
-; 4
-+ 4
-ç 3
-ã 3
-​ 3
-[ 3
-] 3
-² 2
-̇ 2
-? 2
-× 1
-û 1
+<s>
+<pad>
+</s>
+<unk>
+|
+e
+a
+t
+l
+s
+n
+k
+o
+r
+z
+i
+á
+g
+é
+m
+y
+b
+v
+d
+h
+ö
+j
+ó
+u
+p
+f
+ő
+c
+í
+ü
+ú
+0
+ű
+1
+-
+2
+.
+"
+w
+9
+5
+4
+3
+6
+8
+x
+7
+/
+,
+q
+”
+:
+'
+%
+°
+õ
+–
+—
+!
+;
++
+ç
+ã
+​
+[
+]
+²
+̇
+?
+×
+û

mms-1b-all/hye/tokens.txt

@@ -1,99 +1,103 @@
-| 3739
-ա 3846
-ն 2452
-ր 1991
-ո 1758
-ե 1837
-ի 1256
-ւ 1266
-մ 988
-կ 915
-տ 765
-յ 620
-վ 523
-ս 508
-լ 403
-հ 461
-ց 373
-թ 357
-ք 308
-ը 371
-դ 323
-գ 312
-ղ 310
-պ 272
-բ 287
-է 366
-ծ 227
-շ 223
-ռ 147
-և 2606
-զ 160
-խ 170
-չ 140
-ջ 149
-փ 71
-ձ 82
-ժ 81
-օ 38
-ճ 70
-0 757
-- 611
-1 568
-ֆ 23
-2 350
-: 343
-9 234
-5 206
-4 192
-3 179
-8 176
-6 170
-՝ 158
-։ 154
-7 119
-» 116
-, 110
-« 105
-. 102
-n 81
-a 71
-o 62
-/ 60
-i 58
-e 55
-p 46
-r 45
-c 41
-d 41
-` 36
-t 35
-g 32
-s 25
-h 24
-' 23
-l 23
-u 21
-v 21
-․ 19
-% 17
-f 15
-b 13
-՛ 12
-m 10
-w 10
-k 7
-x 7
-’ 6
-j 5
-+ 5
-õ 4
-y 4
-​ 4
-! 3
-° 3
-— 2
-[ 2
-] 2
-í 2
-ó 2
+<s>
+<pad>
+</s>
+<unk>
+|
+ա
+ն
+ր
+ո
+ե
+ի
+ւ
+մ
+կ
+տ
+յ
+վ
+ս
+լ
+հ
+ց
+թ
+ք
+ը
+դ
+գ
+ղ
+պ
+բ
+է
+ծ
+շ
+ռ
+և
+զ
+խ
+չ
+ջ
+փ
+ձ
+ժ
+օ
+ճ
+0
+-
+1
+ֆ
+2
+:
+9
+5
+4
+3
+8
+6
+՝
+։
+7
+»
+,
+«
+.
+n
+a
+o
+/
+i
+e
+p
+r
+c
+d
+`
+t
+g
+s
+h
+'
+l
+u
+v
+․
+%
+f
+b
+՛
+m
+w
+k
+x
+’
+j
++
+õ
+y
+​
+!
+°
+—
+[
+]
+í
+ó

mms-1b-all/ibo/tokens.txt

@@ -1,85 +1,89 @@
-| 65791
-a 41220
-e 27079
-n 24818
-i 17595
-k 13133
-ụ 12672
-r 12164
-m 11779
-o 11655
-ọ 10071
-u 9666
-h 9326
-g 9315
-b 8863
-ị 8688
-t 7958
-w 7547
-d 7044
-s 5853
-l 4658
-y 4090
-p 3652
-' 3088
-c 3051
-- 2359
-z 2078
-j 1898
-f 1541
-0 568
-1 430
-v 375
-2 276
-9 208
-5 159
-4 159
-6 151
-3 147
-8 126
-. 120
-’ 109
-7 89
-x 64
-, 48
-: 34
-q 31
-/ 27
-ñ 17
-$ 17
-̄ 14
-ò 13
-; 12
-è 12
-à 8
-ü 6
-– 5
-ṅ 5
-ç 5
-” 5
-+ 4
-õ 4
-é 4
-ù 4
-á 4
-° 3
-¥ 3
-% 3
-ì 3
-ã 3
-í 3
-[ 3
-] 3
-— 2
-ū 2
-" 2
-ó 2
-_ 2
-ú 2
-£ 2
-! 2
-̀ 1
-ē 1
-ł 1
-& 1
-² 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+e
+n
+i
+k
+ụ
+r
+m
+o
+ọ
+u
+h
+g
+b
+ị
+t
+w
+d
+s
+l
+y
+p
+'
+c
+-
+z
+j
+f
+0
+1
+v
+2
+9
+5
+4
+6
+3
+8
+.
+’
+7
+x
+,
+:
+q
+/
+ñ
+$
+̄
+ò
+;
+è
+à
+ü
+–
+ṅ
+ç
+”
++
+õ
+é
+ù
+á
+°
+¥
+%
+ì
+ã
+í
+[
+]
+—
+ū
+"
+ó
+_
+ú
+£
+!
+̀
+ē
+ł
+&
+²

mms-1b-all/ind/tokens.txt

@@ -1,76 +1,80 @@
-a 1147055
-| 902988
-n 482968
-e 402349
-i 371728
-t 248815
-r 238344
-u 308020
-k 301752
-s 197167
-m 243638
-d 226055
-g 197000
-l 176332
-p 134437
-b 133899
-h 159530
-o 54896
-y 113394
-j 45894
-c 14674
-w 15253
-f 3798
-- 35375
-v 2
-0 66
-1 24
-2 8
-z 1938
-. 171
-9 170
-5 2
-3 148
-4 32
-8 131
-6 10
-7 88
-x 82
-/ 36
-, 32
-' 352
-ã 32
-" 31
-q 37
-â 28
-€ 15
-: 14
-¡ 14
-% 9
-; 7
-¥ 6
-° 5
-­ 5
-$ 4
-£ 4
-§ 3
-º 3
-” 3
-© 2
-² 2
-& 2
-ä 2
-+ 1
-• 1
-µ 1
-¶ 1
-! 1
-— 2910
-\ 4
-á 3
-– 380
-é 2
-ō 1
-ł 1
-ń 1
-ʼ 619
+<s>
+<pad>
+</s>
+<unk>
+a
+|
+n
+e
+i
+t
+r
+u
+k
+s
+m
+d
+g
+l
+p
+b
+h
+o
+y
+j
+c
+w
+f
+-
+v
+0
+1
+2
+z
+.
+9
+5
+3
+4
+8
+6
+7
+x
+/
+,
+'
+ã
+"
+q
+â
+€
+:
+¡
+%
+;
+¥
+°
+­
+$
+£
+§
+º
+”
+©
+²
+&
+ä
++
+•
+µ
+¶
+!
+—
+\
+á
+–
+é
+ō
+ł
+ń
+ʼ

mms-1b-all/isl/tokens.txt

@@ -1,60 +1,64 @@
-| 126911
-a 47752
-r 46845
-n 44307
-i 44971
-e 37549
-s 31259
-t 24328
-u 27717
-l 21858
-ð 27940
-g 25158
-m 21556
-f 14238
-k 18353
-v 12001
-o 14498
-h 14224
-d 8733
-í 8033
-á 8842
-þ 13259
-j 6344
-b 4117
-y 6085
-ó 4622
-p 3481
-ö 4169
-æ 3698
-ú 4291
-ý 1196
-é 4832
-0 1
-1 197
-c 174
-- 1
-. 142
-2 1
-9 77
-w 73
-5 58
-4 55
-3 54
-8 54
-6 47
-x 137
-7 1
-z 27
-q 17
-: 16
-/ 15
-, 10
-' 4
-% 2
-ã 2
-; 1
-² 1
-– 1
-[ 1
-] 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+r
+n
+i
+e
+s
+t
+u
+l
+ð
+g
+m
+f
+k
+v
+o
+h
+d
+í
+á
+þ
+j
+b
+y
+ó
+p
+ö
+æ
+ú
+ý
+é
+0
+1
+c
+-
+.
+2
+9
+w
+5
+4
+3
+8
+6
+x
+7
+z
+q
+:
+/
+,
+'
+%
+ã
+;
+²
+–
+[
+]

mms-1b-all/ita/tokens.txt

@@ -1,179 +1,183 @@
-| 1415014
-i 841722
-e 840501
-a 838608
-o 679059
-n 557586
-t 527514
-r 489986
-l 491893
-s 400255
-c 320129
-d 272622
-u 237248
-p 208384
-m 194767
-g 135581
-v 120820
-f 88323
-h 64899
-z 66451
-b 70318
-' 25794
-q 29111
-è 29547
-à 13426
-0 729
-k 9070
-1 492
-ù 5779
-y 9825
-2 330
-w 6893
-ò 12025
-9 192
-5 188
-4 177
-3 170
-. 166
-j 4300
-8 156
-6 155
-- 4936
-x 1970
-ì 4029
-7 104
-é 2438
-/ 50
-: 42
-% 33
-, 32
-° 20
-; 14
-’ 10
-² 10
-á 295
-" 9
-ü 8
-& 6
-+ 4
-í 260
-ç 4
-¥ 3
-š 80
-ł 18
-ª 2
-º 2
-ó 190
-[ 2
-] 2
-ú 80
-ï 22
-ō 109
-č 78
-– 65
-ū 57
-ä 55
-ñ 49
-ø 42
-ã 40
-ʿ 39
-ī 36
-ć 34
-ë 32
-ž 25
-ô 23
-å 18
-î 17
-ê 17
-ḥ 15
-ń 14
-æ 13
-ß 13
-ö 10
-ş 7
-ṣ 7
-` 6
-ř 6
-ə 5
-ě 5
-đ 5
-ė 5
-́ 5
-′ 5
-ň 4
-ё 4
-ő 4
-þ 3
-œ 3
-ð 3
-б 3
-а 3
-с 3
-ʻ 3
-ś 3
-ṭ 3
-ː 3
-ę 2
-ź 2
-ğ 2
-μ 2
-ț 2
-ı 2
-û 2
-о 2
-ʾ 2
-ā 2
-е 2
-ד 2
-ン 2
-ľ 2
-ʼ 2
-ة 2
-張 2
-三 2
-— 2
-禅 1
-家 1
-‐ 1
-ŭ 1
-旅 1
-д 1
-н 1
-ą 1
-あ 1
-ц 1
-ÿ 1
-л 1
-љ 1
-古 1
-多 1
-万 1
-ו 1
-ה 1
-ア 1
-ノ 1
-ș 1
-サ 1
-カ 1
-キ 1
-フ 1
-リ 1
-ザ 1
-ل 1
-س 1
-ص 1
-غ 1
-ي 1
-ر 1
-̨ 1
-ѐ 1
-ṛ 1
-у 1
-ễ 1
-丰 1
-峰 1
-ң 1
-ꞌ 1
-ż 1
-☆ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+i
+e
+a
+o
+n
+t
+r
+l
+s
+c
+d
+u
+p
+m
+g
+v
+f
+h
+z
+b
+'
+q
+è
+à
+0
+k
+1
+ù
+y
+2
+w
+ò
+9
+5
+4
+3
+.
+j
+8
+6
+-
+x
+ì
+7
+é
+/
+:
+%
+,
+°
+;
+’
+²
+á
+"
+ü
+&
++
+í
+ç
+¥
+š
+ł
+ª
+º
+ó
+[
+]
+ú
+ï
+ō
+č
+–
+ū
+ä
+ñ
+ø
+ã
+ʿ
+ī
+ć
+ë
+ž
+ô
+å
+î
+ê
+ḥ
+ń
+æ
+ß
+ö
+ş
+ṣ
+`
+ř
+ə
+ě
+đ
+ė
+́
+′
+ň
+ё
+ő
+þ
+œ
+ð
+б
+а
+с
+ʻ
+ś
+ṭ
+ː
+ę
+ź
+ğ
+μ
+ț
+ı
+û
+о
+ʾ
+ā
+е
+ד
+ン
+ľ
+ʼ
+ة
+張
+三
+—
+禅
+家
+‐
+ŭ
+旅
+д
+н
+ą
+あ
+ц
+ÿ
+л
+љ
+古
+多
+万
+ו
+ה
+ア
+ノ
+ș
+サ
+カ
+キ
+フ
+リ
+ザ
+ل
+س
+ص
+غ
+ي
+ر
+̨
+ѐ
+ṛ
+у
+ễ
+丰
+峰
+ң
+ꞌ
+ż
+☆

mms-1b-all/jav/tokens.txt

@@ -1,69 +1,73 @@
-a 328491
-| 281561
-n 202802
-i 102683
-e 101784
-g 117298
-k 98191
-s 66097
-u 90998
-r 64175
-t 50515
-l 46548
-m 48397
-o 39986
-d 44120
-p 50817
-h 41877
-b 29925
-w 37546
-y 19331
-j 13715
-c 5824
-- 7931
-f 562
-0 1
-v 518
-1 1
-2 1
-9 1
-5 186
-4 168
-. 168
-3 158
-8 154
-6 151
-z 165
-7 1
-x 1
-q 43
-, 40
-/ 36
-' 46
-é 27
-: 25
-" 18
-” 16
-; 12
-% 11
-á 10
-$ 8
-ü 8
-& 7
-+ 5
-— 5
-ç 5
-õ 4
-í 3
-[ 3
-] 3
-£ 3
-ã 3
-ê 3
-° 3
-² 2
-‘ 2
-! 1
-ó 1
-ö 1
-` 1
+<s>
+<pad>
+</s>
+<unk>
+a
+|
+n
+i
+e
+g
+k
+s
+u
+r
+t
+l
+m
+o
+d
+p
+h
+b
+w
+y
+j
+c
+-
+f
+0
+v
+1
+2
+9
+5
+4
+.
+3
+8
+6
+z
+7
+x
+q
+,
+/
+'
+é
+:
+"
+”
+;
+%
+á
+$
+ü
+&
++
+—
+ç
+õ
+í
+[
+]
+£
+ã
+ê
+°
+²
+‘
+!
+ó
+ö
+`

mms-1b-all/jpn/tokens.txt

@@ -1,2264 +1,2268 @@
-の 6928
-に 3943
-し 4139
-は 5321
-で 3317
-た 4163
-ま 3337
-す 2738
-を 2655
-と 2715
-い 3799
-る 2876
-が 2197
-て 3083
-ー 1701
-ン 3268
-な 2285
-れ 2595
-り 1258
-こ 1447
-ス 1942
-か 1375
-ル 1675
-ら 1433
-あ 1295
-も 1256
-さ 1130
-う 819
-ト 1541
-っ 1588
-ラ 1189
-イ 1306
-ア 1259
-く 889
-リ 1411
-0 525
-1 524
-き 644
-よ 714
-ク 1131
-ッ 1164
-人 499
-ん 668
-け 554
-ド 886
-や 269
-め 433
-的 668
-国 184
-そ 1085
-フ 722
-ロ 700
-タ 658
-2 331
-シ 779
-つ 429
-せ 345
-カ 619
-地 296
-ジ 698
-ど 324
-年 112
-大 346
-場 211
-レ 653
-え 341
-テ 555
-行 232
-オ 438
-物 228
-わ 318
-者 283
-ち 348
-生 326
-日 132
-合 175
-コ 481
-バ 577
-ブ 413
-発 172
-ば 243
-要 138
-だ 566
-マ 527
-プ 583
-ニ 382
-中 270
-上 185
-サ 378
-一 388
-ィ 707
-チ 402
-グ 507
-間 178
-学 365
-ャ 419
-出 227
-時 144
-部 222
-キ 335
-手 146
-ム 520
-動 159
-最 270
-語 170
-性 281
-3 170
-分 211
-ズ 342
-入 118
-ウ 519
-メ 336
-理 144
-多 159
-9 154
-通 159
-エ 341
-5 152
-定 149
-見 216
-べ 129
-ほ 125
-ダ 311
-自 283
-パ 312
-み 191
-ュ 371
-後 276
-ビ 315
-方 151
-ェ 365
-法 112
-化 106
-会 225
-用 233
-デ 476
-前 207
-子 188
-ょ 67
-月 12
-体 133
-4 129
-ピ 160
-a 502
-ナ 314
-事 146
-常 132
-6 123
-お 275
-8 120
-所 133
-世 111
-ネ 173
-能 136
-数 117
-セ 228
-度 69
-ず 109
-報 50
-ミ 265
-本 136
-必 53
-ツ 172
-現 181
-水 75
-ハ 229
-立 192
-可 89
-力 86
-高 135
-ポ 167
-以 69
-彼 1168
-長 129
-目 96
-ケ 173
-旅 24
-ョ 304
-受 87
-外 87
-戦 100
-同 156
-当 82
-言 186
-気 128
-在 164
-光 26
-組 71
-ガ 178
-ソ 201
-機 102
-開 105
-選 87
-7 93
-氏 31
-経 61
-予 27
-空 74
-関 120
-重 71
-界 106
-文 76
-金 63
-ベ 254
-じ 153
-名 239
-向 75
-使 167
-教 158
-ノ 148
-全 131
-作 243
-げ 103
-観 67
-ギ 117
-明 99
-家 171
-約 31
-内 70
-代 89
-ボ 176
-取 105
-利 56
-先 32
-他 89
-p 127
-ザ 120
-業 127
-原 45
-成 166
-m 143
-近 94
-下 97
-々 76
-主 210
-回 41
-状 46
-、 75
-域 72
-非 73
-車 75
-意 114
-書 99
-持 125
-有 97
-ァ 146
-ゴ 127
-点 70
-電 45
-集 74
-期 93
-面 68
-番 29
-初 133
-道 92
-特 92
-ペ 140
-告 30
-設 92
-話 99
-ろ 162
-実 102
-連 73
-調 37
-保 61
-何 87
-島 34
-ホ 118
-軍 60
-始 59
-海 40
-供 78
-変 79
-決 81
-表 97
-過 55
-市 74
-確 46
-示 70
-食 74
-航 16
-小 114
-安 47
-認 41
-モ 193
-員 71
-州 142
-ワ 152
-解 63
-e 530
-速 28
-際 31
-知 162
-記 79
-考 72
-制 70
-族 47
-異 47
-呼 82
-o 393
-球 27
-流 52
-議 73
-得 48
-類 44
-北 62
-料 37
-び 152
-来 102
-問 76
-社 109
-形 72
-住 73
-c 207
-加 80
-種 54
-対 142
-米 18
-む 60
-活 57
-続 99
-民 70
-政 82
-付 111
-新 98
-別 69
-神 40
-放 34
-n 329
-位 53
-g 113
-画 134
-影 46
-公 104
-s 364
-査 17
-d 196
-r 362
-心 76
-判 45
-感 60
-験 37
-南 64
-述 19
-今 72
-直 42
-送 30
-計 64
-務 73
-件 24
-客 47
-思 88
-第 26
-隊 24
-果 66
-死 39
-i 372
-私 191
-式 59
-味 86
-t 326
-不 81
-察 23
-正 61
-ヤ 102
-提 72
-船 18
-ご 46
-野 33
-へ 105
-院 38
-交 35
-試 29
-違 35
-l 309
-習 19
-録 45
-害 28
-質 54
-進 57
-題 69
-限 47
-態 26
-起 53
-広 55
-少 94
-存 56
-王 38
-結 88
-, 43
-女 327
-曜 10
-史 45
-」 43
-楽 76
-低 31
-念 38
-込 41
-ォ 136
-紀 1
-官 26
-ヴ 106
-産 62
-「 42
-星 15
-基 48
-陸 13
-運 82
-離 41
-挙 26
-都 34
-優 26
-k 97
-乗 33
-府 25
-警 28
-建 84
-強 52
-統 57
-染 9
-撃 31
-局 33
-病 24
-ゲ 100
-情 34
-科 37
-価 39
-号 34
-響 38
-移 31
-引 53
-量 24
-険 16
-指 64
-万 6
-因 15
-準 32
-資 30
-税 7
-応 33
-器 41
-ヨ 57
-割 23
-両 57
-着 90
-止 36
-ヒ 82
-身 88
-素 39
-英 32
-落 25
-係 36
-規 30
-様 76
-領 29
-証 26
-型 18
-単 48
-収 47
-ヘ 71
-任 41
-火 26
-東 52
-信 61
-元 80
-伝 53
-終 65
-争 31
-般 58
-歴 46
-例 36
-無 64
-十 32
-備 38
-西 42
-熱 35
-断 31
-u 162
-由 47
-写 35
-降 13
-勝 34
-帯 30
-品 96
-ユ 51
-歩 34
-風 31
-負 22
-登 39
-訪 11
-然 43
-抗 14
-想 31
-転 41
-宿 5
-雨 13
-置 67
-～ 32
-亡 21
-傷 15
-育 45
-士 47
-配 41
-周 30
-再 47
-音 86
-権 33
-支 65
-潜 8
-真 58
-細 28
-洋 5
-づ 37
-個 47
-囲 36
-ぎ 45
-催 11
-共 53
-検 32
-求 28
-ぐ 55
-映 82
-視 31
-張 40
-投 45
-首 23
-親 58
-帰 15
-与 48
-恐 18
-台 31
-爆 5
-象 39
-団 42
-参 47
-危 8
-構 50
-属 33
-半 24
-波 11
-術 76
-次 44
-残 51
-済 21
-良 40
-症 21
-渡 21
-医 14
-夜 19
-相 36
-去 40
-f 90
-便 19
-防 17
-難 31
-泊 3
-頃 11
-季 7
-店 29
-被 8
-路 41
-ゥ 32
-命 34
-区 85
-ざ 52
-造 42
-ぶ 32
-識 58
-故 15
-接 41
-戻 34
-暴 9
-攻 15
-破 22
-h 191
-宇 8
-宙 11
-二 63
-裁 16
-増 24
-比 16
-管 38
-悪 34
-失 48
-適 30
-石 30
-研 36
-陽 7
-飛 37
-義 61
-復 18
-太 11
-境 50
-切 31
-艦 6
-足 28
-古 41
-極 14
-役 56
-葉 24
-施 17
-覚 25
-激 20
-融 7
-拠 21
-演 76
-b 119
-飲 20
-申 9
-職 16
-川 47
-治 59
-像 29
-導 22
-和 24
-天 21
-候 32
-庭 17
-窓 8
-遺 10
-望 22
-働 35
-鳥 11
-消 25
-究 36
-反 58
-傾 10
-滞 2
-許 21
-週 13
-圧 18
-待 16
-刑 19
-級 6
-馬 22
-捕 16
-購 7
-簡 12
-源 17
-効 33
-平 16
-欧 6
-継 27
-衆 14
-港 18
-ぼ 23
-模 15
-律 20
-徒 16
-軽 14
-千 6
-v 51
-協 20
-容 28
-口 60
-環 29
-線 34
-% 20
-論 73
-歳 1
-織 21
-雪 10
-格 32
-銀 11
-側 34
-避 7
-急 25
-況 14
-具 18
-. 19
-幅 16
-射 6
-標 24
-植 25
-値 24
-製 38
-深 25
-賞 23
-園 35
-朝 11
-端 18
-留 6
-雑 15
-障 19
-夏 9
-追 40
-屋 35
-訴 16
-疑 13
-探 15
-撮 10
-独 36
-距 9
-補 25
-票 11
-農 27
-除 26
-欠 14
-群 16
-印 12
-積 26
-商 34
-氷 8
-複 31
-療 14
-突 17
-山 43
-声 36
-ぜ 14
-委 12
-字 29
-侵 11
-岸 12
-宅 8
-宗 16
-各 15
-扱 8
-功 35
-監 30
-慣 11
-助 24
-途 8
-午 3
-系 23
-輸 12
-就 4
-為 25
-児 13
-遠 26
-達 27
-頭 33
-注 26
-衛 3
-街 14
-温 11
-震 4
-読 12
-司 18
-技 60
-微 8
-専 13
-罪 16
-含 80
-密 22
-従 21
-苦 14
-荷 4
-材 21
-満 21
-焦 6
-酒 7
-改 43
-胞 9
-覆 11
-率 16
-男 142
-ゆ 19
-営 35
-好 43
-緊 7
-競 20
-援 26
-兵 9
-総 8
-称 25
-階 21
-益 10
-勢 13
-評 44
-範 17
-余 11
-寄 17
-土 30
-・ 15
-測 19
-洞 4
-閉 18
-聞 33
-獲 13
-泳 5
-沿 14
-図 22
-訳 8
-工 34
-歌 56
-河 8
-毎 18
-町 61
-諸 7
-守 22
-盟 6
-担 12
-倒 21
-脅 6
-威 4
-門 26
-請 9
-右 10
-刻 12
-減 19
-推 14
-三 35
-殿 5
-肢 2
-券 2
-精 16
-換 15
-木 40
-寒 3
-唯 16
-省 10
-燃 10
-壊 23
-条 13
-跡 10
-程 10
-冬 5
-較 6
-校 93
-費 11
-菌 5
-露 10
-振 18
-否 36
-捜 13
-索 6
-散 18
-巻 9
-景 15
-昨 4
-鏡 12
-億 13
-説 46
-択 16
-息 46
-寺 4
-末 3
-芸 13
-師 21
-差 15
-謝 9
-婚 34
-維 18
-了 12
-届 6
-滑 10
-革 16
-逮 5
-弓 2
-延 6
-血 11
-逃 14
-倍 4
-曲 71
-触 15
-折 3
-損 10
-層 13
-怖 9
-未 22
-城 6
-並 10
-案 19
-照 19
-版 29
-厳 10
-液 4
-操 14
-給 9
-敷 6
-粒 6
-漏 2
-ぞ 28
-完 46
-携 11
-誰 33
-油 14
-署 12
-懸 3
-仕 45
-唆 7
-館 36
-党 42
-敗 19
-及 19
-邦 10
-央 13
-翻 4
-墓 19
-買 34
-ゼ 48
-紙 26
-y 88
-責 9
-授 21
-服 21
-救 4
-整 16
-依 12
-j 30
-超 16
-段 22
-我 47
-処 15
-更 25
-母 23
-橋 20
-窟 2
-売 60
-京 2
-富 6
-夫 19
-祝 7
-滝 6
-興 18
-居 16
-紛 4
-舞 9
-則 7
-打 25
-美 16
-繰 8
-底 8
-華 2
-患 12
-墜 10
-刺 13
-睡 2
-眠 6
-友 18
-隣 17
-竜 2
-辺 21
-村 40
-著 20
-惑 7
-早 11
-護 37
-左 10
-- 20
-祭 9
-勧 2
-敵 8
-横 11
-儀 6
-概 14
-ヌ 26
-批 14
-賀 10
-派 29
-魅 7
-絶 33
-花 11
-希 3
-寝 8
-走 24
-修 31
-臓 3
-尿 3
-企 17
-針 2
-籍 7
-裂 6
-盛 4
-揮 11
-披 7
-暗 17
-陥 6
-健 11
-拒 15
-典 12
-亜 8
-吸 6
-快 14
-聖 30
-将 13
-額 4
-貨 7
-遊 12
-席 15
-憲 9
-酸 4
-枚 2
-承 11
-該 9
-狭 9
-頻 11
-払 12
-伸 4
-肩 10
-姿 11
-林 15
-課 4
-労 20
-躍 5
-到 15
-善 20
-板 7
-赤 40
-博 29
-似 24
-色 99
-越 21
-答 19
-荒 3
-崩 11
-帝 13
-徴 22
-康 8
-角 15
-w 87
-築 28
-幸 9
-載 20
-弁 21
-汚 4
-頼 14
-暑 2
-根 17
-順 9
-殺 32
-室 20
-績 7
-怪 8
-津 8
-展 28
-核 6
-拡 14
-犯 15
-薬 11
-鎖 10
-清 2
-准 8
-浮 9
-婦 7
-埋 17
-黒 28
-ゾ 16
-禁 10
-飾 8
-易 12
-刷 3
-短 21
-脳 7
-賃 2
-郵 8
-ふ 15
-奪 4
-幹 6
-遅 15
-/ 7
-免 6
-湾 8
-片 7
-豊 10
-齢 7
-痛 9
-抑 5
-至 4
-還 2
-措 2
-詳 12
-握 8
-採 18
-眺 2
-柔 6
-珍 3
-征 4
-脈 13
-弾 14
-夢 6
-尊 4
-隻 7
-審 1
-固 15
-編 33
-辞 12
-脱 6
-爪 1
-ね 48
-契 13
-猫 6
-占 10
-濃 3
-毒 5
-湖 17
-抜 11
-蔵 7
-若 23
-顧 8
-列 7
-x 22
-洪 1
-貿 7
-押 10
-裕 4
-骨 13
-互 13
-葬 17
-旧 6
-肝 1
-塞 4
-盗 2
-百 12
-砂 11
-暖 5
-策 11
-等 17
-符 4
-晩 6
-ひ 52
-巨 7
-靴 4
-混 9
-努 9
-網 4
-練 12
-騎 3
-退 26
-渓 9
-谷 14
-略 16
-掘 7
-穴 5
-座 38
-削 6
-狩 2
-旬 1
-駆 6
-卒 16
-憶 10
-筋 4
-伴 4
-弱 3
-誌 9
-冷 18
-ゃ 43
-襲 11
-誕 7
-駐 9
-衝 10
-陣 5
-圏 6
-干 2
-岩 15
-背 21
-返 21
-歯 10
-叩 3
-炉 1
-眼 8
-純 11
-醸 3
-蛇 1
-香 5
-致 6
-蒸 4
-隠 9
-迅 6
-祖 10
-覧 11
-糖 2
-貫 7
-円 12
-渉 2
-厚 2
-劇 25
-布 13
-殖 4
-創 20
-装 33
-巡 6
-絡 4
-田 12
-雲 3
-蚊 5
-闘 19
-秀 3
-算 10
-藤 2
-秩 2
-序 5
-遭 3
-己 65
-馴 1
-旗 4
-牧 13
-雇 8
-炭 7
-沢 5
-白 53
-膨 6
-孔 3
-愛 27
-雷 5
-繁 16
-福 9
-熊 1
-戚 5
-喜 4
-簿 5
-栄 12
-暮 5
-阻 5
-鍵 5
-循 5
-武 13
-縦 5
-踵 5
-奏 38
-遂 2
-疲 6
-皆 3
-搬 5
-貴 7
-筆 13
-驚 12
-譲 3
-顔 18
-財 12
-仲 7
-掲 7
-斜 6
-頂 7
-礼 10
-診 2
-豪 3
-恒 2
-九 2
-秘 6
-里 1
-災 6
-壁 9
-欲 14
-腕 6
-虫 14
-借 5
-兆 2
-腹 14
-困 14
-湿 5
-硬 4
-舎 5
-耳 7
-輪 10
-介 13
-草 11
-丘 8
-逸 2
-招 3
-誘 11
-描 17
-把 6
-焼 12
-熟 6
-猛 4
-塔 6
-矛 29
-盾 30
-虐 2
-崎 4
-県 12
-佐 3
-妃 4
-宮 3
-隔 4
-戒 1
-礁 4
-殊 4
-耐 12
-揃 1
-匹 3
-掃 8
-納 4
-匂 4
-狙 4
-志 4
-停 7
-鉄 31
-鮫 4
-森 17
-封 1
-滅 8
-春 5
-秒 2
-釈 6
-飼 6
-犬 23
-砕 4
-薄 11
-妨 4
-四 12
-廷 2
-潮 4
-絞 1
-韓 6
-閲 4
-嘘 6
-芝 4
-摘 8
-妻 18
-吹 10
-霊 3
-摂 3
-冒 7
-柄 1
-聴 7
-銃 9
-添 2
-窒 2
-椅 5
-泡 4
-践 2
-藻 4
-塩 8
-討 11
-曖 4
-昧 4
-昼 3
-z 13
-父 34
-軒 4
-貧 11
-塗 5
-姫 3
-昔 6
-壇 2
-麓 3
-腫 3
-乾 9
-緩 5
-褒 3
-玉 1
-透 5
-斎 3
-昇 7
-訓 5
-拘 1
-談 4
-是 3
-仰 3
-哲 8
-顕 4
-搭 1
-督 21
-排 6
-胡 3
-錦 3
-濤 3
-猟 3
-稀 2
-鳴 3
-磁 2
-幕 2
-鮮 4
-麻 7
-祉 3
-弟 29
-怒 8
-遡 2
-勾 1
-筒 2
-養 14
-魚 9
-朗 2
-青 24
-溢 1
-丸 7
-裏 6
-囚 7
-卿 5
-盤 10
-嵐 4
-久 5
-踏 7
-哺 1
-乳 3
-: 3
-邸 3
-仮 9
-綴 2
-拓 4
-販 17
-瓶 1
-棒 4
-郊 10
-禽 3
-剤 15
-黄 17
-堤 3
-令 11
-獄 3
-尾 13
-晰 3
-募 3
-宛 3
-鋭 4
-尖 1
-冠 5
-隙 3
-普 11
-搾 3
-靭 3
-看 5
-孤 6
-勉 6
-阪 1
-枠 1
-涼 1
-講 6
-傑 3
-賊 3
-廃 12
-静 12
-束 11
-洗 4
-履 3
-既 11
-錯 3
-漁 5
-晴 12
-敬 9
-旋 1
-胆 2
-癌 2
-鉛 1
-須 2
-永 6
-掛 6
-彩 2
-隕 1
-逆 12
-庁 14
-嫌 6
-貯 6
-杯 3
-抱 10
-巣 4
-寂 3
-輩 1
-ぽ 9
-！ 2
-娯 1
-腰 2
-媒 9
-℃ 2
-柱 3
-八 7
-沈 8
-替 13
-夕 5
-怯 2
-懲 2
-捨 3
-剰 6
-贅 1
-疫 3
-肉 17
-艇 2
-菓 5
-潔 1
-縮 9
-崖 3
-喉 4
-鋼 3
-促 5
-鹿 4
-× 2
-訛 2
-郷 5
-扇 2
-箱 9
-函 2
-慎 4
-彗 2
-慮 5
-宣 15
-妙 9
-綻 1
-扉 3
-罰 1
-枝 1
-噛 2
-包 6
-掌 2
-焉 1
-札 3
-徐 6
-詞 16
-棺 2
-餌 2
-曹 2
-猿 2
-緯 2
-鍛 2
-克 1
-贄 2
-捧 4
-刈 2
-亀 1
-陶 1
-羽 5
-悩 2
-唸 2
-憾 2
-井 1
-噴 2
-疽 1
-耕 1
-双 4
-桜 2
-鑑 2
-縛 2
-晶 4
-漠 1
-斉 3
-仁 2
-僧 1
-侶 1
-ぷ 3
-紅 3
-茶 21
-q 6
-擬 2
-臣 5
-瘍 1
-酔 2
-鈍 2
-姉 5
-妹 9
-顎 2
-皇 12
-遇 3
-勤 4
-棄 6
-俗 1
-鐙 2
-鞍 2
-預 2
-舗 3
-併 4
-榜 2
-庫 6
-泣 6
-叫 11
-戯 2
-仏 1
-毛 10
-雀 2
-齧 1
-濯 2
-抵 5
-節 12
-衣 7
-詩 14
-孫 9
-馳 1
-犠 4
-牲 4
-執 15
-副 10
-姦 2
-童 5
-窃 2
-乞 2
-誇 4
-胎 1
-肺 1
-雰 3
-迫 7
-忘 8
-狼 1
-需 4
-奮 5
-鄧 2
-誤 6
-尽 2
-灯 7
-拾 1
-剣 5
-辛 3
-贈 3
-涙 1
-挟 2
-宴 2
-呪 2
-讐 2
-痢 2
-寿 3
-願 9
-浴 3
-臆 2
-励 3
-絵 18
-肥 2
-唱 11
-膜 4
-句 3
-章 13
-啓 1
-蒙 1
-緒 26
-俺 11
-叶 2
-矢 1
-鎧 2
-鼻 2
-倫 3
-² 1
-浅 2
-塊 1
-捉 2
-詐 4
-欺 3
-慢 2
-疼 1
-雅 1
-佇 1
-縄 1
-勇 4
-忍 4
-翌 9
-泥 1
-賄 2
-債 4
-濡 1
-寮 1
-怠 2
-屯 4
-梅 2
-沖 1
-ぱ 20
-迷 8
-銅 3
-罠 1
-牛 7
-+ 1
-蓋 6
-浪 1
-貼 4
-株 11
-骸 4
-斗 1
-渦 1
-廊 3
-嘔 1
-吐 1
-糧 1
-硫 2
-遮 1
-涯 4
-柵 1
-杭 1
-砲 6
-没 4
-堪 1
-帥 2
-欄 2
-潤 2
-礎 5
-浸 2
-弊 1
-娘 21
-稼 2
-吊 3
-' 15
-幾 1
-傘 1
-狂 2
-墟 1
-祥 1
-豚 1
-帳 1
-賑 1
-暫 1
-淹 1
-休 9
-暇 4
-儲 1
-挫 1
-賛 9
-君 28
-偽 5
-控 6
-御 7
-盲 4
-黙 6
-床 5
-蔓 1
-訣 1
-垣 1
-迎 10
-趣 7
-膝 2
-彙 1
-疎 1
-卓 3
-凌 1
-& 1
-騙 1
-寸 1
-掻 1
-槍 1
-彷 1
-彿 1
-霧 2
-卵 7
-殻 3
-錆 1
-充 2
-偵 1
-勘 3
-屠 1
-誉 8
-雄 7
-哨 1
-煽 1
-堂 14
-聡 1
-迂 1
-撲 2
-恥 1
-七 3
-陵 1
-１ 1
-甚 1
-疾 3
-幼 14
-峡 1
-峻 1
-坦 1
-舶 2
-浄 1
-裸 5
-彫 9
-伏 4
-虜 1
-訟 5
-皮 7
-膚 1
-撒 1
-瞬 10
-袋 2
-酷 3
-箋 1
-壌 4
-冊 1
-薦 1
-穏 2
-恍 1
-惚 1
-崇 5
-拝 8
-僚 3
-苗 3
-凝 3
-遣 4
-炎 3
-諦 1
-幻 4
-蜃 1
-楼 2
-懐 6
-憑 1
-苛 1
-郡 47
-兄 23
-駅 23
-緑 22
-ぬ 18
-僕 17
-架 15
-献 13
-悲 13
-笑 12
-脚 12
-灰 12
-抽 12
-髪 11
-却 11
-貢 10
-才 10
-魔 10
-析 10
-羊 10
-鉱 10
-乱 10
-恋 9
-帽 9
-老 9
-縁 9
-岐 9
-如 9
-奇 8
-麦 8
-即 8
-撤 8
-屈 8
-械 7
-棚 7
-邪 6
-凍 6
-五 6
-奴 6
-甲 6
-俳 6
-兼 6
-翼 6
-碑 6
-粘 6
-縫 6
-燥 6
-詰 6
-駄 5
-揚 5
-忙 5
-締 5
-稿 5
-騒 5
-樹 5
-軌 5
-慈 5
-隷 5
-挿 5
-粉 5
-ぺ 5
-謀 5
-陰 5
-尋 5
-漫 5
-爵 5
-冗 5
-挑 5
-菜 4
-豆 4
-煮 4
-飽 4
-飯 4
-璧 4
-甘 4
-祈 4
-鶏 4
-肌 4
-机 4
-跳 4
-揺 4
-六 4
-偶 4
-賢 4
-歓 4
-綿 4
-乏 4
-烈 4
-紹 4
-錬 4
-輝 4
-池 4
-刊 4
-項 4
-粋 4
-蓄 4
-昆 4
-戸 4
-脇 4
-均 4
-繋 4
-繊 4
-召 4
-芽 4
-奨 4
-肖 4
-笛 4
-飢 3
-頑 3
-姓 3
-巧 3
-踊 3
-ヶ 3
-漢 3
-宋 3
-癒 3
-恵 3
-宝 3
-唇 3
-褐 3
-軸 3
-堆 3
-軟 3
-桟 3
-訂 3
-陳 3
-伯 3
-枢 3
-棟 3
-闇 3
-砦 3
-衰 3
-幣 3
-擁 3
-紫 3
-垂 3
-鼓 3
-糸 3
-匿 3
-腐 3
-杉 3
-錠 3
-妊 3
-娠 3
-頸 3
-溶 3
-栓 3
-粧 3
-煙 3
-房 3
-擦 3
-惟 3
-叔 3
-悔 2
-誠 2
-溜 2
-汁 2
-舌 2
-嘆 2
-玄 2
-懇 2
-泉 2
-斧 2
-釘 2
-剃 2
-誓 2
-淡 2
-漂 2
-奈 2
-妖 2
-賂 2
-甥 2
-漕 2
-蹴 2
-畑 2
-肯 2
-腺 2
-茎 2
-紋 2
-愉 2
-枯 2
-芳 2
-轄 2
-閣 2
-附 2
-償 2
-恩 2
-弦 2
-礫 2
-獣 2
-頬 2
-臨 2
-奉 2
-謎 2
-瀬 2
-嬉 2
-江 2
-呂 2
-僅 2
-拐 2
-胸 2
-鐘 2
-隅 2
-縞 2
-倉 2
-茂 2
-魂 2
-窯 2
-犀 2
-醜 2
-倣 2
-蜂 2
-郎 2
-貸 2
-虹 2
-勃 2
-括 2
-挨 2
-拶 2
-惨 2
-随 2
-箔 2
-惹 2
-填 2
-奥 2
-沃 2
-瓦 2
-— 2
-拷 2
-穀 2
-敢 2
-径 2
-釣 2
-盆 2
-爬 2
-窮 2
-綺 2
-麗 2
-遥 2
-顆 2
-松 2
-栽 2
-培 2
-秦 2
-赦 2
-尉 2
-叙 2
-勲 2
-脂 2
-妥 2
-瞭 2
-汗 2
-摩 2
-槽 2
-皿 2
-胃 1
-抹 1
-ぁ 1
-眉 1
-謙 1
-敏 1
-枕 1
-漬 1
-些 1
-酬 1
-裾 1
-泌 1
-溺 1
-掴 1
-寛 1
-穫 1
-渇 1
-恨 1
-繕 1
-秋 1
-嫁 1
-愚 1
-– 1
-朽 1
-腎 1
-柳 1
-塀 1
-醇 1
-渋 1
-燕 1
-臼 1
-腸 1
-牡 1
-蠣 1
-岳 1
-丹 1
-遼 1
-寧 1
-陛 1
-蛋 1
-刃 1
-葦 1
-蛮 1
-汲 1
-鋤 1
-爽 1
-孵 1
-淘 1
-汰 1
-荊 1
-軻 1
-昌 1
-濁 1
-酢 1
-沼 1
-覇 1
-矯 1
-這 1
-脊 1
-椎 1
-蔗 1
-蒼 1
-鶯 1
-ぇ 1
-苔 1
-謖 1
-殉 1
-吉 1
-喪 1
-暢 1
-偉 1
-塹 1
-壕 1
-庵 1
-乙 1
-灌 1
-漑 1
-髭 1
-俣 1
-媽 1
-祠 1
-蜜 1
-蝋 1
-拍 1
-蔦 1
-茅 1
-葺 1
-忠 1
-彰 1
-遷 1
-軋 1
-憎 1
-繞 1
-閑 1
-沸 1
-胴 1
-堀 1
-罹 1
-廟 1
-耗 1
-憩 1
-厄 1
-蘇 1
-戴 1
-畜 1
-鳩 1
-竹 1
-蹄 1
-冶 1
-娼 1
-熾 1
-崔 1
-嗅 1
-膾 1
-炙 1
-橄 1
-欖 1
-剥 1
-繫 1
-〜 1
-虎 1
-膿 1
-憧 1
-其 1
-篤 1
-躁 1
-鬱 1
-痩 1
-煉 1
-偏 1
-瀕 1
-餓 1
-橙 1
-丁 1
-龍 1
-韻 1
-酵 1
-斑 1
-勅 1
-膀 1
-胱 1
-零 1
-鞭 1
-堕 1
-梨 1
-昏 1
-尻 1
-辱 1
-絨 1
-鷹 1
-毅 1
-痕 1
-硝 1
-讃 1
-拭 1
-羅 1
-磨 1
-噂 1
-坂 1
-餐 1
-葛 1
-滴 1
-鎮 1
-扮 1
-貌 1
-寡 1
-碁 1
-雌 1
-銘 1
-呈 1
-膳 1
-董 1
-采 1
-藍 1
-舟 1
-肪 1
-貞 1
-蛾 1
-牝 1
-茹 1
-呆 1
-慌 1
-厨 1
-騰 1
-叱 1
-晒 1
-愕 1
-ヅ 1
-缶 1
-曳 1
-饉 1
-糾 1
-冑 1
-恰 1
-鴨 1
-弩 1
-往 1
-楕 1
-辣 1
-膏 1
-弧 1
-股 1
-逐 1
-蝶 1
-臭 1
-汎 1
-刀 1
-杖 1
-又 1
-伐 1
-后 1
-肘 1
-殴 1
-貪 1
-酋 1
-贖 1
-蛙 1
-只 1
-膣 1
-粗 1
-虚 1
-宜 1
-錨 1
-閥 1
-喩 1
-絆 1
-駈 1
-綜 1
-斯 1
-汝 1
-丈 1
-尤 1
-朦 1
-朧 1
-或 1
-寵 1
-惜 1
-ぴ 1
-跨 1
-劣 1
-ゅ 1
-怨 1
-瞑 1
-澄 1
+<s>
+<pad>
+</s>
+<unk>
+の
+に
+し
+は
+で
+た
+ま
+す
+を
+と
+い
+る
+が
+て
+ー
+ン
+な
+れ
+り
+こ
+ス
+か
+ル
+ら
+あ
+も
+さ
+う
+ト
+っ
+ラ
+イ
+ア
+く
+リ
+0
+1
+き
+よ
+ク
+ッ
+人
+ん
+け
+ド
+や
+め
+的
+国
+そ
+フ
+ロ
+タ
+2
+シ
+つ
+せ
+カ
+地
+ジ
+ど
+年
+大
+場
+レ
+え
+テ
+行
+オ
+物
+わ
+者
+ち
+生
+日
+合
+コ
+バ
+ブ
+発
+ば
+要
+だ
+マ
+プ
+ニ
+中
+上
+サ
+一
+ィ
+チ
+グ
+間
+学
+ャ
+出
+時
+部
+キ
+手
+ム
+動
+最
+語
+性
+3
+分
+ズ
+入
+ウ
+メ
+理
+多
+9
+通
+エ
+5
+定
+見
+べ
+ほ
+ダ
+自
+パ
+み
+ュ
+後
+ビ
+方
+ェ
+法
+化
+会
+用
+デ
+前
+子
+ょ
+月
+体
+4
+ピ
+a
+ナ
+事
+常
+6
+お
+8
+所
+世
+ネ
+能
+数
+セ
+度
+ず
+報
+ミ
+本
+必
+ツ
+現
+水
+ハ
+立
+可
+力
+高
+ポ
+以
+彼
+長
+目
+ケ
+旅
+ョ
+受
+外
+戦
+同
+当
+言
+気
+在
+光
+組
+ガ
+ソ
+機
+開
+選
+7
+氏
+経
+予
+空
+関
+重
+界
+文
+金
+ベ
+じ
+名
+向
+使
+教
+ノ
+全
+作
+げ
+観
+ギ
+明
+家
+約
+内
+代
+ボ
+取
+利
+先
+他
+p
+ザ
+業
+原
+成
+m
+近
+下
+々
+主
+回
+状
+、
+域
+非
+車
+意
+書
+持
+有
+ァ
+ゴ
+点
+電
+集
+期
+面
+番
+初
+道
+特
+ペ
+告
+設
+話
+ろ
+実
+連
+調
+保
+何
+島
+ホ
+軍
+始
+海
+供
+変
+決
+表
+過
+市
+確
+示
+食
+航
+小
+安
+認
+モ
+員
+州
+ワ
+解
+e
+速
+際
+知
+記
+考
+制
+族
+異
+呼
+o
+球
+流
+議
+得
+類
+北
+料
+び
+来
+問
+社
+形
+住
+c
+加
+種
+対
+米
+む
+活
+続
+民
+政
+付
+新
+別
+神
+放
+n
+位
+g
+画
+影
+公
+s
+査
+d
+r
+心
+判
+感
+験
+南
+述
+今
+直
+送
+計
+務
+件
+客
+思
+第
+隊
+果
+死
+i
+私
+式
+味
+t
+不
+察
+正
+ヤ
+提
+船
+ご
+野
+へ
+院
+交
+試
+違
+l
+習
+録
+害
+質
+進
+題
+限
+態
+起
+広
+少
+存
+王
+結
+,
+女
+曜
+史
+」
+楽
+低
+念
+込
+ォ
+紀
+官
+ヴ
+産
+「
+星
+基
+陸
+運
+離
+挙
+都
+優
+k
+乗
+府
+警
+建
+強
+統
+染
+撃
+局
+病
+ゲ
+情
+科
+価
+号
+響
+移
+引
+量
+険
+指
+万
+因
+準
+資
+税
+応
+器
+ヨ
+割
+両
+着
+止
+ヒ
+身
+素
+英
+落
+係
+規
+様
+領
+証
+型
+単
+収
+ヘ
+任
+火
+東
+信
+元
+伝
+終
+争
+般
+歴
+例
+無
+十
+備
+西
+熱
+断
+u
+由
+写
+降
+勝
+帯
+品
+ユ
+歩
+風
+負
+登
+訪
+然
+抗
+想
+転
+宿
+雨
+置
+～
+亡
+傷
+育
+士
+配
+周
+再
+音
+権
+支
+潜
+真
+細
+洋
+づ
+個
+囲
+ぎ
+催
+共
+検
+求
+ぐ
+映
+視
+張
+投
+首
+親
+帰
+与
+恐
+台
+爆
+象
+団
+参
+危
+構
+属
+半
+波
+術
+次
+残
+済
+良
+症
+渡
+医
+夜
+相
+去
+f
+便
+防
+難
+泊
+頃
+季
+店
+被
+路
+ゥ
+命
+区
+ざ
+造
+ぶ
+識
+故
+接
+戻
+暴
+攻
+破
+h
+宇
+宙
+二
+裁
+増
+比
+管
+悪
+失
+適
+石
+研
+陽
+飛
+義
+復
+太
+境
+切
+艦
+足
+古
+極
+役
+葉
+施
+覚
+激
+融
+拠
+演
+b
+飲
+申
+職
+川
+治
+像
+導
+和
+天
+候
+庭
+窓
+遺
+望
+働
+鳥
+消
+究
+反
+傾
+滞
+許
+週
+圧
+待
+刑
+級
+馬
+捕
+購
+簡
+源
+効
+平
+欧
+継
+衆
+港
+ぼ
+模
+律
+徒
+軽
+千
+v
+協
+容
+口
+環
+線
+%
+論
+歳
+織
+雪
+格
+銀
+側
+避
+急
+況
+具
+.
+幅
+射
+標
+植
+値
+製
+深
+賞
+園
+朝
+端
+留
+雑
+障
+夏
+追
+屋
+訴
+疑
+探
+撮
+独
+距
+補
+票
+農
+除
+欠
+群
+印
+積
+商
+氷
+複
+療
+突
+山
+声
+ぜ
+委
+字
+侵
+岸
+宅
+宗
+各
+扱
+功
+監
+慣
+助
+途
+午
+系
+輸
+就
+為
+児
+遠
+達
+頭
+注
+衛
+街
+温
+震
+読
+司
+技
+微
+専
+罪
+含
+密
+従
+苦
+荷
+材
+満
+焦
+酒
+改
+胞
+覆
+率
+男
+ゆ
+営
+好
+緊
+競
+援
+兵
+総
+称
+階
+益
+勢
+評
+範
+余
+寄
+土
+・
+測
+洞
+閉
+聞
+獲
+泳
+沿
+図
+訳
+工
+歌
+河
+毎
+町
+諸
+守
+盟
+担
+倒
+脅
+威
+門
+請
+右
+刻
+減
+推
+三
+殿
+肢
+券
+精
+換
+木
+寒
+唯
+省
+燃
+壊
+条
+跡
+程
+冬
+較
+校
+費
+菌
+露
+振
+否
+捜
+索
+散
+巻
+景
+昨
+鏡
+億
+説
+択
+息
+寺
+末
+芸
+師
+差
+謝
+婚
+維
+了
+届
+滑
+革
+逮
+弓
+延
+血
+逃
+倍
+曲
+触
+折
+損
+層
+怖
+未
+城
+並
+案
+照
+版
+厳
+液
+操
+給
+敷
+粒
+漏
+ぞ
+完
+携
+誰
+油
+署
+懸
+仕
+唆
+館
+党
+敗
+及
+邦
+央
+翻
+墓
+買
+ゼ
+紙
+y
+責
+授
+服
+救
+整
+依
+j
+超
+段
+我
+処
+更
+母
+橋
+窟
+売
+京
+富
+夫
+祝
+滝
+興
+居
+紛
+舞
+則
+打
+美
+繰
+底
+華
+患
+墜
+刺
+睡
+眠
+友
+隣
+竜
+辺
+村
+著
+惑
+早
+護
+左
+-
+祭
+勧
+敵
+横
+儀
+概
+ヌ
+批
+賀
+派
+魅
+絶
+花
+希
+寝
+走
+修
+臓
+尿
+企
+針
+籍
+裂
+盛
+揮
+披
+暗
+陥
+健
+拒
+典
+亜
+吸
+快
+聖
+将
+額
+貨
+遊
+席
+憲
+酸
+枚
+承
+該
+狭
+頻
+払
+伸
+肩
+姿
+林
+課
+労
+躍
+到
+善
+板
+赤
+博
+似
+色
+越
+答
+荒
+崩
+帝
+徴
+康
+角
+w
+築
+幸
+載
+弁
+汚
+頼
+暑
+根
+順
+殺
+室
+績
+怪
+津
+展
+核
+拡
+犯
+薬
+鎖
+清
+准
+浮
+婦
+埋
+黒
+ゾ
+禁
+飾
+易
+刷
+短
+脳
+賃
+郵
+ふ
+奪
+幹
+遅
+/
+免
+湾
+片
+豊
+齢
+痛
+抑
+至
+還
+措
+詳
+握
+採
+眺
+柔
+珍
+征
+脈
+弾
+夢
+尊
+隻
+審
+固
+編
+辞
+脱
+爪
+ね
+契
+猫
+占
+濃
+毒
+湖
+抜
+蔵
+若
+顧
+列
+x
+洪
+貿
+押
+裕
+骨
+互
+葬
+旧
+肝
+塞
+盗
+百
+砂
+暖
+策
+等
+符
+晩
+ひ
+巨
+靴
+混
+努
+網
+練
+騎
+退
+渓
+谷
+略
+掘
+穴
+座
+削
+狩
+旬
+駆
+卒
+憶
+筋
+伴
+弱
+誌
+冷
+ゃ
+襲
+誕
+駐
+衝
+陣
+圏
+干
+岩
+背
+返
+歯
+叩
+炉
+眼
+純
+醸
+蛇
+香
+致
+蒸
+隠
+迅
+祖
+覧
+糖
+貫
+円
+渉
+厚
+劇
+布
+殖
+創
+装
+巡
+絡
+田
+雲
+蚊
+闘
+秀
+算
+藤
+秩
+序
+遭
+己
+馴
+旗
+牧
+雇
+炭
+沢
+白
+膨
+孔
+愛
+雷
+繁
+福
+熊
+戚
+喜
+簿
+栄
+暮
+阻
+鍵
+循
+武
+縦
+踵
+奏
+遂
+疲
+皆
+搬
+貴
+筆
+驚
+譲
+顔
+財
+仲
+掲
+斜
+頂
+礼
+診
+豪
+恒
+九
+秘
+里
+災
+壁
+欲
+腕
+虫
+借
+兆
+腹
+困
+湿
+硬
+舎
+耳
+輪
+介
+草
+丘
+逸
+招
+誘
+描
+把
+焼
+熟
+猛
+塔
+矛
+盾
+虐
+崎
+県
+佐
+妃
+宮
+隔
+戒
+礁
+殊
+耐
+揃
+匹
+掃
+納
+匂
+狙
+志
+停
+鉄
+鮫
+森
+封
+滅
+春
+秒
+釈
+飼
+犬
+砕
+薄
+妨
+四
+廷
+潮
+絞
+韓
+閲
+嘘
+芝
+摘
+妻
+吹
+霊
+摂
+冒
+柄
+聴
+銃
+添
+窒
+椅
+泡
+践
+藻
+塩
+討
+曖
+昧
+昼
+z
+父
+軒
+貧
+塗
+姫
+昔
+壇
+麓
+腫
+乾
+緩
+褒
+玉
+透
+斎
+昇
+訓
+拘
+談
+是
+仰
+哲
+顕
+搭
+督
+排
+胡
+錦
+濤
+猟
+稀
+鳴
+磁
+幕
+鮮
+麻
+祉
+弟
+怒
+遡
+勾
+筒
+養
+魚
+朗
+青
+溢
+丸
+裏
+囚
+卿
+盤
+嵐
+久
+踏
+哺
+乳
+:
+邸
+仮
+綴
+拓
+販
+瓶
+棒
+郊
+禽
+剤
+黄
+堤
+令
+獄
+尾
+晰
+募
+宛
+鋭
+尖
+冠
+隙
+普
+搾
+靭
+看
+孤
+勉
+阪
+枠
+涼
+講
+傑
+賊
+廃
+静
+束
+洗
+履
+既
+錯
+漁
+晴
+敬
+旋
+胆
+癌
+鉛
+須
+永
+掛
+彩
+隕
+逆
+庁
+嫌
+貯
+杯
+抱
+巣
+寂
+輩
+ぽ
+！
+娯
+腰
+媒
+℃
+柱
+八
+沈
+替
+夕
+怯
+懲
+捨
+剰
+贅
+疫
+肉
+艇
+菓
+潔
+縮
+崖
+喉
+鋼
+促
+鹿
+×
+訛
+郷
+扇
+箱
+函
+慎
+彗
+慮
+宣
+妙
+綻
+扉
+罰
+枝
+噛
+包
+掌
+焉
+札
+徐
+詞
+棺
+餌
+曹
+猿
+緯
+鍛
+克
+贄
+捧
+刈
+亀
+陶
+羽
+悩
+唸
+憾
+井
+噴
+疽
+耕
+双
+桜
+鑑
+縛
+晶
+漠
+斉
+仁
+僧
+侶
+ぷ
+紅
+茶
+q
+擬
+臣
+瘍
+酔
+鈍
+姉
+妹
+顎
+皇
+遇
+勤
+棄
+俗
+鐙
+鞍
+預
+舗
+併
+榜
+庫
+泣
+叫
+戯
+仏
+毛
+雀
+齧
+濯
+抵
+節
+衣
+詩
+孫
+馳
+犠
+牲
+執
+副
+姦
+童
+窃
+乞
+誇
+胎
+肺
+雰
+迫
+忘
+狼
+需
+奮
+鄧
+誤
+尽
+灯
+拾
+剣
+辛
+贈
+涙
+挟
+宴
+呪
+讐
+痢
+寿
+願
+浴
+臆
+励
+絵
+肥
+唱
+膜
+句
+章
+啓
+蒙
+緒
+俺
+叶
+矢
+鎧
+鼻
+倫
+²
+浅
+塊
+捉
+詐
+欺
+慢
+疼
+雅
+佇
+縄
+勇
+忍
+翌
+泥
+賄
+債
+濡
+寮
+怠
+屯
+梅
+沖
+ぱ
+迷
+銅
+罠
+牛
++
+蓋
+浪
+貼
+株
+骸
+斗
+渦
+廊
+嘔
+吐
+糧
+硫
+遮
+涯
+柵
+杭
+砲
+没
+堪
+帥
+欄
+潤
+礎
+浸
+弊
+娘
+稼
+吊
+'
+幾
+傘
+狂
+墟
+祥
+豚
+帳
+賑
+暫
+淹
+休
+暇
+儲
+挫
+賛
+君
+偽
+控
+御
+盲
+黙
+床
+蔓
+訣
+垣
+迎
+趣
+膝
+彙
+疎
+卓
+凌
+&
+騙
+寸
+掻
+槍
+彷
+彿
+霧
+卵
+殻
+錆
+充
+偵
+勘
+屠
+誉
+雄
+哨
+煽
+堂
+聡
+迂
+撲
+恥
+七
+陵
+１
+甚
+疾
+幼
+峡
+峻
+坦
+舶
+浄
+裸
+彫
+伏
+虜
+訟
+皮
+膚
+撒
+瞬
+袋
+酷
+箋
+壌
+冊
+薦
+穏
+恍
+惚
+崇
+拝
+僚
+苗
+凝
+遣
+炎
+諦
+幻
+蜃
+楼
+懐
+憑
+苛
+郡
+兄
+駅
+緑
+ぬ
+僕
+架
+献
+悲
+笑
+脚
+灰
+抽
+髪
+却
+貢
+才
+魔
+析
+羊
+鉱
+乱
+恋
+帽
+老
+縁
+岐
+如
+奇
+麦
+即
+撤
+屈
+械
+棚
+邪
+凍
+五
+奴
+甲
+俳
+兼
+翼
+碑
+粘
+縫
+燥
+詰
+駄
+揚
+忙
+締
+稿
+騒
+樹
+軌
+慈
+隷
+挿
+粉
+ぺ
+謀
+陰
+尋
+漫
+爵
+冗
+挑
+菜
+豆
+煮
+飽
+飯
+璧
+甘
+祈
+鶏
+肌
+机
+跳
+揺
+六
+偶
+賢
+歓
+綿
+乏
+烈
+紹
+錬
+輝
+池
+刊
+項
+粋
+蓄
+昆
+戸
+脇
+均
+繋
+繊
+召
+芽
+奨
+肖
+笛
+飢
+頑
+姓
+巧
+踊
+ヶ
+漢
+宋
+癒
+恵
+宝
+唇
+褐
+軸
+堆
+軟
+桟
+訂
+陳
+伯
+枢
+棟
+闇
+砦
+衰
+幣
+擁
+紫
+垂
+鼓
+糸
+匿
+腐
+杉
+錠
+妊
+娠
+頸
+溶
+栓
+粧
+煙
+房
+擦
+惟
+叔
+悔
+誠
+溜
+汁
+舌
+嘆
+玄
+懇
+泉
+斧
+釘
+剃
+誓
+淡
+漂
+奈
+妖
+賂
+甥
+漕
+蹴
+畑
+肯
+腺
+茎
+紋
+愉
+枯
+芳
+轄
+閣
+附
+償
+恩
+弦
+礫
+獣
+頬
+臨
+奉
+謎
+瀬
+嬉
+江
+呂
+僅
+拐
+胸
+鐘
+隅
+縞
+倉
+茂
+魂
+窯
+犀
+醜
+倣
+蜂
+郎
+貸
+虹
+勃
+括
+挨
+拶
+惨
+随
+箔
+惹
+填
+奥
+沃
+瓦
+—
+拷
+穀
+敢
+径
+釣
+盆
+爬
+窮
+綺
+麗
+遥
+顆
+松
+栽
+培
+秦
+赦
+尉
+叙
+勲
+脂
+妥
+瞭
+汗
+摩
+槽
+皿
+胃
+抹
+ぁ
+眉
+謙
+敏
+枕
+漬
+些
+酬
+裾
+泌
+溺
+掴
+寛
+穫
+渇
+恨
+繕
+秋
+嫁
+愚
+–
+朽
+腎
+柳
+塀
+醇
+渋
+燕
+臼
+腸
+牡
+蠣
+岳
+丹
+遼
+寧
+陛
+蛋
+刃
+葦
+蛮
+汲
+鋤
+爽
+孵
+淘
+汰
+荊
+軻
+昌
+濁
+酢
+沼
+覇
+矯
+這
+脊
+椎
+蔗
+蒼
+鶯
+ぇ
+苔
+謖
+殉
+吉
+喪
+暢
+偉
+塹
+壕
+庵
+乙
+灌
+漑
+髭
+俣
+媽
+祠
+蜜
+蝋
+拍
+蔦
+茅
+葺
+忠
+彰
+遷
+軋
+憎
+繞
+閑
+沸
+胴
+堀
+罹
+廟
+耗
+憩
+厄
+蘇
+戴
+畜
+鳩
+竹
+蹄
+冶
+娼
+熾
+崔
+嗅
+膾
+炙
+橄
+欖
+剥
+繫
+〜
+虎
+膿
+憧
+其
+篤
+躁
+鬱
+痩
+煉
+偏
+瀕
+餓
+橙
+丁
+龍
+韻
+酵
+斑
+勅
+膀
+胱
+零
+鞭
+堕
+梨
+昏
+尻
+辱
+絨
+鷹
+毅
+痕
+硝
+讃
+拭
+羅
+磨
+噂
+坂
+餐
+葛
+滴
+鎮
+扮
+貌
+寡
+碁
+雌
+銘
+呈
+膳
+董
+采
+藍
+舟
+肪
+貞
+蛾
+牝
+茹
+呆
+慌
+厨
+騰
+叱
+晒
+愕
+ヅ
+缶
+曳
+饉
+糾
+冑
+恰
+鴨
+弩
+往
+楕
+辣
+膏
+弧
+股
+逐
+蝶
+臭
+汎
+刀
+杖
+又
+伐
+后
+肘
+殴
+貪
+酋
+贖
+蛙
+只
+膣
+粗
+虚
+宜
+錨
+閥
+喩
+絆
+駈
+綜
+斯
+汝
+丈
+尤
+朦
+朧
+或
+寵
+惜
+ぴ
+跨
+劣
+ゅ
+怨
+瞑
+澄

mms-1b-all/kam/tokens.txt

@@ -1,64 +1,68 @@
-| 68245
-a 59691
-i 35038
-n 32449
-k 20657
-e 19538
-u 19059
-m 17565
-t 16822
-w 15018
-y 14378
-o 12644
-s 11881
-l 10296
-ĩ 8673
-h 6855
-ũ 6710
-d 5968
-v 5897
-g 4754
-b 3010
-r 2672
-' 1379
-c 1259
-p 1108
-z 1004
-0 779
-1 552
-f 476
-î 404
-2 334
-j 298
-û 292
-9 248
-5 207
-4 198
-8 188
-3 182
-6 175
-. 162
-- 134
-7 113
-x 103
-, 84
-í 66
-q 59
-ú 52
-” 50
-: 40
-/ 33
-$ 11
-% 9
-ü 9
-; 8
-~ 6
-+ 5
-ì 3
-ḉ 3
-£ 3
-& 2
-° 2
-ã 2
-á 2
-! 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+i
+n
+k
+e
+u
+m
+t
+w
+y
+o
+s
+l
+ĩ
+h
+ũ
+d
+v
+g
+b
+r
+'
+c
+p
+z
+0
+1
+f
+î
+2
+j
+û
+9
+5
+4
+8
+3
+6
+.
+-
+7
+x
+,
+í
+q
+ú
+”
+:
+/
+$
+%
+ü
+;
+~
++
+ì
+ḉ
+£
+&
+°
+ã
+á
+!

mms-1b-all/kan/tokens.txt

@@ -1,121 +1,125 @@
-| 291946
-್ 184677
-ಿ 169455
-ು 174771
-ರ 122610
-ಾ 90743
-ದ 137160
-ನ 181433
-ತ 89035
-ೆ 90875
-ಗ 76054
-ವ 95579
-ಲ 75534
-ಕ 69501
-ಸ 56357
-ಯ 57531
-ಮ 54945
-ಂ 53337
-ಳ 42162
-ಪ 29542
-ಡ 29325
-ಹ 29780
-ಟ 17621
-ಬ 34579
-ೇ 45508
-ಅ 22469
-ೊ 22572
-ಚ 6223
-ೀ 16184
-ೂ 20527
-ೋ 16809
-ಜ 11777
-ಷ 9096
-ಣ 6612
-ಶ 8326
-ಆ 17583
-ಧ 8367
-‌ 1116
-ಎ 8608
-ಇ 8056
-ಭ 5862
-ಥ 3878
-ೈ 1863
-ಒ 4958
-0 85
-ಫ 1286
-ಉ 2493
-ಖ 1183
-1 153
-ಈ 3983
-2 61
-ೃ 1944
-ೌ 1701
-. 198
-9 31
-ಏ 1816
-5 44
-ಘ 231
-4 63
-- 36
-6 40
-3 45
-8 34
-7 19
-ಐ 328
-, 80
-‍ 7
-ಠ 384
-ಞ 1293
-ಓ 272
-a 66
-i 58
-c 44
-o 44
-t 44
-: 43
-m 42
-ಃ 298
-r 40
-s 37
-p 36
-/ 35
-e 30
-n 28
-u 28
-d 27
-ಔ 61
-" 26
-ಊ 663
-l 24
-ಛ 150
-b 20
-v 19
-' 144
-ಢ 225
-g 12
-ಋ 4
-ಝ 23
-h 10
-w 10
-; 9
-$ 9
-% 8
-f 7
-k 7
-x 7
-! 6
-y 6
-​ 4
-z 3
-° 3
-? 2
-õ 2
-+ 2
-– 2
-q 2
-j 2
-² 1
-೪ 1
-[ 1
-] 1
+<s>
+<pad>
+</s>
+<unk>
+|
+್
+ಿ
+ು
+ರ
+ಾ
+ದ
+ನ
+ತ
+ೆ
+ಗ
+ವ
+ಲ
+ಕ
+ಸ
+ಯ
+ಮ
+ಂ
+ಳ
+ಪ
+ಡ
+ಹ
+ಟ
+ಬ
+ೇ
+ಅ
+ೊ
+ಚ
+ೀ
+ೂ
+ೋ
+ಜ
+ಷ
+ಣ
+ಶ
+ಆ
+ಧ
+‌
+ಎ
+ಇ
+ಭ
+ಥ
+ೈ
+ಒ
+0
+ಫ
+ಉ
+ಖ
+1
+ಈ
+2
+ೃ
+ೌ
+.
+9
+ಏ
+5
+ಘ
+4
+-
+6
+3
+8
+7
+ಐ
+,
+‍
+ಠ
+ಞ
+ಓ
+a
+i
+c
+o
+t
+:
+m
+ಃ
+r
+s
+p
+/
+e
+n
+u
+d
+ಔ
+"
+ಊ
+l
+ಛ
+b
+v
+'
+ಢ
+g
+ಋ
+ಝ
+h
+w
+;
+$
+%
+f
+k
+x
+!
+y
+​
+z
+°
+?
+õ
++
+–
+q
+j
+²
+೪
+[
+]

mms-1b-all/kat/tokens.txt

@@ -1,89 +1,93 @@
-| 12329
-ა 12561
-ი 11584
-ე 8528
-ს 6429
-რ 5610
-ო 4737
-მ 4347
-ნ 3660
-დ 3743
-ლ 4352
-ბ 3438
-ვ 2902
-უ 2627
-თ 2383
-გ 1855
-შ 1613
-ტ 1589
-ხ 1306
-ც 972
-კ 1423
-ზ 796
-ქ 956
-წ 723
-პ 714
-ფ 724
-ყ 578
-ძ 315
-ღ 437
-ჩ 312
-- 140
-ჯ 210
-0 317
-1 228
-ჰ 112
-ჭ 98
-2 158
-9 110
-a 108
-4 94
-5 87
-n 86
-6 81
-o 77
-3 76
-e 75
-i 71
-8 67
-s 66
-ჟ 63
-r 58
-c 53
-7 51
-t 49
-l 48
-. 41
-p 37
-d 35
-g 33
-, 32
-m 27
-/ 27
-h 25
-: 23
-u 22
-v 22
-b 21
-k 16
-f 15
-— 10
-w 10
-y 10
-x 8
-; 7
-j 6
-% 5
-õ 4
-q 3
-z 3
-' 2
-+ 1
-° 1
-ú 1
-& 1
-[ 1
-] 1
-! 1
-² 1
-– 4
+<s>
+<pad>
+</s>
+<unk>
+|
+ა
+ი
+ე
+ს
+რ
+ო
+მ
+ნ
+დ
+ლ
+ბ
+ვ
+უ
+თ
+გ
+შ
+ტ
+ხ
+ც
+კ
+ზ
+ქ
+წ
+პ
+ფ
+ყ
+ძ
+ღ
+ჩ
+-
+ჯ
+0
+1
+ჰ
+ჭ
+2
+9
+a
+4
+5
+n
+6
+o
+3
+e
+i
+8
+s
+ჟ
+r
+c
+7
+t
+l
+.
+p
+d
+g
+,
+m
+/
+h
+:
+u
+v
+b
+k
+f
+—
+w
+y
+x
+;
+j
+%
+õ
+q
+z
+'
++
+°
+ú
+&
+[
+]
+!
+²
+–

mms-1b-all/kaz/tokens.txt

@@ -1,104 +1,108 @@
-| 115008
-а 85815
-е 57698
-н 49515
-ы 48634
-т 33366
-р 39736
-і 46991
-л 33295
-д 39605
-с 28256
-к 15665
-о 16018
-м 21355
-қ 21876
-б 18267
-у 8955
-и 7357
-ж 9655
-ғ 10962
-й 14963
-п 14126
-ң 12978
-г 7667
-з 10574
-ш 8738
-ү 6720
-ә 6751
-ө 6667
-ұ 8267
-я 1699
-в 20
-ф 152
-- 1170
-х 2580
-0 734
-ц 1
-1 569
-ь 3
-a 2
-э 3
-e 364
-2 354
-n 322
-o 316
-t 306
-r 303
-i 1
-« 288
-» 288
-s 276
-9 259
-5 218
-4 202
-l 189
-. 185
-c 2
-3 180
-8 171
-6 170
-ю 61
-ч 157
-h 142
-p 129
-d 125
-7 124
-u 111
-g 103
-m 99
-b 85
-: 76
-k 69
-f 61
-w 58
-y 55
-/ 51
-v 48
-, 34
-— 2083
-ъ 22
-x 22
-j 20
-z 16
-һ 330
-' 13
-% 9
-q 7
-; 7
-! 5
-& 4
-– 4
-+ 4
-щ 6
-° 4
-№ 3
-[ 2
-] 2
-$ 2
-ú 2
-? 2
-í 2
-ó 2
-õ 2
-ё 1
+<s>
+<pad>
+</s>
+<unk>
+|
+а
+е
+н
+ы
+т
+р
+і
+л
+д
+с
+к
+о
+м
+қ
+б
+у
+и
+ж
+ғ
+й
+п
+ң
+г
+з
+ш
+ү
+ә
+ө
+ұ
+я
+в
+ф
+-
+х
+0
+ц
+1
+ь
+a
+э
+e
+2
+n
+o
+t
+r
+i
+«
+»
+s
+9
+5
+4
+l
+.
+c
+3
+8
+6
+ю
+ч
+h
+p
+d
+7
+u
+g
+m
+b
+:
+k
+f
+w
+y
+/
+v
+,
+—
+ъ
+x
+j
+z
+һ
+'
+%
+q
+;
+!
+&
+–
++
+щ
+°
+№
+[
+]
+$
+ú
+?
+í
+ó
+õ
+ё

mms-1b-all/kea/tokens.txt

@@ -1,71 +1,75 @@
-| 58435
-a 34368
-i 31237
-n 20962
-u 20245
-s 19384
-t 16447
-e 15859
-d 15595
-r 15433
-o 11847
-k 10407
-l 9178
-p 8364
-m 7733
-b 4081
-f 3277
-v 3241
-g 2971
-é 2817
-z 2412
-j 2273
-y 1699
-h 1586
-á 1379
-x 992
-í 891
-ô 714
-0 603
-ó 599
-ê 514
-c 508
-- 482
-1 432
-ú 290
-2 282
-w 246
-9 200
-5 169
-4 168
-. 164
-3 162
-6 137
-8 129
-7 91
-â 85
-: 38
-/ 36
-, 36
-q 36
-' 28
-” 28
-º 18
-ü 10
-% 9
-ã 7
-; 6
-õ 4
-+ 3
-[ 3
-] 3
-¥ 3
-$ 2
-ª 2
-& 2
-° 2
-ł 2
-ç 2
-£ 1
-² 1
-̇ 1
+<s>
+<pad>
+</s>
+<unk>
+|
+a
+i
+n
+u
+s
+t
+e
+d
+r
+o
+k
+l
+p
+m
+b
+f
+v
+g
+é
+z
+j
+y
+h
+á
+x
+í
+ô
+0
+ó
+ê
+c
+-
+1
+ú
+2
+w
+9
+5
+4
+.
+3
+6
+8
+7
+â
+:
+/
+,
+q
+'
+”
+º
+ü
+%
+ã
+;
+õ
++
+[
+]
+¥
+$
+ª
+&
+°
+ł
+ç
+£
+²
+̇

mms-1b-all/khm/tokens.txt

@@ -1,148 +1,152 @@
-ា 58553
-្ 72701
-ន 47710
-រ 44483
-ក 31623
-ប 34365
-ស 30594
-ម 25747
-ង 28398
-ល 22336
-ត 17740
-់ 20638
-ទ 17073
-យ 21942
-ដ 18603
-ិ 14099
-ុ 15638
-េ 12961
-ព 20357
-ំ 15700
-ច 14524
-ី 9712
-វ 8897
-ើ 15075
-ែ 10204
-ជ 11911
-គ 13141
-ូ 13278
-អ 19443
-ោ 14996
-ះ 17146
-ៅ 6299
-ួ 6075
-ហ 5203
-ណ 4996
-ញ 7779
-ធ 3082
-ខ 6557
-ថ 4566
-ផ 2542
-a 1253
-ភ 1718
-៉ 2924
-ឹ 4588
-​ 857
-e 852
-ៃ 1294
-r 791
-o 782
-n 778
-ឡ 2717
-i 699
-ឺ 1152
-s 647
-័ 1383
-៊ 1585
-l 507
-t 505
-៍ 917
-ឆ 767
-ៀ 2178
-៏ 2232
-0 374
-h 372
-c 361
-u 326
-m 308
-d 302
-ឋ 231
-1 1
-g 300
-p 257
-ឈ 589
-ឱ 115
-ៈ 641
-ៗ 224
-ឬ 444
-b 192
-k 188
-ឌ 143
-2 178
-ឃ 1185
-y 150
-ឿ 1026
-9 138
-w 121
-f 116
-។ 113
-5 109
-៌ 214
-v 104
-6 102
-4 100
-ឯ 762
-8 92
-ឧ 94
-3 88
-j 74
-ឥ 352
-ឲ 67
-7 61
-z 57
-- 8
-. 42
-x 40
-, 39
-q 1
-ឍ 22
-៖ 19
-' 19
-៧ 15
-/ 11
-” 10
-១ 10
-" 10
-% 10
-០ 9
-: 9
-ü 8
-ឪ 97
-« 7
-» 7
-ç 4
-$ 4
-á 4
-២ 3
-ឮ 271
-— 3
-& 2
-; 2
-ឫ 387
-ឦ 2
-í 2
-ឳ 2
-õ 2
-៎ 26
-! 1
-? 1
-é 1
-° 1
-៥ 1
-៣ 1
-[ 1
-] 1
-² 1
-£ 1
-ú 1
-ឭ 1
+<s>
+<pad>
+</s>
+<unk>
+ា
+្
+ន
+រ
+ក
+ប
+ស
+ម
+ង
+ល
+ត
+់
+ទ
+យ
+ដ
+ិ
+ុ
+េ
+ព
+ំ
+ច
+ី
+វ
+ើ
+ែ
+ជ
+គ
+ូ
+អ
+ោ
+ះ
+ៅ
+ួ
+ហ
+ណ
+ញ
+ធ
+ខ
+ថ
+ផ
+a
+ភ
+៉
+ឹ
+​
+e
+ៃ
+r
+o
+n
+ឡ
+i
+ឺ
+s
+័
+៊
+l
+t
+៍
+ឆ
+ៀ
+៏
+0
+h
+c
+u
+m
+d
+ឋ
+1
+g
+p
+ឈ
+ឱ
+ៈ
+ៗ
+ឬ
+b
+k
+ឌ
+2
+ឃ
+y
+ឿ
+9
+w
+f
+។
+5
+៌
+v
+6
+4
+ឯ
+8
+ឧ
+3
+j
+ឥ
+ឲ
+7
+z
+-
+.
+x
+,
+q
+ឍ
+៖
+'
+៧
+/
+”
+១
+"
+%
+០
+:
+ü
+ឪ
+«
+»
+ç
+$
+á
+២
+ឮ
+—
+&
+;
+ឫ
+ឦ
+í
+ឳ
+õ
+៎
+!
+?
+é
+°
+៥
+៣
+[
+]
+²
+£
+ú
+ឭ

mms-1b-all/kir/tokens.txt

@@ -1,97 +1,101 @@
-| 109564
-а 86924
-н 51156
-р 35974
-т 29877
-к 37405
-л 31793
-е 36393
-ы 40069
-и 30681
-у 25825
-д 33013
-о 19979
-ү 17899
-г 19025
-б 21864
-м 17930
-с 15737
-ө 15579
-ж 9800
-ш 12679
-п 12895
-й 15179
-ч 7819
-з 8869
-э 6618
-я 2149
-ң 4686
-в 64
-- 889
-ф 240
-0 688
-ю 599
-ц 2
-1 525
-х 456
-2 320
-ь 4
-a 231
-9 228
-e 197
-5 189
-o 188
-n 186
-4 163
-i 162
-6 157
-r 156
-3 155
-t 152
-s 149
-8 146
-. 122
-c 115
-7 108
-l 103
-p 85
-g 74
-u 74
-d 71
-h 65
-m 56
-: 53
-b 48
-f 42
-k 33
-/ 32
-, 32
-' 30
-ё 149
-— 162
-v 28
-ъ 2
-y 27
-w 24
-– 2110
-’ 17
-% 16
-j 10
-" 7
-x 7
-q 6
-z 6
-õ 6
-¥ 6
-+ 5
-№ 5
-; 4
-° 4
-щ 1
-́ 2
-& 2
-² 2
-* 2
-[ 2
-] 2
-ú 1
+<s>
+<pad>
+</s>
+<unk>
+|
+а
+н
+р
+т
+к
+л
+е
+ы
+и
+у
+д
+о
+ү
+г
+б
+м
+с
+ө
+ж
+ш
+п
+й
+ч
+з
+э
+я
+ң
+в
+-
+ф
+0
+ю
+ц
+1
+х
+2
+ь
+a
+9
+e
+5
+o
+n
+4
+i
+6
+r
+3
+t
+s
+8
+.
+c
+7
+l
+p
+g
+u
+d
+h
+m
+:
+b
+f
+k
+/
+,
+'
+ё
+—
+v
+ъ
+y
+w
+–
+’
+%
+j
+"
+x
+q
+z
+õ
+¥
++
+№
+;
+°
+щ
+́
+&
+²
+*
+[
+]
+ú