optimum-internal-testing-user commited on
Commit
211980b
1 Parent(s): c74901f

Upload vocab.txt with huggingface_hub

Browse files
Files changed (1) hide show
  1. vocab.txt +1124 -0
vocab.txt ADDED
@@ -0,0 +1,1124 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ [PAD]
2
+ [UNK]
3
+ [CLS]
4
+ [SEP]
5
+ [MASK]
6
+ !
7
+ "
8
+ #
9
+ $
10
+ %
11
+ &
12
+ '
13
+ (
14
+ )
15
+ *
16
+ +
17
+ ,
18
+ -
19
+ .
20
+ /
21
+ 0
22
+ 1
23
+ 2
24
+ 3
25
+ 4
26
+ 5
27
+ 6
28
+ 7
29
+ 8
30
+ 9
31
+ :
32
+ ;
33
+ <
34
+ =
35
+ >
36
+ ?
37
+ @
38
+ [
39
+ \
40
+ ]
41
+ ^
42
+ _
43
+ `
44
+ a
45
+ b
46
+ c
47
+ d
48
+ e
49
+ f
50
+ g
51
+ h
52
+ i
53
+ j
54
+ k
55
+ l
56
+ m
57
+ n
58
+ o
59
+ p
60
+ q
61
+ r
62
+ s
63
+ t
64
+ u
65
+ v
66
+ w
67
+ x
68
+ y
69
+ z
70
+ |
71
+ }
72
+ ~
73
+ ¡
74
+ ¢
75
+ £
76
+ ¥
77
+ §
78
+ °
79
+ ±
80
+ ²
81
+ ³
82
+ ´
83
+ µ
84
+ ·
85
+ º
86
+ ½
87
+ ¿
88
+ ×
89
+ ß
90
+ æ
91
+ ð
92
+ ø
93
+ þ
94
+ đ
95
+ ħ
96
+ ı
97
+ ł
98
+ œ
99
+ ɐ
100
+ ɑ
101
+ ɒ
102
+ ɔ
103
+ ə
104
+ ɛ
105
+ ɜ
106
+ ɡ
107
+ ɢ
108
+ ɪ
109
+ ɫ
110
+ ɳ
111
+ ɽ
112
+ ɾ
113
+ ʁ
114
+ ʃ
115
+ ʊ
116
+ ʋ
117
+ ʒ
118
+ ʔ
119
+ ʕ
120
+ ʲ
121
+ ʻ
122
+ ʼ
123
+ ʾ
124
+ ʿ
125
+ ˈ
126
+ ˌ
127
+ ː
128
+ α
129
+ β
130
+ γ
131
+ δ
132
+ ε
133
+ η
134
+ θ
135
+ ι
136
+ κ
137
+ λ
138
+ μ
139
+ ν
140
+ ξ
141
+ ο
142
+ π
143
+ ρ
144
+ ς
145
+ σ
146
+ τ
147
+ υ
148
+ φ
149
+ χ
150
+ ψ
151
+ ω
152
+ а
153
+ б
154
+ в
155
+ г
156
+ д
157
+ е
158
+ ж
159
+ з
160
+ и
161
+ к
162
+ л
163
+ м
164
+ н
165
+ о
166
+ п
167
+ р
168
+ с
169
+ т
170
+ у
171
+ х
172
+ ц
173
+ ш
174
+ ъ
175
+ ы
176
+ ь
177
+ ю
178
+ я
179
+ є
180
+ א
181
+ ב
182
+ ג
183
+ ה
184
+ ו
185
+ ז
186
+ ח
187
+ י
188
+ ל
189
+ ם
190
+ מ
191
+ ן
192
+ נ
193
+ ס
194
+ ף
195
+ פ
196
+ צ
197
+ ר
198
+ ש
199
+ ת
200
+ ء
201
+ ا
202
+ ب
203
+ ة
204
+ ت
205
+ ث
206
+ ج
207
+ ح
208
+ خ
209
+ د
210
+ ذ
211
+ ر
212
+ س
213
+ ش
214
+ ص
215
+ ع
216
+ ف
217
+ ق
218
+ ك
219
+ ل
220
+ م
221
+ ن
222
+ ه
223
+ و
224
+ ي
225
+ ܐ
226
+ ܕ
227
+ ܗ
228
+ ܝ
229
+ ܠ
230
+ ܢ
231
+ ܬ
232
+
233
+
234
+
235
+
236
+
237
+
238
+
239
+
240
+
241
+
242
+
243
+
244
+
245
+
246
+
247
+
248
+
249
+
250
+ ि
251
+
252
+
253
+
254
+
255
+
256
+
257
+
258
+
259
+
260
+
261
+
262
+
263
+
264
+
265
+
266
+
267
+
268
+
269
+
270
+
271
+
272
+
273
+
274
+
275
+
276
+
277
+
278
+
279
+
280
+
281
+
282
+
283
+
284
+
285
+
286
+
287
+
288
+
289
+
290
+
291
+
292
+
293
+
294
+
295
+
296
+
297
+
298
+
299
+
300
+
301
+
302
+
303
+
304
+
305
+
306
+
307
+
308
+
309
+
310
+
311
+
312
+
313
+
314
+
315
+
316
+
317
+
318
+
319
+
320
+
321
+
322
+
323
+
324
+
325
+
326
+
327
+
328
+
329
+
330
+
331
+
332
+
333
+
334
+
335
+
336
+
337
+
338
+
339
+
340
+
341
+
342
+
343
+
344
+
345
+
346
+
347
+
348
+
349
+
350
+
351
+
352
+
353
+
354
+
355
+
356
+
357
+
358
+
359
+
360
+
361
+
362
+
363
+
364
+
365
+
366
+
367
+
368
+
369
+
370
+
371
+
372
+
373
+
374
+
375
+
376
+
377
+
378
+
379
+
380
+
381
+
382
+
383
+
384
+
385
+
386
+
387
+
388
+
389
+
390
+
391
+
392
+
393
+
394
+
395
+
396
+
397
+
398
+
399
+
400
+
401
+
402
+
403
+
404
+
405
+
406
+
407
+
408
+
409
+
410
+
411
+
412
+
413
+
414
+
415
+
416
+
417
+
418
+
419
+
420
+
421
+
422
+
423
+
424
+
425
+
426
+
427
+
428
+
429
+
430
+
431
+
432
+
433
+
434
+
435
+
436
+
437
+
438
+
439
+
440
+
441
+
442
+
443
+
444
+
445
+
446
+
447
+
448
+
449
+
450
+
451
+
452
+
453
+
454
+
455
+
456
+
457
+
458
+
459
+
460
+
461
+
462
+
463
+
464
+
465
+
466
+
467
+
468
+
469
+
470
+
471
+
472
+
473
+
474
+
475
+
476
+
477
+
478
+
479
+
480
+
481
+
482
+
483
+
484
+
485
+
486
+
487
+
488
+
489
+
490
+
491
+
492
+
493
+
494
+
495
+
496
+
497
+
498
+
499
+
500
+
501
+
502
+
503
+
504
+
505
+
506
+
507
+
508
+
509
+
510
+
511
+
512
+
513
+
514
+
515
+
516
+
517
+
518
+
519
+
520
+
521
+
522
+
523
+
524
+
525
+
526
+
527
+
528
+
529
+
530
+
531
+
532
+
533
+
534
+
535
+
536
+
537
+
538
+
539
+
540
+
541
+
542
+
543
+
544
+
545
+
546
+
547
+
548
+
549
+
550
+
551
+
552
+
553
+
554
+
555
+
556
+
557
+
558
+
559
+
560
+
561
+
562
+
563
+
564
+
565
+
566
+
567
+
568
+
569
+
570
+
571
+
572
+
573
+
574
+
575
+
576
+
577
+
578
+
579
+ 广
580
+
581
+
582
+
583
+
584
+
585
+
586
+
587
+
588
+
589
+
590
+
591
+
592
+
593
+
594
+
595
+
596
+
597
+
598
+
599
+
600
+
601
+
602
+
603
+
604
+
605
+
606
+
607
+
608
+
609
+
610
+
611
+
612
+
613
+
614
+
615
+
616
+
617
+
618
+
619
+
620
+
621
+
622
+
623
+
624
+
625
+
626
+
627
+
628
+
629
+
630
+
631
+
632
+
633
+
634
+
635
+
636
+
637
+
638
+
639
+
640
+
641
+
642
+
643
+
644
+ 殿
645
+
646
+
647
+
648
+
649
+
650
+
651
+
652
+
653
+
654
+
655
+
656
+
657
+
658
+
659
+
660
+
661
+
662
+
663
+
664
+
665
+
666
+
667
+
668
+
669
+
670
+
671
+
672
+
673
+
674
+
675
+
676
+
677
+
678
+
679
+
680
+
681
+
682
+
683
+
684
+
685
+
686
+
687
+
688
+
689
+
690
+
691
+
692
+
693
+
694
+
695
+
696
+
697
+
698
+
699
+
700
+
701
+
702
+
703
+
704
+
705
+
706
+
707
+
708
+
709
+
710
+
711
+
712
+
713
+
714
+
715
+
716
+
717
+
718
+
719
+
720
+
721
+
722
+
723
+
724
+
725
+
726
+
727
+
728
+
729
+
730
+
731
+
732
+
733
+
734
+
735
+
736
+
737
+
738
+
739
+
740
+
741
+
742
+
743
+
744
+
745
+
746
+
747
+
748
+
749
+
750
+
751
+
752
+
753
+
754
+
755
+
756
+
757
+
758
+
759
+
760
+
761
+
762
+
763
+
764
+
765
+
766
+
767
+
768
+
769
+
770
+
771
+
772
+
773
+
774
+
775
+
776
+
777
+
778
+
779
+
780
+
781
+
782
+
783
+
784
+
785
+
786
+
787
+
788
+
789
+
790
+
791
+ ##i
792
+ ##y
793
+ ##o
794
+ ##r
795
+ ##g
796
+ ##a
797
+ ##w
798
+ ##l
799
+ ##b
800
+ ##z
801
+ ##t
802
+ ##n
803
+ ##c
804
+ ##h
805
+ ##s
806
+ ##u
807
+ ##d
808
+ ##e
809
+ ##k
810
+ ##v
811
+ ##f
812
+ ##x
813
+ ##q
814
+ ##p
815
+ ##æ
816
+ ##0
817
+ ##5
818
+ ##m
819
+ ##8
820
+ ##4
821
+ ##س
822
+ ##ت
823
+ ##ا
824
+ ##ن
825
+ ##6
826
+ ##1
827
+ ##7
828
+ ##j
829
+ ##つ
830
+ ##う
831
+ ##2
832
+ ##9
833
+ ##3
834
+ ##ø
835
+ ##ล
836
+ ##ว
837
+ ##ง
838
+ ##พ
839
+ ##ไ
840
+ ##ช
841
+ ##ย
842
+ ##า
843
+ ##ร
844
+ ##თ
845
+ ##ა
846
+ ##ვ
847
+ ##რ
848
+ ##ი
849
+ ##ള
850
+ ##あ
851
+ ##ん
852
+ ##α
853
+ ##ν
854
+ ##τ
855
+ ##ο
856
+ ##κ
857
+ ##ρ
858
+ ##ω
859
+ ##ς
860
+ ##の
861
+ ##な
862
+ ##ら
863
+ ##ð
864
+ ##œ
865
+ ##ɛ
866
+ ##ł
867
+ ##η
868
+ ##μ
869
+ ##ซ
870
+ ##ル
871
+ ##シ
872
+ ##ア
873
+ ##リ
874
+ ##ス
875
+ ##ʔ
876
+ ##ल
877
+ ##ᄇ
878
+ ##ᅮ
879
+ ##ᄃ
880
+ ##ᅢ
881
+ ##β
882
+ ##ß
883
+ ##か
884
+ ##た
885
+ ##ə
886
+ ##ʻ
887
+ ##ι
888
+ ##χ
889
+ ##о
890
+ ##л
891
+ ##с
892
+ ##а
893
+ ##т
894
+ ##ы
895
+ ##и
896
+ ##в
897
+ ##к
898
+ ##з
899
+ ##ッ
900
+ ##ク
901
+ ##マ
902
+ ##ン
903
+ ##გ
904
+ ##ლ
905
+ ##ო
906
+ ##ნ
907
+ ##ː
908
+ ##ל
909
+ ##ה
910
+ ##א
911
+ ##く
912
+ ##み
913
+ ##ε
914
+ ##ξ
915
+ ##ল
916
+ ##ˈ
917
+ ##ɡ
918
+ ##ɑ
919
+ ##ɒ
920
+ ##し
921
+ ##す
922
+ ##き
923
+ ##ひ
924
+ ##と
925
+ ##đ
926
+ ##ъ
927
+ ##н
928
+ ##е
929
+ ##י
930
+ ##פ
931
+ ##イ
932
+ ##λ
933
+ ##ق
934
+ ##ع
935
+ ##د
936
+ ##ᅡ
937
+ ##ᆯ
938
+ ##ᄅ
939
+ ##ɪ
940
+ ##ค
941
+ ##ต
942
+ ##व
943
+ ##ा
944
+ ##द
945
+ ##は
946
+ ##り
947
+ ##レ
948
+ ##ー
949
+ ##ツ
950
+ ##ي
951
+ ##ش
952
+ ##و
953
+ ##م
954
+ ##º
955
+ ##ਲ
956
+ ##ਾ
957
+ ##ਹ
958
+ ##д
959
+ ##р
960
+ ##ل
961
+ ##ب
962
+ ##い
963
+ ##ち
964
+ ##ゃ
965
+ ##ʒ
966
+ ##ʃ
967
+ ##ɔ
968
+ ##ह
969
+ ##ニ
970
+ ##ウ
971
+ ##ァ
972
+ ##キ
973
+ ##ュ
974
+ ##3
975
+ ##ხ
976
+ ##ს
977
+ ##お
978
+ ##タ
979
+ ##ാ
980
+ ##ഹ
981
+ ##ɳ
982
+ ##ま
983
+ ##る
984
+ ##ะ
985
+ ##อ
986
+ ##น
987
+ ##ן
988
+ ##я
989
+ ##แ
990
+ ##ก
991
+ ##ɾ
992
+ ##ʲ
993
+ ##フ
994
+ ##უ
995
+ ##ภ
996
+ ##ด
997
+ ##ב
998
+ ##ת
999
+ ##خ
1000
+ ##ラ
1001
+ ##れ
1002
+ ##ण
1003
+ ##स
1004
+ ##न
1005
+ ##ه
1006
+ ##ف
1007
+ ##ر
1008
+ ##エ
1009
+ ##テ
1010
+ ##ษ
1011
+ ##ฐ
1012
+ ##ィ
1013
+ ##क
1014
+ ##ノ
1015
+ ##θ
1016
+ ##ネ
1017
+ ##��
1018
+ ##δ
1019
+ ##ɽ
1020
+ ##ʁ
1021
+ ##ტ
1022
+ ##ჱ
1023
+ ##ェ
1024
+ ##ハ
1025
+ ##υ
1026
+ ##र
1027
+ ##х
1028
+ ##も
1029
+ ##っ
1030
+ ##ょ
1031
+ ##に
1032
+ ##γ
1033
+ ##ც
1034
+ ##ე
1035
+ ##є
1036
+ ##м
1037
+ ##ܕ
1038
+ ##ܝ
1039
+ ##ܢ
1040
+ ##ܬ
1041
+ ##ณ
1042
+ ##ม
1043
+ ##ฮ
1044
+ ##ж
1045
+ ##ם
1046
+ ##ء
1047
+ ##ʊ
1048
+ ##ई
1049
+ ##め
1050
+ ##მ
1051
+ ##ム
1052
+ ##チ
1053
+ ##ᵻ
1054
+ ##ˌ
1055
+ ##ו
1056
+ ##ף
1057
+ ##წ
1058
+ ##ფ
1059
+ ##ャ
1060
+ ##モ
1061
+ ##ɐ
1062
+ ##ᅦ
1063
+ ##ᅩ
1064
+ ##ᆨ
1065
+ ##ᅵ
1066
+ ##ᆸ
1067
+ ##ᅧ
1068
+ ##ᆼ
1069
+ ##ᄋ
1070
+ ##ᆫ
1071
+ ##わ
1072
+ ##ı
1073
+ ##ქ
1074
+ ##დ
1075
+ ##ि
1076
+ ##ჲ
1077
+ ##ר
1078
+ ##セ
1079
+ ##オ
1080
+ ##ゆ
1081
+ ##せ
1082
+ ##ك
1083
+ ##ʿ
1084
+ ##ש
1085
+ ##מ
1086
+ ##צ
1087
+ ##п
1088
+ ##г
1089
+ ##カ
1090
+ ##ܠ
1091
+ ##ܗ
1092
+ ##ܐ
1093
+ ##ナ
1094
+ ##ミ
1095
+ ##こ
1096
+ ##を
1097
+ ##ψ
1098
+ ##サ
1099
+ ##ォ
1100
+ ##π
1101
+ ##ト
1102
+ ##у
1103
+ ##ح
1104
+ ##σ
1105
+ ##เ
1106
+ ##ป
1107
+ ##ш
1108
+ ##ゥ
1109
+ ##ロ
1110
+ ##া
1111
+ ##হ
1112
+ ##ɜ
1113
+ ##ة
1114
+ ##ص
1115
+ ##ס
1116
+ ##ث
1117
+ ##ჳ
1118
+ ##נ
1119
+ ##ذ
1120
+ ##ग
1121
+ ##ɫ
1122
+ ##ц
1123
+ ##ь
1124
+ ##ю