dele lex

mms-1b-all/afr/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/afr/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/afr/tokens.txt

@@ -1,77 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-i
-a
-n
-s
-r
-o
-t
-d
-l
-g
-k
-m
-v
-u
-w
-p
-h
-b
-y
-f
-'
-j
-0
-c
--
-1
-ë
-ê
-2
-9
-3
-4
-.
-5
-6
-‘
-8
-z
-7
-x
-ï
-:
-,
-/
-q
-á
-’
-”
-;
-$
-%
-ń
-–
-í
-¥
-ó
-ϊ
-+
-&
-[
-]
-²
-"
-ö
-ç
-ł
-£
-°
-ͦ
-ú
-é

mms-1b-all/amh/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/amh/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/amh/tokens.txt

@@ -1,339 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-ን
-በ
-ት
-የ
-ው
-ስ
-ር
-መ
-ል
-ም
-ች
-ይ
-አ
-ለ
-ተ
-እ
-ነ
-ያ
-ና
-ላ
-ከ
-ደ
-ድ
-ብ
-ማ
-ረ
-ግ
-ገ
-ወ
-ታ
-ራ
-ሰ
-ጥ
-ሚ
-ክ
-ባ
-ዎ
-ቀ
-ሉ
-ሪ
-ጠ
-ካ
-ሳ
-ሆ
-ፍ
-ቅ
-ህ
-ዳ
-ዋ
-ጋ
-ቸ
-ቶ
-ኛ
-ሮ
-ጣ
-ፈ
-ሊ
-ሎ
-ሁ
-0
-ሩ
-ቱ
-ቃ
-ዝ
-ኖ
-ሲ
-ዘ
-ቢ
-፣
-ዊ
-ዲ
-ጊ
-1
-ጉ
-ሞ
-ቦ
-ዜ
-ሌ
-ኑ
-ዛ
-ጀ
-ሽ
-ዙ
-ኮ
-ሜ
-ዓ
-ዚ
-ቡ
-ፊ
-ዶ
-ሃ
-ጎ
-ቤ
-ቻ
-ኒ
-ዩ
-ዕ
-ጨ
-ቹ
-2
-ቁ
-ፋ
-ቆ
-ዱ
-ጅ
-ኪ
-ሬ
-ሱ
-a
-ቲ
-ኤ
-ቋ
-ሙ
-ኔ
-ሶ
-ፓ
-ሻ
-ፕ
-ሀ
-ኝ
-ፖ
-ኢ
-ጫ
-ዮ
-ቴ
-ሕ
-ጭ
-ሥ
-ጃ
-ሴ
-o
-ኩ
-ሄ
-.
-9
-ጓ
-n
--
-ኦ
-5
-ሸ
-e
-ቂ
-ፎ
-4
-ኋ
-ጡ
-i
-3
-ኘ
-ፒ
-ጽ
-6
-r
-8
-t
-ፉ
-ጦ
-ኙ
-s
-l
-ጂ
-ዞ
-ቪ
-ቷ
-ፅ
-ጆ
-ኃ
-c
-ሠ
-u
-ኬ
-ዴ
-ፃ
-ኞ
-7
-ኳ
-m
-p
-ሂ
-ሏ
-h
-ፀ
-።
-ሐ
-ቫ
-ጸ
-ሺ
-ጤ
-,
-ፌ
-ሯ
-g
-፡
-ጻ
-ዌ
-ዥ
-ጁ
-d
-ፐ
-b
-ቨ
-ሹ
-/
-ሾ
-ቧ
-ቬ
-ሟ
-ቭ
-”
-ፔ
-ጪ
-k
-f
-ቄ
-ቺ
-y
-ፏ
-ሷ
-ጄ
-ዬ
-w
-v
-ሣ
-ሦ
-ጌ
-ዣ
-ቾ
-ሔ
-ጩ
-ሑ
-ጧ
-ኗ
-j
-ጮ
-ዐ
-ቼ
-"
-:
-ኚ
-ዦ
-ዷ
-፤
-ዢ
-ዑ
-ዉ
-ኅ
-ኣ
-ፆ
-ጾ
-x
-$
-ኡ
-ጢ
-ቮ
-«
-»
-ፑ
-ጹ
-%
-ዟ
-z
-ዡ
-ጵ
-—
-ፁ
-ጿ
-ዪ
-?
-’
-ሼ
-+
-፥
-ዒ
-°
-ሿ
-ዖ
-ጐ
-õ
-–
-ኸ
-;
-ã
-¥
-ኺ
-ጴ
-ጳ
-ኜ
-'
-ጇ
-ጺ
-‘
-!
-²
-ቿ
-ኰ
-ፗ
-q
-&
-£
-ኟ
-[
-]
-፦
-ኀ
-ቈ
-ጒ
-ኵ
-ሓ
-ቍ
-ቊ
-ሡ
-ጲ
-ጶ
-ኹ
-ኾ
-ሤ
-ጕ
-ኽ
-ኻ
-ዔ
-ጬ
-ጼ
-ኄ
-ዤ
-ኆ
-ሖ
-ዠ
-ጯ
-ጱ
-ጰ
-ሢ
-ፄ
-ሒ

mms-1b-all/ara/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/ara/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ara/tokens.txt

@@ -1,121 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-ا
-ل
-ي
-م
-ن
-و
-ت
-ر
-ب
-ة
-ع
-د
-ف
-س
-ك
-أ
-ق
-ه
-ح
-ج
-ط
-ى
-ش
-ص
-خ
-إ
-ث
-ض
-ذ
-ً
-ز
-غ
-ء
-ئ
-ّ
-ظ
-ُ
-0
-1
-ٍ
-آ
-،
-ؤ
-2
-ِ
-9
-4
-5
-3
-6
-َ
-8
-ٌ
-7
--
-.
-a
-/
-"
-n
-o
-e
-:
-s
-t
-٠
-p
-g
-d
-c
-l
-,
-i
-١
-m
-r
-v
-b
-%
-u
-h
-؛
-٩
-w
-—
-k
-ـ
-٣
-x
-f
-٨
-z
-+
-õ
-j
-٧
-y
-چ
-٢
-٦
-٪
-×
-٥
-ٰ
-ی
-ۖ
-ک
-ۚ
-ۗ
-ۛ
-ھ
-'
-ڨ
-ۘ
-☭
-–

mms-1b-all/asm/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/asm/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/asm/tokens.txt

@@ -1,138 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-ৰ
-া
-ি
-্
-ক
-ে
-ত
-ন
-ব
-য
-ল
-প
-স
-ম
-ু
-হ
-ো
-়
-ট
-ছ
-আ
-দ
-ী
-ই
-গ
-জ
-ৱ
-চ
-ৈ
-ষ
-শ
-ভ
-ণ
-এ
-অ
-থ
-ধ
-খ
-ও
-ড
-ূ
-উ
-'
-ং
-ঁ
-ফ
-"
-ৃ
-।
-0
-ঠ
-ঘ
-র
-1
-ঞ
-৷
-2
--
-ঙ
-9
-ৎ
-5
-3
-ঢ
-ৌ
-4
-8
-6
-০
-a
-,
-7
-.
-১
-ঃ
-s
-২
-৪
-e
-c
-i
-’
-u
-n
-p
-:
-m
-o
-৬
-৫
-t
-l
-৩
-r
-ʼ
-/
-g
-d
-b
-৮
-h
-৯
-‌
-৭
-ঐ
-v
-”
-$
-ঝ
-ঔ
-f
-;
-%
-k
-z
-w
-y
-—
-j
-!
-x
-–
-ঈ
-ঋ
-õ
-°
-q
-&
-̇
-²
-£
-+
-‍

mms-1b-all/ast/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/ast/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ast/tokens.txt

@@ -1,80 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-a
-s
-n
-o
-r
-i
-l
-u
-t
-d
-c
-m
-p
-b
-y
-g
-f
-v
-q
-á
-ó
-x
-h
-í
-’
-é
-z
-'
-0
-ñ
-1
-ú
-k
-2
-.
-9
-w
--
-4
-5
-3
-8
-6
-j
-”
-7
-ü
-:
-,
-/
-;
-–
-ḥ
-!
-¿
-?
-¡
-%
-º
-$
-—
-õ
-&
-ç
-¥
-ś
-ª
-+
-²
-ý
-[
-]
-ö
-ł

mms-1b-all/azj-script_latin/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/azj/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/azj-script_latin/tokens.txt

@@ -1,70 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-a
-ə
-i
-n
-r
-l
-d
-t
-s
-ı
-m
-y
-e
-k
-b
-u
-o
-ü
-q
-v
-ş
-z
-h
-ç
-c
-x
-f
-g
-ö
-p
-ğ
--
-0
-1
-̇
-2
-9
-4
-5
-j
-3
-8
-6
-7
-.
-:
-w
-,
-"
-/
-%
-'
-°
-+
-$
-õ
-?
-[
-]
-—
-–
-ú
-²
-;
-!

mms-1b-all/bel/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/bel/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/bel/tokens.txt

@@ -1,95 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-а
-н
-і
-ы
-р
-с
-т
-е
-к
-л
-о
-я
-д
-м
-п
-ц
-в
-у
-з
-ў
-г
-б
-ь
-э
-ч
-х
-й
-ш
-ж
-ю
-ё
-ф
-»
-«
-0
--
-'
-1
-2
-.
-9
-5
-3
-—
-6
-8
-7
-4
-:
-a
-i
-o
-e
-r
-c
-l
-n
-s
-,
-p
-t
-v
-g
-d
-/
-h
-b
-m
-y
-k
-²
-и
-!
-;
-°
-%
-–
-[
-]
-+
-x
-u
-f
-z
-õ
-ú
-?
-j
-‒
-ґ

mms-1b-all/ben/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/ben/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ben/tokens.txt

@@ -1,136 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-া
-র
-ে
-্
-ি
-ন
-ক
-য
-ব
-ত
-স
-ল
-প
-়
-ম
-ট
-ু
-দ
-এ
-হ
-ো
-জ
-গ
-শ
-ছ
-ী
-ই
-থ
-ভ
-অ
-আ
-ং
-ষ
-চ
-ড
-ধ
-ও
-ণ
-খ
-উ
-ফ
-"
-ূ
-0
-ৃ
-।
-ঘ
-1
-ঠ
-ঁ
--
-ঞ
-2
-ৈ
-ঙ
-ৌ
-9
-5
-4
-ৎ
-3
-ঝ
-০
-6
-8
-,
-'
-7
-a
-১
-.
-ঃ
-c
-৪
-:
-২
-৯
-ঐ
-t
-s
-/
-m
-p
-৬
-i
-৫
-৮
-n
-৩
-ঢ
-৭
-u
-o
-r
-d
-h
-e
-v
-l
-g
-b
-w
-ঈ
-;
-y
-k
-x
-‍
-%
-f
-!
-ঔ
-¥
-õ
-ঊ
-ঋ
-°
-q
-í
-+
-ü
-z
-[
-]
-£
-৷
-?
-j
-ú
-á
-—

mms-1b-all/bos/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/bos/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/bos/tokens.txt

@@ -1,77 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-a
-i
-o
-e
-n
-j
-r
-t
-s
-u
-k
-l
-d
-v
-m
-p
-z
-g
-b
-č
-c
-š
-h
-ž
-ć
-f
-.
-đ
-0
-1
-2
--
-9
-y
-5
-w
-4
-3
-8
-6
-7
-:
-/
-,
-x
-q
-;
-?
-!
-–
-'
-%
-ü
-á
-$
-í
-é
-+
-õ
-—
-‘
-’
-°
-ó
-&
-ç
-ã
-ú
-²
-[
-]
-ł

mms-1b-all/bul/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/bul/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/bul/tokens.txt

@@ -1,96 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-а
-и
-о
-е
-т
-н
-р
-с
-в
-к
-д
-л
-п
-з
-м
-я
-ъ
-г
-б
-у
-ч
-ж
-ц
-щ
-й
-х
-ш
-ф
--
-0
-.
-1
-ю
-2
-a
-r
-9
-o
-e
-5
-n
-4
-i
-3
-6
-t
-8
-s
-c
-7
-:
-p
-l
-m
-g
-u
-h
-d
-ь
-–
-k
-/
-,
-;
-b
-v
-y
-w
-f
-!
-"
-?
-ѝ
-%
-'
-q
-z
-x
-j
-+
-°
-[
-]
-á
-õ
-№
-²
-—
-`
-̀
-ѐ

mms-1b-all/cat/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/cat/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/cat/tokens.txt

@@ -1,106 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-a
-s
-r
-i
-n
-l
-t
-o
-d
-u
-c
-m
-p
-v
-g
-b
-'
-f
-q
-h
-é
-x
-ó
-à
-í
-è
-j
-y
-ò
-0
-z
-1
-k
-ç
--
-2
-ú
-w
-·
-9
-ï
-5
-4
-8
-3
-6
-.
-ü
-7
-:
-/
-,
-"
-%
-—
-á
-²
-;
-!
-–
-”
-¥
-’
-[
-]
-º
-ö
-&
-“
-õ
-+
-?
-ã
-°
-ñ
-–
-—
-ø
-ô
-ř
-ū
-ž
-č
-ı
-ş
-š
-ë
-ł
-ţ
-å
-ė
-ň
-ō
-ù
-ā
-ä
-ő
-ì
-ὑ
-ð

mms-1b-all/ceb/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/ceb/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ceb/tokens.txt

@@ -1,74 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-a
-|
-n
-g
-i
-s
-o
-m
-t
-u
-k
-l
-p
-e
-d
-r
-y
-b
-h
-w
--
-c
-0
-f
-v
-1
-.
-2
-j
-9
-5
-z
-4
-8
-3
-6
-x
-7
-,
-:
-'
-q
-;
-/
-"
-?
-!
-$
-ü
-—
-–
-á
-%
-í
-ç
-+
-&
-°
-ú
-£
-¥
-[
-]
-ã
-’
-â
-õ
-ó
-²
-é

mms-1b-all/ces/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/ces/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ces/tokens.txt

@@ -1,86 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-o
-e
-n
-a
-t
-s
-i
-v
-l
-r
-k
-d
-p
-m
-u
-í
-c
-h
-z
-á
-y
-j
-b
-ě
-é
-ř
-ž
-ý
-č
-š
-ů
-g
-f
-0
-1
-ú
-2
-w
-x
-9
-.
-5
-4
-ň
-6
-8
-3
-ó
-7
--
-ť
-ď
-/
-:
-q
-,
-–
-%
-'
-"
-°
-õ
-⁠
-ö
-!
-—
-[
-]
-ü
-;
-&
-+
-×
-²
-ç
-ā
-ã
-ł
-è
-ä
-ï

mms-1b-all/ckb/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/ckb/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ckb/tokens.txt

@@ -1,111 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-ە
-ی
-ا
-و
-ن
-ر
-ک
-ت
-د
-ب
-ێ
-ل
-ۆ
-س
-م
-ش
-گ
-ه
-ئ
-پ
-ز
-ڕ
-ڵ
-خ
-چ
-ج
-ژ
-ف
-ك
-ق
-،
-ڤ
-٠
-0
-١
-ح
-1
-٢
-‎
-٩
-2
-.
-٨
-٥
-5
-غ
-٤
--
-6
-4
-3
-٣
-٦
-9
-a
-ھ
-8
-ع
-٧
-/
-7
-c
-o
-:
-"
-p
-n
-t
-s
-d
-h
-,
-'
-i
-r
-v
-u
-f
-e
-ى
-[
-]
-l
-m
-؛
-g
-‏
-b
-x
-k
-w
-%
-!
-y
-j
-؟
-‌
-ـ
-+
-õ
-ء
-q
-z
-ي
-ؤ
-ث

mms-1b-all/cmn-script_simplified/lexicon.txt

@@ -1 +0,0 @@
-None

mms-1b-all/cmn-script_simplified/tokens.txt

@@ -1,4495 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-的
-在
-一
-是
-有
-和
-了
-人
-这
-a
-0
-为
-大
-地
-国
-可
-他
-1
-以
-不
-时
-会
-能
-e
-到
-上
-中
-个
-行
-们
-n
-o
-r
-于
-发
-多
-生
-年
-s
-来
-要
-其
-斯
-里
-i
-2
-家
-成
-动
-用
-些
-法
-出
-t
-方
-l
-对
-过
-后
-公
-物
-之
-也
-亚
-或
-种
-被
-学
-常
-前
-现
-分
-自
-部
-利
-都
-但
-最
-得
-通
-而
-者
-9
-子
-h
-经
-因
-该
-你
-就
-尔
-特
-如
-车
-5
-所
-并
-作
-比
-间
-表
-c
-很
-它
-世
-与
-加
-更
-当
-进
-然
-克
-u
-区
-球
-g
-下
-度
-名
-场
-小
-开
-体
-同
-d
-语
-提
-4
-3
-m
-重
-称
-从
-数
-意
-月
-道
-定
-机
-面
-美
-新
-日
-使
-文
-8
-6
-将
-没
-本
-受
-目
-理
-拉
-天
-入
-德
-果
-力
-西
-旅
-罗
-我
-第
-次
-游
-队
-达
-英
-手
-着
-性
-由
-赛
-长
-马
-起
-式
-类
-示
-主
-化
-内
-说
-位
-相
-事
-此
-p
-正
-水
-员
-还
-电
-全
-布
-海
-司
-非
-应
-原
-尼
-期
-外
-空
-高
-议
-7
-k
-战
-兰
-明
-活
-教
-保
-至
-管
-只
-关
-情
-心
-点
-样
-量
-岛
-许
-那
-已
-需
-约
-联
-b
-认
-报
-向
-变
-制
-往
-节
-件
-去
-军
-基
-接
-城
-建
-格
-选
-等
-民
-看
-每
-纪
-运
-科
-奥
-代
-巴
-界
-金
-航
-二
-产
-据
-市
-工
-业
-阿
-合
-组
-统
-计
-处
-任
-持
-知
-立
-实
-身
-供
-风
-周
-系
-政
-北
-及
-几
-南
-让
-程
-三
-造
-洲
-山
-获
-指
-气
-少
-十
-流
-星
-交
-问
-尽
-f
-y
-务
-好
-两
-型
-州
-影
-印
-住
-无
-始
-举
-速
-做
-图
-查
-回
-直
-维
-太
-飞
-带
-光
-必
-安
-己
-证
-况
-今
-结
-标
-击
-先
-形
-解
-群
-存
-取
-设
-路
-平
-决
-士
-近
-传
-卡
-项
-网
-随
-言
-感
-题
-放
-伊
-头
-参
-未
-口
-病
-致
-确
-客
-么
-雪
-包
-季
-足
-历
-土
-万
-导
-信
-线
-像
-何
-响
-规
-且
-预
-座
-号
-别
-各
-打
-船
-想
-站
-欧
-元
-普
-视
-领
-括
-v
-收
-助
-强
-纳
-共
-字
-总
-史
-神
-服
-米
-府
-记
-消
-古
-冰
-洛
-威
-居
-票
-w
-推
-堡
-引
-质
-官
-告
-显
-观
-萨
-河
-热
-院
-律
-状
-演
-离
-东
-台
-局
-即
-求
-越
-习
-酒
-远
-警
-支
-治
-曾
-份
-才
-塔
-圣
-夫
-难
-希
-织
-乐
-见
-把
-火
-镜
-反
-野
-失
-片
-抗
-门
-价
-细
-首
-波
-论
-医
-准
-,
-容
-根
-品
-试
-极
-步
-林
-话
-争
-班
-四
-j
-级
-具
-较
-完
-富
-测
-园
-案
-权
-转
-候
-创
-续
-单
-爱
-适
-费
-孩
-例
-术
-商
-易
-边
-户
-伤
-塞
-音
-划
-石
-则
-团
-故
-器
-严
-给
-潜
-博
-独
-识
-仅
-王
-围
-装
-思
-卫
-华
-须
-察
-控
-复
-展
-食
-早
-帮
-落
-降
-便
-声
-油
-义
-调
-低
-互
-什
-书
-签
-快
-滑
-备
-染
-诉
-照
-改
-命
-险
-陆
-投
-验
-轻
-条
-源
-育
-请
-坦
-营
-望
-老
-超
-防
-景
-毒
-切
-态
-列
-际
-域
-初
-庭
-构
-广
-苏
-众
-洋
-闻
-某
-甚
-她
-象
-附
-护
-办
-阳
-读
-模
-移
-女
-伦
-色
-千
-考
-哥
-射
-研
-究
-诺
-核
-乎
-鲁
-牙
-资
-播
-精
-走
-龙
-算
-仍
-令
-除
-留
-息
-盟
-房
-瓦
-花
-底
-母
-张
-埃
-愿
-白
-坏
-修
-连
-艇
-录
-断
-志
-死
-集
-虽
-限
-送
-伯
-店
-雷
-姆
-晚
-胜
-写
-济
-澳
-乘
-暴
-托
-弗
-功
-夏
-再
-够
-专
-汽
-宗
-绝
-索
-境
-著
-施
-整
-密
-止
-帕
-社
--
-沙
-钟
-注
-担
-素
-耳
-距
-满
-黑
-哈
-蒂
-穿
-久
-协
-跑
-微
-危
-检
-庙
-效
-环
-宣
-真
-缺
-置
-露
-舰
-属
-馆
-角
-追
-瑞
-序
-却
-技
-翰
-洞
-败
-破
-监
-俄
-亡
-念
-顿
-访
-勒
-杰
-似
-奇
-增
-右
-词
-另
-骑
-登
-害
-徒
-换
-养
-湾
-赫
-束
-焦
-校
-戈
-遗
-驶
-盖
-帝
-松
-舱
-尤
-z
-木
-皮
-震
-树
-典
-救
-迪
-左
-驾
-炸
-码
-侵
-师
-岁
-段
-势
-脑
-拿
-遇
-饮
-雨
-待
-背
-找
-免
-族
-短
-吃
-责
-艺
-率
-麦
-激
-沿
-架
-银
-评
-又
-欢
-排
-购
-买
-终
-毛
-简
-胞
-坐
-清
-皇
-丹
-判
-摄
-儿
-x
-停
-承
-半
-餐
-税
-叫
-估
-临
-戏
-额
-讲
-积
-植
-双
-港
-袭
-恐
-频
-略
-温
-宿
-五
-版
-闭
-轮
-腊
-捕
-亿
-莱
-邮
-料
-夜
-订
-眼
-批
-胁
-鞋
-块
-委
-摩
-森
-曼
-拥
-紧
-优
-卢
-患
-症
-练
-阅
-省
-味
-镇
-迫
-私
-攻
-恶
-挥
-觉
-桥
-窗
-谷
-疫
-职
-援
-蒙
-障
-吉
-返
-灯
-训
-湖
-输
-负
-疗
-继
-择
-层
-男
-竞
-授
-疾
-压
-扎
-寻
-否
-佳
-%
-亲
-余
-街
-唯
-冷
-菌
-午
-友
-靠
-智
-贝
-趣
-罪
-厅
-疑
-依
-.
-升
-毁
-般
-画
-享
-福
-板
-裂
-值
-筑
-岩
-六
-述
-异
-艾
-农
-触
-京
-箱
-署
-益
-爆
-丁
-审
-乔
-肯
-旋
-冠
-尚
-液
-范
-杂
-歌
-俗
-探
-坡
-熟
-奖
-退
-虑
-货
-冬
-寺
-端
-采
-犯
-针
-屿
-钱
-脉
-冲
-胡
-藏
-童
-虫
-督
-邻
-兵
-迎
-载
-鸟
-朗
-党
-泡
-牧
-听
-七
-岸
-急
-莫
-喜
-玩
-刀
-猫
-跨
-武
-吸
-撞
-恩
-耶
-媒
-室
-付
-巨
-笔
-幕
-佛
-彩
-损
-拍
-九
-避
-绕
-纽
-逐
-宇
-漏
-墓
-封
-突
-禁
-邦
-泰
-汗
-深
-烈
-差
-芬
-屋
-陡
-赢
-血
-困
-编
-污
-裁
-截
-床
-陷
-驱
-迹
-健
-梵
-艘
-拒
-览
-顶
-征
-散
-盛
-融
-挪
-按
-归
-陵
-副
-充
-剧
-延
-辆
-途
-执
-隆
-透
-猎
-址
-搜
-涉
-毕
-折
-俱
-遭
-弱
-兴
-句
-菜
-妇
-减
-违
-翻
-敦
-”
-殿
-夺
-雅
-策
-卷
-茨
-含
-禽
-坠
-占
-释
-朝
-脚
-聚
-携
-呼
-百
-姿
-坚
-弓
-补
-派
-售
-隐
-秘
-刚
-财
-逊
-促
-杀
-席
-峡
-启
-暂
-逃
-稳
-齐
-乱
-既
-飓
-幸
-尝
-彼
-柏
-磁
-彻
-灵
-红
-枪
-睡
-舒
-呈
-寄
-庆
-泄
-撒
-租
-婚
-鹿
-库
-汤
-侧
-草
-溜
-刃
-稀
-瀑
-迅
-霍
-舞
-宪
-漫
-荷
-碎
-饰
-瓜
-绩
-悉
-努
-描
-脏
-菲
-革
-韦
-丝
-犹
-弹
-香
-永
-允
-配
-啸
-桶
-牛
-狱
-弯
-痛
-:
-嫌
-恢
-云
-耐
-软
-李
-橄
-榄
-宝
-阻
-宽
-络
-父
-鱼
-浓
-倍
-汉
-暗
-盘
-贵
-康
-休
-仪
-狮
-豹
-赞
-符
-村
-顾
-礼
-销
-汇
-错
-措
-抵
-尿
-猛
-覆
-墙
-峭
-壁
-惧
-穴
-恒
-繁
-倾
-您
-赖
-横
-赌
-泽
-操
-锡
-乡
-惯
-衡
-醒
-诸
-君
-干
-碍
-溯
-顺
-诊
-抢
-羊
-琴
-妻
-款
-宜
-舍
-良
-守
-梦
-葬
-锦
-课
-峰
-浪
-固
-填
-阶
-译
-默
-涂
-叶
-均
-曲
-档
-旧
-摧
-斜
-跟
-荣
-刺
-牌
-隔
-咖
-麻
-骨
-绘
-振
-苦
-廷
-遥
-剩
-榜
-泛
-申
-喷
-阵
-奏
-纸
-稍
-铁
-昂
-鉴
-贸
-垒
-炎
-韩
-堂
-劣
-八
-丰
-殖
-煤
-撤
-祝
-龄
-毫
-虐
-殊
-烧
-黎
-尺
-蚊
-寨
-忧
-祸
-末
-楼
-慢
-柔
-旗
-穆
-厢
-央
-刻
-丘
-烦
-薄
-啡
-惠
-肺
-净
-磅
-键
-辑
-扫
-墨
-乏
-缘
-静
-叠
-闲
-善
-厄
-丽
-唱
-骗
-怀
-讼
-爪
-寒
-讯
-旺
-粒
-借
-削
-拜
-哪
-恰
-滩
-镖
-赏
-秀
-祖
-鸦
-衣
-秒
-洪
-谈
-柬
-埔
-径
-乌
-钉
-假
-脱
-迟
-玻
-璃
-础
-娜
-辐
-爵
-籍
-谢
-拟
-寓
-敲
-暖
-宁
-硬
-楚
-冈
-廉
-沉
-桑
-凯
-药
-苹
-鼓
-尊
-糖
-颁
-缓
-/
-狼
-燃
-藻
-储
-剪
-斗
-宾
-蚁
-吧
-'
-闹
-丧
-疼
-珀
-怎
-杉
-矶
-刑
-誉
-扩
-仰
-敏
-掉
-亦
-摆
-怕
-役
-癌
-í
-氏
-泳
-跃
-颗
-培
-惊
-幅
-详
-昨
-概
-堵
-懂
-框
-莎
-册
-川
-伽
-猩
-绿
-姻
-葡
-萄
-辛
-剥
-晓
-拘
-误
-潮
-伸
-掷
-厚
-夷
-浮
-泊
-拨
-熊
-玛
-灾
-押
-替
-•
-剑
-巢
-堆
-粗
-珍
-谋
-宴
-湿
-丢
-堕
-敌
-答
-盗
-酸
-鲜
-崎
-衔
-乳
-妮
-虎
-荡
-荐
-匈
-虚
-钢
-垫
-饭
-旁
-逮
-膀
-椅
-宙
-q
-佐
-棒
-朋
-榻
-戴
-夕
-企
-肩
-材
-讨
-坎
-搭
-匹
-旦
-劳
-吐
-踪
-娱
-梅
-腰
-沃
-贯
-棕
-鹰
-齿
-忙
-励
-貌
-曝
-握
-旨
-厉
-罚
-偷
-圭
-矛
-篮
-靴
-胎
-挑
-逝
-詹
-渡
-梁
-缆
-畅
-藤
-仁
-剂
-箭
-荒
-奶
-苗
-崇
-页
-吗
-瓶
-黄
-窑
-烤
-伏
-拼
-奎
-胶
-芯
-挤
-昆
-氮
-献
-闪
-坟
-朱
-颜
-歉
-巧
-陪
-臭
-裙
-怪
-罕
-贴
-弃
-缝
-隙
-裔
-拖
-纷
-杯
-郁
-亨
-帐
-池
-蛋
-欣
-悬
-鼠
-阀
-兹
-偏
-掌
-塑
-铺
-鸡
-屠
-宰
-咬
-虹
-—
-寸
-锻
-炼
-媲
-壳
-凉
-币
-捷
-疆
-厂
-巡
-塌
-亮
-憾
-秃
-õ
-烹
-饪
-斤
-睛
-刊
-谎
-瑟
-擅
-凌
-轴
-枚
-甲
-葱
-讽
-混
-°
-伐
-孙
-辨
-绪
-滋
-斐
-御
-掠
-惜
-雇
-吊
-丛
-循
-贪
-嘲
-豪
-挡
-羽
-栋
-脸
-驼
-棵
-旱
-聊
-贺
-诗
-勘
-予
-疏
-遍
-卸
-伴
-咎
-奔
-镑
-赤
-钳
-迁
-陶
-袋
-昼
-妨
-·
-坑
-囚
-辞
-仇
-氢
-佩
-粉
-吞
-残
-跌
-贾
-践
-涵
-逻
-尘
-邓
-坍
-坛
-腐
-％
-鞍
-晨
-悠
-噬
-榈
-轨
-歧
-酋
-糟
-糕
-仿
-刷
-庞
-忆
-逗
-崩
-悟
-粘
-兼
-沫
-姓
-溪
-爬
-跳
-攀
-青
-滤
-缠
-圈
-笑
-鹅
-卵
-娅
-届
-肝
-祭
-驻
-怖
-忘
-抽
-篇
-抑
-谨
-慎
-诚
-聪
-戒
-腹
-盎
-腿
-壮
-暑
-抚
-漠
-麋
-幽
-掩
-倒
-贡
-厌
-涸
-宅
-犒
-肠
-氛
-猪
-逆
-碳
-添
-偶
-妹
-田
-勤
-尸
-抛
-裹
-谐
-犬
-氧
-涛
-锅
-夸
-仔
-鸭
-驯
-晰
-饱
-遮
-缩
-嘴
-尾
-鲍
-咨
-询
-仑
-竟
-陌
-轿
-兑
-润
-拔
-擦
-袖
-铅
-愤
-卉
-贫
-滚
-壤
-洁
-迈
-啮
-斑
-春
-奢
-穷
-扰
-茶
-鲨
-镫
-涯
-樱
-扬
-栏
-蜃
-颇
-蛇
-宠
-氰
-鼎
-滕
-阱
-删
-哺
-摔
-雄
-夹
-疲
-竭
-蹈
-眨
-颠
-碰
-歇
-捉
-兄
-弟
-疟
-腺
-裕
-僧
-囊
-勋
-丈
-捐
-赠
-泥
-寂
-芝
-臣
-肥
-函
-茜
-俚
-踢
-魅
-庄
-辈
-奉
-鼻
-窃
-奋
-趁
-盾
-盲
-渔
-阪
-姐
-劫
-彰
-泵
-溢
-鞭
-狩
-徙
-沼
-枝
-饲
-：
-藉
-歪
-搞
-杜
-雕
-凹
-抓
-邀
-獭
-柜
-é
-屏
-吓
-陨
-瓣
-遣
-慨
-若
-罄
-竹
-琳
-搬
-锁
-隧
-燥
-废
-纵
-忒
-弥
-驳
-卧
-眠
-勾
-丑
-宛
-+
-邸
-唐
-麾
-氨
-驰
-喉
-咙
-缪
-碑
-焰
-搁
-浅
-介
-吁
-堤
-漂
-诈
-撰
-渐
-裸
-锋
-瞩
-矩
-猿
-牵
-冒
-撑
-狗
-炮
-插
-紊
-蚀
-蜿
-蜒
-弄
-股
-柱
-亏
-愚
-蠢
-伟
-厕
-缭
-喱
-椰
-笨
-侯
-拴
-趾
-渊
-蒸
-抄
-摸
-勿
-捶
-碾
-滥
-翅
-诞
-吻
-巷
-厘
-县
-吴
-耗
-萦
-婆
-愈
-陀
-螺
-剖
-吾
-淘
-汰
-胆
-膝
-叹
-绵
-拓
-灭
-乞
-狂
-炉
-鸫
-炭
-综
-帜
-橇
-帅
-掘
-淌
-漆
-趟
-招
-募
-阴
-腓
-硕
-铜
-洒
-呕
-彗
-岭
-岖
-梯
-俯
-瞰
-崖
-铃
-ó
-亥
-串
-卖
-挟
-狄
-醉
-飘
-珠
-遐
-迩
-烟
-拐
-裤
-掏
-揭
-纱
-猞
-猁
-&
-慈
-诱
-扔
-赶
-赴
-喀
-弦
-璀
-璨
-欺
-淹
-禄
-遂
-纹
-馊
-喙
-耸
-泻
-诅
-咒
-杞
-沮
-粮
-佣
-稻
-蔗
-阔
-浩
-瀚
-垠
-绸
-勃
-赔
-吼
-逼
-聘
-撼
-蜂
-亭
-映
-；
-兔
-羚
-卓
-番
-晴
-啤
-撕
-肆
-懒
-鹦
-鹉
-盆
-吵
-痴
-洽
-柯
-迄
-召
-、
-糊
-肿
-瘤
-诀
-章
-隶
-堪
-摇
-婪
-津
-魁
-拦
-猜
-敛
-洗
-哦
-勇
-敢
-馈
-缴
-喘
-肴
-孔
-雀
-蜗
-榛
-毯
-债
-券
-蓄
-豁
-贷
-辅
-扭
-肢
-挽
-疽
-枢
-寰
-顷
-膨
-胀
-旬
-玉
-柿
-豆
-盔
-甄
-湍
-喂
-擎
-甘
-菊
-奸
-扮
-甩
-篷
-茵
-瑙
-崔
-呢
-匣
-缉
-桃
-棍
-篡
-挖
-翱
-翔
-忽
-摘
-伍
-镳
-拷
-逛
-薪
-骚
-敞
-钻
-抱
-韵
-艳
-抿
-肉
-磷
-硫
-狭
-窄
-莨
-菪
-躲
-欲
-肚
-猴
-凭
-棱
-臂
-贬
-尖
-哭
-屈
-栅
-桩
-诩
-涅
-锐
-杆
-蝎
-哇
-胺
-坷
-巅
-榨
-汁
-昔
-赁
-酱
-甜
-蝽
-哲
-秩
-侦
-虔
-遏
-垃
-圾
-割
-垩
-侈
-纯
-粹
-挂
-礁
-俘
-虏
-铀
-涌
-棘
-凶
-冻
-泪
-盈
-眶
-熨
-婴
-媚
-宏
-株
-砂
-盐
-氯
-钙
-套
-乃
-筋
-醇
-浴
-祇
-汀
-贿
-筒
-莉
-雌
-孟
-榴
-姬
-汐
-磨
-《
-》
-艰
-泉
-牺
-牲
-零
-暹
-跋
-贼
-惕
-蚂
-惬
-惨
-惑
-骸
-ł
-踵
-遵
-郊
-罂
-粟
-碱
-蔡
-乍
-橱
-钥
-匙
-畜
-颅
-凡
-宫
-墟
-蹄
-牢
-蕾
-扶
-噱
-疯
-烫
-袜
-吹
-祈
-祷
-巩
-冯
-蔓
-嫩
-钛
-妙
-迷
-姊
-淡
-棺
-江
-辖
-郡
-蕨
-嘉
-蛛
-陈
-蟹
-宋
-杨
-刘
-町
-昌
-靖
-紫
-圆
-浙
-滨
-凤
-魏
-郎
-奈
-畔
-蝶
-晋
-禾
-鹃
-徽
-董
-柳
-赵
-藓
-郑
-蓝
-井
-棋
-鳞
-翼
-绍
-徐
-吕
-乙
-灰
-秦
-辽
-仙
-叙
-皆
-秋
-虾
-阮
-陕
-幼
-乾
-熙
-析
-郭
-仓
-沟
-莲
-唇
-纲
-矿
-讷
-栖
-芒
-弘
-浦
-贞
-潘
-寿
-阁
-珊
-甸
-苣
-鳍
-翁
-缅
-苔
-奴
-曹
-茂
-蛾
-卒
-姜
-忠
-藩
-敬
-侍
-桂
-仕
-蚤
-萧
-瑚
-龟
-溶
-恋
-厦
-堇
-昭
-胸
-晶
-孝
-祥
-桐
-契
-穗
-塘
-彭
-岳
-咸
-累
-辰
-蒲
-葛
-肃
-卿
-械
-麟
-碘
-杭
-玄
-柄
-沈
-茅
-蜱
-萤
-膜
-魔
-兽
-蛤
-茛
-鳅
-茎
-薇
-叉
-谱
-汝
-腔
-雍
-垂
-脂
-鹤
-彦
-伞
-链
-仲
-酶
-尉
-萼
-扁
-傅
-丙
-燕
-脊
-祠
-笼
-荆
-蝠
-葵
-娘
-槭
-芳
-孢
-冕
-霸
-蜜
-妈
-瓷
-蔷
-廊
-鬼
-铭
-卑
-慕
-柴
-椒
-蒋
-佑
-蜥
-姚
-肌
-耀
-樟
-赐
-岗
-谦
-蒿
-忍
-拱
-凰
-檗
-钦
-辉
-琉
-锥
-袁
-桔
-戟
-拳
-蚜
-狸
-钩
-扑
-芦
-甫
-绳
-贤
-潭
-隋
-俊
-拆
-汪
-叛
-巫
-妃
-娃
-肖
-卯
-梨
-蚓
-迦
-赋
-绣
-递
-戌
-屡
-兆
-尹
-爸
-浏
-谓
-蓬
-淮
-蜡
-坊
-催
-绒
-丞
-壬
-嫁
-芹
-儒
-蛄
-沧
-卜
-滇
-鼩
-芋
-幻
-鸣
-舌
-戊
-腾
-侄
-雾
-肾
-颈
-湘
-慧
-嗣
-铸
-邑
-橙
-鸿
-颖
-薹
-鲤
-屯
-坞
-酯
-诏
-叔
-恭
-褐
-梭
-衍
-坝
-岑
-薯
-邵
-蛙
-毅
-癸
-苞
-榆
-芥
-丸
-鲷
-祯
-硝
-蕉
-蛱
-仆
-坪
-祀
-眉
-庚
-闸
-坂
-氟
-別
-阜
-噶
-纺
-妳
-稣
-蝉
-稚
-禅
-橡
-苯
-绥
-帽
-虱
-鞘
-鳗
-烷
-札
-衰
-翠
-赚
-朔
-蜀
-薛
-蓼
-姑
-渠
-皿
-渥
-茄
-披
-魂
-荨
-镶
-吏
-侨
-羌
-娶
-铝
-闽
-逸
-苑
-琼
-啊
-稿
-绑
-朴
-喝
-荠
-淀
-妖
-槐
-苍
-埋
-邱
-凝
-灌
-耆
-趋
-肤
-厥
-蚕
-沪
-萝
-砖
-喇
-埠
-霉
-冶
-倡
-怒
-茹
-沂
-纤
-槟
-烛
-醛
-帆
-栗
-罢
-狐
-橘
-酰
-扇
-峨
-惟
-犁
-玫
-弼
-矮
-耕
-怡
-晖
-钝
-杖
-鲸
-霞
-慰
-谟
-岐
-舟
-伪
-菩
-踏
-垦
-蛭
-牡
-蕈
-墅
-楠
-邪
-荚
-蕊
-淳
-谭
-晃
-蚌
-鲈
-孤
-垣
-芽
-凸
-谊
-蒜
-烯
-烃
-肽
-浆
-悦
-裴
-殉
-棠
-酉
-盒
-碧
-寅
-漳
-襄
-淫
-饼
-谁
-粤
-竺
-芭
-澜
-驹
-贩
-彝
-蚬
-锯
-莹
-鄂
-笙
-梗
-忌
-椭
-悼
-酮
-讳
-皱
-鼱
-椎
-邢
-恨
-钠
-菱
-戎
-毗
-淄
-筹
-痕
-壶
-劝
-圳
-厝
-菀
-庐
-蟾
-藨
-蓟
-嵩
-莓
-庶
-枯
-廖
-尧
-侠
-庸
-酿
-孚
-羁
-犀
-胃
-斩
-褶
-豫
-匠
-锤
-蝇
-骤
-泌
-弧
-蛮
-苋
-蕴
-擢
-窝
-硅
-拂
-矾
-澎
-腭
-肋
-芪
-乂
-蔬
-冢
-悲
-禹
-铠
-纠
-準
-溧
-涡
-畸
-晕
-舜
-榕
-挝
-芙
-鳄
-噜
-庇
-鳕
-莆
-滴
-糙
-妆
-辟
-欠
-樽
-嗜
-麓
-熔
-逍
-醚
-哩
-柽
-瑜
-沁
-螯
-芩
-藜
-溴
-濑
-煮
-邨
-肛
-缕
-鹘
-妾
-藿
-镰
-葫
-蓉
-饶
-蕃
-檬
-黛
-琦
-沛
-酷
-琪
-伙
-孕
-芸
-渝
-彬
-窟
-罐
-坤
-涩
-畴
-茱
-赣
-桌
-浑
-禧
-妥
-笛
-蝙
-廿
-莪
-闵
-轩
-骏
-酬
-湄
-萍
-沅
-啄
-厨
-陇
-谴
-釜
-誓
-灼
-劲
-剿
-兖
-谏
-荫
-栽
-幢
-蜘
-桨
-匡
-斥
-谣
-庵
-谥
-肇
-笋
-虞
-肪
-抬
-梓
-斛
-瑰
-俞
-啦
-铎
-绛
-喻
-诛
-嫡
-衙
-鬣
-桤
-辩
-嵌
-蜍
-磐
-蟒
-酵
-匝
-梢
-荀
-阐
-饿
-惹
-縻
-黔
-婿
-沽
-纶
-昊
-懋
-隍
-翌
-竖
-赦
-皂
-傲
-翊
-秉
-黏
-煌
-窦
-楝
-笠
-履
-咏
-衷
-泾
-俭
-樊
-袍
-佥
-岱
-鹏
-晤
-娄
-懿
-毙
-枣
-柑
-寮
-轰
-爷
-劾
-阎
-岬
-淋
-酥
-桓
-豚
-桉
-蝴
-凿
-鳖
-淆
-耿
-鹭
-臧
-稽
-摊
-桦
-萌
-咕
-谍
-榧
-丫
-澄
-籽
-纂
-嘛
-矢
-跆
-锈
-颌
-棉
-於
-斋
-葶
-苈
-胤
-冀
-甬
-扣
-睦
-兜
-蔚
-晏
-侣
-隼
-钧
-��
-獐
-帘
-畿
-菅
-鸠
-愉
-幌
-焊
-蔽
-鼹
-骼
-垄
-鸻
-匪
-劈
-烽
-斧
-岷
-媛
-涨
-侃
-雏
-甥
-柠
-舶
-葆
-琅
-铨
-酚
-溃
-朵
-锚
-羟
-昏
-笃
-腕
-颉
-畏
-椿
-镧
-隅
-扈
-碲
-廓
-谬
-戚
-涧
-墩
-槽
-炀
-т
-萸
-聂
-颤
-祺
-栩
-诃
-鑫
-秆
-匿
-爽
-斌
-颂
-稠
-奠
-偿
-敷
-荸
-鲫
-寇
-倪
-檐
-刹
-驴
-肼
-梾
-鸥
-聋
-惩
-牟
-菝
-葜
-孜
-哀
-菁
-凋
-炽
-傣
-矣
-僚
-柃
-碟
-勉
-莘
-镀
-翡
-歙
-邯
-苎
-銮
-瑛
-鲹
-哉
-旭
-凑
-韶
-锂
-喔
-勐
-驿
-琮
-唤
-伺
-玮
-霖
-辗
-韧
-髓
-胄
-淑
-猬
-汛
-麝
-舅
-梧
-嫔
-汶
-羧
-辣
-谜
-钮
-渭
-鲣
-溥
-闯
-乒
-椤
-呀
-戍
-蜕
-绅
-碗
-帛
-钯
-钾
-蔺
-谅
-釉
-崴
-鲡
-豌
-溲
-箬
-敖
-沸
-烂
-觅
-濒
-曷
-泗
-鸽
-嘎
-汾
-嘧
-啶
-扯
-臀
-兀
-筛
-谤
-拯
-祁
-胱
-荔
-玖
-戮
-灶
-嗓
-胰
-鲃
-妓
-佰
-匐
-剌
-枕
-玲
-孪
-掖
-谕
-孵
-憩
-舄
-捞
-凄
-菇
-颊
-宕
-稷
-泣
-脓
-镁
-纬
-肄
-卦
-幡
-浊
-龈
-晟
-叻
-郃
-膳
-挛
-竿
-慌
-皖
-璋
-腥
-莺
-濂
-瘦
-钕
-唑
-炬
-燮
-簇
-殷
-赈
-饥
-丕
-耧
-珂
-滞
-疣
-簧
-谛
-俩
-祚
-鞑
-靼
-羲
-蚶
-仗
-棚
-溞
-蒴
-鹳
-牻
-缔
-腧
-雉
-覃
-砌
-瓢
-狡
-纭
-棣
-歼
-帧
-珙
-莴
-亩
-蛹
-钰
-寞
-弊
-镊
-峻
-翟
-悖
-拾
-靛
-钵
-矫
-菏
-憧
-憬
-慷
-芮
-倭
-媳
-雯
-烨
-逢
-郸
-揖
-溺
-俨
-晁
-弈
-韬
-辙
-胖
-宦
-屑
-敕
-枫
-阙
-圻
-鄞
-犍
-灿
-琰
-鸾
-霜
-祕
-翘
-缮
-钓
-鲑
-炒
-螈
-舆
-晒
-烘
-陋
-昀
-萱
-暨
-澧
-缚
-篱
-瑶
-筱
-柚
-衅
-毋
-檀
-闍
-赉
-渗
-郓
-鳔
-葎
-橐
-迭
-殴
-缨
-溉
-陁
-钜
-莼
-邕
-乓
-襟
-瘿
-栈
-桫
-沦
-瘾
-跖
-砍
-吨
-熬
-漕
-僵
-穹
-蛳
-绶
-牦
-粪
-漪
-曰
-洱
-湛
-苴
-黧
-鲳
-颓
-蜈
-蚣
-铬
-匀
-饷
-胚
-珧
-螨
-匍
-罩
-蛏
-栉
-抒
-瞭
-脐
-辇
-疮
-萎
-咽
-厍
-峙
-赭
-馅
-熄
-璜
-捆
-贰
-驸
-鲻
-焕
-褒
-蔻
-黯
-铟
-噩
-渤
-侗
-蜴
-蜊
-莅
-砻
-傀
-儡
-鹑
-骆
-浇
-颐
-琢
-渣
-査
-莒
-̌
-啰
-诽
-赂
-轸
-赟
-谶
-褚
-莽
-兮
-奘
-汴
-彧
-夭
-绰
-卞
-铳
-丟
-恼
-鹋
-鹩
-鄣
-镒
-脖
-鍊
-窥
-幂
-镛
-皋
-嘌
-呤
-禺
-栾
-潢
-笏
-潞
-珩
-呆
-滁
-稗
-瞬
-侏
-吟
-漩
-诟
-貂
-鼬
-涪
-渎
-绯
-楞
-沆
-蛟
-蠕
-壸
-砗
-磲
-寡
-锌
-叭
-琥
-讶
-孺
-祗
-佃
-柝
-蜻
-蜓
-菠
-缀
-鞅
-昙
-捧
-悚
-箴
-妊
-娠
-侬
-涟
-栓
-邳
-磡
-砷
-哨
-僖
-闾
-焉
-匕
-苷
-膦
-箕
-и
-̃
-羞
-辱
-硼
-廪
-蛎
-惰
-酌
-拮
-缇
-蘑
-刈
-蛸
-悄
-鳌
-桧
-砸
-巳
-瑾
-抹
-喊
-杠
-瞻
-郦
-痒
-馨
-煜
-懈
-哮
-闫
-麒
-咀
-殃
-琨
-沾
-枋
-毓
-猕
-崛
-睿
-嵯
-颍
-邺
-瑀
-淇
-噪
-鏊
-诫
-锺
-灏
-烁
-悔
-汞
-淯
-鲱
-魄
-郝
-霆
-巾
-邹
-蓣
-榔
-壹
-秤
-閒
-荛
-夥
-谒
-掸
-莩
-糯
-皎
-坳
-喵
-弢
-凳
-啧
-琵
-匆
-阇
-猗
-腮
-淅
-肘
-疃
-蕲
-翎
-痉
-冥
-眷
-罹
-澡
-缸
-婷
-恬
-狙
-汲
-渴
-邬
-茉
-奕
-诡
-荽
-鲢
-芃
-肟
-谚
-赃
-洮
-脆
-诵
-陲
-窜
-绢
-炔
-蕗
-鸮
-吠
-粥
-掳
-琚
-荥
-忻
-闳
-摹
-峄
-湳
-婕
-妤
-庹
-汕
-泱
-佟
-氓
-苟
-珞
-婵
-硒
-钡
-憍
-椹
-鱿
-槲
-骠
-淖
-锰
-寥
-辜
-璇
-婉
-岚
-账
-哔
-锆
-曙
-涞
-铂
-绎
-杏
-愕
-姒
-铰
-亳
-荃
-衬
-楸
-琛
-楷
-柰
-栻
-骄
-铋
-辍
-遁
-靶
-璧
-桢
-薮
-狠
-镐
-诠
-渲
-赎
-雁
-夯
-膺
-苇
-茫
-衢
-堰
-冉
-昕
-瞧
-殆
-芎
-祉
-惘
-铆
-腈
-羰
-渚
-苁
-郯
-铵
-睹
-恕
-巽
-泸
-簪
-伎
-贻
-醋
-虻
-卤
-疍
-睫
-嗲
-鄱
-珑
-炕
-μ
-肱
-梳
-裘
-愁
-瞄
-洵
-盱
-眙
-箩
-筐
-翥
-蟑
-螂
-漾
-叩
-胭
-腻
-沌
-煎
-琊
-勍
-徬
-惶
-疡
-渌
-泠
-胍
-酪
-浔
-歆
-镥
-傍
-佚
-俳
-塾
-鹌
-掞
-酐
-馀
-奚
-苳
-竈
-瞎
-鳃
-霈
-榉
-唾
-俸
-柩
-荦
-ㄟ
-昱
-捩
-慑
-忱
-瞳
-椋
-纻
-隗
-晔
-鮎
-郴
-谠
-轶
-諲
-陂
-抖
-沔
-叟
-觚
-唛
-钌
-痢
-蹶
-偕
-喽
-骷
-髅
-膑
-蚺
-怜
-歹
-稔
-刮
-郫
-捣
-垢
-捏
-茧
-鹂
-踩
-娟
-哄
-虬
-栃
-钲
-焮
-邾
-泼
-泮
-骂
-焚
-黾
-圩
-驭
-掛
-胪
-艮
-濡
-盼
-巯
-骰
-偲
-嫣
-睢
-鳚
-繄
-荼
-聿
-朕
-辕
-珐
-绂
-筷
-洙
-圪
-扉
-桡
-鹛
-擂
-骁
-浉
-骥
-俣
-盂
-榖
-廆
-砾
-讚
-腱
-螟
-踊
-祋
-娣
-諡
-仄
-曜
-靳
-嘟
-妲
-矗
-検
-蒟
-泯
-瑮
-倘
-袓
-洣
-搏
-绮
-铼
-濠
-圜
-涝
-弁
-甾
-魇
-杓
-屉
-揩
-坯
-娆
-侮
-罔
-躯
-坜
-缜
-竣
-蟥
-搔
-朽
-姨
-炊
-岔
-暝
-舫
-咆
-挠
-艷
-熠
-鋆
-茁
-拧
-瓯
-闰
-镍
-镉
-崧
-酃
-佬
-濮
-桝
-儋
-纮
-谯
-煲
-呔
-膻
-筮
-帷
-幔
-緁
-県
-儆
-庾
-荁
-菉
-汜
-傕
-膈
-胯
-鄙
-蝌
-蚪
-鸲
-跻
-玠
-蝾
-龚
-镎
-阖
-乖
-佤
-萃
-扼
-佼
-鸵
-笆
-呐
-峥
-帚
-埕
-蘸
-诙
-孖
-琐
-螣
-傩
-殒
-舵
-阕
-轲
-汹
-埈
-讫
-峒
-沐
-籴
-琶
-彪
-坨
-鼷
-睁
-攸
-圹
-诹
-譬
-栀
-娥
-畋
-仞
-喹
-啉
-蹴
-憨
-俵
-髎
-铲
-焱
-皓
-鋐
-枞
-咪
-苓
-贮
-忤
-羯
-拇
-褓
-籁
-飒
-缙
-��
-诬
-泓
-哼
-雑
-簿
-熈
-讹
-浚
-绞
-攒
-俐
-韭
-蔑
-侪
-禑
-淼
-缵
-湜
-耽
-苛
-侂
-勺
-峯
-薨
-耍
-祜
-铽
-唆
-砀
-嚓
-屹
-悫
-砵
-糠
-獴
-膛
-鲎
-隈
-钊
-脲
-呋
-喃
-玹
-厩
-溅
-犷
-灞
-杵
-镂
-禛
-扳
-枥
-挫
-呵
-込
-暎
-懔
-遑
-偃
-璹
-蠹
-佘
-妡
-紑
-暄
-喧
-叅
-螃
-惺
-蛊
-槛
-刍
-钿
-褧
-镓
-镠
-陟
-璆
-牕
-帖
-寀
-綦
-奣
-嵗
-谌
-嫖
-挚
-钴
-赘
-荪
-怨
-惪
-鹪
-璎
-藳
-暮
-潇
-薖
-沤
-伛
-娇
-頴
-旌
-オ
-カ
-ヤ
-ド
-舘
-栢
-耻
-嵋
-哑
-冼
-瘰
-骘
-鼢
-狯
-霹
-雳
-萁
-芗
-峪
-臻
-赡
-攥
-泷
-呻
-瘫
-痪
-蒺
-笮
-钹
-嫉
-榙
-骈
-鸩
-馯
-葳
-玶
-綖
-崁
-蔵
-罘
-钪
-镗
-柞
-瓛
-裬
-蛲
-擒
-倚
-鼐
-餵
-蠋
-嘻
-颞
-冤
-瓮
-岫
-醮
-鲀
-澥
-婺
-楮
-倻
-酢
-苡
-阈
-硖
-硎
-倩
-腩
-寝
-撇
-宵
-撷
-疹
-徘
-徊
-薷
-斟
-斝
-邰
-尨
-槱
-沥
-锑
-尻
-皕
-饯
-搅
-拌
-钨
-铯
-唁
-轭
-萘
-稼
-霄
-嬤
-俅
-芰
-貘
-墀
-杙
-栎
-桄
-蓍
-砝
-傉
-幺
-恍
-掰
-锶
-埗
-禀
-蓑
-蝮
-湫
-熏
-渺
-锣
-阉
-枭
-昵
-绫
-樾
-轧
-鬃
-捍
-嵖
-岈
-绚
-鸯
-謇
-昴
-钗
-恽
-玭
-偈
-闼
-蛉
-槚
-脾
-畲
-瓘
-涓
-钫
-浸
-胛
-烺
-篦
-珰
-剃
-嵴
-斡
-鎏
-芷
-霓
-氖
-馔
-蟆
-驷
-阏
-愔
-淤
-眩
-爹
-铮
-剀
-濯
-炫
-塬
-顽
-砥
-樵
-倦
-郤
-玎
-沭
-琬
-嬴
-猄
-宥
-拢
-氦
-姮
-挞
-胳
-膊
-疤
-鹬
-蟋
-蟀
-嶷
-盏
-埇
-烙
-莞
-秧
-捡
-匮
-妍
-樨
-妒
-浞
-臼
-奂
-靡
-蜑
-臯
-谪
-黜
-痼
-懦
-棁
-笄
-牂
-牁
-褪
-簸
-湟
-佯
-瘠
-跪
-躺
-隘
-涿
-屐
-藔
-匾
-衫
-洐
-龛
-鳟
-膏
-饴
-杻
-醯
-晦
-鞣
-荧
-嚣
-炜
-氙
-榭
-怵
-猝
-伫
-翃
-婢
-胥
-壽
-珈
-淞
-铣
-胼
-痘
-噌
-馥
-箨
-钼
-羡
-棨
-圃
-趴
-揆
-饵
-彤
-飙
-悌
-揉
-闱
-撮
-戛
-秽
-麂
-孛
-䴕
-濉
-袒
-瑭
-愧

mms-1b-all/cym/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/cym/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/cym/tokens.txt

@@ -1,83 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-a
-d
-n
-e
-y
-i
-r
-o
-l
-w
-h
-g
-f
-t
-s
-u
-c
-m
-b
-'
-p
-0
-â
-1
-k
-ô
-2
--
-9
-j
-5
-v
-4
-3
-6
-8
-.
-ŵ
-7
-,
-z
-ï
-ê
-x
-î
-á
-q
-:
-ŷ
-/
-$
-é
-ü
-%
-;
-í
-¥
-õ
-ë
-ö
-ú
-+
-"
-ç
-£
-ò
-ã
-ì
-ä
-ó
-̇
-°
-[
-]
-û
-à
-–
-—

mms-1b-all/dan/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/dan/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/dan/tokens.txt

@@ -1,75 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-r
-n
-t
-a
-d
-i
-s
-l
-o
-g
-m
-k
-f
-v
-u
-b
-p
-h
-å
-æ
-y
-ø
-j
-c
-0
-1
--
-.
-w
-2
-9
-5
-4
-3
-z
-6
-8
-7
-x
-'
-/
-é
-q
-,
-:
-$
-​
-%
-í
-ü
-;
-"
-õ
-–
-—
-°
-ö
-¥
-&
-”
-ç
-ã
-[
-]
-á
-ł
-²
-+
-ó

mms-1b-all/decoding_config.json

@@ -1 +0,0 @@
-{"afr": {"silweight": 0.0, "lmweight": 2.385147446332425, "wordscore": -0.6905931241640371, "tokensfile": "mms-1b-all/afr/tokens.txt", "lmfile": "lms/afr/word_5gram.bin", "lexiconfile": "mms-1b-all/afr/lexicon.txt"}, "amh": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/amh/tokens.txt", "lmfile": "lms/amh/word_5gram.bin", "lexiconfile": "mms-1b-all/amh/lexicon.txt"}, "ara": {"silweight": 0.0, "lmweight": 2.0317625700822957, "wordscore": 2.5970029453614405, "tokensfile": "mms-1b-all/ara/tokens.txt", "lmfile": "lms/ara/word_5gram.bin", "lexiconfile": "mms-1b-all/ara/lexicon.txt"}, "asm": {"silweight": 0.0, "lmweight": 1.8885708618108534, "wordscore": -2.395792751589805, "tokensfile": "mms-1b-all/asm/tokens.txt", "lmfile": "lms/asm/word_5gram.bin", "lexiconfile": "mms-1b-all/asm/lexicon.txt"}, "ast": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/ast/tokens.txt", "lmfile": "lms/ast/word_5gram.bin", "lexiconfile": "mms-1b-all/ast/lexicon.txt"}, "azj-script_latin": {"silweight": 0.0, "lmweight": 1.68228632332338, "wordscore": -1.44649949824222, "tokensfile": "mms-1b-all/azj-script_latin/tokens.txt", "lmfile": "lms/azj-script_latin/word_5gram.bin", "lexiconfile": "mms-1b-all/azj-script_latin/lexicon.txt"}, "bel": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/bel/tokens.txt", "lmfile": "lms/bel/word_5gram.bin", "lexiconfile": "mms-1b-all/bel/lexicon.txt"}, "bul": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/bul/tokens.txt", "lmfile": "lms/bul/word_5gram.bin", "lexiconfile": "mms-1b-all/bul/lexicon.txt"}, "ben": {"silweight": 0.0, "lmweight": 2.1623996997922177, "wordscore": -0.6522236985922509, "tokensfile": "mms-1b-all/ben/tokens.txt", "lmfile": "lms/ben/word_5gram.bin", "lexiconfile": "mms-1b-all/ben/lexicon.txt"}, "bos": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/bos/tokens.txt", "lmfile": "lms/bos/word_5gram.bin", "lexiconfile": "mms-1b-all/bos/lexicon.txt"}, "cat": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/cat/tokens.txt", "lmfile": "lms/cat/word_5gram.bin", "lexiconfile": "mms-1b-all/cat/lexicon.txt"}, "ceb": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/ceb/tokens.txt", "lmfile": "lms/ceb/word_5gram.bin", "lexiconfile": "mms-1b-all/ceb/lexicon.txt"}, "ckb": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/ckb/tokens.txt", "lmfile": "lms/ckb/word_5gram.bin", "lexiconfile": "mms-1b-all/ckb/lexicon.txt"}, "cmn-script_simplified": {"silweight": -1.44649949824222, "lmweight": 1.68228632332338, "wordscore": 0.0, "tokensfile": "mms-1b-all/cmn-script_simplified/tokens.txt", "lmfile": "lms/cmn-script_simplified/char_20gram.bin", "lexiconfile": null}, "ces": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/ces/tokens.txt", "lmfile": "lms/ces/word_5gram.bin", "lexiconfile": "mms-1b-all/ces/lexicon.txt"}, "cym": {"silweight": 0.0, "lmweight": 2.520589361645891, "wordscore": 2.070465454029091, "tokensfile": "mms-1b-all/cym/tokens.txt", "lmfile": "lms/cym/word_5gram.bin", "lexiconfile": "mms-1b-all/cym/lexicon.txt"}, "dan": {"silweight": 0.0, "lmweight": 2.539999639645833, "wordscore": 0.6380305065253138, "tokensfile": "mms-1b-all/dan/tokens.txt", "lmfile": "lms/dan/word_5gram.bin", "lexiconfile": "mms-1b-all/dan/lexicon.txt"}, "deu": {"silweight": 0.0, "lmweight": 2.451132420162849, "wordscore": -0.08133478818499906, "tokensfile": "mms-1b-all/deu/tokens.txt", "lmfile": "lms/deu/word_5gram.bin", "lexiconfile": "mms-1b-all/deu/lexicon.txt"}, "ell": {"silweight": 0.0, "lmweight": 2.8262456394675586, "wordscore": 0.2846454679705426, "tokensfile": "mms-1b-all/ell/tokens.txt", "lmfile": "lms/ell/word_5gram.bin", "lexiconfile": "mms-1b-all/ell/lexicon.txt"}, "eng": {"silweight": 0.0, "lmweight": 2.045098885474434, "wordscore": -0.5703951752975143, "tokensfile": "mms-1b-all/eng/tokens.txt", "lmfile": "lms/eng/word_5gram.bin", "lexiconfile": "mms-1b-all/eng/lexicon.txt"}, "spa": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/spa/tokens.txt", "lmfile": "lms/spa/word_5gram.bin", "lexiconfile": "mms-1b-all/spa/lexicon.txt"}, "est": {"silweight": 0.0, "lmweight": 2.722356530249026, "wordscore": -2.839819232026769, "tokensfile": "mms-1b-all/est/tokens.txt", "lmfile": "lms/est/word_5gram.bin", "lexiconfile": "mms-1b-all/est/lexicon.txt"}, "fas": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/fas/tokens.txt", "lmfile": "lms/fas/word_5gram.bin", "lexiconfile": "mms-1b-all/fas/lexicon.txt"}, "ful": {"silweight": 0.0, "lmweight": 1.0419692415678377, "wordscore": 1.8301669620781338, "tokensfile": "mms-1b-all/ful/tokens.txt", "lmfile": "lms/ful/word_5gram.bin", "lexiconfile": "mms-1b-all/ful/lexicon.txt"}, "fin": {"silweight": 0.0, "lmweight": 3.263652386134638, "wordscore": -2.3963548787034226, "tokensfile": "mms-1b-all/fin/tokens.txt", "lmfile": "lms/fin/word_5gram.bin", "lexiconfile": "mms-1b-all/fin/lexicon.txt"}, "tgl": {"silweight": 0.0, "lmweight": 1.8885708618108534, "wordscore": -2.395792751589805, "tokensfile": "mms-1b-all/tgl/tokens.txt", "lmfile": "lms/tgl/word_5gram.bin", "lexiconfile": "mms-1b-all/tgl/lexicon.txt"}, "fra": {"silweight": 0.0, "lmweight": 2.520589361645891, "wordscore": 2.070465454029091, "tokensfile": "mms-1b-all/fra/tokens.txt", "lmfile": "lms/fra/word_5gram.bin", "lexiconfile": "mms-1b-all/fra/lexicon.txt"}, "gle": {"silweight": 0.0, "lmweight": 2.0317625700822957, "wordscore": 2.5970029453614405, "tokensfile": "mms-1b-all/gle/tokens.txt", "lmfile": "lms/gle/word_5gram.bin", "lexiconfile": "mms-1b-all/gle/lexicon.txt"}, "glg": {"silweight": 0.0, "lmweight": 2.539999639645833, "wordscore": 0.6380305065253138, "tokensfile": "mms-1b-all/glg/tokens.txt", "lmfile": "lms/glg/word_5gram.bin", "lexiconfile": "mms-1b-all/glg/lexicon.txt"}, "guj": {"silweight": 0.0, "lmweight": 1.68228632332338, "wordscore": -1.44649949824222, "tokensfile": "mms-1b-all/guj/tokens.txt", "lmfile": "lms/guj/word_5gram.bin", "lexiconfile": "mms-1b-all/guj/lexicon.txt"}, "hau": {"silweight": 0.0, "lmweight": 2.1623996997922177, "wordscore": -0.6522236985922509, "tokensfile": "mms-1b-all/hau/tokens.txt", "lmfile": "lms/hau/word_5gram.bin", "lexiconfile": "mms-1b-all/hau/lexicon.txt"}, "heb": {"silweight": 0.0, "lmweight": 1.9080391062108681, "wordscore": 2.191859566629841, "tokensfile": "mms-1b-all/heb/tokens.txt", "lmfile": "lms/heb/word_5gram.bin", "lexiconfile": "mms-1b-all/heb/lexicon.txt"}, "hin": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/hin/tokens.txt", "lmfile": "lms/hin/word_5gram.bin", "lexiconfile": "mms-1b-all/hin/lexicon.txt"}, "hrv": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/hrv/tokens.txt", "lmfile": "lms/hrv/word_5gram.bin", "lexiconfile": "mms-1b-all/hrv/lexicon.txt"}, "hun": {"silweight": 0.0, "lmweight": 2.045098885474434, "wordscore": -0.5703951752975143, "tokensfile": "mms-1b-all/hun/tokens.txt", "lmfile": "lms/hun/word_5gram.bin", "lexiconfile": "mms-1b-all/hun/lexicon.txt"}, "hye": {"silweight": 0.0, "lmweight": 2.1623996997922177, "wordscore": -0.6522236985922509, "tokensfile": "mms-1b-all/hye/tokens.txt", "lmfile": "lms/hye/word_5gram.bin", "lexiconfile": "mms-1b-all/hye/lexicon.txt"}, "ind": {"silweight": 0.0, "lmweight": 3.030415687865747, "wordscore": 2.2606222249366485, "tokensfile": "mms-1b-all/ind/tokens.txt", "lmfile": "lms/ind/word_5gram.bin", "lexiconfile": "mms-1b-all/ind/lexicon.txt"}, "ibo": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/ibo/tokens.txt", "lmfile": "lms/ibo/word_5gram.bin", "lexiconfile": "mms-1b-all/ibo/lexicon.txt"}, "isl": {"silweight": 0.0, "lmweight": 2.4510927194744268, "wordscore": 0.939956333937773, "tokensfile": "mms-1b-all/isl/tokens.txt", "lmfile": "lms/isl/word_5gram.bin", "lexiconfile": "mms-1b-all/isl/lexicon.txt"}, "ita": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/ita/tokens.txt", "lmfile": "lms/ita/word_5gram.bin", "lexiconfile": "mms-1b-all/ita/lexicon.txt"}, "jpn": {"silweight": 2.883099903883612, "lmweight": 1.48055976134075, "wordscore": 0.0, "tokensfile": "mms-1b-all/jpn/tokens.txt", "lmfile": "lms/jpn/char_20gram.bin", "lexiconfile": null}, "jav": {"silweight": 0.0, "lmweight": 1.68228632332338, "wordscore": -1.44649949824222, "tokensfile": "mms-1b-all/jav/tokens.txt", "lmfile": "lms/jav/word_5gram.bin", "lexiconfile": "mms-1b-all/jav/lexicon.txt"}, "kat": {"silweight": 0.0, "lmweight": 2.194797215342357, "wordscore": -2.9157497990158863, "tokensfile": "mms-1b-all/kat/tokens.txt", "lmfile": "lms/kat/word_5gram.bin", "lexiconfile": "mms-1b-all/kat/lexicon.txt"}, "kam": {"silweight": 0.0, "lmweight": 0.32178327421014163, "wordscore": -1.0796723719647254, "tokensfile": "mms-1b-all/kam/tokens.txt", "lmfile": "lms/kam/word_5gram.bin", "lexiconfile": "mms-1b-all/kam/lexicon.txt"}, "kea": {"silweight": 0.0, "lmweight": 0.7575653142174246, "wordscore": -1.8796228304666693, "tokensfile": "mms-1b-all/kea/tokens.txt", "lmfile": "lms/kea/word_5gram.bin", "lexiconfile": "mms-1b-all/kea/lexicon.txt"}, "kaz": {"silweight": 0.0, "lmweight": 2.8262456394675586, "wordscore": 0.2846454679705426, "tokensfile": "mms-1b-all/kaz/tokens.txt", "lmfile": "lms/kaz/word_5gram.bin", "lexiconfile": "mms-1b-all/kaz/lexicon.txt"}, "khm": {"silweight": 0.6380305065253138, "lmweight": 2.539999639645833, "wordscore": 0.0, "tokensfile": "mms-1b-all/khm/tokens.txt", "lmfile": "lms/khm/char_20gram.bin", "lexiconfile": null}, "kan": {"silweight": 0.0, "lmweight": 2.302604056659554, "wordscore": -1.258022985583452, "tokensfile": "mms-1b-all/kan/tokens.txt", "lmfile": "lms/kan/word_5gram.bin", "lexiconfile": "mms-1b-all/kan/lexicon.txt"}, "kor": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/kor/tokens.txt", "lmfile": "lms/kor/word_5gram.bin", "lexiconfile": "mms-1b-all/kor/lexicon.txt"}, "kir": {"silweight": 0.0, "lmweight": 1.906123968037523, "wordscore": -2.4610538328264377, "tokensfile": "mms-1b-all/kir/tokens.txt", "lmfile": "lms/kir/word_5gram.bin", "lexiconfile": "mms-1b-all/kir/lexicon.txt"}, "ltz": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/ltz/tokens.txt", "lmfile": "lms/ltz/word_5gram.bin", "lexiconfile": "mms-1b-all/ltz/lexicon.txt"}, "lug": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/lug/tokens.txt", "lmfile": "lms/lug/word_5gram.bin", "lexiconfile": "mms-1b-all/lug/lexicon.txt"}, "lin": {"silweight": 0.0, "lmweight": 0.7575653142174246, "wordscore": -1.8796228304666693, "tokensfile": "mms-1b-all/lin/tokens.txt", "lmfile": "lms/lin/word_5gram.bin", "lexiconfile": "mms-1b-all/lin/lexicon.txt"}, "lao": {"silweight": 0.6653218406628096, "lmweight": 1.7366873418151347, "wordscore": 0.0, "tokensfile": "mms-1b-all/lao/tokens.txt", "lmfile": "lms/lao/char_20gram.bin", "lexiconfile": null}, "lit": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/lit/tokens.txt", "lmfile": "lms/lit/word_5gram.bin", "lexiconfile": "mms-1b-all/lit/lexicon.txt"}, "luo": {"silweight": 0.0, "lmweight": 0.7642683660095622, "wordscore": 0.40506444372403116, "tokensfile": "mms-1b-all/luo/tokens.txt", "lmfile": "lms/luo/word_5gram.bin", "lexiconfile": "mms-1b-all/luo/lexicon.txt"}, "lav": {"silweight": 0.0, "lmweight": 1.8885708618108534, "wordscore": -2.395792751589805, "tokensfile": "mms-1b-all/lav/tokens.txt", "lmfile": "lms/lav/word_5gram.bin", "lexiconfile": "mms-1b-all/lav/lexicon.txt"}, "mri": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/mri/tokens.txt", "lmfile": "lms/mri/word_5gram.bin", "lexiconfile": "mms-1b-all/mri/lexicon.txt"}, "mkd": {"silweight": 0.0, "lmweight": 2.520589361645891, "wordscore": 2.070465454029091, "tokensfile": "mms-1b-all/mkd/tokens.txt", "lmfile": "lms/mkd/word_5gram.bin", "lexiconfile": "mms-1b-all/mkd/lexicon.txt"}, "mal": {"silweight": 0.0, "lmweight": 2.821133599417625, "wordscore": -1.346195272127237, "tokensfile": "mms-1b-all/mal/tokens.txt", "lmfile": "lms/mal/word_5gram.bin", "lexiconfile": "mms-1b-all/mal/lexicon.txt"}, "mon": {"silweight": 0.0, "lmweight": 2.520589361645891, "wordscore": 2.070465454029091, "tokensfile": "mms-1b-all/mon/tokens.txt", "lmfile": "lms/mon/word_5gram.bin", "lexiconfile": "mms-1b-all/mon/lexicon.txt"}, "mar": {"silweight": 0.0, "lmweight": 2.045098885474434, "wordscore": -0.5703951752975143, "tokensfile": "mms-1b-all/mar/tokens.txt", "lmfile": "lms/mar/word_5gram.bin", "lexiconfile": "mms-1b-all/mar/lexicon.txt"}, "zlm": {"silweight": 0.0, "lmweight": 2.722356530249026, "wordscore": -2.839819232026769, "tokensfile": "mms-1b-all/zlm/tokens.txt", "lmfile": "lms/zlm/word_5gram.bin", "lexiconfile": "mms-1b-all/zlm/lexicon.txt"}, "mlt": {"silweight": 0.0, "lmweight": 2.1623996997922177, "wordscore": -0.6522236985922509, "tokensfile": "mms-1b-all/mlt/tokens.txt", "lmfile": "lms/mlt/word_5gram.bin", "lexiconfile": "mms-1b-all/mlt/lexicon.txt"}, "mya": {"silweight": -0.5703951752975143, "lmweight": 2.045098885474434, "wordscore": 0.0, "tokensfile": "mms-1b-all/mya/tokens.txt", "lmfile": "lms/mya/char_20gram.bin", "lexiconfile": null}, "nob": {"silweight": 0.0, "lmweight": 2.4510927194744268, "wordscore": 0.939956333937773, "tokensfile": "mms-1b-all/nob/tokens.txt", "lmfile": "lms/nob/word_5gram.bin", "lexiconfile": "mms-1b-all/nob/lexicon.txt"}, "npi": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/npi/tokens.txt", "lmfile": "lms/npi/word_5gram.bin", "lexiconfile": "mms-1b-all/npi/lexicon.txt"}, "nld": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/nld/tokens.txt", "lmfile": "lms/nld/word_5gram.bin", "lexiconfile": "mms-1b-all/nld/lexicon.txt"}, "nso": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/nso/tokens.txt", "lmfile": "lms/nso/word_5gram.bin", "lexiconfile": "mms-1b-all/nso/lexicon.txt"}, "nya": {"silweight": 0.0, "lmweight": 1.9080391062108681, "wordscore": 2.191859566629841, "tokensfile": "mms-1b-all/nya/tokens.txt", "lmfile": "lms/nya/word_5gram.bin", "lexiconfile": "mms-1b-all/nya/lexicon.txt"}, "oci": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/oci/tokens.txt", "lmfile": "lms/oci/word_5gram.bin", "lexiconfile": "mms-1b-all/oci/lexicon.txt"}, "orm": {"silweight": 0.0, "lmweight": 1.9080391062108681, "wordscore": 2.191859566629841, "tokensfile": "mms-1b-all/orm/tokens.txt", "lmfile": "lms/orm/word_5gram.bin", "lexiconfile": "mms-1b-all/orm/lexicon.txt"}, "ory": {"silweight": 0.0, "lmweight": 2.045098885474434, "wordscore": -0.5703951752975143, "tokensfile": "mms-1b-all/ory/tokens.txt", "lmfile": "lms/ory/word_5gram.bin", "lexiconfile": "mms-1b-all/ory/lexicon.txt"}, "pan": {"silweight": 0.0, "lmweight": 2.045098885474434, "wordscore": -0.5703951752975143, "tokensfile": "mms-1b-all/pan/tokens.txt", "lmfile": "lms/pan/word_5gram.bin", "lexiconfile": "mms-1b-all/pan/lexicon.txt"}, "pol": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/pol/tokens.txt", "lmfile": "lms/pol/word_5gram.bin", "lexiconfile": "mms-1b-all/pol/lexicon.txt"}, "pus": {"silweight": 0.0, "lmweight": 1.9080391062108681, "wordscore": 2.191859566629841, "tokensfile": "mms-1b-all/pus/tokens.txt", "lmfile": "lms/pus/word_5gram.bin", "lexiconfile": "mms-1b-all/pus/lexicon.txt"}, "por": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/por/tokens.txt", "lmfile": "lms/por/word_5gram.bin", "lexiconfile": "mms-1b-all/por/lexicon.txt"}, "ron": {"silweight": 0.0, "lmweight": 2.303811792126163, "wordscore": -0.6527435440630387, "tokensfile": "mms-1b-all/ron/tokens.txt", "lmfile": "lms/ron/word_5gram.bin", "lexiconfile": "mms-1b-all/ron/lexicon.txt"}, "rus": {"silweight": 0.0, "lmweight": 2.539999639645833, "wordscore": 0.6380305065253138, "tokensfile": "mms-1b-all/rus/tokens.txt", "lmfile": "lms/rus/word_5gram.bin", "lexiconfile": "mms-1b-all/rus/lexicon.txt"}, "snd": {"silweight": 0.0, "lmweight": 1.48055976134075, "wordscore": 2.883099903883612, "tokensfile": "mms-1b-all/snd/tokens.txt", "lmfile": "lms/snd/word_5gram.bin", "lexiconfile": "mms-1b-all/snd/lexicon.txt"}, "slk": {"silweight": 0.0, "lmweight": 2.303811792126163, "wordscore": -0.6527435440630387, "tokensfile": "mms-1b-all/slk/tokens.txt", "lmfile": "lms/slk/word_5gram.bin", "lexiconfile": "mms-1b-all/slk/lexicon.txt"}, "slv": {"silweight": 0.0, "lmweight": 2.1623996997922177, "wordscore": -0.6522236985922509, "tokensfile": "mms-1b-all/slv/tokens.txt", "lmfile": "lms/slv/word_5gram.bin", "lexiconfile": "mms-1b-all/slv/lexicon.txt"}, "sna": {"silweight": 0.0, "lmweight": 2.194797215342357, "wordscore": -2.9157497990158863, "tokensfile": "mms-1b-all/sna/tokens.txt", "lmfile": "lms/sna/word_5gram.bin", "lexiconfile": "mms-1b-all/sna/lexicon.txt"}, "som": {"silweight": 0.0, "lmweight": 1.48055976134075, "wordscore": 2.883099903883612, "tokensfile": "mms-1b-all/som/tokens.txt", "lmfile": "lms/som/word_5gram.bin", "lexiconfile": "mms-1b-all/som/lexicon.txt"}, "srp-script_latin": {"silweight": 0.0, "lmweight": 1.7366873418151347, "wordscore": 0.6653218406628096, "tokensfile": "mms-1b-all/srp-script_latin/tokens.txt", "lmfile": "lms/srp-script_latin/word_5gram.bin", "lexiconfile": "mms-1b-all/srp-script_latin/lexicon.txt"}, "swe": {"silweight": 0.0, "lmweight": 3.3776874061001925, "wordscore": 1.5477264176418153, "tokensfile": "mms-1b-all/swe/tokens.txt", "lmfile": "lms/swe/word_5gram.bin", "lexiconfile": "mms-1b-all/swe/lexicon.txt"}, "swh": {"silweight": 0.0, "lmweight": 2.1623996997922177, "wordscore": -0.6522236985922509, "tokensfile": "mms-1b-all/swh/tokens.txt", "lmfile": "lms/swh/word_5gram.bin", "lexiconfile": "mms-1b-all/swh/lexicon.txt"}, "tam": {"silweight": 0.0, "lmweight": 2.451132420162849, "wordscore": -0.08133478818499906, "tokensfile": "mms-1b-all/tam/tokens.txt", "lmfile": "lms/tam/word_5gram.bin", "lexiconfile": "mms-1b-all/tam/lexicon.txt"}, "tel": {"silweight": 0.0, "lmweight": 1.8022524265246207, "wordscore": 0.9614722717343338, "tokensfile": "mms-1b-all/tel/tokens.txt", "lmfile": "lms/tel/word_5gram.bin", "lexiconfile": "mms-1b-all/tel/lexicon.txt"}, "tgk": {"silweight": 0.0, "lmweight": 2.303811792126163, "wordscore": -0.6527435440630387, "tokensfile": "mms-1b-all/tgk/tokens.txt", "lmfile": "lms/tgk/word_5gram.bin", "lexiconfile": "mms-1b-all/tgk/lexicon.txt"}, "tha": {"silweight": 2.5970029453614405, "lmweight": 2.0317625700822957, "wordscore": 0.0, "tokensfile": "mms-1b-all/tha/tokens.txt", "lmfile": "lms/tha/char_20gram.bin", "lexiconfile": null}, "tur": {"silweight": 0.0, "lmweight": 2.302604056659554, "wordscore": -1.258022985583452, "tokensfile": "mms-1b-all/tur/tokens.txt", "lmfile": "lms/tur/word_5gram.bin", "lexiconfile": "mms-1b-all/tur/lexicon.txt"}, "ukr": {"silweight": 0.0, "lmweight": 2.4510927194744268, "wordscore": 0.939956333937773, "tokensfile": "mms-1b-all/ukr/tokens.txt", "lmfile": "lms/ukr/word_5gram.bin", "lexiconfile": "mms-1b-all/ukr/lexicon.txt"}, "umb": {"silweight": 0.0, "lmweight": 0.14556815044594318, "wordscore": -2.8701809408698553, "tokensfile": "mms-1b-all/umb/tokens.txt", "lmfile": "lms/umb/word_5gram.bin", "lexiconfile": "mms-1b-all/umb/lexicon.txt"}, "urd-script_arabic": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/urd-script_arabic/tokens.txt", "lmfile": "lms/urd-script_arabic/word_5gram.bin", "lexiconfile": "mms-1b-all/urd-script_arabic/lexicon.txt"}, "uzb-script_latin": {"silweight": 0.0, "lmweight": 1.68228632332338, "wordscore": -1.44649949824222, "tokensfile": "mms-1b-all/uzb-script_latin/tokens.txt", "lmfile": "lms/uzb-script_latin/word_5gram.bin", "lexiconfile": "mms-1b-all/uzb-script_latin/lexicon.txt"}, "vie": {"silweight": 0.0, "lmweight": 3.246514834031514, "wordscore": 2.096915791118203, "tokensfile": "mms-1b-all/vie/tokens.txt", "lmfile": "lms/vie/word_5gram.bin", "lexiconfile": "mms-1b-all/vie/lexicon.txt"}, "wol": {"silweight": 0.0, "lmweight": 0.7642683660095622, "wordscore": 0.40506444372403116, "tokensfile": "mms-1b-all/wol/tokens.txt", "lmfile": "lms/wol/word_5gram.bin", "lexiconfile": "mms-1b-all/wol/lexicon.txt"}, "xho": {"silweight": 0.0, "lmweight": 1.68228632332338, "wordscore": -1.44649949824222, "tokensfile": "mms-1b-all/xho/tokens.txt", "lmfile": "lms/xho/word_5gram.bin", "lexiconfile": "mms-1b-all/xho/lexicon.txt"}, "yor": {"silweight": 0.0, "lmweight": 1.9063878166094232, "wordscore": 0.5002922367301874, "tokensfile": "mms-1b-all/yor/tokens.txt", "lmfile": "lms/yor/word_5gram.bin", "lexiconfile": "mms-1b-all/yor/lexicon.txt"}, "yue-script_traditional": {"silweight": 2.883099903883612, "lmweight": 1.48055976134075, "wordscore": 0.0, "tokensfile": "mms-1b-all/yue-script_traditional/tokens.txt", "lmfile": "lms/yue-script_traditional/char_20gram.bin", "lexiconfile": null}, "zul": {"silweight": 0.0, "lmweight": 1.68228632332338, "wordscore": -1.44649949824222, "tokensfile": "mms-1b-all/zul/tokens.txt", "lmfile": "lms/zul/word_5gram.bin", "lexiconfile": "mms-1b-all/zul/lexicon.txt"}}

mms-1b-all/deu/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/deu/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/deu/tokens.txt

@@ -1,194 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-n
-i
-r
-s
-t
-a
-d
-h
-u
-l
-g
-o
-c
-m
-b
-f
-w
-k
-z
-v
-p
-ü
-ä
-ö
-j
-0
--
-y
-ß
-1
-.
-2
-x
-"
-9
-5
-3
-4
-6
-8
-q
-7
-:
-/
-,
-'
-á
-%
-°
-í
-é
-&
-+
-;
-ç
-‍
-[
-]
-²
-¥
-æ
-ú
-ā
-ã
-!
-õ
-ł
-‌
-”
-$
-ó
-–
-ō
-š
-č
-ř
-ć
-â
-ø
-ž
-ı
-ş
-ô
-ý
-ñ
-ū
-ș
-́
-ʿ
-ë
-ě
-ś
-œ
-ț
-ī
-ə
-ʻ
-đ
-—
-ń
-′
-ê
-å
-ă
-ð
-î
-ą
-ň
-ğ
-̇
-ė
-ï
-ò
-ż
-ḫ
-ź
-ů
-ő
-ę
-о
-`
-ơ
-а
-и
-à
-‐
-ì
-ġ
-ď
-ť
-ế
-с
-е
-р
-ф
-м
-в
-ш
-û
-μ
-ṣ
-ả
-ạ
-辶
-ѹ
-無
-ǐ
-ན
-་
-カ
-臣
-比
-支
-ч
-к
-ņ
-合
-̆
-ʾ
-ŏ
-孙
-道
-临
-尣
-ħ
-ụ
-ắ
-黃
-城
-关
-镇
-è
-̥
-毛
-泽
-东
-§
-þ
-ṟ
-ē
-⟨
-⟩
-ù
-≡
-ṭ
-ộ
-ễ
-ằ

mms-1b-all/ell/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/ell/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/ell/tokens.txt

@@ -1,102 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-α
-τ
-ο
-ι
-ε
-ν
-σ
-ρ
-π
-κ
-η
-ς
-μ
-υ
-λ
-ί
-ό
-ά
-έ
-γ
-δ
-ή
-ω
-χ
-ύ
-θ
-φ
-ώ
-β
-ξ
-ζ
-0
-a
-1
-ψ
-e
-o
-r
-i
-n
-2
-s
-.
-t
-«
-»
-c
-9
-l
-5
-m
-h
-4
-3
-6
-d
-8
-u
-p
-ϊ
-g
-b
-k
--
-7
-y
-v
-w
-:
-,
-f
-'
-/
-z
-j
-x
-%
-ΐ
-q
-΄
-ϋ
-·
-²
-[
-õ
-]
-í
-!
-;
-–
-é
-&
-°
-$
-+
-́
-â

mms-1b-all/eng/tokens.txt

@@ -1,154 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-t
-a
-o
-i
-n
-s
-r
-h
-l
-d
-c
-u
-m
-f
-p
-g
-y
-w
-b
-v
-k
-0
-x
-j
-1
-'
--
-z
-q
-2
-9
-.
-5
-4
-6
-3
-8
-7
-,
-/
-:
-%
-$
-á
-í
-—
-;
-¥
-ü
-é
-+
-&
-°
-[
-]
-–
-"
-”
-ç
-’
-ã
-ó
-£
-õ
-ú
-​
-‘
-ł
-ö
-!
-²
-̇
-ä
-è
-ō
-â
-ß
-ñ
-à
-ï
-ô
-ë
-ê
-č
-š
-ø
-`
-́
-ć
-ž
-œ
-î
-ð
-û
-ā
-ū
-ă
-ı
-ș
-ò
-α
-ī
-ř
-κ
-æ
-ạ
-ý
-и
-к
-ʻ
-ş
-π
-ń
-ę
-ő
-ṃ
-ụ
-å
-в
-е
-л
-й
-н
-я
-з
-ь
-þ
-时
-尚
-先
-生
-ň
-ə
-§
-ě
-χ
-≡
-ē
-а
-ả
-ị
-נ
-ע
-京
-都
-大
-阪
-ğ

mms-1b-all/est/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/est/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/est/tokens.txt

@@ -1,74 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-a
-e
-i
-s
-t
-l
-u
-n
-k
-d
-o
-m
-r
-v
-p
-g
-h
-j
-ä
-õ
-b
-ü
-ö
-f
-0
-1
-c
--
-2
-y
-9
-"
-w
-5
-.
-4
-3
-8
-6
-'
-7
-z
-x
-š
-/
-ž
-,
-–
-q
-:
-%
-;
-’
-!
-”
-—
-+
-ç
-ł
-é
-¥
-[
-]
-²
-°
-í
-ã
-ú
-ô

mms-1b-all/fas/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/fas/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/fas/tokens.txt

@@ -1,118 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-ا
-ی
-ر
-د
-ن
-ه
-و
-ت
-م
-ب
-س
-ک
-ل
-ش
-ز
-‌
-گ
-ف
-ق
-خ
-ع
-ج
-ح
-پ
-آ
-ط
-ص
-چ
-غ
-ض
-۰
-ظ
-ذ
-ث
-۱
-ً
-ئ
-ژ
-۲
-،
-0
-۹
-۵
-1
-۳
-أ
-۴
-۶
-۸
-۷
-4
-.
-a
-5
--
-2
-3
-«
-»
-8
-e
-9
-6
-s
-i
-r
-ء
-o
-,
-n
-:
-l
-d
-t
-/
-ِ
-h
-ؤ
-7
-p
-m
-b
-y
-u
-k
-g
-c
-v
-w
-x
-ّ
-؛
-%
-َ
-f
-٪
-q
-‎
-õ
-j
-+
-ُ
-ۀ
-&
-z
-ي
-ك
-ى
-ٔ
-ة
-–
-ے
-'

mms-1b-all/fin/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/fin/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/fin/tokens.txt

@@ -1,71 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-a
-i
-t
-n
-e
-s
-l
-o
-k
-u
-ä
-m
-r
-v
-j
-p
-h
-y
-d
-ö
-g
-0
-b
--
-c
-1
-f
-2
-9
-w
-5
-4
-6
-.
-3
-8
-7
-z
-:
-x
-q
-‎
-,
-–
-'
-/
-š
-ž
-ü
-×
-ł
-ç
-õ
-ú
-é
-"
-[
-]
-í
-ã
-̇
-%
-ë
-+
-á
-ó

mms-1b-all/fra/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed2/fra/lexicon_fleurs_limit250k_fixed.txt

mms-1b-all/fra/tokens.txt

@@ -1,314 +0,0 @@
-<s>
-<pad>
-</s>
-<unk>
-|
-e
-s
-a
-n
-t
-i
-r
-u
-l
-o
-d
-c
-p
-é
-m
-v
-g
-f
-'
-q
-b
-h
-à
-x
-è
-y
-j
-0
-z
-k
-ê
--
-1
-2
-’
-«
-»
-w
-9
-ô
-5
-4
-3
-.
-6
-8
-ç
-î
-7
-â
-ù
-û
-:
-ï
-"
-/
-,
-œ
-%
-;
-!
-°
-ü
-í
-á
-–
-õ
-?
-ë
-[
-]
-—
-ú
-+
-ã
-$
-ł
-ó
-²
-ö
-æ
-ÿ
-ō
-ä
-š
-ć
-č
-ñ
-ū
-ø
-ā
-ń
-ž
-ă
-å
-ș
-ß
-́
-ş
-ı
-ř
-ț
-ý
-ð
-ś
-ż
-ę
-đ
-ī
-ò
-ą
-ě
-ő
-ė
-`
-ğ
-̇
-α
-β
-ē
-ʻ
-ź
-ì
-ʿ
-ṣ
-ņ
-þ
-ʼ
-ŏ
-σ
-π
-ả
-ň
-ư
-ʾ
-ţ
-ː
-ễ
-γ
-ť
-ơ
-ĩ
-ệ
-ω
-δ
-κ
-μ
-ů
-λ
-ν
-ṭ
-ạ
-ļ
-ḥ
-∆
-ľ
-ầ
-ṇ
-ộ
-ǃ
-ε
-ј
-ə
-±
-ل
-ا
-г
-↔
-ǔ
-ồ
-ề
-χ
-ờ
-ǹ
-ρ
-е
-а
-≥
-′
-®
-ũ
-ṯ
-ď
-τ
-ʉ
-ο
-ċ
-і
-ψ
-ử
-ي
-φ
-ن
-ደ
-̱
-ị
-星
-р
-ǎ
-の
-ひ
-ổ
-ӌ
-ቀ
-ű
-к
-牡
-丹
-ŵ
-ҫ
-ậ
-я
-ḍ
-ṅ
-ķ
-ǫ
-ŭ
-ế
-ɨ
-ủ
-ǀ
-и
-з
-м
-н
-め
-や
-џ
-ц
-ч
-∞
-ẵ
-ⱎ
-ⱅ
-ứ
-§
-⋅
-ĺ
-☉
-宇
-津
-保
-⊨
-υ
-п
-ι
-ό
-ς
-西
-甌
-ከ
-厳
-三
-̐
-い
-ố
-م
-ة
-ب
-ر
-و
-د
-ħ
-∅
-ẓ
-∼
-θ
-む
-も
-ጀ
-̠
-ζ
-գ
-北
-京
-美
-术
-馆
-た
-つ
-ợ
-文
-へ
-ま
-ġ
-η
-ʽ
-э
-ớ
-ắ
-ụ
-ỳ
-杜
-乃
-扬
-ų
-∈
-զ
-青
-貴
-う
-ゔ
-ꝑ
-₽
-ወ
-‐
-∨
-̲
-ɑ

mms-1b-all/ful/lexicon.txt

@@ -1 +0,0 @@
-/large_experiments/mms/data/scratch/cc200xl//processed/ful/lexicon_fleurs_limit250k_fixed.txt