RESPIN commited on
Commit
38d1013
1 Parent(s): 723a514

Upload 3 files

Browse files
espnet_model/data/tokens.txt ADDED
@@ -0,0 +1,239 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ <blank>
2
+ <unk>
3
+ <space>
4
+
5
+
6
+
7
+
8
+ ি
9
+
10
+
11
+
12
+
13
+
14
+
15
+
16
+
17
+
18
+
19
+
20
+
21
+
22
+
23
+
24
+
25
+
26
+
27
+
28
+
29
+
30
+
31
+
32
+
33
+
34
+
35
+
36
+
37
+
38
+
39
+
40
+
41
+
42
+
43
+
44
+
45
+
46
+
47
+
48
+
49
+
50
+
51
+ -
52
+
53
+
54
+
55
+
56
+
57
+
58
+
59
+
60
+
61
+
62
+
63
+
64
+
65
+
66
+
67
+
68
+
69
+
70
+
71
+
72
+
73
+
74
+
75
+
76
+
77
+
78
+
79
+
80
+
81
+
82
+
83
+
84
+
85
+
86
+ £
87
+
88
+
89
+ »
90
+
91
+
92
+
93
+
94
+
95
+ °
96
+ «
97
+
98
+
99
+ ·
100
+
101
+
102
+
103
+
104
+
105
+
106
+ μ
107
+
108
+
109
+
110
+ ©
111
+
112
+
113
+
114
+ ®
115
+
116
+
117
+
118
+ и
119
+ ì
120
+
121
+
122
+ ς
123
+ ι
124
+ ­
125
+
126
+
127
+ ×
128
+ ė
129
+
130
+
131
+
132
+
133
+ ο
134
+ σ
135
+ ि
136
+
137
+
138
+ κ
139
+
140
+
141
+
142
+
143
+ â
144
+ €
145
+
146
+ γ
147
+ ί
148
+ φ
149
+
150
+ ¯
151
+
152
+
153
+ ž
154
+ λ
155
+ ό
156
+ ə
157
+ υ
158
+ α
159
+ ų
160
+
161
+
162
+ ā
163
+ á
164
+
165
+ ¬
166
+
167
+ œ
168
+
169
+
170
+ ö
171
+ Ü
172
+
173
+ ¡
174
+ ı
175
+ ø
176
+ ±
177
+
178
+
179
+
180
+ ē
181
+ ī
182
+
183
+ š
184
+
185
+ ˈ
186
+ ɒ
187
+ τ
188
+ ύ
189
+
190
+ ρ
191
+ ν
192
+ ω
193
+ π
194
+ η
195
+
196
+
197
+ ή
198
+
199
+
200
+
201
+ ð
202
+ Ñ
203
+ Ô
204
+ І
205
+ Ø
206
+
207
+ ˛
208
+ Ú
209
+ ƒ
210
+ ´
211
+
212
+ ك
213
+ ي
214
+ ف
215
+ ک
216
+ ی
217
+ م
218
+
219
+
220
+
221
+ 
222
+ ô
223
+
224
+ ε
225
+ ζ
226
+
227
+
228
+
229
+
230
+
231
+
232
+
233
+
234
+
235
+
236
+
237
+
238
+ “
239
+ <sos/eos>
espnet_model/exp/config.yaml ADDED
@@ -0,0 +1,375 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ config: null
2
+ print_config: false
3
+ log_level: INFO
4
+ drop_last_iter: false
5
+ dry_run: false
6
+ iterator_type: sequence
7
+ valid_iterator_type: null
8
+ output_dir: exp/lm_bn_lm
9
+ ngpu: 1
10
+ seed: 0
11
+ num_workers: 1
12
+ num_att_plot: 3
13
+ dist_backend: nccl
14
+ dist_init_method: env://
15
+ dist_world_size: null
16
+ dist_rank: null
17
+ local_rank: 0
18
+ dist_master_addr: null
19
+ dist_master_port: null
20
+ dist_launcher: null
21
+ multiprocessing_distributed: false
22
+ unused_parameters: false
23
+ sharded_ddp: false
24
+ cudnn_enabled: true
25
+ cudnn_benchmark: false
26
+ cudnn_deterministic: true
27
+ use_tf32: false
28
+ collect_stats: false
29
+ write_collected_feats: false
30
+ max_epoch: 40
31
+ patience: null
32
+ val_scheduler_criterion:
33
+ - valid
34
+ - loss
35
+ early_stopping_criterion:
36
+ - valid
37
+ - loss
38
+ - min
39
+ best_model_criterion:
40
+ - - train
41
+ - loss
42
+ - min
43
+ - - valid
44
+ - loss
45
+ - min
46
+ - - train
47
+ - acc
48
+ - max
49
+ - - valid
50
+ - acc
51
+ - max
52
+ keep_nbest_models:
53
+ - 10
54
+ nbest_averaging_interval: 0
55
+ grad_clip: 5.0
56
+ grad_clip_type: 2.0
57
+ grad_noise: false
58
+ accum_grad: 1
59
+ no_forward_run: false
60
+ resume: true
61
+ train_dtype: float32
62
+ use_amp: false
63
+ log_interval: null
64
+ use_matplotlib: true
65
+ use_tensorboard: true
66
+ create_graph_in_tensorboard: false
67
+ use_wandb: false
68
+ wandb_project: null
69
+ wandb_id: null
70
+ wandb_entity: null
71
+ wandb_name: null
72
+ wandb_model_log_interval: -1
73
+ detect_anomaly: false
74
+ use_adapter: false
75
+ adapter: lora
76
+ save_strategy: all
77
+ adapter_conf: {}
78
+ pretrain_path: null
79
+ init_param: []
80
+ ignore_init_mismatch: false
81
+ freeze_param: []
82
+ num_iters_per_epoch: null
83
+ batch_size: 20
84
+ valid_batch_size: null
85
+ batch_bins: 1000000
86
+ valid_batch_bins: null
87
+ train_shape_file:
88
+ - exp/lm_stats_en_char/train/text_shape.char
89
+ valid_shape_file:
90
+ - exp/lm_stats_en_char/valid/text_shape.char
91
+ batch_type: folded
92
+ valid_batch_type: null
93
+ fold_length:
94
+ - 150
95
+ sort_in_batch: descending
96
+ shuffle_within_batch: false
97
+ sort_batch: descending
98
+ multiple_iterator: false
99
+ chunk_length: 500
100
+ chunk_shift_ratio: 0.5
101
+ num_cache_chunks: 1024
102
+ chunk_excluded_key_prefixes: []
103
+ chunk_default_fs: null
104
+ chunk_max_abs_length: null
105
+ chunk_discard_short_samples: true
106
+ train_data_path_and_name_and_type:
107
+ - - dump/raw_copy/lm_train.txt
108
+ - text
109
+ - text
110
+ valid_data_path_and_name_and_type:
111
+ - - dump/raw_copy/org/valid/text
112
+ - text
113
+ - text
114
+ multi_task_dataset: false
115
+ allow_variable_data_keys: false
116
+ max_cache_size: 0.0
117
+ max_cache_fd: 32
118
+ allow_multi_rates: false
119
+ valid_max_cache_size: null
120
+ exclude_weight_decay: false
121
+ exclude_weight_decay_conf: {}
122
+ optim: adadelta
123
+ optim_conf: {}
124
+ scheduler: null
125
+ scheduler_conf: {}
126
+ token_list:
127
+ - <blank>
128
+ - <unk>
129
+ - <space>
130
+ - া
131
+ - র
132
+ - ে
133
+ - ্
134
+ - ি
135
+ - ন
136
+ - ক
137
+ - ব
138
+ - ল
139
+ - ত
140
+ - স
141
+ - ম
142
+ - য
143
+ - প
144
+ - ু
145
+ - দ
146
+ - ট
147
+ - জ
148
+ - গ
149
+ - ই
150
+ - ।
151
+ - হ
152
+ - এ
153
+ - ো
154
+ - ়
155
+ - শ
156
+ - য়
157
+ - ড
158
+ - চ
159
+ - আ
160
+ - ছ
161
+ - ী
162
+ - অ
163
+ - ধ
164
+ - ষ
165
+ - ভ
166
+ - থ
167
+ - খ
168
+ - ও
169
+ - ং
170
+ - ফ
171
+ - উ
172
+ - ণ
173
+ - ঙ
174
+ - ড়
175
+ - ঘ
176
+ - ৃ
177
+ - '-'
178
+ - ূ
179
+ - ঞ
180
+ - ঁ
181
+ - ৷
182
+ - ঠ
183
+ - ১
184
+ - ’
185
+ - ‘
186
+ - ২
187
+ - ৮
188
+ - ০
189
+ - ৫
190
+ - ৈ
191
+ - ৎ
192
+ - ৭
193
+ - ৌ
194
+ - ৪
195
+ - ৩
196
+ - ঃ
197
+ - ঝ
198
+ - ৬
199
+ - ৯
200
+ - ঢ
201
+ - ”
202
+ - “
203
+ - ‌
204
+ - ঐ
205
+ - ঋ
206
+ - –
207
+ - ঈ
208
+ - ৰ
209
+ - ঊ
210
+ - ঢ়
211
+ - ॥
212
+ - £
213
+ - €
214
+ - ঔ
215
+ - »
216
+ - —
217
+ - ৗ
218
+ - ৱ
219
+ - ​
220
+ - ₹
221
+ - °
222
+ - «
223
+ - …
224
+ - •
225
+ - ★
226
+ - ‍
227
+ - ঩
228
+ - ৻
229
+ - ·
230
+ - े
231
+ - ė
232
+ - ©
233
+ - ं
234
+ - μ
235
+ - ा
236
+ - ब
237
+ - ®
238
+ - ×
239
+ - क
240
+ - ल
241
+ - ⇒
242
+ - ह
243
+ - и
244
+ - द
245
+ - ्
246
+ - प
247
+ - न
248
+ - त
249
+ - ৳
250
+ - →
251
+ - ο
252
+ - ै
253
+ - र
254
+ - व
255
+ - ì
256
+ - ­
257
+ - ‚
258
+ - γ
259
+ - ς
260
+ - ž
261
+ - ν
262
+ - 
263
+ - κ
264
+ - š
265
+ - ट
266
+ - स
267
+ - ए
268
+ - ि
269
+ - α
270
+ - ί
271
+ - ρ
272
+ - ो
273
+ - ų
274
+ - ৄ
275
+ - λ
276
+ - ό
277
+ - ´
278
+ - ज
279
+ - च
280
+ - ु
281
+ - उ
282
+ - ध
283
+ - इ
284
+ - य
285
+ - ι
286
+ - ω
287
+ - ə
288
+ - â
289
+ - "\x80"
290
+ - ā
291
+ - ¦
292
+ - ¬
293
+ - ¯
294
+ - á
295
+ - ৠ
296
+ - ঌ
297
+ - ¡
298
+ - ı
299
+ - ✤
300
+ - ὄ
301
+ - श
302
+ - Ü
303
+ - π
304
+ - σ
305
+ - ਕ
306
+ - ਲ
307
+ - ♥
308
+ - ˈ
309
+ - ɒ
310
+ - "\x9C"
311
+ - ≥
312
+ - ε
313
+ - τ
314
+ - ⇔
315
+ - ẏ
316
+ - □
317
+ - ৡ
318
+ - Ø
319
+ - ∏
320
+ - ˛
321
+ - ø
322
+ - ±
323
+ - Ú
324
+ - ƒ
325
+ - ी
326
+ - І
327
+ - η
328
+ - Ô
329
+ - ک
330
+ - ی
331
+ - م
332
+ - 》
333
+ - "\x9D"
334
+ - ö
335
+ - β
336
+ - ô
337
+ - म
338
+ - अ
339
+ - भ
340
+ - औ
341
+ - ढ
342
+ - ़
343
+ - ῥ
344
+ - υ
345
+ - ζ
346
+ - ą
347
+ - ń
348
+ - №
349
+ - ṇ
350
+ - ḍ
351
+ - ī
352
+ - Π
353
+ - ὶ
354
+ - ῶ
355
+ - ὰ
356
+ - φ
357
+ - ύ
358
+ - ঽ
359
+ - <sos/eos>
360
+ init: null
361
+ use_preprocessor: true
362
+ token_type: char
363
+ bpemodel: null
364
+ non_linguistic_symbols: null
365
+ cleaner: null
366
+ g2p: null
367
+ lm: seq_rnn
368
+ lm_conf: {}
369
+ model: lm
370
+ model_conf: {}
371
+ required:
372
+ - output_dir
373
+ - token_list
374
+ version: '202402'
375
+ distributed: false
espnet_model/exp/valid.loss.best.pth ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:989b0530703309676d001f90bded029c20af9ef84d5aac51db2a5c891f790e70
3
+ size 28296784