diff --git "a/wandb/run-20220129_215451-1vipdbow/files/output.log" "b/wandb/run-20220129_215451-1vipdbow/files/output.log" new file mode 100644--- /dev/null +++ "b/wandb/run-20220129_215451-1vipdbow/files/output.log" @@ -0,0 +1,16458 @@ + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 1%|█▏ | 99/13822 [05:17<6:46:15, 1.78s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 1%|██▎ | 199/13822 [10:32<6:44:55, 1.78s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 2%|███▍ | 299/13822 [15:49<6:37:40, 1.76s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 3%|████▌ | 398/13822 [21:04<6:56:54, 1.86s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 4%|█████▋ | 498/13822 [26:17<6:57:46, 1.88s/it] + 4%|█████▊ | 500/13822 [26:21<6:22:44, 1.72s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-500/config.json +{'eval_loss': 3.878422975540161, 'eval_wer': 1.0, 'eval_runtime': 285.8223, 'eval_samples_per_second': 20.264, 'eval_steps_per_second': 0.318, 'epoch': 0.07} +Model weights saved in ./checkpoint-500/pytorch_model.bin +Configuration saved in ./checkpoint-500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-7500] due to args.save_total_limit +Deleting older checkpoint [checkpoint-8000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 4%|██████▉ | 599/13822 [37:50<6:34:02, 1.79s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 5%|████████ | 700/13822 [43:10<6:08:25, 1.68s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 6%|█████████▏ | 799/13822 [48:26<6:30:17, 1.80s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 7%|██████████▎ | 900/13822 [53:43<6:11:25, 1.72s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 7%|███████████�� | 1000/13822 [58:59<6:02:01, 1.69s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 2.8068, 'learning_rate': 6.646666666666667e-05, 'epoch': 0.14} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:08<00:00, 2.37s/it] + +Configuration saved in ./checkpoint-1000/config.json +Model weights saved in ./checkpoint-1000/pytorch_model.bin +Configuration saved in ./checkpoint-1000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-8500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 8%|████████████▍ | 1100/13822 [1:10:34<5:40:16, 1.60s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 9%|█████████████▌ | 1200/13822 [1:15:49<6:00:01, 1.71s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 9%|██████████████▋ | 1298/13822 [1:21:01<6:27:51, 1.86s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 10%|███████████████▊ | 1400/13822 [1:26:17<5:50:58, 1.70s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 11%|████████████████▉ | 1500/13822 [1:31:31<5:39:21, 1.65s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.6698, 'learning_rate': 9.973333333333334e-05, 'epoch': 0.22} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-1500/config.json +{'eval_loss': 0.881136417388916, 'eval_wer': 0.7127472384241911, 'eval_runtime': 297.1806, 'eval_samples_per_second': 19.49, 'eval_steps_per_second': 0.306, 'epoch': 0.22} +Model weights saved in ./checkpoint-1500/pytorch_model.bin +Configuration saved in ./checkpoint-1500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 12%|██████████████████ | 1599/13822 [1:43:15<5:47:32, 1.71s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 12%|███████████████████▏ | 1698/13822 [1:48:29<6:15:51, 1.86s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 13%|████████████████████▎ | 1800/13822 [1:53:46<5:31:16, 1.65s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 14%|█████████████████████▍ | 1900/13822 [1:59:00<5:35:53, 1.69s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 14%|██████████████████████▌ | 2000/13822 [2:04:15<5:37:37, 1.71s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.3488, 'learning_rate': 9.597467943515663e-05, 'epoch': 0.29} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:08<00:00, 2.39s/it] + +Configuration saved in ./checkpoint-2000/config.json +Model weights saved in ./checkpoint-2000/pytorch_model.bin +Configuration saved in ./checkpoint-2000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +01/30/2022 00:05:21 - WARNING - huggingface_hub.repository - Adding files tracked by Git LFS: ['wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb']. This may take a bit of time if the files are large. +Adding files tracked by Git LFS: ['wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb']. This may take a bit of time if the files are large. +Deleting older checkpoint [checkpoint-1000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 15%|███████████████████████▋ | 2100/13822 [2:16:00<5:27:34, 1.68s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 16%|████████████████████████▊ | 2199/13822 [2:21:12<5:35:28, 1.73s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 17%|█████████████████████████▉ | 2299/13822 [2:26:26<5:41:41, 1.78s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 17%|███████████████████████████ | 2399/13822 [2:31:36<5:22:30, 1.69s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 18%|████████████████████████████▏ | 2500/13822 [2:36:53<5:17:40, 1.68s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.2239, 'learning_rate': 9.191689660769356e-05, 'epoch': 0.36} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:08<00:00, 2.38s/it] + +Configuration saved in ./checkpoint-2500/config.json +Model weights saved in ./checkpoint-2500/pytorch_model.bin +Configuration saved in ./checkpoint-2500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-1500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 19%|█████████████████████████████▎ | 2599/13822 [2:48:35<5:31:40, 1.77s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 20%|██████████████████████████████▍ | 2699/13822 [2:53:45<5:24:42, 1.75s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 20%|███████████████████████████████▌ | 2799/13822 [2:59:01<5:20:18, 1.74s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 21%|████████████████████████████████▋ | 2900/13822 [3:04:16<5:03:32, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 22%|█████████████████████████████████▊ | 2999/13822 [3:09:26<5:11:49, 1.73s/it] + 22%|█████████████████████████████████▊ | 3000/13822 [3:09:27<4:59:15, 1.66s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:08<00:00, 2.35s/it] +Configuration saved in ./checkpoint-3000/config.json +Model weights saved in ./checkpoint-3000/pytorch_model.bin +Configuration saved in ./checkpoint-3000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-2000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 22%|██████████████████████████████████▉ | 3098/13822 [3:21:07<5:35:37, 1.88s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 23%|████████████████████████████████████ | 3200/13822 [3:26:20<4:54:09, 1.66s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 24%|█████████████████████████████████████▏ | 3300/13822 [3:31:32<4:52:01, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 25%|██████████████████████████████████████▎ | 3399/13822 [3:36:45<5:03:33, 1.75s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 25%|███████████████████████████████████████▌ | 3500/13822 [3:42:02<4:51:28, 1.69s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.1184, 'learning_rate': 8.380944651842234e-05, 'epoch': 0.51} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-3500/config.json +{'eval_loss': 0.333638072013855, 'eval_wer': 0.42922545537489004, 'eval_runtime': 297.0402, 'eval_samples_per_second': 19.499, 'eval_steps_per_second': 0.306, 'epoch': 0.51} +Model weights saved in ./checkpoint-3500/pytorch_model.bin +Configuration saved in ./checkpoint-3500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-2500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 26%|████████████████████████████████████████▋ | 3600/13822 [3:53:42<4:45:51, 1.68s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 27%|█████████████████████████████████████████▋ | 3699/13822 [3:58:53<4:48:54, 1.71s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 27%|██████████████████████████████████████████▉ | 3799/13822 [4:04:04<4:48:05, 1.72s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 28%|████████████████████████████████████████████ | 3899/13822 [4:09:16<4:48:23, 1.74s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 29%|█████████████████████████████████████████████▏ | 4000/13822 [4:14:32<4:22:56, 1.61s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.0968, 'learning_rate': 7.975166369095926e-05, 'epoch': 0.58} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-4000/config.json +{'eval_loss': 0.31949570775032043, 'eval_wer': 0.4180162273127179, 'eval_runtime': 296.0172, 'eval_samples_per_second': 19.566, 'eval_steps_per_second': 0.307, 'epoch': 0.58} +Model weights saved in ./checkpoint-4000/pytorch_model.bin +Configuration saved in ./checkpoint-4000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-3000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 30%|██████████████████████████████████████████████▎ | 4100/13822 [4:26:11<4:30:24, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 30%|███████████████████████████████████████████████▍ | 4200/13822 [4:31:23<4:27:40, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 31%|████████████████████████████████████████████████▌ | 4300/13822 [4:36:35<4:20:18, 1.64s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 32%|█████████████████████████████████████████████████▋ | 4399/13822 [4:41:47<4:27:43, 1.70s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 33%|██████████████████████████████████████████████████▊ | 4499/13822 [4:46:59<4:32:21, 1.75s/it] + 33%|██████████████████████████████████████████████████▊ | 4500/13822 [4:47:01<4:21:18, 1.68s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-4500/config.json +{'eval_loss': 0.30754634737968445, 'eval_wer': 0.41408973899442797, 'eval_runtime': 296.2378, 'eval_samples_per_second': 19.552, 'eval_steps_per_second': 0.307, 'epoch': 0.65} +Model weights saved in ./checkpoint-4500/pytorch_model.bin +Configuration saved in ./checkpoint-4500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-3500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 33%|███████████████████████████████████████████████████▉ | 4600/13822 [4:58:39<4:09:13, 1.62s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 34%|█████████████████████████████████████████████████████ | 4699/13822 [5:03:50<4:20:56, 1.72s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 35%|██████████████████████████████████████████████████████▏ | 4799/13822 [5:09:04<4:15:11, 1.70s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 35%|███████████████████████████████████████████████████████▎ | 4900/13822 [5:14:21<4:07:48, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 36%|████████████████████████████████████████████████████████▍ | 4998/13822 [5:19:31<4:25:34, 1.81s/it] + 36%|████████████████████████████████████████████████████████▍ | 5000/13822 [5:19:34<4:00:23, 1.63s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:07<00:00, 2.35s/it] + +Configuration saved in ./checkpoint-5000/config.json +Model weights saved in ./checkpoint-5000/pytorch_model.bin +Configuration saved in ./checkpoint-5000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-4000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 37%|█████████████████████████████████████████████████████████▌ | 5099/13822 [5:31:14<4:10:18, 1.72s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 38%|██████████████████████████████████████████████████████████▋ | 5199/13822 [5:36:24<4:05:50, 1.71s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 38%|███████████████████████████████████████████████████████████▊ | 5300/13822 [5:41:36<3:57:51, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 39%|████████████████████████████████████████████████████████████▉ | 5399/13822 [5:46:47<3:56:18, 1.68s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 40%|██████████████████████████████████████████████████████████████ | 5499/13822 [5:52:01<3:56:18, 1.70s/it] + 40%|██████████████████████████████████████████████████████████████ | 5500/13822 [5:52:03<3:38:15, 1.57s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-5500/config.json +{'eval_loss': 0.297052800655365, 'eval_wer': 0.4077193782788621, 'eval_runtime': 296.1592, 'eval_samples_per_second': 19.557, 'eval_steps_per_second': 0.307, 'epoch': 0.8} +Model weights saved in ./checkpoint-5500/pytorch_model.bin +Configuration saved in ./checkpoint-5500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-4500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 41%|███████████████████████████████████████████████████████████████▏ | 5599/13822 [6:03:35<3:48:15, 1.67s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 41%|████████████████████████████████████████████████████████████████▎ | 5700/13822 [6:08:46<3:41:59, 1.64s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 42%|█████████████████████████████████████████████████████████████████▍ | 5799/13822 [6:13:56<3:51:09, 1.73s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 43%|██████████████████████████████████████████████████████████████████▌ | 5900/13822 [6:19:06<3:35:50, 1.63s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 43%|███████████████████████████████████████████████████████████████████▋ | 5999/13822 [6:24:17<3:50:57, 1.77s/it] + 43%|███████████████████████████████████████████████████████████████████▋ | 6000/13822 [6:24:19<3:41:40, 1.70s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:05<00:00, 2.36s/it] + +Configuration saved in ./checkpoint-6000/config.json +Model weights saved in ./checkpoint-6000/pytorch_model.bin +Configuration saved in ./checkpoint-6000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-5000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 44%|████████████████████████████████████████████████████████████████████▊ | 6100/13822 [6:35:59<3:28:55, 1.62s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 45%|█████████████████████████████████████████████████████████████████████▉ | 6199/13822 [6:41:07<3:34:39, 1.69s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 46%|███████████████████████████████████████████████████████████████████████ | 6298/13822 [6:46:18<3:50:00, 1.83s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 46%|████████████████████████████████████████████████████████████████████████▏ | 6400/13822 [6:51:32<3:24:23, 1.65s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 47%|█████████████████████████████████████████████████████████████████████████▎ | 6500/13822 [6:56:45<3:21:40, 1.65s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.0178, 'learning_rate': 5.948709625060867e-05, 'epoch': 0.94} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:07<00:00, 2.34s/it] +Configuration saved in ./checkpoint-6500/config.json +Model weights saved in ./checkpoint-6500/pytorch_model.bin +Configuration saved in ./checkpoint-6500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-5500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 48%|██████████████████████████████████████████████████████████████████████████▍ | 6600/13822 [7:08:24<3:23:22, 1.69s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 48%|███████████████████████████████████████████████████████████████████████████▌ | 6699/13822 [7:13:31<3:20:28, 1.69s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 49%|████████████████████████████████████████████████████████████████████████████▋ | 6799/13822 [7:18:42<3:22:35, 1.73s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 50%|█████████████████████████████████████████████████████████████████████████████▊ | 6899/13822 [7:23:55<3:16:40, 1.70s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 51%|██████████████████████████████████████████████████████████████████████████████▉ | 6999/13822 [7:29:19<4:36:49, 2.43s/it] + 51%|███████████████████████████████████████████████████████████████████████████████ | 7000/13822 [7:29:22<4:41:40, 2.48s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:07<00:00, 2.34s/it] + +Configuration saved in ./checkpoint-7000/config.json +Model weights saved in ./checkpoint-7000/pytorch_model.bin +Configuration saved in ./checkpoint-7000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-6000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 51%|████████████████████████████████████████████████████████████████████████████████ | 7099/13822 [7:40:59<4:30:47, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 52%|█████████████████████████████████████████████████████████████████████████████████▎ | 7199/13822 [7:46:10<4:28:13, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 53%|██████████████████████████████████████████████████████████████████████████████████▍ | 7299/13822 [7:51:23<4:30:13, 2.49s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 54%|███████████████████████████████████████████████████████████████████████████████████▌ | 7399/13822 [7:56:34<4:16:56, 2.40s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 54%|████████████████████████████████████████████████████████████████████████████████████▋ | 7500/13822 [8:01:49<4:23:39, 2.50s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 1.0197, 'learning_rate': 5.137153059568252e-05, 'epoch': 1.09} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:07<00:00, 2.36s/it] + +Configuration saved in ./checkpoint-7500/config.json +Model weights saved in ./checkpoint-7500/pytorch_model.bin +Configuration saved in ./checkpoint-7500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-6500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 55%|████████████████████████████████████���████████████████████████████████████████████████▊ | 7599/13822 [8:13:27<4:11:44, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 56%|██████████████████████████████████████████████████████████████████████████████████████▉ | 7699/13822 [8:18:40<4:06:50, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 56%|████████████████████████████████████████████████████████████████████████████████████████ | 7800/13822 [8:23:55<4:13:21, 2.52s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 57%|█████████████████████████████████████████████████████████████████████████████████████████▏ | 7899/13822 [8:29:05<4:01:42, 2.45s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 58%|██████████████████████████████████████████████████████████████████████████████████████████▎ | 7999/13822 [8:34:17<3:55:02, 2.42s/it] + 58%|██████████████████████████████████████████████████████████████████████████████████████████▎ | 8000/13822 [8:34:19<3:56:14, 2.43s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-8000/config.json +{'eval_loss': 0.26817116141319275, 'eval_wer': 0.3888526833718922, 'eval_runtime': 298.1504, 'eval_samples_per_second': 19.426, 'eval_steps_per_second': 0.305, 'epoch': 1.16} +Model weights saved in ./checkpoint-8000/pytorch_model.bin +Configuration saved in ./checkpoint-8000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-7000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 59%|███████████████████████████████████████████████████████████████████████████████████████████▍ | 8099/13822 [8:45:59<3:54:22, 2.46s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 59%|████████████████████████████████████████████████████████████████████████████████████████████▌ | 8200/13822 [8:51:16<3:49:04, 2.44s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 60%|█████████████████████████████████████████████████████████████████████████████████████████████▋ | 8299/13822 [8:56:28<3:51:37, 2.52s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 61%|██████████████████████████████████████████████████████████████████████████████████████████████▊ | 8400/13822 [9:01:44<3:42:31, 2.46s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 61%|███████████████████████████████████████████████████████████████████████████████████████████████▉ | 8499/13822 [9:06:55<3:35:32, 2.43s/it] + 61%|███████████████████████████████████████████████████████████████████████████████████████████████▉ | 8500/13822 [9:06:57<3:37:53, 2.46s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:07<00:00, 2.38s/it] + +Configuration saved in ./checkpoint-8500/config.json +Model weights saved in ./checkpoint-8500/pytorch_model.bin +Configuration saved in ./checkpoint-8500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-7500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 62%|█████████████████████████████████████████████████████████████████████████████████████████████████ | 8599/13822 [9:18:38<3:27:42, 2.39s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 63%|██████████████████████████████████████████████████████████████████████████████████████████████████▏ | 8699/13822 [9:23:47<3:28:13, 2.44s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 64%|███████████████████████████████████████████████████████████████████████████████████████████████████▎ | 8799/13822 [9:29:00<3:25:24, 2.45s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 64%|████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 8899/13822 [9:34:14<3:23:26, 2.48s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 65%|█████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 9000/13822 [9:39:28<3:16:28, 2.44s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 0.9815, 'learning_rate': 3.922252881025807e-05, 'epoch': 1.3} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:08<00:00, 2.35s/it] + +Configuration saved in ./checkpoint-9000/config.json +Model weights saved in ./checkpoint-9000/pytorch_model.bin +Configuration saved in ./checkpoint-9000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-8000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 66%|██████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 9100/13822 [9:51:10<3:16:03, 2.49s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 67%|███████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 9199/13822 [9:56:22<3:09:12, 2.46s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 67%|████████████████████████████████████████████████████████████████████████████████████████████████████████▎ | 9300/13822 [10:01:38<3:04:35, 2.45s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 68%|█████████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 9400/13822 [10:06:51<3:04:03, 2.50s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 69%|████��█████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 9500/13822 [10:12:05<2:57:09, 2.46s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 0.9717, 'learning_rate': 3.5164745982795e-05, 'epoch': 1.37} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:07<00:00, 2.39s/it] + +Configuration saved in ./checkpoint-9500/config.json +Model weights saved in ./checkpoint-9500/pytorch_model.bin +Configuration saved in ./checkpoint-9500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-8500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 69%|███████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 9600/13822 [10:23:49<2:56:47, 2.51s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 70%|████████████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 9699/13822 [10:28:59<2:45:31, 2.41s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 71%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 9800/13822 [10:34:13<2:50:28, 2.54s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 72%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 9899/13822 [10:39:23<2:38:17, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 72%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████▏ | 9999/13822 [10:44:36<2:35:48, 2.45s/it] + 72%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 10000/13822 [10:44:39<2:37:02, 2.47s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-10000/config.json +{'eval_loss': 0.25231894850730896, 'eval_wer': 0.3782951546156603, 'eval_runtime': 297.5796, 'eval_samples_per_second': 19.464, 'eval_steps_per_second': 0.306, 'epoch': 1.45} +Model weights saved in ./checkpoint-10000/pytorch_model.bin +Configuration saved in ./checkpoint-10000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-9000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 73%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 10099/13822 [10:56:18<2:33:58, 2.48s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 74%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 10200/13822 [11:01:36<2:30:06, 2.49s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 75%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 10300/13822 [11:06:48<2:23:49, 2.45s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 75%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 10400/13822 [11:11:58<2:21:55, 2.49s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 76%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 10499/13822 [11:17:07<2:13:00, 2.40s/it] + 76%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 10500/13822 [11:17:09<2:15:11, 2.44s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████��███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:09<00:00, 2.38s/it] + +Configuration saved in ./checkpoint-10500/config.json +Model weights saved in ./checkpoint-10500/pytorch_model.bin +Configuration saved in ./checkpoint-10500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-9500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 77%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 10599/13822 [11:28:55<2:11:05, 2.44s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 77%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▏ | 10699/13822 [11:34:05<2:05:00, 2.40s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 78%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▎ | 10800/13822 [11:39:22<2:06:07, 2.50s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 79%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 10899/13822 [11:44:30<2:00:08, 2.47s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 80%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 10999/13822 [11:49:43<1:52:40, 2.39s/it] + 80%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 11000/13822 [11:49:45<1:54:04, 2.43s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-11000/config.json +{'eval_loss': 0.24783751368522644, 'eval_wer': 0.3760142070448695, 'eval_runtime': 297.7741, 'eval_samples_per_second': 19.451, 'eval_steps_per_second': 0.306, 'epoch': 1.59} +Model weights saved in ./checkpoint-11000/pytorch_model.bin +Configuration saved in ./checkpoint-11000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-10000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 80%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 11099/13822 [12:01:24<1:50:13, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 81%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 11200/13822 [12:06:38<1:49:03, 2.50s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 82%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 11300/13822 [12:11:49<1:42:14, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 82%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 11399/13822 [12:16:56<1:37:19, 2.41s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 83%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 11499/13822 [12:22:06<1:32:56, 2.40s/it] + 83%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▏ | 11500/13822 [12:22:09<1:34:18, 2.44s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:05<00:00, 2.35s/it] + +Configuration saved in ./checkpoint-11500/config.json +Model weights saved in ./checkpoint-11500/pytorch_model.bin +Configuration saved in ./checkpoint-11500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-10500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 84%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▏ | 11599/13822 [12:33:46<1:29:41, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 85%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▎ | 11700/13822 [12:39:02<1:28:05, 2.49s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 85%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 11799/13822 [12:44:08<1:21:59, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 86%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 11900/13822 [12:49:20<1:17:22, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 87%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 11999/13822 [12:54:28<1:14:36, 2.46s/it] + 87%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 12000/13822 [12:54:31<1:15:02, 2.47s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-12000/config.json +{'eval_loss': 0.24390804767608643, 'eval_wer': 0.37467822346769203, 'eval_runtime': 295.4584, 'eval_samples_per_second': 19.603, 'eval_steps_per_second': 0.308, 'epoch': 1.74} +Model weights saved in ./checkpoint-12000/pytorch_model.bin +Configuration saved in ./checkpoint-12000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-11000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 88%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 12099/13822 [13:06:05<1:09:51, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 88%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 12199/13822 [13:11:16<1:04:15, 2.38s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 89%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 12299/13822 [13:16:27<1:01:27, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 90%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 12399/13822 [13:21:39<57:50, 2.44s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 90%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 12499/13822 [13:26:50<52:55, 2.40s/it] + 90%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 12500/13822 [13:26:53<54:10, 2.46s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:06<00:00, 2.37s/it] + +Configuration saved in ./checkpoint-12500/config.json +Model weights saved in ./checkpoint-12500/pytorch_model.bin +Configuration saved in ./checkpoint-12500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-11500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 91%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▏ | 12599/13822 [13:38:30<49:51, 2.45s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 92%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▎ | 12699/13822 [13:43:42<45:03, 2.41s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 93%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 12800/13822 [13:48:56<41:31, 2.44s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 93%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 12899/13822 [13:54:03<36:38, 2.38s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 94%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 12999/13822 [13:59:16<34:05, 2.49s/it] + 94%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋ | 13000/13822 [13:59:19<34:21, 2.51s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +Configuration saved in ./checkpoint-13000/config.json +{'eval_loss': 0.23965783417224884, 'eval_wer': 0.3697904786731402, 'eval_runtime': 296.6078, 'eval_samples_per_second': 19.527, 'eval_steps_per_second': 0.307, 'epoch': 1.88} +Model weights saved in ./checkpoint-13000/pytorch_model.bin +Configuration saved in ./checkpoint-13000/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-12000] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 95%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▊ | 13099/13822 [14:10:56<29:12, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 95%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▉ | 13200/13822 [14:16:07<25:03, 2.42s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 96%|██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████ | 13299/13822 [14:21:16<21:13, 2.44s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 97%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▏ | 13399/13822 [14:26:30<17:29, 2.48s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 98%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▎ | 13500/13822 [14:31:44<13:14, 2.47s/it]The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 +{'loss': 0.9271, 'learning_rate': 2.71871449440026e-06, 'epoch': 1.95} + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:06<00:00, 2.31s/it] + +Configuration saved in ./checkpoint-13500/config.json +Model weights saved in ./checkpoint-13500/pytorch_model.bin +Configuration saved in ./checkpoint-13500/preprocessor_config.json +Configuration saved in ./preprocessor_config.json +Deleting older checkpoint [checkpoint-12500] due to args.save_total_limit + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 98%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▍ | 13600/13822 [14:43:22<08:59, 2.43s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + 99%|███��██████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▌ | 13699/13822 [14:48:30<04:56, 2.41s/it] + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▋| 13799/13822 [14:53:40<00:55, 2.40s/it] + + + + + + + + + + + + + + + + + + + +100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 13822/13822 [14:54:36<00:00, 1.87s/it] +Training completed. Do not forget to share your model on huggingface.co/models =) +Loading best model from ./checkpoint-13500 (score: 0.23875188827514648). +100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 13822/13822 [14:54:38<00:00, 3.88s/it] +Saving model checkpoint to ./ +Configuration saved in ./config.json +{'train_runtime': 53680.5392, 'train_samples_per_second': 16.478, 'train_steps_per_second': 0.257, 'train_loss': 1.442369053426242, 'epoch': 2.0} +Model weights saved in ./pytorch_model.bin +Configuration saved in ./preprocessor_config.json +Saving model checkpoint to ./ +Configuration saved in ./config.json +Model weights saved in ./pytorch_model.bin +Configuration saved in ./preprocessor_config.json + +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 75%|███████████████████████████████████████████████████████████████████████████████████████████████▊ | 74.6M/99.6M [00:04<00:01, 22.1MB/s]To https://huggingface.co/AlexN/xls-r-300m-fr + 4239b0f..7c40853 main -> main +01/30/2022 12:50:05 - WARNING - huggingface_hub.repository - To https://huggingface.co/AlexN/xls-r-300m-fr + 4239b0f..7c40853 main -> main +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 99.6M/99.6M [00:06<00:00, 17.1MB/s] +Dropping the following result as it does not have all the necessary fields: +{'dataset': {'name': 'common_voice', 'type': 'common_voice', 'args': 'fr'}} + +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 62%|███████████████████████████████████████████████████████████████████████████████▋ | 62.1M/99.6M [00:03<00:01, 24.3MB/s] +01/30/2022 12:50:20 - WARNING - huggingface_hub.repository - To https://huggingface.co/AlexN/xls-r-300m-fr +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 62%|███████████████████████████████████████████████████████████████████████████████▋ | 62.1M/99.6M [00:03<00:01, 24.3MB/s]To https://huggingface.co/AlexN/xls-r-300m-fr + 7c40853..3d60f9c main -> main +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 99.6M/99.6M [00:04<00:00, 25.3MB/s] +***** train metrics ***** + epoch = 2.0 + train_loss = 1.4424 + train_runtime = 14:54:40.53 + train_samples = 442265 + train_samples_per_second = 16.478 + train_steps_per_second = 0.257 +01/30/2022 12:50:22 - INFO - __main__ - *** Evaluate *** +The following columns in the evaluation set don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length. +***** Running Evaluation ***** + Num examples = 5792 + Batch size = 64 + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + + +100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:51<00:00, 3.20s/it] +Saving model checkpoint to ./ +Configuration saved in ./config.json +***** eval metrics ***** + epoch = 2.0 + eval_loss = 0.2388 + eval_runtime = 0:04:54.17 + eval_samples = 5792 + eval_samples_per_second = 19.689 + eval_steps_per_second = 0.309 + eval_wer = 0.3681 +Model weights saved in ./pytorch_model.bin +Configuration saved in ./preprocessor_config.json + +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 69%|███████████████████████████████████████████████████████████████████████████████████████▉ | 68.5M/99.7M [00:03<00:01, 26.6MB/s]To https://huggingface.co/AlexN/xls-r-300m-fr + 3d60f9c..0e9e665 main -> main +Upload file wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb: 100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 99.7M/99.7M [00:04<00:00, 25.5MB/s] +01/30/2022 12:55:48 - WARNING - huggingface_hub.repository - To https://huggingface.co/AlexN/xls-r-300m-fr + 3d60f9c..0e9e665 main -> main +Dropping the following result as it does not have all the necessary fields: