Training in progress, step 9000

pytorch_model.bin

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:ca00bb5c4d1a7b7121b3c1deab69fc35e14d4bf3d206cdabbf56c18628f0527a
+oid sha256:7c65eeb6c9987c3667e716df5bd99d1f37ec399638a51bc58260494d79f8df9a
 size 1262817457

wandb/run-20220129_215451-1vipdbow/files/output.log

@@ -10078,3 +10078,597 @@ Deleting older checkpoint [checkpoint-7000] due to args.save_total_limit
 Configuration saved in ./checkpoint-8500/config.json
 Model weights saved in ./checkpoint-8500/pytorch_model.bin
 Configuration saved in ./checkpoint-8500/preprocessor_config.json
+Configuration saved in ./preprocessor_config.json
+Deleting older checkpoint [checkpoint-7500] due to args.save_total_limit
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+ 62%|█████████████████████████████████████████████████████████████████████████████████████████████████                                                           | 8599/13822 [9:18:38<3:27:42,  2.39s/it]
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+ 63%|██████████████████████████████████████████████████████████████████████████████████████████████████▏                                                         | 8699/13822 [9:23:47<3:28:13,  2.44s/it]
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+ 64%|███████████████████████████████████████████████████████████████████████████████████████████████████▎                                                        | 8799/13822 [9:29:00<3:25:24,  2.45s/it]
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+ 64%|████████████████████████████████████████████████████████████████████████████████████████████████████▍                                                       | 8899/13822 [9:34:14<3:23:26,  2.48s/it]
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+ 65%|█████████████████████████████████████████████████████████████████████████████████████████████████████▌                                                      | 9000/13822 [9:39:28<3:16:28,  2.44s/it]The following columns in the evaluation set  don't have a corresponding argument in `Wav2Vec2ForCTC.forward` and have been ignored: input_length.
+***** Running Evaluation *****
+  Num examples = 5792
+  Batch size = 64
+{'loss': 0.9815, 'learning_rate': 3.922252881025807e-05, 'epoch': 1.3}
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+100%|█████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 91/91 [04:08<00:00,  2.35s/it]
+
+Configuration saved in ./checkpoint-9000/config.json
+Model weights saved in ./checkpoint-9000/pytorch_model.bin
+Configuration saved in ./checkpoint-9000/preprocessor_config.json

wandb/run-20220129_215451-1vipdbow/run-1vipdbow.wandb

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:843f5466c5ee268210ffb8ecd88bf908e30734d58ac7ed215a27b61327f973ca
-size 61553459
+oid sha256:8af167633f0ef10779890f3ae768b04aecb64ca6164efc4c6818f81f2cdb93fc
+size 65555282