Plim commited on
Commit
09da605
·
1 Parent(s): 2513a44

Training in progress, step 15500

Browse files
.ipynb_checkpoints/eval-checkpoint.py CHANGED
@@ -68,7 +68,7 @@ def main(args):
68
  dataset = load_dataset(args.dataset, args.config, split=args.split, use_auth_token=True)
69
 
70
  # for testing: only process the first two examples as a test
71
- # dataset = dataset.select(range(10))
72
 
73
  # load processor
74
  feature_extractor = AutoFeatureExtractor.from_pretrained(args.model_id)
 
68
  dataset = load_dataset(args.dataset, args.config, split=args.split, use_auth_token=True)
69
 
70
  # for testing: only process the first two examples as a test
71
+ dataset = dataset.select(range(10))
72
 
73
  # load processor
74
  feature_extractor = AutoFeatureExtractor.from_pretrained(args.model_id)
.ipynb_checkpoints/log_mozilla-foundation_common_voice_7_0_fr_test_predictions-checkpoint.txt ADDED
@@ -0,0 +1,20 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ 0
2
+ <s>un <s>v<s>rai<s> tra<s>vai<s>l in<s>té<s>re<s>s<s>s<s>an<s>t<s> <s>v<s>a<s> <s>en<s>f<s>int ê<s>tr<s>e <s>me<s>n<s>e<s> sur ce<s> <s>s<s>u<s>j<s>e<s>t<s>
3
+ 1
4
+ <s>u<s>n<s>e<s> <s>ré<s>for<s>me pr<s>o<s>f<s>onde est né<s>ce<s>s<s>sai<s>r<s>e<s>t<s>a<s>r<s>e<s>
5
+ 2
6
+ <s>pa<s>s<s> <s>s<s>i<s> n<s>om<s>breuses qu<s>e<s> ç<s>a<s>
7
+ 3
8
+ <s>u<s>n<s> <s>c<s>o<s>m<s>i<s>t<s>é<s> <s>i<s>n<s>t<s>e<s>r<s>mi<s>n<s>i<s>s<s>t<s>é<s>r<s>i<s>a<s>l<s> <s>d<s>u<s> <s>h<s>a<s>n<s>di<s>c<s>o<s>p<s> <s>s<s>es<s>t<s> <s>t<s>é<s>n<s>u<s> <s>i<s> <s>y<s> <s>a<s> qu<s>e<s>l<s>qu<s>e<s>s<s> <s>s<s>m<s>ai<s>n<s>e<s>s<s>
9
+ 4
10
+ <s>l<s>a<s> <s>p<s>a<s>r<s>o<s>l<s>e<s> <s>est<s> <s>à<s> <s>m<s>on<s>s<s>i<s>eu<s>r<s> <s>l<s>a<s>l<s>i<s>n<s> <s>r<s>a<s>m<s>an<s>d<s>i<s>è<s>r<s> <s>p<s>ou<s>r<s> <s>s<s>ou<s>t<s>e<s>n<s>i<s>r<s> <s>l<s>a<s>m<s>e<s>n<s>d<s>e<s>m<s>en<s>t<s> <s>n<s>u<s>m<s>é<s>r<s>o<s> <s>c<s>in<s>t<s> <s>v<s>ing<s>t<s>hui<s>t<s>
11
+ 5
12
+ <s>c<s>es<s>t<s> <s>en<s>t<s>ou<s>t<s>c<s>a<s>j<s>u<s>p<s>i<s>t<s>e<s>r<s>i<s>a<s>
13
+ 6
14
+ <s>a<s> <s>v<s>oi<s>s<s>
15
+ 7
16
+ <s>j<s>ai<s> d<s>onc<s> le<s>x<s>p<s>é<s>ri<s>en<s>ce des a<s>n<s>nées p<s>a<s>s<s>s<s>é<s> j<s>en<s> <s>d<s>i<s>r<s>ai<s> un mo<s>t<s> t<s>ou<s>t<s> à<s> <s>lh<s>eu<s>r<s>
17
+ 8
18
+ <s>d<s>ou<s>z<s>e<s> <s>m<s>i<s>n<s>u<s>t<s>es<s> <s>t<s>r<s>en<s>t<s>e<s>
19
+ 9
20
+ <s>c<s>est u<s>ne <s>é<s>vi<s>d<s>en<s>c<s>e<s>
.ipynb_checkpoints/log_mozilla-foundation_common_voice_7_0_fr_test_targets-checkpoint.txt ADDED
@@ -0,0 +1,20 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ 0
2
+ un vrai travail intéressant va enfin être mené sur ce sujet
3
+ 1
4
+ une réforme profonde est nécessaire
5
+ 2
6
+ pas si nombreuses que ça
7
+ 3
8
+ un comité interministériel du handicap sest tenu il y a quelques semaines
9
+ 4
10
+ la parole est à monsieur alain ramadier pour soutenir lamendement numéro cent vingthuit
11
+ 5
12
+ cest en tout cas jupitérien
13
+ 6
14
+ aux voix
15
+ 7
16
+ jai donc lexpérience des années passées jen dirai un mot tout à lheure
17
+ 8
18
+ douze minutes trente
19
+ 9
20
+ cest une évidence
.ipynb_checkpoints/mozilla-foundation_common_voice_7_0_fr_test_eval_results-checkpoint.txt ADDED
@@ -0,0 +1,2 @@
 
 
 
1
+ WER: 0.9444444444444444
2
+ CER: 2.1333333333333333
eval.py CHANGED
@@ -68,7 +68,7 @@ def main(args):
68
  dataset = load_dataset(args.dataset, args.config, split=args.split, use_auth_token=True)
69
 
70
  # for testing: only process the first two examples as a test
71
- # dataset = dataset.select(range(10))
72
 
73
  # load processor
74
  feature_extractor = AutoFeatureExtractor.from_pretrained(args.model_id)
 
68
  dataset = load_dataset(args.dataset, args.config, split=args.split, use_auth_token=True)
69
 
70
  # for testing: only process the first two examples as a test
71
+ dataset = dataset.select(range(10))
72
 
73
  # load processor
74
  feature_extractor = AutoFeatureExtractor.from_pretrained(args.model_id)
log_mozilla-foundation_common_voice_7_0_fr_test_predictions.txt ADDED
@@ -0,0 +1,20 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ 0
2
+ <s>un <s>v<s>rai<s> tra<s>vai<s>l in<s>té<s>re<s>s<s>s<s>an<s>t<s> <s>v<s>a<s> <s>en<s>f<s>int ê<s>tr<s>e <s>me<s>n<s>e<s> sur ce<s> <s>s<s>u<s>j<s>e<s>t<s>
3
+ 1
4
+ <s>u<s>n<s>e<s> <s>ré<s>for<s>me pr<s>o<s>f<s>onde est né<s>ce<s>s<s>sai<s>r<s>e<s>t<s>a<s>r<s>e<s>
5
+ 2
6
+ <s>pa<s>s<s> <s>s<s>i<s> n<s>om<s>breuses qu<s>e<s> ç<s>a<s>
7
+ 3
8
+ <s>u<s>n<s> <s>c<s>o<s>m<s>i<s>t<s>é<s> <s>i<s>n<s>t<s>e<s>r<s>mi<s>n<s>i<s>s<s>t<s>é<s>r<s>i<s>a<s>l<s> <s>d<s>u<s> <s>h<s>a<s>n<s>di<s>c<s>o<s>p<s> <s>s<s>es<s>t<s> <s>t<s>é<s>n<s>u<s> <s>i<s> <s>y<s> <s>a<s> qu<s>e<s>l<s>qu<s>e<s>s<s> <s>s<s>m<s>ai<s>n<s>e<s>s<s>
9
+ 4
10
+ <s>l<s>a<s> <s>p<s>a<s>r<s>o<s>l<s>e<s> <s>est<s> <s>à<s> <s>m<s>on<s>s<s>i<s>eu<s>r<s> <s>l<s>a<s>l<s>i<s>n<s> <s>r<s>a<s>m<s>an<s>d<s>i<s>è<s>r<s> <s>p<s>ou<s>r<s> <s>s<s>ou<s>t<s>e<s>n<s>i<s>r<s> <s>l<s>a<s>m<s>e<s>n<s>d<s>e<s>m<s>en<s>t<s> <s>n<s>u<s>m<s>é<s>r<s>o<s> <s>c<s>in<s>t<s> <s>v<s>ing<s>t<s>hui<s>t<s>
11
+ 5
12
+ <s>c<s>es<s>t<s> <s>en<s>t<s>ou<s>t<s>c<s>a<s>j<s>u<s>p<s>i<s>t<s>e<s>r<s>i<s>a<s>
13
+ 6
14
+ <s>a<s> <s>v<s>oi<s>s<s>
15
+ 7
16
+ <s>j<s>ai<s> d<s>onc<s> le<s>x<s>p<s>é<s>ri<s>en<s>ce des a<s>n<s>nées p<s>a<s>s<s>s<s>é<s> j<s>en<s> <s>d<s>i<s>r<s>ai<s> un mo<s>t<s> t<s>ou<s>t<s> à<s> <s>lh<s>eu<s>r<s>
17
+ 8
18
+ <s>d<s>ou<s>z<s>e<s> <s>m<s>i<s>n<s>u<s>t<s>es<s> <s>t<s>r<s>en<s>t<s>e<s>
19
+ 9
20
+ <s>c<s>est u<s>ne <s>é<s>vi<s>d<s>en<s>c<s>e<s>
log_mozilla-foundation_common_voice_7_0_fr_test_targets.txt ADDED
@@ -0,0 +1,20 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ 0
2
+ un vrai travail intéressant va enfin être mené sur ce sujet
3
+ 1
4
+ une réforme profonde est nécessaire
5
+ 2
6
+ pas si nombreuses que ça
7
+ 3
8
+ un comité interministériel du handicap sest tenu il y a quelques semaines
9
+ 4
10
+ la parole est à monsieur alain ramadier pour soutenir lamendement numéro cent vingthuit
11
+ 5
12
+ cest en tout cas jupitérien
13
+ 6
14
+ aux voix
15
+ 7
16
+ jai donc lexpérience des années passées jen dirai un mot tout à lheure
17
+ 8
18
+ douze minutes trente
19
+ 9
20
+ cest une évidence
mozilla-foundation_common_voice_7_0_fr_test_eval_results.txt ADDED
@@ -0,0 +1,2 @@
 
 
 
1
+ WER: 0.9444444444444444
2
+ CER: 2.1333333333333333
pytorch_model.bin CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:7b4db9f527af267983dfc5fa7ca1739e130316851ff6ad76d24facd8d70199a4
3
  size 1263231601
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:4c3ac64bd4f5320d0e0631b4cd16a1e393eec92d067186ff9fce4e09c6a862e8
3
  size 1263231601