End of training

README.md

@@ -1,4 +1,6 @@
 ---
+language:
+- id
 license: apache-2.0
 base_model: LazarusNLP/IndoNanoT5-base
 tags:

all_results.json

@@ -1,29 +1,29 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.6086911559104919,
-    "eval_rouge1": 0.4049,
+    "eval_loss": 0.5916664600372314,
+    "eval_rouge1": 0.3832,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.4028,
-    "eval_rougeLsum": 0.4042,
-    "eval_runtime": 112.5016,
+    "eval_rougeL": 0.3816,
+    "eval_rougeLsum": 0.3824,
+    "eval_runtime": 113.0487,
     "eval_samples": 750,
-    "eval_samples_per_second": 6.667,
-    "eval_steps_per_second": 0.213,
+    "eval_samples_per_second": 6.634,
+    "eval_steps_per_second": 0.212,
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5869672894477844,
-    "predict_rouge1": 0.4417,
+    "predict_loss": 0.5681180357933044,
+    "predict_rouge1": 0.4479,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.4417,
-    "predict_rougeLsum": 0.442,
-    "predict_runtime": 559.1958,
+    "predict_rougeL": 0.4487,
+    "predict_rougeLsum": 0.4479,
+    "predict_runtime": 561.0154,
     "predict_samples": 3752,
-    "predict_samples_per_second": 6.71,
-    "predict_steps_per_second": 0.211,
-    "total_flos": 7.504414428893184e+16,
-    "train_loss": 0.9108390363342559,
-    "train_runtime": 5162.3558,
+    "predict_samples_per_second": 6.688,
+    "predict_steps_per_second": 0.21,
+    "total_flos": 7.534082864399155e+16,
+    "train_loss": 0.8313294962382637,
+    "train_runtime": 5163.645,
     "train_samples": 14272,
-    "train_samples_per_second": 13.823,
-    "train_steps_per_second": 1.728
+    "train_samples_per_second": 13.82,
+    "train_steps_per_second": 1.727
 }

eval_results.json

@@ -1,13 +1,13 @@
 {
     "epoch": 5.0,
     "eval_gen_len": 1.0,
-    "eval_loss": 0.6086911559104919,
-    "eval_rouge1": 0.4049,
+    "eval_loss": 0.5916664600372314,
+    "eval_rouge1": 0.3832,
     "eval_rouge2": 0.0,
-    "eval_rougeL": 0.4028,
-    "eval_rougeLsum": 0.4042,
-    "eval_runtime": 112.5016,
+    "eval_rougeL": 0.3816,
+    "eval_rougeLsum": 0.3824,
+    "eval_runtime": 113.0487,
     "eval_samples": 750,
-    "eval_samples_per_second": 6.667,
-    "eval_steps_per_second": 0.213
+    "eval_samples_per_second": 6.634,
+    "eval_steps_per_second": 0.212
 }

generated_predictions.txt

@@ -4,19 +4,19 @@ ini
 bisa
 bisa
 ada
-saja
-yang
+karena
+0
 t
 judi
 banyak
 akan
-seperti
+/
 ke
 :
 -
-dari
-beberapa
-e
+1
+tersebut
+ada
 )
 a
 2
@@ -29,11 +29,11 @@ untuk
 atau
 banyak
 sangat
-/
-bisa
+saya
+di
 k
 dari
-slot
+kan
 bisa
 anda
 anda
@@ -47,22 +47,22 @@ dalam
 anda
 karena
 
-menggunakan
+game
 0
 .
 dan
 i
-mereka
+hanya
 menjadi
 9
-a
+bagi
 ada
 an
-
+poker
 (
-ada
+dapat
 online
-)
+.
 untuk
 memiliki
 1
@@ -73,34 +73,34 @@ dari
 .
 atau
 .
-?
+a
 kita
-banyak
-:
+situs
+sudah
 harus
 :
 6
 dapat
-k
+5
 ,
-orang
+1
 bisa
 dan
 hal
 nya
 dari
 (
-lain
+kami
 2
 anda
-kita
-pemain
+u
+-
 ini
-dengan
+tidak
 
 6
-atau
-satu
+pada
+sudah
 para
 judi
 bisa
@@ -111,9 +111,9 @@ sangat
 i
 k
 ke
-hal
+bahwa
 dari
-a
+indonesia
 sebagai
 dan
 satu
@@ -123,10 +123,10 @@ memiliki
 
 akan
 nya
-4
+seperti
 2
 kita
-kita
+e
 yang
 di
 :
@@ -149,30 +149,30 @@ ke
 orang
 bisa
 menjadi
-saat
+sangat
 dari
 dalam
 )
-situs
+"
 lain
-tidak
+9
 kan
 di
--
+7
 orang
-t
+oleh
 adalah
 e
-secara
+memiliki
 s
 untuk
 ?
 atau
-lebih
+mereka
 tidak
 1
-cara
-sudah
+uang
+tersebut
 ini
 kita
 hal
@@ -182,52 +182,52 @@ permainan
 saja
 saya
 itu
-dapat
+e
 untuk
 bisa
-menjadi
+tentang
 7
 dapat
-tidak
+0
 
 an
 
-tersebut
+beberapa
 :
-oleh
-2
+orang
+di
 untuk
 dari
 karena
 online
-judi
+saat
 indonesia
 apa
 i
 :
 orang
-,
+
 bisnis
 tidak
-saja
+saat
 3
 jika
 judi
 itu
 s
 
-permainan
+situs
 mudah
 untuk
-t
+u
 yang
 salah
 
--
+sangat
 dan
-satu
+8
 nya
-apa
+2
 6
 slot
 ,
@@ -242,15 +242,15 @@ orang
 2
 menggunakan
 seperti
-beberapa
-3
+a
+menjadi
 saat
 oleh
 sudah
 orang
 tersebut
 dengan
-tahun
+memiliki
 banyak
 bahwa
 
@@ -265,10 +265,10 @@ ke
 ke
 untuk
 ,
-dalam
+pada
 t
 nya
-satu
+banyak
 dalam
 saat
 dapat
@@ -284,9 +284,9 @@ akan
 .
 ,
 dan
-cara
+bahwa
 bisa
-7
+kami
 dapat
 seperti
 e
@@ -305,31 +305,31 @@ tersebut
 2
 nya
 menjadi
-permainan
+hanya
 banyak
 0
 1
 beberapa
 )
-9
-satu
-d
+
+situs
+:
 1
-6
-sangat
-saja
+salah
+4
+4
 ,
-saya
+cara
 )
 
-hal
+8
 permainan
 1
 mereka
 
 cara
 anda
-dari
+dengan
 dari
 harus
 5
@@ -344,12 +344,12 @@ dan
 dengan
 
 -
-nya
+u
 saya
-sangat
-9
+saat
+"
 ,
-akan
+1
 baik
 dan
 menjadi
@@ -360,26 +360,26 @@ dapat
 ada
 situs
 u
-baik
+an
 ada
 ini
 0
 beberapa
-membuat
+4
 s
 ini
-sangat
-5
+?
+sudah
 
 slot
 yang
 anda
-di
+0
 baik
 
 0
 9
-/
+0
 oleh
 9
 ada
@@ -395,8 +395,8 @@ s
 adalah
 adalah
 mereka
-dalam
-poker
+3
+melakukan
 -
 
 anda
@@ -406,11 +406,11 @@ menjadi
 k
 atau
 bisa
-lebih
+dengan
 adalah
-lebih
+juga
 bermain
-:
+judi
 lebih
 memiliki
 cara
@@ -418,14 +418,14 @@ cara
 dapat
 1
 3
-
-.
+kita
+situs
 ,
-p
-)
+apa
 lebih
+atau
 seperti
-.
+besar
 ,
 akan
 9
@@ -436,7 +436,7 @@ situs
 harus
 
 itu
-beberapa
+kamu
 u
 6
 satu
@@ -448,41 +448,41 @@ t
 atau
 akan
 karena
-sudah
-uang
+saya
+game
 oleh
-karena
+banyak
 
 di
 ini
 bisa
-7
+memiliki
 k
 1
 atau
 tidak
-)
+cara
 hal
 e
 memiliki
-membuat
+baik
 akan
-namun
+menjadi
 itu
 anda
 saat
 0
 /
 untuk
-5
-juga
-waktu
+a
+8
+bahwa
 salah
 hal
 8
-4
-6
-
+u
+untuk
+7
 
 banyak
 -
@@ -494,25 +494,25 @@ satu
 tersebut
 (
 memiliki
-slot
+poker
 saat
 salah
-6
+dan
 :
 dapat
 ini
 seperti
-(
+4
 tersebut
 situs
 ke
 s
 jika
-saya
+:
 -
 dengan
 akan
-(
+sebagai
 akan
 2
 secara
@@ -520,17 +520,17 @@ uang
 0
 kami
 atau
-baik
+saja
 online
 .
 indonesia
 bisa
 dengan
 dalam
-u
+membuat
 karena
 oleh
-mereka
+pada
 (
 
 
@@ -540,32 +540,32 @@ membuat
 bisa
 u
 tahun
-satu
+sangat
 hal
 dan
 9
-2
+melakukan
 sudah
 adalah
 ,
-game
-para
+adalah
+melakukan
 dalam
 di
 "
-atau
+8
 
 
-banyak
+lain
 oleh
 online
 saya
-kamu
+mereka
 secara
 harus
-2
+indonesia
 oleh
-
+5
 ke
 sudah
 orang
@@ -576,7 +576,7 @@ dan
 yang
 dengan
 memiliki
-t
+(
 uang
 atau
 3
@@ -584,19 +584,19 @@ dapat
 
 judi
 cara
-/
+jika
 e
 saat
 sangat
 2
 ,
 .
-
+nya
 s
 dan
 hanya
-dapat
-banyak
+tidak
+mereka
 akan
 indonesia
 akan
@@ -604,13 +604,13 @@ akan
 menggunakan
 mereka
 
-permainan
+"
 
 indonesia
 atau
 dalam
 para
-i
+secara
 akan
 
 nya
@@ -618,7 +618,7 @@ nya
 cara
 dengan
 bisa
-4
+secara
 dapat
 juga
 
@@ -636,21 +636,21 @@ sebagai
 .
 hanya
 .
-/
+mereka
 1
 
-dalam
-telah
-bisa
-beberapa
-uang
+k
+9
+
+bahwa
+4
 akan
 tidak
 1
 baik
 untuk
 tersebut
-situs
+tahun
 e
 ,
 dari
@@ -670,106 +670,106 @@ adalah
 atau
 saya
 
-oleh
+mereka
 online
 baik
 (
-apa
+menggunakan
 dan
 s
 )
 adalah
 saat
 juga
-/
+e
 )
 tidak
 dengan
 
 itu
 situs
-pada
+nya
 untuk
 dalam
 :
 ada
+kamu
+situs
 sudah
-9
-sudah
-dan
+banyak
 ini
 8
 menjadi
 satu
-dari
+tidak
 di
 1
 yang
 ,
 an
-oleh
-cara
-,
-d
+i
+ke
+permainan
+4
 mereka
 yang
 ,
-itu
+mungkin
 adalah
-satu
-telah
+kita
+ke
 .
-itu
+kan
 m
 1
-hal
+dari
 -
 yang
 maka
 atau
-)
+(
 d
 yang
 
 menggunakan
-cara
+"
 2
-:
-memiliki
-situs
+ke
+9
+hanya
 3
 3
 seperti
-,
-slot
-dari
+membuat
+telah
+/
 sudah
-game
+
 ,
 dari
 dalam
 akan
 7
-3
+saat
 dari
 dari
 d
 
 :
-game
+u
 untuk
 mereka
 dengan
-dalam
+4
 memiliki
 
-telah
+waktu
 ini
 dapat
-satu
+karena
 atau
 u
-atau
+i
 saya
 .
 .
@@ -781,59 +781,59 @@ dalam
 ini
 banyak
 dalam
-?
-mereka
+(
+(
 harus
 dalam
 dengan
 dari
 di
 ada
-indonesia
+tahun
 ?
 banyak
 itu
 juga
 
 ,
-yang
+t
 kamu
-tersebut
-situs
+kan
+baik
 di
 yang
 akan
-situs
+8
 dan
 i
-hanya
+hal
 banyak
 besar
-4
 yang
-sangat
-kamu
 yang
-memiliki
+harus
+membuat
+yang
+cara
 online
-e
+membuat
 dan
-besar
+8
 ?
-5
+9
 sudah
 -
 adalah
-nya
+secara
 dalam
-1
+lain
 dari
-saya
+dan
 -
 menjadi
 anda
-yang
-bahwa
+-
+
 nya
 4
 itu
@@ -846,40 +846,40 @@ ada
 yang
 judi
 yang
-an
+sebagai
 2
 sudah
-bisnis
+pemain
 2
 nya
 oleh
-mereka
+sebagai
 harus
 pada
-membuat
+k
 oleh
 3
 s
 bisa
 dapat
-,
+harus
 adalah
-saat
-)
+6
+orang
 mereka
 -
-bisa
+bahwa
 
 ini
 d
 dengan
-4
+5
 (
-2
-7
+(
+u
 para
 
-sebagai
+permainan
 0
 3
 a
@@ -904,27 +904,27 @@ menjadi
 mendapatkan
 -
 t
-sebagai
+k
 anda
 /
 m
-sebagai
-menjadi
+1
+?
 jika
-yang
+a
 ,
 dari
 di
 ?
 nya
 ?
-beberapa
-k
+.
+i
 orang
 ?
 ada
 nya
-8
+salah
 8
 uang
 dalam
@@ -934,7 +934,7 @@ kan
 dari
 beberapa
 :
-dan
+1
 :
 s
 
@@ -949,24 +949,24 @@ permainan
 saya
 anda
 satu
-.
+an
 ini
 2
 (
 di
 dan
 bisa
-indonesia
+harus
 
 a
 satu
-3
+(
 nya
 pada
 dapat
-waktu
-oleh
-/
+saja
+slot
+maka
 bahwa
 jika
 9
@@ -978,13 +978,13 @@ untuk
 pada
 :
 (
-ke
+1
 -
 5
-dalam
+"
 jika
 bisa
-
+akan
 
 3
 oleh
@@ -997,14 +997,14 @@ akan
 /
 secara
 pada
-1
-poker
+n
+telah
 memiliki
 karena
 nya
-hanya
+an
 
-situs
+orang
 )
 7
 ,
@@ -1015,16 +1015,16 @@ jika
 anda
 -
 anda
-harga
-indonesia
+-
+a
 anda
 itu
+u
+uang
+e
+membuat
 hanya
-menjadi
-saja
-k
-adalah
-
+menggunakan
 
 dari
 oleh
@@ -1032,11 +1032,11 @@ atau
 yang
 saat
 dan
-besar
-indonesia
+bermain
+waktu
 ke
-saya
-semua
+dengan
+salah
 adalah
 itu
 baru
@@ -1047,15 +1047,15 @@ adalah
 permainan
 ,
 bisa
-kan
+i
 maka
 sudah
-4
-poker
-
+mereka
+7
+saja
 untuk
 (
-menggunakan
+apa
 .
 ,
 pada
@@ -1065,26 +1065,26 @@ judi
 ?
 0
 melakukan
-bahwa
+harus
 anda
 saja
 
 tidak
-?
+6
 3
-nya
+kan
 hal
-situs
+beberapa
 banyak
 ke
 yang
-a
+baik
 di
 indonesia
 saya
 banyak
 bisa
-
+besar
 memiliki
 8
 dan
@@ -1097,7 +1097,7 @@ karena
 
 bermain
 juga
-0
+2
 ini
 melakukan
 5
@@ -1106,29 +1106,29 @@ mendapatkan
 itu
 itu
 karena
-,
-
+mereka
+lain
 salah
 indonesia
-e
+sangat
 juga
-beberapa
+atau
 ada
 bisa
-.
+melakukan
 bisa
 i
 menjadi
 2
 0
-waktu
-itu
+o
+sebagai
 di
-juga
+salah
 
 (
 banyak
-a
+lebih
 i
 situs
 2
@@ -1138,33 +1138,33 @@ hal
 t
 juga
 dan
-anda
+9
 2
 hal
-beberapa
+bagi
 dan
 
 saya
 tidak
 2
-?
+ini
 ,
 menjadi
 online
-ke
-beberapa
+tidak
+judi
 untuk
 anda
 
 2
-mereka
+banyak
 1
 cara
-?
+"
 game
 permainan
 anda
-beberapa
+/
 i
 ,
 ,
@@ -1175,7 +1175,7 @@ maka
 sangat
 secara
 
-5
+saja
 di
 dengan
 sudah
@@ -1188,7 +1188,7 @@ hal
 kamu
 
 harus
-2
+hanya
 dan
 lebih
 hanya
@@ -1197,12 +1197,12 @@ yang
 
 baik
 bahwa
-.
+,
 memiliki
 sangat
 para
 dengan
-"
+8
 hanya
 sangat
 6
@@ -1217,8 +1217,8 @@ judi
 
 menggunakan
 itu
-di
-secara
+satu
+k
 
 membuat
 bisnis
@@ -1238,22 +1238,22 @@ cara
 bagi
 banyak
 tahun
-,
+dan
 anda
 akan
-dengan
+tidak
 sangat
 hanya
-atau
+game
 atau
 ini
 
-seperti
+sangat
 "
-2
+1
 .
 dan
-secara
+t
 dapat
 kan
 yang
@@ -1265,18 +1265,18 @@ oleh
 dan
 di
 
-besar
+bahwa
 harus
 nya
-an
+4
 menjadi
 besar
 untuk
 oleh
 yang
 maka
-kamu
-dalam
+tersebut
+akan
 s
 atau
 2
@@ -1290,14 +1290,14 @@ memiliki
 lebih
 seperti
 untuk
-0
+perlu
 jadi
 judi
 judi
 sebagai
 ini
 dan
-/
+tersebut
 lebih
 sebagai
 dalam
@@ -1306,17 +1306,17 @@ untuk
 
 ,
 itu
-sangat
-tidak
+mereka
+lebih
 permainan
-k
+5
 kita
 di
 s
 dari
 mereka
 kita
-poker
+melakukan
 sangat
 
 ini
@@ -1332,19 +1332,19 @@ seperti
 
 nya
 orang
-9
-harus
-7
+saya
+hal
+uang
 )
 dan
 anda
 kami
-2
+1
 salah
 
 tidak
 dan
-ingin
+anda
 kami
 oleh
 orang
@@ -1353,7 +1353,7 @@ lebih
 uang
 slot
 )
-6
+kan
 salah
 dalam
 pada
@@ -1362,36 +1362,36 @@ adalah
 di
 banyak
 hal
-maka
+.
 0
 orang
 judi
 lebih
-situs
-
+9
+yang
 2
-membuat
-t
+harga
+a
 di
 
 akan
 s
-permainan
+memiliki
 memiliki
 situs
 untuk
-k
+membuat
 ,
 saya
 pada
 atau
 di
-)
+saya
 mereka
 sangat
 judi
 dengan
-0
+dengan
 mereka
 cara
 i
@@ -1402,38 +1402,38 @@ yang
 ,
 k
 atau
-baik
+slot
 ke
 i
 
 banyak
 ada
 
-banyak
+karena
 
 atau
 oleh
-namun
-bisa
+bagi
+
 0
-maka
-dengan
+saja
+3
 
-)
+atau
 harus
 orang
 di
 bisa
 kami
 mereka
-permainan
-apa
-lebih
+4
+0
+i
 cara
 saja
 anda
 
-,
+bisnis
 nya
 apa
 i
@@ -1442,10 +1442,10 @@ besar
 akan
 dan
 
-poker
+waktu
 indonesia
-d
-
+7
+bahwa
 ke
 0
 menggunakan
@@ -1454,30 +1454,30 @@ menggunakan
 
 )
 s
-online
+pada
 juga
 dari
 5
 di
-sangat
+bahwa
 ini
 -
 
 tersebut
 bermain
-(
+menjadi
 a
 8
-membuat
+dari
 menjadi
-
+sudah
 
 ,
 sangat
 s
 yang
 ke
-4
+tersebut
 karena
 ini
 dan
@@ -1485,15 +1485,15 @@ dan
 anda
 sudah
 saja
-/
-di
-seperti
+)
+mendapatkan
+4
 2
 beberapa
 kamu
 dari
 jika
-lain
+t
 dari
 1
 mereka
@@ -1501,25 +1501,25 @@ hanya
 dengan
 atau
 hanya
-
+waktu
 8
-i
+yang
 3
 sebagai
 0
 ?
 .
 
-semua
+sebagai
 karena
 memiliki
 
-tidak
+saya
 akan
 kamu
 
 .
-
+bagi
 anda
 juga
 ?
@@ -1527,25 +1527,25 @@ juga
 pada
 kan
 ada
-9
-pada
+tersebut
+bisa
 
 kita
 kami
 saat
-juga
+3
 (
 maka
 
-sebagai
-ini
-
+orang
+ke
 
+dengan
 
 8
 bisa
-memiliki
-pada
+karena
+harus
 6
 online
 menggunakan
@@ -1555,8 +1555,8 @@ adalah
 .
 ,
 ini
-situs
-e
+kami
+dalam
 menjadi
 
 sebagai
@@ -1570,17 +1570,17 @@ bahwa
 5
 lebih
 ini
-.
+mereka
 bisa
 bahwa
 seperti
-dan
+uang
 
 .
-untuk
+menggunakan
 atau
 
-ini
+indonesia
 dari
 mereka
 akan
@@ -1588,17 +1588,17 @@ dari
 ,
 0
 saat
-o
+m
 anda
 banyak
-mereka
+adalah
 :
 lebih
 :
 jadi
 yang
 yang
-nya
+baru
 6
 kita
 a
@@ -1607,14 +1607,14 @@ indonesia
 tersebut
 kami
 3
--
+
 akan
 a
 untuk
 tahun
--
-dapat
-4
+/
+juga
+maka
 
 bisa
 banyak
@@ -1622,28 +1622,28 @@ hal
 mereka
 pada
 7
-9
+bisa
 0
 2
 situs
 dapat
-orang
+:
 dan
-dengan
+karena
 e
 juga
 sangat
-cara
+sudah
 yang
 anda
 sangat
-kamu
+anda
 
 juga
-indonesia
+d
 dapat
 kami
-dapat
+online
 3
 ada
 .
@@ -1652,7 +1652,7 @@ menjadi
 memiliki
 .
 ,
-harus
+judi
 ini
 sudah
 anda
@@ -1664,14 +1664,14 @@ saat
 tidak
 cara
 oleh
-ini
+permainan
 akan
 saat
 akan
 baru
-"
--
-besar
+(
+tahun
+d
 dan
 di
 i
@@ -1684,30 +1684,30 @@ e
 
 dan
 itu
-,
-nya
-
-orang
+waktu
+:
+lain
+seperti
 1
-.
-sangat
+)
+ini
 ,
-5
+9
 permainan
-kami
+mereka
 akan
 nya
-
-orang
+adalah
+8
 untuk
-harus
+membuat
 mereka
-bermain
+4
 .
 jika
-di
+slot
 dalam
-kamu
+bisa
 )
 lebih
 0
@@ -1715,7 +1715,7 @@ mereka
 bisa
 pada
 sangat
-online
+itu
 dan
 ?
 atau
@@ -1727,8 +1727,8 @@ dalam
 4
 a
 nya
-u
-kami
+uang
+2
 kan
 4
 adalah
@@ -1742,15 +1742,15 @@ untuk
 bisa
 
 )
-uang
+-
 bisa
 untuk
 ,
 nya
 anda
 maka
-tidak
-bermain
+seperti
+tahun
 i
 0
 permainan
@@ -1760,19 +1760,19 @@ memiliki
 salah
 8
 membuat
-slot
+i
+
 
-game
 e
 bisa
-di
-(
+baik
+sudah
 judi
 s
 banyak
 .
 secara
-seperti
+orang
 sudah
 kamu
 banyak
@@ -1781,32 +1781,32 @@ di
 ini
 2
 satu
-ke
+
 baik
 ada
 judi
 bisa
 situs
 itu
-seperti
+banyak
 2
-slot
+nya
 di
-kita
+8
 2
-dalam
-lebih
+oleh
+i
 atau
 ,
 ,
-6
-pada
+
+kami
 telah
-uang
+salah
 2
 game
 harus
-jika
+situs
 atau
 u
 lebih
@@ -1818,22 +1818,22 @@ nya
 akan
 "
 ini
-pemain
+permainan
 pada
-:
+tersebut
 orang
 anda
 ini
 ,
 melakukan
-orang
+/
 di
 salah
 bisa
 anda
-jika
+mereka
 akan
-u
+maka
 sebagai
 di
 n
@@ -1855,30 +1855,30 @@ dari
 an
 )
 dalam
-akan
+kita
 dari
 bahwa
-para
-situs
+e
+a
 orang
 ada
-bisa
+e
 tidak
 dan
 dan
 /
-slot
+semua
 harus
 saja
 
 7
 banyak
-situs
+ada
 bisa
 banyak
-4
+sangat
 anda
-sebagai
+sudah
 di
 0
 untuk
@@ -1887,7 +1887,7 @@ banyak
 an
 tersebut
 untuk
-kita
+:
 6
 anda
 s
@@ -1895,16 +1895,16 @@ permainan
 juga
 seperti
 banyak
-bagi
-
+semua
+e
 (
-lain
+para
 untuk
 lebih
 lebih
 cara
 u
-para
+mungkin
 k
 di
 pada
@@ -1913,28 +1913,28 @@ online
 hanya
 akan
 -
-lain
+slot
 s
 yang
 .
-orang
+mereka
 )
 a
 ingin
-sebagai
+4
 dengan
-2
+jadi
 lebih
 yang
 s
 ke
-dari
+membuat
 ini
 harus
 bahwa
 3
 adalah
-di
+permainan
 bagi
 cara
 "
@@ -1945,12 +1945,12 @@ e
 dari
 pada
 situs
-i
-adalah
+besar
+a
 untuk
 
 .
-bagi
+u
 harus
 akan
 salah
@@ -1959,58 +1959,58 @@ itu
 pada
 hal
 saja
-yang
-pemain
+t
+bagi
 2
 orang
-permainan
+salah
 
 akan
 -
 dan
 anda
-untuk
+banyak
 bisa
-para
+maka
 itu
 an
 yang
 judi
 anda
-akan
+dalam
 harus
 jika
 
 ke
-
+karena
 bisa
-dari
-1
-tersebut
 dalam
+sebagai
+tersebut
+oleh
 
 di
-8
+situs
 karena
-indonesia
+
 online
 
 bisa
 banyak
 dan
-telah
-
+para
+sudah
 saja
 besar
 cara
 1
-3
-ini
-adalah
+jika
+melakukan
+ada
 itu
 4
 lebih
-itu
+.
 sangat
 untuk
 karena
@@ -2020,7 +2020,7 @@ jika
 dari
 memiliki
 hal
-cara
+memiliki
 0
 memiliki
 "
@@ -2039,7 +2039,7 @@ e
 t
 dengan
 .
-memiliki
+tahun
 
 anda
 kan
@@ -2049,13 +2049,13 @@ ke
 kita
 
 adalah
-besar
+/
 :
-baik
+bermain
 yang
 pada
 orang
-.
+akan
 :
 -
 kita
@@ -2065,22 +2065,22 @@ yang
 0
 dari
 apa
-:
+besar
 u
 menjadi
 
-tersebut
-beberapa
+saya
+sebagai
 hal
 saat
 tersebut
 dari
-cara
+:
 4
 menjadi
 saya
 nya
-:
+ke
 namun
 memiliki
 8
@@ -2089,21 +2089,21 @@ memiliki
 ini
 tidak
 untuk
-anda
+k
 1
 s
 d
 indonesia
 
-situs
-,
+9
+?
 anda
 seperti
 di
 nya
 -
 dalam
-)
+akan
 online
 ,
 nya
@@ -2116,8 +2116,8 @@ yang
 karena
 mereka
 seperti
-beberapa
-besar
+permainan
+satu
 9
 
 namun
@@ -2125,7 +2125,7 @@ namun
 
 bisa
 t
-adalah
+pada
 )
 p
 memiliki
@@ -2133,10 +2133,10 @@ memiliki
 saya
 kan
 0
-
+-
 8
 harus
-kan
+anda
 yang
 sudah
 
@@ -2147,40 +2147,40 @@ menggunakan
 online
 
 anda
-.
-ke
+maka
+banyak
 dari
 saja
 (
-bisnis
+
 bermain
 akan
 ini
-menggunakan
+a
 tersebut
 baru
 lebih
 1
 maka
 bahwa
-jika
+2
 yang
 jika
 dapat
 s
-di
+0
 dapat
 i
 3
-a
+ingin
 sangat
 untuk
 /
 slot
-bahwa
+6
 saja
-(
-harus
+dapat
+anda
 banyak
 0
 memiliki
@@ -2191,31 +2191,31 @@ s
 pada
 -
 6
-t
+baik
 (
 1
 ada
 2
-k
+anda
 cara
 online
 pada
 2
-orang
+d
 
-membuat
+baik
 yang
 kami
 bisa
 sangat
 cara
 ini
-dalam
+memiliki
 an
 memiliki
-t
+an
 :
-beberapa
+7
 ini
 
 bisa
@@ -2224,12 +2224,12 @@ m
 dengan
 menjadi
 dan
-kan
+lain
 memiliki
 ke
 anda
 akan
-juga
+u
 karena
 harus
 dengan
@@ -2240,95 +2240,95 @@ hal
 atau
 di
 ,
-mendapatkan
+pemain
 sangat
 
 yang
-)
-itu
+banyak
+maka
 9
 juga
 sangat
-banyak
+karena
 0
-memiliki
+judi
 nya
 .
 -
-beberapa
+kamu
 a
-hanya
+?
 
 ,
 harus
-d
+semua
 dari
-membuat
+jika
 lebih
 
 dapat
-tahun
+jadi
 
 
-ke
+bahwa
 .
 dari
 5
 sudah
-e
+situs
 dan
 ,
 s
 bahwa
--
+dapat
 
 atau
 k
 .
 secara
-cara
+beberapa
 ini
 0
 sebagai
 -
 dan
 salah
-harus
-(
-3
+menjadi
+telah
+kami
 ada
 ?
 0
-lebih
+nya
 
 7
-tahun
+bagi
 juga
-hal
+seperti
 anda
 tidak
 dan
 tidak
 ada
-indonesia
+untuk
 .
 4
-terbaik
-
+,
+.
 bisa
 0
-(
+kamu
 seperti
 cara
 
 semua
 itu
 beberapa
-mereka
+indonesia
 namun
-o
+0
 ini
-
+6
 anda
 karena
 namun
@@ -2341,16 +2341,16 @@ tidak
 pada
 pada
 s
-adalah
+nya
 orang
 
 sebagai
-sangat
+3
 
 :
 memiliki
 menjadi
-lebih
+dalam
 atau
 pada
 0
@@ -2359,7 +2359,7 @@ juga
 saya
 dan
 .
-saat
+jika
 s
 di
 kita
@@ -2372,41 +2372,41 @@ an
 
 di
 ?
+waktu
+bahwa
 -
-jika
--
-tidak
-d
+mereka
+/
 mendapatkan
 )
-orang
+poker
 6
 pada
 u
-dari
+dengan
 dapat
 situs
-jika
+tahun
 (
 s
 2
 dengan
 9
-saja
-jika
+permainan
+:
 
 saat
 
 3
 mereka
 sangat
-ada
-e
+online
+sangat
 5
 membuat
-adalah
+4
 karena
-mendapatkan
+terbaik
 1
 dan
 situs
@@ -2419,11 +2419,11 @@ ada
 membuat
 adalah
 
-itu
+situs
 :
 dan
 :
-membuat
+tersebut
 dan
 (
 memiliki
@@ -2434,24 +2434,24 @@ e
 sudah
 pada
 untuk
-4
-orang
-8
-t
+sebagai
+harus
+tersebut
+yang
 bahwa
 -
-4
-judi
+seperti
+an
 8
 9
 dan
 5
-3
+seperti
 
 dalam
 dalam
-9
-saja
+memiliki
+bagi
 d
 :
 
@@ -2459,11 +2459,11 @@ d
 atau
 menjadi
 
-untuk
+salah
 dapat
 banyak
 untuk
-satu
+tersebut
 ke
 tidak
 akan
@@ -2472,7 +2472,7 @@ oleh
 tersebut
 
 1
-hanya
+bahwa
 sangat
 sebagai
 beberapa
@@ -2480,7 +2480,7 @@ beberapa
 
 pada
 di
-sebagai
+ke
 ini
 yang
 sudah
@@ -2489,7 +2489,7 @@ sudah
 atau
 5
 .
-t
+-
 2
 dan
 hal
@@ -2498,21 +2498,21 @@ nya
 )
 nya
 lebih
-anda
+bisnis
 pada
 atau
-itu
+uang
 mereka
 orang
 ,
-bahwa
+itu
 
 dan
 9
-orang
-u
-u
-kamu
+mereka
+satu
+3
+sudah
 saya
 1
 adalah
@@ -2522,12 +2522,12 @@ bisa
 karena
 ,
 bahwa
-juga
+,
 dan
 itu
 ,
 -
-)
+game
 jika
 dengan
 dengan
@@ -2546,20 +2546,20 @@ saya
 kita
 
 
-4
+hal
 ke
-jika
+waktu
 ini
 mereka
-semua
+waktu
 kita
 adalah
-3
+dalam
 membuat
 s
 anda
-cara
-1
+kita
+3
 pada
 sangat
 bisa
@@ -2571,8 +2571,8 @@ semua
 seperti
 0
 ini
-bahwa
-dengan
+kita
+yang
 bisa
 
 nya
@@ -2582,7 +2582,7 @@ ada
 judi
 ,
 s
-0
+apa
 akan
 kita
 nya
@@ -2595,30 +2595,30 @@ d
 dengan
 s
 saja
-salah
+hanya
 -
 untuk
-1
-2
 
+2
+)
 tersebut
 itu
 -
 satu
 saat
-dengan
+sebagai
 di
 sudah
-?
+kamu
 ini
 itu
 oleh
 tahun
 a
 :
-satu
+sangat
 akan
-
+jika
 a
 permainan
 
@@ -2634,72 +2634,72 @@ kamu
 dengan
 
 .
-orang
+3
 -
 5
-bisa
-di
-oleh
+atau
+untuk
+atau
 dan
 bisa
 membuat
 bisnis
-9
+seperti
 
-bermain
+u
 
 kami
 nya
 satu
 dan
 lebih
-judi
-yang
+/
+waktu
 membuat
 dengan
 
-uang
-game
+u
+melakukan
 ini
-kita
-ada
+hanya
+lebih
 dan
 tidak
-kamu
+secara
 an
 
 ke
 oleh
 bahwa
 yang
-u
-semua
+uang
+jika
 ,
-dapat
+s
 2
 saya
 3
 untuk
-telah
+e
 3
 (
 adalah
 bisa
 nya
 orang
-yang
-beberapa
+jika
+salah
 harus
-a
+judi
 namun
-pada
+juga
 lebih
 
-s
-kamu
+atau
+judi
 (
 dan
-game
+telah
 ini
 5
 dari
@@ -2722,8 +2722,8 @@ dan
 ini
 an
 cara
-bermain
-2
+lain
+m
 sangat
 .
 dari
@@ -2758,26 +2758,26 @@ untuk
 itu
 1
 seperti
-dengan
-an
-salah
+juga
+1
+bagi
 dapat
 -
-orang
+seperti
 8
-tersebut
+masih
 baik
 online
-k
+kami
 orang
 e
 itu
 
-(
+bagi
 
 5
 pemain
-para
+,
 9
 s
 karena
@@ -2788,10 +2788,10 @@ pada
 orang
 ini
 
-?
-:
+secara
+sudah
 telah
-i
+harus
 ada
 akan
 tersebut
@@ -2804,17 +2804,17 @@ seperti
 untuk
 ?
 anda
-2
+lebih
 
-sudah
-4
+situs
+hal
 online
 jika
-orang
+/
 sangat
 ke
 online
-banyak
+online
 yang
 dan
 
@@ -2824,18 +2824,18 @@ atau
 dan
 menjadi
 
-8
+7
 /
 ini
 -
 dengan
 ini
-baik
+mendapatkan
 pada
 yang
 dapat
-kami
-8
+sudah
+harus
 
 .
 )
@@ -2854,21 +2854,21 @@ a
 nya
 ada
 d
-dengan
-seperti
+0
+3
 an
 saya
 hal
-dalam
-sudah
-salah
+slot
+d
+namun
 5
 secara
 saat
 lebih
 sebagai
 tidak
-kami
+baik
 slot
 yang
 anda
@@ -2899,7 +2899,7 @@ anda
 atau
 1
 saya
-situs
+baik
 dan
 di
 kan
@@ -2911,30 +2911,30 @@ cara
 yang
 ada
 2
-baik
+lain
 secara
-maka
-ingin
+apa
+m
 r
 ,
 yang
 sebagai
 k
 cara
-lain
+dan
 atau
-(
-sudah
+karena
+melakukan
 s
 online
 sudah
-lain
+menggunakan
 judi
 membuat
 harus
 orang
 ada
-.
+m
 e
 ke
 (
@@ -2944,33 +2944,33 @@ sangat
 ada
 5
 satu
-tidak
+apa
 juga
 yang
 sebagai
-sudah
+melakukan
 kan
 cara
--
-dalam
+kan
+an
 dapat
 cara
 
 memiliki
-an
+pemain
 0
-2
+bermain
 (
 .
 s
-beberapa
+anda
 tidak
 4
 anda
 yang
 "
 kami
-yang
+/
 di
 9
 dan
@@ -2978,7 +2978,7 @@ besar
 bisa
 ,
 e
-baik
+6
 hal
 seperti
 
@@ -3002,7 +3002,7 @@ saat
 "
 2
 ,
-karena
+saat
 dengan
 orang
 melakukan
@@ -3010,31 +3010,31 @@ bisnis
 bahwa
 menjadi
 ?
-7
+permainan
 nya
 k
-itu
+dalam
 
-bermain
+8
 
 
 yang
 juga
 9
 5
-kami
+jika
 
-"
+an
 yang
 kami
 kamu
-harus
+4
 bahwa
 untuk
-?
-menjadi
-tersebut
-p
+membuat
+5
+an
+pemain
 orang
 hal
 -
@@ -3044,55 +3044,55 @@ yang
 judi
 bisa
 karena
-5
+menjadi
 s
 ,
 pemain
 saat
 -
 baik
-,
+apa
 banyak
 slot
-dari
+u
 menggunakan
-
+para
 besar
 kita
 tidak
 ke
-oleh
+saat
 untuk
 ,
 
-orang
+a
 seperti
 7
 bisa
 i
 itu
 ada
-satu
+/
 .
 harus
 juga
 sangat
 1
-akan
+atau
 orang
 tidak
 tersebut
 ,
 dapat
 .
-tersebut
-s
+menjadi
+atau
 jika
 yang
 ?
 hal
 i
-1
+/
 banyak
 
 -
@@ -3105,7 +3105,7 @@ pemain
 para
 3
 sebagai
-:
+
 saya
 9
 ada
@@ -3114,18 +3114,18 @@ judi
 anda
 lebih
 online
-besar
+saja
 an
 indonesia
-para
+poker
 ini
-tersebut
-3
+s
+menjadi
 poker
 dengan
 
 itu
-oleh
+t
 2
 
 dengan
@@ -3135,14 +3135,14 @@ k
 satu
 juga
 dapat
-t
+akan
 o
 bisa
 juga
 ini
 judi
 -
-secara
+tersebut
 
 .
 ke
@@ -3163,9 +3163,9 @@ pada
 telah
 karena
 harus
-itu
+adalah
 dan
-5
+sudah
 ini
 untuk
 karena
@@ -3179,36 +3179,36 @@ dalam
 t
 .
 itu
-i
+(
 0
 melakukan
 kita
 bermain
-tersebut
+0
 oleh
-tidak
+dapat
 dan
 bahwa
 "
 :
-permainan
-sebagai
+sangat
+karena
 k
 banyak
-hanya
+5
 dengan
-mereka
+salah
 e
 salah
-kan
-hal
+hanya
+bagi
 yang
 itu
-adalah
+juga
 tersebut
 2
 saya
-dengan
+besar
 s
 atau
 akan
@@ -3220,7 +3220,7 @@ atau
 yang
 dan
 maka
-/
+7
 
 nya
 ada
@@ -3230,14 +3230,14 @@ bahwa
 mereka
 kita
 jika
-bermain
+-
 1
 2
 dapat
 an
 juga
 indonesia
-judi
+maka
 situs
 setiap
 pada
@@ -3246,29 +3246,29 @@ kita
 s
 satu
 memiliki
-6
+kan
 ,
 i
 anda
-dengan
+anda
 
 sangat
 bisa
 anda
-judi
+:
 yang
 banyak
 dengan
 2
-
+saya
 ini
 2
 untuk
-?
-judi
+"
+,
 kita
-a
-karena
+kan
+ada
 tidak
 ke
 di
@@ -3277,7 +3277,7 @@ memiliki
 karena
 ,
 adalah
-"
+/
 
 :
 salah
@@ -3305,27 +3305,27 @@ lebih
 /
 mereka
 9
-maka
--
-d
+s
+uang
+9
 a
 anda
-
+judi
+0
 0
-di
 tahun
 menggunakan
 -
 6
-7
+melakukan
 ini
 bermain
 juga
 saat
 saja
-situs
+e
 mendapatkan
-i
+ke
 dalam
 adalah
 tersebut
@@ -3333,66 +3333,66 @@ tersebut
 online
 mereka
 di
-pada
-9
-membuat
+mereka
+indonesia
+salah
 sudah
 kan
 dan
 dan
-sangat
-?
+para
+bahwa
 ada
 poker
 atau
 i
 /
 8
-"
-judi
+situs
 u
+bermain
 (
 hanya
 melakukan
-dan
-s
+besar
+itu
 -
 juga
 judi
 akan
 :
-bermain
-pada
-slot
+para
+s
+t
 karena
 karena
 orang
-orang
+situs
 membuat
 banyak
 yang
 juga
 
 ke
-satu
+0
 e
 itu
 lain
-4
+6
 0
 i
 judi
 5
-seperti
+)
 .
 7
-i
+:
 -
 -
 online
 s
 dapat
-9
+kan
 membuat
 kan
 dari
@@ -3401,52 +3401,52 @@ judi
 saya
 
 k
-kami
+namun
 karena
 (
-3
-secara
+jika
+uang
 hal
-nya
+mereka
 akan
 ,
 di
 an
 itu
-(
+9
 adalah
 kami
-game
-dan
-game
-e
+3
+/
+melakukan
+harus
 adalah
 dapat
-beberapa
+dan
 .
 beberapa
 
-)
-game
+hal
+e
 banyak
 dengan
 "
 0
 karena
 adalah
-1
+situs
 u
 di
 ke
 k
 1
-oleh
+
 -
 5
 karena
 indonesia
 nya
-jika
+ada
 di
 "
 (
@@ -3455,29 +3455,29 @@ di
 a
 menjadi
 0
-bisa
+3
 3
 memiliki
 0
-:
+k
 untuk
 8
 )
 :
 anda
-tersebut
+
 menjadi
 ada
 saat
 dan
 
-mereka
+oleh
 atau
 dalam
 saya
 7
 ini
-.
+3
 ada
 anda
 1
@@ -3485,22 +3485,22 @@ d
 dan
 baru
 3
-e
+/
 karena
 8
 
-e
+karena
 untuk
-bisa
+kamu
 mereka
 dengan
 nya
-tidak
+0
 nya
 
 lain
 saya
-5
+judi
 dari
 3
 ini
@@ -3516,23 +3516,23 @@ sebagai
 kan
 dan
 
-situs
+kami
 dapat
 3
 orang
 banyak
 pada
-(
-
+indonesia
+saja
 )
 adalah
 adalah
 lebih
 
-bahwa
+t
 pada
 ada
-saja
+secara
 7
 pada
 (
@@ -3546,16 +3546,16 @@ dalam
 
 harus
 melakukan
-
+indonesia
 e
 hal
-saat
+.
 ada
 dengan
 )
 juga
 bermain
-tahun
+harga
 dalam
 game
 
@@ -3565,16 +3565,16 @@ jika
 5
 (
 
-poker
+(
 dalam
 untuk
 adalah
 :
 5
+bahwa
 sebagai
-sebagai
-para
-itu
+dapat
+0
 hal
 akan
 telah
@@ -3593,39 +3593,39 @@ tidak
 4
 -
 i
-jika
+karena
 akan
-ini
-7
+:
+sebagai
 i
 permainan
 bisa
-3
+jika
 akan
-/
+saya
 itu
-saat
+jika
 hal
 dari
 
 hanya
 para
-dalam
+jika
 karena
 5
 (
 
-kan
+dengan
 bisa
 2
 karena
 sebagai
 kita
-kami
+itu
 besar
-saya
+kamu
 baik
-u
+9
 1
 akan
 )
@@ -3633,8 +3633,8 @@ akan
 e
 sebagai
 .
-
-sangat
+poker
+harus
 )
 :
 e
@@ -3645,7 +3645,7 @@ tidak
 :
 judi
 itu
-judi
+6
 akan
 mereka
 memiliki
@@ -3656,7 +3656,7 @@ mereka
 yang
 memiliki
 
-oleh
+)
 tidak
 ,
 ke
@@ -3665,26 +3665,26 @@ dalam
 di
 namun
 7
-judi
+beberapa
 2
 tersebut
 t
-game
+anda
 adalah
 akan
-salah
+k
 .
 untuk
 
-maka
+an
 dengan
 i
-dengan
-atau
+untuk
+kami
 s
 adalah
-5
-saja
+orang
+memiliki
 secara
 untuk
 "
@@ -3693,18 +3693,18 @@ sudah
 baik
 3
 i
-hanya
+4
 ?
 nya
 sudah
 saat
-bahwa
+a
 menjadi
 sangat
 .
 juga
-memiliki
-judi
+kamu
+oleh
 i
 ada
 di
@@ -3713,22 +3713,22 @@ tidak
 atau
 kita
 adalah
-
+yang
 dengan
 ada
 d
 bisa
 oleh
 8
-6
+kita
 ,
-kamu
+d
 kita
 tersebut
 juga
 adalah
 pada
-
+bermain
 saya
 orang
 .
@@ -3738,15 +3738,15 @@ nya
 tidak
 k
 
-mendapatkan
+
 seperti
 -
-saya
+banyak
 dalam
 pada
-sangat
+saya
 itu
 7
 8
 saya
-telah
+t

predict_results.json

@@ -1,12 +1,12 @@
 {
     "predict_gen_len": 1.0,
-    "predict_loss": 0.5869672894477844,
-    "predict_rouge1": 0.4417,
+    "predict_loss": 0.5681180357933044,
+    "predict_rouge1": 0.4479,
     "predict_rouge2": 0.0,
-    "predict_rougeL": 0.4417,
-    "predict_rougeLsum": 0.442,
-    "predict_runtime": 559.1958,
+    "predict_rougeL": 0.4487,
+    "predict_rougeLsum": 0.4479,
+    "predict_runtime": 561.0154,
     "predict_samples": 3752,
-    "predict_samples_per_second": 6.71,
-    "predict_steps_per_second": 0.211
+    "predict_samples_per_second": 6.688,
+    "predict_steps_per_second": 0.21
 }

train_results.json

@@ -1,9 +1,9 @@
 {
     "epoch": 5.0,
-    "total_flos": 7.504414428893184e+16,
-    "train_loss": 0.9108390363342559,
-    "train_runtime": 5162.3558,
+    "total_flos": 7.534082864399155e+16,
+    "train_loss": 0.8313294962382637,
+    "train_runtime": 5163.645,
     "train_samples": 14272,
-    "train_samples_per_second": 13.823,
-    "train_steps_per_second": 1.728
+    "train_samples_per_second": 13.82,
+    "train_steps_per_second": 1.727
 }

trainer_state.json

@@ -10,112 +10,112 @@
   "log_history": [
     {
       "epoch": 1.0,
-      "grad_norm": 1.2715709209442139,
+      "grad_norm": 1.1375385522842407,
       "learning_rate": 4e-05,
-      "loss": 1.3948,
+      "loss": 1.2253,
       "step": 1784
     },
     {
       "epoch": 1.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6977941989898682,
-      "eval_rouge1": 0.3931,
+      "eval_loss": 0.6576545834541321,
+      "eval_rouge1": 0.4006,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3957,
-      "eval_rougeLsum": 0.3954,
-      "eval_runtime": 113.0189,
-      "eval_samples_per_second": 6.636,
+      "eval_rougeL": 0.3969,
+      "eval_rougeLsum": 0.4007,
+      "eval_runtime": 113.3266,
+      "eval_samples_per_second": 6.618,
       "eval_steps_per_second": 0.212,
       "step": 1784
     },
     {
       "epoch": 2.0,
-      "grad_norm": 1.681906819343567,
+      "grad_norm": 1.6233590841293335,
       "learning_rate": 3e-05,
-      "loss": 0.8544,
+      "loss": 0.7893,
       "step": 3568
     },
     {
       "epoch": 2.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6352474689483643,
-      "eval_rouge1": 0.4133,
+      "eval_loss": 0.6133397817611694,
+      "eval_rouge1": 0.4188,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4123,
-      "eval_rougeLsum": 0.4139,
-      "eval_runtime": 112.0235,
-      "eval_samples_per_second": 6.695,
+      "eval_rougeL": 0.4167,
+      "eval_rougeLsum": 0.4194,
+      "eval_runtime": 112.0833,
+      "eval_samples_per_second": 6.691,
       "eval_steps_per_second": 0.214,
       "step": 3568
     },
     {
       "epoch": 3.0,
-      "grad_norm": 1.5354632139205933,
+      "grad_norm": 1.4971694946289062,
       "learning_rate": 2e-05,
-      "loss": 0.791,
+      "loss": 0.7351,
       "step": 5352
     },
     {
       "epoch": 3.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6227346062660217,
-      "eval_rouge1": 0.4051,
+      "eval_loss": 0.6062405109405518,
+      "eval_rouge1": 0.3925,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4033,
-      "eval_rougeLsum": 0.4045,
-      "eval_runtime": 112.6518,
-      "eval_samples_per_second": 6.658,
+      "eval_rougeL": 0.3898,
+      "eval_rougeLsum": 0.3908,
+      "eval_runtime": 112.7718,
+      "eval_samples_per_second": 6.651,
       "eval_steps_per_second": 0.213,
       "step": 5352
     },
     {
       "epoch": 4.0,
-      "grad_norm": 1.2380417585372925,
+      "grad_norm": 1.2644437551498413,
       "learning_rate": 1e-05,
-      "loss": 0.7631,
+      "loss": 0.7092,
       "step": 7136
     },
     {
       "epoch": 4.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6149293780326843,
-      "eval_rouge1": 0.3884,
+      "eval_loss": 0.599039614200592,
+      "eval_rouge1": 0.3834,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.3851,
-      "eval_rougeLsum": 0.3881,
-      "eval_runtime": 112.264,
-      "eval_samples_per_second": 6.681,
-      "eval_steps_per_second": 0.214,
+      "eval_rougeL": 0.381,
+      "eval_rougeLsum": 0.3826,
+      "eval_runtime": 112.5655,
+      "eval_samples_per_second": 6.663,
+      "eval_steps_per_second": 0.213,
       "step": 7136
     },
     {
       "epoch": 5.0,
-      "grad_norm": 1.1864808797836304,
+      "grad_norm": 1.0209782123565674,
       "learning_rate": 0.0,
-      "loss": 0.7508,
+      "loss": 0.6978,
       "step": 8920
     },
     {
       "epoch": 5.0,
       "eval_gen_len": 1.0,
-      "eval_loss": 0.6086911559104919,
-      "eval_rouge1": 0.4049,
+      "eval_loss": 0.5916664600372314,
+      "eval_rouge1": 0.3832,
       "eval_rouge2": 0.0,
-      "eval_rougeL": 0.4028,
-      "eval_rougeLsum": 0.4042,
-      "eval_runtime": 113.2506,
-      "eval_samples_per_second": 6.622,
+      "eval_rougeL": 0.3816,
+      "eval_rougeLsum": 0.3824,
+      "eval_runtime": 112.9978,
+      "eval_samples_per_second": 6.637,
       "eval_steps_per_second": 0.212,
       "step": 8920
     },
     {
       "epoch": 5.0,
       "step": 8920,
-      "total_flos": 7.504414428893184e+16,
-      "train_loss": 0.9108390363342559,
-      "train_runtime": 5162.3558,
-      "train_samples_per_second": 13.823,
-      "train_steps_per_second": 1.728
+      "total_flos": 7.534082864399155e+16,
+      "train_loss": 0.8313294962382637,
+      "train_runtime": 5163.645,
+      "train_samples_per_second": 13.82,
+      "train_steps_per_second": 1.727
     }
   ],
   "logging_steps": 500,
@@ -123,7 +123,7 @@
   "num_input_tokens_seen": 0,
   "num_train_epochs": 5,
   "save_steps": 500,
-  "total_flos": 7.504414428893184e+16,
+  "total_flos": 7.534082864399155e+16,
   "train_batch_size": 8,
   "trial_name": null,
   "trial_params": null