edunov

| model transformer_wmt_en_de_big, criterion LabelSmoothedCrossEntropyCriterion
| num. model params: 280870912 (num. trained: 280870912)
| training on 128 GPUs
| max tokens per GPU = 3584 and max sentences per GPU = None
| no existing checkpoint found /checkpoint/edunov/20190331/wmt19en2ru.ffn8192.transformer_wmt_en_de_big_bsz3584_lr0.0007_dr0.2_size_updates100000_seed1_lbsm0.1_size_sa0/checkpoint_last.pt
| WARNING: overflow detected, setting loss scale to: 64.0
| WARNING: overflow detected, setting loss scale to: 32.0
| WARNING: overflow detected, setting loss scale to: 16.0
| epoch 001:    100 / 2011 loss=13.434, nll_loss=13.202, ppl=9421.72, wps=157149, ups=0, wpb=411387.520, bsz=12721.398, num_updates=98, lr=1.72476e-05, gnorm=2.165, clip=0.000, oom=0.000, loss_scale=16.000, wall=257, train_wall=53
| WARNING: overflow detected, setting loss scale to: 16.0

edunov

2017-09-21 17:21:20.683427: I tensorflow/core/common_runtime/gpu/gpu_device.cc:1045] Creating TensorFlow device (/gpu:0) -> (device: 0, name: Tesla P100-SXM2-16GB, pci bus id: 0000:06
:00.0)
2017-09-21 17:21:20.683485: I tensorflow/core/common_runtime/gpu/gpu_device.cc:1045] Creating TensorFlow device (/gpu:1) -> (device: 1, name: Tesla P100-SXM2-16GB, pci bus id: 0000:0$
:00.0)
2017-09-21 17:21:20.683493: I tensorflow/core/common_runtime/gpu/gpu_device.cc:1045] Creating TensorFlow device (/gpu:2) -> (device: 2, name: Tesla P100-SXM2-16GB, pci bus id: 0000:0$
:00.0)
2017-09-21 17:21:20.683502: I tensorflow/core/common_runtime/gpu/gpu_device.cc:1045] Creating TensorFlow device (/gpu:3) -> (device: 3, name: Tesla P100-SXM2-16GB, pci bus id: 0000:0$
:00.0)
2017-09-21 17:21:20.683529: I tensorflow/core/common_runtime/gpu/gpu_device.cc:1045] Creating TensorFlow device (/gpu:4) -> (device: 4, name: Tesla P100-SXM2-16GB, pci bus id: 0000:8$
:00.0)

edunov

Indien und Japan treffen sich in Tokio
Indiens neuer Premierminister Narendra Modi trifft sich mit seinem japanischen Amtskollegen Shinzo Abe in Tokio um über wirtschaftliche und sicherheitspolitische Beziehungen zu diskut
ieren
Herr Modi ist auf einer fünftägigen Reise nach Japan unterwegs und stärkt die wirtschaftlichen Beziehungen zur drittgrößten Wirtschaft der Welt
oben auf der Tagesordnung stehen Pläne für eine verstärkte nukleare Zusammenarbeit
Auch Indien hofft offenbar auf ein Abkommen zur Verteidigungszusammenarbeit zwischen den beiden Nationen
Karratha Polizei Verhaftung 20 Jahre nach Hochgeschwindigkeitsmotorradjagd
Ein Motorrad wurde beschlagnahmt nach 125km / h in einer 70 km / h Zone und durch Buschland zur Flucht der Polizei in der Pilbara
Die Verkehrspolizei auf Patrouillen in Karratha hat heute Morgen versucht über einen blauen Motorrad zu ziehen
Die Polizei sagt der Fahrer dann nicht zu stoppen und weiter an der Burgess Road fortzufahren

edunov

Indien und Japan treffen sich in Tok@@ io
Indi@@ ens neuer Premierminister Nar@@ end@@ ra Mo@@ di trifft sich mit seinem japanischen Amts@@ kol@@ legen Shin@@ zo A@@ be in Tok@@ io um über wirtschaftliche und sicherheits@@ po
litische Beziehungen zu diskutieren
Herr Mo@@ di ist auf einer fünf@@ tä@@ gigen Reise nach Japan unterwegs und stärkt die wirtschaftlichen Beziehungen zur dritt@@ größten Wirtschaft der Welt
oben auf der Tagesordnung stehen Pläne für eine verstärkte nu@@ kle@@ are Zusammenarbeit
Auch Indien hofft offenbar auf ein Abkommen zur Verteidigungs@@ zusammenarbeit zwischen den beiden Nationen
Kar@@ ra@@ th@@ a Polizei Ver@@ haf@@ tung 20 Jahre nach Hoch@@ gesch@@ windigkeits@@ motor@@ rad@@ j@@ ag@@ d
Ein Motor@@ rad wurde besch@@ lag@@ nah@@ mt nach 12@@ 5@@ km / h in einer 70 km / h Zone und durch Bu@@ sch@@ land zur Flu@@ cht der Polizei in der Pil@@ bar@@ a
Die Verkehrs@@ polizei auf Pat@@ rou@@ il@@ len in Kar@@ ra@@ th@@ a hat heute Morgen versucht über einen blauen Motor@@ rad zu ziehen