Skip to main content
haok
Projects
flame-moe
Run groups
dclm-411m-4x
Logs
Group
Workspace
Runs
Logs
Files
Artifacts

Annavettoruzzo's group workspace

Timestamps visible
2025-05-08 07:58:20
 [2025-05-08 03:58:20] iteration    15445/   15456 | consumed samples:     15815680 | elapsed time per iteration (ms): 1074.4 | throughput per GPU (TFLOP/s/GPU): 300.2 | learning rate: 3.133575E-05 | global batch size:  1024 | lm loss: 2.999687E+00 | loss scale: 1.0 | grad norm: 0.095 | num zeros: 0 | number of skipped iterations:   0 | number of nan iterations:   0 |
2025-05-08 07:58:26
 [2025-05-08 03:58:26] iteration    15450/   15456 | consumed samples:     15820800 | elapsed time per iteration (ms): 1032.5 | throughput per GPU (TFLOP/s/GPU): 312.4 | learning rate: 3.072777E-05 | global batch size:  1024 | lm loss: 3.005994E+00 | loss scale: 1.0 | grad norm: 0.095 | num zeros: 0 | number of skipped iterations:   0 | number of nan iterations:   0 |
2025-05-08 07:58:31
 [2025-05-08 03:58:31] iteration    15455/   15456 | consumed samples:     15825920 | elapsed time per iteration (ms): 1023.6 | throughput per GPU (TFLOP/s/GPU): 315.1 | learning rate: 3.012116E-05 | global batch size:  1024 | lm loss: 2.996860E+00 | loss scale: 1.0 | grad norm: 0.099 | num zeros: 0 | number of skipped iterations:   0 | number of nan iterations:   0 |
2025-05-08 07:59:21
(min, max) time across ranks (ms):
2025-05-08 07:59:21
    evaluate .......................................: (47317.87, 47318.26)
2025-05-08 07:59:21
-------------------------------------------------------------------------------------------------------------------
2025-05-08 07:59:21
 validation loss at iteration 15456 on validation set | lm loss value: 3.007421E+00 | lm loss PPL: 2.023515E+01 |
2025-05-08 07:59:21
-------------------------------------------------------------------------------------------------------------------
2025-05-08 08:00:17
(min, max) time across ranks (ms):
2025-05-08 08:00:17
    evaluate .......................................: (55462.29, 55463.06)
2025-05-08 08:00:17
-------------------------------------------------------------------------------------------------------------
2025-05-08 08:00:17
 validation loss at iteration 15456 on test set | lm loss value: 3.007568E+00 | lm loss PPL: 2.023812E+01 |
2025-05-08 08:00:17
-------------------------------------------------------------------------------------------------------------