Skip to main content

Kastan's group workspace

Timestamps visible
2022-06-22 16:18:21
                    INFO     colossalai - colossalai - INFO: Before-train: GPU: allocated 946.51 MB, max allocated 1020.5 MB, cached: 1068.0
2022-06-22 16:18:21
                             MB, max cached: 1068.0 MB
2022-06-22 16:18:21
                    INFO     colossalai - colossalai - INFO: train_gpt.py:223 before_train
2022-06-22 16:18:21
                    INFO     colossalai - colossalai - INFO: training starts
2022-06-22 16:26:09
[Epoch 0 / Train]:  42%|████████████████▉                       | 887/2099 [07:48<04:01,  5.02it/s, Tflops=114, loss=32.1, samples_per_sec=189]
2022-06-22 16:19:14
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:19:16
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:19:48
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:19:54
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:20:07
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:21:45
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:21:52
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:23:19
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:23:37
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:24:16
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:24:45
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:24:57
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:25:43
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)
2022-06-22 16:25:56
Error when collecting samples_per_sec, Tflops... not enough values to unpack (expected 2, got 1)