Skip to main content
eleutherai
Projects
pythia
Run groups
v2-12B-deduped_3o3t1gti
Logs
Group
Workspace
Runs
Logs
Files
Artifacts

Atmallen8's group workspace

Timestamps visible
2023-02-24 14:40:47
Added key: store_based_barrier_key:319 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:319 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:320 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:320 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:321 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:321 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:322 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:322 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:323 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:323 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:324 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:324 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:325 to store for rank: 224
2023-02-24 14:40:47
Rank 224: Completed store-based barrier for key:store_based_barrier_key:325 with 256 nodes.
2023-02-24 14:40:47
Added key: store_based_barrier_key:326 to store for rank: 224
2023-02-24 14:40:57
Waiting in store based barrier to initialize process group for rank: 224, key: store_based_barrier_key:326 (world_size=256, worker_count=252, timeout=0:30:00)
2023-02-24 14:40:59
wandb: 429 encountered (Filestream rate limit exceeded, retrying in 2.1530080487218632 seconds), retrying request
2023-02-24 14:41:03
wandb: 429 encountered (Filestream rate limit exceeded, retrying in 4.294168939270645 seconds), retrying request