開放
Integrate LucidRain's RotaryEmbeddings
enhancementgood first issue
2 則留言0 個反應0 負責人
議題
開放
Remove apex dependency after PyTorch 2.0?
better-enggood first issue
3 則留言0 個反應1 負責人
開放
Remove Megatron dependency - move entirely to Fairscale
better-enggood first issue
1 則留言0 個反應1 負責人
開放
Convert string matches to enum comparison if possible
better-engconfigenhancementgood first issue
4 則留言0 個反應0 負責人
開放
Unify tokenizers
better-engenhancementgood first issue
1 則留言1 個反應1 負責人
開放
Add Model FLOPS Utilization and Hardware FLOPS utilization % to the logs.
better-engenhancementgood first issuetelemetry
2 則留言6 個反應0 負責人
開放
Track all of our RNG offsets to avoid collisions
enhancementgood first issue
0 則留言0 個反應0 負責人
開放
Add tests for MultiplePadDataset class
better-engenhancementgood first issue
2 則留言0 個反應0 負責人