Repository:NousResearch/DisTrO
DisTrO: Verteiltes KI-Training über das Internet
DisTrO (Distributed Training Over-The-Internet) von Nous Research ist eine Familie verteilter Optimierer mit niedriger Latenz. Sie senkt die Kommunikationsanforderungen zwischen GPUs um drei bis vier Größenordnungen.
1058Sterne
Aus Video: Weekly AI Updates: Vulkan, Mojo, Kimi K3, and Emerging Agent Frameworks