KimiAI:已经开源了 MoonEP,这是针对分布式 MoE 工作负载打造的高性能通信库。MoonEP 旨在提升大规模场景下专家并行通信效率,帮助降低大型 MoE 模型在训练和推理系统中的通信开销。
 
 
Back to Top