EN 提交工具
产品

Kimi 开源高性能 MoE 通信库 MoonEP

发布时间: 信源:X:Kimi.ai (@Kimi_Moonshot)

分享XFacebook微博

我们已开源 MoonEP,这是我们为分布式 MoE 工作负载打造的高性能通信库。它旨在让大规模专家并行通信更高效,有助于减少大型 MoE 训练和推理系统中的通信开销。 在 GitHub 上探索:http://github.com/MoonshotAI/MoonEP

阅读原文 (在新窗口打开)

资讯动态数据由 AI HOT 聚合提供

相关资讯同类最新动态
· X:Greg Brockman (@gdb)
· Ars Technica:AI(RSS)
· X:Testing Catalog (@testingcatalog)