Google DeepMind·· 2026-04-22AI 评分58
Google DeepMind 提出 Decoupled DiLoCo 分布式 AI 训练架构
Decoupled DiLoCo: A new frontier for resilient, distributed AI training
AI 导读
Google DeepMind 发布 Decoupled DiLoCo 论文,提出将训练任务拆分到相互解耦的 learner units 计算岛,并通过异步数据流降低跨数据中心带宽需求。
来源:Google DeepMind · deepmind.google