谷歌DeepMind推出解耦式DiLoCo分布式训练架构,通过将训练过程分散到多个异步、故障隔离的“计算孤岛”中,提升大规模AI模型训练效率,并增强对硬件故障的鲁棒性,克服传统紧密同步易受单点故障影响的局限。
Anthropic
$21
Input tokens/M
$105
Output tokens/M
200
Context Length
Google
$8.75
$70
1k
-
Openai
$420