谷歌 DeepMind 推出解耦式 DiLoCo：提升異步訓練架構，容忍硬件故障

谷歌DeepMind推出解耦式DiLoCo分佈式訓練架構，通過將訓練過程分散到多個異步、故障隔離的“計算孤島”中，提升大規模AI模型訓練效率，並增強對硬件故障的魯棒性，克服傳統緊密同步易受單點故障影響的侷限。