新京報貝殼財經(jīng)訊(記者羅亦丹)2月5日,百度智能云在官方公號發(fā)文稱,近日成功點亮昆侖芯三代萬卡集群,這也是國內(nèi)首個正式點亮的自研萬卡集群。此外,百度智能云還將進一步點亮3萬卡集群,百度通過自研芯片和大規(guī)模集群的建設,除了解決自身算力供應的問題外,還能為整個行業(yè)提供新的思路和方向。


從算力上看,超大規(guī)模并行計算能力可實現(xiàn)訓練效率躍升,萬卡集群可將千億參數(shù)模型的訓練周期大幅降低,滿足AI原生應用快速迭代的需求。同時它也能支持萬億參數(shù)模型、復雜任務和多模態(tài)數(shù)據(jù),支撐Sora類應用的開發(fā)。此外,萬卡集群能夠支持多任務并發(fā)能力,通過動態(tài)資源切分,單集群可同時訓練多個輕量化模型,通過通信優(yōu)化與容錯機制減少算力浪費,實現(xiàn)訓練成本指數(shù)級下降。


過去,多芯混訓和激增的故障率等難題是萬卡集群部署過程中的巨大挑戰(zhàn)。對此,在2024年9月升級的百度百舸AI異構(gòu)計算平臺4.0,在萬卡集群的建設中發(fā)揮了重要作用。此外,百度智能云千帆平臺還在2月3日正式上架了 DeepSeek-R1和 DeepSeek-V3模型,此次接入的模型已全面融合千帆推理鏈路。


編輯 姜樊

校對 劉軍