觀點網訊:近日,月之暗面開源2.8萬億參數旗艦模型KimiK3.1Pro。
摩爾線程基於旗艦級AI訓推一體智算卡MTTS5000與MUSA軟件棧,完成該模型的訓練適配。
摩爾線程構建了原生FSDP2多模態訓練路徑,打通了從模型加載、分片調度到梯度同步的完整訓練鏈路。
近日,月之暗面開源2.8萬億參數旗艦模型KimiK3.1Pro。摩爾線程基於旗艦級AI訓推一體智算卡MTTS5000與MUSA軟件棧完成該模型訓練適配,構建原生FSDP2多模態訓練路徑,打通完整訓練鏈路。
觀點網訊:近日,月之暗面開源2.8萬億參數旗艦模型KimiK3.1Pro。
摩爾線程基於旗艦級AI訓推一體智算卡MTTS5000與MUSA軟件棧,完成該模型的訓練適配。
摩爾線程構建了原生FSDP2多模態訓練路徑,打通了從模型加載、分片調度到梯度同步的完整訓練鏈路。
免責聲明:本文内容與數據由觀點根據公開信息整理,不構成投資建議,使用前請核實。