DeepSeek開源周第二日:開源DeepEP通信庫
鈦媒體App 2月25日消息,DeepSeek官宣,今日開源DeepEP,第一個用于MoE模型訓(xùn)練和推理的開源EP通信庫。特點有:高效、優(yōu)化的全員溝通;節(jié)點內(nèi)和節(jié)點間均支持NVLink和RDMA;用于訓(xùn)練和推理預(yù)填充的高吞吐量內(nèi)核;用于推理解碼的低延遲內(nèi)核;原生FP8調(diào)度支持;靈活的GPU資源控制,實現(xiàn)計算-通信重疊。
本文內(nèi)容僅供參考,不構(gòu)成投資建議,請謹(jǐn)慎對待。
根據(jù)《網(wǎng)絡(luò)安全法》實名制要求,請綁定手機號后發(fā)表評論