DeepSeekはオープンソースの最適化並列戦略を発表しました。

ChainCatcher のメッセージによると、金十の報道で、Deepseek はオープンソースウィークの第4日目にオープンソースの最適化並列戦略を発表しました。その中には、DualPipe------V3/R1 トレーニングにおける計算-通信オーバーラップのための双方向パイプライン並列アルゴリズム；EPLB------V3/R1 用の専門家並列負荷バランサー；および V3/R1 における計算-通信オーバーラップの分析が含まれています。