28 天on MSN
DeepSeek开源LPLB负载均衡器:线性规划助力,破解MoE训练动态失衡难题
人工智能领域迎来新突破,DeepSeek在GitHub平台开源了一款名为LPLB(Linear-Programming-Based Load Balancer)的并行负载均衡器。这款基于线性规划技术的工具,专门针对混合专家(MoE)模型的专家并行工作负载分配进行优化,其设计理念与英伟达在万卡GPU集群中的调度机制存在异曲同工之妙。
一些您可能无法访问的结果已被隐去。
显示无法访问的结果一些您可能无法访问的结果已被隐去。
显示无法访问的结果