昇腾910D集群避坑:多机通信带宽瓶颈与HCCL调优实战
针对昇腾910D大规模集群训练中常见的通信瓶颈问题,本文通过实测数据分析多机AllReduce延迟原因,提供一套从拓扑感知到HCCL参数调优的实操方案,旨在将千卡集群的MFU(模型算力利用率)从30%量级提升至50%以上
阅读全文关键词:通信带宽
针对昇腾910D大规模集群训练中常见的通信瓶颈问题,本文通过实测数据分析多机AllReduce延迟原因,提供一套从拓扑感知到HCCL参数调优的实操方案,旨在将千卡集群的MFU(模型算力利用率)从30%量级提升至50%以上
阅读全文2026年6月,深圳河套学院宣布基于昇腾910C完成1.6万亿参数模型训练,硅基流动与华为的论文显示CloudMatrix384集群推理性能超越H100。但同期一家头部电商的推荐模型迁移却遭遇算子缺失、通信瓶颈、软件栈碎
阅读全文一家200亿美元AI公司实测华为910C千卡集群,训练速度只有预期67%。通信带宽(HCCS 100GB/s vs NVLink 900GB/s)和软件迁移是主因。英伟达Blackwell Ultra性能翻倍但交付或延至
阅读全文