昇腾910C集群微调实录:显存、算子与通信排坑
1.6万亿参数后训练已经跑通,7B—13B微调却不能照搬CUDA脚本。三个项目的故障集中在OOM、融合算子缺失和HCCL卡死,排查顺序比盲目改参数更重要。
阅读全文关键词:万亿参数
1.6万亿参数后训练已经跑通,7B—13B微调却不能照搬CUDA脚本。三个项目的故障集中在OOM、融合算子缺失和HCCL卡死,排查顺序比盲目改参数更重要。
阅读全文公开材料披露,1000颗昇腾910C完成1.6万亿参数DeepSeek-V4-Pro全参数后训练,MFU超过30%。落到机房,排查应从HCCL拓扑、Rank映射和版本组合开始,再用Profiler定位算子与内存拷贝。
阅读全文深圳河套学院等团队用昇腾910C集群完成1.6万亿参数DeepSeek-V4-Pro全参数后训练。案例证明国产算力能进入万亿级训练,但扩到千卡后,通信、算子适配和运维稳定性才是真正考验。
阅读全文基于河套学院千卡集群训练1.6万亿参数DeepSeek-V4-Pro的实战经验,拆解网络拥塞、显存碎片化、CANN算子迁移与故障自愈中的具体陷阱,提供可复用的配置参数和监控看板搭建方法,帮助一线运维工程师少走弯路。
阅读全文深圳河套学院AI训练平台项目团队等基于昇腾910C集群完成1.6万亿参数DeepSeek-V4-Pro全参数后训练。比起“跑通”,1500余步无中断、MFU超过30%、故障率控制在0.3‰,更能说明这类国产算力集群的工程
阅读全文基于昇腾910C千卡集群训练1.6万亿参数DeepSeek-V4-Pro的实战经验,拆解显存碎片、CANN算子开发、CUDA迁移、故障恢复与推理适配中的具体陷阱,提供数据驱动的避坑方案。
阅读全文1.6万亿参数DeepSeek-V4-Pro在昇腾910C集群上完成全参数后训练,证明了国产算力能扛大模型任务。但从CUDA迁到CANN,开发者还会碰到算子、显存、调试工具三道具体的坎。
阅读全文深圳河套学院等团队依托昇腾910C集群,完成1.6万亿参数DeepSeek-V4-Pro全参数后训练。这个结果证明国产AI算力能承担更重训练任务,但园区真正要面对的,是通信、调度、迁移和运维成本。
阅读全文2026年上半年,深圳14000P智算集群点亮,1000颗昇腾910C跑通万亿参数模型。硬件堆叠过关后,算子适配、异构混部等软件缝隙成为工程师的新痛点。从CANN生态到Agentic AI推理优化,国产算力正经历从跑得到
阅读全文深圳河套学院用1000颗昇腾910C跑通了1.6万亿参数的DeepSeek-V4-Pro,故障率0.3‰。但现实机房里,昇腾、海光往往并存。怎么让这两类卡在同一集群高效协同?算子层和通信协议的适配是核心。
阅读全文6月5日,深圳河套学院联合哈工大(深圳)等团队,依托昇腾910C万卡集群完成1.6万亿参数DeepSeek-V4-Pro全参数后训练。全程脱离英伟达硬件,且由第三方主导验证了国产算力的工业级可用性。
阅读全文