7月9日,粤港澳大湾区首个“国芯训国模”万卡智算集群在广东韶关数据中心集群发布。该集群重点支撑国产超大规模参数MoE基础模型研发与国产算力环境下大模型训练与演进的关键技术突破。中国电信总经理刘桂清、韶关市委书记陈少荣、华为技术有限公司常务董事杨超斌出席活动。

该集群总投资约55亿元,总计部署30个昇腾910C国产超节点,建成9000P(FP16)统一智算资源池,是大湾区规模领先的全国产万卡训练集群。集群通过自研高速互联技术构建全对等互联架构,整体性能对标国际领先水平。网络组网层面,创新采用100T交换机,将传统三层组网优化为极简二层组网架构,有效减少网络通信时延、提升集群整体通信效率;工程技术方面,集群全程采用BIM模块化施工、管路预制、路由优化等先进技术,打通电力、机房、液冷、算力、网络全专业端到端协同建设,并全面采用冷板式液冷散热的工程技术,仅历时90天完成全部建设、调试、上线工作,相较业界标准工期缩短50%,创造国内同规模万卡智算集群建设的速度标杆,形成可复制、可推广的“广东国产万卡集群建设标准”。

集群重点保障新一代全国产万亿参数基础大模型研发攻关任务,聚焦代码生成、智能体自主决策等核心高阶能力攻坚,解决国产硬件适配难、新兴模型架构专用算子缺失、超大模型训练不稳定等难题,形成适配国产算力生态的万亿级大模型标准训练范式,实现超大模型从算力底座、训练框架、模型架构到应用落地的全栈国产化突破,形成可复制、可推广的国产算力训练超大参数大模型经验,具备重大技术创新价值。
该集群的建设投产,是大湾区落实“十五五”规划“以人工智能引领科研范式变革,抢占人工智能产业应用制高点”的具体实践,对人工智能产业布局有三大关键意义:
一是突破万亿级参数大模型研发的算力瓶颈。国产大模型正处于从千亿参数向万亿参数跨越的关键窗口期,对算力规模的需求呈指数级上升。该集群作为国家级超大规模智算新基建工程,实现了9000P统一智算资源池的集中供给,为万亿级参数基础大模型研发提供并行调优的算力工程环境,加速新一代国产大模型架构创新迭代。
二是打造“国芯训国模”的工程化验证场。算子缺失、迁移成本高等问题长期制约国产芯片有效算力发挥,该集群为超大参数国产大模型提供全链路全国产化验证环境,通过承载真实大规模训练负载,推动芯片架构与模型算法在万卡规模下实现双向迭代优化。
三是完善自主可控的国产算力生态链。基于该集群,联动国产芯片、操作系统、算法框架等上下游企业,完善“国产芯片—基础大模型—行业应用—Token运营”的完整生态链,推动国产芯片、国产训练框架的规模化应用,构建自主可控的高性能算力供给体系,构筑高端算力供应链的自主防线,筑牢人工智能产业安全底座。
此次“国芯训国模”万卡集群的投入使用,进一步强化了韶关集群作为粤港澳大湾区枢纽核心引擎的算力底座能力,依托超大规模算力集群等优势,持续推进国家模型能力跃升,助力打造全球领先的AI产业集群,支撑规模化AI应用落地,为落实国家科技自立自强提供战略性算力保障。