国产算力训练，华为宣布开源盘古7B稠密和72B混合专家模型

APP下载

扫一扫

下载观察者APP

国产算力训练，华为宣布开源盘古7B稠密和72B混合专家模型
- 吕栋lvdong@guancha.cn
分享到：

2025-06-30 10:28:04 字号：A- A A+ 来源：观察者网

（文/观察者网吕栋编辑/张广凯）

6月30日早上，华为正式宣布开源盘古70亿参数的稠密模型、盘古Pro MoE 720亿参数的混合专家模型和基于昇腾的模型推理技术。

华为表示，此举是华为践行昇腾生态战略的又一关键举措，推动大模型技术的研究与创新发展，加速推进人工智能在千行百业的应用与价值创造。

根据公告，盘古Pro MoE 72B模型权重、基础推理代码，已正式上线开源平台。基于昇腾的超大规模MoE模型推理代码，已正式上线开源平台。盘古7B相关模型权重与推理代码将于近期上线开源平台。

5月底，华为曾披露，盘古Pro MoE大模型，在参数量仅为720亿，激活160亿参数量的情况下，通过动态激活专家网络的创新设计，实现了以小打大的优异性能，甚至可以媲美千亿级模型的性能表现。在业界权威大模型榜单SuperCLUE最新公布的2025年5月排行榜上，位居千亿参数量以内大模型排行并列国内第一。

“盘古72B是兼顾性能与推理成本的黄金尺寸，最适合行业用户用AI改造业务。”华为专家曾表示。

随后在6月，有华为技术专家告诉观察者网，华为初步计划会向外开源，首先是盘古72B MoE模型是最有可能开源的模型。其次是小模型，有可能会给高校开源。

“我们以前很少对外发声，盘古也没有开源，所以大家对昇腾算力具体的情况不是特别了解，对模型的情况也不了解，外界就充满了猜疑。甚至认为昇腾训练不出来先进的大模型。昇腾算力能够训练出世界一流的大模型，训练高效率，推理高性能，系统高可用。第三方模型迁移到昇腾上可以做到：Day0迁移，一键部署。”他说道。

除了前述两款模型，华为近期还推出了参数规模达7180亿新模型——盘古Ultra MoE，全流程在昇腾AI计算平台上训练。华为同时发布盘古Ultra MoE模型架构和训练方法的技术报告，披露众多技术细节。

“生态方面我们还需要努力。我们技术上会持续改进，昇腾的生态也在逐步完善，也包括对业界主流生态的兼容，全力支持好客户的发展，昇腾未来一定会越来越好。”前述技术专家对观察者网表示。

当时他透露，华为盘古718B Ultra MoE万卡集群预训练MFU（模型算力利用率）达到41%，实验室已达到45%；CloudMatrix384超节点训练MoE大模型，MFU超过50%。

“昇腾超节点的是全对等高速互联的架构，基于系统工程的方法，对计算、内存、通信的极致优化调度，并结合昇腾特点的亲和设计和数学算法创新，实现了超级并行，后续欧拉操作系统的优化升级支持各种资源的池化管理与调度，实现业务驱动的系统最佳匹配，训练效率、推理性能还能再上一个台阶。”这位专家表示。

近期在华为开发者大会（HDC 2025）上，华为云还发布了盘古大模型5.5，对自然语言处理（NLP）、计算机视觉（CV）、多模态、预测、科学计算五大基础模型进行升级。同时，基于CloudMatrix 384超节点的新一代昇腾AI云服务全面上线。

本文系观察者网独家稿件，未经授权，不得转载。
|

举报
- 违反法律法规
- 垃圾信息、广告
- 色情、淫秽信息
- 人身攻击
- 谣言、不实信息
- 冒充，冒用信息
- 破坏社区秩序
- 其他
- 涉未成年人有害信息
观察者网举报制度规范
确定取消
标签华为昇腾
- 责任编辑: 吕栋
- 德国要求下架DeepSeek；英伟达聘中国AI专家；小米回应YU7刹车片起火
  
  2025-06-30 09:08 观网财经-科创
- OpenAI最新点名的中国竞争对手，不是DeepSeek
  
  2025-06-29 18:21 观网财经-互联网
- 黄仁勋亲自招募两位AI专家加入英伟达，本科均毕业于清华
  
  2025-06-29 17:22 观网财经-科创
- 海康威视：加拿大政府无端指控，罔顾事实
  
  2025-06-29 15:59 观网财经-科创
- 快手大模型加持：AI版《爱，死亡，机器人》上线
  
  2025-06-29 15:37 观网财经-互联网
- 中国稀土集团声明：各项工作未因相关人员变动受到影响
  
  2025-06-29 13:23 大公司
- if椰子水母企招股超购2220倍，中签率创近年新低
  
  2025-06-27 21:27 观网财经-消费
- 招商蛇口全面取消区域公司，大型房企组织架构“扁平化”成趋势
  
  2025-06-27 19:52 观网财经-房产
- 集资诈骗244亿！“山海集团”周志峰被判无期
  
  2025-06-27 19:34 依法治国
- 国产芯片迎来资本“及时雨”
  
  2025-06-27 18:50 观网财经-科创
- 鸿蒙的世界里，没有旁观者
  
  2025-06-27 18:20 观网财经-科创
- 腾讯混元开源首款混合推理MoE模型
  
  2025-06-27 18:12 观网财经-互联网
- 特朗普集团悄悄撤下“美国制造”手机承诺
  
  2025-06-27 17:06 观网财经-科创
- 小米回应“前总监大瓜”和猫王音响创始人争议言论
  
  2025-06-27 16:35 观网财经-科创
- 每晚7000仍不盈利，高端月子中心圣贝拉的困境与野心
  
  2025-06-27 16:35 观网财经-消费
- 高度依赖“山茶花精华油”的林清轩，或将推出新品牌“华嫆庄”
  
  2025-06-27 16:21 观网财经-消费
- 飞天茅台一度跌破1800元盈亏线，白酒调整远未筑底？
  
  2025-06-27 15:51 观网财经-消费
- 京东回应“试点全职骑手帮扔垃圾”：无强制，仍在早期讨论阶段
  
  2025-06-27 14:02 观网财经-互联网
- 美团王莆中：中国已是全球服务消费最便利国家，线上化潜力巨大
  
  2025-06-27 13:03 观网财经-互联网
- 5元咖啡霸主加速扩张，幸运咖全国门店数突破6000家
  
  2025-06-27 13:03 观网财经-消费
搜索

   观察者头条查看全部

“轻松的一天”，随行高管们非常期待… 评论 0

东南亚多国表态，“缅甸措辞最严，坚定站队中方” 评论 114

呵呵，“‘民主国家’看不上中国技术”？评论 309

普京访印：美国都在买，印度凭啥不能买？评论 90

日本开发稀土担心中国干扰？日防相放话评论 138

   风闻 · 24小时最热查看全部

   最新视频查看全部
最新闻 Hot
快讯

国产算力训练，华为宣布开源盘古7B稠密和72B混合专家模型

德国要求下架DeepSeek；英伟达聘中国AI专家；小米回应YU7刹车片起火

OpenAI最新点名的中国竞争对手，不是DeepSeek

黄仁勋亲自招募两位AI专家加入英伟达，本科均毕业于清华

海康威视：加拿大政府无端指控，罔顾事实

快手大模型加持：AI版《爱，死亡，机器人》上线

中国稀土集团声明：各项工作未因相关人员变动受到影响

if椰子水母企招股超购2220倍，中签率创近年新低

招商蛇口全面取消区域公司，大型房企组织架构“扁平化”成趋势

集资诈骗244亿！“山海集团”周志峰被判无期

国产芯片迎来资本“及时雨”

鸿蒙的世界里，没有旁观者

腾讯混元开源首款混合推理MoE模型

特朗普集团悄悄撤下“美国制造”手机承诺

小米回应“前总监大瓜”和猫王音响创始人争议言论

每晚7000仍不盈利，高端月子中心圣贝拉的困境与野心

高度依赖“山茶花精华油”的林清轩，或将推出新品牌“华嫆庄”

飞天茅台一度跌破1800元盈亏线，白酒调整远未筑底？

京东回应“试点全职骑手帮扔垃圾”：无强制，仍在早期讨论阶段

美团王莆中：中国已是全球服务消费最便利国家，线上化潜力巨大

5元咖啡霸主加速扩张，幸运咖全国门店数突破6000家

“轻松的一天”，随行高管们非常期待…

“特朗普对高市早苗措辞非常严厉，甚至还说了……”

扎心了！美新版国安战略，辣评欧洲

东南亚多国表态，“缅甸措辞最严，坚定站队中方”

打造美版深圳！他给特朗普画饼，被曝“近乎科幻”

无视美国，莫迪宣布：印俄已同意…

“二次打击”还没解释清，美军袭击又致4死

欧盟，“罚酒三杯”？

呵呵，“‘民主国家’看不上中国技术”？

普京访印：美国都在买，印度凭啥不能买？

“白宫‘慌乱应对’，想赢中国，支持得到位啊”

国安战略报告迟迟未出，“美财长要求软化对华措辞”

自民党“黑金”丑闻“吹哨人”再出手，这次是高市

“彻底反转了，中国是发达国家，我们才是新兴国家”

“华德858”轮触礁断裂

机密通话曝光！“美国恐将背叛，你要小心”