华为正式开源盘古大模型,推动AI技术创新与应用发展

华为在近期的一次重要宣布中,正式揭开了其在大模型技术领域的又一里程碑。此次,华为不仅推出了盘古70亿参数的稠密模型,还带来了盘古Pro MoE这一拥有720亿参数的混合专家模型,并配套发布了基于昇腾的模型推理技术。
这一系列的开源举措,被视为华为在推动昇腾生态战略实施过程中的又一重要步骤。通过这些努力,华为旨在加速大模型技术的创新与发展,进一步拓宽人工智能技术在各行各业的应用边界,从而创造更大的价值。
目前,盘古Pro MoE 72B模型的权重和基础推理代码已经成功上线至开源平台,供全球开发者免费下载和使用。与此同时,基于昇腾的超大规模MoE模型推理代码也已同步上线,为开发者提供了强大的推理能力支持。
值得注意的是,盘古7B的相关模型权重与推理代码也即将在近期上线开源平台。这意味着,开发者将能够拥有更多选择,根据实际需求选用不同规模和性能的模型。
在华为此次推出的模型中,盘古Embedded 7B模型以其独特的双系统框架和元认知能力脱颖而出。该模型能够根据任务复杂度自动切换推理模式,从而在保证推理速度的同时,兼顾推理深度。在多项复杂推理基准测试中,盘古Embedded 7B模型的表现甚至超越了同量级的Qwen3-8B和GLM4-9B等模型。
而盘古Pro MoE 72B模型则采用了分组混合专家(MoGE)架构,总参数量高达720亿,但激活参数量仅为160亿。这一设计有效解决了专家负载不均的问题,提高了模型的部署效率。同时,针对昇腾硬件的深度优化,使得该模型在推理速度上达到了新的高度,最高单卡可达1528 tokens/s。在多项公开基准测试中,盘古Pro MoE 72B模型均表现出色,性能优于同规模的稠密模型。
华为官方表示,他们诚挚邀请全球的开发者、企业伙伴及研究人员下载并使用这些模型,同时期待收到大家的宝贵反馈,以便共同完善和提升这些技术。
本文链接:http://knowith.com/news-1-11777.html华为正式开源盘古大模型,推动AI技术创新与应用发展
声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
辽宁大学考研好考吗,集宁师范学院考研率怎么样
鞍山师范学院研究生院(鞍山师范学院研究生院官网)
辽宁朝阳考研究生去哪里考试(考研率最高的十大专业)
2014经济学考研辅导:宏观经济学案例分析(15)
郑州考研学校排名?郑大2023考研条件
在职教育从哪里报名 在职教育从哪里报名高考
事业编研究生免笔试(事业编研究生免笔试吗)
考公热:从“上岸心态”到“公仆情怀”有多远?
会计在职研究生考试科目(会计在职研究生考试科目有哪些)
法学研究生考试科目(法学研究生考试科目及总分)
大吉大利:广州从化区上门代还信用卡,最好还款服务,高效便捷服务
锐意进取:2024花呗怎么提现出来(试试这三个最新方法)
喜从天降:上海普陀区上门代还信用卡,真实商户积分,值得信任
安全!青岛黄岛现在套visa万事达卡太实惠了,百分百成功
流眄:成都市内信用卡垫还公司秒到账(用7个流程步骤)
108分合格,2024年法考主观题成绩今起可查
实测: 羊小咩享花卡回收商家 (羊小咩无损自套详细教程)
头条:京东套白条的店铺(白条升级消费者使用攻略)-知者
今日消息: DY月付额度怎么取现 这份教程请收藏
必看:京东白条怎么取现(五种方法提现详解)-知者