华为开源盘古7B稠密和72B混合专家模型

华为开源盘古7B稠密和72B混合专家模型

昨日早上,华为正式宣布开源盘古70亿参数的稠密模型、盘古 Pro MoE 720亿参数的混合专家模型和基于昇腾的模型推理技术。华为表示,此举是华为践行昇腾生态战略的又一关键举措,推动大模型技术的研究与创新发展,加速推进人工智能在千行百业的应用与价值创造。根据公告,盘古Pro MoE 72B模型权重、基础推理代码,已正式上线开源平台。基于昇腾的超大规模MoE模型推理代码,已正式上线开源平台。盘古7B相关模型权重与推理代码将于近期上线开源平台。除了前述两款模型,华为近期还推出了参数规模达7180亿新模型——盘古Ultra MoE。

—— 观察者网

*

发表评论 (0)
后一页 前一页