寒武纪:专注智能芯片研发 重点优化训练推理场景

导读 小枫来为解答以上问题。寒武纪:专注智能芯片研发 重点优化训练推理场景,这个很多人还不知道,现在让我们一起来看看吧~.~!  寒武纪是智...

小枫来为解答以上问题。寒武纪:专注智能芯片研发 重点优化训练推理场景,这个很多人还不知道,现在让我们一起来看看吧~.~!

  寒武纪是智能芯片领域全球知名的新兴公司,自 2016 年 3 月成立以来,寒武纪先后推出了用于终端场景的寒武纪 1A、寒武纪 1H、寒武纪 1M 系列智能处理器;基于思元 100、思元 270、思元 290 芯片和思元 370 的云端智能加速卡系列产品;基于思元 220 芯片的边缘智能加速卡。

  寒武纪能提供云边端一体、软硬件协同、训练推理融合、具备统一生态的系列化智能芯片产品和平台化基础系统软件。公司重点推动智能处理器微架构及指令集的迭代优化工作。新一代智能处理器微架构及指令集将对自然语言处理大模型、视频图像生成大模型及推荐系统大模型的训练推理等场景进行重点优化。同时公司持续推进训练和推理软件平台研发:

  (1) 训练软件平台: 公司持续增加框架算子的支持数量,完善大模型的训练软件栈研发,进行了多个大模型的微调及预训练支持工作,在大模型训练的性能和精度方面都取得了较强的竞争力,且计算效率达到了业界领先水平。

  (2) 推理软件平台: 公司开发了支持大语言模型和多模态 AIGC 推理业务的基础软件,并对传统模型和生成式大模型进行了持续性能优化,加速了实际应用部署。公司研发了分布式推理加速库 BangTransformer, 大模型推理达到了业界领先的模型计算效率。

  寒武纪掌握的智能处理器指令集、智能处理器微架构、智能芯片编程语言、智能芯片数学库等核心技术,具有壁垒高、研发难、应用广等特点,对集成电路行业与人工智能产业具有重要的技术价值、经济价值和生态价值。

来源:IT之家

以上就是关于【寒武纪:专注智能芯片研发 重点优化训练推理场景】的相关内容,希望对大家有帮助!

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时候联系我们修改或删除,多谢。