芯原超低能耗NPU可为移动端大语言模型推理提供超40 TOPS算力

公司 文传商讯

具备高能效比的架构,广泛适用于智慧手机和AI PC等终端设备

中国上海–(美国商业资讯)–芯原股份(芯原,股票代码:688521.SH)今日宣布其超低能耗且高性能的神经网络处理器(NPU)IP现已支持在移动端进行大语言模型(LLM)推理,AI算力可扩展至40 TOPS以上。该高能效NPU架构专为满足移动平台日益增长的生成式AI需求而设计,不仅能够为AI PC等终端设备提供强劲算力支持,而且能够应对智慧手机等移动终端对低能耗更为严苛的挑战。

芯原的超低能耗NPU IP具备高度可配置、可扩展的架构,支持混合精度计算、稀疏化优化和并行处理。其设计融合了高效的内存管理与稀疏感知加速技术,显著降低计算负载与延迟,确保AI处理流畅、响应迅速。该NPU支持数百种AI算法,如AI降噪(AI-NR)和AI超分(AI-SR)等,并兼容Stable Diffusion和LLaMA-7B等主流AI模型。同时,该NPU IP还可与芯原其他处理器IP无缝集成,实现异构计算,助力SoC设计者打造满足多元化应用需求的AI解决方案。

此外,芯原的超低能耗NPU IP还支持TensorFlow Lite、ONNX和PyTorch等主流AI框架,可加速客户在不同AI应用场景中的部署进程并简化集成工作。

“智能手机等移动设备正逐步演变为个人AI服务器。随着生成式AI(AIGC)和多模态大语言模型技术的快速发展,市场对AI算力的需求呈指数级增长,并已成为移动产品的关键差异化要素。”芯原首席战略官、执行副总裁、IP事业部总经理戴伟进表示,“在支持高强度AI计算负载的过程中,能耗控制是最关键的挑战之一。芯原持续深耕面向智慧手机和AI PC的超低能耗的NPU研发,并通过与主流SoC合作伙伴的紧密协作,见证了该技术在新一代智慧手机和AI PC中实现量产。”

关于芯原

芯原微电子(上海)股份有限公司(芯原股份,688521.SH)是一家依托自主半导体IP,为客户提供平台化、全方位、一站式芯片定制服务和半导体IP授权服务的企业。了解更多信息,请访问:http://www.verisilicon.com

✽本文转载自互联网,请读者仅作参考,并自行核实相关内容(BW)。

提供高算力密度的AI加速能力、多芯片扩展支持及3D堆叠内存集成能力 中国上海--(美国商业资讯)--芯原股份(芯原,股票代码:688521.SH)今日宣布其高性能、可扩展的GPGPU-AI计算IP的最新进展,这些IP现已为新一代汽车电子和边…
  • 公司
  • 17分钟前
  • 文传商讯
提供架构设计、软硬协同设计和量产支持,提升智能终端AI影像处理能力 中国上海--(美国商业资讯)--芯原股份(芯原,股票代码:688521.SH)近日宣布其AI-ISP芯片定制方案经由客户的智能手机产品已量产出货,再次彰显了芯原在AI视觉处…
  • 公司
  • 18分钟前
  • 文传商讯
低功耗且紧凑的设计便于快速集成至先进的多媒体SoC 中国上海--(美国商业资讯)--芯原股份(芯原,股票代码:688521.SH)今日宣布推出其新一代低复杂度增强视频编码(LCEVC)视频解码器IP——VC9000D_LCEVC。其与芯原的…
  • 公司
  • 4月14日
  • 文传商讯
近日,在国际文档分析与识别会议(ICDAR)举办的世界顶级赛事中,平安产险(参赛团队名称PA-VCG)在“多模态文档推理理解”这一高复杂度任务中,凭借领先的大模型技术体系与卓越的多模态理解能力,从全球众多顶尖科研机构与知名科技企业中脱颖而出…
  • 科技
  • 23小时前
  • 每日财经网
NetApp丰富的数据管理功能帮助客户加速人工智能创新 加州圣何塞--(美国商业资讯)--智能数据基础设施公司NetApp®(NASDAQ:)今日宣布NVIDIA验证了高性能NetApp企业级存储系统,该系统搭载NetApp ONTAP®,…
  • 公司
  • 3月20日
  • 文传商讯