您好,欢迎访问江南app官网!TAG标签主页

江南app体育网页版入口NPU是什么 为何它是开启终端侧生成式AI的关键

作者:小编    发布时间:2024-03-11    浏览量:

  江南app体育网页版入口生成式AI变革已经到来。随着生成式AI用例需求在有着多样化要求和计算需求的垂直领域不断增加,我们显然需要专为AI定制设计的全新计算架构。这首先需要一个面向生成式AI全新设计的神经网络处理器(NPU),同时要利用异构处理器组合,比如中央处理器(CPU)和图形处理器(GPU)。通过结合NPU使用合适的处理器江南app体育网页版入口,异构计算能够实现最佳应用性能、能效和电池续航,赋能全新增强的生成式AI体验。

  图1:正如在工具箱中选择合适的工具一样,选择合适的处理器取决于诸多因素,

  生成式AI的多样化要求和计算需求需要不同的处理器来满足。支持处理多样性的异构计算架构能够发挥每个处理器的优势,例如以AI为中心定制设计的NPU江南app体育网页版入口,以及CPU和GPU。每个处理器擅长不同的任务:CPU擅长顺序控制和即时性,GPU适合并行数据流处理,NPU擅长标量、向量和张量数学运算,可用于核心AI工作负载。

  异构计算能够实现最佳应用性能、能效和电池续航,以最大化发挥生成式AI终端用户体验。

  NPU专为实现以低功耗加速AI推理而全新打造,其架构随着新AI算法、模型和用例的发展不断演进。Al工作负载主要包括由标量、向量和张量数学组成的神经网络层计算以及非线性激活函数江南app体育网页版入口。优秀的NPU设计能够为处理这些AI工作负载做出正确的设计选择,与AI行业方向保持高度一致。

  高通正在助力让智能计算无处不在。业界领先的高通Hexagon NPU面向以低功耗实现持续稳定的高性能AI推理而设计。高通NPU的差异化优势在于系统级解决方案、定制设计和快速创新。通过定制设计NPU并控制指令集架构(ISA),高通能够快速进行设计演进和扩展,以解决瓶颈问题并优化性能。

  Hexagon NPU是高通业界领先的异构计算架构高通AI引擎中的关键处理器,高通AI引擎还包括高通Adreno GPU、高通Kryo或高通Oryon CPU、高通传感器中枢和内存子系统。这些处理器为实现协同工作而设计,能够在终端侧快速且高效地运行AI应用。

  我们在AI基准测试和实际生成式AI应用方面的行业领先性能表现就是例证。请阅读白皮书,深入了解高通NPU、我们的其他异构处理器,以及在第三代骁龙8和骁龙X Elite上业界领先的Al性能。

  图4:高通AI软件栈旨在帮助开发者一次编写,即可实现随时随地运行和规模化扩展。

  我们专注于在全球搭载高通和骁龙平台的数十亿终端设备上实现便捷开发和部署,赋能开发者。利用高通AI软件栈(Qualcomm AI Stack),开发者可在高通硬件上创建、优化和部署AI应用,一次编写即可实现在不同产品和细分领域采用高通芯片组解决方案进行部署。

  通过将技术领导力、定制芯片设计、全栈AI优化和生态系统赋能充分结合,高通技术公司在推动终端侧生成式AI开发和应用方面独树一帜。高通技术公司正在赋能终端侧生成式AI的规模化扩展。

推荐新闻

在线客服 :

服务热线:400-123-4567

电子邮箱: admin@mnk-elevator.com

公司地址:广东省广州市天河区江南app官网工业园88号

江南app(官方)官方版-APP下载,以下简称:江南app【财运亨通,八方来财】是最安全平台之一,产品广泛,提供最新网页版登录入口,全站app下载,竞猜,电子,电竞,真人,体育,彩票,捕鱼,各种游戏等您来!

Copyright © 2012-2018 江南app(官方)官方版-APP下载IOS 安卓版 手机APP下载公司 版权所有   粤ICP备2021126237号-1