AWS 推出了两款人工智能芯片--Trainium 和 Graviton
发布时间:2023-12-04 00:00:00

  在拉斯维加斯正在进行的 AWS re:Invent 大会上,AWS 推出了针对高性能 AI 工作负载的下一代Trainium 和 Graviton 芯片。根据 AWS 的说法,Graviton4 比 Graviton3 提供明显更好的性能、更多的内核和更多的内存带宽。Graviton 是专为云工作负载构建的人工智能芯片系列。

AWS 推出了两款人工智能芯片--Trainium 和 Gravitonxx

  第二个芯片 Trainium2 是一款高性能芯片,旨在在 Amazon Elastic Compute Cloud (EC2)  “UltraClusters”中大规模部署100,000 个独立芯片。这些 EC2 Ultracluster 旨在满足使用云的计算能力的可扩展需求。


  根据GitHub 上的 AWS 官方技术指南,该阵容中之前的芯片也以高效率和高性能为目标。例如,Graviton3E 由针对云原生工作负载优化的可扩展 Arm Neoverse V1 CPU 提供支持。Neoverse V1使用可扩展矢量扩展SVE,使Graviton3E能够适应不同的工作负载。与传统的单指令多数据 (SIMD) 架构相比,SVE 允许处理器在运行时而不是编译时适应不同的向量长度。


  向量可以被认为是并行处理的元素的集合。传统 SIMD 架构中向量处理指令的一个示例是Intel x86 指令 _mm256_add_ps 指令。该指令适用于固定大小的 256 位向量。或者,使用 SVE,计算中使用的向量的大小是在运行时动态确定的。对于需要较小计算的工作负载,可以使用较小的向量来提高能源效率。因此,AWS 称赞 Graviton 3E 的矢量处理性能提高了 35%,也就不足为奇了。


  AWS 创建 Graviton4是为了进一步提高 Graviton3E 的性能和可扩展性。Graviton4 由 Arm Neoverse V2 CPU 提供支持,Arm 表示该 CPU 可以使 Graviton3E 中使用的 Neoverse V1 的性能提高一倍。


  Graviton4还具有增强的安全功能。Neoverse V2 CPU底层采用ArmV9,由于其保密的计算架构,本质上比其前辈更加安全。除了拥有更大的 2 MB 二级缓存外,Graviton4 还实现了分支目标识别 (BTI),这是底层 Arm CPU 架构的另一个功能。这可以防止由于间接分支而执行不需要的指令,从而增强代码安全性。AWS 表示,Graviton4 的数据库速度提高了 40%,Web 应用程序速度提高了 30%,同时仍然强调安全性和可扩展性。


  人工智能或机器学习技术最重要的一个方面是训练,即使用一组数据“教授”人工智能的过程。AWS Trainium 专门针对通过云进行高性能训练计算基础设施。


  Trainium AI 加速器使用AWS NeuronCore 架构,每个加速器具有 32 GB 的带宽内内存,并提供高达 190 TFLOP 的计算能力。NeuronCore 具有用于张量多维数组计算、矢量处理和标量处理的独立引擎。


  AWS 表示,通过部署在 EC2 UltraCluster 中,Trainium2 的训练基础模型 (FM) 和大型语言模型 (LLM) 的速度比以前快四倍。AWS 还允许访问其他令人垂涎的人工智能芯片,例如 Nvidia GPU。一些 Nvidia 芯片,例如 GH200 Superchips,将可以通过 EC2 服务访问。



相关文章: 苹果凭借适用于Mac的M3处理器系列保持领先地位  lm324是什么电子元件?lm324参数/引脚图及功能等中文资料  以太网是什么?以太网属于什么网络  什么是热传递?热传递的条件与三种方式  中国首家!意行半导体推民用毫米波雷达MMIC解决方案  74hc595是什么电子元件?74hc595参数/引脚图及功能等中文资料  MLCC是什么意思?MLCC是什么电子产品?  介电常数是什么意思?介电常数越大代表什么?  Viasat和Skylo将推出用于物联网的太空网络通信设备  AA电池是什么电池?AA电池和AAA电池的区别  蝶眼传感器捕捉紫外线图像,生物仿生技术窥探光谱的新区域  TI为小型电源转换器加入 GaN FET 晶体管  TWS是什么?TWS耳机是什么耳机?  ROHM已开始量产自动校正失调电压的零漂移运算放大器  联想悄然推出了一款运行 Android 系统的商用投影仪  安规电容的作用是什么?安规电容和普通电容的区别  意法半导体宣布推出1200V耐压、车用SiC功率电源模块  什么是网关?网关是什么意思?网关和路由器的区别  Arm推出其最小且最节能的,且具备AI功能的 Cortex-M CPU  tl431是什么电子元件?tl431的参数/引脚图及功能等中文资料  443端口是什么协议?443端口是干什么的?443端口和80端口的区别  stc89c52rc是什么电子元件?stc89c52rc的参数/引脚图及功能和应用领域  ccd是什么相机?ccd相机与cmos相机有什么区别?  ST汽车级双运算放大器TSB182融合了中等电压和精度  排名前十的无晶圆厂第三季度营收达到 447 亿美元  网线插座怎么接?墙壁网线插座接法  2023 年推出的体积更小、性能更高的电容器和电阻器  多芯片系统解决了芯片复杂性,但功耗是一个挑战  lm339是什么电子元件?lm339参数/工作原理/引脚图及功能等中文资料  空调电辅热是什么意思?空调辅热功能是干嘛的?空调制热和辅热哪个好  瑞萨推出采用其自行设计的 32 位 RISC-V 内核的新 CPU  NXP新型UWB IC 系列提供安全的汽车访问  适用于 AI PC 的英特尔 Core Ultra 芯片介绍  兆芯推出最高频率达 3.70 GHz的八核CPU KX-7000  美光新的低功耗内存为元宇宙而生  全球首款AMD Linux 游戏笔记本电脑首次亮相  iTunes备份文件在哪里?不同操作系统下iTunes备份文件的位置  为什么 Li-Fi 可能比 Wi-Fi 更好?  ESIM卡是什么意思?esim卡和sim卡有什么区别  手机发热发烫是什么原因?手机发热发烫的有效解决方法  stm32f103是什么电子元件?stm32f103的功能作用和应用领域  二极管符号是什么?二极管符号怎么看方向?二极管符号正负极判断  直流接触器有什么用?直流接触器和交流接触器的区别  意法半导体推出新款低功耗、高灵活性无线MCU  Siglent 推出新款旗舰数字存储示波器  什么是与非门?与非门的3种表示符号与逻辑表达式  活性炭是什么东西?活性炭的作用是什么?  瑞萨电子提升32位MCU中24位ADC的性能  混合信号IP行业公司声称推出“世界首款”800G 以太网 DSP  焦距是什么意思?镜头焦距公式与换算