谷歌发布第七代AI芯片TPU Ironwood:专为推理设计,算力提升10倍至4614 TFLOPs

发布时间:2025-04-10 阅读量:1127 来源: 综合自网络 发布人: wenwei

【导读】当地时间4月9日,谷歌在美国“Google Cloud Next 25”大会上正式推出第七代TPU芯片Ironwood,这是其首款专为AI推理任务设计的处理器。Ironwood单芯片峰值算力达4,614 TFLOPs,较前代Trillium提升10倍,并首次支持FP8计算格式以优化推理效率。其HBM容量增至192GB(Trillium的6倍),带宽提升至7.2Tbps,结合芯片间互连(ICI)带宽翻倍至1.2Tbps,大幅减少数据传输瓶颈。此外,Ironwood能效比达到Trillium的2倍,支持液冷方案,可扩展至单Pod 9,216颗芯片,总运算能力达42.5 Exaflops,为当前最强超算的24倍,适用于超大规模LLM和MoE模型训练与推理。


据介绍,Ironwood是谷歌首款在其张量核和矩阵数学单元中支持 FP8 计算的 TPU,此前谷歌的 TPU 仅支持用于推理的 INT8 格式和处理以及用于训练的 BF16 格式和处理。Ironwood 芯片还拥有第三代 SparseCore 加速器,该加速器首次在 TPU v5p 中首次亮相,并在去年的 Trillium 芯片中得到了增强。SparseCore 芯片最初旨在加速推荐模型,这些模型利用嵌入来跨用户类别进行推荐。Ironwood 芯片中的第三代 SparseCore 编码了各种算法,以加速金融和科学计算,但具体细节未透露。


Ironwood还大幅增加高频宽內存(HBM)容量,每颗芯片的HBM容量提高到了192GB,达到了Trillium的6倍,可处理更大型的模型和数据集运算,减少频繁的数据传输需求,提升整体性能。同时,HBM带宽也大幅提升,Ironwood单颗芯片的内存带宽可达7.2Tbps,是Trillium的4.5倍。如此高速的带宽可确保数据快速存取。


谷歌还强化了Ironwood芯片间互连(Inter-Chip Interconnect,ICI)带宽,双向传输提高至1.2Tbps,是Trillium的1.5倍,如此一来加速芯片间的通信,提升大型分布式训练和推理的效率。


17.jpg

Ironword 封装包括计算芯片上方的中央小芯片,以及沿顶部边缘的HBM上方的另外两个小芯片。这些无疑是谷歌用于将 TPU 芯片电气连接成 pod 的芯片间互连 (ICI) 的 I/O 芯片。更大的 TPU 聚合与谷歌的“Jupiter”光电路开关进一步捆绑在一起。


总体来看,得益于计算核心、HBM等多方面的提升,Ironword单芯片峰值算力可达4,614 TFLOPs,达到了上一代 Trillium的10倍。


18.jpg

近三代谷歌TPU产品比较


在提升性能的同时,谷歌还提升了“Ironwood”能效表现。据介绍,相比 2024年推出的第六代TPU “Trillium”,Ironwood的性能功耗比达到了Trillium的2倍。Ironwood 还可结合先进的液冷解决方案和芯片设计优化,即使持续面对繁重AI工作负载,也能维持相比标准气冷高出近2倍的性能。


Ironwood 根据客户对AI工作负载的需求提供2种规模配置,分别是面向推理的256个计算引擎的版本、面向训练的9,216个计算引擎的版本。


19.jpg


当扩展至每个Pod达到9,216颗晶片时,总运算能力可达42.5 Exaflops,是世界上最大的超级电脑El Capitan的24倍以上,El Capitan每个Pod仅提供1.7 Exaflops。由于Ironwood提供大规模运算能力,能够支持最严苛的AI工作负载,例如用于训练和推理、具备思考能力的超大型密集LLM或MoE。


Ironwood 还配备增强版的SparseCore,这是一种专门用于处理进阶排序和推荐系统工作负载常见的超大规模嵌入加速器。此外,Google DeepMind 开发的机器学习执行阶段构架Pathways,可在多个TPU间达成高效的分布式运算。Google Cloud 上的Pathways让客户轻易超越单个Ironwood Pod的限制,将数十万颗芯片组合在一起,快速推进AI发展。


Ironwood的发布标志着谷歌在AI芯片领域的技术跃进,其增强版SparseCore加速器和Pathways分布式架构进一步强化了复杂推荐系统与科学计算的能力。尽管英伟达仍主导AI芯片市场,但谷歌正通过TPU系列(如Ironwood、Trillium)与亚马逊Trainium、微软Maia等展开竞争。随着Ironwood加入谷歌云服务,其在支持超大规模AI模型和定制化工作负载上的优势,或将成为企业级客户选择云平台的关键筹码。



推荐阅读:


长电科技2024年净利增9.5% 2025Q1预增50% 美国关税政策“基本无直接影响”

智驾未来 芯创生态|ST 2025慕尼黑上海电子展科技盛宴即将启幕

粤港澳大湾区领航全球电子产业革新 CITE2025启幕勾勒AI与低空经济新纪元

SK海力士突破第六代DRAM量产门槛!1c制程良率飙升至80%,HBM领域仍需等待

三星电子启动内部人力大调整 全力押注HBM4争夺AI芯片市场主导权



相关资讯
国产替代新突破!士兰微32位MCU增长36%,全方案变频空调加速量产

4月18日,国内功率半导体龙头企业士兰微(股票代码:600460)发布2024年年度报告。报告显示,公司实现营业收入112.21亿元,同比大幅增长20.14%;归母净利润2.2亿元,成功实现扭亏为盈。公司拟向全体股东每10股派发现金红利0.40元(含税),合计派发6656.29万元。

国产CMOS王者崛起:思特威2024年净利暴增26倍创纪录

4月18日,思特威(SmartSens)交出一份堪称现象级的成绩单:2024年净利润同比狂飙2662%至3.93亿元,营收突破59.68亿元实现翻倍增长;2025年一季度延续高增态势,净利润同比暴涨1264.97%达1.91亿元。在智能手机高阶5000万像素突围、智能驾驶车载传感器放量、安防产品技术反超国际大厂的三重引擎推动下,这家国产图像传感器龙头市占率从三年前的2.1%跃升至4.8%,成为全球CMOS赛道最强劲的「中国加速度」。据中信证券测算,其技术代际差距已从3-5年缩短至1年内,国产替代进程迈入质变阶段。

中国脑机接口技术突破:全链条自主可控,解码大脑重塑未来

脑机接口(BCI)技术正从实验室走向临床应用,成为全球科技竞争的新高地。中国科研团队近期在侵入式、半侵入式脑机接口领域实现多项突破,不仅打破关键技术进口依赖,更在全链条自主可控的基础上,将脑机接口的精准解码能力推向国际前沿。从渐冻症患者重获语言交流能力到高位截瘫患者用意念操控游戏,中国技术正为人类脑科学研究和医疗康复开辟全新路径。

金升阳LI(F)75-240W-R2S系列导轨电源上市:高性价比+超薄设计,破解行业供电痛点

近日,金升阳正式发布LI(F)75-240W-R2S系列金属导轨电源,覆盖75W、120W、150W、240W四款功率型号,以“小体积、高性价比、强性能”为核心优势,精准匹配工控、电力、安防等行业对紧凑空间、成本控制及稳定供电的严苛需求,成为工业场景电源方案的革新之选。

康佳重组:挑战、机遇与破局之道——兼论2024年财务数据与行业竞争格局

作为中国最早的家电品牌之一,康佳集团自1980年成立以来,曾凭借彩电业务稳居行业龙头。但在智能化转型与跨界竞争中,其市场份额逐渐被TCL、创维等对手挤压。2023年启动的重组计划,正是应对多重危机的关键举措。