谷歌发布第七代AI芯片TPU Ironwood:专为推理设计,算力提升10倍至4614 TFLOPs

发布时间:2025-04-10 阅读量:1440 来源: 综合自网络 发布人: wenwei

【导读】当地时间4月9日,谷歌在美国“Google Cloud Next 25”大会上正式推出第七代TPU芯片Ironwood,这是其首款专为AI推理任务设计的处理器。Ironwood单芯片峰值算力达4,614 TFLOPs,较前代Trillium提升10倍,并首次支持FP8计算格式以优化推理效率。其HBM容量增至192GB(Trillium的6倍),带宽提升至7.2Tbps,结合芯片间互连(ICI)带宽翻倍至1.2Tbps,大幅减少数据传输瓶颈。此外,Ironwood能效比达到Trillium的2倍,支持液冷方案,可扩展至单Pod 9,216颗芯片,总运算能力达42.5 Exaflops,为当前最强超算的24倍,适用于超大规模LLM和MoE模型训练与推理。


据介绍,Ironwood是谷歌首款在其张量核和矩阵数学单元中支持 FP8 计算的 TPU,此前谷歌的 TPU 仅支持用于推理的 INT8 格式和处理以及用于训练的 BF16 格式和处理。Ironwood 芯片还拥有第三代 SparseCore 加速器,该加速器首次在 TPU v5p 中首次亮相,并在去年的 Trillium 芯片中得到了增强。SparseCore 芯片最初旨在加速推荐模型,这些模型利用嵌入来跨用户类别进行推荐。Ironwood 芯片中的第三代 SparseCore 编码了各种算法,以加速金融和科学计算,但具体细节未透露。


Ironwood还大幅增加高频宽內存(HBM)容量,每颗芯片的HBM容量提高到了192GB,达到了Trillium的6倍,可处理更大型的模型和数据集运算,减少频繁的数据传输需求,提升整体性能。同时,HBM带宽也大幅提升,Ironwood单颗芯片的内存带宽可达7.2Tbps,是Trillium的4.5倍。如此高速的带宽可确保数据快速存取。


谷歌还强化了Ironwood芯片间互连(Inter-Chip Interconnect,ICI)带宽,双向传输提高至1.2Tbps,是Trillium的1.5倍,如此一来加速芯片间的通信,提升大型分布式训练和推理的效率。


17.jpg

Ironword 封装包括计算芯片上方的中央小芯片,以及沿顶部边缘的HBM上方的另外两个小芯片。这些无疑是谷歌用于将 TPU 芯片电气连接成 pod 的芯片间互连 (ICI) 的 I/O 芯片。更大的 TPU 聚合与谷歌的“Jupiter”光电路开关进一步捆绑在一起。


总体来看,得益于计算核心、HBM等多方面的提升,Ironword单芯片峰值算力可达4,614 TFLOPs,达到了上一代 Trillium的10倍。


18.jpg

近三代谷歌TPU产品比较


在提升性能的同时,谷歌还提升了“Ironwood”能效表现。据介绍,相比 2024年推出的第六代TPU “Trillium”,Ironwood的性能功耗比达到了Trillium的2倍。Ironwood 还可结合先进的液冷解决方案和芯片设计优化,即使持续面对繁重AI工作负载,也能维持相比标准气冷高出近2倍的性能。


Ironwood 根据客户对AI工作负载的需求提供2种规模配置,分别是面向推理的256个计算引擎的版本、面向训练的9,216个计算引擎的版本。


19.jpg


当扩展至每个Pod达到9,216颗晶片时,总运算能力可达42.5 Exaflops,是世界上最大的超级电脑El Capitan的24倍以上,El Capitan每个Pod仅提供1.7 Exaflops。由于Ironwood提供大规模运算能力,能够支持最严苛的AI工作负载,例如用于训练和推理、具备思考能力的超大型密集LLM或MoE。


Ironwood 还配备增强版的SparseCore,这是一种专门用于处理进阶排序和推荐系统工作负载常见的超大规模嵌入加速器。此外,Google DeepMind 开发的机器学习执行阶段构架Pathways,可在多个TPU间达成高效的分布式运算。Google Cloud 上的Pathways让客户轻易超越单个Ironwood Pod的限制,将数十万颗芯片组合在一起,快速推进AI发展。


Ironwood的发布标志着谷歌在AI芯片领域的技术跃进,其增强版SparseCore加速器和Pathways分布式架构进一步强化了复杂推荐系统与科学计算的能力。尽管英伟达仍主导AI芯片市场,但谷歌正通过TPU系列(如Ironwood、Trillium)与亚马逊Trainium、微软Maia等展开竞争。随着Ironwood加入谷歌云服务,其在支持超大规模AI模型和定制化工作负载上的优势,或将成为企业级客户选择云平台的关键筹码。



推荐阅读:


长电科技2024年净利增9.5% 2025Q1预增50% 美国关税政策“基本无直接影响”

智驾未来 芯创生态|ST 2025慕尼黑上海电子展科技盛宴即将启幕

粤港澳大湾区领航全球电子产业革新 CITE2025启幕勾勒AI与低空经济新纪元

SK海力士突破第六代DRAM量产门槛!1c制程良率飙升至80%,HBM领域仍需等待

三星电子启动内部人力大调整 全力押注HBM4争夺AI芯片市场主导权



相关资讯
华为开源CANN套件,昇腾生态开放战略迈出关键一步

在北京举行的昇腾计算产业发展峰会上,华为轮值董事长徐直军正式公布了一项重大举措:华为CANN Mind系列应用套件及工具链实现全面开源。此举旨在通过支持开发者的深度挖掘和自定义开发,显著降低昇腾AI平台的使用门槛,推动其"更好用、更易用"目标的实现,加速产业创新步伐。

三星推迟DDR4停产计划 供应链策略急转应对HBM困局

据韩国媒体The Elec最新报道,三星电子正式调整其DRAM产能规划,将原定于2025年底停产的1z纳米制程DDR4 DRAM生产线延期至2026年12月。这一重大策略反转源于全球DDR4供需结构的剧烈变化,以及三星在高带宽内存(HBM)市场竞争中的阶段性承压。

从财报看英飞凌战略:收缩1亿欧元投资背后的精准布局

德国半导体巨头英飞凌于8月5巨头英飞凌于8月5日发布2025财年第三季度财报,多项关键指标表现强劲。尽管面临美元汇率波动及全球贸易政策不确定性,公司仍实现营收37亿欧元(约合42.7亿美元),环比增长3%,符合市场预期。若排除汇率影响,当季营收增幅可达9%,突显其业务内生增长动能。

环球晶圆上半年业绩稳健增长 全球化布局抵御市场波动

环球晶圆股份有限公司于8月5日召开董事会,审议通过2024年第二季度暨上半年财务报告。财报显示,公司第二季度税后净利润达新台币16.8亿元,较上季度增长15.5%,每股盈余(EPS)为新台币3.52元;累计上半年税后净利润为新台币31.4亿元,EPS为新台币6.56元,盈利能力持续提升。

赋能新质生产力!WAIE2025深圳落幕,千项智造成果引3万专业观众瞩目

燃情落幕!7月30日至8月1日,为期三天的WAIE2025(第六届)全数会智能工业展及大会在深圳福田会展中心1号馆圆满收官。本届展会以“聚焦数字经济,赋能智能工业发展”为主题,成功打造了一场汇聚全球前沿技术与产业智慧的创新盛宴。现场不仅吸引了30000余人次专业观众亲临探索,线上直播观看更突破10万+人次,数百家行业领军企业携千余项创新成果震撼亮相,共同擘画了智能工业发展的蓬勃图景。