Google发布第六代TPU Trillium,AI效能大幅提升
来源:ictimes 发布时间:2024-11-27 分享至微信
Google近日发布了第六代TPU Trillium,并在云端应用开发和基础设施高峰会中介绍了其关键要点。与第五代TPU v5e相比,Trillium在AI训练和推论基准测试中的效能分别提升了3.34~4.19倍和2.90~3.10倍。
Trillium配备了更大的高带宽存储器(HBM)容量和带宽,芯片间互连(ICI)带宽也提高了一倍,同时还引入了第三代SparseCore加速器,用于处理超大嵌体。此外,Trillium的矩阵乘法单元(MXU)大小也有所扩大,运行时脉也有所提高。
Google表示,Trillium的性价比是迄今为止最高的TPU,每美元效能比v5e提高了近1.8倍。Trillium在单一丛集中提供了91 exaflops的运算效能,是上代TPU所能建构的最大丛集的4倍。
此外,Google还公布了AI超级电脑(Hypercomputer)统一架构,将TPU、GPU和CPU等硬件与开源软件无缝整合。客户可以根据业务需求选择固定费用或动态随选模型,满足不同的工作负载需求。
同时,Google还推出了基于NVIDIA H200 Tensor Core GPU的A3 Ultra VM虚拟机器和最新高度可扩展丛集系统Hypercompute Cluster,预计将于12月公布预览版。
[ 新闻来源:ictimes,更多精彩资讯请下载icspec App。如对本稿件有异议,请联系微信客服specltkj]
存入云盘 收藏
举报
全部评论
暂无评论哦,快来评论一下吧!
ictimes
聚焦于半导体行业芯闻
查看更多
相关文章
谷歌Trillium TPU正式上市,打造100,000芯片AI超级计算机
2024-12-12
英特尔展示MCR存储器技术,大幅提升HPC和AI运算效能
2024-10-30
Google Axion处理器,助力数据中心效能提升
2024-11-14
Anthropic推出MCP工具,提升AI助理效能
2024-12-02
热门搜索