首页 > 业界 > 关键词  > 谷歌最新资讯  > 正文

谷歌AI芯片TPU v5p在训练LLM方面比其前一代快2.8倍

2024-01-29 10:24 · 稿源:站长之家

站长之家(ChinaZ.com) 1月29日 消息:谷歌正迅速成为其最好的朋友英伟达的强大对手——其超级计算机所使用的TPU v5p人工智能芯片比以往任何时候都更快、更大、更宽,甚至超过了强大的H100。谷歌在最近推出其Gemini人工智能模型的同时,也发布了其最新版本的旗舰张量处理单元(TPU),用于人工智能的训练和推理,这似乎是一种挑战英伟达自己的市场领先的图形处理器(GPU)的尝试。

大模型,芯片

图源备注:图片由AI生成,图片授权服务商Midjourney

TPU v5p是谷歌最强大的定制设计的人工智能加速器,已经被部署到了该公司的“人工智能超级计算机”上。这是一种专门为运行人工智能应用而构建的超级计算架构,而不是通常运行科学工作负载的超级计算机,因为TPU不适合这些工作。

最新版本的TPU每个单元(组成系统的部分)有8, 960 个芯片,相比之下,v4 只有4, 096 个,而且在每个单元可用的浮点运算次数(FLOPs)方面,它的可扩展性是v4 的四倍。这些新的单元提供了4,800Gbps的吞吐量。新的单元还拥有95GB的高带宽内存(HBM),而TPU v4 只有32GB的HBM RAM。

不同于英伟达,它将其GPU出售给其他公司,谷歌的定制TPU仍然只在其自己的产品和服务中使用。谷歌的TPU长期以来一直用于为其服务提供动力,包括Gmail、YouTube和Android,而最新版本也被用于训练Gemini。

谷歌的v5p TPU在训练大型语言模型方面比TPU v4 快2. 8 倍,并且提供2. 1 倍的性价比。虽然今年早些时候发布的中间版本TPU v5e在三者中提供了最高的性价比,但它只比TPU v4 快1. 9 倍,这使得TPU v5p成为最强大的。

它甚至强大到足以与英伟达广受欢迎的H100 GPU相媲美,这是市场上最适合人工智能工作负载的显卡之一。根据该公司自己的数据,这个组件在训练工作负载方面比英伟达的A100 GPU快四倍。

与此同时,谷歌的TPU v4 据估计比A100 快1. 2 到1. 7 倍,这是根据它在四月份发布的研究结果。粗略的计算表明,TPU v5p大约比A100 快3. 4 到4. 8 倍,这使得它与H100 相当或者更优秀,尽管在得出任何结论之前,需要更详细的基准测试。

举报

  • 相关推荐
  • 每日互动参与发起《人工智能安全行业自律倡议》 守护人工智能产业可持续发展

    9月17日,2025年国家网络安全宣传周人工智能安全治理分论坛在昆明召开,会上正式发布《人工智能安全行业自律倡议》。该倡议由中国网络空间安全协会联合多家科研院所、互联网头部企业、网络安全厂商及人工智能企业共同发起,提出筑牢安全根基、强化技管结合、深化协同共治等七方面共识,旨在推动构建可控、可信、可靠的人工智能产业生态,为全球人工智能治理贡献中国智慧。

  • 马斯克:Grok 5模型有望实现通用人工智能的突破

    马斯克旗下xAI公司正研发Grok 5模型,有望实现通用人工智能(AGI)重大突破。该模型采用全新架构设计,预计未来几周启动训练。若成功将代表AI从专用领域向通用认知能力的质的飞跃,被视为人工智能发展的终极目标。科技界密切关注xAI能否在激烈竞争的大模型赛道实现突破。

  • 十方融海:以开源生态为基,绘就“人工智能 +”产业融合新蓝图

    国务院印发《关于深入实施“人工智能+”行动的意见》,推动AI技术与产业深度融合。深圳企业十方融海凭借AI大模型研发、产品创新及开源生态构建等领域的卓越实践,成为行业先锋。其开源模型如OpenBuddy、小智AI等突破传统技术局限,实现多模态交互与跨领域知识融合,覆盖教育、办公、养老、文体等多元场景。通过开放共享模式,十方融海有效降低AI应用门槛,激发行业创新活力,助力我国人工智能产业迈向新征程。

  • 祝贺!诺云荣登“人工智能+”新质生产力领航企业百强!

    2025年9月8日,国务院发布人工智能发展指导意见后,诺云凭借AI营销创新实践入选“人工智能+新质生产力百强榜单”,成为河南唯一入选企业。作为数字化营销技术服务商,诺云提供企业直播SaaS系统与私域运营工具,覆盖电商直播、企业培训等全场景需求。已服务超20万家企业,覆盖3亿用户,拓展至零售、教育等150多个行业,客户包括携程、华为等头部机构。诺云将持续深化AI技术应用,激发新质生产力潜能。

  • 王忠林赴格创东智调研人工智能产业高质量发展情况

    9月11日,湖北省领导王忠林一行调研格创东智人工智能产业发展。公司CEO何军汇报了自主研发的工业智能平台、能碳管理系统等应用成果。王忠林强调要深化人工智能在工业研发、生产等领域的应用,促进全要素智能联动,更好服务制造业向智能制造转型升级。

  • 人机共生 · 智启未来——2025高交会亚洲人工智能与机器人产业链展主题发布

    2025高交会机器人展以“人机共生·智启未来”为主题,聚焦人工智能与机器人产业的爆发式发展。展会覆盖工业制造、医疗康复、公共服务等全产业链,汇聚宇树科技、优必选、赛博格等顶尖企业,展示人形机器人、仿生机器人及核心零部件最新成果。机器人正从工具转变为人类伙伴,推动新质生产力发展,开启人机协作新篇章。

  • 深入实施“人工智能+”,伊顿助力皓扬数据打造 AI 算力中心标杆

    近日,备受瞩目的《关于深入实施“人工智能+”行动的意见》正式发布,提出六大行动覆盖科技、产业、全球合作等领域。到2030年,新一代智能终端、智能体等应用普及率超90%,为数字基础设施建设勾勒出了宏大版图。北京皓扬云数据科技有限公司(以下简称:皓扬数据)作为国内 AI 算力中心开拓先锋,以覆盖全国的超大规模交付能力服务于数百家头部企业。两位创始人已在�

  • 普适性覆盖人工智能典型场景 寒武纪产品技术优势凸显

    中科寒武纪科技预计2025年全年实现营业收入50亿至70亿元。公司已全面掌握智能芯片及基础系统软件研发核心技术,截至2025年6月30日,累计获授权专利1599项。2025年上半年,公司实现营业收入28.81亿元,同比增长4347.82%,净利润扭亏为盈。寒武纪持续优化智能处理器微架构及指令集,新一代产品将提升编程灵活性、易用性、性能及能效。高盛维持对公司的积极看法,上调12个月目标价至2104元,并调高2030年预期EBITDA及企业价值倍数。

  • 三旺通信入选大湾区人工智能+重点企业榜单TOP50

    8月27日,三旺通信在2025深圳国际通用人工智能大会上荣登“2025粤港澳大湾区人工智能+重点企业TOP50”榜单。该公司深耕工业互联领域二十余年,凭借在工业通信、边缘计算等领域的技术积累,积极布局AI应用,将人工智能能力融入智能制造、智慧交通等重点场景,推动产业实现更高效、更安全的数字化升级。未来,三旺通信将继续依托深圳及大湾区创新沃土,以开放姿态拥抱AI产业生态,携手产业链上下游共同推动人工智能与工业互联网的深度融合。

  • 联发科辟谣被英伟达收购:不实消息 不是真的

    此前,NVIDIA官方公开了与联发科共同开发的GB10超级芯片的详细信息,这一合作成果随即引发了市场的广泛猜测。有观点认为,鉴于双方在芯片技术上的深度整合,NVIDIA可能会进一步采取行动,通过收购联发科来强化自身在芯片领域的地位。 据了解,GB10芯片是联发科与NVIDIA技术合作的结晶。其中,联发科负责CPU与内存的设计工作,而NVIDIA则贡献了其GPU技术的最新成果。通过这�

今日大家都在搜的词: