Meta购入大量NVIDIA GPU,助力大语言模型训练
Meta(原Facebook)宣布,为了构建一个强大的计算平台,将购买多达 35 万块 NVIDIA H100 GPU,用于训练其下一代大语言模型 Llama 3。这将使 Meta 的总算力相当于近 60 万块 H100。
据 Omdia 透露,2023 年,Meta 已购买了 15 万块 NVIDIA GPU,与之匹敌的只有微软。亚马逊、甲骨文、谷歌和腾讯等公司仅分别获得了约 5 万块。
业内分析师预计,基于 Hopper 架构的 GPU,包括 H100、H200、GH100、GH200 和 H20 等,在 2024 年第一季度将出货量达到 77.3 万块,第二季度增至 81.1 万块。而在 2023 年第二季度,Hopper 家族 GPU 的出货量仅为 30 万块。
此外,Meta 还购买了 AMD Instinct MI300 系列 GPU,数量未知。微软也是 AMD Instinct 的主要客户。
(举报)