首页 > 业界 > 关键词  > Cerebras最新资讯  > 正文

Cerebras 推出 4 Exaflops Condor Galaxy 1 AI 计算机:超过 70,000 个 AMD EPYC 核心、5400 万个 AI 核心

2023-07-24 10:33 · 稿源:站长之家

站长之家(ChinaZ.com) 7月24日消息:Cerberas 和 G42 推出了 4 Exaflops Condor Galaxy 1 AI 超级计算机,其中包含数千个 AMD EPYC 处理器单元和数百万个 AI 核心。

IMG_2872-1024x576.png

图片来自Cerebras

Cerebras 和 G42 合作,将开创云计算和生成式人工智能领域的新局面。两家公司将共同开发九种不同的超级计算机,其中最引人注目的是 CG-1(Condor Galaxy 1),预计将拥有全球第一的 4 ExaFLOPS 计算能力。

Condor Galaxy 1 AI 超级计算机规格:

  • 在 FP16 上实现 4 exaFLOPS 的稀疏 AI 计算
  • 5400 万个 AI 优化计算核心
  • 82 TB 内存
  • 64 个 Cerebras CS-2 系统
  • 基本配置支持 6000 亿个参数,可扩展至 100 万亿个。
  • 386 TB内部集群结构带宽
  • 72,704 个 AMD EPYC 第 3 代处理器内核
  • 本机硬件支持 50,000 个令牌序列长度的训练,无需第三方库。
  • 具有线性性能扩展的数据并行编程模型

也许你第一次听说这两家公司,但它们都长期以来一直在从事技术开发。Cerebras Systems 以其在生成式人工智能领域的努力而闻名,主要通过其 CS-2 Wafer Scale Engine 实现了 2.6 万亿个晶体管的惊人里程碑。该芯片被称为有史以来最大的芯片,被称为「单个 CS-2 系统,类似于一个超级计算机」。

然而,Cerebras 与 G42 合作,通过他们的新型超级计算机向前迈出了一步。两家公司已经公布了关于 CG-1 的细节,预计它将在行业中树立新的标杆。根据博客文章,CG-1 与 64 台 Cerebras CS-2 系统相连,将它们合并成一个单一的超级计算机,总计计算能力为 4 ExaFLOPS。

当前活跃的超级计算机中,由 AMD 驱动的 Frontier 据说配备了 1.1 ExaFLOPS。CG-1 几乎是其四倍,这在超级计算机行业是一个庞大的数字。Cerebras 的首席执行官 Andrew Feldman 对此表示:

以 FP16 提供 4 ExaFLOPS 的 AI 计算,CG-1 大大缩短了 AI 训练时间,同时消除了分布式计算的痛苦。

许多云公司宣布了庞大的 GPU 集群,花费数十亿美元进行构建,但使用起来非常困难。在数千个小型 GPU 上分布单个模型需要几个月的时间,需要数十名专业人员进行操作。CG-1 消除了这一挑战。

深入了解 CG-1 超级计算机的规格,它具有 4 ExaFLOPS 的 16 位计算能力,以及 6000 亿个参数模型。据称,系统配备了 5400 万个 AI 优化计算核心,每秒 388 TB 的互连带宽和 72,704 个 AMD EPYC CPU 核心。这款设备与我们之前见过的任何产品都不同,根据公开的数据,CG-1 准备在行业中占据主导地位。

Cerebras 和 G42 的雄心并未止步于此,该公司计划互连三台超级计算机(CG-1. CG-2 和 CG-3),目标是达到 12 ExaFLOPS,这是一个巨大的里程碑。此外,该公司计划在 2024 年推出六台超级计算机,总计计算能力将达到 36 ExaFLOPS。这些披露的雄心壮志是巨大的,这可能会开启云计算和生成式人工智能行业的新时代。

举报

  • 相关推荐
  • 特斯拉为「Dojo」超级计算机建造新家:AI 野心持续升级

    特斯拉的Gigafactory不断发展扩张该公司在德克萨斯州奥斯汀的工厂中出现的一个建筑结构近日引起了一些关注。有人称这个新建筑可能将用于容纳特斯拉的Dojo超级计算机集群的操作,以训练公司用于完全自动驾驶系统的人工智能神经网络。这个计算集群有望在明年初成为全球最强大的超级计算机之一。

  • AMD发布EPYC 8004系列处理器:96个Zen 4c核心、不可思议高能效

    经过连续四代的演进迭代,AMDEPYC处理器越发强大枝繁叶茂,Zen4家族就分成了四个不同的子系列。首发的是EPYC9004系列标准版,适合通用计算,Zen4架构,最多96核心192线程。AMDEPYC已经占尽了先机,布局也更加全面深入基于Zen5架构的下一代Turin”也正在准备之中,继续有着丰富的细分产品线,完全不给对手任何机会的感觉。

  • 21岁SpaceX实习生用AI干出重大考古事件,斩获40000美元!

    2000年前的古卷轴,终于被一个21岁计算机少年给破译了。这个古卷轴可以说是极其的特殊——在公元79年被一场火山爆发掩埋碳化,直到1752年才被挖掘出土。专家们正在做进一步的调研,很快将会有新的结果。

  • 7.7亿参数,超越5400亿PaLM!UW谷歌提出「分步蒸馏」,只需80%训练数据|ACL 2023

    【新智元导读】LLM不实用,小模型蒸馏才是「现实」的大模型应用路线,全面领先微调技术!土豪请无视。在ANLI上,使用770MT5模型超越了540BPaLM的性能,只使用了完整数据集的80%并且可以观察到,即使使用100%的完整数据集,标准微调也无法赶上PaLM的性能,表明分步蒸馏可以同时减少模型尺寸和训练数据量实现超越LLM的性能。

  • 三星 Exynos 2400 芯片亮相:CPU 速度提升 70% AI 处理速度快了 14.7

    三星在日前的SystemLSITechDay2023活动中发布了多项新的半导体技术和芯片,其中最重要的是Exynos2400。这是三星的下一代旗舰智能手机处理器,继承了2022年推出的Exynos2200,首次亮相于GalaxyS22。三星将很快公布有关Exynos2400的更多细节。

  • AI在玩一种很新的艺术,700万网友在线围观,ControlNet又立功了

    AI又在玩一种很新的艺术。一组“在离谱与合理的边缘反复试探”的图席卷各大平台,最火的一条𝕏已有近700万查看16.8万点赞,到处有人在求教程。使用棋盘底图,1.6强度,其他参数不调整,效果如下:如果想要新的样式,也可以自制好黑白底图上传。

  • AMD高管确认:RX 7000系显卡已全系推出完毕

    外媒VideoCardz报道,AMD高管ScottHerkleman在科隆游戏展活动上进行了简短的访谈,并确认基于RDNA3架构Radeon显卡现已全部发布。昨天AMD推出了针对高端市场的RX7800XT和RX7700XT,价格分别为499美元、449美元。至于用于笔记本平台的RX7000MGPU,但可能是Herkleman无意中忽略了,在访谈中并没有给出明确的信息,毕竟还是有不少玩家希望AMD可以推出正面抗衡RTX40系列的GPU。

  • Secoda获得1400万美元融资,将基于AI的谷歌式搜索引入企业数据

    加拿大Secoda公司日前宣布成功完成一轮1400万美元的融资,旨在将人工智能技术引入企业数据搜索与管理领域。这家总部位于多伦多的公司计划利用这一资本来进一步发展其AI解决方案,使任何企业用户,无论其技术背景如何,都可以轻松地搜索、理解和利用公司数据,就像在Google上查找信息一样简单。在集成方面,该数据搜索工具目前支持36个流行的数据仓库、业务智能工具和生产力平台,包括Snowflake、dbt和Looker等。

  • 继续与AMD合作 三星 Exynos 2400依然搭载AMD GPU

    据博主@Tech_Reve消息,近期有传闻称三星将终止与AMD在移动GPU上的合作,但这一消息并不准确。虽然三星正在开发自己的GPU,但更像是AMDGPU的修改版。这款芯片继承了硬件加速的光线追踪和可变速率着色等高级图形功能实际应用中,该芯片的表现并未达到预期。

  • 三星Exynos 2400即将发布:图形性能暴增200% 或是最后一款基于AMD GPU的Soc

    今天是2023三星系统LSI科技日,三星放出宣传海报,暗示新一代移动芯片Exynos2400即将发布。Exynos2400将基于三星4nm工艺制程打造,CPU采用10核心设计,这是安卓阵营唯一一款10核心的旗舰级5GSoc,首发机型是自家的GalaxyS24系列。但就目前来说,Exynos2400芯片将继续采用基于AMD的GPU,预计将于明年初推出,该芯片将用于GalaxyS24和GalaxyS24,与GalaxyS23FE中使用的Exynos2200相比,将带来2倍的图形能力,直追骁龙8Gen2。