11.11云上盛惠!海量产品 · 轻松上云!云服务器首年1.8折起,买1年送3个月!超值优惠,性能稳定,让您的云端之旅更加畅享。快来腾讯云选购吧!
海外知名云服务供应商DigitalOcean现已推出了搭载NVIDIAH100GPU的GPUDroplets云服务器。借助GPUDroplets,AI创业公司、开发者可以以更低的前期开发成本轻松地进行大语言模型训练、开发AIGC项目,以及开展人工智能相关的业务,并且无需面对复杂服务端开发与维护问题。为了更好地服务中国区的企业,DigitalOcean中国区独家战略合作伙伴卓普云AIDroplet将为中国区的企业提供商务咨询、技术支持等服务。
今日晚间,蔚来第二品牌乐道举办乐道L60上市发布会。乐道总裁艾铁成介绍,在乐道L60首辆量产车下线后,就被乐道汽车用户与服务运营负责人庆华买走了。新车提供555公里、730公里和1000公里三种不同续航版本,并支持蔚来1000多座换电站,三分钟可完成补能。
【新智元导读】两天前,马斯克得意自曝:团队仅用122天,就建成了10万张H100的Colossus集群,未来还会扩展到15万张H100和5万张H200。此消息一出,奥特曼都被吓到了:xAI的算力已经超过OpenAI了给员工承诺了价值2亿期权,这是要上天?马斯克的xAI一路狂飙突进,把SamAltman都整怕了!就在9月3日,马斯克在推上得意自曝:团队仅仅用了122天时间,就建成了有10万张H100的Colossus集群,是世界上
LLM若想高速推理,现如今,连GPU都无法满足了?曾造出世界最大芯片公司Cerebras,刚刚发布了全球最快的AI推理架构——CerebrasInference。运行Llama3.18B时,它能以1800token/s的速率吐出文字。值得注意的是,在Cerebras上跑的Llama3.1,上下文只有8k……相比之下,其他平台都是128K。
【新智元导读】多年来,马斯克一直在公开谈论Dojo——这台超算将成为特斯拉人工智能雄心的基石。他最近表示,随着特斯拉准备在10月推出Robotaxi,AI团队将「加倍投入」Dojo。但一旦成功,也可以释放巨大红利。
SFCompute是一家位于硅谷的初创公司,旨在通过其平台为小型企业提供所需的AI算力资源。该公司推出了算力租赁服务,使用户能够以较低成本获取所需资源,短时间内使用大量计算能力。资金将用于建立交易平台,并计划在未来一年内将其工程人员规模增加一倍。
凌晨4:20,大洋彼岸的最大超算训练集群开始轰鸣。「420」也是马斯克最喜欢玩的梗,象征着自由、不受约束和反传统。如此巨大的超算中心,自然需要大量人才和技术的支持,马斯克也继续在推特上招兵买马,让数据优势、人才优势和算力优势全部扩张到极致。
大神Karpathy已经不满足于用C语言造Llama了!他给自己的最新挑战:复现OpenAI经典成果,从基础版GPT-2开始。挑战成功本身并不意外,但是只花费20美元、90分钟完成训练,Loss和评测还超越原版,就!有!点!过!分!了!。有条件的朋友可以试试了。
英特尔发布了新一代人工智能芯片Gaudi3,引发了业界的广泛关注。Gaudi3的性能远超竞争对手英伟达的H100芯片,成为当前市场上最强大的AI芯片之一。这使得Gaudi3在AI领域的应用中具有出色的表现,特别适合处理大规模的深度学习模型。
在被大规模采用后,Sora的推理成本将很快超过训练成本。OpenAI推出的Sora模型能够在各种场景下生成极其逼真的视频,吸引了全世界的目光。视频内容的创意驱动了对OpenAI的Sora等模型最直接的需求。
日前,蔚来举办了150kWh首台量产电池包下线仪式,有网友晒出了下线仪式的现场照片。蔚来董事长李斌表示,目前,一代与二代平台的所有车型都已经完成了验证和公告,团队也进行了各种测试,续航里程等性能表现超过预期。对于蔚来车主来说,150kWh电池包上线之后,车辆的续航能力随之升级,有长途出行需求时,只需在换电站租赁150kWh电池包即可,可灵活选用。
微软工程师的爆料引发了广泛关注,透露GPT-6的训练计划不仅已启动导致大规模GPU集群的部署引发了电网崩溃的尴尬局面。这一事件凸显了AI训练对能源的巨大需求,与此同时,OpenAI内部消息的曝光也揭示了GPT-5和GPT-6的训练已经在进行中。解决这些挑战将需要全球范围内的合作与创新,以确保AI技术能够持续发展并造福人类社会。
据Factorial基金估计,OpenAI的Sora每小时在NVIDIAH100上生成5分钟的视频,相当于每天能生成120分钟的视频。报告进一步指出,为支持TikTok和YouTube的创作者社区,大约需要89,000个NVIDIAH100GPU。ChatGPT的创造者将于下周在洛杉矶与好莱坞制片厂、媒体高管和人才代理商会面,以在娱乐行业建立伙伴关系,并鼓励电影制作人将其新的AI视频生成器整合到他们的工作中。
【新智元导读】就在刚刚,老黄又来打破摩尔定律了:英伟达新核弹B200,一块能顶5个H100,30倍推理加速,能训万亿参数大模型!同时推出的AI推理微服务NIM,号称让全世界用上AI。就在刚刚结束的GTC人工智能大会上,英伟达的新一代性能巨兽Backwell诞生了!BlackwellB200GPU,是如今世界上最强大的AI芯片,旨在「普惠万亿参数的AI」。有了世界最强的处理器Blackwell,新一轮技术革命即将开启。
英伟达在GTC开发者大会上发布了最强AI加速卡BlackwellGB200,计划今年晚些时候发货。GB200采用新一代AI图形处理器架构Blackwell,其AI性能可达20petaflops,比之前的H100提升了5倍。英伟达的系统还可扩展至数万GB200超级芯片,具有11.5exaflops的FP4计算能力。
【新智元导读】LLM开源从Infra做起!Meta公布了自己训练Llama3的H100集群细节,看来Llama3快来了。每年3月份,照例各家大厂又要开始秀自己最新的产品和研究了。Meta的目标是创建灵活可靠的系统,以支持快速发展的新模式和研究。
最新发布的全球最强AI芯片WSE-3引起了行业的瞩目。该芯片采用了先进的4万亿晶体管5nm制程,拥有惊人的性能,单机可训练出24万亿参数的模型,远超英伟达H100GPU。这种技术进步将对整个AI产业产生深远的影响,加速了AI技术在各个领域的应用和发展。
3月13日,社交、科技巨头Meta在官网公布了两个全新的24KH100GPU集群,专门用于训练大模型Llama-3。Llama-3使用了RoCEv2网络,基于Tectonic/Hammerspace的NFS/FUSE网络存储,继续使用了PyTorch机器学习库。将Meta的Tectonic分布式存储解决方案和Hammerspace结合在一起,可以在不影响规模的情况下实现快速功能迭代。
英伟达团队推出了全新的模型Nemotron-4,150亿参数,在8Ttoken上完成了训练。值得一提的是,Nemotron-4在英语、多语言和编码任务方面令人印象深刻。这种能力凸显了Nemotron-415B对广泛的自然语言的深刻理解。
英伟达最新推出的Nemotron-4语言模型引起广泛关注。这一通用大模型拥有150亿参数,经过在8Ttoken上的训练,在英语、多语言和编码任务中表现出色。Nemotron-4的推出标志着英伟达在通用大模型领域的一次重要突破,为单个A100或H100GPU上运行的最佳通用大模型设定了新标准。
SemiAnalysis的行业专家对最近爆火的Groq推理系统进行了像素级的拆解,测算出其持有成本依然高达现有H100的10倍,看来要赶上老黄的步伐,初创公司还有很多要做。最近爆火的AI初创公司Groq,推出了比目前常见GPU推理系统快4倍,成本低70%的大模型推理解决方案。还有一个更为关键的问题,快速响应小型模型推理这个市场到底有多大,以至于值得抛下灵活的GPU不用,转去构建专门
近日,英伟达首次向外界公布了其最新的面向企业的AI超级计算机Eos,同时也是英伟达目前速度最快的AI超级计算机。Eos共配备了4608个英伟达H100GPU,同时还配备了1152个英特尔XeonPlatinum8480C处理器。英伟达表示,Eos整合了其在AI领域的专业技术和经验,是先前DGX超级计算机知识的结晶,可以帮助企业处理最具挑战性的项目,并实现AI目标。
【新智元导读】最近,外媒曝出SamAltman正计划筹集数十亿美元,为OpenAI建起全球性的半导体晶圆厂网络。GPT-5训练严重缺芯,OpenAI誓不让英伟达掌握主动权,干脆自己做新的AI芯片霸主?SamAltman正在筹集数十亿美元,建立一个全球性的半导体晶圆厂网络!这一事件背后的原因很可能就是,OpenAI已经无「芯」训练「GPT-5」了。如今到处奔走的Altman,能为建立晶圆厂筹到数十亿甚至数千亿美元的资金吗?能维持厂子的运营吗?目前我们只知道,他的举动有可能改变整个代工市场的格局。
为了通用人工智能的宏大目标,扎克伯格正在给Meta的AI研究部门进行大幅度的改组。Meta首席执行官马克・扎克伯格宣布,他的公司正在致力于为人工智能助手构建「通用智能」并「负责任地开源」,Meta正在将其两个主要研究小组合并在一起以实现这一目标。扎克伯格表示,Meta今年将推出一个新平台,让任何人都可以创建自己的人工智能角色,并将其分发到Meta的社交应用程序中,比如Facebook、Instagram和Threads。
NVIDIAAIGPU无疑是当下的硬通货,从科技巨头到小型企业都在抢。MetaCEO扎克伯格近日就透露,为了训练下一代大语言模型Llama3,Meta正在建造庞大的计算平台,包括将在今年底前购买多达35万块NVIDIAH100GPU。微软也是AMDInstinct的大客户。
【新智元导读】今天,小扎正式宣战「开源AGI」!下一代大模型Llama3正在训练,年底将拥有35万块H100,届时算力总和达60万块H100。为了追赶OpenAI,成立十年的FAIR团队纳入GenAI,全力奔赴AGI。这是一种令人愉悦的状态。
随着国产存储颗粒的高速发展,内存和固态硬盘价格逐渐稳定,正是新装机、配置升级的好时机。然内存条选择DDR4还是DDR5往往让人非常纠结。目前宏碁暗影骑士•龙DH100DDR43200MHz单条8GB内存条售价仅为129元,性价比非常突出,推荐选购。
小米汽车技术发布会于今日下午举办,会上,雷军正式发布了小米800V电池包。电池包是纯电车的基石,是核心部件,成本占到整车的40%-50%,并且影响着车辆的续航、安全、操控。小米还行业首创了电芯倒置技术”,可保证电芯在极端热失控情况下,快速向下释放热源,最大程度保证乘员舱安全。
【新智元导读】最近,两位哈佛辍学生共同创立的AI芯片公司,估值已达3400万美元,并计划明年交付一款名为「Sohu」的AI推理加速芯片——其LLM推理性能达到H100的10倍单价吞吐量更是高达140倍。像Pika一样的神级创业故事又要再次上演了?两位哈佛退学的年轻人,想要制造一款专用于大语言模型加速的AI加速器芯片,将于2024年第三季度交付,推理性能达H100的10倍。CerebrasSystems的CEO
【新智元导读】Inflection-2最新发布!性能碾压一众大厂模型,仅输一手GPT-4要集成到Pi?最近,InflectionAI发布了全新的一款AI模型。更炸裂的是InfectionAI对这款模型的评价——性能直超谷歌和Meta开发的两款模型,紧随OpenAI的GPT-4之后。真能充当心理咨询的角色呢。