首页 > 业界 > 关键词  > 人工智能最新资讯  > 正文

全球首个!中国电信发布单体稠密万亿参数语义模型Tele-FLM-1T

2024-06-19 15:30 · 稿源: 快科技

中国电信AI研究院携手北京智源AI研究院发布了全球首个单体稠密万亿参数语言模型Tele-FLM-1T,成为国内首家推出稠密万亿参数大模型的机构。

为了应对大模型训练中的算力消耗挑战,研究团队通过深入研发,融合了模型增长和损失预测等关键技术,推出了Tele-FLM模型系列。该系列模型在算力资源的使用上,仅消耗了行业标准训练方案的9%,体现出极高的算力效率。

利用112台A800服务器,TeleAI团队在4个月内完成了3个模型总计2.3T tokens的训练,全程没有进行任何调整和重试,验证了模型训练的稳定性和收敛性。

值得注意的是,Tele-FLM-1T版本即将开源,旨在为社区提供万亿稠密模型训练的技术指南,解决万亿模型训练收敛困难的问题,推动大模型技术的进步。

TeleAI除了技术创新外,还积极通过开源方式促进大模型技术的普及和国产化发展。他们陆续开源了7B、12B、52B参数规模的大模型,在开源社区引发广泛关注和应用,开源模型下载量已超万次,吸引了超过40万用户。

举报

  • 相关推荐
  • 阿里巴巴发布全球首个胃癌影像筛查AI模型:CT就能识别早期胃癌

    浙江省肿瘤医院联合阿里巴巴达摩院,发布了全球首个胃癌影像筛查AI模型DAMO GRAPE。 该模型首次利用平扫CT影像识别早期胃癌病灶,并联合全国20家医院,在近10万人的大规模临床研究中大幅提升胃癌检出率。 相关论文在24日登上了国际顶级期刊《自然医学》(Nature Medicine)。 据国家癌症中心统计,我国每年新发胃癌约36万例,死亡26万例,死亡人数在所有恶性肿瘤中位列第�

  • 云天畅想荣获中国电信天翼云「云端领航者奖」

    5月29日,天翼云与云畅想在广州联合举办"云智共享·'翼'展未来"供应链协同合作交流会。作为央企云国家队,天翼云凭借自主可控技术架构和全国覆盖的基础设施网络,与云畅想在技术赋能产业理念上高度契合。双方将在云游戏、云电竞、AI等新兴领域深化合作,共同投入研发资源打造智能化解决方案,构建开放共享的供应链生态体系,为数字经济发展注入新动能。此次合作突破传统云服务模式,实现优势互补与价值升级。

  • 李斌分享蔚来成立三个阶段:是靠全球融资来发展中国电动车

    今日上午,蔚来创始人、董事长、CEO李斌,以及蔚来总裁秦力洪接受媒体群访,回应了外界对蔚来最近财报、调整、销量目标再到产品等多方面问题。 在访谈中,李斌分享了蔚来成立以来的三个阶段。 第一阶段:成立-2021年,第一个阶段中蔚来经历了第一代产品完成销售的生命周期,到高端品牌的突围,用户企业、可充可换电等。蔚来668都是30万以上的高端纯电,占市场超过

  • 2025MWC | 途鸽科技发布全球eSIM IoT解决方案,助力中国IoT企业扬帆全球

    途鸽科技在2025 MWC大会上发布全球一站式eSIM IoT解决方案,助力中国企业全球化布局。该方案无需实体SIM卡,支持全球350+运营商资源覆盖200+国家,实现智能选网、远程管理和统一平台运维。CEO张衡表示,eSIM技术将重构物联网连接生态,预计2026年60%物联网设备将采用eSIM。方案已应用于智能穿戴、车载通信等领域,推动中国制造企业出海。途鸽将持续深化eSIM技术投入,构建全球�

  • 网易严选荣登“全球品牌中国线上500强”,荣获全球宠物品牌TOP3

    5月21日,"全球品牌中国线上500强榜单"发布,网易严选凭借卓越产品力与品牌创新力成功上榜,荣登全球宠物品牌中国线上TOP3。该榜单由北大国家发展研究院等机构联合推出,基于淘宝天猫真实消费数据评选。网易严选宠物类目2024年销售额实现两位数增长,稳居行业前三。其构建了"4S安心矩阵"体系,从科学配方到透明供应链实现全链路品质管控。目前国产宠物品牌在榜单中占比超80%,显示国产品牌正从"跟随者"转变为"标准制定者"。网易严选表示将持续拓展产品线,构建一站式宠物解决方案。

  • 全球第2个满级QQ也来了 当事人回应:首个“满级QQ”小号

    16日凌晨,全球第二个满级QQ号正式诞生,其昵称与首个满级号一样,均为“爱芥末”。 6月15日晚,“爱芥末”本人在直播中透露,将与网友一同见证这一时刻。直播期间,有网友在评论区询问,此次的“爱芥末”是否与之前那个是同一人,“爱芥末”回应称这是自己的第二个满级QQ号。

  • 字节小米位列中国全球化品牌前二 中国全球化品牌50强出炉

    凯度与Google联合发布《2025凯度BrandZ中国全球化品牌》榜单,字节跳动以2658分高居榜首,小米(1154分)和希音(1148分)分列二三位。榜单基于全球11个市场的消费者调研,从400多个品牌中筛选出203个候选品牌,最终评出50强。联想、华为、海尔、阿里速卖通等品牌进入前十。这些品牌凭借产品优势、创新能力和品牌影响力赢得了海外消费者认可。

  • 全球第二个“满级QQ”诞生:已显示金企鹅 系首个“满级QQ”小号

    16日凌晨,全球第二个满级QQ号也来了。与首个满级号相同的是,二者昵称都叫爱芥末”。 在6月15日晚,爱芥末本人在直播表示,要与网友们一同见证全球第二个满级QQ号的诞生。直播当中,评论区提问道,是否和之前的爱芥末”是同一个人? 爱芥末透露:这是自己第二个满级QQ号。 据腾讯官方此前表示,四个皇冠等级会升级为时光企鹅”标识,已为爱芥末”送出限量版专属

  • 国际先进!itc保伦股份这项新技术顺利通过中国电器工业协会科技成果鉴定

    5月27日,中国电器工业协会在ITC保伦股份组织召开了"智能超高清视讯系统关键技术研究与应用"项目科技成果鉴定会。该项目由广东保伦电子、华南理工大学等单位共同完成,经专家鉴定整体技术达到国际先进水平。项目攻克了多项关键技术:实现4K60帧超高清视频画质;开发抗30%网络丢包的视频传输技术;创新实时智能语音处理技术等。已获32件发明专利,参与制定2项团体标准。鉴定委员会一致认为项目成果可广泛应用于政府、企业等领域,将有力支持远程视频会议系统建设发展。ITC表示将持续推动国产音视频技术创新发展。

  • 中国方案,全球标尺,第二届华熙生物全球注射大师峰会闪耀意大利·米兰

    2025年5月26日,第二届华熙生物全球注射大师峰会在意大利米兰举行。峰会汇聚全球顶尖医美专家,探讨注射技术前沿趋势与全球化实践。华熙生物旗下润致品牌展示了透明质酸研发创新成果,推出Aqualuna海外产品线。会议重点分享了A-LV注射技术等创新方案,推动中国医美标准与国际接轨。多位国际专家肯定了中国企业在医美领域的影响力,强调技术无国界,应深化国际合作。峰会还发布了Aqualuna新品,彰显中国医美技术实力,助力"医美无国界"愿景实现。(140字)