首页 > 传媒 > 关键词  > 边缘AI最新资讯  > 正文

破解云端大模型瓶颈,边缘AI驶入发展快车道

2024-08-27 14:52 · 稿源: 站长之家用户

当前,随着终端应用场景不断扩展,数据即时处理需求水涨船高。云端大模型落地行业逐渐面临日趋明显的数据缺失、反馈缓慢、成本过高等许多挑战,与云端AI相辅相成又优势明显的边缘AI成为攻克瓶颈的关键。意识到这一点的科技巨头们纷纷入局低成本、有效率且更具隐私性的边缘 AI,也让业内惊呼,边缘AI正进入发展快车道。

以国内抢先发力边缘AI的领军企业云天励飞为列,其 8 月 26 日发布的 2024 年半年度报告显示,云天励飞 2024 上半年营业收入达到2. 89 亿元,同比增长97%。其主要业绩均来自于基于边缘AI平台的智能硬件、智算运营和智慧行业三大业务领域,也再次验证了边缘AI未来的广阔市场前景。

边缘AI进入加速发展期

和人们更为熟知的云端AI相比,边缘AI发展初期并未受到同等的重视。不过,边缘AI固有的更低成本、更好的数据隐私保护以及更快的响应速度,使其在近年来吸引了越来越多行业巨头的关注。大模型方面,谷歌、微软、Meta以及云天励飞都推出了轻量化大模型支撑边缘AI的应用;芯片方面,苹果、英伟达等巨头先后推出边缘AI芯片,应用在AI 手机和机器人上,云天励飞也在 2022 年底推出DeepEdge10 系列芯片,以支撑边缘端的大模型运行。

有了成熟大模型的支撑以及性能不断提升的芯片,边缘AI的应用变得更加广泛和实用。边缘设备需要处理更加复杂的任务,反过来也促进了边缘AI技术的发展。良性循环为边缘AI的行业发展提供了加速度。

以既有自研大模型又有自研芯片的云天励飞为例,其在今年 7 月由中国信息通信研究院承办的WAIC 2024“迈向AGI:大模型焕新与产业赋能”论坛上公开的边缘AI战略即显示,将依托多模态大模型、NPU加速计算平台这两大平台,发展智能硬件、智算运营、智慧行业三大主营业务,并确定了个人、家庭、城市三个应用方向。

从云天励飞刚刚发布的半年报来看,三大主营业务都有不错成绩,其边缘AI战略初见成效。

边缘智能硬件未来增长态势惊人

在边缘AI应用方面,边缘智能硬件是最贴近广大用户,也是增长态势最为迅猛的智能设备领域之一。据市场研究报告显示,预计到 2025 年,全球智能硬件市场规模将达到数千亿美元规模,年复合增长率保持在两位数以上。特别是,随着技术进步和产品创新,物联网升级成AIoT,加上国家相关产业政策的大力扶持,预计未来 3 年边缘智能硬件设备将保持50%以上的复合增长率。

从云天励飞的半年报来看,如今市面上可应用智能硬件的场景十分丰富,与从前相比实用领域也有了明显扩展。云天励飞基于自研“云天天书”大模型和神经网络处理器,打造面向各类边缘AI场景的各类硬件设备并对外销售,包括 AI 芯片、与华为昇腾合作打造的“天舟”大模型一体机等。报告期内,云天励飞还推出了融合“云天天书”多模态大模型能力的警务安全智能终端,具备万物识别、自然语言检索、警务知识咨询等功能,可全面助力基层警务人员提升执法水平。

此外,云天励飞还收购了智能穿戴方案设计头部公司岍丞技术。岍丞技术主要产品包括智能蓝牙耳机PCBA、智能手表PCBA、智能音箱PCBA等IoT产品,主要应用在华为、荣耀、OPPO、VIVO、安克、boAt、Noise等品牌的终端产品上。行业领先企业对于“大模型+智能可穿戴”相关产品的积极探索和加速布局,也使得边缘AI赋能下游终端应用渐呈百花齐放。

自研大模型+自研芯片是云天励飞边缘AI业绩增长底气

智慧行业是边缘AI可发挥作用的重要领域之一。从云天励飞半年报可见,目前云天励飞已形成了城市治理、智慧交通、智慧应急、智慧城管、智慧园区、智慧社区、智慧泛商业、智慧道路巡检、智慧警务、低空经济、智慧教育等行业产品与解决方案体系,并结合多模态大模型技术特点和行业需求,持续拓展创新业务。

另一主营业务智算运营也是相当发展前景的潜力股。今年 6 月,云天励飞与德元方惠签署AI算力运营合作协议。德元方惠将向云天励飞购买AI训练及推理异构算力服务,总算力规模约4000 PFLOPS,该协议在未来三年服务期内将为云天励飞贡献约 16 亿的营收。

无论是智慧行业,还是智算运营,想要在边缘AI领域有所建树,都离不开成熟的大模型技术以及性能足够强大的芯片支持。

以大模型为例,云天励飞自主研发了千亿级大模型“云天天书”。今年中国信通院发布《 2024 大模型示范应用案例》,云天励飞与深圳市龙岗区打造的数字政务行业大模型入选。在智慧交通和智慧警务解决方案中,云天天书大模型助力城市实现了交通的智能调控以及公共安全事件的有效预防;在智慧商业领域,大模型通过分析客流动线等信息,为商业智能体的运营决策提供了有力支撑;在智慧教育方面,云天励飞提出了 Fly计划,致力于构建全面、立体的人工智能教育生态系统。

再以芯片为例,云天励飞去年底发布了大模型推理芯片DeepEdge10;今年推出采用D2D Chiplet技术,基于DeepEdge10 芯片平台打造的大算力芯片DeepEdge200,并打造了IPU-X6000 加速卡,可应用于语言、视觉、多模态等各类大模型的推理加速,目前已适配云天天书、通义千问、百川智能、Llama2/ 3 等近 10 个主流大模型。

可以预见,未来云天励飞会利用这些技术优势,将自研大模型与自研芯片更好结合,进一步促进行业边缘AI发展。

长远来看,我们必将进入一个由云端AI+边缘AI的混合式AI时代。而在这一过程中,离不开边缘AI的重要支撑。目前,无论是从自动驾驶、机器人/具身智能到 AI PC/phone,基于设备端智能化的边缘 AI 正逐步发展壮大,并显现出蓬勃发展的积极活力。显然,把握边缘AI的发展趋势,加速其技术与产业的深度融合,将是推动未来智能科技革命的重要力量。而如何更好地制订边缘AI战略,在这一过程中分到更多的蛋糕,正是业内应该深入思考的重要议题。




推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 联发科天玑9400+拿下最强AI手机芯片:端侧推理准确率反超云端大模型

    今日,联发科举办天玑开发者大会2025,正式发布新一代旗舰芯片天玑9400。天玑9400定位旗舰5G智能体AI芯片,综合AI跑分是天玑9400的1.25倍,支持最高8B规模的DeepSeek-R1端测部署,推理准确率反超云端大模型。天玑9400采用台积电第二代3nm工艺,CPU架构延续创新全大核设计,包含1颗主频3.7GHz的Cortex-X925超大核、3颗3.3GHz的Cortex-X4大核与4颗2.4GHz的Cortex-A720大核。

  • “客货邮”×安凯客车破壁融合 铺就乡村振兴 “快车道

    “乡村振兴唤春归”,在全面推进乡村振兴的征程中,农村物流高效发展是激活乡村经济的关键。合肥市肥西县与六安市霍邱县,统筹谋划,精准施策,创新推动交通与邮政深度融合,成功入选全国农村物流高质量发展典型案例。作为两地城乡物流专线的运力支撑,安凯客车持续以更丰富、更好用、更适合的新时代产品畅通城乡经济循环,为乡村振兴注入澎湃动能。拓展“客�

  • 手电商举办男装运动全国产业带商家大会,加码扶持新商进入增长快车道

    4 月 18 日,第十二届中国(石狮)网商大会暨快手电商男装运动全国产业带商家大会在福建石狮举办,超过 300 位来自泉州以及全国各地域的商家、品牌方、达人出席活动,探讨“平台+产业带”的合作潜力,共筑亿万级产业生态圈的未来图景。会上,快手电商&石狮产业带“快赋新能”商家成长计划宣布正式启动,该计划将面向产业带自播商家、供应链货主和工厂等多重类型商�

  • 从田间到云端手“村晚大舞台”助力乡村文化璀璨绽放

    "村晚大舞台"项目由文化和旅游部指导,中国文化馆协会联合快手科技共同实施,通过"线下搭台+线上直播"创新模式,将传统民俗、非遗技艺、乡土才艺搬上云端。该项目已在全国50余个地区举办900余场直播活动,线上观看人次超1.6亿,让普通村民实现舞台梦想。82岁老人登台献唱、银发艺术团精彩表演等案例展现了新时代农民丰富的精神文化生活。活动不仅带动当地文旅资源宣传,更成为展示乡村文化自信的重要窗口。快手平台将持续提供流量支持和技术培训,助力乡村文化振兴。

  • AI 大模型的困境:数据才是真正的“燃料”

    一旦掉入AI坟场,幻觉将永远存在,噩梦才刚开始。最近有许多客户在考虑上AI大模型一体机、AI私有化、AI大模型部署等项目,但小心进入AI大模型的坟场,在光鲜亮丽的背后,AI大模型也面临着诸多困境,其中最为核心的问题便是数据。只有拥有高质量、多样化、易于管理的数据,AI大模型才能发挥出其真正的潜力,为企业带来更大的价值。

  • ​海信重磅发布“信·通途交通大模型”: 以AI之力,解锁智能交通无限可能

    4 月 23 日, 第十五届中国国际道路交通安全产品博览会在武汉国际博览中心盛大启幕。海信网络科技公司重磅发布“海信云信·通途交通大模型”, 标志着其在智慧交通领域的AI技术创新应用迈入了全新阶段。 该交通大模型是海信深度融合二十余年交通行业经验与前沿AI技术的产物。基于海量交通专业数据与多模态感知能力,构建“问答-分析-决策”一体化系统,通过AI指挥官

  • DeepSeek+物流行业,AI大模型破解五大场景效能困局

    文章探讨了AI大模型在物流行业的应用现状与挑战。以DeepSeek为代表的AI技术正通过重构业务流程、优化资源配置、提升决策效率等方式,成为推动行业降本增效的核心引擎。但成功应用AI大模型需要企业具备数字化基础、业务流程标准化和数据治理能力,而非简单技术堆砌。G7+易流梳理出五大核心应用场景:工作效能辅助、经营数据分析、安全审查、智能客服和知识管理。这些

  • 迈富时AI大模型破解白酒行业三大痛点——与奇点国峰携手共建酒业智慧生态

    近日,Marketingforce迈富时与中国奇点国峰控股有限公司(以下简称“奇点国峰”)正式宣布达成 2025 年度战略合作。此次合作标志着双方将充分发挥各自在人工智能、数智化营销以及白酒产业链上的独特优势,携手构建白酒AI大模型,致力于打造酱香白酒行业数智化转型的标杆案例,为传统白酒产业的创新发展注入强大动力。在双方战略合作的推动下,Marketingforce迈富时凭借其�

  • 阿丘科技李嘉悦:大模型驱动的AI检测范式变革——大模型、小模型、智能体的协同进化

    3月28日,由机器视觉产业联盟主办、慕尼黑展览有限公司承办的VisionChina2025机器视觉展在上海新国际博览中心圆满落幕。阿丘科技产品总监李嘉悦在机器视觉及工业应用研讨会现场,围绕“大模型驱动的AI检测范式变革:大模型、小模型与智能体的协同进化”的主题,发表了精彩演讲。”今年,在这个快速变化的时代,我要补充一句:“AI工业视觉的格局正在加速变革,不会用大模型的将会被善用大模型的人淘汰。

  • 大模型AI基础设施,商汤的反向求解

    大模型落地如火如荼,从上一代AI浪潮中杀出来的商汤,嗅到了这里面新的机会。在最火的具身智能赛道,这两年诞生了许多明星创业公司。这些创业公司的创始人往往拥有技术明星的光环,不少都是在学术界中某个技术领域中响当当的领头人。这些初创公司虽然在某一个单点技术上遥遥领先(大脑、小脑或者本体),但在机器人落地过程中,要突破从单一技术到整体复杂产品