首页 > 业界 > 关键词  > MediaTek最新资讯  > 正文

网易集团副总裁胡志鹏:AI 游戏新链路,端侧大模型大有可为

2024-05-07 19:36 · 稿源: 中关村在线

5月7日,MediaTek天玑开发者大会2024(MDDC2024)在深圳召开,本届MDDC 大会的主题为“AI予万物”,众多资深行业先驱、技术专家齐聚一堂,深入探讨了Al 技术在各个领域的应用和发展,以及AI 赋予终端侧的更多可能性。

在MDDC天玑高峰对话环节,主办方特别邀请了网易集团高级副总裁、网易雷火事业群负责人胡志鹏来到现场,与主持人暨蓝莲花研究机构创始人及CEO温天立,以及MediaTek董事、总经理暨运营长陈冠州等重磅嘉宾展开了以“生成式AI将如何重构移动生态”为主题的高峰对话,共同探讨行业未来发展趋势,分享知识、经验和先进技术成果。

近年来网易雷火成绩斐然,不仅先后推出了《倩女幽魂》《天谕》《逆水寒》《永劫无间》4大旗舰IP,近一年又连续推出《逆水寒》手游、《全明星街球派对》等各自品类赛道的标杆级作品,表现极为亮眼。尤其是去年推出的爆款MMO《逆水寒》手游,不仅率先利用光线追踪等前沿技术带来次世代画面品质,更因为对大模型AIGC技术的深度运用,被誉为“全球第一款AI游戏”。

对话中胡志鹏指出,网易早在2017年就成立了全球第一个专门服务于游戏的人工智能的实验室“网易伏羲”,早先用于研究强化学习(智能敌人和NPC),而后生成式AI时代来临时,率先开创“AI 游戏”理念,即利用AIGC技术大幅提升游戏研发产能,以AI作为基底,为玩家提供更好、更多、更有趣的优质游戏内容。

由于《逆水寒》手游去年6月底公测时超出预期的爆火,预约、新增等各项数据均突破网易历史记录,而游戏中又存在大量诸如智能NPC、智能捏脸、智能团本队友、智能作词作画等新潮的AIGC玩法,导致开发组多次面临AI云端算力吃紧的难题——AIGC相关玩法并发量巨大,即便与多家云服务厂商合作,云端算力供给既然非常紧张。

胡志鹏回忆,当时就在畅想充分利用玩家手中的终端设备来解决AI算力吃紧的问题。其实,很多AI玩法功能均可布置在端侧,如TTS(文本到语音)功能、ASR(语音识别)功能、AI敌人的强化学习等等,若有统一的端侧AI构架和开发环境,开发者不仅能直接节省很大的成本,同时AI的响应速度也会大幅度提升,这对开发者来说非常美妙——而MediaTek恰恰正在建立开发者所需要的终端AI构架和开发环境。

胡志鹏认为,虽然目前生成式AI的端侧开发目前还处于各厂商“各自为政”到慢慢建立标准的初期阶段,但很高兴看到MediaTekNeuronStudio正在成为生成式AI标准的建立者。只要广大开发者一起使用这样的引擎,开发者生态、社区会像滚雪球一样正反馈,迅速发展壮大。胡志鹏预测,待开发者社区生态成熟时,生成式AI“杀手级”的应用就会如雨后春笋一般诞生。

以下为胡志鹏相关对话分享节选:

AI 游戏,端侧大模型在游戏行业大有可为

温天立:

游戏是非常重的端侧应用,也是手机上非常大的应用,我非常希望邀请志鹏总跟我们分享一下目前游戏行业领域以及像网易头部公司在做的事情,即游戏行业如何利用端侧大模型、人工智能生成式AI,您有什么判断和规划?

胡志鹏:

很高兴来到MDDCMediaTek天玑开发者大会。

最早我强烈感受到新人工智能高潮来临,是2016年AlphaGo战胜李世石,因为我之前在微软亚洲研究院,那时候跟深蓝(AI)之父许峰雄老师共事过一段时间,当时许老师还和同事们一起讨论,在可见的未来我们觉得计算机要战胜人类围棋世界冠军,这件事情还很遥远,没想到没过几年这件事情就已经发生了。

后面在网易,我就在想,类似AI技术未来很有可能会颠覆整个游戏行业。

网易作为游戏行业最顶尖的公司之一,我们本身就计划投入比较大的精力去做AI,但是我们投入之后,也许未来10年20年没有像我们想象这样AI颠覆了行业,我们依然是一个头部公司,但如果这件事情成立了,我们没有做任何准备,我们会觉得我们会被淘汰。

所以基于这个想法,我们成立当时应该是全球第一个专门服务于游戏的人工智能的实验室,就是网易伏羲。

开始几年我们在做一些探索,主要是在强化学习方面,因为游戏跟人工智能首先结合,最容易想到强化学习,就是让游戏内的NPC(非玩家角色)能够模仿人类生命,就是像AlphaGo去击败人类的玩家、和人类玩家合作。

到了2019年的时候,我们看到了GPT2,以及后来的GPT3,我们发现AI除了能做强化学习,更能做很多游戏内容的生成。而游戏行业是一个内容需求极为旺盛的行业,游戏开发者的产能和玩家需求是一对永远无法解决的矛盾。通常我们一个几百人的团队花几个月时间制作内容,玩家两个星期就可以消耗完。

所以当我们看到GPT横空出世的时候,我们感受到了生成式AI很有可能它会为游戏开发者解决产能的问题。

这时候,因为我想系统学习AI、同时督促自己掌握人工智能的从底层到应用的整个行业的知识,加上机缘巧合,我回到浙大的母校去做了计算机的工程博士,然后开始系统学习AI。那时候要做很多的作业,其实是把底层的模型摸索个遍,当时要处理并形成图像,但是主要还是用GAN的技术(即对抗生成网络技术),我用我儿子的照片做了非常多的实践,发现在生成图像这方面,有非常多的AI应用,那么我们就开始尝试把这些技术应用到我们的游戏的整个研发过程中,从美术、文案生成,一直到程序生成的流程,去全面地运用。

这个过程其实走了蛮长时间,一直到2022年。之前陈总(陈冠州,MediaTek董事、总经理暨运营长)和小川(王小川,百川智能创始人、CEO)也谈过,ChatGPT的出世,让我们看到了这条路对于游戏行业是一定走得通的。

所以我们持续的投入,把我们想要做的AIGC的能力,集成到我们刚刚看到的逆水寒手游里。

逆水寒手游中,我们提出一个新的概念——以前的概念都是“游戏 AI”,那么《逆水寒》其实内部提出的概念叫“AI 游戏”,即我们以AI作为基底,所有的内容都是考虑在AI基底的情况下,我们如何给玩家提供更好、更多、更有趣的内容,这其实是我们坚持的一个方向。

这个方向做了两年,最后迎来了到去年6月份《逆水寒》手游的上线。

在上线的时候我们遇到一个非常严重的问题,就是算力怎么解决。因为我们当时预估我们第一波的玩家的数量非常大,如果我们要给每个玩家提供基于AI的游戏功能,我们其实需要在云端去预备非常大的AI算力。所以当时我们联系了国内几家头部AI算力云的厂商,去预定算力。这时候我发现一个很重要的问题——为什么我们不能更充分的去利用玩家手上的终端算力来解决我们的问题。

其实很多我们的功能像我们比如说TTS(文本到语音)功能,ASR(语音识别)功能,包括终端的NPC和AI敌人基于玩家强化学习的功能,我们都可以在终端去实现。

如果我们有统一的终端AI构架,给游戏开发者提供一个端侧AI环境,我们直接能省很大的成本,同时AI的响应速度也会大幅度提升,这对于我们游戏开发者来说是件非常美妙的事情。

可惜,当时我们还没有看到这种可能性,但我非常高兴看到MediaTek天玑肯定也是在那之前就在规划AI的端侧落地,所以今天我看到MediaTek的NeuronStudio感觉非常兴奋!

这就是我们想要的东西!我也是来对这个大会了。

探讨AIGC行业生态化和规范化:杀手级应用将诞生

温天立:聊到生成式AI的制度化、规范化的生态问题,游戏行业应该是一个比较有经验的行业,毕竟游戏行业经过了很多百花齐放的时代。从志鹏您多年游戏行业的观察来说,我们生成式AI行业现在的规范化目前处于什么阶段?您觉得还会经历哪些阶段?

胡志鹏:

拿游戏行业类比,有个近似的例子,就是图形渲染引擎的发展。

渲染引擎一开始也是各个游戏工作室各自用自己的技术,各种各样的技术“各自为政”,此时“行业的神”卡马克(JohnCarmackII)横空出世,他是第一个能够在EGA上面实现横版游戏“卷屏”的功能,然后第一个能够在巫毒显卡(Voodoo)上面去做3D模拟效果,他就是大神,建立起来非常高的一个技术门槛。此时很依赖行业大神的独家发挥,这就是行业早期的情况。

当越来越多的开发者加入这个行业,就促成了商业引擎的诞生。而商业引擎往往诞生于就是本身的游戏开发者,他们做了很长的时间游戏,他们觉得可以把能力共享出来,比如说像EPIC做完了《虚拟竞技场》,慢慢把自己的引擎也开放出来。

有了商业引擎之后,虽然大厂还有自研引擎,但普通开发者就会倾向于选择那几款商业引擎,慢慢地越来越统一。像我们现在手机上比较常用的有Unity、Cocos、Unreal…基本上大部分的开发者都是用这些开发引擎。此时,一位开发者就能够在不同的公司之间游走,并且个人技术在不同公司之间完全可以无损失地转换。

我觉得现在生成式AI的端侧开发,目前还处于从我刚才讲的第一阶段,就是大家“各自为政”到慢慢建立标准的阶段。

我也很高兴看到MediaTekNeuronStudio成为生成式AI标准的建立者,只要大家一起来用这样的引擎,那么它的开发者生态、社区会像滚雪球一样正反馈,会变得越来越好。

开发组成员都会分享自己的功能知识,我觉得在一两年左右,生态社区会很快建立起来,会比之前的游戏引擎的生态设施建立速度更快。

这样的生态社区建设需要一定的过程,我觉得2到3年左右,生成式AI“杀手级”的应用就会产生。

举报

  • 相关推荐
  • 大家在看
  • Jovu:AI驱动的代码生成,快速实现从想法到生产。

    Jovu是一个AI驱动的代码生成模型,旨在帮助开发者快速构建新服务或扩展现有应用程序。它通过AI技术生成生产就绪的代码,确保一致性、可预测性,并遵循最高标准。Jovu能够加速开发过程,从概念到部署只需几分钟,提供完全可操作的、健壮的后端服务,准备立即上线。它还通过简化开发工作流程、减少时间、优化资源来提高效率和速度。

  • TapScanner:全能扫描仪,AI助力,智能识别与分析。

    TapScanner是一款利用人工智能技术,将移动设备转变为多功能智能扫描仪的应用程序。它能够识别和分析各种对象和文档,提供即时洞察力,并通过扫描轻松提升日常交互。

  • TopicRanker:AI驱动的SERP分析工具,帮助用户发现易于排名的关键词。

    TopicRanker是一款AI驱动的搜索引擎排名分析工具,专注于帮助用户通过分析竞争对手的弱点,发现在搜索引擎结果页面(SERP)中易于排名的关键词。它通过提供详尽的分析报告,AI生成的标题建议,内容大纲,博客文章,以及增强型元描述,帮助用户优化内容创作,提高SEO效果。产品背景信息包括它是由CriminallyProlific.com开发的,并且已经帮助多个企业在谷歌上排名第一。价格方面,TopicRanker提供三种不同的订阅计划,满足不同用户的需求。

  • Warmy:通过AI引擎提高电子邮件的投递率

    Warmy是一个利用人工智能技术来优化电子邮件投递率的平台。它通过分析每个邮箱的发送活动和接收者行为,为每个邮箱制定个性化的预热计划,确保邮件发送量逐渐增加而不会触发垃圾邮件过滤器,从而最大化邮件的投递率。此外,Warmy的Adeline AI引擎能够实时分析发送性能,预测最佳发送时间和频率,帮助用户提高参与度,避免过度发送邮件给接收者造成困扰。Warmy还具备AI驱动的垃圾邮件风险检测功能,能够主动识别并标记具有高垃圾邮件风险的邮件,帮助用户避免邮件落入垃圾邮件文件夹,确保重要邮件能够送达接收者。

  • Glitter AI:将任何流程转化为逐步指南。

    Glitter AI是一个创新的在线工具,它允许用户通过点击和说话来快速创建逐步指南。这项技术简化了教学过程,使得向同事、客户甚至家人传授技能变得简单快捷。

  • Tourly Guide:沉浸式音频导览,让每个地标自己说话

    Tourly Guide是一款移动应用程序,通过使用人工智能技术,为用户提供独特的沉浸式音频导览体验。它允许用户在探索地标时,通过AI生成的音频指南获得深入的了解和教育。该产品的主要优点包括个性化的导览内容、用户友好的界面设计以及对教育和文化探索的重视。Tourly Guide的背景信息显示,它由Roadly, Inc.开发,旨在通过技术提升用户的旅游和学习体验。

  • SaveDay App:随时随地保存、管理和利用内容

    SaveDay是一个智能工具,用于捕捉、组织和利用你的知识。它提供了快速的信息捕捉解决方案,支持保存文章、网站、图片、视频等,并且可以在移动设备上搜索、询问和总结内容。SaveDay注重数据安全和隐私保护,不与第三方共享用户内容。

  • Neurture:通过了解大脑运作制定改变计划的APP

    Neurture是一个旨在帮助用户了解大脑如何运作,并通过基于研究的治疗方法来制定有效的改变计划的应用程序。它通过数字化手写日记条目、获取后续期刊提示建议、由人工智能支持的情景冥想和期刊推荐等功能,帮助用户打破习惯或解决成瘾行为,实现重要的其他目标。Neurture强调隐私和信任,不收集用户数据,不投放广告,不训练模型,旨在为用户提供一个安全、无负担的自我提升环境。

  • AiWatchfulCompanion:革命化的家庭护理方式,从婴儿到老年人。

    AiWatchfulCompanion是一款旨在改变我们照顾亲人方式的应用程序,它通过使用人工智能技术,为远离家乡的护理者提供实时的关怀和支持。该应用利用计算机视觉和音频分析,实时响应亲人的需求,提供连续的安全和健康保障。它还具备紧急响应功能,在无法联系到护理者时,能够向紧急服务提供事故位置。

  • Viva:使用的 Sora 同架构视频生成模型

    Viva 是一个免费的 AI 生成工具和社区,提供 Text-to-Image、Image-to-Image、Text-to-Video、Image-to-Video 等功能,以及强大的 AI 编辑工具。用户可以扩展图像、重新绘制任何内容,使图像和视频更加高质量和 4K。Viva 使 AI 创作更简单、高效。海外产品 viva 发布了首个开放给全部用户使用的 Sora 同架构视频生成模型,而且现阶段免费。 文生视频单次可以生成一条 5 秒的视频,图生视频是 4 秒视频 目前运动幅度最大的视频生成模型,同时图像分辨率也是现在可以用的视频生成产品中最大的。文生视频的效果比图生视频要更好,同时如果要是用的话建议把运动幅度调到 20 左右比较合适。 viva 优势领域就是可以生成比较好的竖屏视频,目前很多视频模型的演示都是横屏视频,竖屏的表现并不好,但是短视频又是视频内容的大头,所以竖屏视频的生成质量是个很重要的指标。 但是一致性有一部分测试中保持的不是很好,同时没有表现出 Sora 那样强大的物理特性模拟以及 3D 一致性。

  • 大模型之家:提供全面的人工智能大模型产业信息和创新价值研究。

    大模型之家是一个专注于人工智能大模型产业的平台,提供行业报告、技术创新动态、专家评测和奖项荣誉等信息。它通过整合行业资源,推动人工智能技术的创新和应用,帮助企业和个人更好地理解和利用大模型技术。

  • Productboard AI:利用人工智能增强产品团队的决策力和效率

    Productboard AI 是一款集成到产品管理平台中的人工智能工具,它通过分析和理解大量的用户反馈和数据点,帮助产品团队做出更明智的决策,提高工作效率,并加速产品从概念到市场的整个生命周期。它由 OpenAI 提供支持,确保数据安全和隐私保护,同时提供无与伦比的数据组合和针对产品管理工作的微调优化。

  • UserCall:人工智能语音用户访谈代理,深入洞察客户需求。

    UserCall是一款利用人工智能技术进行用户访谈的网站,它通过AI采访员与用户进行一对一的语音通话,从而收集高质量的用户反馈和洞察。这种技术可以大规模地进行用户访谈,提供比传统调查更深入的定性见解,同时节省时间和资源。UserCall的优势在于无需专业用户研究技能,能够自动进行智能跟进提问,帮助企业更好地理解客户需求,改进产品和业务。

  • VideoToPage:将视频或音频内容快速转换成结构化网页摘要的多功能工具。

    VideoToPage是一个高效的在线工具,它能够将视频或音频内容转换成结构化的网页摘要,支持多达96种语言,并具有98.5%的高准确率。用户无需订阅即可使用,特别适合需要将视频内容转换成文字资料、教程、博客文章、标准操作程序(SOP)等多种形式的个人和企业。产品提供快速的转录服务,支持长达5小时的视频,且5分钟以内的文件完全免费。此外,还提供内容的语义层次构建、内容类型定义、语义互连、富文本编辑、多语言理解等功能,使得内容的创建、编辑和发布变得简单快捷。

  • Fiskl:现代AI自动化全球会计解决方案,专为小型企业设计。

    Fiskl是一个多货币的全球会计平台,为小型企业、创业者、开发者和自由职业者提供全面的财务管理工具。它支持170多种货币和21,000多家银行,利用人工智能技术简化银行对账流程,实现零接触Stripe支付和银行对账。Fiskl的主要优点包括实时现金流和财务概览、自动化银行同步、全球支付能力、AI驱动的对账节省高达80%的对账工作量。Fiskl的定价策略包括特别优惠,例如年度订阅可享受50%的循环折扣,并提供30天免费试用期。

  • reap.video:一键将长视频转换为社交媒体短视频的工具。

    reap是一款基于人工智能的视频再利用工具,它能够将长视频内容一键转换成适合社交媒体的短视频。它通过先进的AI分析自动提取视频中最吸引人的片段,生成能够吸引观众的短片。reap支持多种语言,并提供了智能字幕生成、品牌模板定制等功能,帮助内容创作者提高内容的吸引力和可访问性,加速增长和变现。

  • 稀土掘金大模型子站:一站式AI资讯平台,连接开发者与AI技术的最新动态。

    掘金大模型子站是一个专注于AI领域的技术社区平台,提供从基础设施到最终应用的全景图,旨在帮助个人开发者和企业更好地理解和应用大语言模型技术。该平台通过提供资讯、工具和资源,促进AI技术的创新和应用,推动整个AI生态的发展。

  • Cubox:为学习而生的AI阅读器,高效筛选优质内容,提升阅读和学习效率。

    Cubox是一款专业的AI阅读器,旨在通过智能技术帮助用户筛选和整理阅读内容,提升阅读效率和学习效果。它具备自动高亮精彩内容、一键解读网页文章、专业级标注等功能,适用于需要大量阅读和学习的用户。产品背景信息显示,Cubox深受全球专业人士青睐,并且用户阅读的文章总数达到了23,325,802篇,显示了其广泛的用户基础和影响力。

  • InsideAI:实时分析工具,助你洞察竞品用户反馈。

    Inside AI 是一款基于人工智能技术的实时分析工具,它能够帮助用户追踪竞品的用户反馈和市场动态。该工具通过实时网络连接,分析用户评论,依托专有技术,为用户提供可操作的见解。它适用于独立开发者、初创公司、企业、分析师和风险投资公司等,帮助他们节省研究时间,找到正确的产品开发方向。

  • Glato AI:使用人工智能快速生成高质量产品视频

    Glato人工智能是一个通过人工智能技术快速生成高质量产品视频的平台。该产品能够自动生成引人入胜的短视频广告,帮助用户提高投资回报率,并节省创作者招聘等待时间。价格合理,定位于帮助企业提升市场营销效率。

今日大家都在搜的词:

热文

  • 3 天
  • 7天