首页 > 传媒 > 关键词  > 正文

天玑9300支持内存硬件压缩技术,行业,让手机运行AI大模型更快速

2023-11-09 19:24 · 稿源: 站长之家用户

联发科最 新发布的一代旗舰级5G生成式AI移动芯片天玑9300,其创新的全大核架构设计与最 新的AI处理器APU等联发科特色技术的合并,为生成式AI应用提供了强大的动力,以实现引人入胜、丰富多样的生成式AI体验。同时,联发科也与大量的AI企业在业内进行深入合作,共同在移动平台上构造了一个充满活力的AI生态。

全新第七代AI处理器APU 790,为生成式AI而生     

随着用户对生成式AI应用需求日益增长,端侧生成式AI便捷、安全性等优势便凸显出来。当然,部署端侧AI大语言模型需要强大的AI算力支撑。

天玑 9300 搭载联发科第七代AI处理器APU 790,为生成式AI而设计,拥有硬件级的生成式AI引擎,可以实现更加高速且安全的边缘AI计算,深度适配Transformer模型进行算子加速,速度是上一代的 8 倍。

同时APU790 的性能和能效得到显著提升,整数运算和浮点运算能力提升至前一代的 2 倍,苏黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在强大的AI性能支持下, 1 秒以内即可生成图片。天玑 9300 强悍的AI算力、创新的全大核CPU架构和Immortalis-G720 GPU都为端侧运行生成式AI打下坚实的性能基础。

同时,基于亿级参数大语言模型的特性,联发科开发了混合精度 INT4 量化技术,结合联发科特有的内存硬件压缩技术NeuroPilot Compression,可以更有效地利用内存带宽,大幅减少AI大模型占用终端内存,为端侧运行AI大语言模型突破手机内存限制,助力更大参数模型在端侧落地。

基于以上,天玑 9300 首 次在vivo旗舰手机端侧落地 70 亿参数AI大语言模型,处理速度可达20 Tokens每秒。不仅如此,联发科突破了行业极限,已经与vivo成功在端侧运行了 130 亿参数的大语言模型。甚至,天玑 9300 已率先实现在移动芯片上成功运行 330 亿参数的AI大语言模型,领跑业界。

天玑 9300 还支持多模态生成式AI大模型,打造出“文生诗”“文生图”“文生趣图”等丰富有趣的端侧体验。

可见,天玑 9300 的AI算力和端侧生成式AI能力已领先行业,足以让用户随时随地AI创造力全飙。

生成式AI模型端侧技能扩充,带来全面、丰富的端侧生成式AI体验

与云侧生成式AI解决方案不同,由于硬件环境的差异,部署端侧生成式AI也需要考虑手机内存、存储容量、负载上限等因素。为此,联发科率先提出了先进的解决方案。

APU 790 支持生成式AI模型端侧技能扩充技术NeuroPilot Fusion,它可以基于基础大模型持续在端侧进行低秩自适应(LoRA,Low-Rank Adaptation)融合,在混合式AI的赋能下,可以基于 1 个基础大模型,通过云端训练,在端侧完成N个功能的融合,赋予基础大模型更全面、更丰富的生成式AI应用能力。

比如基于AI模型端侧技能扩充技术的“图生GIF动图”功能,用户可以根据一张照片更换不同的风格甚至表情,玩出个人专属风格的表情包,秒变表情包小达人。

AI开发平台NeuroPilot加速端侧生成式AI生态布局

基于强大的AI算力和先进的内存硬件压缩技术、AI模型端侧技能扩充等技术,天玑 9300 的APU790 将端侧生成式AI的速度和广度提升到了全新的水平。同时,为加速生成式AI在端侧部署和普及,联发科也凭借其AI开发平台NeuroPilot构建了丰富的AI生态,从底层硬件到工具链、模型中心以及开发生态,助力生态快速、有效地部署端侧生成式AI应用。

AI开发平台NeuroPilot支持Android、Meta LIama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。

更为重要的是,NeuroPilot拥有一套完整且先进的工具链,除了NeuroPilot Compression低秩自适应融合,还有Speculative Decoding推测解码加速和模型优化与转化技术。

联发科的天玑开发者中心还可提供端侧生成式AI落地一站式开发者资源,分享端侧模型部署案例提升开发效率。目前已有 20 多个生成式AI合作伙伴加入生态共建。

联发科还携手业界合同伙伴打造精彩的生成式AI应用体验。虹软的生成式AI超 级分辨率技术基于天玑9300 APU 边缘计算能力,相比前代,性能可提升30%。在 25 倍放大的拍摄时,利用生成式AI超 级分辨率技术,可以拍出细节更真实的图像效果。

极感科技的生成式AI语意搜索技术也基于天玑9300 APU边缘计算能力,对比前代,性能可提升260%。比如在手机的相册中搜索照片,描述照片的内容即可在毫秒内准确搜到对应的照片。而且在断网状态下也能搜索,隐私也不会泄露。

Morpho的视频通话实时数字分身生成技术,同样基于天玑9300 APU边缘计算能力,对比前代,性能提升26%。一般的虚拟人像生成器需手动选取容貌样式花费时间。但基于视频通话实时数字分身生成技术,用户操作容易,仅需打开摄像头单帧图片即可瞬间生成数字分身。

基于天玑9300 APU边缘计算能力,慧鲤生成式AI防眩光技术性能可提升60%。在此技术加持下,无论是室外还是室内,在拍摄时如有眩光,只要轻松一暗即可消除眩光干扰。

可以看到,在AI端云融合的趋势下,天玑 9300 在AI算力、生成式AI用户体验和生态方面展现出全面的优势,为新一代旗舰级端侧生成式AI体验树立了新的标杆,强大生成式AI就要用天玑。

同时,联发科等生成式AI的领先者们正通过不断地技术革新和适当的生态布局,大力推动混合式AI计算,并为端侧生成式AI部署设计出了一套独自且有效的方法,全力以赴推进生成式AI在端侧的普及,旨在让更多的用户享受到端侧AI的个性化服务,带来全新的全方位智能体验,实现科技成果惠及全社会。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 大家在看
  • 3月安卓手机性能榜:三代骁龙8反杀天玑9300 夺回第一

    安兔兔今天发布了2024年3月份的安卓手机性能榜,分为旗舰、次旗舰,最大看点当属第三代骁龙8反超天玑9300,夺回了第一的位置。此前两个月,搭载天玑9300的OPPOFindX7一直名列榜首,平均跑分超过213.8万,但这一次,搭载三代骁龙8的ROG8Pro游戏手机以214.1万分的好成绩,占据了第一位。其他就没有新机了,整体上还是天玑8000系列家族占优,共有六款机型上榜,其中RedmiK70E凭借首发定制的天玑8300-Ultra排名第二,跑分超过139.1万,遥遥领先其他竞品。

  • 天玑之王预定!Redmi K70至尊版回归天玑平台:天玑9300 加持

    数码闲聊站爆料称,RedmiK70至尊版将回归天玑平台,搭载联发科天玑9300旗舰处理器,并配备独显芯片,成为Redmi打造的双芯旗舰。RedmiK70至尊版还将采用1.5KOLED柔性屏,金属中框和玻璃后盖,后置主摄像头为5000万像素,支持百瓦闪充,并搭载超大电池。按照Redmi的定位,K70至尊版将成为Redmi下半年的旗舰焊门员,也是新一代天玑之王。

  • 李未可WAKE-AI大模型:让多类终端能快速低成本的定制多模态AI

    36kr研究院发布了《2024年AIGC行业研究:多模态大模型与商业应用》,文中基于AIGC产业生态现状和技术发展路径,深入分析AIGC商业化应用的方向与产业发展趋势。其中在36kr研究院梳理的产业图谱中,发现杭州李未可科技与字节跳动的豆包、腾讯云混元及华为云盘古等大模型等一起出现在闭源模型层,甚至在跨模态生成应用层也占据一地。李未可科技这类结合自身业务垂类场景,提前布局中间层及终端应用层的自研大模型或许能给市场带来不小的惊喜。

  • 微软紧急撤回最先进的AI大模型:居然忘了测试了

    Meta发布超级彪悍的大语言模型Llama3之后,微软也很快推出了自己的新一代WizardLM28x22B,号称迄今最强大,完全超越Claude3OpusSonnet、GPT-4等竞品开源,但是马上又把它撤回去了。没有任何征兆,微软就删除了WizardLM2大模型的相关文件、代码一直没有任何公开解释。大模型幻觉产生的原因有很多,训练数据、预训练和对齐阶段、推理阶段都会出现缺陷。

  • AI大模型搜索之战开启,胜出黑马竟是ta?

    【新智元导读】距离AI「杀死」搜索引擎,到底还差几步?几天前,ChatGPT突然官宣免注册,让网友直呼AI取代搜索引擎的宏伟蓝图已经拉开帷幕。就像搜索引擎在2000年后逐渐成为了全世界互联网的大门一样,如今LLM的迅猛发展似乎也标志着互联网即将进入GenAI时代。我们搜索时会出现的,不仅仅再是简单的链接罗列是一个开门见山的准确答案。

  • 商汤港股涨超34% 昨日推出AI大模型“日日新5.0”

    商汤港股今日表现强势,涨幅显著扩大至34%,股价报0.820港元,总市值跃升至274.45亿港元。这一涨幅不仅彰显了市场对商汤科技的强烈信心,也反映出其业务的持续发展和强大潜力。这一功能在智能客服、智能写作、智能设计等领域具有广阔的应用前景,为商汤科技未来的发展奠定了坚实的基础。

  • 300多个国内大模型中脱颖而出的Kimi是谁?

    大家注意这款国产AI大模型叫Kimi本名是Kimi人工智能助手我们不妨叫它小K这几天小K因为“工作压力”太大彻底崩溃了2月以来它的访问量达305万较上个月增长了107.6%而小K的爆火是从300多个国内大模型中突围而出它们个个来历不凡有科技巨头选派的有高等学府保送的但小K所在的公司成立却才刚满一年图源备注:图片由AI生成,图片授权服务商Midjourney与此同时A股市场与小K有关的概

  • 李未可科技正式推出WAKE-AI多模态AI大模型

    4月18日,2024中国生成式AI大会上李未可科技正式发布为眼镜等未来终端定向优化等自研WAKE-AI多模态大模型,具备文本生成、语言理解、图像识别及视频生成等多模态交互能力。该大模型围绕GPS轨迹视觉语音打造新一代LLM-Based的自然交互,同时多模态问答技术的加持,能实现所见即所问、所问即所得的精准服务。李未可科技合伙人&AI负责人古鉴表示WAKE-AI将逐步开放平台能力,便于更多企业及开发者调用WAKE-AI能力,共建AI硬件生态。

  • 首届“AIGC创新赛”正式开幕,vivo携手青年开发者共同推动大模型前沿技术快速发展

    3月30日,首届“中国高校计算机大赛—AIGC创新赛”启动会及大赛研讨会在天津南开大学举行。中国新一代人工智能战略研究院执行院长、原南开大学校长龚克,南开大学党委常务副书记杨克欣,中国高校计算机大赛组委会秘书长时阳以及vivo副总裁、OS产品副总裁、vivoAI全球研究院院长周围等多位国内AI顶级专家、高校领导、企业高管受邀出席活动。首届“中国高校计算机大赛—AIGC创新赛”启动会现场合影中国高校计算机大赛—AIGC创新赛是一次展示AIGC技术产品与创新思维的盛宴,不仅能为学子们提供宝贵的学习机会能为中国AIGC技术的发展和产业应用积累更多实践经验,从推动AI大模型技术的不断进步,打造大学生创新创业领域的新标杆。

  • 更精准更快速,乐摩吧深耕智能按摩领域

    大健康产业脱颖而出 乐摩吧成为智能按摩界佼佼者随着时代的发展以及国民经济水平的总体提高,人们对于健康关注度也越来越高。通过医疗、养生等方式维持健康体魄的意愿也越来越强烈。根据企查查显示,目前关于“健康类”企业已超500万,大健康行业已成为时代焦点。在这种时代的衍生下,追求个性、新奇的“Z世代人群”纷纷展露他们独特的养生妙招。相比“要风度不

今日大家都在搜的词:

热文

  • 3 天
  • 7天