首页 > 业界 > 关键词  > Champ最新资讯  > 正文

Champ:基于3D的人物图片转视频动画

2024-03-25 17:50 · 稿源:站长之家

站长之家(ChinaZ.com)3月25日 消息:在数字媒体和娱乐行业,如何将静态的人物图片转化为动态的视频一直是一个挑战。然而,一项名为Champ的新技术,让这个任务变得简单而高效。只需要一个原始视频和一张图片,Champ就能让图片中的人物动起来。

Champ的工作原理是,首先使用SMPL模型生成渲染深度图、法线贴图和语义贴图,这些图为潜在扩散模型提供了全面的3D形状信息。然后,结合基于骨架的动作指导,为模型提供详细的动作属性。

image.png

项目地址:https://top.aibase.com/tool/champ

此外,Champ还使用了一个多层运动融合模块。这个模块整合了自注意力机制,能够在空间层面上整合形状和动作的信息。通过这种方式,Champ能够在参考图像和源视频动作之间进行精确的形状匹配。

在标准数据集上的实验评估显示,Champ在生成高质量人类动画方面具有卓越的性能,能够准确地捕捉到动作和形状的变化。这意味着,无论是在电影制作、游戏开发还是虚拟现实等领域,Champ都能提供强大的支持。

更令人印象深刻的是,Champ在新的自然数据集上也展现出了优秀的泛化能力。这表明,无论在任何场景下,只要有合适的输入,Champ都能生成逼真的人类动画。

举报

  • 相关推荐
  • 百度智能云联合昆仑芯、HAMi,落地双模式算力调度方案,提升算力利用率

    百度智能云联合昆仑芯与CNCF开源项目HAMi,推出基于昆仑芯P800的XPU/vXPU双模式算力调度方案。该方案已在金融客户集群落地,支持智能客服、营销辅助等十余类AI业务,兼顾稳定性与灵活性。XPU整卡模式通过拓扑寻优调度保障大规模训练性能,vXPU虚拟化模式以多粒度切分实现单卡多任务,最大化资源利用率。双模式协同让国产算力高效匹配业务需求,同时提供自动化调度与人工调节结合的灵活管理能力。

  • 微算法科技(NASDAQ MLGO):以隐私计算区块链筑牢多方安全计算(MPC)安全防线

    微算科技开发的隐私计算区块链将区块链技术融入多方安全计算(MPC),构建安全可信的分布式计算平台。通过区块链共识机制、加密算法和智能合约,对MPC参与方身份验证、数据加密存储、任务执行及结果验证等环节进行保护,确保数据“可用不可见”。该技术显著提升数据隐私保护和计算可靠性,在金融、医疗、政务等领域实现跨主体数据安全协作,释放数据价值。

  • Sora App的AI视频社交,给了百度们新希望

    Sora2发布两周后,百度的蒸汽机AI视频模型,和谷歌Veo3.1撞了档期。 两家公司选择同期发布并非有多默契,而是Sora2带来的压迫感促使它们不得不加快脚步。 奥尔特曼将形容Sora2为“创意领域的ChatGPT3.5时刻”,不仅在物理逻辑、画面连贯性、真实感和音画同步等方面实现了质的飞跃,还把Sora从一个“文本到视频”的工具进化成一个“创意到生态”的平台。 这无疑是扔在AI视�

  • 谁能成为中国的ChatGPT?夸克抢先交卷

    在OpenAI上线自己家AI浏览器ChatGPT Atlas的同一周,微软在海外发布了新的AI助手Mico和更AI化的Edge浏览器,夸克则在国内推出了新的「对话助手」功能。 这一系列消息背后,新旧巨头、两个市场产生了两个确定的共识:一个是AI助理与AI浏览器的融合会进一步深化,入口之争就是系统之争;另一个是对话会成为人与AI交互的主要方式,自然语言就是未来的编程语言。 在海外市场,OpenA

  • 全球DRAM价格飙升 长鑫LPDDR5X量产成市场“稳定器”

    DRAM合约价近期暴涨,三星、SK海力士和美光暂停DDR5报价,导致供应链紧张,现货价格一周内飙升25%。机构预测四季度DRAM价格将上涨18%-28%,NAND闪存合约价也将全面上涨5%-10%。与此同时,长鑫存储已量产LPDDR5X产品,覆盖多种容量和速率,技术达国际一流水平。全球内存市场格局正从“三足鼎立”向“四方争霸”演变,下游客户纷纷签署长期协议以确保供应稳定。

  • 华为WATCH Ultimate 2非凡探索版明日开启预售

    华为正式宣布旗舰智能手表WATCH Ultimate 2非凡探索将于11月7日开启预售。这款“全能表王”支持150米潜水与音频功能,具备海豚声呐通信技术,可在水下30米实现手表间信息传输,60米内一键SOS求救。同时搭载北斗卫星语音消息功能,无网络环境下可通过卫星发送语音信息。硬件上配备1.5英寸OLED屏幕,峰值亮度达3500nit,支持20ATM防水与IP68/9防尘。省电模式下续航达11天,常规使用达4.5天。该手表海外售价799英镑(约7443元人民币),国内价格尚未公布。

  • 《狂热运输3》公布最近载具预告片

    《狂热运输3》作为该系列迄今最具野心的作品,开发预算近2500万美元,交通系统实现重大革新:工具种类增至275种以上,首次加入可运输客货的直升机;新增专业化车站、仓库系统及分类装卸机制提升策略深度;货运有轨电车与高速公路建设系统全面升级。游戏同步重构光影粒子特效与货物可视化效果,并对模组开发者保持功能开放,持续拓展游戏边界。

  • vivo WATCH GT 2已支持开通移动/联通eSIM服务

    vivo WATCH GT2智能手表正式支持中国移动与联通的eSIM服务,提供一号双终端和独立终端两种模式,售价699元。配备2.07英寸大屏、2400nits峰值亮度,续航达33天。支持全天心率、血氧、睡眠监测及多种运动模式,搭载自研蓝河操作系统3.0与智能助手,可跨设备连接vivo和iPhone,实现双机通知同步。

  • AI日报:可复刻音色的MiniMax Speech 2.6发布;TikTok推AI剪辑新工具“Smart Split”;Cursor 2.0发布

    本期AI日报聚焦多项技术突破:MiniMax发布低延迟语音合成系统Speech 2.6,实现实时交互;蚂蚁数科与宁波银行打造的金融AI方案入选国际标准;智源推出具身操作能力的Emu3.5多模态模型;Cursor 2.0通过自研模型实现多智能体协同编程;xAI升级Grok新增视频生成功能;OpenAI推出可定制安全模型;TikTok推出AI剪辑工具Smart Split;微软发布强化学习框架Agent Lightning提升大模型训练效率。

  • 科普 | 读懂HBM和DRAM,才懂AI算力未来

    在AI算力需求激增的背景下,存储芯片成为决定计算性能的关键。文章重点分析了三大易失性存储技术:SRAM凭借高速读写特性在CPU缓存中不可替代;DRAM作为数字世界的“主内存”,在容量与速度间实现平衡;HBM则通过3D堆叠架构革命性提升带宽,突破AI训练中的“内存墙”瓶颈。当前HBM需求爆发式增长,预计2025年市场规模将达340亿美元。中国企业在DRAM领域逐步突破,并开始布局HBM技术,正通过持续技术积累提升在全球半导体生态中的地位。

今日大家都在搜的词: