首页 > 业界 > 关键词  > AI最新资讯  > 正文

POCO:用于3D人体姿势和形状估计的新型人工智能框架

2023-10-16 10:14 · 稿源:站长之家

要点:

通过2D图像估计3D人体姿态和形状是一个具有挑战性的任务,因为存在深度模糊、遮挡和不寻常的服装等问题。

传统方法在估计不确定性时存在一些限制,而POCO框架提供了一种改进方法,可以在单个前向传递中同时推断姿态参数和不确定性。

POCO框架引入了条件向量和图像特征来提高基本密度函数的建模,同时通过SMPL姿势来调整网络,从而提高了姿态重建和不确定性估计的准确性。

站长之家(ChinaZ.com)10月16日 消息:人体姿态和形状(HPS)的三维估计是重建现实世界中的人体行为所必需的。然而,从二维图像进行三维推断面临深度模糊、遮挡、不寻常的服装和运动模糊等挑战。即使最先进的HPS方法也会出现错误,通常对这些错误不太了解。

HPS是一个中间任务,提供了下游任务所需的输出,如理解人类行为或三维图形应用。这些下游任务需要一种机制来评估HPS结果的准确性,因此这些方法必须生成与HPS质量相关的不确定性(或置信度)值。

image.png

项目地址:https://poco.is.tue.mpg.de/

POCO框架的核心创新是"双重条件策略(DCS)",它增强了基本密度函数和规模网络。与先前的方法不同,POCO引入了一个条件向量(Cond-bDF)来建模推断的姿态误差的基本密度函数。POCO利用图像特征进行条件化,使其能够更好地适应多样性和复杂的图像数据集的训练。

image.png

此外,POCO的作者们引入了一种改进的方法,用于在HPS模型中估计不确定性。他们利用图像特征并将网络与SMPL姿态相结合,从而提高了姿态重建和更好的不确定性估计。他们的方法可以无缝集成到现有的HPS模型中,提高准确性而没有副作用。该研究声称这种方法在将不确定性与姿态错误相关方面优于最先进的方法。

POCO框架是一个创新的AI工具,用于三维人体姿态和形状的估计。它通过引入双重条件策略,改进基本密度函数和规模网络,显著提高了估计的准确性。这一方法可以应用于多样性和复杂图像数据集,使其成为一种有望推动人体行为分析和三维图形应用的关键技术。如果您对此感兴趣,不妨查看相关链接以了解更多详情。

(举报)

  • 相关推荐
  • 真人AI混拍,内娱的救赎还是过渡的废棋?

    自从有了AI,新事物层出不穷,以至于都未及命名。眼看着首部XXXX剧不断问世,好在除了炒股的,大家也并不真在意这种“第一名”。 9月下旬,先是“首部真人实拍结合AI制作”的古装玄幻剧《行镖》上线腾讯视频,紧接着“首部超长真人出演AI季播剧”《不羡鸳鸯只羡仙》在爱奇艺悦享会官宣。在AI长片上英雄所见略同的两家长视频平台,如今又在真人AI混拍中长剧上狭路相

  • 荐AI猫狗演短剧,谁在背后数钱?

    一个你大概率经历过的场景:深夜刷短视频,屏幕里的比熊、橘猫、马尔济斯,会跟着流行 BGM 卡点跳舞,对着镜头撒娇、吐槽打工的委屈,甚至上演宫斗、复仇、职场逆袭的连续短剧。 过去两年,一批AI生成的猫狗视频正在以惊人的速度占领抖音、小红书、YouTube和TikTok。仅仅是抖音 #AI 萌宠话题,就已累计播放量达到26.4亿次,超12.4万创作者参与内容生产。 不同于传统云吸宠

  • 荐AI博主圈,正被「中戏北电」挤满

    短视频平台上的AI博主们,正在越来越卷,一拨人新模型、新工具的测评频率在加速,而另一拨人,迈入AI创作领域的,也在向影视创作的专业标准靠拢。 这轮竞争中,影视科班的存在感尤为强烈。 9月收官的抖音AI创作大赛,金奖由“2XLabs”的《合龙》摘得,这支团队有十余年影视行业经验。银奖作品《反正也没时间活》的作者“站立起来的影子”,此前从事过导演、摄影、

  • 跳出游戏争当AI金主,“腾讯们”到底图啥

    眼下,游戏产业正在与AI产业深度交织。 前不久,专注3D大模型的三启万物完成B轮及B+轮融资,三七互娱与延趣游戏联手入局,而此前7月的A3轮融资,浮现了四三九九与贪玩游戏的身影。 上述案例,并非个例。 近一两年来,腾讯、网易、巨人网络、昆仑万维、完美世界等头部以及腰部的游戏公司纷纷化身AI产业的战略投资者,频频出手好不阔气。 从游戏走向风投,这步棋究

  • AI 算⼒狂飙,高新投三江如何守住算⼒中⼼的消防“安全底盘”?

    高新投三江针对算力中心火灾风险本质变化,提出从保障基础设施安全升级为保障核心高价值资产与业务连续性。方案涵盖极早期多维探测(吸气式感烟、热解粒子、光纤测温、氢气CO及复合探测)、洁净气体精准灭火(七氟丙烷、全氟己酮)和自研RISC-V芯片与云平台智能联动,实现早预警、快灭火、业务不中断,让算力生长于安全土壤。

  • 智采云全面AI化旗下工业品集采平台

    文章指出,我国工业品、MRO等集采市场已达万亿级,但传统平台多停留在线上交易,存在需求描述、精准寻源、参数比对、清单核对难等痛点。智采云依托DeepSeek等大模型完成全平台全链路AI升级,打造AI对话寻源、可解释推荐、批量物料梳理和AI语义检索四大能力,率先实现工业品集采全场景AI原生智能化,助力企业高效、精准、合规、降本采购。

  • 国内AI公司如何打通算力与应用?联想集团的混合式AI实践

    联想2026/27财年Q1营收269亿美元增43%,AI收入93亿美元增60%、占35%;AI PC全球份额25.1%,中国区占笔记本52.8%。云栖大会展示万全智算、天禧/百应智能体等混合AI方案;世界杯提供终端、边缘计算及AI裁判分析。华为云发布昇腾智算、Agentic MaaS、AgentArts,已服务百余企业;机器狗与L4域控落地。

  • 零犀科技:让AI不只“像专家”,而是让结果可验证、可归因、可追溯

    大模型在图像、文字、语音上更像专家,但“像”不等于“懂”,核心是因果理解。零犀科技构建因果大模型,沿关联、干预、反事实三层推理,以领域因果知识图谱校验,使结果可验证、可归因、可回溯;并以销售、行业、语音智能体作为数字劳动力落地保险等场景,按业务结果定价,2024年首年盈利,探索垂类AGI。

  • 一颗球验AI场景科技?海尔《“球”同存异》挑战即将来袭

    海尔将于10月12日上线《“球”同存异》系列实验视频,以七组球对应居家七大痛点,直观检验AI场景科技。实验用气球、海洋球测空调风感与油烟机吸力,台球、温感球测洗衣机稳定与恒温,牛肉球、冰球、足球测冰箱保鲜速冻及电视抗眩光。全程不堆参数,只靠真实场景和肉眼可见结果说话,揭晓AI科技硬实力。

  • 荐5集播放量破1.5亿,国产AI韩剧热度能否持续?

    ​在最近的短视频里,韩国财阀校园快被中国交换生“包场”了。 四川女孩不忍霸凌,当场掀桌;少林交换生一套功夫打进韩国校园;东北妹子穿进韩剧,顺手整顿财阀少爷。有人操着方言输出,有人顶着一张标准的韩系神颜大杀四方。 这批短视频内容还有一个共同点,演员、场景及大部分镜头,都由AI生成。 其中较出圈的当属《漂亮的恶意》更新到第五集播放量1.5亿+,账号

今日大家都在搜的词: