首页 > 传媒 > 关键词 > 视频AR最新资讯 > 正文

视频AR玩法进入全身时代,相芯人体AI技术全面升级

2020-07-13 09:59 · 稿源:站长之家用户投稿

还在玩只限于人脸的AR玩法吗?一键美体塑形、视频体感游戏、用手机就能玩虚拟形象全身驱动……随着5G即将全面普及以及智能图形技术的不断创新,原本受限于高端硬件的全身AR技术,现在用智能手机就能玩,视频AR玩法也将全面进入了全身时代。

相芯科技此次对人体AI技术进行全面升级,在视频AR特效的功能基础上进行玩法升级,同时新增开放7大功能的算法接口,分别是2D人体关键点、3D人体骨骼、人像分割、头部分割、头发分割、动作识别、手势识别。每项技术革新背后都能带来新的应用层的火花,相芯更新的技术效果到底如何,一起来看下吧。

一、2D人体关键点

通过2D人体关键点算法接口,实现人体全身2D关键点的跟踪效果,点位准确性高,即使做大幅度动作、遮挡以及转身的情况下,也能准确稳定跟踪。同时针对用户在短视频、直播拍摄时的自拍场景,2D人体关键点还提供半身模式的点位跟踪,这样用户在单手持手机自拍的情况下,也能准确定位人体数据。

在高精度的人体关键点模型的基础上,对视频中的人物实现全身美体功能,是这项技术比较热门的应用场景。相芯的技术,可以从瘦身、长腿、细腰、美肩、美臀、小头、瘦腿等七个美化维度,对人物的身体进行精细化调整,从而达到一件瘦身塑形的作用。

二、3D人体骨骼

相芯科技开放的3D人体骨骼的算法接口,主要应用于基于3D关键点和3D骨骼,实现3D虚拟形象的全身驱动。这项技术不依赖于深度摄像头,只需要手机的普通摄像头就能获得视频中的人体3D骨骼数据,即使人物做大幅度的动作、有动作遮挡、转身等情况都能稳定跟踪。除了身体躯干动作,在手指细节上,也能识别和跟踪常见的14种手势。让3D虚拟形象能够更细腻地复原人物的动作。同样针对他人拍摄和自拍两种拍摄场景,相芯提供全身和半身两种模式,支持3D人体骨骼数据的输出。

三、人像分割

通过人像分割的算法接口,可对输入的视频进行内容理解,将人物进行高精分割解析,将人像区域分离出来,并实时追踪。例如视频直播过程中,识别用户的人体轮廓,为人物实时替换各种背景特效。也可以与各具创意的人体AR贴纸相结合,让贴纸实时跟随人体移动,贴纸素材与人体的前后位置关系可灵活定义,可以充分发挥运营者的互动创意,为用户带来更加丰富的娱乐体验。

四、头部分割

通过头部分割接口,企业和开发者可以对人物头部区域做更多的特效创意。例如搞笑大头玩法特效,可以实现视频中的人物头部放大的萌态效果。这项技术还能和其他技术进行组合实现更加新颖的玩法效果。比如将头部分割和表情系数结合,即可用特点的表情,触发大头效果,并用表情的夸张程度来实时控制头部的放大程度。用头部分割+哈哈镜+AR贴纸这样的技术组合,就可以实效恶搞版的效果,充分发挥脑洞创意。

五、头发分割

通过头发分割接口,可以在视频和照片中人物的头发区域高精度地分离出来,可以给头发切换各种各样的颜色,可以是纯色,也可以是渐变色,实现一键换发色的特效。同时头发的色值支持自定义,并可以进行上色程度的调整,实现想要的发色,想换就换。

六、动作识别

相芯科技的动作识别接口,能够支持15种全身动作的识别。将动作识别和匹配算法相结合,可以开发出各种体感小游戏,比如“尬舞机”游戏,跟着屏幕的动作提示即可开始跳舞了。同时动作识别也可以与AR贴纸相结合,用特定动作来触发贴纸特效,充分发挥体感互动的娱乐性。

七、手势识别

通过手势识别接口,可精准识别常见的14种手势动作。在短视频直播领域,用户在拍视频和拍照过程中,可以通过手势动作来触发各种贴纸特效,从而衍生出创意视频的各种玩法。同时,在智能设备领域,比如智能家电、智能机器人、可穿戴设备、智能互动大屏等智能硬件,可以实现用手势控制对应的功能。用户在不接触设备的情况下,通过简单的手势,就能实现对设备的交互和控制,让人机交互方式更加智能化、自然化。

相芯科技专注于人工智能和计算机图形学的融合与创新,致力于为消费级应用提供内容创作工具、平台和解决方案。相芯科技的人脸人体AI解决方案目前已累计服务700多家B端客户,产品被广泛应用于短视频、直播、社交、游戏、智能家居、在线教育、广告营销、新零售等领域,月均调用量达40亿。

此次的人体AI SDK大更新,相芯针对不同体验需求推出了两个版本的体验demo,分别是特效版和算法版demo。

【特效版demo】模拟真实的用户应用场景,提供技术的功能演示和体验,可以在这个demo里面直观体验美颜、美妆、道具贴纸、Animoji、美发、轻美妆、AR面具、搞笑大头、海报换脸、表情识别、音乐滤镜、哈哈镜、美体、全身Avatar、动作识别、人像分割、手势识别等功能。

同时针对开发者用户,为了能更好地体验各个功能接口在算法层的效果,相芯全新推出【算法版demo】,使用这个demo就能直观地看到各种人体关键点、人体骨骼、mask类功能的算法效果,便于进一步开发使用。目前开放的接口为2D人体关键点、3D人体骨骼、人像分割、头部分割、头发分割、动作识别、手势识别。

网友热搜:

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • AI 技术再度爆红,ColorOS 7.2 用 AI 让体验更出色

    近日,一段百年前拍摄的北京影像在网络上广泛传播,大家关注的重点是这段影像经过 AI 修复,不仅增添了色彩,同时人物面部表情也更加清晰,让人们一睹 1920 年热闹的北京城。就在大家感叹 AI 技术的神奇时,却不知 AI 早就被运用在身边。以常见的 OPPO 手机为例,其搭载的最新系统 ColorOS 7.2 在多处运用了 AI 技术,让体验变得更轻快流畅,还能达到省电的效果。一键重现老照片,AI 修复就在身边在数字时代,很多人都想将泛黄的老

  • 从新技术到健康生态,华米科技通过AI技术改善用户健康

    6月15日,华米科技(NYSE:HMI)在安徽合肥举办主题为「AI to Decode Future」的首届AI创新大会,为我们带来了诸多AI技术研究与相关应用。次日,华米科技还举办了AI技术开放日活动,邀请业内专家与高校院校学生共同探讨国内外人工智能话题,探索人工智能未来发展的趋势方向。 AI创新大会:华米自研新技术、新硬件惊喜不断在本届AI创新大会上,华米科技正式发布了新一代智能可穿戴芯片“黄山2号”、第二代PPG?物追踪光学传感器BioTrack

  • 左手拿着钱,右手又撒钱,AI 技术公司为啥喜欢这么玩?

    根据 IT 桔子数据,目前人工智能技术领域拿钱最多的是估值 60 亿美元的独角兽商汤科技,截止到 7 月初,其融资总额达 193.75 亿元。另外,中国当前还有 6 家头部 AI 技术公司拿到的钱超过了 30 亿元。

  • AI技术融入教学服务,阿卡索实力践行“科技普惠教育”发展理念

    在新冠疫情持续的影响下,在线教育成为了越来越多人居家学习的首选,由此行业规模和市场关注度呈现直线上升态势。大众在称赞其突破时空限制传播优质教育资源的便捷性之余,也对在线教育依托互联网进行线上教学的学习效果与未来发展方向提出了质疑与探讨。究竟在线教育的教学效果如何?人工智能与5G等新技术频出的时代,在线教育该如何更好地服务用户呢?据在线英语教育机构阿卡索此前发布的一项用户调查数据显示,58.16%的用户对疫情

  • 谷歌发布全新AR技术 单摄像头即可实现AR景深感应

    早在去年12月,Google就展示了如何使用单个摄像头为AR增强现实创建深感图,而在今天,ARcore深度API终于在Android上线,并且已有多个第三方应用程序已经开始使用。虽然其他厂商也在试图为自己

  • AI视觉技术突破创新,国际学术权威CVPR收录多篇联发科论文

    近日,世界人工智能大会(WAIC)正在如火如荼的举办,而全球另一个极负盛名的AI学术盛会也在每年年中时备受关注,那就是国际计算机视觉与模式识别会议(IEEE Conference on Computer Vision and Pattern Recognition,简称CVPR)。该会议是由IEEE举办的一年一度的学术性会议,在各种学术会议统计中,CVPR被认为有着很强的影响力和很高的排名,是国际最有影响力的年度AI盛事之一。作为全球顶级学术会议,CVPR每年吸引全球数千位计算

  • 唐桥科技实现60帧音视频技术,音视频技术的新基准

    今日,唐桥科技宣布实现60帧音视频技术突破。区别于当前广泛应用的30帧技术,高刷率可以帮助远程医疗打破音画清晰度的局限,一些更深部位疾病的远程诊疗,例如心脏、脑部、血管等人体内部细微构造的远程超声也将在60帧技术的协助下得到进一步发展与应用。远程医疗的1.0时代随着网络连接和智能设备的加速发展,远程医疗行业得到前所未有的发展机遇。我国在远程医疗领域起步较晚,直到20世纪80年代末,我国才开始进行研究性远程医疗试验探索

  • 唐山5.1级地震北京天津市民提前30秒收到预警 原来是百度AI技术助力

    【TechWeb】7月12日消息,据央视报道,7月12日6时38分在河北唐山市古冶区发生5.1级地震。据悉,成都高新减灾研究所与应急管理部门联合建成的大陆地震预警网成功预警该地震,给唐山市提前3秒预警,给天津市提前33秒预警。该地震是大陆地震预警网自2011年以来连续成功预警的第57次破坏性地震。震中附近地区开通了地震预警功能的手机、电视、互联网电视和手机APP用户等提前收到地震预警信息,一些北京、天津民众提前30秒收到预警。值

  • 李开复谈AI赋能:“AI+”有价值 但“+AI”对社会经济贡献更大

    创新工场董事长兼首席执行官李开复近日出席2020世界人工智能大会云端峰会,并发表《从“AI+”到“+AI”:以技术重构中国经济》的主题演讲。从之前的“AI+”到现在的“+AI”,二者有何区别?李开复表示,“AI+”是以AI为核心,工程师、科学家主导寻找商业机会。而“+AI”是以传统公司为主导,AI赋能传统行业产生价值。李开复认为:”再过五年,我相信AI会进入下一阶段——无处不在。AI应用会变得越来越简?

  • 在线教育走向“口碑竞争”时代 小狸AI课让“AI”更有教育温度

    近年来,在线教育行业迅速发展,在线学习逐渐获得学生和家长的认可。专家指出,“在线教育是教育服务的重要趋势,正成为中国经济新的增长点。”据预测, 2020 年中国在线教育市场规模将达 4330 亿元。而在国家进一步完善和加强政策法规的推动下,在线教育走向“重新洗牌的冷静调整期”,注重师资、课程和品牌的头部企业容易突出重围,赢得市场和资本的青睐。在此背景下,儿童智能启蒙教育领先品牌——小狸AI课凭借卓越的教学品质广

  • 华米科技AI创新大会今日开幕,共同见证AI解构健康未来

    2020年 6 月 15 日消息,今天下午,全球领先的智能可穿戴公司华米科技(NYSE:HMI)将于中国合肥举行首届AI创新大会,本届AI创新大会以「AI to Decode Future」为主题,将与全球 AI 领域专家一道,规划 AI 与健康结合的新蓝图,用 AI 解构未来,让科技连接健康。一直以来,华米科技在探索 AI 的路上从未止步,并在人工智能领域取得一定的技术积累。2017 年,华米科技成立人工智能实验室,启动人工智能可穿戴芯片研发,并将目标锁定?

  • AR初创公司Magic Leap起诉前工程师窃取技术一案遭驳回

    6月18日消息,据国外媒体报道,增强现实(AR)初创公司Magic Leap起诉其前工程师窃取技术一案遭驳回。当地时间周三,加州圣何塞的联邦法官卢西·柯(Lucy Koh)批准杭州太若科技公司(以下简称太若科技,也称Nreal)创始人徐驰提出的撤销此案的请求。她认为,Magic Leap对徐驰的指控没有充分的证据。去年6月份,Magic Leap对徐驰提起诉讼。该诉讼以太若科技为共同被告,指控徐驰违反了合同、欺诈和不公平竞争。该公司?

  • 宋祖儿推荐AI志愿助手 百度AI高考志愿助手入口地址

    宋祖儿推荐的AI志愿助手工具可根据考生所在省份招考政策以及考生个人成绩和选科情况,智能分析历年招生计划、往年录取分数、同水平考生往年报考情况等,结合考生分数信息和实时搜索大数据,帮助考生更科学合理地填报志愿,为考生择校、选择专业提供参考。百度AI志愿助手入口地址只需要在百度app搜索「高考」关键词即可打开。以下是功能介绍:

  • 联发科独立AI处理器APU3.0,手机AI应用的原动力

    近年来,手机在语音助手、AI拍照、视频优化、VR/AR游戏等方面的AI应用快速发展,手机想要实现这些AI应用,需要芯片提供足够强大的AI算力和低功耗效能,因此手机芯片厂商纷纷在SoC中加入了独立的人工智能处理器,用于专门进行AI运算。例如联发科的天玑系列5G芯片,无论是主打高端市场的天玑 1000 系列,还是主打中高端市场的天玑 800 系列,都搭载了联发科自研的独立AI处理器 APU 3.0。早在 2018 年,联发科就开始将独立AI处理器内?

  • 华米科技AI创新大会圆满落幕,AI解构可穿戴未来

    2020 年 6 月 15 日,全球领先的华米科技(NYSE:HMI)首届AI创新大会于安徽合肥顺利举行,本场大会紧紧围绕着「AI to Decode Future」的主题,阐述了AI与健康产业未来的关系,并发布了新一代智能可穿戴芯片“黄山2号”、新一代PPG?物追踪光学传感器BioTracker? 2及一系列全新的?体数据AI算法?华米科技在本届AI创新大会之前,就已经通过“黄山1号”芯片,PPG?物追踪光学传感器BioTracker?以及RealBeats?生物数据引擎为用户在健康方?

  • 能发明会创造的AI,能否拥有专利权?

    ​一个可变形食品容器,一个应急灯,如此简单的两个新发明让欧美的专利局头疼不已,因为这两个产品是由AI设计发明的。2018 年,一位美国的AI研究者斯蒂芬·泰勒分别向美国专利局(USPTO)和欧洲专利局(EPO)提交了两份专利申请,并坚持声称这两个产品是由他自己研发的人工智能DABUS独立设计发明的。

  • 多项重磅技术首次落地!小米宣布声学语音技术实现全面自研

    近日,小米发布了小爱音箱Art,作为小米推出的第9款智能音箱,小米小爱音箱Art背后的声学语音技术也重磅升级,搭载第三代小爱同学,支持情感化语音交互、全屋播放及就近唤醒等。今日,小米官方

  • 中国移动总经理董昕:5G将使AI更泛在 AI让5G更智能

    【TechWeb】7月9日消息, 在2020世界人工智能大会(WAIC)上,中国移动总经理董昕表示,5G将使AI更泛在,AI让5G更智能。董昕指出,中国移动积极推动5G+AI发展,全力以赴加快5G、AI等新型基础设施建设。中国移动通过加快5G网络建设,来夯实连接基础。已建成超过14万个5G基站,在超过50个城市提供5G商用服务,着力建设覆盖全国、技术先进、品质优良的5G精品网络。我们加速推动5G技术创新和标准成熟,位列全球运营商第一阵营。我们推

  • 网易云音乐战略投资AI音乐公司“AIVA” 共同开发AI音乐引擎

    近日,网易云音乐宣布,战略投资AI音乐公司“AIVA”,双方将结合人工智能技术在AI辅助音乐创作领域展开深度合作。接下来,网易云音乐和AIVA将共同开发面向中国音乐人的AI音乐引擎,辅助音乐人进行创作。

  • 单霁翔:故宫背后的AI力量 让文物“活起来”

    在世界人工智能大会上,中国文物学会会长、故宫博物院学术委员会主任单霁翔就“AI+文化”——让文化遗产资源“活起来”为主题展开分享。单霁翔表示希望通过互联网技术、数字技术来传播博物馆文化,让更多的人了解故宫文化。人工智能在文化遗产保护领域里面有很多的应用,包括展厅温湿度、城墙沉降的监测、白蚁的监测、古建筑病害的监测、观众流量的监测等。以下为单霁翔演讲全文:大家好,我来自故宫博?

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议