首页 > 传媒 > 关键词 > 视频AR最新资讯 > 正文

视频AR玩法进入全身时代,相芯人体AI技术全面升级

2020-07-13 09:59 · 稿源:站长之家用户投稿

还在玩只限于人脸的AR玩法吗?一键美体塑形、视频体感游戏、用手机就能玩虚拟形象全身驱动……随着5G即将全面普及以及智能图形技术的不断创新,原本受限于高端硬件的全身AR技术,现在用智能手机就能玩,视频AR玩法也将全面进入了全身时代。

相芯科技此次对人体AI技术进行全面升级,在视频AR特效的功能基础上进行玩法升级,同时新增开放7大功能的算法接口,分别是2D人体关键点、3D人体骨骼、人像分割、头部分割、头发分割、动作识别、手势识别。每项技术革新背后都能带来新的应用层的火花,相芯更新的技术效果到底如何,一起来看下吧。

一、2D人体关键点

通过2D人体关键点算法接口,实现人体全身2D关键点的跟踪效果,点位准确性高,即使做大幅度动作、遮挡以及转身的情况下,也能准确稳定跟踪。同时针对用户在短视频、直播拍摄时的自拍场景,2D人体关键点还提供半身模式的点位跟踪,这样用户在单手持手机自拍的情况下,也能准确定位人体数据。

在高精度的人体关键点模型的基础上,对视频中的人物实现全身美体功能,是这项技术比较热门的应用场景。相芯的技术,可以从瘦身、长腿、细腰、美肩、美臀、小头、瘦腿等七个美化维度,对人物的身体进行精细化调整,从而达到一件瘦身塑形的作用。

二、3D人体骨骼

相芯科技开放的3D人体骨骼的算法接口,主要应用于基于3D关键点和3D骨骼,实现3D虚拟形象的全身驱动。这项技术不依赖于深度摄像头,只需要手机的普通摄像头就能获得视频中的人体3D骨骼数据,即使人物做大幅度的动作、有动作遮挡、转身等情况都能稳定跟踪。除了身体躯干动作,在手指细节上,也能识别和跟踪常见的14种手势。让3D虚拟形象能够更细腻地复原人物的动作。同样针对他人拍摄和自拍两种拍摄场景,相芯提供全身和半身两种模式,支持3D人体骨骼数据的输出。

三、人像分割

通过人像分割的算法接口,可对输入的视频进行内容理解,将人物进行高精分割解析,将人像区域分离出来,并实时追踪。例如视频直播过程中,识别用户的人体轮廓,为人物实时替换各种背景特效。也可以与各具创意的人体AR贴纸相结合,让贴纸实时跟随人体移动,贴纸素材与人体的前后位置关系可灵活定义,可以充分发挥运营者的互动创意,为用户带来更加丰富的娱乐体验。

四、头部分割

通过头部分割接口,企业和开发者可以对人物头部区域做更多的特效创意。例如搞笑大头玩法特效,可以实现视频中的人物头部放大的萌态效果。这项技术还能和其他技术进行组合实现更加新颖的玩法效果。比如将头部分割和表情系数结合,即可用特点的表情,触发大头效果,并用表情的夸张程度来实时控制头部的放大程度。用头部分割+哈哈镜+AR贴纸这样的技术组合,就可以实效恶搞版的效果,充分发挥脑洞创意。

五、头发分割

通过头发分割接口,可以在视频和照片中人物的头发区域高精度地分离出来,可以给头发切换各种各样的颜色,可以是纯色,也可以是渐变色,实现一键换发色的特效。同时头发的色值支持自定义,并可以进行上色程度的调整,实现想要的发色,想换就换。

六、动作识别

相芯科技的动作识别接口,能够支持15种全身动作的识别。将动作识别和匹配算法相结合,可以开发出各种体感小游戏,比如“尬舞机”游戏,跟着屏幕的动作提示即可开始跳舞了。同时动作识别也可以与AR贴纸相结合,用特定动作来触发贴纸特效,充分发挥体感互动的娱乐性。

七、手势识别

通过手势识别接口,可精准识别常见的14种手势动作。在短视频直播领域,用户在拍视频和拍照过程中,可以通过手势动作来触发各种贴纸特效,从而衍生出创意视频的各种玩法。同时,在智能设备领域,比如智能家电、智能机器人、可穿戴设备、智能互动大屏等智能硬件,可以实现用手势控制对应的功能。用户在不接触设备的情况下,通过简单的手势,就能实现对设备的交互和控制,让人机交互方式更加智能化、自然化。

相芯科技专注于人工智能和计算机图形学的融合与创新,致力于为消费级应用提供内容创作工具、平台和解决方案。相芯科技的人脸人体AI解决方案目前已累计服务700多家B端客户,产品被广泛应用于短视频、直播、社交、游戏、智能家居、在线教育、广告营销、新零售等领域,月均调用量达40亿。

此次的人体AI SDK大更新,相芯针对不同体验需求推出了两个版本的体验demo,分别是特效版和算法版demo。

【特效版demo】模拟真实的用户应用场景,提供技术的功能演示和体验,可以在这个demo里面直观体验美颜、美妆、道具贴纸、Animoji、美发、轻美妆、AR面具、搞笑大头、海报换脸、表情识别、音乐滤镜、哈哈镜、美体、全身Avatar、动作识别、人像分割、手势识别等功能。

同时针对开发者用户,为了能更好地体验各个功能接口在算法层的效果,相芯全新推出【算法版demo】,使用这个demo就能直观地看到各种人体关键点、人体骨骼、mask类功能的算法效果,便于进一步开发使用。目前开放的接口为2D人体关键点、3D人体骨骼、人像分割、头部分割、头发分割、动作识别、手势识别。

网友热搜:

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • AI 技术再度爆红,ColorOS 7.2 用 AI 让体验更出色

    近日,一段百年前拍摄的北京影像在网络上广泛传播,大家关注的重点是这段影像经过 AI 修复,不仅增添了色彩,同时人物面部表情也更加清晰,让人们一睹 1920 年热闹的北京城。就在大家感叹 AI 技术的神奇时,却不知 AI 早就被运用在身边。以常见的 OPPO 手机为例,其搭载的最新系统 ColorOS 7.2 在多处运用了 AI 技术,让体验变得更轻快流畅,还能达到省电的效果。一键重现老照片,AI 修复就在身边在数字时代,很多人都想将泛黄的老

  • 阿卡索AI技术“赋能”未来在线教育

    近日, 2020 年的高考成绩陆续开始“放榜”,关于中国未来教育的讨论又激烈了起来。今年对于教育行业来说也是前所未有的变革期,年初的一场疫情让众多行业都遭受了重创,然而在线教育却在危难的时刻发挥了它的价值。线下利空,线上短期流量暴涨,原本可能需要未来若干年才能被在线教育覆盖的用户,都集中在那一两个月中快速转战线上。在线教育需求趋向多元化发展,语言学习仍是当前市场主流在线教育服务产品丰富多元,涵盖学科辅导

  • 左手拿着钱,右手又撒钱,AI 技术公司为啥喜欢这么玩?

    根据 IT 桔子数据,目前人工智能技术领域拿钱最多的是估值 60 亿美元的独角兽商汤科技,截止到 7 月初,其融资总额达 193.75 亿元。另外,中国当前还有 6 家头部 AI 技术公司拿到的钱超过了 30 亿元。

  • 内容赛道太挤了?趣头条强化AI技术优化内容生态

    时势造英雄,下沉巨头的崛起无法脱离时代背景。三个条件的达成,让互联网新巨头的诞生成为可能。 1:千元智能手机性能的全面提升 2:全国生活区4G网络覆盖的基本完成 3:4G网络速度提升而套餐资费连续下降 此三项的实现,代表着全国范围的互联网基础设施建设的基本完成。据今年三月的数据,我国网民数量已经达到9. 04 亿,其中手机接入的比例达到99.3%。所谓要想富先修路,设备与网络的普及,释放了五环外用户对于互联网产品的需求,

  • 创新奇智斩获MIT场景解析世界冠军,彰显AI视觉技术实力

    近日,创新奇智凭借突破性的AInnoSeg全景分割算法,刷新MIT Scene Parsing Benchmark 场景解析任务世界最好成绩,领先商汤科技( 2020 年 3 月、 5 月为该基准测试的世界冠军)、北京大学、南京大学、腾讯等众多知名公司和研究机构,以绝对优势获得冠军。关于ADE20K数据集MIT Scene Parsing Benchmark 致力于为场景感知、场景解析、实例分割和语义理解等计算机视觉技术提供训练和性能标准化评估平台。该基准测试的数据来自ADE20K数

  • 数字技术拓展金融服务新空间 榕树贷款探索AI应用新场景

    近日,中国信通院发布《中国数字经济发展白皮书( 2020 年)》。《白皮书》显示, 2019 年,我国数字经济增加值规模达到35. 8 万亿元,占GDP比重达到36.2%,占比同比提升1. 4 个百分点,按照可比口径计算, 2019 年我国数字经济名义增长15.6%,高于同期GDP名义增速约7. 85 个百分点,数字经济在国民经济中的地位进一步凸显。总体上,我国数字经济规模不断扩张、贡献不断增强。 数字经济获持续高度重视 到目前为止,本届中央政治局

  • AI视觉技术突破创新,国际学术权威CVPR收录多篇联发科论文

    近日,世界人工智能大会(WAIC)正在如火如荼的举办,而全球另一个极负盛名的AI学术盛会也在每年年中时备受关注,那就是国际计算机视觉与模式识别会议(IEEE Conference on Computer Vision and Pattern Recognition,简称CVPR)。该会议是由IEEE举办的一年一度的学术性会议,在各种学术会议统计中,CVPR被认为有着很强的影响力和很高的排名,是国际最有影响力的年度AI盛事之一。作为全球顶级学术会议,CVPR每年吸引全球数千位计算

  • 唐山5.1级地震北京天津市民提前30秒收到预警 原来是百度AI技术助力

    【TechWeb】7月12日消息,据央视报道,7月12日6时38分在河北唐山市古冶区发生5.1级地震。据悉,成都高新减灾研究所与应急管理部门联合建成的大陆地震预警网成功预警该地震,给唐山市提前3秒预警,给天津市提前33秒预警。该地震是大陆地震预警网自2011年以来连续成功预警的第57次破坏性地震。震中附近地区开通了地震预警功能的手机、电视、互联网电视和手机APP用户等提前收到地震预警信息,一些北京、天津民众提前30秒收到预警。值

  • 李开复谈AI赋能:“AI+”有价值 但“+AI”对社会经济贡献更大

    创新工场董事长兼首席执行官李开复近日出席2020世界人工智能大会云端峰会,并发表《从“AI+”到“+AI”:以技术重构中国经济》的主题演讲。从之前的“AI+”到现在的“+AI”,二者有何区别?李开复表示,“AI+”是以AI为核心,工程师、科学家主导寻找商业机会。而“+AI”是以传统公司为主导,AI赋能传统行业产生价值。李开复认为:”再过五年,我相信AI会进入下一阶段——无处不在。AI应用会变得越来越简?

  • 实力不够AI来凑?韩国围棋棋手AI作弊被判监禁

    2017年6月23日,在中国浙江乌镇举办了一场举世瞩目的围棋挑战赛,由谷歌人工智能阿尔法狗对阵当前世界排名第一的棋手柯洁,经历了4个多小时的酣战,阿尔法狗1/4战胜了柯洁,这也让人们对人工智能

  • AI音乐的“原创”激辩

    周杰伦的新歌《Mojito》微醺了整个社交平台。就在 300 万夕阳红粉丝为新歌付费买单的第二天,这首《Mojito》就已经免费上了B站和两大短视频平台。

  • 宋祖儿推荐AI志愿助手 百度AI高考志愿助手入口地址

    宋祖儿推荐的AI志愿助手工具可根据考生所在省份招考政策以及考生个人成绩和选科情况,智能分析历年招生计划、往年录取分数、同水平考生往年报考情况等,结合考生分数信息和实时搜索大数据,帮助考生更科学合理地填报志愿,为考生择校、选择专业提供参考。百度AI志愿助手入口地址只需要在百度app搜索「高考」关键词即可打开。以下是功能介绍:

  • 千人面试单日完成,多面企业视频面试软件引领AI面试新潮流

    今年三月,河南能源化工集团与多面合作开展了春季校园招聘,在多面企业视频面试软件的支持下,该企业成功开启了首场千人视频面试。值得一提的是,此次千人面试从简历上传到批量智能邀约,多面只用了 30 分钟,就完成了整场面试的准备工作。如果按照传统常规的招聘面试流程,像这种千人体量的面试是很难在一天的时间之内完成的,甚至单是邀约工作都需要好几天的时间。而且对于企业而言,人员招聘过程中最有价值的部分,就是由面试官

  • 能发明会创造的AI,能否拥有专利权?

    ​一个可变形食品容器,一个应急灯,如此简单的两个新发明让欧美的专利局头疼不已,因为这两个产品是由AI设计发明的。2018 年,一位美国的AI研究者斯蒂芬·泰勒分别向美国专利局(USPTO)和欧洲专利局(EPO)提交了两份专利申请,并坚持声称这两个产品是由他自己研发的人工智能DABUS独立设计发明的。

  • 中国移动总经理董昕:5G将使AI更泛在 AI让5G更智能

    【TechWeb】7月9日消息, 在2020世界人工智能大会(WAIC)上,中国移动总经理董昕表示,5G将使AI更泛在,AI让5G更智能。董昕指出,中国移动积极推动5G+AI发展,全力以赴加快5G、AI等新型基础设施建设。中国移动通过加快5G网络建设,来夯实连接基础。已建成超过14万个5G基站,在超过50个城市提供5G商用服务,着力建设覆盖全国、技术先进、品质优良的5G精品网络。我们加速推动5G技术创新和标准成熟,位列全球运营商第一阵营。我们推

  • 董明珠:格力专利技术全国第一 天天被偷人偷技术

    8月4日,据媒体报道,在洛阳-格力中国智造高峰论坛上,格力电器董事长董明珠表示,格力电器专利技术在全国排在第一,天天被别人偷人偷技术。董明珠表示,消费者需要电器的就是健康、安全、舒适

  • 这个设计师的作品备受欢迎,但他其实只是个AI

    俄罗斯最大的设计公司之一Art. Lebedev工作室就尝试了将AI生成的作品冒充为人类创作,并成功的骗过了很多合作客户。

  • 思必驰AI电视 “芯”方案 强大却不仅于此

    在彩电市场持续萎靡的背景之下,智能电视依靠更具潮流的产品理念及更友好的使用体验完成产品升级,成为家电行业的一匹黑马。据调查,2020年2月中国智能电视的日均使用时长环比大幅增长11.5%,这无疑为整体规模增长乏力的彩电行业注入了一剂强心针;另有报告称,2020年智能电视市场渗透率将达到90%以上*。电视遇见AI,不仅是基础功能的迭代焕新,而是生活品质与方式的跃进。AI与语音的结合,势必为智能电视发展新赛道中一条必由之路。TH1520-

  • 单霁翔:故宫背后的AI力量 让文物“活起来”

    在世界人工智能大会上,中国文物学会会长、故宫博物院学术委员会主任单霁翔就“AI+文化”——让文化遗产资源“活起来”为主题展开分享。单霁翔表示希望通过互联网技术、数字技术来传播博物馆文化,让更多的人了解故宫文化。人工智能在文化遗产保护领域里面有很多的应用,包括展厅温湿度、城墙沉降的监测、白蚁的监测、古建筑病害的监测、观众流量的监测等。以下为单霁翔演讲全文:大家好,我来自故宫博?

  • 老产品也有新机会,加个 AI 就行

    根据最新一项数据显示,在小型企业中,虽然有近20%的企业为自己的新LOGO支付设计费用,但还有近一半的小型企业更愿意寻求免费的在线logo设计平台。毕竟对于他们而言,花费数十万邀请知名设计师来设计LOGO不太现实。

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签