首页 > 产品 > 关键词 > 黑科技最新资讯 > 正文

抖音AI特效火遍全网,真人秒变漫画形象,吴亦凡PDD戚薇都玩上瘾了

2020-06-22 08:54 · 稿源:量子位公众号

声明:本文来自于微信公众号 公众号量子位(ID:QbitAI),作者丨金磊,授权站长之家转载发布。

这两天,抖音上一款特效——「变身漫画,简直火到不行。

从明星到路人,堪称全民参与,来看下效果吧~

首先登场的是张艺兴戚薇

这项AI“黑科技”火了,能让真人秒变漫画形象

可以看到,这个特效基于人物的面容,很好的转换成了二次元漫画风格。

尤其是眼睛的处理,把张艺兴慵懒的眼神、戚薇水汪汪的大眼睛,诠释的淋漓尽致。

当然发型也都是「满分转换」,分叉、造型等细节可以说是丝毫不差了。

抖音网友们直呼:

终于看到这个特效啦!早就想看偶像的漫画风,圆梦了!

可爱的PDD同学也参与了进来,这个漫画风让他变得少了些油腻,多了份清纯,好评!

这项AI“黑科技”火了,能让真人秒变漫画形象

调皮的网友竟发出疑问:

安西教练?

当然,刷了众多视频之后,你会发现这个特效并不是适合所有人,建议以下 2 类人慎用此特效。

第一类是颜值过高,这里的高是指本来长相就像「从漫画里走出来」的人,例如吴亦凡。

这项AI“黑科技”火了,能让真人秒变漫画形象

本来吴亦凡是浓眉大眼、五官立体,转换后却显得「单薄」了不少。

第二类是彪形大汉……话不多说,来感受一下这个画风……

这项AI“黑科技”火了,能让真人秒变漫画形象

嗯……原来的味道,全没了……引得网友直呼:

你为什么要拉过来?

发我男朋友看一下,让他认清社会的现实。

突破「次元壁」的关键技术

那么如此有趣的特效,是怎么做到的呢?

虽然目前并没有看到专门对应此特效的研究,但是有关「风格迁移」的研究,并不是新鲜的事物了。

而在众多研究中,打破二次元和三次元的关键技术,就是GAN (对抗生成网络)。

用GAN实现漫画风

早在去年,港中文、哈工大和腾讯优图的一篇最新研究,可以将人脸照片转化成如同手绘版的卡通图,甚至还能反向转换,将二次元的卡通图像,转换成现实中可能的样子。

将真实人脸照片转化成卡通图像,效果超越了CycleGAN。

这项AI“黑科技”火了,能让真人秒变漫画形象

还能转换成日漫画风,自带了热血青春的气息。

这项AI“黑科技”火了,能让真人秒变漫画形象

这项研究利用到的技术叫做Landmark Assisted CycleGAN,它利用面部标志特征来定义一致性损失,指导在CycleGAN中训练局部鉴别器。

整体结构如下:

这项AI“黑科技”火了,能让真人秒变漫画形象

整体来说,这个转换过程分为 3 步。

首先,生成器先根据CycleGAN生成一张粗糙的卡通人脸。

随后,模型根据第一步生成的图像,生成一个预训练回归量(regressor),来预测面部landmark,对面部的关键点进行标记。

最后,通过局部和全局两种鉴别器,研究人员细化在卡通图和对应真实图像中的人脸特征。在这个阶段,强调了landmark的一致性,因此最后的生成生成结果逼真且有辨识度。

用GAN实现油画风

例如MIT和IBM沃森联合实验室,发布的名为AI Portraits Ars的工具,只要给定一张图像,就能秒变「文艺复兴款」的油画风。

这项AI“黑科技”火了,能让真人秒变漫画形象

值得一提的是,这不是风格迁移,而是GAN自己画出来的。

不止能拿着照片作画,看着视频也没问题,例如 1960 年的老电影《惊魂记》。

这项AI“黑科技”火了,能让真人秒变漫画形象

这项技术里GAN的生成器就像是个画师,而判别器就充当鉴赏家角色,负责识破生成器的画不是人类作品。

生成器里有个潜在空间,里面有千千万万的AI画像,都是从人类画作里,用不同的向量修改而成。

然后,要按着照片生成画像,就把一个向量 (Latent Vector) ,映射到千万AI画像里和照片最接近的一幅。

团队还设计了一个Inverter,可以从照片里近似出一个向量,用来找到潜在空间里最合适的那个向量。

这项AI“黑科技”火了,能让真人秒变漫画形象

用GAN让纸片人活起来

除此之外,GAN甚至还可以让2D形象变成3D“活物”。

例如来自华盛顿大学的照片唤醒 (Photo Wake-Up)技术,可以让你体验到麻瓜的神奇魔法。

它可以让你最爱的体育明星从照片里跑出来:还能赋予二次元角色新力量:

还可以借此把角色们AR/VR化,只要动动手指,它们就能出现在你身边的世界:

这项AI“黑科技”火了,能让真人秒变漫画形象

这项研究整个操作过程,其实只用了三步:

这项AI“黑科技”火了,能让真人秒变漫画形象

第一步是分割纸片人:利用现成的图像分割算法,将画中人的躯干、四肢分割,再用人体姿态估计,提取画中人的2D骨骼关键点,忽略厚重的衣服,拟合出一种半裸的可塑3D模型,称为SMPL模型。

第二步是是细化纸片人3D模型:先将SMPL模型映射到2D世界对准轮廓,调好再次转换成3D模型确保精确度。

最后一步中,研究人员用CMU的Mo-cap人体动作数据集喂给模型。

让二次元走进现实

除了抖音最近火爆的「变身漫画」特效外,隔壁岛国的一项「3D姿态追踪」也火了。

可以让漫画人物跟随着你的动作,一起翩翩起舞,仿佛二次元人物走进了现实。

这项AI“黑科技”火了,能让真人秒变漫画形象

利用「真人模型」也是可以的。

这项AI“黑科技”火了,能让真人秒变漫画形象

并且这项技术可在线体验哦(链接见传送门)。

这项AI“黑科技”火了,能让真人秒变漫画形象

这样一来,和你心仪的二次元对象,在现实中共舞便不再是梦!

若是把明星作为模型输入的一部分,是不是也可以跟偶像共舞了?

咦?好像可以预见娱乐平台的下一个爆款特效了。

传送门

3D姿态追踪项目地址:

https://github.com/digital-standard/ThreeDPoseTracker

参考链接:

https://mp.weixin.qq.com/s/5covdsSaNBIAqORbtfHa4w

https://mp.weixin.qq.com/s/VU06PqZ4OaLxpjLwIObWZw

https://mp.weixin.qq.com/s/gXonxan5baaJ6jwEcY9ILg

  • 相关推荐
  • 大家在看
  • 宝洁旗下黑科技“OPTE AI 素颜仪”于天猫国际开启预售

    近日,宝洁中国创新投资部门开发出的首款产品 “OPTE AI 素颜仪”于天猫国际正式开启预售,首批限量 3000 台。作为全球首款精准击斑美容仪,“OPTE AI 素颜仪”革新了美妆护肤产品,旨在通过黑科技技术帮助用户在实现“即刻遮斑,长效淡斑”的效果,开启数字化美妆技术应用的新时代。 宝洁旗下精准遮斑黑科技 “OPTE AI 素颜仪”正式登陆天猫国际 在第二届中国国际进口博览会上,“OPTE AI 素颜仪”首次与中国消费者见面,便获得?

  • 奥佳华新品E20 AI按摩椅,按摩黑科技为梦添翼!

    在追梦的道路上,要向着星辰大海出发,但也要保持身心健康,才能支撑起远大的理想,按摩椅品牌奥佳华2020年重磅推出新品——E20 AI按摩椅,为“进取”和“享受”找到平衡支点,为梦添翼,助力你的奋斗人生!未来感的外观,追梦者的希望奥佳华相信,追梦的人们本身就自带万丈光芒。奥佳华E20 AI按摩椅机身流畅的优雅弧度,未来感十足。机体两侧的翼状图纹,象征着追梦的翅膀,同时也能给予你默默的温柔守护。有明净大气的皓月白、沉稳端庄的大地?

  • 上分利器索尼Xperia 1 畅享游戏黑科技

    提及索尼Xperia 1,大多消费者首先想到的是结合索尼 BRAVIA? 电视显示技术的专业电影级 21:9 手机显示屏;是源自索尼微单? 技术的消除杂讯与眼部对焦的拍摄功能;是匹配索尼专业色彩准确度和重塑技术CineAlta的电影大师模式。但Xperia1 除了具备以上黑科技加持外,它同时也迎合了当下广大手游爱好者对手机性能方面的不断追求,Xperia1 的“游戏增强器”功能,这个功能彰显了索尼游戏场景的应用功底,支持玩家选择性能优先或电池续航

  • 无卡上网 - 多多流量宝App黑科技上网

    移动互联网时代,一部手机在手,走遍天下不愁。移动网络无处不在,从3G、4G再到即将来临的5G时代,国内的通讯服务在不断进化,用户对流量的需求也不断上升,基于各大应用的流量消耗业务一直保持增长。然而通讯服务,尤其从运营商处订购手机流量的服务仍然存在一些不便捷性。基于eSIM核心技术,「RedteaGO - 多多流量宝」App轻松实现无卡上网,做任务换流量,从为用户提供应急、免费、低价流量套餐开始,打开流量订购服务的新姿势,

  • 日本推出夏季清凉口罩 加入制冷剂等黑科技

    随着夏天的到来,天气变热之后人们戴口罩将成为一个艰难的选择,是要选择安全还是更加舒适呢,这让很多人纠结要不要戴口罩。不过近日日本有家公司开发了一款清凉口罩,尤其适合夏季的炎热天气。

  • CBA战火重燃,TCL黑科技为球迷解锁横竖都好看!

    6 月 20 日,CBA联赛正式重启, 20 支参赛球队被分成南北两个赛区,于东莞、青岛两座城市进行赛会制对决。空场比赛依然无法阻挡球迷的热情,在赛前,广东宏远球迷通过TCL·XESS旋转智屏黑科技,和CBA新锐球星胡明轩、杜润旺、王薪凯,率先进行了一场“横竖都好看”的“云打call”之旅。CBA联赛新锐齐聚首,花式打call横竖都好看本赛季CBA联赛上半段,九冠王广东宏远队的年轻小将胡明轩、杜润旺、王薪凯都打出生涯最好表现。胡明轩?

  • 瑞思拜!“宝藏萌车”欧拉R1的硬核黑科技

    世界汽车产业正在进入一个真正颠覆式创新的时代,而其中最大的浪潮非汽车智能化莫属。今天,汽车的定义正在由“交通工具”蜕变为“智能产品”,智能化正在成为引领汽车行业深刻发展的重要标志和手段。随着全球5G时代的来临,基于车联网的汽车智能化发展将迎来飞速前进的时期。作为长城汽车进军新能源领域的“先锋军”,欧拉R1 持续领跑细分市场赛道,除了凭借时尚颜值和过硬品质,其智能互联“黑科技”,顺应科技趋势和时代潮流,?

  • 华米科技AI创新大会今日开幕,共同见证AI解构健康未来

    2020年 6 月 15 日消息,今天下午,全球领先的智能可穿戴公司华米科技(NYSE:HMI)将于中国合肥举行首届AI创新大会,本届AI创新大会以「AI to Decode Future」为主题,将与全球 AI 领域专家一道,规划 AI 与健康结合的新蓝图,用 AI 解构未来,让科技连接健康。一直以来,华米科技在探索 AI 的路上从未止步,并在人工智能领域取得一定的技术积累。2017 年,华米科技成立人工智能实验室,启动人工智能可穿戴芯片研发,并将目标锁定?

  • 企业视频彩铃:广告黑科技为企业新营销赋能

    2016年,Papi酱三分钟“内容创业”收获的上亿估值和千万级广告费用,不仅展示出Papi酱当时的顶流地位,更让短视频一夜崛起火遍全网。之后,伴随着一南一北快手抖音15秒“扎根”网民日常生活,短视频发展的碎片化秩序越发明显,市场呈现出多极化竞争局面。企业视频彩铃业务,正是短视频技术和市场嫁接下的产物。背靠手握十亿级用户的运营商,企业视频彩铃的起点有着其它短视频应用无法比拟的高度。在用户即流量、流量即商机的营销时代,企业?

  • 后浪来势汹涌,看SIMBA如何将黑科技床垫玩出新花样?

    前段时间,在B站推出的《后浪》视频刷屏后,年轻群体又有了“后浪”这个新名字。B站成功的破圈营销,将圈层文化推向了主流视野。对品牌来说,如何乘浪打动年轻人的心,成为品牌年轻化营销的关键。618 年中大促已至,来自英国的科创床垫品牌SIMBA面向以“后浪”为代表的新新消费群体,开展了一场品牌破圏营销。以各路圈层KOL为沟通支点,围绕“重构想象 FUN肆去睡”的主题,直达消费者心智。重构睡眠体验 ,焕新消费感知 此次SIMBA?

  • 抖音上很火的变漫画特效怎么开 漫画脸特效开启步骤汇总

    在抖音上最近有很多人使用变漫画脸的特效,这个特效可以将人的脸或者身体变成日本漫画风格,那么如何在抖音里开启漫画脸风格呢,我们来看下具体的操作步骤。

  • 华米科技AI创新大会圆满落幕,AI解构可穿戴未来

    2020 年 6 月 15 日,全球领先的华米科技(NYSE:HMI)首届AI创新大会于安徽合肥顺利举行,本场大会紧紧围绕着「AI to Decode Future」的主题,阐述了AI与健康产业未来的关系,并发布了新一代智能可穿戴芯片“黄山2号”、新一代PPG?物追踪光学传感器BioTracker? 2及一系列全新的?体数据AI算法?华米科技在本届AI创新大会之前,就已经通过“黄山1号”芯片,PPG?物追踪光学传感器BioTracker?以及RealBeats?生物数据引擎为用户在健康方?

  • 黑科技加持智能清洁家电 扫地机器人哪个牌子好?

    目前,新智能高科技电子产品的问世,大大便利了人们的生活。尤其是智能扫地机器人产品,不仅解放用户的双手,还能提升了生活舒适度,也为我们打造更理想的品质时代。在家居清洁领域中,以国际知名品牌斐纳TOMEFON为代表的智能家电产品,正在一步步改变我们的生活习惯。斐纳TOMEFON是全球三大清洁家电品牌之一,目前在京东、天猫等主流电商平台上稳居扫地机器人品类销量第一名。那么,斐纳TOMEFON的优势又体现在哪些方面呢?斐纳TOME

  • TWS降噪黑科技——Nank南卡A1降噪蓝牙耳机亲测

    自从AirPods这款蓝牙耳机火了之后,真无线耳机市场也就开始热闹了起来,各种真无线耳机开始层出不穷,每款蓝牙耳机之间也是各有各的特色,而接下来将要给给大家带来的就是其中比较有特色的的一款:Nank南卡A1 真无线入耳式降噪蓝牙耳机。顾名思义,从它名称上面就能够看出来,这款蓝牙耳机主打的特色除了真无线还有降噪(注意这里说的可是主动降噪),在这一点上目前市面上的的真无线耳机还是不多见的。Nank南卡A1 降噪耳机一上市?

  • “超级黑科技产品”百家号科技领域收入排名,做自媒体月收入有多少

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。超级黑科技产品是当前百家号中的普通号,目前账号百家号权重为0,综合排名位列1035478名,科技分类排名位列50851名,领先了7.3%的百家号。 超级黑科技产品百家号概况 超级黑科技产品的简介为每天分享我的心情故事,所见所闻,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过0篇的游戏

  • “零距离沟通”黑科技成焦点!长城欧拉R1再爆新料

    世界车联网处于高速发展阶段,而我国在政策的强力支持下,现如今中国车联网的发展将迎来颠覆式、创新式的新时代。而作为中国自主汽车品牌代表的长城汽车,以欧拉为核心扩展新时代下的新能源纯电动汽车市场,旗下产品欧拉R1,不仅颜值深受用户喜爱,在智能车联网方面也有着诸多亮眼功能。语音互联,与欧拉R1 的交流“ 0 距离”只要简单的一句“你好,欧拉”,即可和“萌宠”欧拉R1 交流。来自科大讯飞的语言识别技术,让欧拉R1 的?

  • 高品质互联网电视推荐:轻奢黑科技 高端接地气

    随着基础通讯配套设施和相关互联网软硬件产品与服务的飞速发展,人们愈发认识到“理想客厅生活”所应该具备的多重要素。电视作为客厅C位也应该具备更多功能,互联网电视逐渐走入人们的视野。荣耀智慧屏X1 系列是荣耀以五大标准为标杆推出的最新力作,凭借超高性价比,一度打破京东黑电品类新品首销最快破亿记录,受到了权威媒体以及广大消费者的肯定。荣耀智慧屏X1 系列采用4K全面屏,屏占比达到了94%,采用3D流光边框设计,机身最

  • 从终端先行到AI先行,华米科技AI创新大会将带来可穿戴领域变革?

    6 月 8 日,国内可穿戴行业知名公司华米科技公布了一则重磅消息,将于 6 月 15 日在合肥举行「AI to Decode Future」AI 创新大会,在这场主题为用AI解构未来的大会上,华米科技将与全球重量级专家们一道就AI领域进行深度探讨。过去一年中,AI 领域加快了发展的脚步,从野蛮生长到加速落地、整合,AI 已经开始渗透到生活的方方面面,与之相关的产业也在蓬勃发展。这其中,华米科技凭借在运动健康及可穿戴设备领域上的深耕,开始走?

  • 2020潮玩新秀酷狗硬件:明明可以靠颜值取胜,偏偏用黑科技拥抱用户

    酷狗硬件产品作为国内音乐设备的新秀,近年来可以说是爆款频出,引起了不少追求高品质音乐设备消费者的关注。其中,酷狗硬件“黑科技”带来的高品质音质和多样化功能,更是让人对这个硬实力强劲的“黑马”国货潮牌另眼相看。酷狗硬件为了还原最纯粹高品质的音乐,从音质源头开始,以软硬件黑科技结合的方式,为声音“保驾护航”。以酷狗X1 高解析圈铁耳机为例,酷狗音乐的海量正版曲库正是它的高品质音源保证,像HiFi音乐一类以往?

  • 满屏黑科技!海信年度最爆款ULED超画质电视U7全球发布

    在 6 月 12 日海信举办的新品发布会上,海信ULED超画质电视U7 正式亮相,带来了包括120Hz疾速屏、 100 级全阵列动态背光、AI+MEMC运动补偿技术等诸多特性,在视听和游戏体验方面亮点多多。 海信U7 拥有 100 级全阵列动态背光,配合AI光控芯片,让亮部更亮,且不过曝,暗部更暗,却富有层次。最大对比度可达 8900 比1,细节表现和层次感是同价位产品的两倍。 120Hz疾速屏是海信U7 又一大亮点,高刷屏幕使得画面更加稳定流畅、丝般?

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议