首页 > 产品 > 关键词 > 黑科技最新资讯 > 正文

抖音AI特效火遍全网,真人秒变漫画形象,吴亦凡PDD戚薇都玩上瘾了

2020-06-22 08:54 · 稿源:量子位公众号

声明:本文来自于微信公众号 公众号量子位(ID:QbitAI),作者丨金磊,授权站长之家转载发布。

这两天,抖音上一款特效——「变身漫画,简直火到不行。

从明星到路人,堪称全民参与,来看下效果吧~

首先登场的是张艺兴戚薇

这项AI“黑科技”火了,能让真人秒变漫画形象

可以看到,这个特效基于人物的面容,很好的转换成了二次元漫画风格。

尤其是眼睛的处理,把张艺兴慵懒的眼神、戚薇水汪汪的大眼睛,诠释的淋漓尽致。

当然发型也都是「满分转换」,分叉、造型等细节可以说是丝毫不差了。

抖音网友们直呼:

终于看到这个特效啦!早就想看偶像的漫画风,圆梦了!

可爱的PDD同学也参与了进来,这个漫画风让他变得少了些油腻,多了份清纯,好评!

这项AI“黑科技”火了,能让真人秒变漫画形象

调皮的网友竟发出疑问:

安西教练?

当然,刷了众多视频之后,你会发现这个特效并不是适合所有人,建议以下 2 类人慎用此特效。

第一类是颜值过高,这里的高是指本来长相就像「从漫画里走出来」的人,例如吴亦凡。

这项AI“黑科技”火了,能让真人秒变漫画形象

本来吴亦凡是浓眉大眼、五官立体,转换后却显得「单薄」了不少。

第二类是彪形大汉……话不多说,来感受一下这个画风……

这项AI“黑科技”火了,能让真人秒变漫画形象

嗯……原来的味道,全没了……引得网友直呼:

你为什么要拉过来?

发我男朋友看一下,让他认清社会的现实。

突破「次元壁」的关键技术

那么如此有趣的特效,是怎么做到的呢?

虽然目前并没有看到专门对应此特效的研究,但是有关「风格迁移」的研究,并不是新鲜的事物了。

而在众多研究中,打破二次元和三次元的关键技术,就是GAN (对抗生成网络)。

用GAN实现漫画风

早在去年,港中文、哈工大和腾讯优图的一篇最新研究,可以将人脸照片转化成如同手绘版的卡通图,甚至还能反向转换,将二次元的卡通图像,转换成现实中可能的样子。

将真实人脸照片转化成卡通图像,效果超越了CycleGAN。

这项AI“黑科技”火了,能让真人秒变漫画形象

还能转换成日漫画风,自带了热血青春的气息。

这项AI“黑科技”火了,能让真人秒变漫画形象

这项研究利用到的技术叫做Landmark Assisted CycleGAN,它利用面部标志特征来定义一致性损失,指导在CycleGAN中训练局部鉴别器。

整体结构如下:

这项AI“黑科技”火了,能让真人秒变漫画形象

整体来说,这个转换过程分为 3 步。

首先,生成器先根据CycleGAN生成一张粗糙的卡通人脸。

随后,模型根据第一步生成的图像,生成一个预训练回归量(regressor),来预测面部landmark,对面部的关键点进行标记。

最后,通过局部和全局两种鉴别器,研究人员细化在卡通图和对应真实图像中的人脸特征。在这个阶段,强调了landmark的一致性,因此最后的生成生成结果逼真且有辨识度。

用GAN实现油画风

例如MIT和IBM沃森联合实验室,发布的名为AI Portraits Ars的工具,只要给定一张图像,就能秒变「文艺复兴款」的油画风。

这项AI“黑科技”火了,能让真人秒变漫画形象

值得一提的是,这不是风格迁移,而是GAN自己画出来的。

不止能拿着照片作画,看着视频也没问题,例如 1960 年的老电影《惊魂记》。

这项AI“黑科技”火了,能让真人秒变漫画形象

这项技术里GAN的生成器就像是个画师,而判别器就充当鉴赏家角色,负责识破生成器的画不是人类作品。

生成器里有个潜在空间,里面有千千万万的AI画像,都是从人类画作里,用不同的向量修改而成。

然后,要按着照片生成画像,就把一个向量 (Latent Vector) ,映射到千万AI画像里和照片最接近的一幅。

团队还设计了一个Inverter,可以从照片里近似出一个向量,用来找到潜在空间里最合适的那个向量。

这项AI“黑科技”火了,能让真人秒变漫画形象

用GAN让纸片人活起来

除此之外,GAN甚至还可以让2D形象变成3D“活物”。

例如来自华盛顿大学的照片唤醒 (Photo Wake-Up)技术,可以让你体验到麻瓜的神奇魔法。

它可以让你最爱的体育明星从照片里跑出来:还能赋予二次元角色新力量:

还可以借此把角色们AR/VR化,只要动动手指,它们就能出现在你身边的世界:

这项AI“黑科技”火了,能让真人秒变漫画形象

这项研究整个操作过程,其实只用了三步:

这项AI“黑科技”火了,能让真人秒变漫画形象

第一步是分割纸片人:利用现成的图像分割算法,将画中人的躯干、四肢分割,再用人体姿态估计,提取画中人的2D骨骼关键点,忽略厚重的衣服,拟合出一种半裸的可塑3D模型,称为SMPL模型。

第二步是是细化纸片人3D模型:先将SMPL模型映射到2D世界对准轮廓,调好再次转换成3D模型确保精确度。

最后一步中,研究人员用CMU的Mo-cap人体动作数据集喂给模型。

让二次元走进现实

除了抖音最近火爆的「变身漫画」特效外,隔壁岛国的一项「3D姿态追踪」也火了。

可以让漫画人物跟随着你的动作,一起翩翩起舞,仿佛二次元人物走进了现实。

这项AI“黑科技”火了,能让真人秒变漫画形象

利用「真人模型」也是可以的。

这项AI“黑科技”火了,能让真人秒变漫画形象

并且这项技术可在线体验哦(链接见传送门)。

这项AI“黑科技”火了,能让真人秒变漫画形象

这样一来,和你心仪的二次元对象,在现实中共舞便不再是梦!

若是把明星作为模型输入的一部分,是不是也可以跟偶像共舞了?

咦?好像可以预见娱乐平台的下一个爆款特效了。

传送门

3D姿态追踪项目地址:

https://github.com/digital-standard/ThreeDPoseTracker

参考链接:

https://mp.weixin.qq.com/s/5covdsSaNBIAqORbtfHa4w

https://mp.weixin.qq.com/s/VU06PqZ4OaLxpjLwIObWZw

https://mp.weixin.qq.com/s/gXonxan5baaJ6jwEcY9ILg

  • 相关推荐
  • 大家在看
  • 科大讯飞暑促即将开启 AI黑科技产品你Pick谁?

    伴随着高考结束,暑期正式开启,而这时候各大厂商暑促活动也随之启动。据悉,国内人工智能领军企业科大讯飞即将在全国线下门店开展暑促活动,其AI+办公、AI+生活与AI+学习这三大场景C端明星产品均参与进来。科大讯飞作为人工智能领军企业,其技术最新进展及应用受到广泛关注外,落地到C端的AI产品也同样备受瞩目。在刚刚过去的 618 大促中,科大讯飞逆势增长,2C整体表现强势,在京东、天猫、苏宁三大平台获 22 项冠军, 2020 年 6

  • 直击数博会,聚辉电子5大黑科技揭秘

    在特殊的 2020 年,要数被提及最多的三个关键词,一定少不了“在线”!在线办公、在线上课、在线访谈、在线看房、在线看展···在线上可以完成很多事情,但没了人气的学校、办公室是不完整的,没了人气的展会是没有灵魂的。值得开心的是,原本的展会终于要回来了! 2020 亚洲数字展览展示博览会将在 8 月 3 日- 5 日广州·中国进出口商品交易会展馆举行,多媒体互动体验领航者广州聚辉电子有限公司带着诚意满满的作品,全力以赴。其

  • 打造“智慧监所”的“黑科技”——剃须刀智能管控柜

    近年来,各地监所面临押量大、民警警力少、被监管人员成分复杂、管理难度大、被监管人员信息资源整合共享不足等管理难题,实施“智慧司法”,建设“智慧监狱”、“智慧戒毒所”、“智慧看守所”成为当下司法系统的热门话题。为深入贯彻落实司法部党组新时期司法行政改革发展要求与“数字法治、智慧司法”信息化体系建设战略部署,琼山戒毒所在海南省戒毒管理局的指导下紧紧围绕全国统一的司法行政戒毒工作基本模式,积极采取各项行

  • 合生元sn-2 plus奶粉独创喂养黑科技,助力宝宝无忧成长

    初为父母,在宝宝成长发育中肯定都遇到了这样那样的问题,其实话题难题都聚集的一定是配方奶粉。大多数宝宝都不会一直吃母乳长大,原因多样,但配方奶粉的选择趋势却一直是奶粉结构亲和人体,好吸收,这是大多数妈妈的首选条件。合生元sn-2 plus奶粉率先应用喂养黑科技,帮助妈妈解决喂养难题。合生元sn-2 plus奶粉具备五大黄金喂养效果sn-2 plus是什么?可以简单的理解为是一款先进的技术,它使奶粉的结构脂更丰富更亲和宝宝身体?

  • 云从科技发布“轻舟”平台:轻松搭建你想要的AI生态

    2020 年 7 月 9 日,世界人工智能大会云端峰会正式开幕。AI国家队、四小龙之一的云从科技在本届WAIC大会上举行新品发布会——“轻舟”平台及“千帆”合作伙伴计划。这是云从科技的新一代行业级人工智能产品和能力平台,为各行业用户深度赋能,提供适应多种需求的产业开发及生态搭建基础,将有效降低应用门槛、提升落地效率与质量。云从轻舟平台将更有效地促进AI与各行业的深度融合,加速AI的行业落地应用。对此,云从科技高级副总?

  • 索尼A8H OLED电视搭载众多黑科技 为市场注入新鲜血液

    虽然当今大环境总体受疫情的影响,但是依然没有阻挡住索尼前进的步伐,在 2020 年索尼依然以势不可挡的趋势发布了众多新品,为高端彩电市场注入了新鲜血液。索尼春季新品一共发布了 5 个系列合计 17 款新品电视,其中索尼A8H OLED电视在众多新品中脱颖而出,那么,我们探索一下索尼A8H OLED电视的与众不同之处。索尼本次发布的新品A8H OLED电视采用了4K HDR图像处理芯片X1 旗舰版,在不同观看场景下,AI环境智能感应调节功能将根据

  • 买买买!苹果收购的AI初创公司比其它任何科技公司都多

    从 2010 年到 2019 年 9 月,总共有 635 起人工智能公司收购。从 2013 年到 2018 年,这类型收购增加了 6 倍,仅 2018 年就有 166 起收购,同比增长38%。对于苹果、谷歌和其他公司来说,这些购买几乎都是与新产品或新功能相关联。

  • 科技让世界更有“AI” 榕树贷款提供智能化信贷服务

    7 月 9 日上午, 2020 世界人工智能大会(WAIC)云端峰会在上海正式开幕,大会以“智联世界共同家园”为主题,主题论坛活动围绕“AI技术趋势”、“AI赋能经济”、“AI温暖家园”三大议题,集聚全球科学家、企业家及相关政府领导人,围绕智能领域的技术前沿、产业趋势和热点问题发表演讲和进行对话。 开幕式现场颁布了 2020 世界人工智能大会最高奖“SAIL 奖”(Super AI Leader,卓越人工智能引领者),会上还发布了新一批重要人?

  • 云从科技深耕商业 让AI重新定义汽车零售

    近日,由iDigital China举办,中国国际贸易促进委员会汽车行业分会战略支持的ADMIC汽车数字化&营销创新峰会暨金璨奖颁奖盛典在上海完美落幕。云从科技受邀出席了此次峰会,并荣获ADMIC金璨奖。基于长期的汽车垂直行业耕耘,备受行业关注的ADMIC年度金璨奖今年花落云从科技,荣获“年度优秀人工智能技术/平台”。这是对云从在汽车零售领域创新能力、行业影响力和业务价值的实力证明。此次峰会云集了沃尔沃、Jeep、保时捷、蔚来等国?

  • 日本盗版漫画站的利益链

    今年 6 月,日本参院全体会议一致通过了修改后的《著作权法》,规定:明知是网上擅自登载的盗版却下载漫画等行为违法。情节严重的还会处以刑事处罚。据日本第三方机构统计,截至 2020 年 4 月底,日本的盗版网站仍有超过 500 个,其中排名前 10 位的网站每月总访量超过了 8800 万次。

  • 快手黑科技亮相ChinaJoy2020 首发云端渲染技术产品

    中国国际数码互动娱乐展览会(简称ChinaJoy)将于 7 月 31 日至 8 月 3 日,在上海新国际博览中心如期举办。今年盛会的主题是“科技·引领数字娱乐新浪潮”,快手作为参展商,今年不仅带来了AKB48、GNZ48 等青春女团的魅力演出,AC娘虚拟偶像全新单曲,二次元动画电影《缘の羁绊》等精彩内容,还计划展示多项新技术成果,为大会、参会者提供耳目一新的展览体验。快手联合Intel共同打造的黑科技展区,设置了三项不同技术体验的交互设?

  • 让硬实力转化成好项目,睿帆科技入选AI商业落地潜力百强企业

    近日,在 2020 世界人工智能大会云端峰会·未来城市论坛上,作为中国大数据、人工智能业内最具影响力的媒体之一,专注于人工智能、大数据、移动互联网为代表,以前瞻性科技与不同领域产业结合、实现产业升级研究的亿欧智库正式发布了《 2020 中国人工智能商业落地研究报告》,报告公布了“ 2020 中国人工智能商业落地价值潜力 100 强榜单”。睿帆科技凭借领先的大数据技术在通信、政府、公共安全、轨交、金融、应急等行业的全面落?

  • 深兰科技最新AI学习平台亮相WAIC 低门槛高效能助力产业升级

    主题为“智联世界 共同家园”的2020世界人工智能大会云端峰会,采用线上为主、线上线下结合的形式,正在如火如荼举行。上海AI独角兽深兰科技携四大主力板块登陆云端峰会,并发布了一款名为MetaMind的自动化机器学习平台,引发高度关注。该产品是一个低门槛的自动化AI应用构建平台,是综合运用深兰自研的深度学习、机器学习、图像分类、图像检测、图像分割、文本分类、文本匹配、序列标注、机器学习回归、机器学习分类、机器学习时?

  • 手机QQ iOS版8.4.1版发布:全新“漫画表情”来了

    7月15日,腾讯QQ更新了Android 8.4.1版本,现在,iOS也紧随其后推出8.4.1版本,新功能与Android版非常接近。新版本的DIY表情相机新增漫画表情功能、表情长按支持搜索相关表情,

  • 李开复谈AI赋能:“AI+”有价值 但“+AI”对社会经济贡献更大

    创新工场董事长兼首席执行官李开复近日出席2020世界人工智能大会云端峰会,并发表《从“AI+”到“+AI”:以技术重构中国经济》的主题演讲。从之前的“AI+”到现在的“+AI”,二者有何区别?李开复表示,“AI+”是以AI为核心,工程师、科学家主导寻找商业机会。而“+AI”是以传统公司为主导,AI赋能传统行业产生价值。李开复认为:”再过五年,我相信AI会进入下一阶段——无处不在。AI应用会变得越来越简?

  • 实力不够AI来凑?韩国围棋棋手AI作弊被判监禁

    2017年6月23日,在中国浙江乌镇举办了一场举世瞩目的围棋挑战赛,由谷歌人工智能阿尔法狗对阵当前世界排名第一的棋手柯洁,经历了4个多小时的酣战,阿尔法狗1/4战胜了柯洁,这也让人们对人工智能

  • 触漫“Z世代”暖心助力公益,用漫画创作守护生物多样性

    生物多样性是支持地球生命和人类发展的基础。在 5 月 22 日到 6 月 11 日期间,触漫联合中国生物多样性保护与绿色发展基金会(简称:中国绿发会),在触漫站内发起以“地球应援团”为主题的UGC公益创作活动,动员青少年以实际行动保护地球生物多样性。经过层层评选,最终有 22 组优秀作品脱颖而出,并获得荣誉证书、公益周边等表彰和奖励。 保护珍稀动物刻不容缓,“Z世代” 用创作为地球应援 据资料介绍,目前全球拥有超过 30 亿

  • AI音乐的“原创”激辩

    周杰伦的新歌《Mojito》微醺了整个社交平台。就在 300 万夕阳红粉丝为新歌付费买单的第二天,这首《Mojito》就已经免费上了B站和两大短视频平台。

  • 宋祖儿推荐AI志愿助手 百度AI高考志愿助手入口地址

    宋祖儿推荐的AI志愿助手工具可根据考生所在省份招考政策以及考生个人成绩和选科情况,智能分析历年招生计划、往年录取分数、同水平考生往年报考情况等,结合考生分数信息和实时搜索大数据,帮助考生更科学合理地填报志愿,为考生择校、选择专业提供参考。百度AI志愿助手入口地址只需要在百度app搜索「高考」关键词即可打开。以下是功能介绍:

  • AI 技术再度爆红,ColorOS 7.2 用 AI 让体验更出色

    近日,一段百年前拍摄的北京影像在网络上广泛传播,大家关注的重点是这段影像经过 AI 修复,不仅增添了色彩,同时人物面部表情也更加清晰,让人们一睹 1920 年热闹的北京城。就在大家感叹 AI 技术的神奇时,却不知 AI 早就被运用在身边。以常见的 OPPO 手机为例,其搭载的最新系统 ColorOS 7.2 在多处运用了 AI 技术,让体验变得更轻快流畅,还能达到省电的效果。一键重现老照片,AI 修复就在身边在数字时代,很多人都想将泛黄的老

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签