首页 > 评论 > 关键词 > 人脸识别最新资讯 > 正文

人脸识别,现在连动漫角色都不放过

2020-09-17 16:50 · 稿源:量子位公众号

声明:本文来自于微信公众号“量子位”(ID:QbitAI),作者:萧箫,授权站长之家转载发布。

看过的动漫太多,以至于认角色时有点脸盲?

又或者,只想给自己的二次元老婆剪个出场合辑,却不得不在各大搜索引擎搜索关于她的照片?

试试爱奇艺推出的这个卡通人脸识别基准数据集iCartoonFace,用它训练AI帮你找动漫素材,效率分分钟翻倍。

对于脸型相近、但角色不同的二次元人物,能准确识别出来(脸盲福音):

如果人物视角出现变化,也能准确识别:

不仅如此,在人脸被大面积遮挡时,也能准确地识别出来:

至于阴影和光照也不在话下,哪怕站在树荫里,也能被AI“侦测”:

效果完全不输现有的真实人脸识别。

那么,这样的技术是怎么做出来的呢?

结合真人数据,训练卡通人脸识别

团队提出了一种卡通和真人的多人物训练框架,主要包括分类损失函数、未知身份拒绝损失函数和域迁移损失函数三部分,如下图所示。

其中,分类损失函数主要用来对卡通脸和真人脸进行分类。

而未知身份拒绝损失函数,则是为了在不同域之间进行无监督正则化投影。

至于域迁移损失函数,目的是降低卡通和真人域之间的差异性,对他们的相关性进行约束。

针对这个框架,研究者们探讨了三个问题:哪种算法最好?人脸识别是否有助于卡通识别?上下文信息对卡通识别是否有用?

从实验结果来看,ArcFace+FL的效果最佳,所以此次团队选用了这个算法。

至于后两个问题的答案,也是肯定的。

从下图的蓝线来看,加上真人人脸识别的信息后,对于卡通检测的识别同样有帮助。

至于上下文信息,团队也做了实验,下图是算法在卡通人脸基础上扩充不同比例下的性能识别。实验证明,上下文信息越丰富,人脸识别的效果也会更好。

事实上,动物角色训练出来的特征样本,相比于人脸来说,还是有点诡异。

下图中分别是原图和对应的特征样本,相比于动漫男生和女生,虹猫的特征显得有点……不可捉摸。

不过这也说明,一个标准、大型的动漫人脸数据集是有必要的。

标注数据,只需要一步

为了减少人工标注的工作量,研究者们设计了一种半自动数据集构建框架,用于构建iCartoonFace数据集。

如下图,这个框架可以分为三个阶段:

首先,对数据进行分层收集。先获取卡通图片信息,包括专辑和人物名称,再获取卡通人物图片,使得数据集结构非常清晰。

其次,对数据进行过滤。利用卡通人脸检测、特征提取器和特征聚类等,对图片数据进行噪声过滤。

其中,特征提取器的性能会发生变化:随着标注数据的增多,性能不断增强。

最后,标注人员只需要做一个步骤:根据特征聚类的结果,回答两张图片是否是同一个人物。

目前最大的卡通人物标注数据集

事实上,目前已有大量针对真人的人脸识别的技术和算法。

然而,针对二次元人脸识别的数据集依旧少之又少,大多数数据集存在着噪音比例大、数据量小的问题。

但这样的需求的确存在,不局限于对视频的结构化分析,还能应用于图片搜索、广告识别等场景。

例如,给创作者提供智能剪辑、或者是对恶搞的讽刺漫画、卡通风格人物进行审核辨识。

针对这个现象,爱奇艺开放了目前全球最大的手工标注卡通人物检测数据集与识别数据集iCartoonFace,包含超过 5000 个卡通人物、 40 万张以上的高质量实景图片。

下图是iCartoonFace与其他已有动漫数据集的对比,基于这个数据集设计框架,可以有效地提高卡通人物识别性能。

说不定,真能让广大观众对动漫角色“不再脸盲”。

传送门

论文链接:https://arxiv.org/pdf/1907.13394.pdf

数据集(在竞赛数据集一栏):https://iqiyi.cn/icartoonface

  • 相关推荐
  • 大家在看
  • 谷歌搜索推出新的人工智能工具 可以识别糟糕的拼写

    据外媒TheVerge报道,谷歌在其“SearchOn”活动上详细介绍了一系列新功能,它将在未来几周和几个月内对其基础的谷歌搜索服务进行改进。这些变化主要集中在使用新的人工智能和机器学习技术,为用户提供更好的搜索结果。其中最主要的是:一个新的拼写检查工具,谷歌承诺将帮助识别即使是最糟糕的拼写查询。

  • “人工智能创新大讲堂”在京开讲

    9月27日,由中国科学院人工智能产学研创新联盟举办的“人工智能创新大讲堂”系列活动的首期暨启动仪式在北京中国科学院学术会堂正式开启。“人工智能创新大讲堂”旨在通过传播、共享国内外人工智能领域新技术、新产品、新政策,提升全社会对人工智能的认知水平,让公众、企业、政府等共享人工智能发展成果,共促人工智能产业发展。本次活动由中国科学院科技战略咨询研究院副院长、中国科学院人工智能产学研创新联盟秘书长张凤主持?

  • 谷歌云人工智能预测服务全面开通

    谷歌宣布其人工智能平台的一个关键组成部分——人工智能预测服务已正式全面启动。该服务支持托管在主流的机器学习框架,包括TensorFlow、XGBoost和Scikit-Learn中。AI Prediction服务充当机器学习管道的最后阶段。它在云中托管经过训练的机器学习模型,以推断新数据的目标值。部署在AI预测服务中的经过训练的模型作为REST端点公开,可以从任何支持HTTP的标准客户端调用这些端点。AI平台预测服务基于Google Kubernetes Engine(GKE

  • 人脸识别门禁的运用原理及优势

    人脸识别门禁适合应用在什么场景里?了解了人脸识别门禁的运用原理和优势,我们就能知道人脸识别门禁现在几乎可以应用在各行各业需要门禁的场景里,为人员出入人证核验进行智能查验,智能开关门,有效减轻保安门卫的工作量,提高进入人员的安全防范和管控质量。为了更好地落实大检修期间施工人员进出厂规范管理要求,解决进厂人员激增与疫情防控,人工把关效率低的矛盾,最近中原石化在紧急部署组织实施门禁系统升级。截止目前已实

  • Facebook将利用人工智能来改善可再生能源的存储

    Facebook和卡内基梅隆大学宣布,他们正在尝试利用AI寻找新的"电催化剂"。电催化剂可以用来将多余的太阳能和风能转化为其他更容易储存的燃料。然而,如今的电催化剂既稀有又昂贵,寻找新的电催化剂并不容易。研究人员目前每年可以测试数万种潜在的催化剂,但Facebook和卡内基梅隆认为,在人工智能的帮助下,他们可以将催化剂的数量增加到数百万,甚至数十亿。

  • 马上金融人工智能技术一举夺得七项权威认证

    近日,马上消费金融(以下简称“马上金融”)自主研发的 7 项人工智能科研成果,获得了中国信息通信研究院专家组一致肯定,高分通过了中国人工智能产业发展联盟权威认证。本次参评项目覆盖了马上金融在自然语言处理、语音和视觉领域的先进人工智能技术和应用场景实践,反映了马上金融在人工智能方面自主研发能力的不断提升,标志着马上金融的自然语言处理技术服务平台、中文语音合成、中文语音识别、人脸检索、人证核验、文本客服及?

  • 格力集团35亿投资小米 将围绕人工智能进行深度布局

    因为董明珠和雷军之前的十年赌约,让格力和小米这两个本来毫无关系的企业扯在了一起。据信息时报消息,前阵子转让格力电器15%股权,套现 400 多亿的格力集团转身投资了小米。

  • IBM将剥离管理基础设施服务业务 专注于混合云与人工智能

    10月9日消息,据国外媒体报道,“蓝色巨人”IBM在官网上宣布,他们将剥离旗下的管理基础设施服务业务,成立一家新的公司,IBM则会专注于混合云与人工智能业务。IBM将剥离管理基础设施服务业务部门,是4月份上任的CEO阿尔温德·克里希纳(ArvindKrishna),在给团队的邮件中宣布的,IBM已在官网公布了这一邮件。阿尔温德表示,他们已经决定,将全球技术服务部门下的管理基础设施服务业务,剥离成一家独立的公司,新公司计

  • 国际高性能计算和人工智能咨询委员会全力打造以数据为中心的计算生态

    网络计算成为HPC China热门话题2020 年 9 月 28 日, 国际高性能计算和人工智能咨询委员会(HPC-AI Advisory Council)第 12 届中国年会,暨中国HPC大会(HPC China)大会分论坛 — 面向高性能HPC和AI云的新一代计算技术,向广大听众和观众介绍了当前最热门的两大计算技术,以数据为中心的计算技术和网络计算(In-Network Computing)技术,这和本次HPC China大会的主题不谋而合,展示出了提升计算性能和能力、提高处理数据的效率,成为?

  • 李彦宏:百度AI研发费用占收入19% 首提人工智能“乐高模式”

    近日,李彦宏在第三届数字中国峰会上表示,这几年来,百度不断投入巨额资金用于AI技术的研发(其中包括语音识别及合成技术、自然语言理解技术、图像及视频识别技术等大脑基础人工智能技术。 )。截至目前,百度AI研发费用占收入的比重达到了19%。

  • 6成受访人员认为,人脸识别技术有被滥用趋势

    ​近日“App个人信息举报”公众号上发布了一篇文章,文章表示通过发布了《人脸识别应用 公众调研报告》,在对回收的 2 万余份匿名问卷分析后,有六成受访者认为人脸识别技术有被滥用的趋势。

  • 人脸识别开源:让科技普惠更进一步

    随着智能生活的需求不断增长,智能锁作为家庭的第一道防线,发展尤为迅猛。智能门锁到底能给消费者怎样的便捷智慧居家生活,其实在广大的消费群体的认知里,还没有成熟的认知和概念,直到 2019 年人脸识别智能锁在各个媒体争相报道其利弊的争端时,刷脸开门智能锁的概念才渐渐融入到普罗大众的意识里。高科技时代的到来,随着智能家居产业的不断升级,智慧智能生活的概念不断深入人心。那么人脸识别智能锁如何应用在现实生活的应用

  • 原滴滴出行人工智能实验室负责人叶杰平加入贝壳找房

    DoNews10月12日消息(记者 翟继茹)12日,原滴滴出行人工智能实验室负责人叶杰平,正式加入贝壳找房,任贝壳技术副总裁、首席科学家,并将全面负责人工智能技术中心的相关工作,向贝壳找房CTO闫觅汇报。贝壳找房介绍,未来,叶杰平将带领团队进一步探索AI技术对“住”这一领域的改造可能,加速居住服务产业的数字化转型和智能化升级。资料显示,叶杰平是美国密歇根大学终身教授,是机器学习领域国际领军人物,主要从事机器学习、数

  • SK海力士推出首款DDR5 DRAM 适用于大数据、人工智能等领域

    【TechWeb】10月7日消息,SK海力士日前宣布,推出首款DDR5 DRAM(动态随机存取存储器)。DDR5是新一代DRAM标准。SK海力士推出DDR5 DRAMSK海力士表示,DDR5 DRAM作为超高速、高容量产品,尤其适用于大数据、人工智能、机器学习等领域。SK海力士于2018年11月成功开发首款16Gb DDR5 DRAM之后,向英特尔等核心客户提供样品,并完成了一系列测试与性能、兼容性验证等程序。这一成果也意味着SK海力士在即将到来的DDR5市场随时能够销售相

  • 三星电子2020年度人工智能论坛将于下月在线举行

    10月12日消息,据国外媒体报道,谷歌人工智能AlphaGo在人机围棋大战中击败李世石,向外界展示了人工智能的巨大潜力,人工智能技术在近几年也蓬勃发展,众多公司在大力研发人工智能技术,也涌现出了众多由机构或企业牵头举办的人工智能论坛。在人工智能论坛方面,韩国电子工业巨头三星电子也有举办,2020年度的论坛,在下月就将举办。从外媒的报道来看,三星电子已经宣布他们今年的人工智能论坛,将在11月2日至3日,以?

  • 腾讯安全天御亮相2020AIIA人工智能开发者大会,内容识别能力再获权威认证

    伴随着新一代人工智能技术跃升为产业升级战略性技术,AI与作为产业发展底座的安全之间的连接与融合,成为各行业关注的焦点。9 月 28 日- 29 日,AIIA2020 人工智能开发者大会在北京召开,行业顶尖专家和前沿创新资源荟萃一堂,致力为人工智能的持续发展吸纳更多支撑动力。在 9 月 29 日举办的内容安全分论坛上,腾讯安全天御内容识别服务系统V5. 0 凭借其在内容识别服务方面的功能优势与模式创新,成功获得由中国人工智能产业发展?

  • 要换机吗?消息称iPhone 12人脸识别更快、续航更久、变焦更好

    对于即将到来的iPhone 12系列,你做好换机准备了吗?现在,又有爆料人士送出了iPhone 12的新细节,比如苹果会在 iPhone 12 上提供“动态分区算法” 改进面容 ID,实现更快的验证速度

  • 原滴滴出行人工智能实验室负责人叶杰平加入贝壳找房 任技术副总裁

    10月12日消息,原滴滴出行人工智能实验室负责人叶杰平,正式加入贝壳找房,任贝壳技术副总裁、首席科学家,并将全面负责人工智能技术中心的相关工作,向贝壳找房CTO闫觅汇报。据了解,未来,叶杰平将带领团队进一步探索AI技术对“住”这一领域的改造可能,加速居住服务产业的数字化转型和智能化升级。相关资料显示,叶杰平,美国明尼苏达大学博士毕业,为美国密歇根大学终身教授,密歇根大学大数据研究中心管理委员会?

  • 2020中国人工智能年度评选开启,4大类别7大奖项申报正式启动

    现在,是时候从落地的角度给予AI行业年度性评价了。2020 中国人工智能年度评选开启, 4 大类别 7 大奖项申报启动从 2018 年开始,量子位的「中国人工智能年度评选」已经进行了两年。过去的两届评选,我们锁定了不少风头正盛或者极具潜力的公司,他们或是用推荐算法连接不同的商业主体,或是在生产、流转、反馈的商业全流程实现降本增效,或是软硬结合的创造全新的物种,或是借AI技术做底层实现用户体验提升。每一家,都为这个时代?

  • 原滴滴出行人工智能实验室负责人叶杰平加入贝壳找房 任贝壳技术副总裁

    原滴滴出行人工智能实验室负责人叶杰平,正式加入贝壳找房,任贝壳技术副总裁、首席科学家,并将全面负责人工智能技术中心的相关工作,向贝壳找房CTO闫觅汇报。贝壳找房表示,未来,叶杰平将带领团队进一步探索AI技术对“住”这一领域的改造可能,加速居住服务产业的数字化转型和智能化升级。

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签