首页 > 传媒 > 关键词 > 搜狗最新资讯 > 正文

搜狗斩获ICPR 2020人脸关键点检测挑战赛冠军,计算机视觉技术持续领先

2020-10-26 13:41 · 稿源:站长之家用户投稿

    作为3D 人脸重建、人脸识别、表情迁移及美化等应用的核心基础技术,人脸关键点检测算法一直是工业界和学术界的研究热点。

  近日,在第 25 届国际模式识别大会(ICPR2020)举办的人脸 106 关键点检测挑战赛中,搜狗AI团队荣获冠军,彰显其在计算机视觉领域的核心技术实力。

  ICPR2020 大会是模式识别领域的顶级国际会议,由国际权威学术组织---国际模式识别协会(The International Association for Pattern Recognition,IAPR)主办,在本届大会组织的人脸识别领域竞赛单元-人脸 106 关键点检测比赛中,搜狗AI 团队在预赛验证和决赛测试两阶段均取得第一,击败OPPO研究院、美团视觉中心、东南大学、西安交大等多支强队,最终一举摘得桂冠。

  图1 本届挑战赛决赛阶段前五名结果

  ICPR人脸 106 关键点检测挑战赛是什么?

  人脸关键点检测算法的研究重点是在不同表情、性别、年龄、姿态、光照条件下,准确定位人脸轮廓及五官关键点,近年来偏向实用的人脸关键点检测的国际评测陆续举办,国际顶级计算机会议ICME2019 就曾举办人脸关键点检测的比赛。

  人脸 106 关键点检测挑战赛(Grand Challenge of106-p Facial Landmark Localization)是ICPR2020 举办的八项比赛之一,相较于之前的评测,本次ICPR2020 大会举办的评测难度更大。其测试样本涵盖大姿态、极端表情、遮挡等多种高难度、复杂的情况,且训练样本少,对算法的泛化能力、准确性及鲁棒性等多个方面提出了巨大的挑战,在比拼检测精度的同时,更加追求技术的实用化程度,对模型复杂度做了更加严格的要求,模型大小需要低于20 MB,运算复杂度不超过1GFLOPs,希望推动更加高效并且鲁棒的轻量级人脸关键点检测算法的技术进步,因此极富学术和实用价值,吸引了数十家企业和高校的参赛队伍参赛。

  图2 本届比赛数据集图片样例

  搜狗本届比赛夺冠的技术优势是什么?

  作为本届赛事的冠军队伍,搜狗AI团队在人脸关键点检测技术上有三个重要突破。

  首先,采用基于HRNet基础模型的改进版本,利用不同分辨率之间特征全融合的方式,有效学习不同尺度图像的语义信息,同时为了保证算法的精度,搜狗增加了HRNet不同分辨率分支的通道数,从而在人脸关键点检测任务上表现出了出色的效果;

  图3 使用的HRnet网络结构

  其次,在卷积层部分采用组卷积,并且把其中的瓶颈层(BottleNeck)改换为MobileNet V2 中的逆残差结构(Inverted Residuals),设置逆残差结构的扩展参数为1,从而有效的降低了模型的复杂度;经典残差结构:1x1(压缩)->3x3(卷积)->1x1(升维),逆残差结构:1x1(升维)->3x3(dw conv+relu)->1x1(降维+线性变换),这对基于移动端设计的小模型有广泛的效果提升作用。

  图4 残差结构图

  最后,除了使用常规的平移、旋转等数据增强策略,还使用了PDB(Pose-based Data Balancing)策略。该策略统计训练数据集中的不同姿态的图片的数量,然后通过简单的复制数量较少的姿态的图片,从而解决了不同的姿态的数据不均衡的问题,对大姿态下关键点的预测起到有效的作用。

  表1 本届比赛使用的网络结构

  最终搜狗的算法在模型大小12MB,模型计算复杂度0.887GFLOPs的基础上,取得了本次比赛中最好的性能,模型累计误差分布曲线面积指标(AUC)达到80.52,归一化平均误差(NME)为1.58,预测失误率(FR@0.08)只有0.05。

  图5 人脸关键点的累计误差分布图

  (曲线与横轴围成的面积越大算法性能越优异)

  图 5 搜狗AI的比赛测试结果样例

  坚持技术创新与应用落地并重,搜狗核心AI技术持续领先

  搜狗在自然交互与知识计算的人工智能战略指引下,坚持以语言为核心的人工智能研究,近年来在语音、计算机视觉、问答、翻译、对话等核心技术领域取得突破性进展。

  在技术创新方面,搜狗在计算机视觉领域一直保持着强劲实力。通用技术方向,于2018 年在CVPR WAD自动驾驶视觉竞赛中夺得道路目标检测任务第一名;在国际自动驾驶领域权威评测集Cityscapes实例分割评测任务中同样拿到第一名的好成绩。OCR方向,于 2019 年 11 月刷新了ICDAR2019 ArT检测、识别、端到端三项单元的新记录;人脸识别方向,于 2018 年 11 月在人脸识别顶级评测 MegaFace 的Face Identification(人脸识别)任务中,基于百万规模级别的人脸数据库以99.939% 的识别准确率斩获大赛第一名;本次ICPR2020 人脸 106 关键点检测挑战赛中又一次取得技术突破获得冠军,证明了搜狗在计算机视觉领域的领先实力。

  在应用落地方面,搜狗自研的人脸相关技术已经应用于搜狗核心产品及解决方案中,其中,领先行业的数字人解决方案-搜狗分身已大量使用了自研的人脸关键点检测、识别以及生成技术,技术的不断突破有力确保了搜狗分身的领先优势;搜狗首创的基于模态注意力机制的语音+唇语的多模态识别技术,强噪声场景下识别准确率提升36%;搜狗最新发布的搜狗AI录音笔-E2 在语音能力之外新增了视觉能力,能够支持文档图像识别OCR等技术,后续会陆续扩展人脸识别等相关应用。本次参赛的技术以应用落地为导向,已具备了大规模部署的能力,不久的将来会与搜狗分身、AI硬件、多模态识别等能力产生联动效应,进一步提升搜狗AI创新产品的用户体验。

  未来,搜狗将持续在计算机视觉领域推动核心技术研发及创新,不断扩展技术成果的应用落地,带给用户更多差异化的优质体验。

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 2020谢谢侬 辛选2020感恩演唱会即将启幕 吴亦凡邓紫棋海泉助阵

    近日,快手主播辛巴辛有志在快手、微博等平台官宣: 2020 年的辛选感恩演唱会定在 10 月 18 日在上海梅赛德斯奔驰文化中心举办,主题为“ 2020 谢谢侬”,届时将有吴亦凡、邓紫棋、张信哲、海泉、张碧晨等多位明星为老铁们带来精彩演出。 2020 年对于每一个人来说,都是最与众不同的一年。各行各业的人都加入到抗疫这场没有硝烟的战争当中,不管是奋战在一线的医护人员,还是在复工复产中默默付出的普通人,都在这艰难的一年努力拼

  • 2020有什么无线运动耳机比较好?2020运动无线耳机排名

    我们日常的运动基本上就是跑步居多了,所以我们经常可以看到傍晚公园,街道上很多有人都在夜跑,既为了锻炼身体,也为了放松压力。虽然运动可以放松压力,但同时也会疲倦,所以很多人就会使用蓝牙耳机来听听歌,来消除运动带来的疲倦感。今天我就分享几款很好地运动蓝牙耳机,希望对你各位有用。1.NANK南卡S2蓝牙耳机售价:249元蓝牙协议:Aptx-ll,Aptx-hd、aptx、AAC,SBC防水等级:IP55级续航时间:12H一句话点评:Nank南卡S2蓝

  • 2020 家用投影仪推荐, 2020 年上市的投影仪有哪些?

    整个 2020 年的上半年,更多的人都在家里度过,这也让人们重新重视起家庭娱乐生活。智能投影仪作为当今家庭智慧大屏的入口,受到了很多人的青睐。那么在这不平凡的 2020 年,究竟哪款家用投影仪值得我们入手呢? 2020 年上市的最新投影仪又有哪些选择呢?下面我们就一起来看一下。家用投影仪,首要使用场地就是家中客厅,或者是卧室了。客厅在白天的时候采光充沛,因此在客厅使用的投影仪亮度要足,并且最好搭配投影仪幕布使用,这样

  • 2020「双11」:京东的重要一役

    据公司情报专家《财经涂鸦》消息,今年京东“双11”将从“全球好物节”升级为“京东热爱季”。10月19日,京东联手笑果文化,以一场《京东脱口秀大会》开启“2020京东11.11全球热爱季”的序幕。

  • 2020苹果11月发布会什么时候举行 2020款Mac什么时候发布

    2020年苹果举行了两次的秋季发布会,分别在9月份和10月份,但在这两次发布会上都没有公布2020款的Mac新产品,而最近有消息称11月份苹果会举行一次发布会,重点产品是ARM架构自主芯片版Mac。

  • 2020,直播拯救音乐人

    ​国庆假期将至,从朋友圈、微博等反馈可以看到,音乐节成为了不少人出游的选择。随着疫情逐步控制,线下音乐演出需求也迎来小爆发,据不完全统计,今年国庆档的音乐节多达 20 多场,堪称史上最强国庆档,甚至被认为线下将迎来刺激性消费。

  • 魔幻2020,搞“机”不容易

    从 2017 年至 2019 年,智能手机全球出货量已出现两连降,从14. 72 亿台一路跌到13. 71 亿台。按照当前情况,要想赶超去年,下半年至少要出货8. 18 亿台,这几乎成为了不可能完成的任务,智能手机市场即将迎来三连降。

  • 2020年游戏耳机有什么推荐?2020低延迟游戏耳机排行榜

    相信很多带蓝牙耳机玩游戏的小伙伴们都感受过一件事。就是在玩游戏的时候声音存在延迟的现象,特别是吃鸡听脚步等竞技类游戏,导致整个游戏过程的体验感非常之差,如果你遇到的是这种情况,那么笔者就像向你推荐几款游戏蓝牙耳机。1.NANK南卡S2游戏蓝牙耳机售价:249元蓝牙协议:Aptx-ll,Aptx-hd、aptx、AAC,SBC防水等级:IP55级续航时间:12H一句话点评:作为一款主打超低延迟的蓝牙耳机,南卡S2是业内首个支持APTX-ll协议的游?

  • 颈挂式耳机哪款好?2020颈挂式耳机推荐

    颈挂式蓝牙耳机现在越来越受到大家的欢迎,特别是年轻人。所以在选择的时候我尽量满足年轻人的需求,着重关注一下音质,时尚度,舒适度,这些方面。我按照价位给大家推荐几款颈挂式蓝牙耳机,大家可以根据自己的需求和预算针对性的看。一、NANK南卡S2游戏蓝牙耳机售价:249元蓝牙协议:Aptx-ll,Aptx-hd、aptx、AAC,SBC防水等级:IP55级续航时间:12H一句话点评:目前市面上很多的游戏蓝牙耳机都存在延时和掉线的问题,作为主打超低延?

  • 我在2020找工作:HR很吃香,阿里政委最抢手

    突如其来的疫情,改变了无数人的职业生涯:有人前一天加班到 12 点,早上到公司就通知被裁;有人苦读 10 年留学归来,摆在面前的却是两份薪资只有往年1/ 3 的offer;更多躲过了裁员镰刀的幸运儿,默默忍受绩效减半、福利压缩,并把年前就已经印好的简历,塞回到两尺见方的工位里……

  • CHIC2020(秋季)——中国服装的时尚重启

    一切美好都值得等待!9月25日,中国国际服装服饰博览会2020(秋季)圆满落幕。尽管由于疫情影响,今年的CHIC上海展有些“姗姗来迟”,但这来之不易的平台与机会让中国服装行业人更加珍惜,他们的热情和信心升温了秋意渐浓的上海,虽然春天暂时有遗憾,但秋天已迎来了加倍的弥补。 CHIC是中国服装行业发展的缩影,也是产业发展的风向标。在本届CHIC中,更能够深刻感受到企业打造优质产品的决心与信心,显而易见,科技与可持续时尚?

  • 2020“河小象杯”全国少儿书写大赛启动

    10月9日“传笔下经典做向上少年” 2020全国少儿书写大赛正式启动。本次大赛由国内知名少儿素质教育品牌河小象发起,联合新浪、齐鲁网、南宁日报、湖北日报网、广东网络广播电视台教育频道等数十家主流媒体共同举办,面向全国少年儿童开展。本次大赛的初衷是为了进一步帮助孩子掌握必会的常用汉字,增强书写能力,提升综合素质。河小象以“书写大赛”为载体弘扬传统文化为进一步贯彻关于弘扬中华优秀传统文化的系列讲话和中共中央办

  • 2020 年还有哪些营销红利和机会?知乎给你答案

    2020 还有哪些营销红利和机会?说到这个问题,想必很多伙伴会去百度一下,想看看大家的想法,如下图所示,当我们搜索“营销红利”,出现在首位的是用户在知乎的提问。

  • 收钱吧受邀亮相2020外滩大会

    9 月 24 日,由上海市政府指导,支付宝和蚂蚁集团主办的“外滩大会”在沪召开。收钱吧受邀参展,为参会嘉宾呈现收钱吧为商户提供全方位生意帮手服务的更多可能性。此次大会主题为“科技让未来更普惠”,来自全球最具影响力的科技公司、金融企业、监管机构、研究机构齐聚一堂,设置主论坛和 40 多场分论坛,共同探讨最前沿的金融科技和商业生态,助推与实体经济及社会民生息息相关的普惠支付生态深度发展。在展会现场,收钱吧将服务

  • 华为成功举办IP技术菁英汇2020

    【中国,上海,2020年9月23日】HUAWEI CONNECT 2020期间,华为以“Rethink IP, 拥抱智能IP新时代”为主题,成功举办了第三届全球IP技术菁英汇。IP技术菁英汇是华为数通技术圈子IP Club在全球的旗舰活动,旨在为IP技术主管、专家、工程师等从业人员搭建一个开放、自由的思想分享和技术交流平台。本次IP技术菁英汇线上中国专场的成功举办,标志着IP技术圈子在国内IP领域落地生根,未来必将发芽吐蕊。 在本届菁英汇上,IP Club携手业

  • 2020双十一喵币攻略 快速养猫升级技巧

    2020年的天猫双十一活动加入了养猫玩法,每天获得喵币后可以用来养猫,最后可以参与双十一红包大奖领取,具体要如何获得喵币奖励呢,我们来一起看下具体的喵币领取方法。

  • 2020全印展 京瓷新品发布采访实录

    2020年10月12日,第八届中国国际全印展开幕当天,全球领先的打印设备品牌——京瓷办公信息系统(中国)有限公司(以下简称京瓷)带来一场主题为“喷墨新势力”的喷墨新品发布会,新品TASKalfa Pro 15000c彩色喷墨数码印刷系统震撼亮相。发布会现场,京瓷总经理西野博文、Inkjet 营业本部本部长佟巍、事业战略本部本部长磯田征志、技术本部本部长赵力等高层领导悉数出席,更有上海数字印刷协会会长薛平,杜塞尔多夫展览(上海)有限

  • 波司登2020年时尚运动系列亮点介绍

    波司登又上新啦!这一次波司登又将带来什么惊喜呢?据说这款羽绒服是杨幂同款哦!夹克造型 简约干练波司登2020年时尚运动系列是一款非常炫酷的羽绒服,简约、干练的夹克造型是当下年轻人们的挚爱。这种夹克造型能够很好的修饰身材,也非常的百搭,可以说是穿搭博主的必备羽绒服。在剪裁方面,为了更好的符合人体工学概念,波司登在此次剪裁中将人体线条突出的更加明显,大大地提高了线条的流畅度,这样也会进一步提高穿着时的舒适?

  • 2020年直播带货迷惑行为大赏》:一个比一个狠!

    ​转眼间,魔幻开场的2020年接近尾声,在这一年里,直播带货达到了前所未有的高潮,人均主播,全民扛起带货大旗。明星、CEO集体“下海”,李佳琦、小助理分道扬镳,薇娅从直播间走到荧光幕,罗永浩上演《真还传》,直播带货从新风口沦为“万人嫌”......

  • 进来算算你 Prime Day 2020 亏了多少钱?

    亚马逊的财务核算非常重要,不会算、算错、算漏都有可能自己亏了都不知道!真不是大卖卖瞎说,因为亚马逊平台的收费项目实在是太多了!很多亚马逊新手卖家都是做了很久的亚马逊运营之后自己单干,原来根本没接触过财务核算。所以虽然运营都做的都不错,但要算账时就一脸懵逼了!甚至有的做了大半年都不知道到底是赚还是亏!▲ 图片来源:知无不言特别是 Prime Day 2020,看着出了一堆订单,但降价参加秒杀导致利润减少,而且秒杀费

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签