首页 > 传媒 > 关键词 > 紫光展锐最新资讯 > 正文

紫光展锐图像算法团队,为提升拍照体验保驾护航

2020-11-27 16:40 · 稿源:站长之家用户投稿

人类进入智能手机时代后,摄影方式也发生了巨大变化:用来拍照的不再只是镜头和传感器了,背后还加载着一系列的图像算法,它可以用更快的速度处理图像,并获得更好的拍摄效果。

好作品只能依赖专业摄影师的时代过去了,图像算法引入到手机拍照应用后,让人人拍出好照片成为可能。

紫光展锐拥有自主研发的图像算法团队,而且这些算法已普遍应用在展锐的芯片平台里。目前,展锐的图像算法团队已经超过了 200 人,分布在美国、印度、中国台湾、上海和北京等多个国家和地区。

更好的手机拍照效果需要图像算法的加持,为了让大家有更好的了解,接下来的系列,我们准备了几篇科普、视频和图说,一起来看看吧~~~

这事得从人类对色彩的感知能力说起…

人类对色彩的感知能力是漫长进化过程中产生的一项重要能力,它使得我们眼中的世界五彩斑斓。颜色是怎么呈现出来的呢?它是光线通过眼睛成像到视网膜上,由视网膜上的视细胞感知光信号的强弱,视觉神经对信号的传播,再由大脑处理所产生的视觉感受。颜色的产生极其复杂,人类所获得的色彩感受不但取决于光的物理特性,还受心理等因素影响。

首先,我们先来了解一下颜色的物理特性。肉眼所见到的光线(一般波长范围是380-780nm,见图1),是电磁波谱中人眼可以感知到的部分,不同波长的可见光表现为不同的颜色,对色彩的辨别是肉眼受到可见的电磁波辐射能刺激后引发的视觉神经感觉。

图1:可见光波长及其对应的颜色

人眼中对光敏感的细胞分为两类:视杆细胞和视锥细胞。其中,视杆细胞对弱光线最敏感,光谱响应范围覆盖整个可见光区域,在500nm附近达到相应的峰值,但无法区分不同的波段的光线,因此无法产生色觉。在非常低的光照水平下,这样的视觉叫做暗视觉,暗视觉仅视杆细胞在工作。所以在黑暗的夜晚,人们能看到物体,却分辨不出物体的颜色。

在高光照水平下,主要工作的是视锥细胞,有色觉,这样的视觉叫明视觉。视锥细胞分为三类:感红细胞(L) 、感绿细胞(M)和感蓝细胞(S)。对同一波长的光线,不同的视锥细胞有不同的响应能力(见图2),因此视锥细胞具有颜色的辨别能力。

图2:三种视锥细胞对光的响应能力

光源发射某一光谱分布的电磁波,经过物体的反射或者透射进入人眼,再通过视锥细胞对光线的探测,这整个过程涵盖了颜色的物理属性。颜色同时受到人们的心理、现实经验等因素的影响,某个场景的光在视细胞产生的信号并不等于人们对这个场景的感受。例如,一张白纸不管在红色还是绿色灯光下,人眼看起来都会觉得这是一张白纸,这来源于大脑的经验处理,这种现象叫做颜色恒常性。

可以说,你看到的景色都是经过大脑处理加工过的,眼见并不一定为实哦~

图像算法最大的用途是可以修复照片,使拍摄到的照片获得真实的色彩效果,或者满足用户的某些色彩偏好。

【自动白平衡】

在展锐的ISP(Image Signal Processing)系统里,主要有自动白平衡(AWB)和颜色校正(CCM)模块来处理色彩。

先看自动白平衡,ISP系统需要根据图像的统计信息,计算出图像R、B channel的增益,以实现自动白平衡功能,以求在各种复杂场景下均能准确还原物体本来的颜色。因为人类视觉系统具有颜色恒常性的特点,对事物的观察可以不受光源的影响,但图像传感器不具有这个特点,因此在不同光线下拍摄的图像,会呈现出不同的颜色。比如,在晴朗的天空下拍摄的图像可能偏蓝,而在烛光下拍摄的物体可能偏红。

自动白平衡功能,就是模拟了人类视觉系统的颜色恒常性特点,来消除光源对图像成像的不良影响。

图3 :左边是自动白平衡功能关闭,右边是自动白平衡开启

紫光展锐的自动白平衡算法具有以下特点:

效果稳定性好:所谓效果稳定性,指的是拍照场景发生细微改变时,图像色彩效果不会出现明显跳变。

准确度高:展锐的算法在处理绝大部分场景时,都能得到符合预期的结果,尤其是用户关心的蓝天、绿植、人物等等重点场景和混合光源、纯色、夜景等难点场景。

适用范围广、灵活性好:展锐的算法既可以运行在入门级相机设备上(如 30 万像素的手表项目)上,也可以运行在中高端相机设备上(如 3200 万像素以上的手机项目),还可以应用到车载记录等物联网领域中。而且,不同产品,展锐的自动白平衡算法可以实现灵活配置,实现算法效果、算法复杂度、内存消耗等多样化的分级需求。

【颜色校正】

相机实际是在模拟人眼的彩色成像来拍图,由于相机传感器的RGB三通道的光谱响应与人眼中视细胞的光谱响应(见图2)不同,导致其拍摄的图片与人眼看到的有差别,因此需要进行颜色校正(Color Correction Matrix,CCM)。

颜色校正矩阵一般通过标定得到,利用图像传感器拍摄得到的图像与标准图像相比较,计算得到校正矩阵(即CCM矩阵)。利用CCM矩阵对图像的各像素点的进行验收校正,以获得最接近于物体真实颜色的图像。

一般情况下,在颜色校正过程中,都会伴随有颜色饱和度的调整。颜色饱和度是指色彩的纯度,其色彩的纯度越高,图像表现越鲜明;纯度越低,表现就越黯淡。

图4 :左边是CCM关闭,右边是CCM开启

图5:展锐CCM模块的色彩还原效果评测

(图中 18 个小圆点和小方点越接近,则表示色彩还原性越好)

随着机器学习等高新技术的发展,以及用户对手机拍照功能的需求日益苛刻,色彩还原技术也会面临一些新的机遇和挑战,例如如何利用AI技术提升色彩还原效果,如何在多摄像头手机上实现更加一致的色彩还原。这些附加技术将给用户带来更好的手机拍照体验,进而持续提升公司产品的竞争力。

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 中国移动采购7000万颗eSIM晶圆:紫光同芯包圆

    10月27日晚间,紫光集团宣布,近日,在中国移动物联网有限公司的“eSIM晶圆采购项目”招标中,紫光国微旗下紫光同芯作为第一中标候选人,独家中标7000万颗eSIM晶圆的采购大单。这包

  • 12nm工艺 紫光国芯发布GDDR6控制器芯片:速率可达16Gbps

    不经意间,中国的芯片公司又闯入了一个新领域,日前西安紫光国芯宣布推出12nm工艺的GDDR6存储控制器和物理接口IP(GDDR6 MC/PHY IP)。紫光国芯之前做过DDR内存芯片,还有就是NAND闪存,推出显

  • 国产品牌商用计算机新势力搅动传统市场 紫光计算机11月17日霸气归来

    近日,紫光计算机将于11月17日举行新品发布会的邀请函成为网络热点。据悉,此次发布会以“智造新工具,数字新启点”为主题,由郑州高新技术产业开发区管理委员会与紫光计算机双方联合举办,旨在面向政企行业推出可靠、安全及高效的设备以及IT技术服务,助力政府以及企业的数字化转型。紫光计算机是国产品牌商用计算机的新势力,因此关于“紫光计算机在市场中的胜算几何”、“紫光将成为中国商用计算机市场新的搅局者”等话题成为媒

  • 算法困住的音乐人

    老狼在微博转发了一条自己所参与的"读书分享会"的动态,却遭到限流之后,终于忍无可忍地控诉:"新浪微博演出信息限流,书籍分享也限流,都花钱买头条,穷疯了吧。" 对此,包括周云蓬、野孩子、苏阳、左小诅咒等在内的多位音乐人都进行了评论和转发,并表示遇见过同样的问题。

  • 日媒:索尼和豪威科技获得美国许可,恢复向华为供应图像传感器

    据日媒报道,索尼(Sony Corp)和豪威科技(OmniVision Technologies Inc)已获得美国政府许可,恢复向华为供应图像传感器。多位知情人士表示,日本索尼和中国大陆豪威科技这两家全球领先的相机成像传感器供应商已获美国政府授权,恢复向陷入困境的中国华为技术公司的部分供货。日媒援引一位芯片行业高管的话称,一些显示器和图像传感器相关供应商正在得到美国方面的许可,因为这些部

  • 苹果正在开发动态Apple Glass 音频和AR图像融合软件

    像经常被传闻的苹果眼镜智能眼镜或增强现实或虚拟现实头显这样的项目,必须依靠为用户提供令人信服的视觉效果和足够的音频来实现完全的沉浸感。然而,这两种元素都提供了自己独特的问题,生产头戴式显示器的公司必须克服。对于音频来说,AR和智能眼镜的音频需求和VR的音频需求有天壤之别。前者可能希望音频有限,并且还能听到其他环境的声音,而VR的使用通常是依靠屏蔽外部声音,只留下虚拟世界的音频。目前的头戴式头显可以

  • 抖音算法下的红人浮沉:毛毛姐和祝晓晗们如何长红不衰?

    抖音的出现,造就了很多一夜爆红的奇迹,随手拍一部跳舞、唱歌、搞怪或是无厘头的视频,都有可能得到数百万、数千万的播放量,让一个籍籍无名的普通人,短时间成为网络追捧的红人。

  • 被Uber算法解雇的司机,现在要把这家公司告上法庭

    ​4个Uber司机认为,该公司的算法错误地指控他们欺诈。现在他们希望法院可以迫使公司披露其神秘的决策过程。

  • NVIDIA RTX 3060 Ti 真卡图像首次泄露 来自技嘉Eagle OC

    最近我们看到了大量的所谓泄露和围绕RTX3060Ti的传闻,但一直没有该卡本身的图片。不过现在,网上出现了几张号称是3060Ti的最新图片。真机照片来自VideoCardz,图像显示技嘉的RTX3060Ti上的一个型号。顾名思义,Eagle OC是一个超频型号,虽然我们不知道确切的时钟速度规格。这款显卡包含双风扇冷却器和一个独立的8针电源连接器,该卡的TDP预计在200W左右。预计RTX3060Ti将是RTX3070中的GA104GPU的削减版本,并拥有相同的8GB GDDR6?

  • 微信强推内容算法,字节上线搜索广告,年末大厂都“急了”?

    最近,各大平台动作频繁,在这些平台做营销和运营的小伙伴都需要飞速Get到最新的变化,及时根据风向调整自己的工作。我们也可以从这些变化中窥探出各大平台下一步的方向。

  • 算法“入侵”公众号,订阅号列表再次更新,微信意欲何为?

    自今年6月份公众号推送规则发生变化后,时隔多个月,微信改革的刀再次挥向了订阅号列表。近日,有用户向微果酱爆料称,订阅号消息列表收到“常读更新”“你错过的订阅更新”“超过50人点赞”以及星标公众号等强提醒推荐,标题均用黑色加粗字体显示。

  • 朋友圈置顶、红包跳转、算法推荐…最新视频号玩法解读

    最近微信视频号动作频出,堪比过年。浑水今日发现,微信视频号已经开始灰度内测朋友圈分享置顶功能。更新完微信7.0. 18 版本后打开微信,当微信视频号创作者开启直播,把直播分享到朋友圈,好友在打开朋友圈时就能看到出现在朋友圈置顶位置的直播入口,且显示有多少位朋友分享。

  • 豆瓣电影更改短评显示机制:仅展示部分短评 算法筛选随机展示

    豆瓣电影一直以来都是国内最具权威和公信力的电影评分系统,提供最新的电影介绍及评论包括上映影片的影讯查询及购票服务。你可以记录想看、在看和看过的电影电视剧,顺便打分、写影评。据国内媒

  • 当贝D3X星眸算法功能如何?强悍黑科技,高性能投影仪具备哪些特点

    镜头对焦水平,以及梯形校正能力,是考量投影机镜头的重要标准。虽然当贝D3X作为一款轻奢投影,价格不及旗舰投影,但清晰的镜头对焦水平、和灵敏的自动梯形校正却丝毫没有取舍半分,这让很多投影发烧友感到疑惑,到底是怎样的高新技术?一起来看一下当贝投影D3X是如何表现的。当贝D3X 在对焦和梯形校正上的表现非常让人满意,使用投影过程中难免会触碰到机器,容易造成投影的虚焦、跑焦,导致画面模糊,这个时候,灵敏的自动对焦功能至关重要,?

  • 开发者避雷指南:百度搜索算法规范全解析

    百度搜索线上公开课上官方罗列了常见的搜索算法问题,包括新站外链,网站更新,面包屑导航层级,死链,快排等相关知识点,为开发者排雷。站长之家整理了相关要点,供大家学习。

  • Snapchat领跑AR广告市场,微美全息AI算法SDK数字化植入沟通

    随着人工智能(AI)技术快速发展,与之相关的计算机视觉、自然语言处理、智能语音、图像识别等技术获得极大发展空间。其中,计算机视觉技术在创业公司和投资机构最受欢迎。相应的人脸识别、智能识图、AR/VR等产品技术成行业新宠。社交软件公司Snap表示每天有超过1.7亿用户在使用旗下的增强现实工具,而这是技术正在成为主流的标志。这一数字约占Snapchat用户群的四分之三。Snapchat是用于发送可视信息、观看节目与视频的社交应用。开

  • 亿速云高防CDN,基于先进特征识别算法进行精准的DDoS攻击流量清洗和防御

    亿速云高防CDN,基于先进特征识别算法进行精准的DDoS攻击流量清洗和防御;支持开启CC攻击防御,有效过滤CC攻击!自上个月亿速云发布上线了“新版高防IP”之后,这款针对DDoS攻击/CC攻击防护,具备隐藏源站IP功能的付费增值服务,广受一批新老用户的好评和欢迎。在此基础上,亿速云在本月又新推出了一项“高防CDN”的产品和服务。什么是“高防CDN”?高防CDN从产品功能上来讲,就是至尊版、高可用的“高防IP”,它可以满足用户更高?

  • 激发校园创新火花 2020 DIGIX全球校园AI算法精英大赛圆满收官

    11月13日-14日,由江苏省人工智能学会、华为终端云服务、华为南京研究所共同举办的2020 DIGIX全球校园AI算法精英大赛在华为南京研究所圆满收官。两大赛道30支决赛队伍巅峰对战,竞争大赛特设专项激励奖金158,000美金,最终风犹惊入萧独夜战队、Triste战队、淼日晨诚队斩获“机器学习”赛道一、二、三等奖,小天天战队、WEARE战队、TIME战队则夺得“计算机视觉”赛道一、二、三等奖。大赛自7月启动以来,受到了全球AI算法爱好者及?

  • 紫光展锐:5G芯片已完成互操作所有测试项

    10月15日消息,在IMT-2020(5G)推进组组织的2020年5G SA试验中,紫光展锐基于3GPP R15 f60版本,在中国信息通信研究院MTNet实验室,携手中兴通讯、上海诺基亚贝尔和爱立信等系统设备商完成了5G SA芯片互操作测试,与中兴通讯完成了ZUC性能测试。为5G SA终端的大规模商用奠定了技术基础。为了充分发挥5G高速率、低时延、广连接的特性,IMT-2020(5G)推进组全面启动了5G SA相关的测试,其中5G SA终端芯片功能互操作测?

    5G
  • 搭载展锐春藤8541E 搜狗新款录音笔E2 硬核来袭

    科技发展,为我们带来了很多提高效率的工具,比如智能录音笔。集多种功能于一体的智能录音笔,是上课、开会、采访、培训等应用场景的效率神器。搜狗近期上新的智能录音笔E2,内置了紫光展锐4G高性能芯片春藤8541E,可录音、可速记、可翻译,录音转写成文字的准确率高达98%!一起看一下这款产品的主要功能。【高清音质AI降噪】2 颗哈曼指向麦超远拾音, 6 颗全向数字麦 360 度拾音,拾音距离可达 15 米。即使是嘈杂的环境,也能实现

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签

热文