网易首页 > 网易数码 > 正文

新技术让红外图片中的人脸也能被识别

0
分享至
摘要:红外线监控视频或者是红外线闭路电视的影像所存在的一个问题就是,它难以利用这些图像来识别出人物的身份。面部在红外线成像中看起来会有很大的不同,要将红外线图像与他们正常外观的图像进行匹配是一个尚未解决的挑战。

人们的外表在红外线和可见光之间的关系是高度非线性的,红外线其趋向于使用被动传感器来检测人体所散发出来的光线,而不是人体所反射的光线。

如今,德国卡尔斯鲁厄理工学院的 Saquib Sarfraz 和 Rainer Stiefelhagen 表示,他们已经研究出了如何建立中、远程红外面部图像,与对应的可见光图像的关系。他们已经完美的教导神经网络来完成所有的工作。


面部散发红外线的方式,与它反射光线的方式完全不同。散发的红外线与空气的温度和皮肤的温度十分相关,而这些又取决于人体的活动水平,以及人体是否有发烧等情况的影响。

还有一个问题使得红外线图像难以辨认面部:可见光图像具有更高的解析度,而远红外线图像则低得多,这是由摄像机的性质而定的。总之,这些因素使得匹配红外线图像与对应的可见光图像变得很难。

但是近年来深层神经网络在应对各种复杂问题的改善上,给予了 Sarfraz 和 Stiefelhagen 启发。为什么不训练神经网络通过观察红外线版本的图像,从而识别可见光的面部?近年来,两个重要因素的结合使得神经网络变得更加强大。

  • 一是更好地了解如何建立和调整网络来执行任务,这项技术领导了深度神经网络的创建。

  • 二是大型注释的数据集的可用性越来越高,它们可被用来训练神经网络。

将红外线与可见光图像进行比较的数据集很难得到,不过 Sarfraz 和 Stiefelhagen 还是从圣母大学那得到了可用的数据:来自于82人的4585张照片,有分辨率为1600 1200的可见光图像,和分辨率为312 x 239的远红外图像。该数据集包含了人们面带微笑、大笑,以及自然表情的图像,并以两种不同的光线条件来捕捉每天人们的外观变化。

之后,他们将图像分割成像素为20 20的相互重叠的各部分,从而扩充数据库。最后,Sarfraz 和 Stiefelhagen 使用前41个人的图像来训练他们的神经网络,并用另外41个人的图像进行测试。

从测试结果来看,神经网络能够在短短35毫秒内,完成热成像图与其对应的可见光图像的匹配。他们表示:“匹配速度非常得快,能够以28fps的刷新率实时运行。”

但这并不意味着它已趋于完美。测试结果表明,最好的结果其精度也只是刚刚超过80%,而一对一的比较精度仅有55%。

更高的精度显然只有更大的数据集和更强大的网络才能办到,但因此其成本也会更高。不过对这项技术感兴趣的客户,很可能是那些涉及到安全相关的军事、执法机构和政府等,它们并不缺钱。

via technologyreview

相关推荐
热点推荐
赵薇母亲魏启颖:儿子离婚分走5.2亿,女儿消失荧屏,丈夫也去

赵薇母亲魏启颖:儿子离婚分走5.2亿,女儿消失荧屏,丈夫也去

娱乐圈酸柠檬
2024-03-29 18:27:50
狠人!ZBrush雕出来的人体肌肉结构动画!

狠人!ZBrush雕出来的人体肌肉结构动画!

CG世界
2024-03-25 10:30:47
山东一新郎与父亲布置婚房,贴完喜字后,竟被父亲活活锤死

山东一新郎与父亲布置婚房,贴完喜字后,竟被父亲活活锤死

青丝人生
2024-03-29 16:33:26
雷蒙多:正在阻止中国获得算力,同时限制中国企业访问美数据中心

雷蒙多:正在阻止中国获得算力,同时限制中国企业访问美数据中心

科技铭程1
2024-03-28 14:09:31
湖南张家界一茶农的炒茶机被贴上封条,当地:正开展小作坊整治行动

湖南张家界一茶农的炒茶机被贴上封条,当地:正开展小作坊整治行动

极目新闻
2024-03-29 13:32:52
五年两亿欧!国米赚疯了,新赞助商合同敲定,球迷终于松口气

五年两亿欧!国米赚疯了,新赞助商合同敲定,球迷终于松口气

祥谈体育
2024-03-29 11:04:01
惨烈,3月新能源销量,ModelY第2,BYD售58000余台,银河E8仅355

惨烈,3月新能源销量,ModelY第2,BYD售58000余台,银河E8仅355

户外小阿隋
2024-03-29 12:40:36
俄乌都不会赢,普京拿下哈尔科夫就会停战?法国出兵的五种可能性

俄乌都不会赢,普京拿下哈尔科夫就会停战?法国出兵的五种可能性

鹰眼Defence
2024-03-28 17:58:30
曝42岁李晨上海遛娃!推简易婴儿车太低调,女儿长相清秀超像爸

曝42岁李晨上海遛娃!推简易婴儿车太低调,女儿长相清秀超像爸

花花lo先森
2024-03-27 16:36:25
8个名额被预定!国足争0.5个:连过4关进世界杯,堪比意大利夺冠

8个名额被预定!国足争0.5个:连过4关进世界杯,堪比意大利夺冠

侃球熊弟
2024-03-29 10:03:20
越南一队人马,在中国待了一周,内部政局变动后,要和中国对下表

越南一队人马,在中国待了一周,内部政局变动后,要和中国对下表

立马看世界
2024-03-29 10:45:15
大嘴、驴脸、平胸,明明长得难看,却火得一塌糊涂,她们凭啥?

大嘴、驴脸、平胸,明明长得难看,却火得一塌糊涂,她们凭啥?

雨天华夏
2024-03-28 13:46:40
两岸情况有变,台军向金门集结,管碧玲喊话大陆放人,反投降开始

两岸情况有变,台军向金门集结,管碧玲喊话大陆放人,反投降开始

奇思妙想草叶君
2024-03-29 19:24:39
球场放大镜:属于杰伦-格林的疯狂三月

球场放大镜:属于杰伦-格林的疯狂三月

北青网-北京青年报
2024-03-29 20:26:44
万科董监事总裁自愿降薪至每月税前1万元,高峰时曾是千万年薪

万科董监事总裁自愿降薪至每月税前1万元,高峰时曾是千万年薪

第一财经资讯
2024-03-29 08:25:17
商务部:中方起诉是正当之举 美方严重扰乱全球新能源汽车产业链和供应链

商务部:中方起诉是正当之举 美方严重扰乱全球新能源汽车产业链和供应链

每日经济新闻
2024-03-28 17:16:17
基辛格直言,美国100年搞垮了4个世界老二,第五个会反手干掉美国

基辛格直言,美国100年搞垮了4个世界老二,第五个会反手干掉美国

文史达观
2024-03-07 14:02:52
隆多:如果勇士连附加赛都打不了 那这个王朝也该散伙了

隆多:如果勇士连附加赛都打不了 那这个王朝也该散伙了

直播吧
2024-03-28 23:21:17
反制来得这么快!台军刚宣布实弹射击,解放军拉着海警就围了上去

反制来得这么快!台军刚宣布实弹射击,解放军拉着海警就围了上去

王云飞面对面
2024-03-24 23:15:03
去年低价卖房的人都将后悔?懂行预测:房价或终将迎来报复性上涨

去年低价卖房的人都将后悔?懂行预测:房价或终将迎来报复性上涨

专业聊房君
2024-03-29 19:58:24
2024-03-29 20:46:44

头条要闻

甘肃13岁男孩杀害8岁女童 最高检同意追诉其刑事责任

头条要闻

甘肃13岁男孩杀害8岁女童 最高检同意追诉其刑事责任

体育要闻

拒绝为国出战,他是足坛"天选打工人"

娱乐要闻

胡夏被曝有孩子!工作室火速辟谣

财经要闻

张维迎:如何正确理解企业家精神?

科技要闻

雷军:我们是卷王,建议BBA车主感受下时代

汽车要闻

找回久违的开怀大笑 试驾小米SU7 Max

态度原创

游戏
时尚
健康
公开课
军事航空

《崩坏星穹铁道》首个全服活动,在大富翁里赚钱,榜一竟是我自己

孙艺珍生完孩子,玄彬老了十岁

早防早筛,远离肝硬化

公开课

30岁之前,你要学会的13件事情

军事要闻

乌方声称击落两枚俄"锆石"高超音速导弹 俄方未予回应

无障碍浏览 进入关怀版
×