两眼看世界,双目摄像头给你好看

2016-09-08 20:04:28编辑:鲁迪 关键字:双目摄像头  监控

  双目摄像头监控系统可用于更多场合

 

  双目摄像头是利用仿生学原理,通过标定后的双摄像头得到同步曝光图像,然后计算获取的2维图像像素点的第三维深度信息。为了对不同的环境场合进行监控提出了一种新的基于双目计算机视觉的自适应识别算法。该算法首先利用像素点的深度信息对场景进行识别判断,然后采用统计的方法为场景建模,并通过时间滤波克服光照渐变,以及通过深度算法特性克服光照突变。与单摄像头相比,利用该算法实现的视频监控原理系统,可应用于更多场合,并利用深度信息设置报警级别,来降低误检率。

 

 

双摄像头能做什么

 

  1.做距离相关的应用

 

  人眼能够感知物体的远近,是由于两只眼睛对同一个物体呈现的图像存在差异,也称“视差”。物体距离越远,视差越小;反之,视差越大。视差的大小对应着物体与眼睛之间距离的远近,这也是3D电影能够使人有立体层次感知的原因。

 

 

  图中的人和椰子树,人在前,椰子树在后,最下方是双目相机中的成像。可以看出右侧成像中人在树的左侧,左侧成像中人在树的右侧,这是因为双目的角度不一样。再通过对比两幅图像就可以知道人眼观察树的时候视差小。而观察人时视差大,因为树的距离远,人的距离近。这就是双目三角测距的原理。双目系统对目标物体距离感知是一种绝对的测量,而非估算。

 

  2.双摄像头可以做光学变焦

 

  若两个摄像头的FOV不一样,一个大FOV,一个小FOV,再通过算法实现两个光学镜头之间的效果,就可以轻松做到光学变焦。

 

 

若不用双摄像头,放大图片后,文字不清楚

 

 

若使用双摄像头,放大图片后,文字依然清楚

 

 

  此图就是融合了广角的图和长焦的图,通过算法算出了中间态度照片,让细节不失真。

 

  双目摄像头的原理

 

  人眼是很容易对一个物体的距离进行定位,但当人闭上其中一个眼睛后,定位能力就会下降很多。双摄像头就是模拟人眼的应用。简单的说,测距离的话,就是通过算法算出,被拍摄物体与左/右摄像头的角度θ1和θ2,再加上固定的y值(即两个摄像头的中心距),就非常容易算出z值(即物体到摄像头的距离)。

 

 

  不过这也很容易推算,若两个摄像头中心距过小的话,可计算的物体距离就会很近。若想算出很远距离,就必须让左右摄像头的距离拉远。

 

  双目检测的方式就是通过对两幅图像视差的计算,直接对前方景物(图像所拍摄到的范围)进行距离测量,而无需判断前方出现的是什么类型的障碍物。所以对于任何类型的障碍物,都能根据距离信息的变化,进行必要的预警或制动。

 

  双目系统成本比单目系统要高,但尚处于可接受范围内;二是没有识别率的限制,因为从原理上无需先进行识别再进行测算,而是对所有障碍物直接进行测量;三是精度比单目高,直接利用视差计算距离;四是无需维护样本数据库,因为对于双目没有样本的概念。

 

  双目摄像头的难点

 

  双目系统的一个难点在于计算量非常大,对计算单元的性能要求非常高,这使得双目系统的产品化、小型化的难度较大。所以在芯片或FPGA上解决双目的计算问题难度比较大。国际上使用双目的研究机构或厂商,绝大多数是使用服务器来进行图像处理与计算的;也有部分将算法进行简化后,使用FPGA进行处理。

 

  其次,双目摄像头对ISP的性能比较高。双摄像头的算法,不得不提到ISP,ISP主要作用是对前端图像传感器输出的信号做后期处理,主要功能有线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等,依赖于ISP才能在不同的光学条件下都能较好的还原现场细节,ISP技术在很大程度上决定了摄像机成像质量。

 

  好的拍照算法就需要搭配好的ISP,ISP和算法相辅相成,缺一不可。而双摄像头对ISP性能要求更多。为了使的左右摄像头的信号能够同时被处理,单一的ISP已经无法满足双摄像头的需求。这就需要双路ISP实现此功能。

 

  以暗光增强为例,彩色/黑白图像分别进入各自的ISP通道和校准通道,然后将两副图片做匹配(如将两幅图片相同的部分提取出来,去除只有一个摄像头拍到的部分),然后通过遮挡,检测,补偿等算法处理相关的图片。最后将两幅图片融合起来,实现颜色的增强。

 

  随着双摄像头算法的演进,载有双摄像头的视频监控系统也将发挥更大的作用,运用到更多的场景中。

关键字:双目摄像头  监控

来源: 互联网 引用地址:http://www.eeworld.com.cn/afdz/article_201609089777.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:告别黑白 科达星光球全天候道路彩色监控
下一篇:刷脸打卡已落伍 川大教授发明“看脸色神器”

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

坦言技术还不成熟,这家公司为什么敢让无人车上路

停车场,选择“自动约车”, 一辆驭势无人驾驶车会到指定的停车位接乘客上车。 这辆无人车内设有4个座位,没有方向盘、油门和刹车。乘客提着行李上车,只需按下按钮,车即可自行启动,按照优化的路线前往目的地。吴甘沙希望它可以像人类司机一样,做到“眼观六路耳听八方”。于是,在这辆车上配备包括激光雷达、双目摄像头等在内的多种先进传感器,以及基于深度学习的人工智能算法。遇到停车场内其他车辆以及行人,它会自动识别、主动避让。“我们人类犯错误的时候,一下子会从九段变成八段,而机器学习如果犯错误,一下子从九段就变成了零段。”南京大学周志华教授的这句话让吴甘沙记忆犹新:“对于人工智能,并不存在另一种智能辅佐它,让它‘优雅的降级’,因此面对变化
发表于 2017-06-01 21:13:25
坦言技术还不成熟,这家公司为什么敢让无人车上路

当前ADAS系统的三条技术路线

。但是,Mobileye做了十多年,对很多特殊物体还是认不得,小猫小狗,垃圾桶,特殊车辆等等。那么做驾驶辅助还行,因为人还是主导驾驶行为,但再想升级,做自动驾驶等,就比较难了。  双目摄像头       双目摄像头的原理与单目有些不同,是基于两个摄像头的视差来测距的,这就和人的左右眼一样。从趋势上来看,奔驰、宝马、丰田等一线车企,都在研发双目的技术,特斯拉在和Mobileye分手之后,也和博世展开合作,准备采用双目的解决方案。 双目的优势在于,依靠视差来测距的原理使得它不必去识别物体是什么,只要有足够大的物体挡住了前方的道路,根据两个摄像头的反馈信息,就可以计算出车到该物体的距离
发表于 2016-11-07 18:16:35
当前ADAS系统的三条技术路线

单芯片功率监控IC,有效降低成本精简材料

对于现场可编程门阵列(FPGA)、图形处理器(GPU)和嵌入式计算器件等低电压、高功耗应用而言,管理并降低功耗至关重要。这些器件首先必须准确测量功耗才能对其进行管理,但高精度的功率测量解决方案通常意味着高成本,而且需要多个集成电路(IC)或电源配置来测量不同的轨道。为了满足这些需求,Microchip Technology Inc.(美国微芯科技公司)推出全新的双通道和三通道功率监控器件,可以通过一块芯片测量0V至32V电压下的功耗,这为设计人员提供了简单易用且能够提高功率测量准确性的解决方案。双通道器件还是业内首个采用16位原始分辨率的解决方案,实现了宽测量范围内的高度灵活性。      
发表于 2018-07-20 15:23:11
单芯片功率监控IC,有效降低成本精简材料

通过构建数据集中的电子病历,及时监控疾病并扼杀于萌芽

4月18日消息,据报道,想象下你收到一份礼物,它可以让你看到未来。想象下,你只要看着某人,就可以知道有什么坏事即将发生在他们身上。你也可以做些什么来防止这些糟糕的事情发生。作为一名医生,我想知道:在一个人们可以预见未来的世界里,医学和医疗保健领域会发生什么变化?也许你不必再去看医生,而是会在某天早上接到医生的电话,并告诉你:“嘿,你今天早上好吗?”你会说“太棒了!”然后他回答:“亲爱的,请不要惊慌,但你会在12小时内心脏病发作。所以,来医院吧,让我们在症状出现前把你治好。”这不好吗?我知道这听起来有点儿像科幻小说,但事实并非如此。以色列也已经取得了类似的进展。让我们举个“先发制人”的医学例证。你的朋友或家人正进行透析治疗,你知道这种
发表于 2018-07-19 19:20:34
通过构建数据集中的电子病历,及时监控疾病并扼杀于萌芽

如何扩大驾驶员的视野?摄像监控系统安排上了!

  从《侏罗纪公园》到《侏罗纪世界2》,主角们从车镜里看到的恐龙好像近在咫尺,这是因为车镜中的物体比其看起来更近——这一信息是经过验证的真实安全警告,几十年来一直提醒着驾驶员们,后视镜所反映的视野与现实稍有差距。  尽管有其局限性,但车镜仍是汽车上的重要设备,可帮助驾驶员掉头或变道。  然而,如今先进的驾驶辅助系统(ADAS)超越了车镜的反射,通过摄像头为驾驶员提供了基于驾驶座位的扩展视角。  摄像监控系统(CMS)也被称为电子镜或智能镜,旨在以摄像头和显示屏的形式提供车镜体验。想象一下,看着后视镜显示屏,就能看到车后的全景。当您看着侧视镜时,您会看到一个可显示您旁边车辆的高分辨率显示屏。这些情景正在成为现实,其他功能(如盲点
发表于 2018-07-19 17:45:35
如何扩大驾驶员的视野?摄像监控系统安排上了!

为什么现在的监控系统容易硬盘坏?

——这就是我们今天使用的硬盘的祖先,IBM称之为温彻斯特硬盘。  目前市面上除了SSD(俗称固态硬盘)之外,大多数的存储设备均为温彻斯特机械硬盘结构。其工作方式相是一个密闭空间中的留声机,不同的是磁头和碟片之间的距离只有10纳米,磁头的运动稍有不慎就会把盘片划伤。断电情况即包含在「稍有不慎」这个范围之内,而且机械硬盘厂商经过几十年的探索已经有了一套相对比较成熟的断电保护方案,所以平时很少会遇到强关电脑之后数据丢失硬盘损坏的情况。  来自@杜渡渡鸟(https://weibo.com/3219337542/FxelPmrD0)的评论就表示,以前的监控系统都是Windows工控机,可以直接去硬盘目录删除指定某段视频,清除干净之后可以表示事发
发表于 2018-07-18 18:32:20
为什么现在的监控系统容易硬盘坏?

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2018 EEWORLD.com.cn, Inc. All rights reserved