datasheet

两眼看世界,双目摄像头给你好看

2016-09-08来源: 互联网关键字:双目摄像头  监控

  双目摄像头的监控系统可用于更多场合

 

  双目摄像头是利用仿生学原理,通过标定后的双摄像头得到同步曝光图像,然后计算获取的2维图像像素点的第三维深度信息。为了对不同的环境场合进行监控提出了一种新的基于双目计算机视觉的自适应识别算法。该算法首先利用像素点的深度信息对场景进行识别判断,然后采用统计的方法为场景建模,并通过时间滤波克服光照渐变,以及通过深度算法特性克服光照突变。与单摄像头相比,利用该算法实现的视频监控原理系统,可应用于更多场合,并利用深度信息设置报警级别,来降低误检率。

 

 

双摄像头能做什么

 

  1.做距离相关的应用

 

  人眼能够感知物体的远近,是由于两只眼睛对同一个物体呈现的图像存在差异,也称“视差”。物体距离越远,视差越小;反之,视差越大。视差的大小对应着物体与眼睛之间距离的远近,这也是3D电影能够使人有立体层次感知的原因。

 

 

  图中的人和椰子树,人在前,椰子树在后,最下方是双目相机中的成像。可以看出右侧成像中人在树的左侧,左侧成像中人在树的右侧,这是因为双目的角度不一样。再通过对比两幅图像就可以知道人眼观察树的时候视差小。而观察人时视差大,因为树的距离远,人的距离近。这就是双目三角测距的原理。双目系统对目标物体距离感知是一种绝对的测量,而非估算。

 

  2.双摄像头可以做光学变焦

 

  若两个摄像头的FOV不一样,一个大FOV,一个小FOV,再通过算法实现两个光学镜头之间的效果,就可以轻松做到光学变焦。

 

 

若不用双摄像头,放大图片后,文字不清楚

 

 

若使用双摄像头,放大图片后,文字依然清楚

 

 

  此图就是融合了广角的图和长焦的图,通过算法算出了中间态度照片,让细节不失真。

 

  双目摄像头的原理

 

  人眼是很容易对一个物体的距离进行定位,但当人闭上其中一个眼睛后,定位能力就会下降很多。双摄像头就是模拟人眼的应用。简单的说,测距离的话,就是通过算法算出,被拍摄物体与左/右摄像头的角度θ1和θ2,再加上固定的y值(即两个摄像头的中心距),就非常容易算出z值(即物体到摄像头的距离)。

 

 

  不过这也很容易推算,若两个摄像头中心距过小的话,可计算的物体距离就会很近。若想算出很远距离,就必须让左右摄像头的距离拉远。

 

  双目检测的方式就是通过对两幅图像视差的计算,直接对前方景物(图像所拍摄到的范围)进行距离测量,而无需判断前方出现的是什么类型的障碍物。所以对于任何类型的障碍物,都能根据距离信息的变化,进行必要的预警或制动。

 

  双目系统成本比单目系统要高,但尚处于可接受范围内;二是没有识别率的限制,因为从原理上无需先进行识别再进行测算,而是对所有障碍物直接进行测量;三是精度比单目高,直接利用视差计算距离;四是无需维护样本数据库,因为对于双目没有样本的概念。

 

  双目摄像头的难点

 

  双目系统的一个难点在于计算量非常大,对计算单元的性能要求非常高,这使得双目系统的产品化、小型化的难度较大。所以在芯片或FPGA上解决双目的计算问题难度比较大。国际上使用双目的研究机构或厂商,绝大多数是使用服务器来进行图像处理与计算的;也有部分将算法进行简化后,使用FPGA进行处理。

 

  其次,双目摄像头对ISP的性能比较高。双摄像头的算法,不得不提到ISP,ISP主要作用是对前端图像传感器输出的信号做后期处理,主要功能有线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等,依赖于ISP才能在不同的光学条件下都能较好的还原现场细节,ISP技术在很大程度上决定了摄像机成像质量。

 

  好的拍照算法就需要搭配好的ISP,ISP和算法相辅相成,缺一不可。而双摄像头对ISP性能要求更多。为了使的左右摄像头的信号能够同时被处理,单一的ISP已经无法满足双摄像头的需求。这就需要双路ISP实现此功能。

 

  以暗光增强为例,彩色/黑白图像分别进入各自的ISP通道和校准通道,然后将两副图片做匹配(如将两幅图片相同的部分提取出来,去除只有一个摄像头拍到的部分),然后通过遮挡,检测,补偿等算法处理相关的图片。最后将两幅图片融合起来,实现颜色的增强。

 

  随着双摄像头算法的演进,载有双摄像头的视频监控系统也将发挥更大的作用,运用到更多的场景中。

关键字:双目摄像头  监控

编辑:鲁迪 引用地址:http://www.eeworld.com.cn/afdz/article_201609089777.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:告别黑白 科达星光球全天候道路彩色监控
下一篇:刷脸打卡已落伍 川大教授发明“看脸色神器”

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

小觅双目摄像头:赋予机器人视觉能力的眼睛

 IDC (国际数据公司)《全球机器人及无人机支出指南》预测显示,中国机器人(含无人机)及相关服务的消费额持续高速增长,预计到 2022 年将达到 770 亿美元(约合 5290 亿元人民币),2018 年机器人解决方案的支出总额将达到 866 亿美元。中国将成为全球最大的机器人市场,到 2022 年,预计机器人产业份额将占全球总量的 38% 以上。无论是服务场景、安防场景,还是无人配送行业,机器人中最重要的一部分--视觉必不可少,致力于提供完整的视觉解决方案的小觅智能自推出双目摄像头后,就不断朝着此方向发展。行业主流三维信息获取方案目前行业内使用的三维信息获取方案主要有毫米波,激光,超声波,单目和双目摄像头方案:毫米波
发表于 2018-08-19
小觅双目摄像头:赋予机器人视觉能力的眼睛

坦言技术还不成熟,这家公司为什么敢让无人车上路

停车场,选择“自动约车”, 一辆驭势无人驾驶车会到指定的停车位接乘客上车。 这辆无人车内设有4个座位,没有方向盘、油门和刹车。乘客提着行李上车,只需按下按钮,车即可自行启动,按照优化的路线前往目的地。吴甘沙希望它可以像人类司机一样,做到“眼观六路耳听八方”。于是,在这辆车上配备包括激光雷达、双目摄像头等在内的多种先进传感器,以及基于深度学习的人工智能算法。遇到停车场内其他车辆以及行人,它会自动识别、主动避让。“我们人类犯错误的时候,一下子会从九段变成八段,而机器学习如果犯错误,一下子从九段就变成了零段。”南京大学周志华教授的这句话让吴甘沙记忆犹新:“对于人工智能,并不存在另一种智能辅佐它,让它‘优雅的降级’,因此面对变化
发表于 2017-06-01
坦言技术还不成熟,这家公司为什么敢让无人车上路

当前ADAS系统的三条技术路线

。但是,Mobileye做了十多年,对很多特殊物体还是认不得,小猫小狗,垃圾桶,特殊车辆等等。那么做驾驶辅助还行,因为人还是主导驾驶行为,但再想升级,做自动驾驶等,就比较难了。  双目摄像头       双目摄像头的原理与单目有些不同,是基于两个摄像头的视差来测距的,这就和人的左右眼一样。从趋势上来看,奔驰、宝马、丰田等一线车企,都在研发双目的技术,特斯拉在和Mobileye分手之后,也和博世展开合作,准备采用双目的解决方案。 双目的优势在于,依靠视差来测距的原理使得它不必去识别物体是什么,只要有足够大的物体挡住了前方的道路,根据两个摄像头的反馈信息,就可以计算出车到该物体的距离
发表于 2016-11-07
当前ADAS系统的三条技术路线

罗德与施瓦茨最新的R&S®PRISMON 视音频监控亮相 NAB 2019

罗德与施瓦茨在本届NAB 2019 上将会展出其经验证的 R&S®PRISMON 解决方案, 该方案对两个主要应用进行了更新:用于分发/传送环境的高级视音频监控, 以及用于演播室/后期制作/播出环境的IP 基带多画面监看。 R&S® PRISMON是一个多功能的、面向未来的基于软件的解决方案系列,用于对视音频内容的监控和多画面监看。 它可以支持当前与未来、传统广电与最先进的基于IP的广电环境中的内容传输和媒体格式。针对相关的流媒体环境,它还为OTT服务提供了一套全面的协议。 下一代智能监看解决方案 R&S®PRISMON作为监控应用为广播公司和媒体服务运营商提供在分发
发表于 2019-04-11
罗德与施瓦茨最新的R&S®PRISMON 视音频监控亮相 NAB 2019

先锋推网联双摄像头行车记录仪 具备驾驶员监控/ADAS功能

(图片来源:先锋公司官网)据外媒报道,自2017年4月开始,日本先锋公司(Pioneer)一直在供应Intelligent Pilot高级驾驶辅助系统(ADAS)解决方案。该驾驶辅助解决方案旨在通过利用基于数字地图的事故预测平台,以及网联物联网(IoT)设备,实现更安全驾驶。在ADAS解决方案最新研发过程中,为了防止因驾驶员疲劳和困倦而引起交通事故,先锋公司新增了一个网联双摄像头行车记录仪,该行车记录仪配备了驾驶员监控功能,能够探测到驾驶员是否困倦、是否在分心驾驶,实时监控驾驶员状态,为安全驾驶提供更好的辅助,该公司计划于4月在日本推出该款行车记录仪。日本此前修订了法规,要求载客和货运企业将驾驶员睡眠不足作为点名项,该法规
发表于 2019-04-09
先锋推网联双摄像头行车记录仪 具备驾驶员监控/ADAS功能

到2020年 汽车将可监控乘员面部表情和脑电波

(图片来源:Affectiva公司)据外媒报道,除了能够从A点到B点,现代汽车还能赋予驾驶员和乘客一个好处,现代城市中到处都是监控,因此,驾驶员和乘客相对来说很安全。难得的是,并没有人会录下你,获得你生成的大量数据。但是,随着新型车内监控技术的出现,此种情况将会改变。(图片来源:Freer Logic公司)Freer Logic公司正在研发一种能够读取脑电波的头枕,而Affectiva公司正在研发一种能够通过面部识别检测车内乘员情感的系统。Freer Logic公司正与汽车制造商以及一级零部件公司合作,在车辆上集成其神经监测技术,目标是在2020年成功应用于汽车。该公司表示,通过实时读取大脑数据,该头枕可以在25厘米开外识别驾驶员
发表于 2019-04-09
到2020年 汽车将可监控乘员面部表情和脑电波

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2019 EEWORLD.com.cn, Inc. All rights reserved