datasheet

AI监控时代,图像传感器有哪些升级和演进?

2018-11-03来源: 安防知识网关键字:图像传感器  AI

人工智能(AI)是2018年安博会的核心话题,其中人脸识别相关产品和方案仍然是本届安博会AI在安防监控应用领域展示量最大的部分。当前视频监控已走向人脸识别、车辆识别的应用阶段,大家都在关注识别算法精准度的提升,而如何提升这个精准度,撇开算法的层面,从设备硬件构造来讲,首先需要保障的是监控图像传感器的性能。

本次安博会,笔者也有幸采访到了国内专注于图像传感器技术和产品研发的企业思特威(SmartSens)人工智能事业部总经理白震东先生,在访谈过程中,白震东详细分析了当前国产图像传感器的创新技术亮点和应用现状,让我们对这个安防视频监控摄像头内部的核心元器件有了多一层的认知和了解。

人脸识别应用对图像传感器提出更高要求

由于行业的特殊性,安防视频监控摄像头的图像传感器主要考量三大关键点——信噪比、灵敏度和动态范围。现阶段,智能安防监控强调的人脸抓拍、视频结构化等应用,对“视觉”系统提出了更高的要求。

“传统安防监控领域所使用的图像传感器,其灵敏度难以满足如今智能安防的复杂应用场景,特别是对于人脸图像准确捕获和识别的要求。使用这类传感器的传统安防监控摄像头为了得到较为理想的成像亮度,往往会将拍摄时所使用的快门时间加大到40ms以上,同时配合使用比较高的增益来保证成像亮度。然而在摄像头的拍摄过程中,人员是在不断运动的,因此较长的快门时间会造成人脸成像模糊,而较高的增益则会导致成像质量劣化、噪声增加,这两大因素严重影响了人脸图像输出质量甚至导致较差的最终识别效果。”白震东表示。

正如同手机从“功能”走向“智能”一样,安防领域目前也正经历着这样的升级。针对这一行业发展趋势以及准确捕获/有效输出监控场景下人脸、车辆、物体特征信息的智能监控具体应用形态,思特威针对性地推出了‘1/1.8’系列超大尺寸的星光级图像传感器。该系列是面向智能安防而设计的颠覆式产品,其中思特威运用了可以提高CMOS图像传感器感度的BSI背照式工艺,并在设计上采用了独有的全新传感器设计架构,进一步提升了图像传感器的灵敏度和信噪比,加强了动态范围输出的能力,充分保证了智能安防摄像头面对复杂场景(暗光/逆光)的适应性。

另一个提升图像传感器性能的技术还可以通过变更成像曝光的方式实现。

两种曝光Shutter技术: Rolling Shutter 和 Global Shutter

AI监控时代,图像传感器有哪些升级和演进?

AI监控时代,图像传感器有哪些升级和演进?

Rolling Shutter:Rolling Shutter的曝光方式是按照逐行的方式来进行曝光,即传感器在成像时,每行像素逐行依次进行曝光,且每行像素的曝光之间会有一定的时间间隔。

Global Shutter:与Rolling Shutter不同,是整幅画面同一时间曝光实现。摄像头中图像传感器的所有像素点同一时间感应光线,同时曝光。传感器读出的是同一时间的同一画面。 

AI监控时代,图像传感器有哪些升级和演进?

高速物体变形  

(左图是采用Global Shutter技术的 SmartSens SC132GS拍摄的图片,右图是 Rolling Shutter传感器拍摄的图片)。  

AI监控时代,图像传感器有哪些升级和演进?

明暗现象  

(左侧为具备单帧HDR技术的SmartSens Global Shutter CIS拍摄效果)

据白震东介绍,传统摄像头常用的是Rolling Shutter,这种方式是逐行式曝光,比如说一个图像传感器是一个阵面,它的曝光数是一行一行曝光,适用于静态或流速较慢的场景。但在动态场景中,尤其是面对高速运动的目标物体,这时候需要用到Global Shutter曝光方式,它的曝光是整幅画面在一帧中同时冻结,不管画面速度多快,只要快门设置合理,都可以拍得非常清楚。

最匹配AI视觉应用的Global Shutter技术

据了解,Global Shutter图像传感器技术最早是应用在工业自动化领域的高端技术,主要为自动化工业生产线检测系统拍摄高速清晰的图像,以及为运动的机械手臂提供精准的图像数据源。随着AI时代的崛起,越来越多的应用领域需要使用到具备边缘计算能力的智能感知类产品,思特威敏锐地察觉到了这一应用发展的趋势,适时地推出了SmartGS系列Global Shutter CIS产品。

而今天我们能看到这项技术在人工智能爆发的阶段“生逢其时”,其实也源自于思特威敏锐的市场洞察力和前瞻性。

“对于人工智能的市场发展趋势,我们在2015年左右就已经开始预判了,这个行业如果用人工智能做一些革命的话,Global Shutter技术的应用是必然趋势。但有一点,在工业自动化里面用的Global Shutter实际上现场都有补光,它的环境相对比较稳定,但人工智能场景具有不确定性,环境更为复杂,因此,在Global Shutter的基础之上,我们还加入了BSI背照式传感器来提升传感器的感度。将BSI技术和Global Shutter技术放在一起,可以极大地增强Global Shutter 的场景适用性。”白震东表示。

目前,Global Shutter+BSI的技术组合已被思特威落地应用在多个垂直应用领域,辅助人工智能场景下的智慧视觉的应用,比如智慧交通、智慧商业、智能感知等领域,以智慧交通领域的实际应用为例:

智慧交通

从宏观角度来看,为了让城市交通更加便利,疏导日益拥堵的公共交通,智慧交通系统是解决交通发展瓶颈的有效手段之一。高速违章查处、卡口ETC、十字路口的道路监控、停车场的智能管理、道路流量监测、电子警察等应用场景都离不开成像技术。只有准确的成像信息,才能更加准确地判断当前的路况、车辆行为和车辆具体的身份信息,更好地实现城市道路交通系统顺畅的运转。在这个领域,Global Shutter CMOS图像传感器可以更好地发挥作用。

而在微观角度上,汽车产品也在从装备ADAS辅助驾驶向自动驾驶的方向演进。无论是辅助驾驶还是自动驾驶,汽车的中控芯片对传感器接收到的图像信息要求越来越高。中控芯片不仅需要图像传感器在车辆高速运动中提供没有形变的清晰图片,还需要提供周边物体与车辆的距离,甚至是驾驶员的疲劳程度监控。Global Shutter传感器可以避免车辆高速运动时拍摄图像形变的问题,同时结合智能驾驶/自动驾驶/驾驶员疲劳检测等方面的算法和逻辑判断,从而为行车安全提供极大的保障。       

图像传感器的价值演进:从赋能到服务

尽管当前人工智能元年已经开启,但在白震东看来,现阶段依旧处在弱人工智能的阶段,依托于图像传感器的智慧视觉系统仍然还有很长的路要走。

“弱人工智能时代,大家更多用传感器进行环境信息的智能感知,感知系统完善之后再开始向着垂直应用场景下逐渐拓展更深层次的智能化应用。”白震东表示。  

从现阶段人工智能和机器视觉领域的传感器应用情况来看,传感器的主要功能一个是成像给人看,一个是成像给机器看,还有一些用于交互式体验中大家熟知的手势识别、人脸支付、人脸解锁等场景应用。从一套视觉感知的工具逐渐朝服务大众日常生活的角色转变,应用价值也在随着场景的不断丰富得以持续演进,而这些也正是思特威发力的地方。 

AI监控时代,图像传感器有哪些升级和演进?

思特威多款重要图像传感器产品亮相安博会

“人工智能、机器视觉领域大范围的涉及到图像传感器的应用,用户端对于图像传感器在成本、性能或是应用配合等方面的要求,也将成为我们在新的产品研发过程中持续的推进力量,通过我们在图像传感器技术领域的不懈努力,更好地服务于应用技术的发展趋势,为大众创建更加美好的生活!”白震东最后强调!


关键字:图像传感器  AI

编辑:鲁迪 引用地址:http://www.eeworld.com.cn/afdz/2018/ic-news110312095.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:豪威科技针对近红外技术既推新品又推标准的背后原因
下一篇:Pinnacle Imaging Systems和安森美半导体合作推出新的HDR视频监控方案

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

专为高速应用设计而生—Teledyne e2v 1100万像素图像传感器问市

 Teledyne e2v是Teledyne Technologies旗下公司,同时也是成像解决方案领域全球创新者,它借助新推出的1100万像素检测器,进一步扩充了Lince系列图像传感器。Lince11M是新推出的一款CMOS图像传感器,专为需要在极高快门速度下达到4K分辨率的应用而设计。这款标准传感器是唯一兼备APS-C格式、710fps高帧率及4K分辨率的传感器。  Lince11M可以有效地用于在线检测以提高制造吞吐量,或者用于多光谱成像或多场景(亮场、暗场、背光)成像的频闪照明,并作为替代线扫描传感器的装置以改进缺陷分类,因为对该应用而言,在所有方向保持一致的图像清晰度至关重要。 
发表于 2019-04-15
专为高速应用设计而生—Teledyne e2v 1100万像素图像传感器问市

豪威科技推出新款汽车图像传感器

据麦姆斯咨询报道,行业领先的数字图像解决方案开发商豪威科技公司(OmniVision Technologies, Inc.)近日发布为驾驶舱和乘客监控提供最优价值的200万像素RGB-IR汽车图像传感器:OV2778。凭借其业界领先的功能,该传感器非常适用于汽车舱内监控成像应用,例如监控车内包裹,无人看管的儿童以及视频会议等。OV2778采用了车内隐蔽相机的最小可行封装——6.5mm x 5.7mm车用CSP,最大程度减少外观视觉影响 。此外,它还提供先进的ASIL功能安全性,在OV2778作为ADAS系统的一部分时,十分重要。豪威科技的产品营销经理Thilo Rausch说:对客舱和乘客监控的需求正在加速全球汽车图像传感器市场
发表于 2019-04-12
豪威科技推出新款汽车图像传感器

安森美图像传感器为NVIDIA自动驾驶汽车仿真提供支持

推动高能效创新的安森美半导体(ON Semiconductor,美国纳斯达克上市代号:ON),宣布正充分利用其精密的图像传感器建模技术为NVIDIA DRIVE Constellation仿真平台提供实时数据。该开放的、基于云的平台为自动驾驶汽车的大规模的硬件在环测试及验证进行位准仿真。 安森美半导体的图像传感器模型接收来自DRIVE Constellation的场景信息和控制信号,基于输入来计算和输出实时图像。然后将仿真的图像发送回DRIVE Constellation进行处理。该复杂的传感器模型将利用从光子向数字输出(例如量子效率、噪声、增益、模数转换、黑电平校正等)转换路径中的所有关键参数来提供真实世界
发表于 2019-03-24

安森美图像传感器建模技术为NVIDIA仿真平台提供实时数据

 推动高能效创新的安森美半导体(ON Semiconductor,美国纳斯达克上市代号:ON),宣布正充分利用其精密的图像传感器建模技术为NVIDIA DRIVE Constellation™仿真平台提供实时数据。该开放的、基于云的平台为自动驾驶汽车的大规模的硬件在环测试及验证进行位准仿真。 安森美半导体的图像传感器模型接收来自DRIVE Constellation的场景信息和控制信号,基于输入来计算和输出实时图像。然后将仿真的图像发送回DRIVE Constellation进行处理。该复杂的传感器模型将利用从光子向数字输出(例如量子效率、噪声、增益、模数转换、黑电平校正等)转换路径中的所有关键参数来提供真实
发表于 2019-03-20

索尼新图像传感器技术,兼具全局快门功能和背照式结构

索尼通过官网宣布,它已成功开发Pregius S,这是一种堆叠式CMOS图像传感器技术,采用该技术的新型图像传感器具有索尼专有的全局快门功能和背照式像素结构。配备有全局快门功能的传统CMOS图像传感器的原理是,将电荷信号临时存储在位于光电二极管旁边的存储区域中,以解决由于逐行读出时由移动引起的图像失真(焦平面失真)。但是问题在于,为了临时存储该信号,传统设计需要在传感器的前部和侧部布置其他部件。所以,具有全局快门功能的传统CMOS图像传感器均采用了前照式结构。然而,光电二极管顶部的布线阻碍了入射光,所以无法使像素更加小型化。为此,索尼开发了一种专有的像素结构,在背照式结构上实现全局快门功能,从而解决了像素小型化的问题。通常,当像素
发表于 2019-03-20
索尼新图像传感器技术,兼具全局快门功能和背照式结构

索尼半导体:日本半导体业界的“导弹头”

不禁让人想惊叹:“索尼半导体的时代已经到来,创造了世界第一台真正的晶体管收音机(Transistor Radio)的索尼DNA果然还是在半导体领域,这几年来预计要投资2兆多日元(约人民币1,200亿元),应该会一跃成为日本半导体的领头羊!索尼最擅长的CMOS(Complementary Metal Oxide Semiconductor) 图像传感器(Image Sensor)应该会带动光敏二极管(Photodiode)、光电耦合器(Photo Coupler)、微控制器(Microcontroller)、存储(Memory)等元件的销售,情况非同一般啊!”  说出以上这段话的是证券界的某位分析师。的确,索尼
发表于 2019-03-18
索尼半导体:日本半导体业界的“导弹头”

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2019 EEWORLD.com.cn, Inc. All rights reserved