datasheet

图像传感器平台如何加速汽车安全特性

2018-10-25来源: 互联网关键字:图像传感器  安森美

作者:安森美半导体Bahman Hadji

 

随着人们对自动驾驶车辆的兴趣不断增加,通往自动驾驶的道路显然是用路标铺就的,例如增加先进驾驶辅助系统(ADAS)的部署。图像传感器是这些基于摄像机的系统的基础,好比车辆的眼睛。随着后视摄像头和360度环视系统的出现,它们令司机能看到车后和车辆周围,使驾驶更安全,此外,用前视摄像头系统感知什么在车辆前面,提供帮助防止碰撞的自动功能。政府机构出台的法规和新车评估计划(NCAP)等安全评级推动汽车摄像头的迅速采用,促使汽车制造商在他们的汽车平台上引入这些系统,从豪华车型到大众市场车型。因此,根据日本市场研究公司Techno Systems Research的数据,全球每年生产的汽车摄像头数量从2013年(4700万台)到2017年(1.1亿台)翻了一番多,将在2024年超过2亿台。

 

image.png


此外,360度环视系统基于在车辆两侧安装四个摄像头,为驾驶员提供低速停车和操纵优势,摄像头还可用以提供车道偏离警告和盲点检测等功能,在需要换车道之前提醒驾驶员。摄像头甚至被用来取代车镜,以摄像头监控系统(CMS)的形式,这种系统令驾驶员在车内的显示器上看到传统的侧视镜视野,而无盲点,同时无需外部车镜(因为辖区可以放宽车镜要求法规)-这对燃油经济性和工业设计都有很大的优势。同时,前视摄像头系统不仅用于向驾驶员显示视频,还检测在车辆前面发生了什么,以提供额外的安全和方便特性。这些系统可通过自动紧急制动来避免碰撞,当检测到车辆路径上突然的障碍物时,可以使汽车停下来,并通过自适应巡航控制为驾驶员提供帮助,这在公路行车条件下,特别是在交通拥挤的情况下是非常有用的。

 

传感器考量

虽然所有这些应用都用图像传感器作为摄像机的核心器件,但它们通常对一些参数有不同的要求,如图像质量、分辨率和传感器大小,不一而足。例如,用于向驾驶员显示图像的摄像机(例如后视摄像机)所需的图像质量可能不同于用于感知的前视摄像机所需的图像质量,后者结合算法以提供自动紧急制动ADAS功能。同样,实现特定显示格式的图像传感器所需的分辨率将与计算机视觉应用所需的分辨率不同,后者需要对于一个对象的精确的最小像素数用于算法,才能正确检测和识别它,直接转换为对传感器分辨率的要求。

 

在前视摄像头系统中,计算机视觉算法利用图像传感器输出来检测行人、车辆和物体并作出决策,需要对通过数千小时的测试驾驶获得的一系列图像进行训练,这是一个成本非常高的做法。需要使用与在生产中推出的系统相同的系统来收集这些图像,并且需要在收集此数据集之前设置图像质量。这种图像质量的调整和开发需要工程人员结合传感器工作,并通过适当的自动曝光和自动白平衡技术来控制它,以便随着场景条件的变化自动输出最优图像。然后使用这些捕获的图像进行训练的计算机视觉算法不能随后在由具有不同特性或调谐的图像传感器组成的摄像机上运行,因为它们已适应于识别给定数据集的配置文件。可扩展的图像传感器平台提供相同的性能和相似的特性,具有不同的分辨率,大大减少了制造商在多个平台上工作所需的工作量和成本,因为它们实际上可以重用工程开发工作和图像的训练数据集。 

 

成像挑战

在考虑任何汽车成像系统时,图像传感器的性能和捕捉大范围场景内容或动态范围的能力是一个关键参数。动态范围衡量传感器能捕获到的场景对比度,或者简单地说,它能很好地处理相同的场景中非常明亮的区域和黑暗区域或阴影。这是汽车摄像头一个常见的问题,当您考虑在傍晚太阳落至地平线下时,汽车将在地下通道下行驶。如果传感器的动态范围太低,可能会忽略场景中的关键细节,从而导致驾驶员或计算机视觉算法没有注意到场景中的对象,从而导致不安全的状况。

 

制造商现在必须处理的另一方面是在交通标志以及汽车前照灯和尾灯中越来越多的使用发光二极管(LED),这增加了汽车成像的挑战。LED照明通常采用脉宽调制(PWM)控制:LED以不同的占空比开关,以控制光的强度和省电,速度太快,人眼无法感知。但是,虽然我们的眼睛不能感知这些灯光的闪烁,但是图像感应器通常会捕获到LED开关时的。这意味着图像传感器输出在显示为视频时将显示此闪烁效果。这是我们不想要的,可能会带来安全问题-和使事情更加复杂,在车辆或交通标志中使用脉冲LED的频率没有标准。对于带有计算机视觉算法的前视摄像头,闪烁效应意味着交通标志可能会被误读或完全漏掉,而对于CMS或后视摄像头等视觉应用,它会让驾驶员分心和困惑。

 

把这个场景放到背景中,想象一个含高亮度源的场景,比如地平线下的太阳,还有一些看起来更暗的细节,比如路边的行人在附近一棵树的树荫下。为捕获这一高动态范围的场景,常见的图像传感器将通过使用较短的曝光时间来补偿场景的明亮部分,以避免场景的饱和和溢出。在同一场景中出现脉冲光源(如汽车LED大灯)的情况下,用于捕获场景明亮细节的短曝光时间将导致图像传感器捕获大灯实际关闭时的一个帧。虽然它随后将合并多个曝光以输出高动态范围图像,但在明亮的日光场景中,以上述方式部分或全部曝光将忽略LED,并导致前照灯出现闪烁。如果延长曝光时间,试图在LED打开时捕获到场景,那么被强光照射的场景中的部分会被过度曝光,大大缩小动态范围,丢失细节,最终导致图像质量无法接受。

 

高动态范围和减少LED闪烁

解决这一问题的方案是能够在单个帧内实现更大的动态范围的一种图像传感器,以便能够以足够长的曝光时间捕获明亮区域,在“开启”期间捕获到脉冲光源,而不会过度曝光场景。安森美半导体的Hayabusa™汽车图像传感器平台以一种使能超级曝光(Super-Exposure)的创新的像素技术成功地解决了这一问题。这项技术采用了一种创新的设计和工艺,能够在传感器内存储更多的电荷,使曝光时间在达到饱和前比目前汽车中使用的相同尺寸的传统图像传感器长五倍。通过这种像素技术,Hayabusa™图像传感器实现了120 dB以上的高动态范围成像,同时减少LED闪烁。

 

该方案的一部分在于构造Hayabusa™超级曝光像素.通过一种新的设计和制造工艺,每个背照式3.0微米像素存储了来自入射光的100,000多个电荷电子,这大大超过了相同像素大小的传统CMOS图像传感器提供的20,000个电子。这导致单个超级曝光捕获95分贝的动态范围,涵盖了大部分场景,而Hayabusa传感器能添加第二个非常短的曝光,通过捕获场景中最亮的部分,将动态范围扩大到超过120 dB。

 

为了在保持高动态范围输出的同时实现抑制LED闪烁的效果,超级曝光可被限制为足够长的时间来捕获场景中所期望的最低频率脉冲LED的整个周期:如果我们考虑为90 Hz,相当于约11毫秒的曝光时间(在此期间,LED可能只在该时间的1/10或更短的时间内打开)。传感器有100,000个电子电荷的容量,可曝光这么长时间,而不丢失明亮区域的细节,同时捕获LED “打开” 的脉冲信号。其次,较短的曝光时间结合一个专有的片上算法,确保扩大动态范围,同时保留超级曝光捕获的含脉冲LED的场景中的区域,通过二次曝光以防止它们被丢失。因此,传感器能够捕获场景中超过120分贝的动态范围,同时保留由脉冲LED组成的区域,采用一般的传感器时这些脉冲LED看来像是在闪烁。这一现实性能使Hayabusa平台成为开发要求高动态范围的、减少LED闪烁的汽车摄像头的最佳方案,而且由于该平台中的所有产品都具有相同的性能,制造商可以在器件之间任意转换,并且能够重用大部分的工程工作以及用于从其中一个传感器训练算法的数据。

      

总结

Hayabusa平台的符合车规的图像传感器涵盖从100万像素到500万像素分辨率,可扩展,并为制造商提供用于各种不同应用的配置选项。该平台的首款器件AR0233AT,是一款260万像素的传感器,同时具有高动态范围和抑制LED闪烁能力,以每秒60帧的速度生成1080p视频。

 

一个图像传感器平台成功地解决了汽车成像领域的两大主要技术挑战,同时也解决了制造商的实际问题。通过创建一个平台,以一系列器件提供一致的性能和表现,开发人员可充分利用数千小时的场景数据进行算法培训,以在不同的车辆上部署类似的ADAS功能,使用最适合该应用的图像传感器。这使得他们能够以最少的工作量将高端的、高分辨率系统和具性价比的低分辨率系统部署到不同的车辆平台上。Hayabusa图像传感器平台的功能将显著地帮助制造商推进其ADAS产品,从而为消费者带来更多的选择,但更重要的是为更多的驾驶员配备将提升驾驶员和行人道路安全的系统。


关键字:图像传感器  安森美

编辑:muyan 引用地址:http://www.eeworld.com.cn/qcdz/2018/ic-news102524016.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:NHTSA提议美国车辆启用自适应驾驶灯 降低碰撞风险提高道路安全
下一篇:挪威团队研发自适应警告声系统 可提醒盲人电动汽车在接近

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

专为高速应用设计而生—Teledyne e2v 1100万像素图像传感器问市

 Teledyne e2v是Teledyne Technologies旗下公司,同时也是成像解决方案领域全球创新者,它借助新推出的1100万像素检测器,进一步扩充了Lince系列图像传感器。Lince11M是新推出的一款CMOS图像传感器,专为需要在极高快门速度下达到4K分辨率的应用而设计。这款标准传感器是唯一兼备APS-C格式、710fps高帧率及4K分辨率的传感器。  Lince11M可以有效地用于在线检测以提高制造吞吐量,或者用于多光谱成像或多场景(亮场、暗场、背光)成像的频闪照明,并作为替代线扫描传感器的装置以改进缺陷分类,因为对该应用而言,在所有方向保持一致的图像清晰度至关重要。 
发表于 2019-04-15
专为高速应用设计而生—Teledyne e2v 1100万像素图像传感器问市

豪威科技推出新款汽车图像传感器

据麦姆斯咨询报道,行业领先的数字图像解决方案开发商豪威科技公司(OmniVision Technologies, Inc.)近日发布为驾驶舱和乘客监控提供最优价值的200万像素RGB-IR汽车图像传感器:OV2778。凭借其业界领先的功能,该传感器非常适用于汽车舱内监控成像应用,例如监控车内包裹,无人看管的儿童以及视频会议等。OV2778采用了车内隐蔽相机的最小可行封装——6.5mm x 5.7mm车用CSP,最大程度减少外观视觉影响 。此外,它还提供先进的ASIL功能安全性,在OV2778作为ADAS系统的一部分时,十分重要。豪威科技的产品营销经理Thilo Rausch说:对客舱和乘客监控的需求正在加速全球汽车图像传感器市场
发表于 2019-04-12
豪威科技推出新款汽车图像传感器

安森美图像传感器建模技术为NVIDIA仿真平台提供实时数据

 推动高能效创新的安森美半导体(ON Semiconductor,美国纳斯达克上市代号:ON),宣布正充分利用其精密的图像传感器建模技术为NVIDIA DRIVE Constellation™仿真平台提供实时数据。该开放的、基于云的平台为自动驾驶汽车的大规模的硬件在环测试及验证进行位准仿真。 安森美半导体的图像传感器模型接收来自DRIVE Constellation的场景信息和控制信号,基于输入来计算和输出实时图像。然后将仿真的图像发送回DRIVE Constellation进行处理。该复杂的传感器模型将利用从光子向数字输出(例如量子效率、噪声、增益、模数转换、黑电平校正等)转换路径中的所有关键参数来提供真实
发表于 2019-03-20

索尼半导体:日本半导体业界的“导弹头”

不禁让人想惊叹:“索尼半导体的时代已经到来,创造了世界第一台真正的晶体管收音机(Transistor Radio)的索尼DNA果然还是在半导体领域,这几年来预计要投资2兆多日元(约人民币1,200亿元),应该会一跃成为日本半导体的领头羊!索尼最擅长的CMOS(Complementary Metal Oxide Semiconductor) 图像传感器(Image Sensor)应该会带动光敏二极管(Photodiode)、光电耦合器(Photo Coupler)、微控制器(Microcontroller)、存储(Memory)等元件的销售,情况非同一般啊!”  说出以上这段话的是证券界的某位分析师。的确,索尼
发表于 2019-03-18
索尼半导体:日本半导体业界的“导弹头”

安森美将携全面的智能图像感知方案亮相Vision China 2019

推动高能效创新的安森美半导体(ON Semiconductor,美国纳斯达克上市代号:ON),将于3月20日至22日在上海举行的中国国际机器视觉展(Vision China)演示各种智能图像感知方案,展品包括X-Class图像传感器平台、KAI-50140 interline transfer CCD图像传感器、采用近红外(NIR+)技术的AR0522 CMOS图像传感器,和AR0234 CMOS数字图像传感器。 随着工业成像应用如机器视觉检测和工业自动化的需求持续推进,安森美半导体充分利用其领先行业的技能和技术一直在图像传感器的设计和性能进行创新,以解决这不断增长市场的需求。 安森美半导体的X-Class
发表于 2019-03-15

“物联之星”—安森美AR0430 CMOS图像传感器

产业奖认可单一、低功耗传感器在制作视频和深度图像的创新 推动高能效创新的安森美半导体宣布其AR0430 CMOS图像传感器因创新设计和丰富特性而获得“物联之星”2018中国物联网(IoT)最佳创新产品奖。 “物联之星”是由中国IoT产业应用联盟举办的年度评选,旨在推动IoT产业的发展,和表彰领先的企业和出色的产品创新。 AR0430适用于IoT应用,包括可穿戴设备、增强实境(AR)/虚拟实境(VR)产品、安防和家居/办公室/工厂自动化,归功于安森美半导体开发的技术,提供不可思议的省电及同步视频和深度映射。AR0430的领先功耗、尺寸和帧率,因此用户可有产生400万像素(MP)图像、功耗小于 8 mW
发表于 2019-03-13

小广播

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2019 EEWORLD.com.cn, Inc. All rights reserved