物联网边缘的智能视频分析技术

2017-10-25 19:00:39编辑:鲁迪 关键字:物联网  ADI  对数成像

作者:Tyler Jesiel

对数成像和节点分析组合

使用节点分析和对数成像器可改进物联网(IoT)中的视频分析应用。视频分析应用试图利用日常世界中丰富的信息资源,出于几个原因考量。包括日常监控的人脸识别,但大部分原因集中在预测分析和行为分析上。这些应用中收集到的信息可通过云计算进行更高端的广泛处理。然而,深度处理有其局限性,并且可以通过往组合中增加节点分析和对数成像器在很多方面加以改进。

通过往组合中增加节点分析,减轻与云之间的通信,可以改进数据分析。云计算的带宽需求比节点分析应用多出两个(如果不是三个)数量级。因此,节点分析的计算能力要求更低,并可减少延迟。人口稠密的市场、交通混乱的地区以及城市停车场都是一些环境错综复杂的地方,可使用节点分析进行检测,以进行预测和行为分析。在云中对这些环境进行高级处理有助于制定业务策略,疏导交通流量,并可提高政府管理的停车场的效率。然而,在传感器节点处采用低端软件,而不是执行云分析,可改进这些场景的延迟、带宽、安全和功耗。

除了节点处实现智能化,往组合中增加对数成像器对于传统成像器不符合要求的领域也具有优势,从而增强系统功能。除了减少对亮度变化的依赖性,对数成像器还提供更高的图像处理动态范围。例如:在阴影、反光、光线突变以及高对比度场景中,对数成像器的表现都优于传统成像器。在视频应用中,这些问题的解决有利于数据捕捉,从而加强节点的分析能力。通过提高数据捕捉能力,整个视频分析应用都可得到显著改进。

节点分析技术和对数成像器实现的改进有助于解决物联网中的视频分析应用问题。安全、决策制定延迟、数据带宽和计算能力是物联网应用中常见的一些工程难题。通过减少数据传输可大大减少这些工程问题,而这也是节点分析对物联网应用具有吸引力的原因。在视频分析应用中,有限的对比度和亮度依赖性是需要共同解决的难题。对数成像器是视频分析应用的关键,几乎可以解决这一难题。总的来说,使用节点分析技术和对数成像器可增强物联网中的视频分析应用。

智能边缘

通过处理基于预期视觉事件的数据,可迅速地将测量数据转换为适当的动作,不必向云服务器传输任何数据,或传输少量数据。对视频数据进行快速分析,而不是将其传至云,可在本地做出决策,从而改进系统的延迟性。通过减少传输具有拦截风险的数据,不仅能够明显减少决策延迟,而且安全性也得以提高。

只有最有价值的信息需要传输至节点之外的云中,以进行预测或行为处理。经过优化的数据划分可充分发挥云价值,因为通常不需要全带宽的视频分析帧。在固定安装的摄像机上,帧与帧之间的大部分可视数据为静态数据,并可在节点进行滤波处理。边缘节点视频分析可提供多种滤波解读来区分各种预期的对象类型:汽车、卡车、自行车、人类和动物等。这种抽取操作减少了云服务器上所需的数据带宽和相关的计算能力,而如果要分析下游发送的全帧速率视频数据,则会占用大量的数据带宽和计算能力。与云计算应用相比,这种带宽的减少可实现两个或三个数量级的改进,而这是节点分析技术实现的一个关键性能改进。

对数成像

通过替换为对数成像技术可解决与传统成像器相关的常见问题,从而进一步改进视频分析应用。大多数传统成像器都是线性成像器,其使用像素生成的电压作为光的线性函数,而此类像素则会导致有限的对比度。线性成像器还利用统一的曝光相位,限制了其相对于帧速率范围内像素曝光时间的动态范围。最后,传统成像器的对比度取决于亮度,从而可能导致反光相关的对比度问题。通过替换成对数成像器可消除这些常见的问题,对数成像器使用像素生成的电压作为光的对数函数。传统成像器与对数成像器之间的区别请参见图1、2和3。

图1. 传统的图像曝光。

图2. ADIS17002对数图像曝光。

图3. 使用内置边缘检测技术的ADIS17002对数图像曝光。

一些传统的成像器在努力解决阻碍用户全面捕捉其目标环境数据的对比度相关问题。这些对比度问题源于每个像素中生成电压的线性特性。线性成像像素中生成的电压与照射的光子数成正比;因此,与对数成像相比,其动态范围是有限的。降低与这些线性成像器相关的对比度就意味着缩小动态范围。对比度降低会对物联网应用中传感器节点的分析产生不利影响,最终影响系统的整体性能。对数成像器提供更广泛的亮度级范围,从而增加因对数生成的像素电压产生的对比度。然而,对比度的增加导致更高的感光性,这在有些应用中可能并不是期望的效果。或者,感光性 的提高也可能是一种优势,具体取决于应用。

阳光充足或明亮环境下产生的反光可能会进一步阻碍使用传统成像器进行视频捕捉。例如:当挡风玻璃上存在反光时,汽车内部的人脸识别就会变得益发困难。这种视频捕捉障碍会将错误引入系统或丢失重要数据,从而对视频分析产生不利影响。由于线性成像器像素之间的对比度取决于亮度,所以会产生反光;因此,线性成像器的反光更加突出。这种对亮度的依赖性见等式1。另外,对数成像器的对比度则由于其本身的对数特性而与亮度无关,从而有助于减少反光或光线的突变。对数成像器与亮度无关的特性见等式2。

超越单个组件的研发

为了提供平台级解决方案,ADI公司开始超越单个组件的研发;这些解决方案可帮助客户快速部署经过验证的智能解决方案,以更低的系统成本实现更高的性能。智能应用始于准确可靠的数据,通过ADI先进的检测和测量功能可获得此类数据。此外,ADI还与客户合作,共同开发能够解决所有问题的独特系统级解决方案。ADIS1700x是其中一种解决方案,它能够实现四分之一的视频图形阵列(QVGA)成像分析。

图4. 功能框图。

ADIS1700x是一个小尺寸且具有对数敏感性的QVGA分析成像器模块,具有能够优化视频性能的数字信号处理功能。除了用于图像稳定、倾斜和冲击检测的加速度计,该模块还采用低功耗Blackfin处理器进行节点分析。此外,它还采用内置边缘检测技术跟踪和计算对象运动。与传统成像器不同的是,对数成像器的每个14 μm × 14 μm像素都具有一个独一无二的曝光相位。针对室外操作的保形涂层使其非常适用于大规模部署,从而可创建新兴智能城市和建筑应用。ADIS17001 配备110°视场(FOV)镜头,而ADIS17002则配备67°FOV镜头。这两个选项适用于各种目标应用,包括停车场监控、停车违章执法、车流长度检测和工业分析。

图5. ADIS17002:对角方向(左)、电路板镜头侧俯视(中)和背侧(右)。

总的来说,使用节点分析技术和对数成像器可显著改进物联网领域的视频应用,这也是ADI公司与ADIS1700x模块产品一起推出的方法。节点分析而不是云计算有利于物联网应用的发展。对数成像器具有其竞争产品无法匹敌的优势,可更进一步改进物联网应用。总之,物联网领域的视频分析应用与节点分析技术和对数成像器相结合,共同构成一个鲁棒的系统级解决方案。

关于作者

Tyler Jesiel是ADI公司自主惯性MEMS部的产品工程师,主要负责系统级封装(SiP)解决方案和惯性测量单元(IMU)。他拥有特性、设计验证和测试自动化方面的经验。Tyler获得密歇根大学安娜堡分校电气工程学士学位,目前正在努力攻读北卡罗来纳州立大学电气工程硕士学位。


关键字:物联网  ADI  对数成像

来源: 互联网 引用地址:http://www.eeworld.com.cn/afdz/article_2017102511147.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:阿里云携手NVIDIA拓展人工智能培训计划
下一篇:阿尔法狗新一代人工智能问世 从零开始学习

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

OMRON人脸识别技术,终于可以刷脸购物啦

随着我国城市化进程加速,在自动售货、交通、物流和城市公共安全等领域,快速确认公共场所人员身份信息逐渐成为现代生活的基本环节。而有着前瞻性眼光的欧姆龙早已布局该领域,通过前端的研发团队开发了独具特色的人脸识别技术,极具市场前景。 欧姆龙人脸识别技术OKAO™ Vision可同步判断面部和人的位置、理解面部和人的动作、找出面部器官、修正面部、识别面部细节、理解图像等几个细节步骤,落实技术实现,环环相扣,确认率高。除了追踪面部以外,OKAO™ Vision还可被用于人脸识别、分析年龄和性别、视线和脸的朝向推定、表情分析、手部识别等。图为欧姆龙OKAO™技术专利标志 迄今,欧姆龙人脸视觉组件(HVC-P2)已投入应用到诸
发表于 2018-07-24 15:49:41
OMRON人脸识别技术,终于可以刷脸购物啦

物联网布局航空国防领域

如果电子行业有一个细分市场要求设计工程师与测试测量密切协作,那就是航空和国防。为了不断前行,测试设备必需不断适应并改良,以支持元器件系统中日新月异的技术变化,同时满足微波和RF技术的持续演变。 人们一想到航空和国防,大多数注意力会放在RF传感、卫星通信、电子战等应用上,这些应用至关重要。而现在,由于物联网(IoT)技术的整合,问题空间变得日益复杂。物联网设备一般被视为提高仓库或家居效率的一种方式,现在正被用来连接航空和国防系统中的各种飞机、机械、系统和人,以改善性能,降低总运营成本。根据报告,现在仅这一市场的容量就超过了200亿美元。从整体上看,在这一日新月异的行业中,采集、测试和评估解决方案在激发创新、保证性能方面发挥
发表于 2018-07-24 11:54:22
物联网布局航空国防领域

恭喜播思在50大物联网解决方案提供商榜上有名

全球物联网软件、产品及云解决方案领导者Borqs Technologies, Inc. (以下简称“播思”)(Nasdaq: BRQS)近日宣布荣登CIO Applications杂志评选的“2018年50大物联网解决方案提供商”榜单。播思凭借全面的产品组合、强大的服务能力以及对物联网产业的突出贡献,荣誉上榜。播思执行副总裁、国际业务总裁George Thangadurai表示:“播思自成立至今十几年来,一直为服务物联网市场而备感自豪。我们深刻认识到,物联网解决方案如果不能实现个性化或定制化,就无法满足不同行业的独特需求。因此,我们为采用互联设备的不同行业定制物联网应用,从而帮助他们在物联网市场中快速胜出。我们很高兴播思提供
发表于 2018-07-23 17:28:51

制造业成中国物联网最大行业,也是最大的致胜法宝

2018年激战正酣的世界杯上冷门频现,“美中不足”(即“美国与中国未能参与”)成为一大遗憾。但是,在全球物联网市场上,中美依然保持了强劲的发展势头,根据IDC最新发布的《2018年上半年全球物联网支出指南》,到2022年全球物联网(IoT)支出将达到1.2万亿美元,2017年至2022年期间复合年增长率(CAGR)为13.6%。其中,中国物联网支出规模将达到3000亿美元,在全球的物联网市场中占比超过四分之一,中国将超越美国成为全球最大的物联网市场。面对用户对于物联网应用的强烈需求,如何在其中发现市场机会以帮助企业实现 “技术 业务”的数字化转型,如何改变物联网产业链的 “碎片化”现状以及满足用户的个性化需求等,是所有市场参与者
发表于 2018-07-20 19:19:58

解读ADI工业物联网布局策略

的新阶段。 ADI行业市场高级经理陆磊对笔者介绍说:“ADI专注于工业物联网,为工业客户提供在感知、测量、解读、通信、网络安全和边缘计算等各个环节中的产品和解决方案,与客户一起探索更快实现工业 4.0 的途径。”ADI行业市场高级经理陆磊更高水平的生产力和灵活性、更高的效率、更高的质量和更低的成本,这些都是制造商对工业 4.0 的期待。但如何才能实现这些目标呢?现在应该采取什么措施?同样重要的是,这之后应采取哪些措施?ADI正在帮助设备制造商率先迎接工业 4.0,用信号链专业知识、优化的解决方案和密切的开发协作补充他们的独特能力。陆磊举例道:“在工厂或工业应用中增加多种传感器,与大数据结合,可以实现设备的监控和健康管理
发表于 2018-07-19 10:39:00
解读ADI工业物联网布局策略

实时物联网设备又有创新发展

作为意法半导体的STM32 *产品家族最新成员,STM32F7x0和H7x0超值系列(Value Lines) 微控制器(MCU)将为开发人员提供更高的灵活性。该系列产品适用于开发价格亲民、以性能为导向的实时物联网设备应用系统,同时不会影响目标应用的功能或网络安全性。 这些新产品线精简了嵌入式闪存功能,只保留最基本的重要配置,但仍然可以在片上安全运行安全启动代码、敏感代码和实时例程,发挥出嵌入式闪存访存时间比外部闪存快25倍有余的优势(在缓存失效情况下)。在必要时,设计人员可以通过下面两种途径扩展应用系统,第一种方法是增装一个片外串行或并行(最多32位)存储器,发挥片上各种外部接口和就地执行(XiP)功能的优势。第二种
发表于 2018-07-19 10:32:10
实时物联网设备又有创新发展

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2018 EEWORLD.com.cn, Inc. All rights reserved