物联网边缘的智能视频分析技术

2017-10-25 19:00:39编辑:鲁迪 关键字:物联网  ADI  对数成像

作者:Tyler Jesiel

对数成像和节点分析组合

使用节点分析和对数成像器可改进物联网(IoT)中的视频分析应用。视频分析应用试图利用日常世界中丰富的信息资源,出于几个原因考量。包括日常监控的人脸识别,但大部分原因集中在预测分析和行为分析上。这些应用中收集到的信息可通过云计算进行更高端的广泛处理。然而,深度处理有其局限性,并且可以通过往组合中增加节点分析和对数成像器在很多方面加以改进。

通过往组合中增加节点分析,减轻与云之间的通信,可以改进数据分析。云计算的带宽需求比节点分析应用多出两个(如果不是三个)数量级。因此,节点分析的计算能力要求更低,并可减少延迟。人口稠密的市场、交通混乱的地区以及城市停车场都是一些环境错综复杂的地方,可使用节点分析进行检测,以进行预测和行为分析。在云中对这些环境进行高级处理有助于制定业务策略,疏导交通流量,并可提高政府管理的停车场的效率。然而,在传感器节点处采用低端软件,而不是执行云分析,可改进这些场景的延迟、带宽、安全和功耗。

除了节点处实现智能化,往组合中增加对数成像器对于传统成像器不符合要求的领域也具有优势,从而增强系统功能。除了减少对亮度变化的依赖性,对数成像器还提供更高的图像处理动态范围。例如:在阴影、反光、光线突变以及高对比度场景中,对数成像器的表现都优于传统成像器。在视频应用中,这些问题的解决有利于数据捕捉,从而加强节点的分析能力。通过提高数据捕捉能力,整个视频分析应用都可得到显著改进。

节点分析技术和对数成像器实现的改进有助于解决物联网中的视频分析应用问题。安全、决策制定延迟、数据带宽和计算能力是物联网应用中常见的一些工程难题。通过减少数据传输可大大减少这些工程问题,而这也是节点分析对物联网应用具有吸引力的原因。在视频分析应用中,有限的对比度和亮度依赖性是需要共同解决的难题。对数成像器是视频分析应用的关键,几乎可以解决这一难题。总的来说,使用节点分析技术和对数成像器可增强物联网中的视频分析应用。

智能边缘

通过处理基于预期视觉事件的数据,可迅速地将测量数据转换为适当的动作,不必向云服务器传输任何数据,或传输少量数据。对视频数据进行快速分析,而不是将其传至云,可在本地做出决策,从而改进系统的延迟性。通过减少传输具有拦截风险的数据,不仅能够明显减少决策延迟,而且安全性也得以提高。

只有最有价值的信息需要传输至节点之外的云中,以进行预测或行为处理。经过优化的数据划分可充分发挥云价值,因为通常不需要全带宽的视频分析帧。在固定安装的摄像机上,帧与帧之间的大部分可视数据为静态数据,并可在节点进行滤波处理。边缘节点视频分析可提供多种滤波解读来区分各种预期的对象类型:汽车、卡车、自行车、人类和动物等。这种抽取操作减少了云服务器上所需的数据带宽和相关的计算能力,而如果要分析下游发送的全帧速率视频数据,则会占用大量的数据带宽和计算能力。与云计算应用相比,这种带宽的减少可实现两个或三个数量级的改进,而这是节点分析技术实现的一个关键性能改进。

对数成像

通过替换为对数成像技术可解决与传统成像器相关的常见问题,从而进一步改进视频分析应用。大多数传统成像器都是线性成像器,其使用像素生成的电压作为光的线性函数,而此类像素则会导致有限的对比度。线性成像器还利用统一的曝光相位,限制了其相对于帧速率范围内像素曝光时间的动态范围。最后,传统成像器的对比度取决于亮度,从而可能导致反光相关的对比度问题。通过替换成对数成像器可消除这些常见的问题,对数成像器使用像素生成的电压作为光的对数函数。传统成像器与对数成像器之间的区别请参见图1、2和3。

图1. 传统的图像曝光。

图2. ADIS17002对数图像曝光。

图3. 使用内置边缘检测技术的ADIS17002对数图像曝光。

一些传统的成像器在努力解决阻碍用户全面捕捉其目标环境数据的对比度相关问题。这些对比度问题源于每个像素中生成电压的线性特性。线性成像像素中生成的电压与照射的光子数成正比;因此,与对数成像相比,其动态范围是有限的。降低与这些线性成像器相关的对比度就意味着缩小动态范围。对比度降低会对物联网应用中传感器节点的分析产生不利影响,最终影响系统的整体性能。对数成像器提供更广泛的亮度级范围,从而增加因对数生成的像素电压产生的对比度。然而,对比度的增加导致更高的感光性,这在有些应用中可能并不是期望的效果。或者,感光性 的提高也可能是一种优势,具体取决于应用。

阳光充足或明亮环境下产生的反光可能会进一步阻碍使用传统成像器进行视频捕捉。例如:当挡风玻璃上存在反光时,汽车内部的人脸识别就会变得益发困难。这种视频捕捉障碍会将错误引入系统或丢失重要数据,从而对视频分析产生不利影响。由于线性成像器像素之间的对比度取决于亮度,所以会产生反光;因此,线性成像器的反光更加突出。这种对亮度的依赖性见等式1。另外,对数成像器的对比度则由于其本身的对数特性而与亮度无关,从而有助于减少反光或光线的突变。对数成像器与亮度无关的特性见等式2。

超越单个组件的研发

为了提供平台级解决方案,ADI公司开始超越单个组件的研发;这些解决方案可帮助客户快速部署经过验证的智能解决方案,以更低的系统成本实现更高的性能。智能应用始于准确可靠的数据,通过ADI先进的检测和测量功能可获得此类数据。此外,ADI还与客户合作,共同开发能够解决所有问题的独特系统级解决方案。ADIS1700x是其中一种解决方案,它能够实现四分之一的视频图形阵列(QVGA)成像分析。

图4. 功能框图。

ADIS1700x是一个小尺寸且具有对数敏感性的QVGA分析成像器模块,具有能够优化视频性能的数字信号处理功能。除了用于图像稳定、倾斜和冲击检测的加速度计,该模块还采用低功耗Blackfin处理器进行节点分析。此外,它还采用内置边缘检测技术跟踪和计算对象运动。与传统成像器不同的是,对数成像器的每个14 μm × 14 μm像素都具有一个独一无二的曝光相位。针对室外操作的保形涂层使其非常适用于大规模部署,从而可创建新兴智能城市和建筑应用。ADIS17001 配备110°视场(FOV)镜头,而ADIS17002则配备67°FOV镜头。这两个选项适用于各种目标应用,包括停车场监控、停车违章执法、车流长度检测和工业分析。

图5. ADIS17002:对角方向(左)、电路板镜头侧俯视(中)和背侧(右)。

总的来说,使用节点分析技术和对数成像器可显著改进物联网领域的视频应用,这也是ADI公司与ADIS1700x模块产品一起推出的方法。节点分析而不是云计算有利于物联网应用的发展。对数成像器具有其竞争产品无法匹敌的优势,可更进一步改进物联网应用。总之,物联网领域的视频分析应用与节点分析技术和对数成像器相结合,共同构成一个鲁棒的系统级解决方案。

关于作者

Tyler Jesiel是ADI公司自主惯性MEMS部的产品工程师,主要负责系统级封装(SiP)解决方案和惯性测量单元(IMU)。他拥有特性、设计验证和测试自动化方面的经验。Tyler获得密歇根大学安娜堡分校电气工程学士学位,目前正在努力攻读北卡罗来纳州立大学电气工程硕士学位。


关键字:物联网  ADI  对数成像

来源: 互联网 引用地址:http://www.eeworld.com.cn/afdz/article_2017102511147.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:阿里云携手NVIDIA拓展人工智能培训计划
下一篇:阿尔法狗新一代人工智能问世 从零开始学习

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

以后的公共网络将会更加安全

同时推出了超高密度技术套件,可提高网络性能和支持WPA3安全协议,以保护终端用户免受常见攻击  ARRIS旗下致力于研发创新型有线及无线网络技术的优科网络公司(Ruckus Networks)宣布推出业界首款支持物联网和LTE功能的802.11ax无线接入点(AP)Ruckus R730。支持大容量和12个空间串流(spatial-stream)的R730与全新的Ruckus超高密度技术套件协同工作,在体育场、火车站和学校等超高密度用户环境中可流畅传输高清、延迟敏感型视频。此外,R730符合新的WPA3™安全协议和Wi-Fi™ Enhanced Open认证,可在公共网络上实现更安全的连接。 
发表于 2018-07-18 16:35:18
以后的公共网络将会更加安全

工业4.0的基础架构——工业物联网,落地成真

近年来智能化成为各产业的热门议题,而智能化愿景要落实,必须根基于自动化技术,从实际应用面观察,自动化系统必须附加在某个技术上,促使此技术改善质量、提升效率,因此自动化技术所产生的价值,容易被看见、计算,智能化系统与之不同之处,在于智能化是藉由开创全新系统提供全新的价值,以打开另一个全新市场,而以制造业来说,工业物联网仍属于自动化范畴,要真正达到智能化,必须倚靠之后云端平台与AI技术的导入。视觉技术进化 检测快速稳定工业物联网的系统建置目标,聚焦于制造业前端设计与后端制程系统,用以提高产线弹性,现在市场上的工业物联网作法有两种,一是设备中建置传感器,传感器可快速判断工件的类别,改变生产方式,不过一旦所需处理的工件种类变多,这需要
发表于 2018-07-16 19:15:47

芯片限宽已经到极限了?未来AI:或许我可以继续

近日,在上海国家会计学院举办的“新经济,新征程”企业家高层论坛上,上海复旦微电子集团董事总经理、创始人施雷在演讲中表示:IOT(物联网)和人工智能这两个领域,将会给集成电路提供一个巨大的推动力,会催生许许多多新形态芯片。 施雷认为,摩尔定律发展到今天,已经终止了,芯片限宽已经到纳米了,芯片不可能再缩小了,这也就意味着,后来者机会会更多。所谓摩尔定律,指的是当价格不变时,集成电路上可容纳的元器件的数目,约每隔18-24个月便会增加一倍,性能也将提升一倍。 “量子计算机的出现,意味着无穷大计算能力的出现。集成电路行业里面,我们盯的是两个领域将会给集成电路出现一个巨大的推动力,第一个是物联网,万物互联,会提供许许多多
发表于 2018-07-16 19:14:10

全球最快物联网市场,国产传感芯片不能慢

原创: 赵妍 通信产业网2009年我国提出“感知中国”,物联网被正式列为国家五大新兴战略性产业之一,开启了我国物联网发展的新纪元。历经七年,我国物联网形成了包括芯片、设备、软件、应用等相对完善的物联网产业链,从市场规模来看,2016年物联网市场规模高达9000亿。我国建成了全球最大的NB-IoT网络,形成了最为活跃的物联网应用市场。物联网产业内部层次分明,感知层、网络层、平台层与应用层,各自形成独立市场,各有专业玩家,呈现出不同生态。我国物联网各细分领域都处于高速发展阶段,但与此同时,我国在物联网传感器方面有待突破。“目前我们最缺乏的是感知能力。”工业和信息化部原副部长、北京大学教授杨学山在2018中国物联网产业生态大会上曾表示
发表于 2018-07-11 10:58:43
全球最快物联网市场,国产传感芯片不能慢

物联网设备改变工业,这7大趋势不得不提

当前,通用物联网设备正在改变工业管理与运营,用于特定行业的物联网设备也在变得更加强大。 同时,物联网通过与自动化技术、人工智能和云计算的组合用用,真正实现了传统工业向智能制造的转变。 在这一转变过程中,数字孪生、人机交互、预测性维护、网络安全、弹性变化、自动化和边缘计算正在成为智能制造的七个关键趋势。 这些趋势也将极大地改变制造业中机器与机器、人与机器、人与人、预测与操作、管理与运营之间的关系,推动工业4.0时代的到来。 1.数字孪生的“接管”数字孪生(Digital Twin)是充分利用物理模型、传感器更新、运行历史等数据,集成多学科、多物理量、多尺度、多概率的仿真过程,在虚拟空间中完成
发表于 2018-07-09 22:52:23

边缘计算大热 获得安防青睐

物联网的发展让大量设备开始联网,在互联网边缘产生了海量数据,边缘计算以其精准高效的实时响应速度获得了青睐。据IDC发布的《中国制造业物联网市场预测2016-2020年》报告显示,2018年将有40%的数据需要在网络边缘侧进行分析、处理与存储。显然,云服务架构无法很好地满足这一要求,而边缘计算是在靠近数据源头的网络边缘侧就近提供边缘智能服务,能实现更快的网络服务响应,弥补了云计算响应不及时、功耗高的问题,满足了安防行业在实时业务、安全与隐私保护等方面的需求,因此被广泛应用于无人机、油气远程监控、汽车自动驾驶等领域。根据IDC的预测,到2020年,物联网会有500亿感知设备,50%的计算会在边缘设备上,云边融合是未来普遍的模式
发表于 2018-07-09 18:30:23

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2018 EEWORLD.com.cn, Inc. All rights reserved