钜芯发布基线全球最小的智能双目立体视觉系统

2017-10-19 19:46:13编辑:鲁迪 关键字:立体视觉  激光雷达

基线长度仅为8cm的智能双目立体视觉系统eagleye100

据麦姆斯咨询报道,物联网及双目视觉专家江苏钜芯集成电路技术股份有限公司,近日在2017年香港秋季电子展发布了一款智能双目立体视觉系统eagleye100及智能双目立体视觉芯片eagleye。该系统具有全球最小的基线长度(Baseline,双目的目距),仅为8cm,其实时高精度的探测距离达到100m,深度分辨率最高可达720P,高速深度计算的输出延时小于3ms,是一款小尺寸、远距离、高精度的实时智能双目立体视觉系统。目前的主要目标应用包括:ADAS(先进驾驶辅助系统)和自动驾驶、无人机、工业自动化、AR(增强现实)/VR(虚拟现实)、仓储机器人、扫地机器人、园艺机器人等各类智能机器人等。

钜芯智能双目立体视觉芯片eagleye

“钜芯的双目技术领先整个产业一代,我们专注于将FPGA(现场可编程门阵列)和外围电路集成为专用双目视觉芯片eagleye,大大降低了成本,提高了集成度和可靠性,”江苏钜芯集成电路技术股份有限公司董事长兼总经理黄保黔介绍道,“系统最大100m的高精度实时探测距离,已经比肩或超过国际市场上的主要领导厂商,国内友商的最大探测距离一般为50~80m。对于一辆以80km/h行驶的车辆来说,20m的探测距离优势,就能为司机和ADAS系统带来约1秒的反应时间,有效提高道路交通的安全性。”

钜芯智能双目立体视觉系统与市场主流厂商的参数对比

双目视觉将成为未来机器视觉技术的风向标

无论是汽车、无人机、机器人还是AR/VR等智能移动机械或设备,要实现自主运行和导航,首先要解决的便是感知周围的环境,尤其是3D深度信息,实现即时定位和地图构建(SLAM)。因此,SLAM是实现智能机械自主运行、壁障和路径规划的基础。目前主流的SLAM方案主要包括,激光雷达(LiDAR)和视觉类,而视觉类又可分为单目视觉和双目(多目)视觉方案。激光雷达的优点是测量距离远、精度高、速度快,但其最大的缺点是目前的成本太高昂,另外,其体积和重量较大,对物体的识别率较差。低成本的微型固态激光雷达目前还没有大规模量产。

视觉类SLAM主要包括单目和双目两种方案,两者的共同特点,是通过摄像头采集图像数据,然后利用图像数据得到距离信息。但是,单目方案的测距原理,是先通过图像与样本数据匹配进行目标识别,再通过目标在图像中的大小去估算目标距离。因此,单目方案需要建立并不断维护一个庞大的样本特征数据库,不断进行机器学习和训练,以保证首先对目标进行准确识别,对不规则物体或缺乏样本数据的物体,单目方案就无能为力了。

“相比于单目视觉,双目视觉系统模拟了人眼及众多生物的视觉处理方式,利用双摄像头从不同角度对同一目标成像,从而获取视差信息,利用三角测距原理,仅通过计算左右“两眼”获取的两幅图像对应点间的位置偏差,就可以实时还原视觉场景中每一点的真实三维几何信息,”黄总介绍道,“因此,双目视觉方案没有识别率的问题,也无需建立和维护庞大的样本库,分辨率和精度也更高。”

双目视觉有望在自动驾驶领域弯道超车

2016年以前,基本上所有的高端车型都配备了 Mobileye(今年3月被英特尔以153亿美元收购)的单目视觉系统,比如沃尔沃、奔驰、宝马等。但近几年,包括2016款奔驰S级和E级、2016款宝马7系、2017款宝马5系、斯巴鲁以及捷豹路虎的多款车型,都已经从单目改成了双目方案。此外,在搭载Mobileye单目ADAS系统的特斯拉Model S发生事故之后,特斯拉也选择放弃了与Mobileye的合作,转而采用了双目或多目ADAS方案。

同时,近年各国政府对于汽车主动安全功能的重视程度不断提升,这也为双目ADAS方案供应商带来了极大利好。

不同国家/地区的车用主动安全功能的启用时间

在欧美日相继将主动安全功能加入新车安全评价标准后,中国新车评价规程(C-NCAP)也宣布将在2018年把车道偏离预警、碰撞预警和AEB(自动紧急制动)等功能列为加分项,并在2020年将这些指标列为重要评测项。届时没有这些功能的新车C-NCAP得分将会较现在大幅下降。

钜芯双目视觉深度图与现场实景图对比

对象监测跟踪

钜芯智能双目视觉系统,能够实时监测并跟踪汽车、行人、自行车以及各种异形车辆,实时精确探测汽车与目标之间的距离,并计算可能的碰撞时间,实现车辆的AEB、ACC、LDW、TSR等先进的驾驶辅助功能。

对象监测跟踪参数

可行驶区域监测

可行驶区域检测是ADAS及自动驾驶领域中的下一代功能。目前全球所有该功能的演示都是简单的高速场景,都还无法做到复杂场景下准确的全范围可行驶区域检测。钜芯智能双目视觉系统在复杂场景下具备明显优势,能够结合场景理解和像素级深度,实时检测全类别的障碍物,输出车辆当前的可行驶区域,实现全范围AEB。

车道分隔物监测

可行驶区域监测

高精度地图生成

钜芯智能双目视觉系统能够自动检测并识别车道线、栅栏、路肩、交通标志的空间位置及尺寸,自动移除车辆、行人等道路动态对象,生成厘米级高精度矢量地图(车道宽度10cm内误差)。

钜芯智能双目视觉系统的道路识别技术

双目视觉逐渐成为无人机标配

一直以来,无人机的距离感知和智能壁障都是很大的难题。之前的无人机大多采用超声波雷达、红外探测等方式来实现障碍物探测和距离感知,但是这些方案往往功耗较大,而无人机对重量和续航又比较敏感,因此很难进行长距离的探测。而双目视觉系统的原理优势,令其在光线良好的情况下,具有比上述方案更广阔的距离探测能力,以及更直观的成像,能够提供更智能的飞行操作。因此,大疆、昊翔、零度、极飞、博瑞空间以及飞马等无人机主流厂商都在近期相继推出了基于双目视觉系统的产品。

钜芯智能双目视觉系统在无人机应用中,能够通过实时高速计算,提供基于深度视觉的自身位置和姿态计算,实现精准的悬停和定高飞行;还能够探测无人机周围的动态及静态障碍物,包括电线、树枝等细小的障碍物,提供实时的可飞行区域探测,实现无人机SLAM和自动壁障功能。

钜芯双目视觉系统无人机应用主要参数(可根据需求定制)


关键字:立体视觉  激光雷达

来源: 麦姆斯咨询 引用地址:http://www.eeworld.com.cn/afdz/article_2017101911124.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:高通正在开发下一代可穿戴芯片:努力降低智能手表的功耗
下一篇:2018 年将打响 AI 战争,7 条实战经验帮你战胜恐惧

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

立体视觉或比雷达更适合自动驾驶

雷达技术一直在变得更好;如Magney所言,它抵抗天气的能力比摄像头更好。在另一方面,雷达的最大问题仍然是“误报”。一家成立由20名员工组成的日本新创公司ITD Lab正在开发一种“智能立体摄像头”(Intelligent Stereo Camera,ISC)技术,锁定包括先进驾驶辅助系统(ADAS)、自动驾驶车辆、无人机、建筑用工具机、工业用机器人等应用。ITD Lab的秘密武器是首席技术官実吉敬二(Keiji Saneyoshi),他是日本车厂斯巴鲁(Subaru)智能驾驶辅助系统EyeSight之父,是该车厂原创立体视觉系统“Stereo Range Imager”幕后的首席工程师;実吉任职于Subaru时率领的团队,开发
发表于 2018-05-24 20:14:40
立体视觉或比雷达更适合自动驾驶

Ambarella为自动驾驶汽车赋予立体视觉

自动驾驶产业不乏想要超越Mobileye计算机视觉SoC的视觉芯片供应商,安霸(Ambarella)就是其中之一。该公司正致力于缩短与Mobileye的距离,特别是因为Mobileye不仅是业界先驱且仍持续主导基于视觉的先进驾驶辅助(ADAS)和高度自动驾驶汽车市场。Ambarella日前推出了一款名为CV2的新型相机SoC,专用于提供深度神经网络(DNN)和立体视觉处理,瞄准ADAS和自动驾驶汽车市场。Ambarella宣称拥有两项与竞争对手不同的优势,其一是VisLab开发的新型计算机视觉架构——Ambarella于2015年收购了这家欧洲计算机视觉与智能汽车控制系统开发商。另一项则是Ambarella自家设计且经现场验证
发表于 2018-05-13 20:25:38
Ambarella为自动驾驶汽车赋予立体视觉

3D双目立体视觉在机器人视觉的应用

随着自动化程度越来越高,机器视觉扮演着越来越重要的角色,传统的2D定位无法解决产品的空间坐标信息,而3D双目立体视觉可提供较高精度的定位。在汽车行业,汽车后底板的抓取搬运主要交给工业机器人完成,这面临一大难题:每一块后底板的平面坐标XYR和空间坐标ZWP都相差较大,而机器人夹具的两个尖削必须精确的插入后底板两孔位,才能进行搬运。慧眼自动化科技(广州)有限公司具有专业的机器视觉系统研发技术,为此开发了一套3D双目视觉软件系统,该系统搭载两个工业相机,精确的计算出后底板的六个空间坐标XYZWPR,并将坐标发送给机器人,成功为客户解决了这一难题。2、3D双目立体视觉系统安装及原理2.1安装方式:工业相机及光源安装于机器人法兰面两端
发表于 2018-02-04 16:24:57

赛普拉斯技术助力Denso(电装) 最新的汽车立体视觉传感器

赛普拉斯半导体公司(纳斯达克股票代码:CY)今日宣布,全球汽车零部件及系统供应商DENSO (电装)公司采用赛普拉斯汽车用 6 通道电源管理集成电路(PMIC) 和 FL-S 串行 NOR 闪存解决方案,为高级驾驶辅助系统 (ADAS) 铸就最新的立体视觉传感器。DENSO立体视觉传感器使用图像处理技术来检测不同形状的障碍物和车道线,以及道路上的空余空间。这样便可实现自动紧急制动和自动转向控制,避免撞上障碍物。赛普拉斯高度集成的 6 通道汽车 PMIC 可管理整个传感器的电源,而 FL-S NOR 闪存可让高性能系统快速执行程序。每个器件外形都很小巧,因此该解决方案非常适合这种紧凑型设计。 赛普拉斯汽车业务部副总裁
发表于 2017-10-31 09:20:10

赛普拉斯助力Denso最新汽车立体视觉传感器提高车辆安全性

电子网消息,加利福尼亚州圣何塞,2017 年 10 月 26 日——赛普拉斯半导体公司(纳斯达克股票代码:CY)今日宣布,全球汽车零部件及系统供应商DENSO (电装)公司采用赛普拉斯汽车用 6 通道电源管理集成电路(PMIC) 和 FL-S 串行 NOR 闪存解决方案,为高级驾驶辅助系统 (ADAS) 铸就最新的立体视觉传感器。DENSO立体视觉传感器使用图像处理技术来检测不同形状的障碍物和车道线,以及道路上的空余空间。这样便可实现自动紧急制动和自动转向控制,避免撞上障碍物。赛普拉斯高度集成的 6 通道汽车 PMIC 可管理整个传感器的电源,而 FL-S NOR 闪存可让高性能系统快速执行程序。每个器件外形都很
发表于 2017-10-30 20:10:54

赛普拉斯技术助力Denso(电装) 最新的汽车立体视觉传

赛普拉斯半导体公司(纳斯达克股票代码:CY)日前宣布,全球汽车零部件及系统供应商DENSO (电装)公司采用赛普拉斯汽车用 6 通道电源管理集成电路(PMIC) 和 FL-S 串行 NOR 闪存解决方案,为高级驾驶辅助系统 (ADAS) 铸就最新的立体视觉传感器。DENSO立体视觉传感器使用图像处理技术来检测不同形状的障碍物和车道线,以及道路上的空余空间。这样便可实现自动紧急制动和自动转向控制,避免撞上障碍物。赛普拉斯高度集成的 6 通道汽车 PMIC 可管理整个传感器的电源,而 FL-S NOR 闪存可让高性能系统快速执行程序。每个器件外形都很小巧,因此该解决方案非常适合这种紧凑型设计。赛普拉斯汽车业务部副总裁 Kiyoe
发表于 2017-10-30 10:06:36
赛普拉斯技术助力Denso(电装) 最新的汽车立体视觉传

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2018 EEWORLD.com.cn, Inc. All rights reserved