钜芯发布基线全球最小的智能双目立体视觉系统

发布者:zhuanshi最新更新时间:2017-10-19 来源: 麦姆斯咨询关键字:立体视觉  激光雷达 手机看文章 扫描二维码
随时随地手机看文章

基线长度仅为8cm的智能双目立体视觉系统eagleye100

据麦姆斯咨询报道,物联网及双目视觉专家江苏钜芯集成电路技术股份有限公司,近日在2017年香港秋季电子展发布了一款智能双目立体视觉系统eagleye100及智能双目立体视觉芯片eagleye。该系统具有全球最小的基线长度(Baseline,双目的目距),仅为8cm,其实时高精度的探测距离达到100m,深度分辨率最高可达720P,高速深度计算的输出延时小于3ms,是一款小尺寸、远距离、高精度的实时智能双目立体视觉系统。目前的主要目标应用包括:ADAS(先进驾驶辅助系统)和自动驾驶、无人机、工业自动化、AR(增强现实)/VR(虚拟现实)、仓储机器人、扫地机器人、园艺机器人等各类智能机器人等。

钜芯智能双目立体视觉芯片eagleye

“钜芯的双目技术领先整个产业一代,我们专注于将FPGA(现场可编程门阵列)和外围电路集成为专用双目视觉芯片eagleye,大大降低了成本,提高了集成度和可靠性,”江苏钜芯集成电路技术股份有限公司董事长兼总经理黄保黔介绍道,“系统最大100m的高精度实时探测距离,已经比肩或超过国际市场上的主要领导厂商,国内友商的最大探测距离一般为50~80m。对于一辆以80km/h行驶的车辆来说,20m的探测距离优势,就能为司机和ADAS系统带来约1秒的反应时间,有效提高道路交通的安全性。”

钜芯智能双目立体视觉系统与市场主流厂商的参数对比

双目视觉将成为未来机器视觉技术的风向标

无论是汽车、无人机、机器人还是AR/VR等智能移动机械或设备,要实现自主运行和导航,首先要解决的便是感知周围的环境,尤其是3D深度信息,实现即时定位和地图构建(SLAM)。因此,SLAM是实现智能机械自主运行、壁障和路径规划的基础。目前主流的SLAM方案主要包括,激光雷达(LiDAR)和视觉类,而视觉类又可分为单目视觉和双目(多目)视觉方案。激光雷达的优点是测量距离远、精度高、速度快,但其最大的缺点是目前的成本太高昂,另外,其体积和重量较大,对物体的识别率较差。低成本的微型固态激光雷达目前还没有大规模量产。

视觉类SLAM主要包括单目和双目两种方案,两者的共同特点,是通过摄像头采集图像数据,然后利用图像数据得到距离信息。但是,单目方案的测距原理,是先通过图像与样本数据匹配进行目标识别,再通过目标在图像中的大小去估算目标距离。因此,单目方案需要建立并不断维护一个庞大的样本特征数据库,不断进行机器学习和训练,以保证首先对目标进行准确识别,对不规则物体或缺乏样本数据的物体,单目方案就无能为力了。

“相比于单目视觉,双目视觉系统模拟了人眼及众多生物的视觉处理方式,利用双摄像头从不同角度对同一目标成像,从而获取视差信息,利用三角测距原理,仅通过计算左右“两眼”获取的两幅图像对应点间的位置偏差,就可以实时还原视觉场景中每一点的真实三维几何信息,”黄总介绍道,“因此,双目视觉方案没有识别率的问题,也无需建立和维护庞大的样本库,分辨率和精度也更高。”

双目视觉有望在自动驾驶领域弯道超车

2016年以前,基本上所有的高端车型都配备了 Mobileye(今年3月被英特尔以153亿美元收购)的单目视觉系统,比如沃尔沃、奔驰、宝马等。但近几年,包括2016款奔驰S级和E级、2016款宝马7系、2017款宝马5系、斯巴鲁以及捷豹路虎的多款车型,都已经从单目改成了双目方案。此外,在搭载Mobileye单目ADAS系统的特斯拉Model S发生事故之后,特斯拉也选择放弃了与Mobileye的合作,转而采用了双目或多目ADAS方案。

同时,近年各国政府对于汽车主动安全功能的重视程度不断提升,这也为双目ADAS方案供应商带来了极大利好。

不同国家/地区的车用主动安全功能的启用时间

在欧美日相继将主动安全功能加入新车安全评价标准后,中国新车评价规程(C-NCAP)也宣布将在2018年把车道偏离预警、碰撞预警和AEB(自动紧急制动)等功能列为加分项,并在2020年将这些指标列为重要评测项。届时没有这些功能的新车C-NCAP得分将会较现在大幅下降。

钜芯双目视觉深度图与现场实景图对比

对象监测跟踪

钜芯智能双目视觉系统,能够实时监测并跟踪汽车、行人、自行车以及各种异形车辆,实时精确探测汽车与目标之间的距离,并计算可能的碰撞时间,实现车辆的AEB、ACC、LDW、TSR等先进的驾驶辅助功能。

对象监测跟踪参数

可行驶区域监测

可行驶区域检测是ADAS及自动驾驶领域中的下一代功能。目前全球所有该功能的演示都是简单的高速场景,都还无法做到复杂场景下准确的全范围可行驶区域检测。钜芯智能双目视觉系统在复杂场景下具备明显优势,能够结合场景理解和像素级深度,实时检测全类别的障碍物,输出车辆当前的可行驶区域,实现全范围AEB。

车道分隔物监测

可行驶区域监测

高精度地图生成

钜芯智能双目视觉系统能够自动检测并识别车道线、栅栏、路肩、交通标志的空间位置及尺寸,自动移除车辆、行人等道路动态对象,生成厘米级高精度矢量地图(车道宽度10cm内误差)。

钜芯智能双目视觉系统的道路识别技术

双目视觉逐渐成为无人机标配

一直以来,无人机的距离感知和智能壁障都是很大的难题。之前的无人机大多采用超声波雷达、红外探测等方式来实现障碍物探测和距离感知,但是这些方案往往功耗较大,而无人机对重量和续航又比较敏感,因此很难进行长距离的探测。而双目视觉系统的原理优势,令其在光线良好的情况下,具有比上述方案更广阔的距离探测能力,以及更直观的成像,能够提供更智能的飞行操作。因此,大疆、昊翔、零度、极飞、博瑞空间以及飞马等无人机主流厂商都在近期相继推出了基于双目视觉系统的产品。

钜芯智能双目视觉系统在无人机应用中,能够通过实时高速计算,提供基于深度视觉的自身位置和姿态计算,实现精准的悬停和定高飞行;还能够探测无人机周围的动态及静态障碍物,包括电线、树枝等细小的障碍物,提供实时的可飞行区域探测,实现无人机SLAM和自动壁障功能。

钜芯双目视觉系统无人机应用主要参数(可根据需求定制)


关键字:立体视觉  激光雷达 引用地址:钜芯发布基线全球最小的智能双目立体视觉系统

上一篇:高通正在开发下一代可穿戴芯片:努力降低智能手表的功耗
下一篇:2018 年将打响 AI 战争,7 条实战经验帮你战胜恐惧

推荐阅读最新更新时间:2024-03-16 11:26

【讨论】激光雷达VS纯视觉,谁是未来5年的自动驾驶主流?
大家好,这里是《远川讨论》栏目的第一期。 长期以来,在自动驾驶领域,到底是纯视觉技术主导未来,还是视觉+激光雷达混合技术才能走的更远,关于这个话题的讨论一直未曾停歇。 作为自动驾驶领域最具代表性的企业,特斯拉对纯视觉方案的偏爱不必多说,甚至就连马斯克也多次公开炮轰“车辆上的雷达方案是极其愚蠢的,任何使用激光雷达方案的人或者企业最后都将失败,他们大费周章的使用这些昂贵的传感器本身就是一个麻烦。” 而不久前的世界人工智能大会上,华为ADS智能驾驶产品线总裁兼首席架构师苏箐则公开指责“特斯拉这几年下来,它的事故率还是挺高的,而且是从杀第一个人到最近杀的人,它的事故类型非常像。”华为的量产激光雷达,也即将于今年的年末交货。
[汽车电子]
【讨论】<font color='red'>激光雷达</font>VS纯<font color='red'>视觉</font>,谁是未来5年的自动驾驶主流?
康奈尔大学研究人员鸟瞰识别物体 让立体摄像头成为自动驾驶汽车激光雷达的低成本替代品
(图片来源:康奈尔大学官网) 据外媒报道,目前,用于探测 自动驾驶 汽车行驶路径中三维物体的激光传感器体积庞大、外形丑陋、价格昂贵、能效低,但是精度高。此类激光探测和测距(激光雷达)传感器通常都安装在汽车车顶上,从而增加了风阻,对电动汽车来说是个缺点,而且会让一辆车的成本增加约1万美元(约合67181元人民币)。但尽管存在很多缺点,大多数专家认为激光雷达传感器是自动驾驶汽车安全地感知行人、汽车和道路上其他危险的唯一可行方法。 如今,康奈尔大学(Cornell)的研究人员发现了一种更简单的方法,只要使用挡风玻璃两侧的两个便宜摄像头,就可探测到物体,而且探测精度接近激光雷达,而成本只有其一小部分。研究人员发现,鸟瞰而不是从传
[汽车电子]
康奈尔大学研究人员鸟瞰识别物体 让<font color='red'>立体</font>摄像头成为自动驾驶汽车<font color='red'>激光雷达</font>的低成本替代品
用好激光雷达的三个问题:何时启用、事故责任归属、OTA统一性
目前,在中国市场量产交付的车型中,小鹏P5、蔚来ET7是搭载了激光雷达的车型。即将交付的车型里,有智己L7、理想L9、小鹏G9等等,高合、广汽埃安、极氪、极狐、飞凡、路特斯、集度等品牌都有计划推出搭载激光雷达的车型。 在车企搭载激光雷达的规划中,有两种路线:一种是全系标配、一种是选配(只有高配车型搭载,类似选配)。蔚来ET7属于全系标配,传闻蔚来今年换代的NT2.0平台所有车型全系标配,小鹏P5属于选配。 实际上,不管是选配还是标配激光雷达,只要上了激光雷达。都会面临着三大问题:1、何时开始启用激光雷达这个新的传感器硬件;2、搭载了激光雷达的车辆发生交通事故的责任归属;3、OTA升级统一性问题。 下面就深入聊一下上述三
[汽车电子]
用好<font color='red'>激光雷达</font>的三个问题:何时启用、事故责任归属、OTA统一性
利用雷达和单目视觉,如何设计一种车辆检测系统?
1. 现有评价体系难以保证车辆识别的实时性 对于自主车辆而言,识别障碍车辆是自主车辆环境感知系统中的关键技术。准确地检测前方车辆,对于自主车辆避障具有重要的意义。目前国内外学者已经研究出许多车辆识别的算法,如基于视觉信息以及基于激光雷达信息等方法。 由于视觉图像获取较易、处理方法多样,所以视觉技术是现阶段自主车辆研究中的主要获取信息手段。其中视觉技术主要分为单目视觉和双目视觉。单目视觉识别技术多采用基于车辆特征的方法,该方法主要利用车辆与背景有差异的特征,如纹理、边缘和底部阴影等。 但这种方法获取的信息量不足,缺乏深度信息,而且易受外部环境的干扰,诸如光照和阴影等因素。双目视觉识别技术虽然可以取得较好的效果,但其计算量较
[嵌入式]
利用雷达和单目<font color='red'>视觉</font>,如何设计一种车辆检测系统?
上海车展“黑科技”盘点,激光雷达、V2X等普及在望?
两年一届的上海车展已于4月19日正式开幕,早前通过轱辘哥的一波安利,相信大家已对首发新车、上市新车和概念车等各种车型有一定的了解。而在今天,轱辘哥给大家带来关于未来出行的各种新技术。这些新技术,不仅代表着厂商的技术实力和汽车行业的发展方向,而且它们很快就会出现在你的车中! V2X技术 说到更高级别自动驾驶,就不能不提V2X技术对这一领域的影响。所谓V2X 技术,它专为车与车(V2V)、车与行人(V2P)、车与道路基础设施(V2I)、车与网络(V2N)之间的连接而创,这基本上代表着车将能够与万物进行连接。有了V2X 技术,车辆可以在行驶过程中提前预警、提前规避很多可能的风险和隐患。 而此次在上海车展亮相的上汽 奥迪
[汽车电子]
上海车展“黑科技”盘点,<font color='red'>激光雷达</font>、V2X等普及在望?
美提出激光雷达片上声光调制方案 帮助自动驾驶汽车扫描快速移动的物体
由于激光雷达对物体的感知能力有限,自动驾驶汽车很难区别蹒跚学步的孩子和突然出现在视野中的棕色包。为了解决这一问题,自动驾驶汽车行业正在探索调频连续波(FMCW)激光雷达。 (图片来源:普渡大学) 据外媒报道,来自普渡大学OxideMEMS实验室和瑞士洛桑联邦理工学院(EPFL)光子学和量子测量实验室(Laboratory of Photonics and Quantum Measurements)的开发了一种方法,通过机械控制和进行片上声光调制,使FMCW激光雷达能以更高的分辨率检测附近快速移动的物体。 FMCW激光雷达通过自动驾驶汽车顶部的激光扫描来检测目标。单束激光分裂成其他波长的梳状结构(微梳状结构)来扫描某个
[汽车电子]
美提出<font color='red'>激光雷达</font>片上声光调制方案 帮助自动驾驶汽车扫描快速移动的物体
不用激光雷达还干掉毫米波雷达,特斯拉这是几个意思?
去年开始伴随着激光雷达的装车,一派是以激光雷达、毫米波雷达以及摄像头等多传感器路线融合的国产车企,再就是特立独行改由单纯靠摄像头来实现辅助驾驶/自动驾驶。 前段时间,特斯拉甚至从5月份开始将美国市场销售的Model 3和 Model Y ( 参数 | 询价 ) 前毫米波雷达给取消了,改由Tesla Vision(基于摄像头纯视觉方案)来实现Autopilot等驾驶辅助功能。 这不禁令人疑惑,雷达这玩意儿到底是不是多余的?马斯克也曾简单解释过纯视觉路线的原因是为了避免多传感器感知结果不一致。但这个答案显然无法令人信服,多数人还是质疑。 车载毫米波雷达技术已非常成熟,车载激光雷达也相对成熟,加上特斯拉自动驾驶也出过
[汽车电子]
不用<font color='red'>激光雷达</font>还干掉毫米波雷达,特斯拉这是几个意思?
LiDAR技术芯片又有新突破,LuminWave硅光OPA200线激光雷达问市
9月9日-11日,2020 CIOE中国光博会在深圳举办,本届展会上,激光雷达芯片和模组厂商洛微科技(LuminWave)展示了国内首款基于硅光OPA的200线纯固态成像级激光雷达(LiDAR)。 据了解,洛微科技早在今年1月的CES展上就推出了世界上尺寸最小的基于自研光芯片技术的MicroLiDAR传感器芯片,主要用于自动驾驶近距补盲和手势识别。此次洛微科技展示的激光雷达原型机是采用自研的硅光OPA芯片不含任何移动组件的纯固态方案,分辨率高达200线,远高于目前市场上16/32/64线的机械式扫描LiDAR的分辨率。在实现高线数分辨率的同时,洛微科技通过自主研发的硅光OPA芯片和光学方案,有效地控制了成像级LiDAR的
[嵌入式]
LiDAR技术芯片又有新突破,LuminWave硅光OPA200线<font color='red'>激光雷达</font>问市
小广播
添点儿料...
无论热点新闻、行业分析、技术干货……
最新安防电子文章
换一换 更多 相关热搜器件

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

词云: 1 2 3 4 5 6 7 8 9 10

北京市海淀区中关村大街18号B座15层1530室 电话:(010)82350740 邮编:100190

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved