用于ADAS和智能驾驶的感知融合

发布者:ping777最新更新时间:2022-02-16 来源: 小明师兄 关键字:ADAS  智能驾驶 手机看文章 扫描二维码
随时随地手机看文章

传感器融合是将来自多个毫米波雷达、激光雷达和摄像头的输入汇集起来,形成一个单一的模型或车辆周围环境的图像的能力。由此产生的模型更加准确,因为它平衡了不同传感器的优势。然后,车辆系统可以使用通过传感器融合提供的信息来使车辆具有更加智能的行动。每种传感器类型,都有固有的优势和劣势。毫米波雷达在准确确定距离和速度方面非常强大--即使是在具有挑战性的天气条件下--但不能识别街道标志或 "看到 "红绿灯的颜色。摄像机能很好地探测标志或对物体进行分类,如行人、骑自行车者、车辆或动物等。然而,它们很容易被灰尘、太阳、雨、雪或黑暗所蒙蔽。激光雷达可以准确地探测物体,但它们没有照相机或毫米波雷达的探测范围和经济性,同时激光雷达也会受物体的特性影响。

 

 

传感器融合将来自这些传感器类型的数据汇集在一起,使用软件算法提供最全面的、因而也是最准确的环境模型。它还可以通过一个被称为内部和外部传感器融合的过程,将来自车厢内驾驶状态数据结合起来,将舱内和舱外感知融合一起用于智能驾驶的功能运行。

 

当我们利用车内和车外的传感器融合,将来自传感器的关于车外情况的信息与我们拥有的关于司机在车内状态的信息结合起来时,车辆将更加智能。如果我们知道司机在打瞌睡或分心,我们可以在需要干预之前主动警告他们有危险的情况发生。比方说,一辆汽车突然地冲到你的车前。只要你积极观察交通情况,并且足够早地看到另一辆车并入你的车道,你的车辆可能就不必干预以避免碰撞。但是,如果你分心了--你可能不会看到发生了什么,直到它太晚了。

 

通过内部感应,我们可以看到你的眼睛在低头看收音机,而不是在看路,而外部雷达则看到汽车切入你的车道。我们可以立即触发警告,告诉你车外发生了需要你注意的事情,甚至用视觉和听觉提示你事情发生的地点。

 

通过融合车内和车外的传感器,现在可以实现更积极主动的安全解决方案。考虑这样一个场景:你停在一个十字路口等待右转。你看向你的左边,观察交通中的空隙,这样你就可以快速地进行右转。与此同时,一个行人开始从你的右前方穿过。

 

车辆也可以使用传感器融合来融合来自同一类型的多个传感器的信息--例如,毫米波雷达。这可以通过利用部分重叠的视场来提高感知能力。由于多个毫米波雷达观察车辆周围的环境,不止一个传感器会同时探测到物体。通过全球360°感知软件进行解读,来自这些多个传感器的探测结果可以被重叠或融合,提高对车辆周围物体的探测概率和可靠性,并产生一个更准确和可靠的环境信息。

 

当然,车辆上的传感器越多,融合的难度就越大,但也有更多的机会来提高性能。为了利用这些优势,智能驾驶零部件巨头Aptiv使用了一种叫做低级传感器融合的技术。在过去,分析传感器数据以确定和跟踪物体的处理能力是与摄像机或雷达一起打包的。

 

通过Aptiv的卫星感知架构方法,处理能力被集中到一个更强大的主动安全域控制器中,允许从每个传感器收集低级别的传感器数据并在域控制器中进行融合。将处理能力转移到域控制器,使传感器占用的体积和质量更小,最多可减少30%。作为比较,照相机的占地面积从一副扑克牌的大小减少到一包口香糖的大小。通过使传感器尽可能地小,OEM在车辆外观设计和总布置方面有更多的选择。

 

另一个好处是增加数据共享。在传统系统中,智能传感器独立地处理环境输入,这意味着在使用信息时做出的任何决定都只与该单个传感器所能看到的一样好。然而,有了卫星感知架构,来自传感器的所有数据被集中共享,域控制器中的主动安全应用有更多的机会来利用它。

 

Aptiv甚至可以应用人工智能(AI)工具来提取有用的信息,对于无用的数据会被丢弃。高效的人工智能算法和工具可以从这些有用的信息中不断的学习与迭代,这有助于解决智能驾驶技术中面临的挑战性场景案例。低层传感器融合的第三个好处是减少延迟。域控制器不必等待传感器处理数据,然后再对其采取行动。这可以帮助加快那些甚至是几分之一秒的情况下的性能。更多的数据带来了更好的决策。通过采用允许大量传感器的车辆架构,然后通过传感器融合来合成数据,车辆可以变得更智能、更快速。

 

 



关键字:ADAS  智能驾驶 引用地址:用于ADAS和智能驾驶的感知融合

上一篇:Ambarella最新的AV域控制器
下一篇:乘用车DHT专用控制器的阳光解决方案

推荐阅读最新更新时间:2024-11-12 13:06

收购杰发科技推出ADAS芯片,四维图新总资产增幅达167.68%
集微网消息,北京四维图新科技股份有限公司(以下简称“四维图新”)自今年年初完成收购联发科子公司杰发科技后,不再只是地图软件背后的数据供应商,而是实现汽车电子芯片资源的整合,成为了A股中唯一的“高精度地图+车规级智能芯片”的上市公司。 8月28日,四维图新发布收购后的首个半年报,报告显示,上半年实现营收83,382.12万元,同比增长16.80%;实现归属于上市公司股东净利润12,133.68万元,同比增长54.85%;实现扣非净利润11,415.50万元,同比增长61.56%;总资产达到1,103,454.14万元,与上年同期相比增长幅度达到了167.68%。 收购杰发科技给四维图新带来哪些改变? 杰发科技自年初完成收购后,其业务
[手机便携]
ADAS关键技术详解
从上世纪50年代早期的电动车窗到当今最新的 汽车驾驶系统,豪华汽车所具有的高端特性随着时间的推移最终都应用到中端和经济型汽车上,成为必备的电子和电气系统。 ADAS 技术能够不仅仅应用在豪华汽车上,部分原因是出于竞争的考虑,但并不是唯一因素。政府规章制度也是一个重要因素。例如,在美国,国家高速运输安全管理局正在制定强制安装后视摄像机的政策,据此,预计 2018 年车载摄像机将达到 6 千万台。 安装了 ADAS 的车辆在保险上有折扣也是推动 ADAS 广泛应用的另一因素。这类优惠有一定的统计意义。当驾驶员驾驶车辆开始偏离车道时,系统会发出告警,在夜间,系统也能够增强驾驶员的能见度,从而避免了事故的发生,挽救了生命。 ADAS
[嵌入式]
汽车CIS专题 | 【ADAS (四)】你知道吗,汽车“眼”中的红不是红
揭秘汽车如何准确感知马路上的“电子交警”-LED信号。 引言: 消费者、政策/法规、市场三合力,不断推动ADAS渗透率提升。 2022年3月国内新车L2级配套量接近41.6万,渗透率近30%。ADAS成标配,CIS如何升级? 豪威集团汽车CIS系列专题ADAS篇将分5期,每期一个硬核知识点,助您详尽了解ADAS领域应用、技术趋势与车规产品。 上期科普了为什么ADAS前视摄像头尤其要达到140dB HDR。本期将聚焦汽车如何准确感知马路上的“电子交警”-LED信号。 随着LED在街道照明和前照灯中的使用越来越多,被称为“LED闪烁”的现象正在成为机器视觉系统需要解决的关键问题,它导致LED交通信号不能被
[汽车电子]
汽车CIS专题 | 【<font color='red'>ADAS</font> (四)】你知道吗,汽车“眼”中的红不是红
奇瑞汽车高端品牌星途携手Mobileye与伯特利 ADAS,在中国推出首个云增强驾驶辅助系统
奇瑞汽车高端品牌星途携手Mobileye与伯特利 ADAS,在中国推出首个云增强驾驶辅助系统 2024年1月 15日,安徽芜湖—— 奇瑞汽车高端品牌星途汽车今天宣布,将成为中国首家推出Mobileye云增强驾驶辅助系统的汽车制造商。星途汽车携手Mobileye(与伯特利ADAS,在星途揽月车型上首次量产这一技术。 搭载云增强驾驶辅助系统的星途揽月车型可以通过持续更新,使车辆应对各种驾驶场景。这一系统在具有挑战性的驾驶场景下表现尤为出色,例如能见度差或交通复杂的情况,充分彰显了奇瑞/星途品牌对安全和技术创新的承诺。 奇瑞汽车总经理助理、自动驾驶技术负责人高家兵博士 表示:“星途揽月车型搭载Mobileye云增强驾
[汽车电子]
奇瑞汽车高端品牌星途携手Mobileye与伯特利 <font color='red'>ADAS</font>,在中国推出首个云增强驾驶辅助系统
飞思卡尔与东软Green Hills合作共推面向ADAS的开发生态系统
        2014年5月20日,中国深圳讯-(飞思卡尔技术论坛)-飞思卡尔半导体(纽约证券交易所:FSL)与东软集团股份有限公司(简称“东软”,上海证券交易所:600718)、Green Hills Software携手合作,共同推出全面的高级驾驶员辅助系统(ADAS)生态系统,简化并加快新一代汽车视觉应用的开发。 由于ADAS视觉系统囊括了大部分汽车制动和转向系统,因此开发人员和系统设计人员急需一种交钥匙解决方案以满足严苛的汽车安全协议要求并符合ISO 26262功能安全标准。这款专门为此目的而打造的ADAS生态系统,旨在通过简化开发和移植复杂算法到目标硬件这一耗时流程,从而应对这些挑战。   这款协
[手机便携]
雷达升级到77GHz之后,别克的ADAS技术有什么变化?
在一个多世纪的发展历程中, 安全 成为了汽车越来越受到人们重视的一环。BIP(Buick Intelligent Performance system)智慧行车科技系统则是别克品牌在智能化新科技方面为消费者提供的解决方案,包括智慧驾控、智慧互联和智慧安全三大体系。而此次位于广德的通用试车场首次对外开放允许参观,车云菌有幸作为第一批媒体,参加了这次通用BIP智慧安全的体验。 2006-2009陆续建成的泛亚车辆安全试验室中,广德试车场场地中覆盖了高速安全碰撞、中低速标定、行人保护等领域完整的试验矩阵,包含全路况环境下的耐久性试验、冬季试验、夏季试验 和腐蚀试验等。 多年前,当ESP/ESC行车稳定系统、TCS牵引
[汽车电子]
雷达升级到77GHz之后,别克的<font color='red'>ADAS</font>技术有什么变化?
Mobileye亮相2024北京车展:预计未来ADAS芯片出货量将达3亿颗
2024年北京国际车展比往年都要热,Mobileye作为全球领先的自动驾驶技术公司也亮相了本届车展。这一次,不同的是,Mobileye带来了最新发布的EyeQ6L芯片,同时首次向公众开放城区NOP(Navigate on Pilot领航辅助驾驶系统)驾驶体验活动。 替代 现有主力产品 就在车展前夕,Mobileye正式宣布已向客户交付其最新的EyeQ™6 Lite (EyeQ6L) 系统集成芯片的首批量产级硬件和软件。 EyeQ6系列有两款芯片,一是用于高级ADAS/AV的集中式芯片EyeQ®6H(或High),主要支持L2+及以上系统。另一个则是定位高效率、轻量级的EyeQ6L,旨在支持L1-L2级驾驶辅助系
[汽车电子]
Mobileye亮相2024北京车展:预计未来<font color='red'>ADAS</font>芯片出货量将达3亿颗
哪吒公布智能驾驶路线图 2024年托管驾驶 2025年自动驾驶
日前, 哪吒汽车 公布了其NETA PILOT智能驾驶系统未来的发展规划节点以及相应搭载该系统的车型规划。 从规划图中可以看出NETA PILOT从2021到2025年的完整规划: 2021-2022年,NETA PILOT2.0,达到L1-L2级辅助驾驶,实现横纵向控制; 2022-2023年,NETA PILOT 3.0/4.0,达到L2-L2.9级人车共驾,实现高速、城区领航; 2024年,NETA PILOT 5.0,达到L2.9-L4级托管驾驶,实现特定场景托管驾驶; 2025年,NETA PILOT 6.0,达到L4+级 自动驾驶 ,实现AB端领航自动驾驶。 规划中今年推出的
[汽车电子]
哪吒公布<font color='red'>智能驾驶</font>路线图 2024年托管驾驶 2025年自动驾驶

推荐帖子

upsd3354几个问题
我用KEIL4和UNLINK2给UPSD3354DV下载程序时,总是提示***Error:Verifyfailed.8202,按照要求提示实用的upsd3354几个问题实在不行,找代理商吧信息太少,原因不好找以上问题已经自己找到,我们做的少,所以代理商也不好找ULINK2能给UPSD3354下载程序吗?我是用
liukaiyue stm32/stm8
TI C2000 TMS320F28335定时器配置简介
写在最前,不喜请略过。本博文的主要内容已在QQ空间、人人网、网易博客、百度空间等平台发表过,作者为Mr_D_prince(斌斌-龙臻),也就是本人,前两者均为我在非技术论坛的昵称。在技术论坛我更喜欢newofcortexm3这个昵称,原因无他,我就是个技术新人。之所以文章类型为什么是整理,是因为博文的主要内容均来自TI相关的技术手册,我只是做了下解读或者整理。TMS320F28335的CPUTime有三个,分别为Timer0,Timer1,Timer2,其中Timer2是为操作系统DSP
fish001 微控制器 MCU
研发?抄板?
打算做个产品,找了几个研发人员交流了一下,研发成本有点高,周期比较长,现在想到了抄板和程序破解,然后再做些修改,请问这样做除了不道德,还有什么风险或弊端吗研发?抄板?出了问题就废了,没法改进。说一下大致是什么东西咯,这样做不如ODM好,或外包给方案公司 电力系统中的仪表。包给方案公司,其实和自己研发差不多了 抄板、程序破解后,PCB和软件是不是可以修改呢你这是盲抄加暴力破解,有点问题整个方案就废了。不如先了解下他的硬件,然后根据功能自己写程序,这样应该叫模仿吧,不但可以知其然
Telefon 单片机
【LSM6DSOX的MLC机器学习理解】--机器学习简介
LSM6DSOX机器学习模块是个挺复杂的部分,通过几天的研究,终于弄明白了基本的用法。这篇帖子将简单介绍下LSM6DSOX机器学习模块的特点和基本操作流程。基本特点LSM6DSOX的机器学习模块本质上就是通过决策树来实现的,决策树是由一系列可以配置的节点组成的数学工具,采用二叉树结构决策树。每个节点都由一个if-then-else判断条件构成,通过对输入数据和阈值进行评估来获得最后的输出结果。输入数据
justd0 ST MEMS传感器创意设计大赛专区
关于用deviceiocontrol调用驱动无法传到底层控制~急盼
帮忙看下我的代码吧,编译都没错,加载都可以,但是当我调用IOCTL的时候,串口打印的信息只打出了一部分#includestdafx.h#includepkfuncs.h#includes2440.h#includecommctrl.h#includenkintr.h#includewindev.h#includewinbase.h#includewindows.h#includeIOControl.h#defineGPF6_out(1
ltfss 嵌入式系统
兆易创新GD32VF103资料
这些资料是在隔壁论坛看到了,论坛网友提供了资料下载链接,就是下载太慢了,只有几K的速度,耗费了不少的时间。下面是资料的一些截图,附件是相关的资料,喜欢的朋友可以看看,在此感谢FireBrain网友!如果论坛能组织个试用活动就好了附件:兆易创新GD32VF103资料刚才不知道怎么操作的,看不到图也看不到附件。重新编辑了一下还有一个eclipse_toolchain.rar文件,接近137M有点大,还在下载中,没有上传。片上资源偏少我们
lising 国产芯片交流
小广播
最新汽车电子文章
换一换 更多 相关热搜器件
更多往期活动

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved