用于ADAS和智能驾驶的感知融合

发布者:ping777最新更新时间:2022-02-16 来源: 小明师兄 关键字:ADAS  智能驾驶 手机看文章 扫描二维码
随时随地手机看文章

传感器融合是将来自多个毫米波雷达、激光雷达和摄像头的输入汇集起来,形成一个单一的模型或车辆周围环境的图像的能力。由此产生的模型更加准确,因为它平衡了不同传感器的优势。然后,车辆系统可以使用通过传感器融合提供的信息来使车辆具有更加智能的行动。每种传感器类型,都有固有的优势和劣势。毫米波雷达在准确确定距离和速度方面非常强大--即使是在具有挑战性的天气条件下--但不能识别街道标志或 "看到 "红绿灯的颜色。摄像机能很好地探测标志或对物体进行分类,如行人、骑自行车者、车辆或动物等。然而,它们很容易被灰尘、太阳、雨、雪或黑暗所蒙蔽。激光雷达可以准确地探测物体,但它们没有照相机或毫米波雷达的探测范围和经济性,同时激光雷达也会受物体的特性影响。

 

 

传感器融合将来自这些传感器类型的数据汇集在一起,使用软件算法提供最全面的、因而也是最准确的环境模型。它还可以通过一个被称为内部和外部传感器融合的过程,将来自车厢内驾驶状态数据结合起来,将舱内和舱外感知融合一起用于智能驾驶的功能运行。

 

当我们利用车内和车外的传感器融合,将来自传感器的关于车外情况的信息与我们拥有的关于司机在车内状态的信息结合起来时,车辆将更加智能。如果我们知道司机在打瞌睡或分心,我们可以在需要干预之前主动警告他们有危险的情况发生。比方说,一辆汽车突然地冲到你的车前。只要你积极观察交通情况,并且足够早地看到另一辆车并入你的车道,你的车辆可能就不必干预以避免碰撞。但是,如果你分心了--你可能不会看到发生了什么,直到它太晚了。

 

通过内部感应,我们可以看到你的眼睛在低头看收音机,而不是在看路,而外部雷达则看到汽车切入你的车道。我们可以立即触发警告,告诉你车外发生了需要你注意的事情,甚至用视觉和听觉提示你事情发生的地点。

 

通过融合车内和车外的传感器,现在可以实现更积极主动的安全解决方案。考虑这样一个场景:你停在一个十字路口等待右转。你看向你的左边,观察交通中的空隙,这样你就可以快速地进行右转。与此同时,一个行人开始从你的右前方穿过。

 

车辆也可以使用传感器融合来融合来自同一类型的多个传感器的信息--例如,毫米波雷达。这可以通过利用部分重叠的视场来提高感知能力。由于多个毫米波雷达观察车辆周围的环境,不止一个传感器会同时探测到物体。通过全球360°感知软件进行解读,来自这些多个传感器的探测结果可以被重叠或融合,提高对车辆周围物体的探测概率和可靠性,并产生一个更准确和可靠的环境信息。

 

当然,车辆上的传感器越多,融合的难度就越大,但也有更多的机会来提高性能。为了利用这些优势,智能驾驶零部件巨头Aptiv使用了一种叫做低级传感器融合的技术。在过去,分析传感器数据以确定和跟踪物体的处理能力是与摄像机或雷达一起打包的。

 

通过Aptiv的卫星感知架构方法,处理能力被集中到一个更强大的主动安全域控制器中,允许从每个传感器收集低级别的传感器数据并在域控制器中进行融合。将处理能力转移到域控制器,使传感器占用的体积和质量更小,最多可减少30%。作为比较,照相机的占地面积从一副扑克牌的大小减少到一包口香糖的大小。通过使传感器尽可能地小,OEM在车辆外观设计和总布置方面有更多的选择。

 

另一个好处是增加数据共享。在传统系统中,智能传感器独立地处理环境输入,这意味着在使用信息时做出的任何决定都只与该单个传感器所能看到的一样好。然而,有了卫星感知架构,来自传感器的所有数据被集中共享,域控制器中的主动安全应用有更多的机会来利用它。

 

Aptiv甚至可以应用人工智能(AI)工具来提取有用的信息,对于无用的数据会被丢弃。高效的人工智能算法和工具可以从这些有用的信息中不断的学习与迭代,这有助于解决智能驾驶技术中面临的挑战性场景案例。低层传感器融合的第三个好处是减少延迟。域控制器不必等待传感器处理数据,然后再对其采取行动。这可以帮助加快那些甚至是几分之一秒的情况下的性能。更多的数据带来了更好的决策。通过采用允许大量传感器的车辆架构,然后通过传感器融合来合成数据,车辆可以变得更智能、更快速。

 

 



关键字:ADAS  智能驾驶 引用地址:用于ADAS和智能驾驶的感知融合

上一篇:Ambarella最新的AV域控制器
下一篇:乘用车DHT专用控制器的阳光解决方案

推荐阅读最新更新时间:2024-11-24 13:39

汽车电动化遇上自动驾驶为核心的智能化,造车难度加大
目前国内这一波车新势力,大多以电动化、智能化作为核心卖点,并且认为电动化之后,造车的难度下降了,这是造车新势力的逻辑之一。在车智君看来,当汽车电动化遇上自动驾驶为核心的智能化,造车的难度是加大。 最近,造车新势力的全球标杆,或者说是中国造车新势力的老师,特斯拉将其Autopilot的描述进行了修改,从原来是“全自动驾驶”到现在的“驾驶的未来”。背后的原因,特斯拉并没有进行官方的解释。 无独有偶,在这一周,国内造车新势力的蔚来汽车和小鹏汽车,都先后更新了旗下的自动驾驶情况,当然了,并不是L4级别的全自动驾驶,而是L2、L3级别的自动驾驶,实际上就是辅助驾驶。 回到最先的观点,为什么说当电动化遇到以自动驾驶为核心的智
[嵌入式]
汽车电动化遇上自动<font color='red'>驾驶</font>为核心的<font color='red'>智能</font>化,造车难度加大
自动驾驶汽车之争:单车智能VS智能网联
高级辅助驾驶系统的出现,让自动驾驶离我们越来越近。随着自动驾驶技术的成熟和商业化加速,汽车也不仅仅是一个代步工具,逐步向着多元化的智能娱乐硬件角色转变,消费者在购买车辆的过程中,安全性不仅仅成为唯一指标,舒适性、娱乐性也成购买车辆时的考虑因素,未来,全自动驾驶的出现将促进汽车消费市场的另一场变革,自动驾驶汽车将改变人们的出行习惯。 现阶段,自动驾驶技术尚未成熟,自动驾驶的发展仍有很多可能性,其中单车智能和智能网联是自动驾驶技术发展的两大技术路线。 单车智能主要依靠车辆搭载的毫米波雷达、激光雷达、车载视觉摄像机等传感器、线控系统、计算单元硬件进行环境感知、决策、控制和执行,让车辆实现和人一样的独立思考与决策,从而将车辆驾驶到
[嵌入式]
汽车安全需求剧增 全球厂商戮力开发影像式ADAS
    为打造新世代智能汽车,全球车厂已竞相投入开发ADAS与声控功能,带动大量汽车电子需求,包括高画质影像传感器、多核心MCU/DSP、雷达和车内网路通讯芯片,以及语音控制平台,均已成为零组件供应商的发展焦点。   2012年德国汉诺威、美国底特律、台北及北京车展均已风光落幕,从中可发现品牌车厂不再一味追求引擎马力或内装舒适度,而是以优化驾驶体验为前提,全力投入发展新世代智能汽车(Smart Car),并提出各种创新设计概念争奇斗艳。   其中,尤以主动式先进驾驶辅助系统(ADAS)、车载资通讯(Telematics)平台设计最炙手可热,已成全球车厂一致努力目标。包括宝马 (BMW)、宾士(Mercedes-Benz)、
[汽车电子]
近日京东地图首次对外公开亮相 专注机器人高精地图和智能驾驶大数据
7月19日消息,京东地图今日首次对外公开亮相;京东方面表示,京东地图将专注于机器人地图和智能驾驶数据应用。 京东方面表示,京东地图主要为各类机器人实现自动驾驶功能提供导航能力,具备从数据采集、处理、发布以及应用的全流程生产体系,生产过程高度自动化,覆盖社会道路、园区道路、室内等诸多场景。 京东地图表示,在采集环节,借助京东自主研发的多载体三维激光移动测量系统,可以在不同场景开展高精地图数据采集工作,实现路面实况、障碍物、周围环境等地物的自动识别;借助AI和大数据技术,京东地图的制图方案实现了地图要素的高效识别,摆脱了目前业内人工操作的传统方式,保证了数据采集的效率和准确性。 京东地图表示,在地图数据生产的全流程中,京东地图通过任
[汽车电子]
瑞萨电子宣布推出全新汽车级SoC处理器技术
据外媒报道,高级半导体解决方案主要供应商日本瑞萨电子宣布,将开发用于高级驾驶员辅助系统(ADAS)和自动驾驶(AD)系统应用中的汽车级片上系统(SoCs)处理器技术,旨在优化性能和电源效率的同时,支持高水平功能安全性。 瑞萨本次宣布的开发成果如下:1)卷积神经网络(CNN)硬件加速器核心,可同时提供每秒60.4万亿次操作(TOPS)的深度学习性能和13.8 TOPS / W的功率效率;2)可快速检测随机硬件故障并做出响应的先进安全机制,可以创建具有高故障检测率的高功率效率检测机制。3)新机制,使具有不同安全级别的软件任务在SoC上并行运行且不会互相干扰,大大增强功能安全性且满足ASIL D级要求。以上技术均已应用于瑞萨最新R-
[汽车电子]
瑞萨电子宣布推出全新汽车级SoC处理器技术
CES前瞻:AR、自动驾驶智能家居引关注
   CES 拉斯维加斯消费电子展下周就要拉开帷幕了。虽然过去的一年里从电子技术的发展来看,并没有出现影响个人消费领域的颠覆性的产品,不过今年的 CES 仍然会有一些亮点值得期待。下面就随嵌入式小编一起来了解一下相关内容吧。   VR未火  AR 已来   首先是增强现实 AR 技术的突飞猛进将会让人们看到一系列崭新的产品。虚拟现实VR产品在还没有真正成为主流之前,就已经逐渐淡出人们的实现,随之而来的下一个杀手级的产品将会是 AR 领域的商业化。继去年苹果推出了ARkit开发者软件之后,神秘的初创公司Magic Leap又发布了用七年时间打造的首款AR头显设备,这些都为AR的爆发性增长铺平道路。      CES前瞻:
[嵌入式]
车载摄像头技术趋势分析
近年来,随着汽车智能化升级,各车企正在从低等级自动驾驶向高等级提升。而自动驾驶将对车辆安全、行人安全、驾驶员监控等主动安全功能提出更高的要求,ADAS 渗透必然加速。 各车型中的车载摄像头越来越多。但基本上都会有至少一个ADAS前视摄像头、四个环视摄像头的基础配置。如果再加上近年越来越被重视的驾驶员监控摄像头,可以预见,未来几年,车上至少需要6个摄像头,市场前景巨大。 车载摄像头安全为本,技术不断升级 相较于消费类电子摄像头,车载摄像头的工作环境极度恶劣,比如说震动、高温、雨雾、低温、光线变化剧烈等。而车载摄像头以驾驶安全为目的,上述各个工作状态下,均需要能获取稳定、可靠、清晰的周边环境数据。 因此,随着汽车工业技术的
[嵌入式]
车载摄像头技术趋势分析
ADAS:市场发展趋势和新兴技术
从上世纪50年代早期的电动车窗到当今最新的汽车驾驶系统,豪华汽车所具有的高端特性随着时间的推移最终都应用到中端和经济型汽车上,成为必备的电子和电气系统。最近新出现的高级辅助驾驶系统(ADAS)技术也不例外。作为一个例子,欧洲的福特福克斯汽车现在具备了自适应巡航控制(ACC)、自动刹车和主动式车道保持等功能——所有这些特性以前都专属于豪华汽车。即使是经济型起亚汽车也安装了后视摄像机。但是,随着ADAS技术应用到价格相对便宜的车辆上,这带来了一个两难的问题:需要以非常低的价格实现大量的计算资源。 ADAS技术能够不仅仅应用在豪华汽车上,部分原因是出于竞争的考虑,但并不是唯一因素。政府规章制度也是一个重要因素。例如,在美国,国
[汽车电子]

推荐帖子

测试NXP USB C Multiport Adapter评估板的单片机
NXPUSBCMultiportAdapter集成了一颗LPC11U35的Cortex-M0单片机,MCULPC11U35作为一个核心的微控制器,负责整个系统的控制,其主要功能包括以下几个部分:通过SPI接口实现对PDPDY的控制,主要实现了PD应用层的协议。通过PDPHY1实现与电脑的通讯,申请Displayport视频数据和USB数据,获得电脑电源规格的信息,并做相应的处理
littleshrimp 综合技术交流
自己DIY的调频发射机 转
这是我自己做的调频发射机,发射功率18mW,在天线不大于一米的情况下用收音机接收距离大约20米,效果还不错!如果觉得不错的话,就请顶一下!谢谢~自己DIY的调频发射机转天线是如何选择的呢?回复:自己DIY的调频发射机转看发射的频率了回复:自己DIY的调频发射机转记得以前作过的是这样的比如作的是108MHZ的,那么L天线≈λ/4=C/(4*f)3.0*108/(4*108)75cm这样用75CM的就够了回复:自己DIY的调频发射机转天线我倒还没有注意这么多,
程序天使 模拟电子
变压器噎住问题
变压器噎住问题:Cry:表示连题目都没看懂。给你呼叫几位大侠来看看@maychang@chunyang@qwqwqw2088这是想问啥?这次照片比较清楚,而且明确看出两探头及其地线夹接触的位置。电原理图没有错,只不过在同一条线上重复画出地线符号。今将该地线符号去掉,重新贴在这里。确实是你使用示波器的方法有问题,下面详述。示波器的两个地线夹子,夹在两个地方,不是短路了吗?从本帖第一和第二两幅照片看,两个探头的地线夹夹在图中黑色箭头所指的位置,也就是电原理图中整
bilaoxjtu 电源技术
TI LaunchPad 现在结束了? 怎么买到?
团购TILaunchPad现在结束了?怎么买到?TILaunchPad现在结束了?怎么买到?结束有几天了!你去TI的官方网站看看,应该可以买到。
yuhaozi2 微控制器 MCU
LED显示屏基础知识
Timson,如果您要查看本帖隐藏内容请回复LED显示屏基础知识想学习一下。学习了学习学习回复楼主探路者的帖子学习......支持一下,,,学习下,顶!回复楼主探路者的帖子学习下,顶!回复楼主探路者的帖子顶顶,,具体点xuexi学习顶一下学习了学习最近對LED感興趣!!推推mark看看`````````````````````````````````````````````````谢谢LZ分享!
探路者 LED专区
论坛宗旨分享--花1万元的PCB设计高级讲座
花1万元的PCB设计高级讲座--PCB设计讲义论坛宗旨分享--花1万元的PCB设计高级讲座这个论坛已经有了呵呵那个要币,哈哈。分享给需要但是没币的同学啊谢谢楼主慷慨分享!雷锋再世啊验证问答真麻烦,能不能直接该成,y和n哦??验证问答真麻烦哈哈免费的太给力了。非常感谢!感謝樓主如此大方谢谢分享向lz学习,多分享免费的资源,照顾下新来的非常感谢楼主!!!谢谢分享就喜欢免费的,谢谢楼主!这个厉害
z1z1z1z1z1 PCB设计
小广播
最新汽车电子文章
换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved