简单来讲,它是指通过一系列算法,将车身所搭载的各类型传感器所探测的信息有机的整合到一起,最大化整车对环境的感知能力,从而为后端的行为决策和控制等模块提供环境信息。 单个的感知传感器通常由于探测机理、可视角度等原因,具有一定的感知局限性,如果说各个独立的传感器让汽车拥有了眼睛,那么传感器融合技术, 将使车身看得更清,告别“近视”。
传感器融合按照其融合的作用,一般有补偿式融合,冗余式融合和协作式融合。
1.补偿式融合指各个传感器对相同的环境进行探测,然后通过融合算法,或选取各个传感器的优势探测信号,或整合各个传感器各自的探测范围,从而获取更精准和覆盖范围更广的环境信息。以当前主流的前视毫米波雷达和摄像头融合(RV Fusion)方案为例:
2.冗余性融合是指各个传感器对同一目标进行探测,融合算法整合所有对同一目标的探测信息,从而提升目标的可信度,降低单个传感器误检对整体系统的影响。 冗余性融合广泛应用于与安全性相关的功能中, 比如现流行的自动紧急刹车(AEB)功能,如果该车具有多个传感器,则在对目标进行自动制动之前,一般要求至少有两种及以上传感器同时检测到该目标,确保目标存在性的冗余,降低该目标是由单个传感器误识别的可能性,从而降低误制动的概率(基于当前的法律法规,这种误制动是相当危险的,需尽力避免)。同样以前述的雷达摄像头方案为例,通常毫米波雷达检测时,由于环境噪声的干扰以及信号处理算法的局限,会不时地出现目标误识别的现象,一般把这种误识别产生的目标称作鬼影(ghost)目标,而摄像头的探测原理使得其具有更低的误识别率,所以在这种系统中,如果安全性功能要想启动,一般要求雷达和摄像头都同时检测到同一目标,从而降低误制动率。
3.协作式融合是指整合各个传感器的探测信息,相对来讲这些探测信息都是较单一且低维度的,进行提取出更深度和高维度的探测信息。比如,通常摄像头探测的图像信息丢失了环境的三维信息,如果将雷达探测的点云信息和图像像素信息进行融合,可以构建出带有深度信息的图像(深度图),那么利用这张深度图也就可以提取出完整的三维环境信息,除了目标感知之外,还能提供可行域(Fress Space)等更高维度的信息。当前流行的前融合即属于这种融合大类,目前多家智能驾驶企业正在这个方向发力,并尝试将其运用到量产项目中。
智慧融合感知
当前,知行科技正着力于实现视觉感知与超声波感知的融合,视觉感知对障碍物的存在性和类别判断上有一定优势,只要依靠数据闭环链路,不断迭代优化视觉感知性能,就能对大部分常见的障碍物有较好的识别能力。超声波传感器对近距离的障碍物具有稳定的感知能力,并且对任意类别的障碍物都能无差别探测,比如地锁,花台,限位杆等,广泛应用于泊车功能的环境感知。将视觉和超声波对障碍物的探测进行融合, 属于补偿式融合,将能够更加稳定鲁棒地探测泊车位附近的障碍物,为泊车功能提供保障,此方案也将直接应用于知行科技的泊车功能中。此外,即将推出的iDC域控制器,搭载有四颗环视摄像头,知行科技也将对这四个摄像头的感知结果进行一个FOV层面的融合,从而提供360°的无死角感知范围。
未来 摆脱“近视”
近年来大火的高速自动导航功能,要求自车具有稳定的360°无差别的感知能力,所以多传感器基于FOV层面的融合,以及各传感器在FOV重叠区域的融合处理,是自动导航功能必不可少的方案。放眼高阶自动驾驶,从前述的感知结果和融合方案可以看出,当前阶段下主流的感知结果都是基于交通参与者这一障碍物(还可能包含信号灯,锥桶等静态障碍物)为目标的,然而真实的交通场景是及其复杂的,交通参与者只是其中一个部分,对环境的完整勾勒无法靠目标级别的感知融合来实现。
当前,不少研究方正尝试对各个传感器的原始信息进行前融合,如原生的摄像头图片或者像素,雷达的点云甚至电磁波信号等,以及尽量不丢失感知信息的情况下完成对环境的更充分表达,从而迈向高阶自动驾驶,这一方案能否最终落地量产,还需要时间持续关注。上述的各种融合方式,没有严格的界限,在一个智能驾驶系统中通常根据具体需求动态的选择融合方式,且多种融合方式可能同时运用在相同传感器中。智能驾驶的功能逐渐迈向高阶,汽车所搭载的传感器种类及数量也大幅度增加,但单个传感器始终摆脱不了其固有局限,是一双“近视”的眼睛,通过不断优化的传感器融合算法,让汽车摆脱“近视”,看得更清,行得更远,更安全。
关键字:知行科技 算法
引用地址:
知行科技即将推出的iDC域控制器让汽车摆脱“近视”
推荐阅读最新更新时间:2024-11-12 10:18
基于模型的镜头边界检测算法的研究分析
引言 随着多媒体技术和网络技术的迅速发展,现代计算机技术特别是海量数据存储与传输技术的成熟,视频作为一种主要的媒体类型在人们的生活、教育、娱乐等方面日益成为不可或缺的信息载体。但是由于视频非结构化的数据格式、巨大的数据量以及表现内容的不透明等缺点,使得对视频数据的管理和分析都相当困难。而从大量视频数据中找到自己感兴趣的相关视频片段己成为一种迫切的需求。这一技术就是目前人们普遍关注的基于内容的视频检索技术(CB-VR,Content-Based Video Retrieval)。 我们知道视频的制作过程首先是进行单个镜头的拍摄,然后,对于内容相近的多个镜头通过各种镜头编辑方式(即镜头转换方式)衔接在一起,组成场景以及视频故事单元
[测试测量]
知行科技完成亿元B1轮融资,将推进L2+级自动驾驶量产
7月1号,知行科技正式宣布完成近亿元B1轮融资,由建银苏州科创基金领投,禾裕壹号、理想汽车、明势资本、国中创投等跟投。 据知行科技官方消息,其曾先后获得过3轮近亿融资,本轮融资金额近亿元,将主要用于L2级自动驾驶的量产规模扩大及L2+自动驾驶量产推进。 知行科技成立于2016年12月,定位乘用车前装领域Tier1,目前已形成应用于L1-L4级自动驾驶系统的智能前视摄像头、自动驾驶域控制器两大产品线的业务布局。 明势资本官方消息显示,知行科技集成了L2级自动驾驶控制器的智能前视摄像头已获得多家主机厂的量产定点,将于本月开始给某家一线车厂批量供货。知行科技创始人宋阳表示,明年我们会进行更高级别的L2+自动驾驶的量产,本轮融资会加快
[手机便携]
英特尔中国研究院:深耕AI演算法、机器人视觉领域
英特尔 (Intel)正积极布局机器人技术(无人驾驶和养老机器人)和基础设施(通讯和储存)的未来发展。 英特尔 中国研究院日前更揭露了目前研究院正在投入人工智能( AI )的三大方向: AI 演算法、智能机器人技术、以及通讯和储存基础建设。下面就随网络通信小编一起来了解一下相关内容吧。 日前在一场北京未公开的 英特尔 闭门论坛上,英特尔中国研究院院长宋继强、英特尔中国研究院认知计算实验室总监陈玉荣透露了目前英特尔在大陆的最新布局。 宋继强表示,“英特尔已经不是一家芯片公司了,我们是一家资料公司。”尤其英特尔中国研究院其实是一支以电脑视觉见长的团队,在软件演算法上也有非常深厚的积累,具体在 AI 这一块以视觉为主。
[网络通信]
打鼾降噪系统使用自适应算法来顺应每个人独特的打鼾模式
打鼾降噪系统使用自适应算法来顺应每个人独特的打鼾模式。 无论您多么爱您的另一半,如果他们在您身边睡觉时经常大声打呼噜,你也可能会心生抱怨。这是人之常情,因为,大约35分贝左右的噪声水平就足以破坏一个人的大好睡眠,中度打鼾者制造的噪声水平介于50分贝到60分贝之间,所以这是一个很容易就能超过的水平。打鼾噪声记录的保持者是一位来自英国的祖母,她打出的鼾声高达116分贝。睡眠质量受损、睡眠时间下降不仅仅可能导致打鼾者伴侣的满腔怒火,它还会直接影响受害人的精力、注意力和警觉能力。 现在,对于因另一半打鼾导致睡眠不足的恋人来说有一个好消息,有一种新的降噪系统,可以嵌入在受害人的枕头内,它实现了一种自适应算法,可以根据打鼾者独特的
[嵌入式]
开源!星动纪元联合清华大学、上海期智研究院引爆算法新潮!
当前,人形 机器人 作为具身智能的最高体现,受到各界广泛关注。但由于人形机器人结构的高度复杂性,其强化学习训练以及从模拟环境向真实世界迁移的过程,相较于四足机器人而言,更具挑战性。 近日,由具身智能与人形机器人公司星动纪元联合清华大学、上海期智研究院开发的开源人形机器人端到端强化学习训练框架Humanoid-Gym正式面世。系统全开源,意在降低人形机器人算法的开发门槛,助力全球学界和业界的研究者们在人形机器人领域的创新工作。 人形机器人的强化学习训练一直是一个重大难题。 首先,人形机器人身体结构高度复杂,关节自由度极高,使得控制策略的寻优空间维度惊人,算法难以高效求解。其次,机器人在训练环境和真实环境之间存在明显的模态差异,训练出
[机器人]
如何保证示波器测量精度 揭开示波器参数测量背后的算法
“参数测量”是示波器分析波形的一大利器,工程师不用开启光标就可以轻松得到各项参数。但也有工程师会有点不放心:示波器如何保证测量精度呢?本文就带你步步深入,了解示波器参数测量背后的算法。 ZDS系列示波器提供了非常丰富的测量功能,测量项目最多可达51种。工程师在使用时遇到的问题多是因为对细节及原理了解不够,下面就这些内容,带你一步一步深入挖掘,解开你的疑惑。 一、参数测量的使用方法 打开测量比较简单,记住两个要点: 1、我要测量哪个通道? 2、我要测什么? 图1 打开测量 小结:测量项目有51项之多,支持24项测量项目同屏幕显示。 二、参数测量算法分析 示波器中测量的项目大体上可分为两大类,一类与电压相关,如最大值、
[测试测量]
使用MATLAB和Simulink算法创建FPGA原型(二)
利用自动HDL代码生成功能更快生成FPGA原型 在生成FPGA原型时,HDL代码必不可少。工程师手工编写了 Verilog或VHDL代码。作为替代选择,使用HDL编码器自动生成HDL代码具有众多明显优势。工程师可以快速地评估能否在硬件中实施当前算法;迅速评估不同的算法实现,选择最佳方案;并在FPGA上更快地建立算法原型。 对于DDC案例研究而言,可以在55秒内生成了5780行HDL代码。工程师可以浏览并很快理解代码(图7)。自动代码生成功能允许工程师对系统级模型进行更改,并且,通过重新生成HDL代码,该功能可以在数分钟之内生成更新的HDL实现方案。 重用具有协同仿真功能的系统级测试平台进行HDL验证
[模拟电子]
依图科技:人工智能算法的性能四年提升10万倍
“四年前,人们见证了人工智能的人脸识别能力超过了人类。但是很多人没有看到的是,这四年里,人工智能的识别能力仍在指数级增长,算法精度又提升了10万倍。” 3月23日,在北京钓鱼台国宾馆举行的中国发展高层论坛上,依图科技联合创始人兼首席执行官朱珑分享人工智能的观点时表示,“以中国为代表的亚洲科技创新正在崛起,这一观点有一重要客观依据,那就是科学创新的人才正在大量向中国转移。” 中国发展高层论坛是由国务院发展研究中心指导、中国发展研究基金会主办。来自世界500强企业负责人、国际组织负责人、著名的经济专家和学者,就中国的扩大开放、国内外重大经济议题等话题展开深度讨论。作为中国国家战略的人工智能,已成为推动经济增长的新引擎,在论坛上受到了与
[机器人]