ADAS和DMS能否协同工作?

发布者:郑大大最新更新时间:2021-05-17 来源: eefocus关键字:ADAS  DMS  协同工作 手机看文章 扫描二维码
随时随地手机看文章

驾驶监控系统(DMS)技术长期以来一直被束之高阁,近来在汽车安全性讨论中重新引起了人们的关注。

 

人们越来越清楚地认识到DMS可以提高车辆行驶安全性,这推动了新法规的制定,提升了新型汽车的安全等级。欧洲议会已更新了其通用安全法规(GSR),确定了要求安装DMS的车辆类型,欧盟新车安全评鉴协会(NCAP)也正在完善其DMS测试规程。NCAP的五星碰撞评级计划延迟了两年,将于2024年开始测试。

 

图1:麻省理工学院AgeLab研究科学家Bryan Reimer

 

然而,这还不够。

 

汽车产业面临一个严峻的事实,就是人们驾驶半自动化车辆的时间越长,就越容易疏忽大意。

 

确实,汽车制造商总是将一些花俏的东西吹嘘为先进驾驶辅助系统(ADAS)的安全功能,希望驾驶使用这些功能。但是,过分依赖自动驾驶会导致不安全的行为,而DMS恰好处于这种危机四伏的人机关系之间。

 

迫在眉睫的问题是,DMS是否可以调解这种陷入困境的关系。

 

笔者最近采访了麻省理工学院(MIT) AgeLab研究科学家Bryan Reimer (图1),他重申了长期以来一直坚持的观点:“DMS数据需要与主动安全系统融合。”Reimer是美国公路安全保险协会(IIHS)的一个研究项目的架构师,这项研究显示了在Level 1和Level 2自动驾驶车中实现半自动化所产生的不利影响。

 

Reimer指出,他们的目标是同时利用自动化及人类的优势,以实现最高的安全性(图2)。为了确保人车联合系统比纯人工驾驶系统更好,“需要考虑利用强大的数据来支持。”

 

图2:将自动化和人类的优势结合起来以实现最好的安全性。

(图片来源:麻省理工学AgeLab)

 

图3:Seeing Machines人为因素和后装市场解决方案资深副总裁Mike Lenn。

 

Semicast Research首席分析师Colin Barnden也强调:“必须将ADAS和DMS结合起来。”他指出,DMS检测到的驾驶状态需要转化为ADAS动作,如煞车和转向。

 

Seeing Machines人为因素和后装市场解决方案资深副总裁Mike Lenné (图3)承认:“将内部感测和外部感测结合可以提高安全性。”他列出了将ADAS和DMS结合的两个好处:确实了解行驶中存在的安全风险,确保检测到人的真实状态;利用DMS为ADAS功能设置阈值。例如,虽然驾驶将手放在方向盘上驾驶车辆,但实际上他是不是正昏昏欲睡呢?

 

Lenné说:“根据各种驾驶场景/环境来调节DMS功能,这是一个持久的挑战。例如,如何设定城市驾驶和乡村驾驶的分心指标?”

 

Lenné认为,除此之外,汽车制造商要“地让人机界面(HMI)/车辆根据不同的风险严重程度进行响应,即由安全风险的严重程度来决定HMI和车辆的回应。”

 

DMS的“基础版本”

 

图4:欧洲NCAP技术总监Richard Schram。

 

我们不应操之过急。在由Affectiva主办的“驾驶监控之外的先进安全性”(Advanced Safety Beyond Driver Monitoring)网络活动中,欧洲NCAP技术总监Richard Schram (图4)介绍,欧洲NCAP采取了一种非常快速务实的方法。

 

他强调,欧洲NCAP希望先“在每辆车上安装DMS的基础版本”,然后遵循其技术发展蓝图来发展。“我们永远无法得到完美的DMS系统。”

 

这个基础系统,是否就是只有基于摄影机、基于视觉的DMS呢?欧洲NCAP正在开发的DMS测试规程,重点就放在视觉系统上。Smart Eye首席执行官Martin Krantz打趣道:“特斯拉(Tesla)使用的方向盘扭矩传感器,虽然有时也被认为是DMS……但它们已经过时了。”

 

Jungo Connectivity首席执行官Ophir Herbst (图5)在访谈中坦承:“DMS和乘客监控系统(OMS)技术都采用了2D摄影机……确实有一些公司与我们合作(或使用我们的产品)来测量驾驶的『认知能力』或『精神状态』。OEM也在探索其他一些传感器,但他们意识到摄影机的各种功能都提供了最大的投资回报率,而成本是必须考虑的事。”

 

图5:Jungo Connectivity首席执行官Ophir Herbst。

 

最近更名为Cipia的Eyesight Technologies则坚持“视觉是驾驶监控的主要方式”。

 

Cipia产品副总裁Tal Krzypow (图6)在采访中说,视觉“能检测到眼睛的闭合与凝视,以及脸部表情(还有其他功能),这些都是驾驶困倦和注意力分散最直接的表现。”

 

他并补充:“尤其是注意力分散,是造成事故的主要原因之一,没有其他更好的方法可以追踪驾驶的视觉专注力了。”

 

Krzypow并不反对使用其他传感器,例如用于监测呼吸的雷达,但他强调:“目前的市场很大程度是由法规要求驱动,只有视觉方法才能最大限度地满足法规要求。”

 

那么,下一代DMS传感器发展如何呢?

 

图6:Cipia产品副总裁Tal Krzypow。

 

尽管视觉DMS是许多OEM的优选方案,但DMS开发人员不会停止开发新传感器,以便能进行更多检测。

 

Krantz (图7)描绘了一幅更广阔的画面。“在2020年CES上,我们示了一款雷达呼吸探测器。”Krantz说,“许多DMS技术供货商都在研究乘客监控解决方案,我们也在开发全车舱感知方案,采用一到两个广角摄影机追踪监测整个车舱,测量乘客身体姿势、儿童是否在后座、安全带是否系好等。”

 

他补充:“我们还捕捉所有乘客的脸部表情,并将其与基本情绪对应。这种方法也可以用来辨识车中的每个人。”Krantz认为,未来汽车内部将由“多模传感器套件”进行监控。Smart Eye计划“持续开发软件,使其能够适应多种形式的传感器。”

 

一些Tier 1供货商(如Valeo)据报导正在探索可以检测遗留在车内的“生命体”(如婴儿、小狗等)雷达技术。

 

飞行时间(ToF)传感器也有可能用于DMS。2020年初,ADI与Jungo宣布进行合作,当被问及为什么要合作时,Herbst解释,ToF传感器可提高脸部辨识、手势,以及座位占用、姿势等算法的准确性,而且,在某些情况下,ToF传感器还可以提供其他功能,例如检测手是否离开方向盘。他指出,ToF传感器将在“未来一年内”用于DMS系统。

 

图7:Smart Eye首席执行官Martin Krantz。

 

但是,也有人对此提出疑问:在DMS中添加感测功能就能解决诸如检测驾驶困倦之类的棘手问题?Lenné认为,困倦是最难检测的一种状态,“我们研究了大脑活动、心律活动和呼吸。”Seeing Machines使用的一些生理传感器是由澳大利亚和英国的学术机构开发和设计的,Lenné说:“我们发现,其他传感器都会产生很大的噪声,导致心率或呼吸速率变化的原因多达101种。”

 

DMS的强制性要求正在逐步实施,Seeing Machines重申:“眼睛能看见,而且眼睛不说谎”。Lenné强调了他们透过广泛研究得出的结论:“如果你真的想知道一个人的注意力和认知状态,就去研究他们的眼睛和脸部表情。”

 

图8:检测驾驶状态需要考虑多种因素。

(数据源:IEEE Pervasive Computing)

 

欧洲NCAP该测什么及如何测试?
Krantz指出,DMS测试的首要任务是将系统安装在汽车中进测试,许多在测试平台上正常的系统在实际的恶劣驾驶环境下却无法工作。

 

Semicast Reseach首席分析师Colin Barnden (图9)指出,现实中的许多情况往往让DMS技术无所适从,比如阳光直射和路灯频闪,甚至驾驶戴着口罩和太阳镜也会困扰DMS系统。

 

图9:Semicast Reseach首席分析师Colin Barnden。

 

那么DMS必须具备哪些功能呢?许多供货商拒绝透露详细信息,只是提及他们参与了欧洲NCAP的测试开发工作。但Krantz强调,基本信号(例如头部姿势、眼睑张开、视线方向等)的质量很重要。

 

“基本信号的准确性和质量都很重要。如果这些信号不够完整,就无法在上层创建警告应用。警告需要谨慎处理,确保低误报率。”Krantz补充:“瞥一眼仪表板与微睡眠是不同的,不能搞混。”

 

Krantz称Euro NCAP的测试规程正在制定中,“我们有信心提供先进的标准,不会遗漏DMS系统最重要功能的测量。”

 

Herbst列出了可能的DMS功能需求:

透过头部姿势辨识注意力分散,如瞄一眼手机、调节信息娱乐系统;

辨识微睡眠(microsleep)和其他睡眠状态;

透过多种信号(眼睛、哈欠、脑电图、方向盘)辨识长时间的昏昏欲睡情况;

各种光照条件(白天、夜晚、阳光直射);

各种配饰(眼镜、太阳镜、帽子、口罩)。

 

最后,OEM当然期望符合欧洲NCAP要求的系统具备成本效益,Herbst说:“DMS可以在现有的运算系统(如信息娱乐系统或仪表板)上运作。汽车制造商还要考虑提供其他功能,如软件升级。此外,Tier 1供货商情有独钟的是最适合他们所用芯片组的解决方案,监管机构不会规定采用什么技术,他们只专注于使用和极端情况。”

 

会有昏昏欲睡的假人吗?
这个问题可能有点奇怪,但它却指出了欧洲NCAP如何在车内测试DMS的问题,有会昏昏欲睡的假人用来进行测试吗?

 

Lenné说:“我们认为,无论是在模拟还是实际测试中,都需要人类驾驶主动参与测试。目前尚不清楚如何实施,但可能需要在困倦程度方面达成一些共识。”

 

对于微睡眠,Krantz说:“我们不仅要对微睡眠发出警告(微睡眠之后就会陷入睡眠),还要对严重昏昏欲睡(此时驾驶能力急剧下降)发出警告。”他建议:“在模拟和实际驾驶中,让驾驶一直处理同样的场景下(例如凌晨时分长时间的乏味驾驶),并在固定的时间间隔内对自己的困倦程度进行自我评估。两者的区别在于,模拟驾驶中的测试可以持续到驾驶陷入睡眠。”

 

实际测试比Krantz和Lenné提到的要复杂得多。正如Krzypow指出的那样,“辨识困倦(不同于闭眼)面临双重挑战:它很难测量,也很难模拟。”还没人解释欧洲NCAP计划如何应对这个挑战。

 

如何让DMS别干扰驾驶?
说了这么多,实际上DMS技术最薄弱之处是误警报太多,驾驶常常不厌其烦,最终关闭DMS使其变得没有作用…

 

…那么,该如何让DMS不干扰驾驶又能发挥安全作用?车厂目前开发DMS的现况又是如何?


关键字:ADAS  DMS  协同工作 引用地址:ADAS和DMS能否协同工作?

上一篇:Imagination车用GPU搭载NNA,积极部署EV/自驾车市场
下一篇:汽车“芯事”如何解?专访中星微电子集团CTO张亦农

推荐阅读最新更新时间:2024-11-12 13:49

“别人家的”L2级ADAS,为什么比你的强那么多?
近期,美国公路安全保险协会(IIHS)公布了自我调整巡航控制(ACC)和车道偏移辅助(LKA)等先进驾驶辅助系统(ADAS)功能的评估测试结果及分析。在公路和试车道上进行的测试中,IIHS发现有些车型在典型的车辆驾驶状况下都有缺陷,例如车辆在接近停止,或在坡道和弯道上行驶时。 IIHS是一家由汽车保险公司资助的非营利组织,它位于弗吉尼亚州(Virginia)。IIHS用于测试的五款Level2(L2)车型分别是:2017年款宝马(BMW)5系列(配备“Driving Assistant Plus”)、2017年款梅赛德斯-奔驰(Mercedes-Benz)E级(配备“Drive Pilot”)、2018年款特斯拉(Tesla)Mo
[汽车电子]
NI推出全新回放和HIL ADAS/AD系统 充分提高可靠性
据外媒报道,美国NI宣布推出最新的高级驾驶辅助系统(ADAS)和自动驾驶(AD)产品:一种统一的测试系统架构,可在数据回放(data replay)和硬件在环(HIL)测试之间迭代移动。 图片来源:NI
[汽车电子]
NI推出全新回放和HIL <font color='red'>ADAS</font>/AD系统 充分提高可靠性
瑞萨电子和ASTC合作开发带R-Car V3M虚拟平台的智能摄像
全球领先的半导体解决方案供应商瑞萨电子株式会社(TSE:6723)宣布,和澳大利亚半导体科技有限公司(ASTC)以及其子公司VLAB Works一起,联合开发用于瑞萨R-Car V3M的VLAB/IMP-TA模拟器虚拟平台(VP),该平台是一款可用于先进驾驶辅助系统(ADAS)和车载信息娱乐系统的汽车片上系统(SoC)。VP在R-Car V3M芯片系统中可模拟图像识别和认知IP,仅用PC便可进行嵌入式软件开发,既缩短了VP开发时间,也提高了软件质量。VLAB/IMP-TA模拟器是瑞萨电子用于R-Car V3M的最新软件开发工具之一,也是于2017年4月发布的Renesas autonomyTM平台的一部分。 瑞萨电子全球ADAS
[嵌入式]
安富利:积极推进方案设计,加速中小型车厂ADAS普及
“驾驶安全意识倍受重视的现在,为了化解不断加深的疑虑,全球各地持续发表最新的汽车管理规范。其中一例便是中国,中国将于 2018 年开始实施的中国新车评估规程 (C-NCAP) 测试中纳入 AEBS/FCW/LDW/PDS,而中国多数的汽车制造商也早先一步在新车款中加入各种强化功能。于是,市场对高级驾驶辅助系统 (ADAS) 的需求大幅跃进,事实上,全球汽车电子市场预估在未来几年内将稳定成长,尤其是车内娱乐、车身电子和高级驾驶辅助系统 (ADAS) 的市值将在 2020 年扩大到 1,500 亿美元左右,连带汽车半导体市场也预期会有强势的涨幅。”近日,安富利官方发布的《全面提升驾驶安全》新闻稿中写道。 安富利工程副总监华诗显表示,“
[汽车电子]
安富利:积极推进方案设计,加速中小型车厂<font color='red'>ADAS</font>普及
ADAS的持续创新让无人驾驶汽车梦想成真
无人驾驶汽车多年来一直都是人类的一个梦想。在1939年纽约世博会上, “未来城市交通”(Futurama)中首次提及了自动化高速公路,并将其视为“未来世界”的重要构成。时至今日,新兴电子技术已将过去的幻想变成了现实,从而使得谷歌无人驾驶汽车家喻户晓。Conti、博世(Bosch)和 电装(Denso)三家公司曾公开预测全球第一辆全自动无人驾驶汽车将于2020年问世。此外,全球各大汽车制造商和半导体厂商也不断创新,致力于为消费者开发辅助驾驶系统。 先进驾驶辅助系统(ADAS)由一系列电子技术构成,旨在确保车辆的行驶安全。ADAS能够与其它车辆保持安全距离,向驾驶员提示各种危险情况,保护司乘人员和行人免遭不良驾驶习惯的伤害,进而有
[嵌入式]
ADAS 助力车载摄像头需求增长,国内车载镜头厂商进入“快车道”
智能驾驶拉动需求,ADAS 助力车载摄像需求增长 在政策推动、技术革新、消费升级的趋势下,近年来智能汽车产销量增长强劲。智能汽车的推广打开了汽车电子的市场空间,在消费者安全、娱乐、舒适等多方面需求下,各类汽车厂商寻求差异化策略,汽车的互联化、自动化和电气化将加速从高端车型向中低端渗透,为汽车电子升级提供了广阔市场。随着 ADAS 的逐渐渗透,车载镜头的需求大致为 9-22 个每辆汽车。 2014 年至 2020 年,车载摄像头全球出货量将由 2800 万枚增长至 8277 万枚,年复合增长率达 19.80%。 欧菲光积极抓住产业升级的机遇,高端双摄模组出货占比持续提高 欧菲光相关终端产品的产业链大致
[汽车电子]
<font color='red'>ADAS</font> 助力车载摄像头需求增长,国内车载镜头厂商进入“快车道”
瞄准汽车电子行业,国科微ADAS芯片选择芯原视觉处理器IP
芯原 股份有限公司(芯原)今日宣布,深圳市国科微半导体股份有限公司(以下简称“深国科”)已在其SGKS6802X先进驾驶辅助系统(ADAS)芯片中选择了芯原Vivante GC7000UL-VX 视觉处理器 IP ,该芯片所属的ADAS产品线主要供应汽车电子零部件生产商。深国科借助其软件开发工具包(SDK)以促进ADAS算法社区的快速发展。   深国科的6802X是一款先进的车规SoC,采用了多种计算单元,其中包括可编程视觉GPU处理器和由硬件实现的ADAS应用功能。SGKS6802X也为图形/图像识别和处理提供了一个高性价比、高性能的单芯片解决方案,并且为把ADAS应用于大规模市场产品提供了大量接口。GC7000UL-VX通过一
[嵌入式]
了解 ADAS 和车舱监控系统对网络安全图像传感器的需求
Understanding the need for cyber-secure image sensors in ADAS and in-cabin monitoring systems 了解 ADAS 和车舱监控系统对网络安全图像传感器的需求 要让人们认识到汽车网络安全的重要性并不容易。随着汽车向半自动驾驶过渡,汽车主机厂 (OEM) 越来越关注汽车网络安全问题。 对汽车网络实施控制的理由很明显,目的是确保除了驾驶员(或在特定和约束条件下替代驾驶员的驾驶系统)之外没有人可以控制车辆 。 2021 年,联合国欧洲经济委员会 (UNECE) 工作组发布了 UN-R155,这是一项针对 OEM 的网络安全法规,旨在应对日
[汽车电子]
了解 <font color='red'>ADAS</font> 和车舱监控系统对网络安全图像传感器的需求
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved