自动驾驶指日可待,深度学习神经网络有这么大能耐?

发布者:innovator7最新更新时间:2017-02-07 来源: eefocus关键字:神经网络  ADAS  自动驾驶 手机看文章 扫描二维码
随时随地手机看文章

先进辅助驾驶系统(ADAS)可满足汽车驾驶人及乘客对道路安全及出行体验的更高要求。 诸如车道偏离警告、自动剎车及停车辅助等系统,已广泛应用于当前的车型,甚至是功能更为强大的车道保持、塞车辅助及自适应巡航控制等系统的配套使用,也让全自动驾驶车辆逐渐成为现实。

 

目前很多ADAS系统是以机器视觉作为核心。 传统上,机器视觉是以信号处理技术来检测识别物体,但汽车制造业一直在寻求让响应速度更快、识别准确度更高的方法。 对于正热衷于进一步提高拓展 ADAS功能的汽车制造业而言,深度学习神经网络开辟了令人兴奋的研究途径。

 

以知名品牌为首的汽车制造业正在此技术上进行投资,并向高科技企业及学术界看齐。 在中国,百度一直在此技术上保持领先。 百度计划在2019年将全自动汽车投入商用,并加大全自动汽车的批量生产力度,使其在2021年可广泛投入使用。

 

神经网络轻量化 满足嵌入式应用需求

汽车制造业及技术领军者之间的密切合作是嵌入式系统神经网络发展的催化剂。 这类神经网络需要满足汽车应用环境对系统大小、成本及功耗的要求。

 

卷积式神经网络(CNN)的应用可分为三个阶段:训练、转化及执行。 要想获得一个高性价比、适合多种车辆使用的CNN,必须在每阶段使用最为有利的系统。

 

在训练阶段,目前业界大多是采用脱机的方式进行。 基于CPU的系统、图形处理器(GPU)或现场可编程门阵列(FPGA)具有强大的运算能力,且使用的是设计人员熟悉的开发环境,是用来训练CNN的最理想的系统平台。

 

在训练阶段,开发商利用诸如Caffe等框架,对CNN进行训练及优化。 参考图像数据库则用来确定神经网络的最佳权重。 训练结束后,开发商可采用传统方法,在CPU、GPU或FPGA上生成网络及原型,尤其是执行浮点运算,以确保最高的精确度。

 

对车载环境来说,使用CPU、GPU或FPGA来执行CNN有一些明显的缺点。 这种实作方法的运算效率还有改进空间,成本偏高也使其无法在大量量产的系统中使用。

 

CEVA已经推出了另一种解决方案。 这种解决方案可降低浮点运算的工作负荷,并在汽车应用可接受的功耗水平上实现实时处理。 全自动驾驶对于运算性能有非常严格的要求,开发商必须想出一套能改善某些关键功能的策略,才能让CNN在汽车领域被广泛运用。

 

CEVA提出的策略是利用被称为CDNN的框架,对现有的网络生成策略进行改进。 透过CDNN框架,在高功耗浮点计算平台(利用诸如Caffe的传统网络生成器)上开发的受训网络结构和权重,可以被转化为基于定点运算,结构紧凑的订制网络模型。

 

经过这层转换后的网络模型,可以在经过优化的成像和视觉DSP芯片上运行。 由于功耗需求大幅降低,使得CNN网络模型可以应用在嵌入式平台上。 图1是轻量化嵌入式神经网络的生成过程。 与原本的CNN相比,这种技术可将高性能神经网络移植到功率预算较低的车用环境,而且图像识别的精确度降低不到1%。

 

图1 CDNN将通过传统方法生成的网络权重转化为一个定点网络。


一个由低功耗嵌入式平台运行,输入大小为224×224、卷积过滤器分别为11×11、5×5及3×3的24层卷积神经网络,其性能表现几乎是一个在典型的GPU/CPU综合处理引擎上运行的类似CNN的三倍,但其所需的内存带宽只是后者的五分之一,且功耗大幅降低。

 

次世代深度学习神经网络百家争鸣

汽车制造业进入神经网络领域所习得的经验不断推动技术的发展,并因此开发出了更先进的网络架构及更复杂的拓扑,如每级多层拓扑、多入/多出及全卷积网络。 新推出的重要网络类型不仅可用来识别物体,也可用来识别场景,从而支持汽车应用(如自动驾驶功能)所需的图像分割。

 

技术公司是这些新一代网络和架构发展的核心。 CNN网络生成器功能的改良,也为新的网络架构和拓扑提供必要的支持,如SegNet及GoogLeNet与ResNet等其它网络结构以及高级网络层(图2)。 此外,一键启用也让预训网络转换成优化的实时网络执行更为便捷。 为确保能支持常用的网络生成器,CDNN框架与Caffe和TensorFlow(Google的机器学习软件库)都有合作。

 

图2 网络生成器的发展为新网络层及更深的架构提供了支持。


由于最新推出的嵌入式处理平台在可扩展性及灵活性上都有了很大改进,因此嵌入式CNN也可以从处理平台的进步中同步进化。 由于深度学习领域的发展越来越多样化,因此开发者必须采用一个极为灵活的架构来发展CNN,不仅要满足当今处理需求,也必须具备因应未来演变的能力。

 

神经网络即将进驻量产车款 视觉处理为首波应用

第一批神经网络应用将专注于视觉处理,以支持诸如自动行人、交通信号或道路特征识别等功能。 由于这些系统的性能不断改进,例如处理越来越大的来自高分辨率相机的数据集,因此神经网络也有望在未来的汽车中发挥更大的作用。 这些作用将包括承担系统中其它复杂的信号处理任务,例如雷达模块及语音识别系统。

 

某些车厂将在201∼2020年款的新车中搭载使用神经网络的自动驾驶系统,未来车厂对同时兼具安全性及可靠性的系统需求会越来越大。 中国政府计划在2021∼2025年推出自动驾驶车辆。 要让此类系统具备可让客户使用的条件,汽车制造商必须同时确保其符合相关的安全标准,如ISO 26262功能安全性。 这需要硬件、软件及系统的综合发展。

 

由于这些系统变得越来越复杂,因此确保系统可靠安全且能满足处理需求也成为汽车制造商所面临的越来越大的挑战。

 

机器学习神经网络将沿一条挑战高效处理性能的发展道路继续阔步前进。 先进的神经网络架构已经显现出优于人类的识别精确性。 用于生成网络的最新框架,如 CDNN2,正在推动轻量化、低功耗嵌入式神经网络的发展。 这种神经网络将使先进辅助驾驶系统具有较高的精确性与实时处理能力。

 

深度学习神经网络在量产车辆上的首次使用将限于基本的视觉识别系统,但最终会在未来为自动化程度越来越高的车辆提供支持,帮助其应对众多的复杂信号处理挑战。


关键字:神经网络  ADAS  自动驾驶 引用地址:自动驾驶指日可待,深度学习神经网络有这么大能耐?

上一篇:抢食2017年汽车芯片市场
下一篇:中意的车型涨价了,消费者会为新能源汽车买单吗?

推荐阅读最新更新时间:2024-05-03 01:02

舜宇车载光学加入Leddar生态系统,提供一流光学解决方案
LeddarTech 公司近日宣布,宁波舜宇车载光学技术有限公司现已加入 Leddar 生态系统,与其它技术行业领军者并肩携手。这一战略合作表明,舜宇车载光学技术有限公司已跃升为技术领域的市场领导者,可提供一流的自主智能应用 LiDAR 光学解决方案。 据悉,LeddarTech 是一家提供最通用且可扩展的自动驾驶和移动激光雷达(LiDAR)平台的行业领导者。作为战略合作伙伴的舜宇车载光学将与 LeddarTech 合作,为汽车和出行应用打造激光雷达解决方案。 舜宇车载光学将负责提供汽车级光学设计和产业化专业知识,以实现光学子系统,并为光学元件和组件提供制造服务。该光学子系统将包括发射和接收光学装置,由精选汽车级光学元件组
[嵌入式]
舜宇车载光学加入Leddar生态系统,提供一流光学解决方案
理想照进现实,自动驾驶必须迈过的坎
【导读】根据世界卫生组织的数据,汽车事故是全球第二大死亡原因,每年约有 130 万人死于交通意外。其中中国的死亡人数约 260,000 人,美国约 40,000 人。发展中国家的汽车保有量还在增长,进而导致全球交通事故死亡人数继续上升。美国国家公路和运输安全局发现,在美国有超过 92% 的交通事故案例是人为错误引发的。一些分析表明,用自动驾驶汽车取代人类驾驶员,每年可以减少多达 100 万的全球死亡人数。 自动驾驶汽车本质上是与人类驾驶车辆具有相同要求的机器人—— 它们应该具备驾驶和停车技能、与其他汽车和基础设施通信的能力、导航技能以及获取能源的能力。行业利用人工智能技术来训练自动驾驶车辆行驶和停车、读取路标以及检测高速公路上
[汽车电子]
Google:神经网络亟需最佳化硬件
   Google 资深研究员Jeff Dean强调,硬件系统可针对执行少量特定的作业实现优化,并形成大量机器学习模型,从而打造更强大的 神经网络 …下面就随网络通信小编一起来了解一下相关内容吧。   如果您目前尚未考虑到如何有效利用深度 神经网络 (deep neural network)来解决您的问题,那么您的脚步必须加快了。至少,根据 Google 资深研究员兼深度学习人工智能研究计划(即 Google  Brain)主持人Jeff Dean是这么认为的。   在日前于美国加州举行的Hot Chips大会专题演讲中,Dean介绍 神经网络 如何大幅改写运算设备,并在语音、视觉、搜寻、机器人与医疗保健等领域取得重大的进展。他
[网络通信]
如何使用F-RAM 解决方案来增强 ADAS 的可靠性
非易失性存储器 (NVM) 在几乎所有嵌入式系统设计中都起着关键作用,但许多设计对非易失性存储器在数据写入和访问速度、数据保留、低功耗等方面的要求越来越严格。在汽车应用中更是如此,设计人员正在努力打造更先进的功能,例如高级辅助驾驶系统 ( ADAS ) 这类任务关键型功能。 为确保这些系统安全可靠地运行,设计人员需要深入研究先进的铁电随机存取存储器 (F-RAM),作为要求可靠性高、功耗低且比当前 NVM 解决方案速度更快的低功耗汽车级 NVM 的选择。 本文讨论 F-RAM 技术的关键特性,并介绍开发人员如何使用 Cypress Semiconductor 的两款 F-RAM 解决方案来增强 ADAS 的可靠性,,并以 A
[汽车电子]
如何使用F-RAM 解决方案来增强 <font color='red'>ADAS</font> 的可靠性
满大街“车规级”的套路:符合、达到、满足、遵从
什么是Automo ti ve Grade(也就是我们常说的车规级)?就是始终如一的可靠性。 汽车发动机启动的那一刻开始,必须在炎热的夏天和寒冷的冬夜工作。手机的使用寿命是2~4年,但是你的车需要使用十年以上。 另外,汽车零部件均要抵抗较大温度波动。当消费电子设备(如智能手机)承受超过其有限耐受范围内的温度时,就可能发送错误的信息或简单地关闭。 这在车规级系统中是无法容忍。所以汽车工程师要确保从仪表集群,导航屏幕到高级驾驶员辅助系统以及自动驾驶传感器,芯片等所有零部件都能满足严苛要求。 这就是我们的汽车解决方案(硬件)额定运行温度为-40~105摄氏度,甚至125摄氏度的原因。 耐温性仅仅是我们汽车系统规范与检
[嵌入式]
满大街“车规级”的套路:符合、达到、满足、遵从
2030 年,智能座舱是什么样子?《智能座舱市场与技术发展趋势研究白皮书》独家解读
如果要在汽车这个钢铁机器上,选出最感性的一部分,那座舱一定高票当选。 作为汽车上与用户最直接接触的智能化产物,我们很难直接用「好」与「坏」来评价一个座舱、给它打个分数,这是智能座舱设计的难点,也正是它的魅力所在。 这个魅力吸引着极客汽车从两年前推出了《奇妙车机情报局》专栏,从一台台车的车机系统开始,感受智能座舱这个尚且年轻的产物的变化,也试图勾勒出它未来的样子。 没有人能精确的预知未来,但我们可以从技术的趋势和需求去预测它大概的样子,毕竟任何产品的发展都离不开技术的驱动和用户真实的需求。 最近,IHS Markit 推出了《智能座舱市场与技术发展趋势研究白皮书》(以下简称「《白皮书》」),我们就借着智能座舱技
[汽车电子]
2030 年,智能座舱是什么样子?《智能座舱市场与技术发展趋势研究白皮书》独家解读
从百度“无人车队”出发,看中国“自动驾驶”的底色
自动驾驶,已经成为了深入人心的热词。 过去一年,政府已出台与自动驾驶、新能源汽车相关的多项政策,无不推动着行业健康发展。 上周五,来自全国各行业的政协委员及人大代表再一次齐聚北京,提交了相关提案与建议,反映了当下行业发展当中存在的难题。 其中,在自动驾驶/智能汽车领域,百度李彦宏、小米雷军、360 周鸿祎等来自科技界的大咖都提出了宝贵的意见,譬如: 李彦宏认为,尽管我国自动驾驶技术已领跑全球,但仍面临许多资质和责任厘清问题,需要进一步突破与技术、产业发展不相适应的政策瓶颈,激发自动驾驶领域创新能力;尤其是针对自动驾驶无人化进行规模化商用。 事实上,「两会」各方代表委员的建言献策有着深刻的意义——是当下中国各领域
[汽车电子]
从百度“无人车队”出发,看中国“<font color='red'>自动驾驶</font>”的底色
汽车电子,迎来巨变
这几日,北京车展引发全民讨论,而在背后,潜藏着更深的产业链逻辑。 随着汽车电气化架构从Domain向Zonal架构演进,加之整车智能化程度越来越高,汽车供应链的逻辑正在逐步改变,汽车电子的风向也随之而变。 汽车电子正在走向何方?从北京车展中,能够窥探一二。 国产车用国产自研芯片 随着国产车不断崛起,市场产业链正在不断分化。 据Tier 1分享,现在国内正在形成特色的产业链,越来越多的国内整车厂商开始要求Tier 1建立纯国产芯片的产线,而国外厂商同样要求建立纯国外的产线。 这意味着,国产芯片正在迎来一次大爆发,本次车展,也有许多国产自研芯片亮相。 奕斯伟计算基于国产工艺平台的RISC-V车载MCU、车
[汽车电子]
汽车电子,迎来巨变
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件
随便看看
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved