基于深度学习的视觉处理,可实现高精度及低功耗的解决方案
全球领先的半导体解决方案供应商瑞萨电子株式会社,与具备深度学习专业知识的自动驾驶视觉处理技术解决方案提供商StradVision宣布联合开发基于深度学习的视觉处理解决方案,用于下一代高级驾驶辅助系统(ADAS)的智能摄像头,适用于ADAS Level 2及以上级别。
为了避免在城市地区发生的常见危险,下一代ADAS需具备高精度视觉处理能力,能够检测出行人和骑行者等所谓弱势道路使用者(VRU)。同时,对于大众市场的中低端车辆,这些系统必须实现非常低的功耗。瑞萨与StradVision的全新解决方案同时实现了这两个目标,旨在加速ADAS的广泛应用。
瑞萨电子汽车技术客户合作事业部副总裁吉田直树表示: “作为视觉处理技术的领导者,StradVision在应用瑞萨R-Car SoC开发ADAS解决方案方面拥有丰富经验。通过此次合作,我们带来了量产级解决方案,面向未来打造安全和精准的移动性能。这一基于深度学习的全新合作解决方案针对R-Car SoC进行了优化,将有助于下一代ADAS的广泛采用,并可支持未来几年内不断提升的视觉传感器要求。”
StradVision首席执行官Junhwan Kim表示:“StradVision很高兴能够与瑞萨联手,帮助开发人员有效推进ADAS的下一次重大飞跃。这一共同努力不仅可以转化为快速有效的评估方案,而且将大大提升ADAS的性能。未来几年中,预计前置摄像头市场将会大规模增长,StradVision和瑞萨联手打造优势技术,无疑将保持双方在该领域的领先地位。”
StradVision基于深度学习的视觉处理软件为车辆、行人和车道的识别等提供了高性能。该高精度视觉处理软件已针对瑞萨R-Car汽车片上系统(SoC)产品R-Car V3H和R-Car V3M进行了优化,而R-Car系列产品已在量产车型中拥有良好的应用业绩。以上R-Car系列产品搭载了CNN-IP(卷积神经网络知识产权)深度学习处理专用引擎,使其能够以最低功耗高速运行StradVision的SVNet汽车深度学习网络。此次合作开发的视觉处理解决方案实现了基于深度学习的视觉处理能力,同时保持了低功耗,使其适用于量产车辆,进而推动ADAS的采用。
基于深度学习的视觉处理解决方案的关键特性:
(1) 解决方案同时支持早期评估及量产车型
StradVision的SVNet深度学习软件是一款强大的AI感知解决方案,用于量产的ADAS系统。它因在弱光环境下的识别精度和识别对象被其它物体部分遮挡时的处理能力而备受关注。R-Car V3H的基本软件包可同时执行车辆、人员与车道的识别,以每秒25帧的速度处理图像数据,实现快速评估和POC开发。以这些功能作为基础,如果开发人员希望通过添加符号、标记和其它物体作为识别物体来定制软件,StradVision可为基于深度学习的视觉处理提供支持,面向量产车辆,涵盖从培训到软件嵌入的所有步骤。
(2) R-Car V3H和R-Car V3M SoC在降低成本的同时提升了智能摄像头系统的可靠性
除了CNN-IP专用深度学习模块,瑞萨R-Car V3H和R-Car V3M还搭载了IMP-X5图像识别引擎。将基于深度学习的复杂物体识别与高度可验证的图像识别处理同人为规则相结合,使设计人员能够构建一个强大的系统。此外,方案还设计了片上图像信号处理器(ISP)对传感器信号进行转换,用于图像渲染和识别处理,从而可以采用无内置ISP的低成本摄像头进行系统配置,以降低BOM成本。
供货信息
采用全新联合开发的深度学习解决方案的瑞萨电子R-Car SoC(包括StradVision的软件与开发支持),计划于2020年初向开发人员供货。
关键字:瑞萨电子 StradVision
引用地址:
瑞萨电子联手StradVision,开发下一代ADAS智能摄像头
推荐阅读最新更新时间:2024-11-19 12:38
瑞萨电子物联网和智慧生活等应用领域的解决方案亮相2022中国电子信息博览会
瑞萨电子携多款物联网和智慧生活等应用领域的先进解决方案亮相2022中国电子信息博览会 2022 年 8 月 8 日, 中国深圳讯 - 全球半导体解决方案供应商瑞萨电子(TSE:6723)今日宣布,将携多款面向物联网、智慧生活等应用领域的先进解决方案亮相第十届中国电子信息博览会(以下简称:CITE),展位号:Hall 1,1A019。本次博览会将于2022年8月16日至18日在深圳会展中心举行 。届时,瑞萨电子的技术专家将在现场展示瑞萨电子如何将物联网嵌入各个应用领域,助力智慧生活的实现。 • 快速接入式物联网套件 该方案包括多种不同的传感器,如:温湿度传感器、流量传感器、气体传感器、生物医学传感器等,同时集成了瑞萨
[物联网]
瑞萨电子亮相2013北京国际工业智能及自动化展览会
2013年6月27日 中国北京讯 —2013年6月26日至28日, “2013北京国际工业智能及自动化展览会(IA BEIJING)”在北京展览馆隆重举行。 北京国际工业智能及自动化展览会是重要的工业自动化行业盛会,是面向中国北方地区工业企业推介国际领先的自动化产品和技术解决方案的良好平台。经过几年的不断积累和发展,展会已逐步成为中国北方市场首选的专业性工业自动化展会。作为全球领先的高级半导体和解决方案的供应商及工业控制领域里名列世界第一的客户定制SoC芯片供应商,瑞萨电子首次亮相该展会,并在本次展会上向业界展示瑞萨工业以太网控制产品R-IN32M3-EC。 R-IN32M3-EC是支持EtherCAT等多协议的
[单片机]
瑞萨扩展FemtoClock时钟产品阵容适用高性能通信与数据中心
瑞萨电子扩展FemtoClock时钟产品阵容适用于高性能通信与数据中心 FemtoClock2产品家族时钟产品具备业界超低功耗和超低75fs抖动,可简化设计 2021 年 4 月 27 日,日本东京讯 - 全球半导体解决方案供应商瑞萨电子集团今日宣布,面向数据中心、服务器和网络基础设施领域推出抖动低于100fs的全新“使用点”时钟解决方案,以扩展瑞萨时钟解决方案。全新FemtoClock2产品家族包括超低抖动时钟发生器和抖动衰减器,采用4mm x 4mm小型封装,可为新一代高速互连设计配置经济且简单的时钟树。 FemtoClock2可提供达64fs RMS的超低抖动性能,使客户能够轻松满足新交换机或路由器设计对新一代
[电源管理]
瑞萨电子推出体积更为紧凑小巧的全新16 位微控制器
半导体及解决方案供应商瑞萨电子株式会社(TSE:6723),今天宣布发布全新的 RL78/F13 和 RL78/F14 16 位微控制器(MCU),这两款微控制器可提高汽车控制系统的开发效率、降低系统成本、减少系统能耗并增强功能安全特性。 全新推出的 MCU共包含 91 款产品,其中 60 款属于 RL78/F13 产品群,31 款属于 RL78/F14 产品群。RL78/F13 MCU 适用于多种多样的车载用途,其中包括电动车窗和后视镜控制等车身控制系统,以及电动水泵和冷却风扇等汽车电机控制系统。RL78/F14 MCU 也可支持多种车身控制系统应用,例如 BCM (车身控制模块)以及 HVAC(加热、通风和空调)控制等
[单片机]
瑞萨电子携其展示车亮相2018 CES,助力加速ADAS、自动驾驶等
2017年12月28日,日本东京 - 汽车半导体解决方案供应商瑞萨电子株式会社(TSE:6723)今日宣布推出了新一代先进驾驶辅助系统(ADAS)、自动驾驶以及网联驾驶舱展示车。瑞萨电子三款展示车(从传感器融合、ADAS到网联驾驶舱)全面展示了基于先进的、技术可量产的集成系统,这些技术可帮助OEM和一级汽车零配件供应商应对从测试与模拟过渡到量产时自动驾驶汽车设计所面临的复杂挑战。以上三款展示车是瑞萨电子开放式、创新性和可信赖的Renesas autonomy™ Platform先进驾驶辅助系统(ADAS)和自动驾驶平台的一部分,可提供从云端互联到感知以及汽车控制的完整端到端解决方案。瑞萨电子借助Renesas autonomy平
[汽车电子]
瑞萨电子推出专用于3D图形仪表的R-Car D1系列汽车SoC
专用于3D图形仪表的瑞萨R-Car D1系列汽车SoC 2016年2月16日,日本东京讯 全球领先的半导体解决方案供应商瑞萨电子株式会社(TSE:6723)今日宣布推出R-Car D1系列作为R-car系列的首个片上系统(SoC)构件,专用于3D仪表系统。作为汽车半导体市场(注1)的领导者,瑞萨利用其深厚的技术积累和专长推出新系列产品为汽车系统制造商提供了一个平稳过渡的途径,因为越来越多的汽车系统预计在不久的未来将采用3D图形仪表系统。 随着仪表系统中彩色LCD屏的应用越来越广泛,在中小型轿车也更多的将机械指针和图形显示相结合。而在高档轿车中,追求易识别性和舒适性的 无机械指针 显示器已取得长足进步。可在大尺寸、
[汽车电子]
瑞萨捍卫汽车市场老大位置,MONOS技术成杀手锏?
车用电子商机勃勃,其中微控制器(MCU)的市场占比更是不容小觑,有鉴于此,瑞萨电子(Renesas Electronics)挟着独特的MONOS(Metal Oxide Nitride Oxide Silicon)技术,不仅在MCU制程上快速跨越90奈米(nm)门槛,进一步发展出高可靠度、高整合度的40奈米MCU,接下来更将以28奈米MCU积极朝车用新兴市场--先进驾驶辅助系统(ADAS)进攻。 瑞萨电子全球业务暨行销单位执行副总裁Manabu Kawashima指出,MONOS技术是瑞萨在MCU制程上得以大幅超越其他厂商的最佳利器,也因为这项技术让MCU的可靠度提升、整合度提高,对于目前车辆讲究功能安全性和支援更多新兴功能的趋势
[嵌入式]
瑞萨电子推出基于RZ/G Linux平台的安全解决方案
瑞萨电子与Linux Foundation 的CIP TM安全工作组合作,旨在将用户所需认证时间缩短达六个月 半导体解决方案供应商瑞萨电子株式会社TSE:6723)今日宣布,将于2019年12月底推出基于RZ/G Linux平台、支持IEC62443-4-2国际安全标准认证的安全解决方案,保护工业控制系统免受网络攻击,并有效缩短用户所需的认证时间。 在当今万物互联的世界,非常强大的安全措施日益重要。制造厂和发电厂等基础设施的工业控制系统一旦受到网络攻击,便可能对人们的生活和经济造成严重损害。因此,制定覆盖工业控制系统所有层面(运营商、系统集成商、设备供应商)和所有参与玩家(如制造厂、化工厂、发电厂、智能电网、交通等与工业、
[物联网]