2017年4月25日,中国北京——ARM今天正式发布Mali-C71图像信号处理器(ISP),应对汽车图像处理所面临的挑战,包括在极端条件下对图像进行快速的处理和分析,符合严苛的汽车安全标准的设计要求。Mali-C71也是ARM Mali Camera系列的第一款产品。
随着技术的演进,汽车已经成为一个充满活力的创新平台,不仅正在改变驾驶者的体验,也使得真正的自动驾驶离我们越来越近。先进驾驶辅助系统(ADAS)是这一技术演进的一个不可或缺的关键。一些最新的ADAS应用,例如更先进的后视镜、驾驶员疲劳检测以及行人保护系统,都对车内图像处理提出了更高的要求。这些技术要求更多数量的车内摄像头;据Strategy Analytics的预计,在未来几年内,绝大部分市售高端汽车将装有至多12个摄像头。
但是,这一类复杂摄像技术必须能够在极端条件下对图像进行快速的处理和分析,并且符合严苛的汽车安全标准的设计要求。将智能手机或者消费级视频摄像机中所使用的标准摄像技术整合到汽车内是不可行的。ARM Mali-C71正是为了应对这样的挑战应运而生,在其设计过程中完全考虑到了ADAS片上系统 (SoC)的需求,包括根据极端的照明和气候条件作出调整。
图像信号处理器(ISP)的作用正在改变
随着每辆汽车内摄像头数量的增加以及传感器融合技术变得越来越智能,ISP的功能——对原始像素进行处理,将其转换为高质量的图像以用于显示,进行编码并由计算机视觉算法进行进一步处理——正在被集中到ADAS SoC之上。因此,SoC需要能管理多个摄像头,满足对汽车可靠性和最高级别安全性的要求。这就要求有一种既具备内置功能安全特性,又能处理传输并行信号的计算机视觉处理方案。一直以来,在单一SoC上实现这一处理方式是难以达成的。现在,这一切得以改变。
Mali-C71: 汽车级清晰度和可靠性
汽车摄像头需要提供最高级别的清晰度和可靠性。当摄像头输出被用于显示时,图像质量是至为重要的。下图所示就是一个后视镜的例子。Mali-C71能够提供高达24档(24 stops)的超宽动态范围(UWDR)——在某些情况下,所提供的细节甚至超出了人眼所能辨识的范围。相比较而言,最好的单反相机只能达到大约15档的动态范围。Mali-C71能够进行多重曝光处理,对采集的数据进行去噪与合成,从而得到一幅超宽动态范围的图像,并将它发送到显示设备或计算机视觉引擎。
图片说明:为了在光线充足的情况下探测站在阴影里的行人,摄像头必须具备足够的动态范围来对所获取的情景中的所有元素进行辨识。
当摄像头被用作ADAS的输入时——例如,作为行人保护或者驾驶员疲劳检测系统的一部分——它需要满足最严苛的可靠性和功能性安全标准。Mali-C71的设计满足包括ISO26262、ASIL D、IEC 61508和SIL3在内的功能性安全标准,并将提供针对这些标准的安全包。该图像信号处理器有超过300个专用故障探测电路,能够提供低延滞和先进的错误检测。ARM提供用于控制图像信号处理器、传感器、自动白平衡以及自动曝光的所有参考软件,并计划开发完整的、ASIL合规的汽车软件。
下一代图像信号处理器不仅要生成能够用于显示的数据,还要对数据进行处理,以用于计算机视觉引擎,且二者必须同步进行。这些任务有着截然不同的需求,而Mali-C71以单个硬件IP,成功实现使用一个流水线生成两种不同的图像处理结果。
汽车行业正在持续加速实现完全自动驾驶的愿景。Mali-C71将提供显示所需的高质量图像输出,帮助驾驶员迅速做出正确的选择;也将同步地为计算机视觉引擎提供可靠的数据,帮助它在控制汽车的时候做出安全的决定。
关键字:ARM 图像信号处理器 汽车图像处理
引用地址:
ARM发布Mali-C71图像信号处理器,推动下一代汽车图像处理
推荐阅读最新更新时间:2024-07-25 19:32
ARM发布SBSA标准,抢攻服务器市场
安谋国际(ARM)架构伺服器发展再添新动能。安谋国际日前针对ARMv8-A 64位元处理器,发布全新的伺服器基础系统架构(Server Base System Architecture, SBSA)规格,期解决目前ARM架构伺服器软硬体发展无标准可循的问题,从而壮大ARM架构伺服器的市占版图。 ARM技术长Mile Muller表示,ARM架构伺服器的生态系统正火速成形,在此时发布基础系统架构标准将是重要里程碑;该架构标准可简化开发商设计基础系统的繁琐过程,使开发商能更专注于后端的创新设计,加速产品开发及上市时程。 Muller进一步指出,除了处理器厂商外,ARM亦将持续与作业系统业者、韧体及软体开发商合作推动此标准架构
[单片机]
OmniVision内窥镜和导管图像信号处理器增添3D和高性能选项
2019年2月11日,行业领先的数字图像解决方案开发商豪威科技公司(OmniVision Technologies)在国际 医疗 器械设计与制造贸易展览会 (MD&M West) 上宣布其 OVMed ® 医疗图像信号处理器 (ISP) 系列又增添了重要产品。这些产品旨在与它的高性能医疗图像传感器配合使用,以便快速集成到一次性的和可重复使用的内窥镜和导管中。豪威科技 2018年推出的通用 OVMed ISP 取得了成功,在此基础上,这五款新处理器为器械设计人员提供了更高的灵活性,打造了其他分辨率、帧频、输出以及出色的特征集选项。 豪威科技市场营销发展经理 Tehzeeb Gunja 表示:“我们将 OVMed 系列扩展为九种不同
[医疗电子]
采用ARM+Linux架构的基于CAN总线和MiniGUI的虚拟仪表设计
当今发达国家普遍使用全数字式汽车仪表,且绝大部分是步进电动机式汽车仪表,并准备向更高方向发展。由于受到成本的限制,目前国内显示汽车仪表只能选用字段显示方式的显示屏,无法选用显示分辨率更高的点阵式显示屏,因此其视觉效果和显示精度还不能令人满意。ECU性能不断提高,抗强电磁干扰、工作温度范围和对工作电源稳定性要求等方面得到较大的改善,同时价格大幅度降低,因而目前有条件在汽车仪表上使用ECU控制的全数字仪表,国内汽车仪表界一致看好全数字式汽车仪表 。随着现代电子技术的发展,要求汽车仪表与汽车上其他装置交换数据,即要求接入到汽车的计算机系统总线上,因此本文设计了一个基于嵌入式系统、CAN总线技术和TFT LCD液晶显示技术的全数字式汽车
[单片机]
基于ARM的实时语音识别系统在家庭监护机器人的实现
语音是人类最常用的交流方式,也是人类和计算机交流最渴望的方式。因此用语音同计算机交流也成为了最近研究的热点,计算机对语音的理解是计算机科学中的一个引人人胜的、富有挑战性的课题。 进入90年代,随着多媒体时代的来临,迫切要求语音识别系统从实验室走向实用。许多发达国家如美国、日本、韩国以及IBM、Apple、AT&T、NTT等著名公司都为语音识别系统的实用化开发研究投以巨资。IBM公司于1997年开发出汉语ViaVoice语音识别系统,次年又开发出可以识别上海话、广东话和四川话等地方口音的语音识别系统ViaVoice’98。目前市场上已经出现了语音识别电话、语音识别记事本等产品,如美国VPTC公司的Voice Organizer
[单片机]
ARM7(LPC2xxx)芯片的小总结
7种工作模式: fiq/irq/abt/und/sys/usr/svc。通过 MSR cpsr_c,#0xdx 切换。上电时进入svc模式。 svc和usr的区别是:svc可以通过 MSR cpsr_c,#0xdx 自由切换到其它任何模式,但是usr不可以。 各模式下有自己的堆栈。要在程序启动后依次进入各个模式分别设置自己的堆栈,最后进入usr模式。 Prefetch Abort和Data Abort模式: Prefetch Abort通常会发生在自修改指令之后。而Data Abort发生于向无效内存中取操作数时,通常是数据指针越过边界了。如果在scatter文件中不指定边界,若编译时内存分配超过了实际物理内存,一定会
[单片机]
搅局者接连到来 移动GPU市场格局生变
当前的手机 GPU 市场中,表面上高通、 ARM 和IMG三家厮杀的惨烈。英特尔和英伟达二家桌面大佬的加入,让一潭浑水变得更浑;随后三星宣布自家手机 GPU 已经研发成功,苹果几乎要与IMG绝交来研发 GPU ,七国之争最后将变为高通、 ARM 、苹果和三星的四国杀。下面就随网络通信小编一起来了解一下相关内容吧。 天下三分乱胜桌面GPU 与桌面端被英伟达、英特尔和AMD三家瓜分的GPU市场不同,手机GPU领域的竞争要乱的多。 高通占据了技术和专利优势,而助攻其霸占手机GPU领域的还是AMD。尽管GPU业务发展时间较短,高通的手机GPU处理器Adreno是安卓手机中最受欢迎的产品之一。在2006年,AMD收购
[网络通信]
基于ARM-μCLinux嵌入式系统启动引导的实现
32位ARM嵌入式处理器具有高性能、低轼耗的特性,已被广泛应用于消费电子产品、无线通信和网络通信等领域。ΜCLinux是专门为无MMU处理器设计的嵌入式操作系统,支持ARM、Motorola等微处理器。目前国内外采用ARM-μCLinux作为嵌入式系统非常普遍。而嵌入式系统的启动引导技术是嵌入式系统开发的一个难点。系统启动引导的成功与否决定了应用程序的运行环境是否能正确构建,即系统启动成功是应用正确运行的前提。 常用的嵌入式系统启动方法是先通过JTAG将嵌入式操作系统内核与进Flash,再由其带的引导程序bootloader完成嵌放式系统的启动引导工作。这种方法要借助昂贵的JTAG设备完成操作系统内核 的烧写工
[嵌入式]
基于ARM处理器的嵌入式系统设计
依据开发 周期 中软、硬件的划分,介绍系统在ARM处理器强大功能的基础之上,运算、处理、显示ADU3600板收集到的数据的过程;在详细阐述系统综合性能指标的基础上展现了产品应用的广阔前景。 现在社会是一个高度信息化、网络化的社会,计算机和网络已经全面渗透到日常生活的每个角落,信息时代、数字时代使得嵌入式产品获得了巨大的发展契机。嵌入式系统应用非常广泛,军事国防是嵌入式系统的一个重要应用领域。现在各种武器控制如火炮控制、导弹控制和智能炸弹制导引爆控制,以及坦克、舰艇、轰炸机、陆海空各种军用电子装备,雷达、电子对抗军事通信装备和野战指挥作战等各种专用设备上,都可见嵌入式系统的影子。 1 系统总体概述 1.1 系统结构
[单片机]