引言
目前,在嵌入式系统中,图像采集可以采用模拟摄像头、CCD图像传感器或CMOS数字图像传感器来实现。CMOS数字图像传感器由于其高性价比和直接输出数字图像数据而得到最为广泛的应用。MT9V011就是一个这样的CMOS数字图像传感器。本文将介绍MT9V011 CMOS数字图像传感器在一个低端ARM7处理器系统中的应用。
在低端嵌入式系统中增加图像采集系统
实时图像采集系统已经广泛应用于手机、PDA、实时监控系统等高端嵌入式系统中。在这类系统中,处理器具有以下特点:具有较高的处理速度可以实时处理采集回来的大量图像数据;具有较大的内存可以存放若干帧完整的图像数据;具有丰富的外设接口可以比较容易地扩展大容量的存储设备如CF卡、SD存储卡等来备份一些图像数据。然而在一些测控领域也需要采集图像,以使管理人员能够直观地监控被测对象。由于被测量的变化比较缓慢,因此不需要实时采集图像,每隔一段时间传回监控中心一幅图像就能满足要求。在这类系统中,处理器主要面向控制领域,它们的特点是内存比较小,处理速度比较慢,外设接口也不多。因此在这类低端嵌入式系统中增加图像采集功能要面临处理器处理能力有限和硬件资源受限制的问题。
CMOS图像传感器MT9V011
基于创新的CMOS活跃像素技术,美光的超低功耗MT9V011图像传感器融合了VGA分辨率和CCD所不具备的很多优越功能。它能以高达30fps的帧频输出高质量的逐行扫描图像,同时,与CCD产品相比,其电池寿命得到了大幅度延长,因此成为手机、PDA和PC机USB摄像头的理想选择。MT9V011将多种相机功能(包括窗口化、行镜像变换、左右和上下图像翻转、电子旋转快门(ERS)、列镜像变换)直接集成到芯片上,从而减少了CCD通常需要的额外组件,最大程度地缩小了产品尺寸和主板空间。其变量功能如可编程增益、帧频和曝光控制等可以在默认模式下操作,也可由最终用户通过一个简单的两线I2C接口进行编程实现。
MT9V011默认输出的是一幅640×480像素的图像。MT9V011芯片的工作时序如图1所示。其中,LINE_VALID是行有效信号,PIXCLK是像素时钟信号,DOUT9~DOUT0是10位的图像数据,FRAME_VALID是帧有效信号。LINE_VALID有效期间共有640个PIXCLK时钟周期,FRAME_VALID有效期间共有480个LINE_VALID有效信号。默认情况下图像数据从第1行第1列开始在PIXCLK信号的上升沿顺序输出。MT9V011输出的图像格式是RGB。Bayer类型。
系统设计方案
本图像采集系统基于飞利浦的低端ARM7嵌入式微处理器LPC2104,CMOS摄像头芯片采用美光公司的MT9V011。MT9V011的图像输出速率最大可达30fps,而LPC2104处理器的I/O口读写速度远远不够,循环将它的某一个I/O口置为高后,随即置低,输出的方波频率也不超过4MHz。另外,传输图像的数据量相对于资源有限的嵌入式系统来说太大了,MT9V011默认情况下输出一幅图像的数据量大小为300KB,而LPC2104处理器的内存大小仅为16KB,而且没有开放存储器扩展总线,在处理器外部扩展存储器很不方便。其它的低端控制处理器如AVR单片机、MCS51单片机等都存在这样的问题,但是由于它们具有较高的性价比、开发调试比较方便和能够比较快速地组建应用系统,因此它们在许多领域都有广泛的应用。
针对此类处理器的一些资源和性能限制,可以采取一些辅助措施来解决。由于可编程逻辑器件具有处理速度快和能够在线编程等诸多优点,十分适合与此类低端处理器相结合来解决一些纯处理器系统无法解决的问题。随着可编程逻辑器件技术的发展和相关技术的进步,此类系统得到了越来越广泛的应用。本文就是采用这种方案来解决单一处理器无法完成图像采集的问题。具体方案是由一片可编程逻辑器件来与MT9V011接口,控制图像数据缓存到一片SRAM中,然后通知处理器读取数据。这样就同时解决了处理器I/O传输速度慢和内存不足两个问题,能够组建系统,完成图像采集功能。图像采集系统框图如图2所示。系统由四大部分组成:CMOS摄像头电路、摄像缓存控制逻辑电路、SRAM存储器和32位嵌入式系统总线接口。系统摄像缓存控制逻辑电路由CPLDEPM7128S实现。
CPLD控制逻辑设计
因为受到I/O传输速率和内存的限制,系统主处理器LPC2104无法完成采集图像并存储的功能。因而,只能借助于在系统中扩展1片CPLD来协作完成系统功能。由CPLD片内的控制逻辑电路完成读取图像数据并缓存到SRAM中的功能。因为系统不是实时图像采集与处理,可以改变输入时钟,来降低CMOS数字图像传感器输出图像的速率。系统中CPLD的时钟采用40MHz,将经过10分频后的时钟作为CMOS图像传感器的时钟。这样降低了图像输出的速率,减轻了处理器进行图像数据处理的负担,使处理器有空闲时间进行其它控制操作。由于CPLD要读取CMOS图像传感器输出的图像数据并缓存到SRAM中,因此CPLD的片内逻辑主要是根据图像传感器输出图像数据的时序和SRAM的读写时序来编写。CPLD片内的控制逻辑电路主要由Verilog语言编写的状态机实现。另外还有一些附加的门电路、多路选择器和加法器,它们和状态机共同组成了系统的摄像头缓存控制逻辑电路。CPLD控制逻辑流程图如图3所示。
功能验证
为了验证系统的图像采集功能,需要对CPLD缓存的数据进行处理及显示。由于PC机具有丰富的软硬件资源,因此本文利用PC机来显示图像,验证图像采集功能的正确性。具体方法是:系统主处理器LPC2104读取SRAM中的图像数据并通过串口传送给PC机,在PC机上编写软件接收数据并做简单的处理就可以在PC机屏幕上显示出图像,从而能够验证系统的功能。
结语
本文通过在一个低端的嵌入式处理器系统中添加CMOS数字图像传感器,并编写硬件描述语言程序、嵌入式处理器程序,实现了采集图像的功能。文中给出了一个在低端嵌入式系统中增加图像采集功能的实现方案,该方案具有性价比高,通用性强等优点,可广泛应用于各种基于低端嵌入式处理器的监控系统中,使监控管理人员可以直观地了解被监控的对象。该方案还可以进一步实现许多扩展功能,如图像对比和图像识别等。
关键字:传感器 处理器 实时
引用地址:基于32位低端嵌入式系统的图像采集模块
目前,在嵌入式系统中,图像采集可以采用模拟摄像头、CCD图像传感器或CMOS数字图像传感器来实现。CMOS数字图像传感器由于其高性价比和直接输出数字图像数据而得到最为广泛的应用。MT9V011就是一个这样的CMOS数字图像传感器。本文将介绍MT9V011 CMOS数字图像传感器在一个低端ARM7处理器系统中的应用。
在低端嵌入式系统中增加图像采集系统
实时图像采集系统已经广泛应用于手机、PDA、实时监控系统等高端嵌入式系统中。在这类系统中,处理器具有以下特点:具有较高的处理速度可以实时处理采集回来的大量图像数据;具有较大的内存可以存放若干帧完整的图像数据;具有丰富的外设接口可以比较容易地扩展大容量的存储设备如CF卡、SD存储卡等来备份一些图像数据。然而在一些测控领域也需要采集图像,以使管理人员能够直观地监控被测对象。由于被测量的变化比较缓慢,因此不需要实时采集图像,每隔一段时间传回监控中心一幅图像就能满足要求。在这类系统中,处理器主要面向控制领域,它们的特点是内存比较小,处理速度比较慢,外设接口也不多。因此在这类低端嵌入式系统中增加图像采集功能要面临处理器处理能力有限和硬件资源受限制的问题。
CMOS图像传感器MT9V011
基于创新的CMOS活跃像素技术,美光的超低功耗MT9V011图像传感器融合了VGA分辨率和CCD所不具备的很多优越功能。它能以高达30fps的帧频输出高质量的逐行扫描图像,同时,与CCD产品相比,其电池寿命得到了大幅度延长,因此成为手机、PDA和PC机USB摄像头的理想选择。MT9V011将多种相机功能(包括窗口化、行镜像变换、左右和上下图像翻转、电子旋转快门(ERS)、列镜像变换)直接集成到芯片上,从而减少了CCD通常需要的额外组件,最大程度地缩小了产品尺寸和主板空间。其变量功能如可编程增益、帧频和曝光控制等可以在默认模式下操作,也可由最终用户通过一个简单的两线I2C接口进行编程实现。
MT9V011默认输出的是一幅640×480像素的图像。MT9V011芯片的工作时序如图1所示。其中,LINE_VALID是行有效信号,PIXCLK是像素时钟信号,DOUT9~DOUT0是10位的图像数据,FRAME_VALID是帧有效信号。LINE_VALID有效期间共有640个PIXCLK时钟周期,FRAME_VALID有效期间共有480个LINE_VALID有效信号。默认情况下图像数据从第1行第1列开始在PIXCLK信号的上升沿顺序输出。MT9V011输出的图像格式是RGB。Bayer类型。
系统设计方案
本图像采集系统基于飞利浦的低端ARM7嵌入式微处理器LPC2104,CMOS摄像头芯片采用美光公司的MT9V011。MT9V011的图像输出速率最大可达30fps,而LPC2104处理器的I/O口读写速度远远不够,循环将它的某一个I/O口置为高后,随即置低,输出的方波频率也不超过4MHz。另外,传输图像的数据量相对于资源有限的嵌入式系统来说太大了,MT9V011默认情况下输出一幅图像的数据量大小为300KB,而LPC2104处理器的内存大小仅为16KB,而且没有开放存储器扩展总线,在处理器外部扩展存储器很不方便。其它的低端控制处理器如AVR单片机、MCS51单片机等都存在这样的问题,但是由于它们具有较高的性价比、开发调试比较方便和能够比较快速地组建应用系统,因此它们在许多领域都有广泛的应用。
针对此类处理器的一些资源和性能限制,可以采取一些辅助措施来解决。由于可编程逻辑器件具有处理速度快和能够在线编程等诸多优点,十分适合与此类低端处理器相结合来解决一些纯处理器系统无法解决的问题。随着可编程逻辑器件技术的发展和相关技术的进步,此类系统得到了越来越广泛的应用。本文就是采用这种方案来解决单一处理器无法完成图像采集的问题。具体方案是由一片可编程逻辑器件来与MT9V011接口,控制图像数据缓存到一片SRAM中,然后通知处理器读取数据。这样就同时解决了处理器I/O传输速度慢和内存不足两个问题,能够组建系统,完成图像采集功能。图像采集系统框图如图2所示。系统由四大部分组成:CMOS摄像头电路、摄像缓存控制逻辑电路、SRAM存储器和32位嵌入式系统总线接口。系统摄像缓存控制逻辑电路由CPLDEPM7128S实现。
CPLD控制逻辑设计
因为受到I/O传输速率和内存的限制,系统主处理器LPC2104无法完成采集图像并存储的功能。因而,只能借助于在系统中扩展1片CPLD来协作完成系统功能。由CPLD片内的控制逻辑电路完成读取图像数据并缓存到SRAM中的功能。因为系统不是实时图像采集与处理,可以改变输入时钟,来降低CMOS数字图像传感器输出图像的速率。系统中CPLD的时钟采用40MHz,将经过10分频后的时钟作为CMOS图像传感器的时钟。这样降低了图像输出的速率,减轻了处理器进行图像数据处理的负担,使处理器有空闲时间进行其它控制操作。由于CPLD要读取CMOS图像传感器输出的图像数据并缓存到SRAM中,因此CPLD的片内逻辑主要是根据图像传感器输出图像数据的时序和SRAM的读写时序来编写。CPLD片内的控制逻辑电路主要由Verilog语言编写的状态机实现。另外还有一些附加的门电路、多路选择器和加法器,它们和状态机共同组成了系统的摄像头缓存控制逻辑电路。CPLD控制逻辑流程图如图3所示。
功能验证
为了验证系统的图像采集功能,需要对CPLD缓存的数据进行处理及显示。由于PC机具有丰富的软硬件资源,因此本文利用PC机来显示图像,验证图像采集功能的正确性。具体方法是:系统主处理器LPC2104读取SRAM中的图像数据并通过串口传送给PC机,在PC机上编写软件接收数据并做简单的处理就可以在PC机屏幕上显示出图像,从而能够验证系统的功能。
结语
本文通过在一个低端的嵌入式处理器系统中添加CMOS数字图像传感器,并编写硬件描述语言程序、嵌入式处理器程序,实现了采集图像的功能。文中给出了一个在低端嵌入式系统中增加图像采集功能的实现方案,该方案具有性价比高,通用性强等优点,可广泛应用于各种基于低端嵌入式处理器的监控系统中,使监控管理人员可以直观地了解被监控的对象。该方案还可以进一步实现许多扩展功能,如图像对比和图像识别等。
上一篇:基于USB总线和89C51单片机的数据采集系统设计
下一篇:设计灵活、高性能的嵌入式系统——软处理和IP定制同时确保灵活性和性能
推荐阅读最新更新时间:2024-05-02 20:27
SA: 2013年Q3平板应用处理器排名大调整
1月6日消息,Strategy Analytics手机元器件技术 (HCT) 服务发布最新研究报告《2013年Q3平板应用处理器市场份额:高通升至非iPad平板市场第一名》指出,2013年Q3全球平板处理器市场与去年同期相比增长30%,市场规模达12亿美元。苹果、高通、英特尔、三星和联发科攫取平板应用处理器市场收益份额前五名。该季度苹果继续以40%的收益份额保持市场主导地位,高通和英特尔分别以13%和8%的份额紧随其后。 Strategy Analytics高级分析师Sravan Kundojjala谈到:“得益于谷歌Nexus 7 2013和亚马逊Kindle Fire HDX的设计中标,该季度高通凭借收益份额升至排名
[手机便携]
实时功率GaN波形监视
Grant Smith,德州仪器 (TI) 业务拓展经理 简介 功率氮化镓 (GaN) 器件是电源设计人员工具箱内令人激动的新成员。特别是对于那些想要深入研究GaN的较高开关频率如何能够导致更高频率和更高功率密度的开发人员更是如此。RF GaN是一项已大批量生产的经验证技术,由于其相对于硅材料所具有的优势,这项技术用于蜂窝基站和数款军用/航空航天系统中的功率放大器。在这篇文章中,我们将比较GaN FET与硅FET二者的退化机制,并讨论波形监视的必要性。 使用寿命预测指标 功率GaN落后于RF GaN的主要原因在于需要花时间执行数个供货商所使用的成本缩减策略。最知名的就是改用6英寸的硅基板,以及更低成本的塑料封装。对
[电源管理]
Ampere下一代处理器将放弃Arm转而采用定制化内核
上周,微软宣布在全球 10 个 Azure 地区全面推出采用 Ampere Altra 处理器的 Azure 虚拟机。这标志着 Ampere 的又一次重大胜利,它在云领域正在赢得众多供应商的青睐,包括谷歌、Cloudflare、腾讯和甲骨文等等。 这些新的虚拟机经过设计和配置,可有效运行新兴的横向扩展、云原生工作负载,例如应用服务器、海量数据库、云游戏和媒体服务器等。 “Ampere 的云原生处理器经过独特设计,可同时满足云的高性能和能效需求。通过我们与 微软的紧密合作,Ampere Altra 处理器现在可作为 Azure 虚拟机普遍使用,从而帮助以云为中心的新处理器用户,以便他们可以大规模部署下一代创新云应用,并以可持
[网络通信]
72核心+7nm工艺,新一代ARM处理器将赋予超算新魔力
这两年,基于ARM IP打造多核心、高性能处理器的厂商众多,其中既有亚马逊、Marvell这样的行业巨头,也有SiPearl这样的初创企业。 SiPearl来自法国,是欧洲委员会资助的新项目之一,今年1月刚刚成立,4月宣布获得ARM下一代处理器核IP Zeus的授权,致力于为欧洲的百亿亿次超级计算机设计高性能、低功耗的处理器。 近日,SiPearl披露了其第一款产品,代号“Rhea”(美洲鸵鸟),设计图显示采用台积电7nm工艺制造,集成多达72个CPU核心,Mesh网格式布局,其中68个核心有自己的三级缓存。 另外,它还集成了四组HBM2E高带宽内存控制器、4-6个通道的DDR5内存控制器。这种混合设计显然是为
[嵌入式]
传感器信号通道设计
本设计指南阐述了常见传感器变送器的信号链路,适用于压力、温度、电流、光信号检测以及接近检测。文章介绍了信号通道错综复杂的选择,其中给出的设计案例和原理框图有助于读者选择最佳器件,以满足系统的不同需求。
压力传感器和称重(加载/感应)
概述
在现代工业控制和系统监测领域,通常需要监测、测量压力和重量。由于压力可直接用来测量流体、高度及其它物理量,压力测量尤其重要。由于加载是影响传感器输出的一项属性,压力、重量测量装置可以看作是“加载传感器”。加载传感器的应用非常广泛,包括从真空计到重型机械称重,以及工业液压设备、绝对压力传感器等各个领域。每种应用对精度、准确度和成本都有不同的具体需求。
虽然压力和重量(加载/感应)的
[嵌入式]
汽车空调控制器及其关键元器件的选择:中科阿尔法霍尔电流传感器AH91X、AH950
汽车空调系统(Air Condition,简称AC)是指能对车内空气进行调节的系统,主要有制冷系统、制热系统、通风系统和空气净化系统。 空调控制器连接着车内多个传感器,能够通过这些传感器准确获取车内环境。同时,控制器通过CAN与空调控制面板通讯, 可以实时的获取驾驶员对环境的要求。利用内部算法,通过CAN来控制空调压缩机与空调PTC,鼓风机并且通过控制风门电机、阀门等执行器件,来达到对车内环境的精确控制。详细的空调控制器框图如下: 在上述汽车空调的控制能系统中,需要对电流进行检测,这就需要工程师选择合适的电流传感器来进行设计。我们可以把电流检测分为几个范围: 0-40A AH91X霍尔电流传感器IC,是工业、汽车
[嵌入式]
倾角传感器在汽车防盗系统中的应用
倾角传感器在汽车防盗系统中的应用
现代汽车的防盗系统通常采用对车体的冲击、振动监测的方式防盗预警,常用的多为磁效应传感器。虽然其敏感性能很好,但由于存在装配、安装误差,其频率响应不稳定,致使系统报警的可靠性降低,误报率较高。另外,拖车或整车搬运的方法也是目前窃赋盗窃汽车常用的手段,对付这种盗窃方式最有效的方法是对车体的倾斜角度进行监测,而磁效应传感器无法测量静态加速度,也就无法对此进行监测预警。总之,如今需要更合理、更可靠的倾角传感器来替代。
主流的都使用MEMS工艺制作的低价格、低功耗、单芯片集成双轴加速度传感器。
NA5200系列9~30V宽电压供电,可以测量±90°范围内的倾角,分辨率高达0.001°至0.005
[嵌入式]
开发AI控制技术,对运行中的FA设备进行实时调整
三菱电机株式会社(以下简称三菱电机)和国立研究开发法人产业技术综合研究所(以下简称产综研)开发了能够预测制造现场的环境变化和加工对象物的状态变化,实时调整运行中的FA设备的加工速度等参数的AI控制技术。该技术使得FA设备的调整不再需要人手和耗费时间,同时将AI预测的加工误差量等结果的可靠性形成指标,根据可靠性合理控制FA设备。这样,即使在各种加工环境下也能实现高可靠性的稳定动作,即使在品种多、数量不固定的生产制造工序中也能为提高生产效率做出贡献。 实时调整的AI控制技术概念图 开发背景 近年来,随着用户需求的多样化,要求制造行业能够适应品种多、数量不固定的生产,生产的产品常常频繁变化。为了应对这种情况,在生产各种产品
[工业控制]
小广播
热门活动
换一批
更多
最新嵌入式文章
更多精选电路图
更多热门文章
更多每日新闻
- CGD和Qorvo将共同革新电机控制解决方案
- 是德科技 FieldFox 手持式分析仪配合 VDI 扩频模块,实现毫米波分析功能
- 贸泽开售可精确测量CO2水平的 英飞凌PASCO2V15 XENSIV PAS CO2 5V传感器
- 玩法进阶,浩亭让您的PCB板端连接达到新高度!
- 长城汽车研发新篇章:固态电池技术引领未来
- 纳芯微提供全场景GaN驱动IC解决方案
- 解读华为固态电池新专利,2030 叫板宁德时代?
- 让纯电/插混车抓狂?中企推全球首款-40℃可放电增混电池,不怕冷
- 智驾域控知多少:中低端车型加速上车,行泊一体方案占主体
- Foresight推出六款先进立体传感器套件 彻底改变工业和汽车3D感知
更多往期活动
11月14日历史上的今天
厂商技术中心