基于ICM105C图像传感器实现设备采集系统和接口设计

发布者:星光小狐狸最新更新时间:2023-05-05 来源: elecfans关键字:图像传感器  MC9328MX1 手机看文章 扫描二维码
随时随地手机看文章

目前数字摄像技术,主要采用两种方式:一种是使用CCD(电容耦合器件)图像传感器,另一种是使用CMOS(互补金属氧化物半导体)图像传感器。


CCD图像传感器具有读取噪声低、动态范围大、响应灵敏度高等优点。但CCD技术难以与主流的CMOS技术集成于同一芯片之中。因而CCD图像传感器具有体积大、功耗高等缺点。


CMOS图像传感器是近些年发展较快的新型图像传感器,由于采用了CMOS技术,可以将像素阵列与外围支持电路(如图像传感器核心、单一时钟、所有的时序逻辑、可编程功能和模数转换器)集成在同一块芯片上。因此与CCD相比,CMOS图像传感器将整个图像系统集成在一块芯片上,具有体积小、重量轻、功耗低、编程方便、易于控制等优点。对于手持式设备来说,体积和功耗是进行软硬件设计时重点考虑的问题,因此CMOS图像传感器应用在手持式设备当中将会有广阔的前景。


文中将就嵌入式系统中设计CMOS图像传感器的图像采集设备硬件接口技术和软件驱动进行研究。


系统硬件设计

嵌入式系统硬件平台选择

摩托罗拉MC9328MX1处理器基于ARM920T嵌入式处理器内核,能工作于高达200MHz的主频。它集成了许多模块,支持接口模块、GPIO(General Purpose I/O)接口模块、时钟产生模块(CGM,Clock Generation Module)等,为各种外设提供了灵活的接口控制功能。摩托罗拉MC9328MX1处理器内置的CSI(CMOSSensor Interface)模块提供了时序控制模块,可以适应不同CMOS图像传感器的要求。


COMS图像传感器的选择

ICM105C是IC Media公司生产的一种单芯片数字彩色图像器件,使用1/4英寸的光学系统。它内置了一个640×480(650×490物理像素)传感器阵列、数模转换器和相关双采样电路。它的控制部分使用I2C总线,只需要一个I2C总线的从设备地址就可以对其内部的控制和状态寄存器进行设置和读取。ICM105C输出的是贝叶尔格式的图像数据,其中的RGB颜色分量可以被数字增益所调整,可以反馈给嵌入式处理器进行色彩处理或压缩。


接口电路的设计

接口电路设计主要应考虑图像传感器的电源驱动控制电路的接口以及数据输出电路的接口。ICM105C使用3V的电源驱动、24MHz的时钟频率,输出8位的数据,控制部分主要使用总线,要保证ICM105C正常工作必须提供这些条件。


(1)电源驱动电路的设计。由于CMOS图像传感器是电源敏感元件,如果电源不稳会给成像效果造成很大影响。ICM105C对于供电电压的要求为3V,最小2.8V,最大3.1V,并且分开了数字电源和模拟电源。但是主处理板只提供了单3V的电源,而且这个电源同时提供给主处理板芯片使用,所以必须采取相应的机制保证电源的稳定和数字电源和模拟电源的隔离,同时本系统的另一个设计目标是小型化和简单化。为了兼顾这两者的要求,电源设计舍弃了使用复杂的稳压芯片的方案,仅使用电容和电感来稳定电压和消除数字电源和模拟电源之间的干扰,其电路图如图1 所示。

基于ICM105C图像传感器实现设备采集系统和接口设计

图1 电源驱动原理图

VDD 3V是主板提供的电源,VCCD和VCCA分别是提供给ICM105C 的数字电源和模拟电源,其中L1,L4,C1,C3起到隔离数字电源和模拟电源及滤波的作用。数字地和模拟地也用电感消除干扰。


(2)数据输出接口电路设计。摩托罗拉MC9328MX1处理器内置的CSI 模块提供了时序控制模块,这样可以简化电路的设计,只需要将8位数据线和输出时钟还有场频、行频和像素时钟与CSI 模块连接即可保证处理器的正确采集数据。具体的逻辑连接关系如图2 所示。

图2 ICM105C和主处理板的逻辑连接图

其中时钟线是从MC9328MX1输入24MHz的时钟信号,PCLK是CMOS输出的像素时钟,VSYNC是场频,HSYNC是行频,DOUT[0-7]为输出的数据。其时序关系如图3所示。DOUT[7:0]在PCLK时钟上升沿有效,HSYNC和VSYNC处于低电平时有效。为了达到这种时序效果需要对芯片的某些引脚进行正确地初始化设置。ICM105C的引脚37控制数据的同步模式,用上拉电阻接高电平,这样可以使传感器输出HSYNC 和VSYNC 同步信号。

图3 ICM105C的数据输出时序图

HSYNC和VSYNC的极性也可以进行配置,将引脚46和47接地,这样HSYNC和VSYNC在有效时为低电平。引脚14为时钟选择信号,将其接地表示使用外部时钟,这样内部晶振输入引脚12、13就可以悬空。


(3)控制电路设计。要使传感器正常工作,必须对芯片内部的寄存器进行初始化。初始化的工作必须通过传感器的I2C接口进行。ICM105C提供了一种硬件初始化的方式,如果引脚33在芯片启动时为高电平,那么传感器的I2C接口将首先工作在主设备模式下,并且试图从外部的串行EEPROM中读取初始化数据。然后,传感器又回到正常的从设备工作模式下。为了使接口电路简单化,直接用主处理板的I2C 接口来控制传感器,将此引脚接地,使其工作在从模式,这样EEPROM 部分的电路就可以舍弃。


软件驱动

CMOS图像传感器需要嵌入式系统的软件驱动才能正常工作,并输出正确的图像数据。由于处理端的嵌入式系统采用的是嵌入式Linux 操作系统,I2C接口的驱动程序已经集成在操作系统内部,中断资源可以作为资源来申请,操作系统还提供了调用其它资源的接口函数,这极大地方便了驱动程序的编写。在本次设计中采用了Linux系统下模块形式的字符设备驱动程序的编写方法。整个软件驱动需要完成两个功能模块:接口的初始化模块和接收输出的数据。


初始化

(1) CSI模块的初始化。根据ICM105C芯片的数据手册,CSI 的重置信号需要保持有效直至输入电压保持恒定大于两个时钟周期,图4是时序图。

图4 软重置信号时序图

由于主处理板是一上电就开始工作,而ICM105C的驱动程序必须在处理板上的操作系统启动后才开始工作。尤其是时钟信号只有在驱动加载后才开始提供给ICM105C ,要造成重置信号的时序效果,必须使用一个软件控制的重置信号,在时钟输出到传感器后至少两个时钟周期保持有效,然后拉高电平使之无效。在设计中,采用了摩托罗拉MC9328MX1处理器一个GPIO端口来实现软重置信号。

(2)设置时钟,初始化I2C接口。ICM105C需要24MHz的时钟,摩托罗拉的MC9328MX1处理板的外频是96MHz ,因此需要四分之一的主频。只需要设置相应的时钟产生模块寄存器的值即可保证输出24MHz。I2C总线的两个信号线SDA,SCL 需要设置相应GPIO的两个引脚,使其用来进行I2C传输。还需要挂载Linux操作系统的I2C驱动,编写I2C读和写的功能函数。需要注意的是ICM105C的I2C地址值为21H。

(3)初始化CMOS传感器。ICM105C内部控制和状态寄存器通过I2C 总线来初始化CMOS,初始化序列(寄存器的地址、值序列)由IC Media公司提供,初始化完成后,就可以接收到数据和时序信号了。


接收数据

接收数据是驱动程序中最重要的一个部分,它需要协调好中断和DMA 传输,保证数据的正确接收,并且在出错时能够正确地恢复。这一部分的软件流程如图5所示。

图5 接收数据软件流程图

其中在开始阶段申请中断和DMA资源并申请内存空间存放接收的数据。中断的主要任务是在每一帧开始时,开始DMA传输。DMA传输主要将从FIFO中读出数据保存在内存中,并处理可能出现的错误。本例中一旦出现DMA传输错误就丢弃该帧。


数据处理

下面就是数据的处理模块。由于接收到的数据还是原始数据,需要处理才能形成最终的图像数据。


具体的处理过程如下:

(1)线性插值。由于制作工艺的问题,CMOS图像传感器中的感光点只能放置一种滤色片,也就是说它的每个物理像素点只能感应R 或G或B一种颜色,这就是贝叶尔格式的数据(如图6所示)。它必须经过插值运算才能得到每个像素的RGB值。

图6 贝叶尔格式(Bayer pattern)

由上图可以看出,每个像素点都有8个相邻的像素点,而且这8个像素点的颜色分量与此像素点不同。插值算法就是依据相邻的像素点的颜色值的空间相关性原理进行的。其处理方法如下:

a. 只有R颜色分量的像素点,其G颜色分量由周围4个G的平均值计算得出。B颜色分量由周围4个B的平均值计算得出。

b. 只有B颜色分量的像素点,其R颜色分量由周围4个R的平均值计算得出,G颜色分量由周围4个G平均值计算得出。

c. 只有G颜色分量的像素点,其R颜色分量由上下2个R的平均值计算得出,B颜色分量由左右2个B平均值计算得出。经过插值运算,每个像素点的RGB都得出了,这就形成了完整的图像数据。

(2)白平衡。任何物体在不同的光线下具有不同的色温。所谓色温,简而言之,就是定量地以开尔文温度表示色彩。色温越高,物体的蓝色分量就越多;色温越低,物体的红色分量就越多。由于人眼具有自调节性,所以即使物体色温不同,也能正确识别出颜色。但是CMOS图像传感器没有自调节性,所以当在户外日光下拍摄物体时,物体的颜色就会因为色温高而偏蓝。而在室内的荧光灯下拍摄物体时,物体的颜色就会因为色温低而偏红。要得到正确的颜色,必须进行白平衡。白平衡的基本原理是调整颜色的色温,使其保持在一个特定的范围内。在此接口的应用中采用了一个较简单的白平衡方法,其处理过程如下:

a. 首先求出一幅图像的数据每个颜色分量的平均值:

b. 求出最大的平均值:

c. 求出每个颜色数据的白平衡后的校正值:

经过这样的运算就得到了白平衡后的数据。目前白平衡还没有很好的算法来处理一切情况,这只是一个简单的算法。


结论

文中提出的ICM105C图像传感器的接口技术已经成功应用在二维条码识读器当中,为了实际应用的需要,ICM105C的电路模块被设计成只有35mm×35mm大小,通过一个20芯的排线与主处理板连接。正常工作时功耗低于50mW,采集的图像数据良好,而且可以通过软件来控制图像传感器的工作方式,非常适用于手持式设备的应用。


关键字:图像传感器  MC9328MX1 引用地址:基于ICM105C图像传感器实现设备采集系统和接口设计

上一篇:ARM Cortex-M3的嵌入式网络播放系统设计应用
下一篇:基于MC9328MX1处理器实现ICM105C图像采集设备的接口设计

推荐阅读最新更新时间:2024-11-04 09:18

豪威科技发布830 万像素、140 dB 高动态范围汽车图像传感器
2019 年 12 月 9 日——豪威科技,全球排名前列的数字成像解决方案商,今日正式发布两款全新车规级图像传感器平台新品——800 万像素前向摄像头 OX08A 和 OX08B。OX08A 高清摄像头提供了业内优秀的高动态范围 (HDR);而集成于芯片上的 HALE(HDR 和 LFM 引擎)合成算法,兼容引脚的 OX08B 为 LED 闪烁抑制 (LFM) 性能树立了新的标杆。优异的清晰度和动态范围,以及集成的 ASIL-C 功能安全,对先进驾驶辅助系统 (ADAS) 和 Level 3+ 级自动驾驶等前视车载应用而言较为关键,因为能否在各种光照条件下准确检测远处的人体和物体,直接关系到行车安全。 豪威科技之所以开
[汽车电子]
豪威科技发布830 万像素、140 dB 高动态范围汽车<font color='red'>图像传感器</font>
安森美半导体CCD图像传感器增加天文摄影和科学影像的选择
KAF-16200为高要求的影像应用提供高分辨率和低噪声 安森美半导体(ON Semiconductor,美国纳斯达克上市代号: ON),正扩大图像捕获用于高要求的天文摄影和科学影像的阵容,提供新的1620万像素的电荷耦合器件(CCD)图像传感器。 新的KAF-16200 CCD图像传感器利用安森美半导体先进的设计和制造能力,能捕获最高质量的图像。该器件的全帧CCD架构提供同类最佳的图像均匀性和暗电流,并使用6.0微米( m)像素与透明的门电极提供高灵敏度、高动态范围,和集成的过度曝光保护。这一切令KAF-16200在APS-H(对角线34.6 mm)光学格式内提供卓越的图像和细节。 安森美半导体
[传感器]
豪威科技发布OV9284 1-Mpixel全域式快门图像传感器
据外媒报道,豪威科技(OmniVision Technologies)的OV9284 1-Mpixel全域式快门图像传感器(global shutter image sensor)是乘用车座舱内摄像头模块的理想之选。该款产品可被用作为驾驶员状态监控(driver state monitoring,DSM)和乘客监控用摄像头,这类产品的尺寸通常很小,且须符合最严苛的安全法规要求。 据该公司透露,该款全域式快门图像传感器市场定位自动驾驶车辆,须符合3级半自动驾驶车辆安全法规的相关要求。半自动驾驶车辆采用驾驶员状态监控系统来追踪驾驶员的眼神注视(eye gaze),当驾驶员困倦或精神不集中时,接管车辆的操控。驾驶员监控新系统目前被用
[汽车电子]
豪威科技发布OV9284 1-Mpixel全域式快门<font color='red'>图像传感器</font>
Aptina演示2500万像素移动图像传感器产品
Aptina AR2520HS为移动设备带来2500万像素照片、4K视频和全视场120 fps 1080p 高清视频能力。 全球智能成像解决方案供应商Aptina公司在2014巴塞罗那世界移动通信大会(Mobile World Congress, MWC)上展示了业界首个2500万像素图像传感器产品。Aptina AR2520HS凭借高性能视频功能超越了现有的传感器产品,在30fps下可实现全分辨率和4K视频,并可提供用于1080p 高清(HD)视频的120fps超慢运动捕获,所有这些都不会影响全视场功能。AR2520HS结合了惊人的静态照片清晰度和Aptina MobileHDR™移动运算高动态范围(Mobile Hi
[手机便携]
安森美的智能成像方案使道路更安全
随着汽车中的高性能 CMOS 成像、激光雷达等智能感知配置的增加,汽车自动驾驶水平在不断提高,同时减少交通事故伤亡,提高道路安全性。领先于智能电源和智能感知技术的安森美(onsemi)提供全系列智能感知方案,包括图像传感器、超声波、激光雷达及传感器融合,其图像传感器在先进辅助驾驶系统(ADAS)及自动驾驶领域拥有超过80% 的市场份额,并具备高分辨率、高动态范围(HDR)、LED抗闪烁(LFM)、安全可靠等优势,加持全面的产品组合,包括电源管理、照明方案、电机驱动器、系统设计专知、参考设计、强大而灵活的开发套件、经验丰富的应用支援、符合 ISO-26262/ASIL 标准的关键器件以及广泛的合作伙伴生态系统,支持安全地ADAS及L
[汽车电子]
安森美的智能成像方案使道路更安全
具有点测光功能的130万像素小型(SFF)CMOS图像传感器
具有点测光功能的130万像素小型(SFF)CMOS图像传感器 ADCC-3100通过较少的像素捕获更多的光线,使更薄的手机设计成为可能,从而有效地解决了SFF的技术挑战。其在芯片上的图像处理技术不需要增加占用空间、消耗大量功率的配套芯片,同时降低了系统处理开销、设计复杂性,缩短了投放市场的周期。ADCC-3100比铅笔上的橡皮头还要小,可以简便地存放在6.0mm×6.0mm×4.5mm小型轻薄的摄像模块中。 ADCC-3100的核心采用Avago Technologies(安华高科技)增强型像素和阵列结构及图像信号传输处理技术,大幅度提高了照片的图像质量。增强型像素结构可以降低暗电流和噪声,并且消除镜头阴影的影响,可与CCD传
[模拟电子]
具有点测光功能的130万像素小型(SFF)CMOS<font color='red'>图像传感器</font>
ams推出新系列高速工业图像传感器,具有超高分辨率
高性能传感器解决方案供应商艾迈斯半导体推出新系列图像传感器---CSG系列,使制造商能够开发在极高帧率下实现更高分辨率的先进工业视觉设备。新型的CSG14K和CSG8K传感器分别支持标准1”或1/1.1”光学靶面尺寸,使使用高速检测设备的工厂操作员能在提高质量,拥有更好的失效检测的前提下提高产能 CSG14K是一款全局快门图像传感器,可将1380万像素的高分辨率与高速运行性能相结合:在全分辨率10位模式下,传感器捕获图像时的最大速率高达140帧/秒;在12位模式下可达93.6帧/秒。CSG8K则可实现更高速度:在800万像素全分辨率的10位模式下可达231帧/秒;在12位模式下可达155帧/秒。这两款产品都是全局快门图像
[传感器]
ams推出新系列高速工业<font color='red'>图像传感器</font>,具有超高分辨率
通用CMOS图像传感器 兼具全局快门功能
  赛普拉斯半导体公司日前推出一款面向机器视觉市场的高灵敏度高速CMOS图像传感器。该款全新的130万像素VITA 1300传感器结合了管线式和触发式全局快门,具有150帧/秒(fps)的无图像畸变高帧频,而且读出速度很快。管线式全局快门功能能够在读出期间进行曝光,从而减少运动图像的模糊程度。该传感器还可工作于具有中央动态存储器(CDS)的滚动快门状态,以降低噪声,增加动态范围。新型VITA 1300系列源于赛普拉斯在机器视觉市场上颇为成功的IBIS5系列图像传感器,还可以用于条码扫描、运动检测和安防领域。   VITA 1300传感器的光学尺寸为1/2英寸,具有单色和彩色数字输出。该传感器拥有4个10-bit数字低电压差
[工业控制]
小广播
设计资源 培训 开发板 精华推荐

最新单片机文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved