datasheet

基于影像传感器MT9M111的视频采集系统

2016-10-09来源: elecfans关键字:影像传感器  MT9M111  视频采集系统
 

  CMOS图像采集系统普遍存在图像质量问题,如果没有对图像进行专门的处理,则图像质量难以保障。近些年来,随着SoC技术的快速发展,在图像采集和处理领域,出现了SoC影像传感器,它集成CMOS传感器和图形处理器功能,可以得到令人非常满意的图像质量。本文设计的视频采集系统采用了SoC成像芯片MT9M111和USB2.0接口芯片CY7C68013。

  系统结构

  本系统的原理框图如图1所示。当图像传感器开始工作后,先将采集到的数据通过FPGA控制逻辑存储到SRAM1中,一帧图像的采集/存储过程结束后,SRAM1进入写结束状态。此时切换SRAM,SRAM2继续存储采集到的数据,同时,SRAM1处于可读状态,由FPGA里的控制逻辑控制,将SRAM1中的数据传输到USB芯片,然后传输到主机。本系统采用双SRAM结构和乒乓机制,两片存储器交替工作,使图像的采集和传输并行进行。双帧存结构不仅提高了系统的速度,而且,由于在FPGA里实现各种图像处理的算法大都需要比较大的存储空间,所以两个大容量SRAM在实现算法时可以充当外部缓存。

  MT9M111

  本系统采用美光公司推出的集成CMOS传感器和图形处理器的SoC产品MT9M111。MT9M111是低功耗、低成本渐进扫描CMOS图像传感器;130万像素分辨率(1280H×1024V);1/3英寸光学格式;全分辨率15fps的功耗为170mW,VGA分辨率30fps的功耗为90mW。MT9M111采用低漏电DRAM工艺,配备了美光的DigitalClarity专利技术,即使在最差的光照条件下也能提供清晰明亮的彩色图像。MT9M111具有较低的暗电流,并降低了色度/亮度干扰和瞬间噪声。MT9M111的嵌入可编程图像流处理器提供的功能

  包括色彩恢复和修补、自动曝光、白平衡、镜头阴影修正、增加清晰度、可编程灰度修正、黑暗电平失调修正、闪烁避免、连续调整滤光尺寸、平滑的数字变焦、快速自动曝光模式和不工作时缺陷修正等。而且,还配备了两线串行接口,USB芯片可以通过这两线串口对其进行配置。

  IS61WV20488

  与图像处理有关的SRAM参数主要是SRAM 的读写速度和容量。在容量方面,本系统采集图像的最大分辨率为1280×1024,数据宽度为8位,2M×8bit的SRAM可以满足存放一帧图像数据的要求。SRAM的读写速度一般为12ns、15ns、20ns或者更慢,由于SRAM的读写速度直接影响整个图像处理系统的时钟,所以,SRAM的读写速度越快越好。本系统选用了ISSI公司的IS61WV20488,芯片容量为2M×8bit。

  CY7C68013

  图像数据传输部分采用Cypress公司推出的专门用于USB2.0的接口芯片CY7C68013。该芯片包括带815kB 片上RAM 的增强型8051 处理器(与标准8051 系列兼容,速度提高3~5倍)、4kB FIFO 存储器和通用可编程接口I2C 总线、串行接口引擎( S IE ) 以及USB2.0 收发器。

  

  图1 基于SoC影像传感器的视视频采集系统

 

  系统软/硬件设计

  系统软/硬件设计由3部分构成:图像采集/存储模块、图像传输模块和USB驱动/主机应用程序模块。

  图像采集/存储模块

  该模块主要由FPGA的控制逻辑将成像芯片MT9M111采集到的图像数据实时地传送到SRAM中。在系统中采用双帧存结构,每个由一片IS61WV20488 SRAM构成,能够存放一帧1280×1024分辨率的图像数据。由于采用了乒乓机制,两片存储器之间交替工作,从而使图像的采集和传输并行进行。为确保在任何时刻只有一片SRAM可以读取采集到的图像数据,设置了一个读互斥锁,同样,只有一个SRAM可接收采集到的图像数据,因此,又设置了一个写互斥锁。需要注意的是,由于图像传感器的图像数据输出速度要比USB2.0传输速度慢,所以,当读完SRAM2的数据以后,需要等待另一片SRAM1完成写图像数据后,才可以向SRAM2写入下一帧图像数据,而SRAM1无需等待便可以直接进行读取图像数据的工作,如此循环往复,实现了并行工作,有效地提高了系统的工作效率。

  图2为系统控制电路的原理框图,FPGA内部各个模块均采用Verilog HDL编写。

  

  图2 FPGA控制电路框图

  图像传输模块

  采集完一帧图像后,要经过USB时钟信号控制模块将外部RAM中的图像数据读入到主机。在本图像采集系统中,使用CY7C68013的Slave FIFO异步工作方式,把FIFO配置成和EP2端口相连、每个数据包1024字节、4缓冲的方式,块传输模式。这样的设置可以满足系统要求,同时也有效地利用了内部的4kB FIFO来传输采集到的图像数据,系统控制使用了FALGB信号引脚,用来报告“FIFO满”的状态,默认为低电平有效。本文采用的是自动输入方式,当FIFO中的数据满一定量时,EZ-USB-FX2就直接通过FIFO把数据传送到USB收发器,而不经过CPU的干预,这样就提高了传输速度,本系统当FIFO满1kB时开始自动发送。

  USB驱动和主机应用程序模块

  USB设备驱动程序的开发是USB系统开发的难点,尤其是在本系统传输数据量大且速度要求高的情况下,就要编写出高效的USB设备驱动程序,才能保证高分辨率图像的实时传输。本系统采用DDK来开发WDM驱动程序。实际上,USB 客户驱动程序中包含大量的例程,对开发驱动程序有很大的帮助。

  主机应用程序的主要功能是通过USB接口读取图像数据并实时显示动态图像。为提高主机应用程序的效率,可以使用双线程。

  结语

  本系统采用具有130万像素的影像传感器MT9M111,保证了图像质量,采用USB2.0接口芯片CY7C68013保证了图像的实时传输,且设计灵活,为实现各种图像处理算法提供了软/硬件支持。

关键字:影像传感器  MT9M111  视频采集系统

编辑:什么鱼 引用地址:http://news.eeworld.com.cn/mcu/article_2016100930237.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:一种基于C8051F350的无线同步数据采集方法
下一篇:基于USB接口的高增益数据采集系统的设计

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

ST影像传感器提高汽车安全系统的驾驶员监测功能

先进影像传感器增强驾乘人员监测功能,提高汽车安全性和舒适性 完美匹配汽车和工业机器视觉的电子全局快门技术,开创性的像素内线性高动态范围 在AutoSens展会和2018年德国慕尼黑电子展上,与Jungo联合展示新传感器在驾乘人员监测和自动驾驶市场上的发展前景 横跨多重电子应用领域的全球领先的半导体供应商意法半导体 (推出了VG5661和VG5761两款全新的驾驶员监测系统全局快门影像传感器。在最近的AutoSens汽车影像技术展会和2018年德国慕尼黑电子展上,意法半导体与汽车软件创新者Jungo公司联合演示了基于这两款传感器的驾驶员监测解决方案CoDriver。  
发表于 2018-12-05
ST影像传感器提高汽车安全系统的驾驶员监测功能

2018年汽车影像传感器市场迎来爆发 停车类传感器占主流

系统使用单个传感器来捕获图像的长度和宽度,并且是广泛用于捕获诸如交通信号等二维图像的流行且廉价的方式。立体视觉系统使用两个传感器,一个用于捕获图像(如单视觉),另一个用于捕获深度信息。立体视觉相机系统用于捕获3D图像和距离信息(如RADAR和LIDAR系统)。传统的相机传感器适合在可见光下工作,但避不开一个挑战——在夜间“观察”物体。为了解决这个问题,汽车制造商正在将远红外传感器集成到相机系统中,通过检测物体(例如个人)与周围环境之间的温差来提供图像的热图。这些相机系统通常用于夜视系统。应用一览由于此功能的摄像机规格要求较低,停车辅助应用程序占据了大多数汽车摄像头传感器。然而,随着使用影像传感器的其他ADAS功能(例如车道控制辅助
发表于 2018-08-28

消费电子小升级 索尼押宝AI机器人和车用影像传感器

北京时间1月9日上午消息,CES前夕,索尼在拉斯维加斯举办了发布会,会上平井一夫正式宣布Aibo机器狗在日本以外市场的复活。在带来新版Aibo的同时,他还表示这只是索尼在人工智能方面的开始。  在自动驾驶方面,索尼研发的影像传感器可满足360度镜头的检测,计算速度超过人眼反应,目前产品已被MobilEye、NVIDIA、丰田、尼桑、起亚等企业采用。  在消费电子领域,索尼今天发布了OLED电视新品A8F和液晶电视新品X9000F。  A8F延续了A1的OLED屏幕以及银幕声场技术,但改善了A1的工业设计,加入了底座和后置主板,减少了空间的占用。  X9000F则加入了全新的X-Motion Clarity技术,又花了MEMC芯片
发表于 2018-01-09

SONY影像传感器第三季营收同比增三成

电子网消息,Sony 31日于日股盘后公布上季(2017年7-9月)财报:因影像传感器等半导体销售夯,加上PS4游戏机销售走扬,提振合并 营收较去年同期大增22.1%至2兆625亿日圆,合并营益较去年同期飙增346.4%至2,042亿日圆、合并纯益跳增26倍(成长2,627%)至1,309亿日圆。就事业别业绩来看,上季Sony移动设备业务(MC事业;以智能手机为主)营收较去年同期成长1.9%至1,720亿日圆、营损额为25亿日圆(去年同期为营益37亿日圆)。游戏机&网络服务事业(G&NS业务)营收大增35.4%至4,332亿日圆、营益暴增188.3%至548亿日圆。数字影像&解决方案业务(IP&S
发表于 2017-11-01

新型车载影像传感器可高清拍摄160米外交通标识

面临自动驾驶浪潮,汽车厂商、互联网平台、第三方开发者都在致力于解决汽车的视觉问题,而影像传感器就是其中的基础。索尼公司宣布,将面向市场正式推出1/1.7型、业界最高分辨率的车载堆叠型CMOS影像传感器“IMX324”,该传感器搭载于先进驾驶辅助系统(ADAS)前端的传感照相机,有效像素高达742万,采用RCCC滤色器。索尼将从2017年11月开始出货样品,批量到货预计在2018年6月。该影像传感器水平分辨率较上一代高出近2倍,能够高清拍摄到160米开外的交通标识。远距离拍摄样张对比为提升暗光环境下的灵敏度,搭载了高感光像素加算模式,实现2666 mv的高灵敏度,即使在只有月光的夜晚也可清晰拍摄到行人或障碍物。夜间驾车,由于车灯
发表于 2017-10-31

索尼惊呆!三星11月量产三层堆栈式影像传感器

  据国外媒体报道,三星正量产“三层堆栈式影像传感器”(3-layered image sensor),能支持设备每秒拍出1000张照片。据相关媒体报道,业界人士表示,三星研发的三层影像传感器结合了影像传感器、处理芯片和DRAM缓存。它每秒可以拍摄1000张照片,还能呈现出慢动作影像。下面就随网络通信小编一起来了解一下相关内容吧。 索尼惊呆!三星11月量产三层堆栈式影像传感器  这或许意味着未来三星智能手机在拍出画面之后也能像索尼一样进行慢动作回放。更重要的是将来三星智能手机相机镜头可具备仅次于电视台摄影机水平的专业拍摄能力。据媒体估计三星的三层影像传感器将会使用在明年旗舰机型Galaxy S9当中。  全球影像传感器一直是索尼
发表于 2017-09-21

小广播

何立民专栏

单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2019 EEWORLD.com.cn, Inc. All rights reserved