智能汽车的一项重要能力就是对环境的感知、对路况信息的分析决策。文中以MC9S12XS128单片机为核心,通过CCD图像传感器获得路径信息,进而进行路径分析,为下一步的控制提供必要的数据信息。
1 CCD图像传感器特点
CCD图像传感器属于电荷耦合器件,组成CCD的基本单元是金属-氧化物-半导体结构。基本单元又分为两类:光敏单元与移位寄存单元。两者的区别在于:前者接受有效频率入射光的刺激产生光电效应,生成信号电荷;后者依靠于前者的相邻且紧密排列形成两者势阱的相互沟通、耦合,借助结电容栅极电压的控制来实现信号电荷从前者向后者的转移(耦合)。根据光线反射的强弱CCD会输出大小不同的电压,通过单片机的AD转化接口将相应电压值转换成大小不同的数值,根据数值大小来分析路径信息。
CCD图像传感器输出的是视频同步信号,经视频同步分离芯片LM1881后,视频信号分成场同步信号、行同步信号、奇偶场信号以及视频信号,电路的典型连接及重要引脚信号如图1所示。利用这些同步信号再加上适当的延时对视频信号进行AD采样,从而得到图像信息。这里采用分辨率为320×240的CCD图像传感器,每场的扫描周期20 ms,因此,单行视频信号的持续时间大约为20 ms/320=62.5μs,将单片机超频到64 MHz,在单行视频信号的持续时间内能采集大约一百个点左右,能很好的满足横向精度要求。每场信号中包含了285个有效行,考虑到CCD图像传感器在纵向上的畸变,采取非均匀采集的方式,通过标定,使采集行在实际位置上是均匀分布的,从而实现每行之间的实际距离大致相等,为后续控制提供了方便。
2 黑线提取算法
在采集完一行图像信息后即对该行数据进行二值化处理,即设定一个阈值,把每个点的数据与阈值比较,通过大小判断该点为黑色或者白色。之后对黑色点的值进行累加求取平均值,在对白色点的值进行累加求平均值,再取两值平均作为下一行的阈值进行判断。阈值计算的公式如下:
式中black[i]为黑点的值,white[j]为白点的值,Hold[row]为下一行的阈值。
这种阈值传递的方法使得的黑白的检测判断更为可靠,排除了光线以及赛道颜色产生的影响。然后遍历一行数据,由于黑线宽度基本能在3~5点,所以,对该点与相邻两点黑白不一致的点进行剔除,用相邻两点均值作为该点的修正值。最后,对整行数据遍历,记录一行数据中黑线边缘位置、黑线中心及黑线出现次数。这样对一行的数据处理完毕。
在采集完一场图像信息后,根据黑线是连续的的特点,对相邻行之间黑线位置进行修正,将不满足连续性的黑线剔除掉,从而准确提取出黑线的分布情况。
[page]
3 预测算法设计
单片机的运算速度是一定的,而车模的惯性常数也是一定的,因此,为了使控制过程尽量长以达到理想的控制效果,必须对图像分析时间进行压缩。这里,通过分析前一场数据,得到下一场首行阈值、黑线宽度以及黑线搜索范围,从而减少下一场的处理时间并增加了下一场路况信息的准确性,增强了相邻行、相邻场之间的联系。
4 图像信息分析
经过数据处理后,我们得到每行赛道黑线中心的位置量DImage和视场中心的位置量DCenter(常量),两个距离相减得到的就是黑线中心相对视场中心的偏差距离DReal=DImage-Dcenter,也就是实际偏差值。根据偏差距离DReal可进行弯直道的识别。
1)偏差DReal=0时,前方跑道为直道。
2)偏差DReal>0为正值时,前方跑道为右弯道。
[page]
3)偏差DReal<0为负值时,前方跑道为左弯道。
从而判断出小车相对中心黑线的位置。DReal绝对值的大小反映了小车中心偏离中心黑线的严重程度,|DReal|越大,表明偏离得越厉害。这样判断的好处在于不管小车是否处于弯道还是直道,只要小车中心偏离了中心黑线,即只要DReal≠0就可以当作弯道情况来进行处理。然后分别对偏差距离DReal分别进行一阶微分(dDReal)和二阶微分(d2DReal),根据偏差距离的一阶微分(dDReal),就可以得到中心黑线的变化趋势,从而判断出实际跑道是弯道还是直道,如果小车是在直道上偏离了中心黑线,则同一场数据中前后各点偏差的一阶微分值dDRe al是相等的,即中心黑线与小车视场中心的偏差距离与两者的前后距离呈线型变化。若实际跑道是弯道,则(dDReal)不等,上述关系呈非线性变化。根据偏差的二阶微分(d2DReal),可近似得到中心黑线的曲率半径R(直道曲率半径视为趋近无穷),从而得到较完整的跑道信息。以上判别过程如图5所示。
5 结束语
文中初步对智能车的路径识别进行了探索,对一些基本问题给出较为详细的分析及设计,为进一步的实践打下了较为坚实的基础,为真正智能汽车的设计提供了有益参考。
关键字:CCD 图像传感器 路径识别算法
引用地址:
基于CCD图像传感器的路径识别算法分析
推荐阅读最新更新时间:2024-05-02 22:27
CCD图像测量的基本原理
被测对象的光信息通过光学系统,在CCD的光敏面元上形成光学图像,CCD器件把光敏元上的光信息转换成与光强成比例的电荷量。用一定频率的时钟脉冲对CCD进行驱动,在CCD输出端得到被测对象的视频信号。视频信号中每一个离散电压信号的大小对应着该光敏元所接收的光强强弱,而信号输出的时序则对应CCD光敏元位置的顺序。通过后续处理线路对CCD输出的视频信号进行二值化或者量化处理后,将被测目标从背景中分离出来,为进一步的数据处理和分析做准备。 图(a)是典型的线阵CCD测长系统的原理示意图。整个测量过程包括:光学成像、图像信号输出、二值化处理确定图形轮廓、测定轮廓间的像素数、通过计算或实验确定脉冲当量并按测量公式计算被测尺寸。整个系统的工作波
[测试测量]
思特威发布全系列手机应用了CMOS图像传感器
在智能手机多摄像头系统及智能化摄像应用的发展趋势下,高性能智能手机相机的市场需求始终热潮不退。而CMOS图像传感器作为摄像系统的核心部件,在巨大的市场需求催动下不仅出货量连年动态范围等成像性能上也在迅速地迭代和精进。 近日,技术领先的CMOS图像传感器供应商思特威科技(SmartSens),全新推出了全系列手机应用图像传感器产品 | Cellphone Sensor (CS) Series产品—— SC200CS-mono/SC200CS-color,SC500CS,SC800CS,SC1300CS/SC1301CS,可覆盖2MP至13MP手机摄像头应用方案,满足智能手机客户的多元化需求,为智能手机摄像头提供行业领先的高品质成像性
[手机便携]
瞄准汽车、工业领域 安森美图像传感器战略强势来袭
近年来, 图像传感器 在工业、汽车、消费市场等领域的应用日益普及,图像传感技术得以突飞猛进。除了能给智能手机提供自动对焦能力、提升图像质量和光学防抖功能以外,图像传感技术正逐步植入智能汽车、工业生产、物联网、无人机市场、虚拟现实等新兴领域,一个全新的千亿级市场已悄然开启!下面就随网络通信小编一起来了解一下相关内容吧。 在近期的2018上海国际机器视觉展上,全球领先的半导体厂商—— 安森美 就图像传感技术的应用与落地,举办了一场“ 图像传感器 战略及全面方案发布会”。会上, 安森美 半导体 图像传感器 部全球市场及应用工程副总裁易继辉(Sammy Yi)先生细致分析了工业、汽车等市场的需求和趋势,以及重点图像传感器解决方案
[网络通信]
思特威AI系列再添三款全性能升级图像传感器新品
202 3 年 10 月 2 5 日 , 中国 上海 — 思特威(上海)电子科技股份有限公司,重磅推出三款全新升级AI系列 图像传感器新品——SC235AI/SC435AI/SC835AI 。作为安防行业2MP至8MP主流分辨率产品,三款背照式新品搭载思特威SmartClarity ® -3技术和Lightbox IR ® 技术,凭借优异的近红外感度增强、高温成像和低功耗三大性能优势,带来更加出色的夜视全彩成像表现,可满足各类智能安防应用的升级需求。 Lightbox IR ® 技术加持 , 画面越夜越精彩 三款新品采用思特威先进的SmartClarity ® -3技术,通过思特威SFCPixel ® 专利
[传感器]
CMOS图像传感器芯片OV5017及其应用
1 CMOS图像传感器的一般特征 目前,CCD(电荷耦合器件)是主要的实用化固态图像传感器件,它具有读取噪声低、动态范围大、响应灵敏度高等优点。但CCD技术难以与主流的CMOS技术集成于同一芯片之中。这样,诸如定时产生、驱动放大、自动曝光控制、模数转换及信号处理等支持电路就不能与像素阵列做同一芯片上,以CCD为基础的图像传感器难以实现单片一体化,因而具有体积大、功耗高等缺点。 CMOS图像传感器是近向年发展较快的新型图像传感器,由于采用了相同的CMOS技术,因此可以将像素阵列与外围支持电路集成在同一块芯片上。实际上,CMOS图像传感器是一个较完成的图像系统(Camera on Chip),通常包括:一个图像传感器核心、
[安防电子]
东芝开发出应用于小型低功率产品的CMOS图像传感器
东京 – 东芝公司(东京: 6502)日前宣布了对于具有小面积低功率像素读出电路的CMOS图像传感器的开发进展。 内置读出电路的样品传感器性能是传统传感器的两倍。(1)东芝于2月20日在加州旧金山举行的 ISSCC 2013(美国电气和电子工程师学会(IEEE)主办的国际固态电路研讨会)会议上对该产品的开发进展进行了介绍。 随着新兴市场对于商品手机的需求不断增加,CMOS图像传感器需要具备小尺寸、低功耗和低噪声性能等特性。 CMOS图像传感器的像素读出电路主要为降噪相关双采样(CDS)电路,并配有可编程增益放大器(PGA)和模数转换器(ADC)。串行信号处理架构最适合通过小面积、低功率像素读出电路确保传统CMOS图像传感器安全可
[手机便携]
事件导向CMOS图像传感器将用于LiDAR
据麦姆斯咨询报道,在快速发展的工厂自动化、物联网和自动驾驶车辆市场上,CMOS 图像传感器 似乎扮演的角色不再是人类消费品,而是让机器获取数据并让其理解世界的传感器。下面就随网络通信小编一起来了解一下相关内容吧。 法国著名市场研究和技术分析机构Yole的MEMS & 成像部活动负责人Pierre Cambou这样评论道:“CMOS 图像传感器 的传感功能将逐渐超过本身的成像功能,”并大胆预测“到2030年,一半的CMOS 图像传感器 将服务于感知领域。” 总部位于法国巴黎的Prophesee SA(原Chronocam)公司以革命领跑者自居。作为先进的神经视觉系统设计公司,提出了一种基于事件的方法进行传感和处理。Pr
[网络通信]
超级CCD传感器使富士胶片的数码相机图像更清晰
在本篇设计揭密中,我们将审视富士胶片(Fujifilm)公司630万像素的Finepix E550数码相机所用的电荷耦合器件(CCD)传感器。对一部傻瓜型相机来说,Finepix E550的分辨率及其ISO 800标准的感光度和1/2,000秒的快门速度令人印象深刻。实际上,为了实现这些性能目标,富士采用了其专有的超级CCD设计制造了其中的传感器。 在数码静止照相机(DSC)市场,成像技术按图像传感器分为两类:CCD和CMOS成像器。CMOS技术盘踞低端,而高端虽非由CCD独家把持,但它仍是主宰。在富士胶片的超级CCD架构内,传统的x-y阵列被旋转45度,以将像素排成对角线。此举在允许设计师采用相对大的八边光电二极管的同时,优化
[应用]