基于CCD测距技术的新型导盲系统研究

发布者:落寞梦惊最新更新时间:2014-10-08 来源: ednchina关键字:CCD  测距技术  导盲系统 手机看文章 扫描二维码
随时随地手机看文章
引言

据世界卫生组织统计,全球每年有70万人成为盲人,目前全球有盲人约4500万,其中90%生活在发展中国家,另有1.8亿人深受视力障碍的影响,而我国现有盲人总数是世界盲人总数的18%,达到800万。另外,随着我国老龄化人口持续增多,到2020年视力障碍者总数将达到现在的4倍,所以急需解决视力障碍者行走避障问题。现在的导盲辅具一般为电子导引手杖、导盲犬、导盲机器人等。电子导盲器主要是以超声波测距为基础来实现导盲避障,其缺点是只能进行小范围单点测距,如果采用多个单点测距会造成系统庞大,干扰严重的问题出现。

本文采用双目CCD结构,以双目视觉测量技术为基础,通过图像处理获取盲人前方三维空间信息,具有响应速度快、扫描范围大等诸多优点,更接近于人双眼的功能和特性。通过语音提示模块能够更加准确地让盲人获知前方障碍物情况,能够较好地解决盲人行走避障问题。

1 双目视觉测距原理分析

该导盲系统以双目视觉测距技术为基础,采用已标定好的双CCD结构采集图像,运用图像匹配技术找到障碍物的相对位置,最后以音频信号的形式传送给人脑,达到导盲的目的。利用双目视觉系统测量摄像机前端物体的距离、方位的原理图如图1所示。

图1中双目摄像机呈光轴平行放置,间距即基线长为b,摄像机焦距均为f,O1和O2为焦点,r为目标物到两个摄像机中心点所在平面上的距离,平面xwy为双摄像机能够共同扫描的视域,即双目测距在该平面的测试范围。目标物在两个摄像机的CCD平面上成的像点出现在不同位置上,即对应不同的像素m和n,像素差即视差为其差d。若用D表示单个像素的尺寸,运用几何光学原理可推导出计算r的公式:

同样,根据相似三角形计算出目标物到双目摄像头中轴线的垂直距离:

容易看出,增加基线b的长度,可以增大视差,从而可以减小视差计算误差的影响;但是,基线的增大也意味着视域的减小和匹配难度的增大,所以要合理协调两者的大小。

2 软硬件设计方案

盲人行走示意图如图2所示。

双目视觉导盲系统是一个实时系统,需要硬件和软件相结合来实现。由于图像采集需要处理的信息量很大,为简化系统,本设计采用线阵CCD扫描斜平面(该平面是以摄像平面中心点O为固定点,母线L、D端左右平移形成的平面)上的障碍物信息。盲人在行走时是灵活的,佩戴此导盲系统能较好地实现从平面区域到空间区域的扫描,达到导盲的目的。 [page]

2.1 硬件设计

硬件设计结构框图如图3所示。本系统采用嵌入式控制器ARM11为内核的S3C6410芯片协调各个部件工作,由S3C6410控制FPGA产生外围器件的选通和读写控制信号。障碍物经过成像系统在CCD上成像,生成的图像电荷包经过转移脉冲依次输出。由于电荷包生成的信号很弱,且输出信号中含有各种噪声,为了便于提取有用信号进行处理,必须提高信噪比和抑制噪声。

本设计采用差动放大滤波电路对CCD的输出信号进行处理,经A/D转换变为S3C6410能够处理的数字信号。为了同时提取两个CCD信号进行匹配,将两片A/D转换后的灰度数据送入FPGA中,通过数据选择器进行合并,然后送入双口SRAM中缓存。最后,S3C6410读取双口SRAM中两路CCD信号进行匹配处理,求解出障碍物深度信息,经过音频驱动电路,转化为语音信号提示。

TCD1209D的原理结构如图 4所示。系统采用TCD1209D两相单沟道型线阵CCD图像传感器,它具有速度快、灵敏度高、动态范围宽、像敏单元不均匀性好、功耗低、光谱响应范围宽等优点。TCD1209D的驱动电路由FPGA产生转移脉冲SH、驱动脉冲1和2、复位脉冲RS、缓冲控制脉冲CP等5路脉冲驱动。

SH为高电平时,1也必须为高电平,同时令SH的下降沿落在1的高电平上,这样才能保证光敏区的信号电荷并行地向模拟寄存器的1电极转移。完成信号电荷的并行转移后,SH变为低电平,光敏区与模拟移位寄存器被隔离。在光敏区进行光积累的同时,模拟移位寄存器在驱动脉冲1和2的作用下,将转移到模拟移位寄存器的1电极里的信号电荷向左转移,在输出端得到被光强调制的序列脉冲输出——OS端信号。

2.2 软件设计

软件设计流程如图5所示。

为了系统能够识别前方路面障碍物信息,首先需要确定参照物,其他一切信息与参照物信息比对,确定相关算法识别出障碍物信息,然后转换为语音信号提示。本设计采用实时扫描路面灰度值作为参照,每隔10s设定一次路面灰度值,通过CCD采集斜前方平面区域图像,转换为灰度信息与路面灰度作比较。如果相同,即认为是路面,不再作信息处理;如果不同,需计算不同灰度信息到摄像平面的距离。相同即认为影子等因素不影响行走;如果不同,则利用语音提示相关蜂鸣器报警。

在上述过程中,关键技术点在于两路CCD信号相同灰度区域到摄像平面的距离测定。A和B代表左右两路灰度曲线,每读入一路信号的2帧,即左右2个CCD信号在同一时刻对同一目标所成的灰度图象。先对2帧图像各自求取质心,找出匹配的有效数据段,分别取以A、B中的一帧质心为起点,取两个不同长度的像素段作为特征匹配窗口,对另一帧进行匹配。利用归一化最大相关系数作为匹配位置搜索判据,求得匹配位置差X1和X2,比较X1和X2,如果其差在3个像素内,则认为有效,输出一次视差X=(X1+X2)/2,最后将每5次有效信号作平均,求出位移差。

结语

经实验初步验证,在佩戴者移动速度和障碍物速度不是很快的时候(<3 m/s),由于速度引起的CCD拖影问题影响甚微,该系统能够基本达到导盲目的。虽然导盲效果还不太理想,但该系统已验证了双目视觉测距技术在导盲系统中应用的可行性。随着相关技术的发展,双目CCD结构能更好地计算实物在空间中的三维信息,识别实物特征信息,再加入GPS导航等功能,该类导盲设备会有广泛的应用前景。

关键字:CCD  测距技术  导盲系统 引用地址:基于CCD测距技术的新型导盲系统研究

上一篇:ARM Cortex-M7大幅度增强性能会抢A系列的饭碗吗?
下一篇:基于ARM的等精度测频在机组转速测控中的应用

推荐阅读最新更新时间:2024-03-16 13:42

基于USB的嵌入式CCD图像数据采集系统的实现
CCD图像数据的采集与普通视频信号的采集相比,其最大的特点是数据传输速率高,传输通道多。 目前 ,通用的CCD图像数据采集方法是在计算机中插入高速数据采集卡,采集卡与CCD相机间通过点对点物理层接口(如RS-422、RS-485)进行数据传输,高速数据采集卡接收到数据并通过PCI总线将数据写入计算机 内存 ,然后利用采集卡的存储功能将数据通过IDE接口写入计算机硬盘。这种方法虽然简单可靠,但对多通道、高速图像数据的采集在数据传输和存储方面有一定的局限,容易引起数据帧的丢失,并且随着传输通道的增多,引起传输导线数量增加,系统功耗及噪声也随之增大。通用串行总线USB能很好地解决这些问题,具有连接方便、无需外接电源、即插即用、支持热插拔、
[单片机]
基于USB的嵌入式<font color='red'>CCD</font>图像数据采集<font color='red'>系统</font>的实现
最新一代CMOS和CCD图像传感器
  最新一代CMOS和CCD图像传感器具有更大的频谱宽度、更高的灵敏度、更低的工作噪声和更小的外形尺寸。更先进的制造工艺还实现了更低的成本。此外,创新架构也正在给电路设计带来更大的灵活性和通用性。   其结果是,图像传感器现已被广泛用于手机、笔记本和膝上电脑、数码相机、视频游戏机、玩具、医疗设备、汽车、安全设备、工业设备和许多其它应用。IC Insights公司预测,CMOS和CCD图像传感器在今后5年内的年复合增长率(CAGR)将达到14%.这两种类型图像传感器都已找到广泛的应用,但CMOS图像传感器前景尤其好,预计到2012年,它所占的市场份额将从去年的58%上升到73%.   与大多数电子设备一样,性能和成本将仍然是
[嵌入式]
泰克信号发生器应用|对CCD传感器使用的AFE进行定时余量测试
用途: 确定AFE对输入信号下降沿时间的灵敏度 适用于 为开发数字成像产品的半导体和电子公司开发CCD传感器电路的电子设计工程师。 系统原理图 仪器操作界面 推荐使用AFG31252 使用AFG31252的好处 • 高达160 MHz的脉冲频率,脉冲宽度分辨率10 ps或 5位; • 可以独立调节脉冲上升沿时间和下降沿时间; • 波形参数调节可以立即生效,而不需中断测试; • 凭借已获专利的InstaView™技术,AFG31000系列可以显示DUT上的实际波形; • 抖动 (RMS),典型值<2.5ps。 技巧和提示 • 把发生器的负荷阻抗设置设成与连接电路的阻抗相匹配,以便准确显示幅度; • 为把AFE的灵敏度
[测试测量]
泰克信号发生器应用|对<font color='red'>CCD</font>传感器使用的AFE进行定时余量测试
东芝推新型混合电路技术 使高分辨率LiDAR探测距离提升一倍
东芝为激光雷达(LiDAR)新推出的混合电路 据麦姆斯咨询报道,Toshiba(日本东芝)近日宣布为汽车LiDAR开发出了一款新型混合电路技术,能够使LiDAR在捕捉高分辨率3D成像的同时实现远距离测量,推动了这项自动驾驶汽车使能技术的重要发展。采用这款混合电路技术的LiDAR 传感器 ,在日光照度70 lux(勒克斯)、目标物体反射率10%的情况下,实现了最大200m的测量距离。 相比其它 传感器技术 ,LiDAR传感器能够更精准地探测车辆周围的环境和行人。因此,LiDAR已经逐渐成为实现自动驾驶汽车的基础技术。为此,东芝为LiDAR传感器开发了一款新型混合电路技术,使LiDAR探测距离相比目前的市售产品获得了近2倍的提升;它
[汽车电子]
东芝推新型混合电路<font color='red'>技术</font> 使高分辨率LiDAR探<font color='red'>测距</font>离提升一倍
数字形态学滤波器与智能车路径记忆
 引言   “飞思卡尔”杯全国大学生智能车竞赛规则明确指出,智能车在赛道上连续跑两圈,并记录其中最好的单圈成绩,这使路径记忆算法成为可能。如图1所示,赛道记忆算法在第一圈以最安全的速度缓慢驶过一圈,并将赛道信息保存下来,第二圈根据保存下来的信息进行车速和转角决策的相应最优化,从而在第二圈取得好成绩。无论智能车的传感器前瞻距离有多远,在跑圈时它都只能预测在一段有限距离内赛道的情况。而采用赛道记忆算法的智能车,在第二圈时已对整个赛道有了全面的认识,从而在相同条件下,将比不使用赛道记忆的智能车更具优势。     第一圈准确记忆赛道信息是第二圈控制策略的基础,是比赛成败的关键。但是在第一圈中不论控制策略如何优秀,赛车总会
[嵌入式]
国内研发新材料 可让图像传感器CCD变柔软
  记者近日从合肥工业大学获悉,该校首次制备出大晶粒非层状结构的硒化镍薄膜,并成功将其构筑为光探测器阵列,为新一代柔性 图像传感器 的研发提供了新的方法。相关成果日前发表在国际材料领域权威期刊《先进材料》上。下面就随传感器小编一起来了解一下相关内容吧。   未来可穿戴智能设备要求 图像传感器 具有柔性,可以弯曲折叠,而目前在数码相机中广泛应用的集成 图像传感器 ,由于其硅基底不具有柔性,难以满足未来需求。而柔性低维材料被认为是硅基底的理想替代者。   该校材料科学与工程学院王敏教授和陈翌庆教授团队与韩国成均馆大学科研人员合作,提出了一种新的界面限域外延生长方法,成功制备出高质量大晶粒非层状结构硒化镍薄膜。课题组通过硒化镍微米带阵
[传感器]
MCCD/CCD/CMOS三大传感器技术之间制衡
    “平安城市”是近期中国安防业发展的重要推动力,2011年起在全国范围内推行,预计“十二五”内将带动2400万个摄像头.约合1200亿元左右的行业产值。视频监控系统国内市场发展潜力巨大,预计到“十二五”末,国内监控摄像机的每千人拥有量将达到25台,同时考虑设备更新、出口产值增加的因素,预计2015年视频监控设备产值将超过1100亿元,CAGR(复合年均增长率)达到23%。     摄像机作为监控领域前端设备的排头兵,未来的发展前景十分广阔,而作为摄像机核心部件的芯片,其一举一动都牵动着整个行业的神经。随着安防行业的需求越来越明确,已有越来越多的芯片厂家开始关注并主动去推广安防这个潜力巨大的市场,安防芯片市场有望成为继工业
[安防电子]
CCD和CMOS的技术对比
     CMOS传感器与CCD传感器的比较   CCD,(Charge Coupled Device),即“电荷耦合器件”,以百万像素为单位。数码相机规格中的多少百万像素,指的就是CCD的分辨率。CCD是一种感光半导体芯片,用于捕捉图形,广泛运用于扫描仪、复印机以及无胶片相机等设备。与胶卷的原理相似,光线穿过一个镜头,将图形信息投射到CCD上。但与胶卷不同的是,CCD既没有能力记录图形数据,也没有能力永久保存下来,甚至不具备“曝光”能力。所有图形数据都会不停留地送入一个“模-数”转换器,一个信号处理器以及一个存储设备(比如内存芯片或内存卡)。CCD有各式各样的尺寸和形状,最大的有2×2平方英寸。1970美国贝尔实验室发明了C
[工业控制]
小广播
添点儿料...
无论热点新闻、行业分析、技术干货……
设计资源 培训 开发板 精华推荐

最新单片机文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved