视频增强的新方法
视频透雾新方法
雾是悬浮在贴近地面的大气中的大量微细水滴(或冰晶)的可见集合体,使能见度降到1公里以下……
“雾”是基于光学成像原理的视频监控系统的大敌。雾造成有效视频监控距离大大缩短,使图像变得模糊,严重的情况下图像一片雪白,使视频监控系统变得毫无用处。
近年来随着全球气候变暖、城市化进程加速、人口密度增加,城市的大雾现象变得越发严重。城市大雾对城市的治安监控、交通监控、环境监控等视频环境造成极大的损害,严重时可能造成城市安防系统瘫痪……森林、大面积植被环境由于绿色植物的呼吸作用,清晨、黄昏容易造成覆盖大面积区域的雾气,这些雾气给森林的安全防范以及火灾防范造成了极大的危害,使通常的长焦距镜头摄像机系统失去原有的威力……海岸、港口、河道由于水汽蒸发原因,常年湿度较大,形成无法消除的大量水雾,常年的水雾密集使港湾的监控难以有效实施……多年以来,很多的光学、电子、软件专家致力于视频图像的雾气消除研究工作,然而事实证明单一解决手段无法从根本上解决这个问题。
全新的透雾解决方案利用高集成度设计方法;通过在摄像机中放置专用的高精度光学转换器件、专用成像器件,配和最新技术研发的专用的视频增强设备,从光学、电子、软件多方面构成一个光、电一体化的专家级视频透雾监控解决方案。
下面是电子部分去雾的介绍:
一、 视频增强的背景
视觉信息是人类获得外界信息的主要来源,因为大约有70%的信息是通过人眼获得的。随着多媒体技术飞速发展,视频图像得到了广泛重视和应用,其应用领域遍及广播电视、医学、保安监控、车场管理、军事及生命科学等方面。视频采集技术与显示技术的提升,使得人们对画质的要求越来越高,但是在各类图像系统中图像的传送和转换(如成像、复制、扫描、传输以及显示等)总要在一定程度上造成图像质量的降低。例如一些户外监控系统往往只能在晴天下才能正常工作,在大雾、沙尘等恶劣天气或者低光照情况下图像对比度大大降低,人们无法从中得到有用信息。不仅如此,长期观看品质低下的视频可能会加重人们眼睛的负担,容易产生视觉疲劳,甚至会头晕目眩。在出现大雾、大雨、沙尘等恶劣天气时,户外景物图像的对比度和颜色都会被改变或退化,图像中蕴含的许多特征都被覆盖或模糊,得到的是退化图像,对于各类监控都造成了极大的困难,因此,要充分发挥监视视频的效能,就必须对监视视频图像进行增强处理。在军事侦察、监视方面,为了实施正确指挥,取得作战胜利,现代战争对军事侦察提出了更高的要求,广泛应用先进科学技术,进一步扩大侦察的范围,提高侦察的时效性和准确性。因此,军事侦察、监视中用到的视频图像的品质尤为重要,退化的视频图像对信息的识别与处理会造成偏差,而这种偏差的后果是非常严重的,因此视频增强技术应运而生。
二、 视频增强算法(Retinex算法)的基本原理
Retinex算法简介
Retinex(视网膜”Retina”和大脑皮层”Cortex”的缩写)理论是一种建立在科学实验和科学分析基础上的基于人类视觉系统(Human Visual System)的图像增强理论。该算法的基本原理模型最早是由Edwin Land(埃德温?兰德)于1971年提出的一种被称为的色彩的理论,并在颜色恒常性的基础上提出的一种基于理论的图像增强方法。Retinex 理论的基本内容是物体的颜色是由物体对长波(红)、中波(绿)和短波(蓝)光线的反射能力决定的,而不是由反射光强度的绝对值决定的;物体的色彩不受光照非均性的影响,具有一致性,即Retinex 理论是以色感一致性(颜色恒常性)为基础的。
不同于传统的图像增强算法,如线性、非线性变换、图像锐化等只能增强图像的某一类特征,如压缩图像的动态范围,或增强图像的边缘等,Retinex可以在动态范围压缩、边缘增强和颜色恒常三方面达到平衡,因此可以对各种不同类型的图像进行自适应性地增强。正因为Retinex诸多良好的特性,使Retinex算法在很多方面得到了广泛的应用。
在诸多以Retinex为核心的算法中,单尺度(Single-Scale Retinex, SSR) 算法,多尺度(Multi-Scale Retinex, MSR)算法是最具有代表性和最成熟的算法。
单尺度(Single-Scale Retinex, SSR)算法原理
根据Land提出的理论,一幅给定的图像S(x,y)分解成两幅不同的图像:反射物体图像R(x,y)和入射光图像L(x,y),其原理示意图如下:
图1:Retinex原理示意图
对于观察图像S中的每个点(x,y),用公式可以表示为:
S(x,y)=R(x,y)﹒L(x,y) (1)
据Retinex 理论,物体的颜色是由物体对光线的反射能力决定的,而物体对光线的反射能力是物体本身固有的属性,与光源强度的绝对值没有依赖关系。因此通过计算各个像素间的相对明暗关系,可以对图像中的每个像素点做校正,从而确定该像素点的颜色。
单尺度(Single-Scale Retinex, SSR)算法在对数域中则表示为:
(2)
根据上面(2)式的原理,Retinex理论进行图像增强的关键是从原图像中有效的信息计算出亮度图像L(x,y)。但是从原图像计算亮度图像在数学上是一个奇异问题,因此只能通过数学上近似估计的方式估算亮度图像。在Retinex算法的发展史中,曾经出现过平方反比的环绕形式、指数形式以及高斯指数形式,但在单尺度Retinex增强算法中,杰泊森(Jobson)论证了高斯卷积函数可以对源图像提供更局部的准确处理,因而可以更好地增强图像,其可以表示为:
(3)
其中λ是常量矩阵,c是滤波半径,并且满足: (4)
c越小,灰度动态范围压缩的越多,c越大,图像锐化的越厉害。因此亮度图像最终可以表示为:
(5)
单尺度(SSR)可以表示为:
(6)
[page] 一、概述 在舰、船、飞机等上,观瞄系统对感知其周围的态势有着非常重要的作用,观瞄系统一般由CCD摄像机和红外成像系统组成。雾、水气、雨雪等恶劣海洋气象环境会严重影响CCD和红外成像系统的图像质量,主要表现在图像对比度下降,远处目标模糊不清,难以分辨。从而影响对周围态势的感知能力。 通过图像处理算法,来提升图像的对比度,也就是视频增透技术,在国外尤其是美国的观瞄系统已经广泛采用,图像处理前后的对比效果如下: 海洋的环境极为恶劣,雾、雨、水气等天气是常见的,而观瞄系统需要有能力对远距离的、微小的、高速移动的目标进行及时的观察。如果不能及时发现目标,就可能使己方处于被动状态。因此装备这种视频增透设备,对提升观瞄系统的观察能力是非常必要的。 二、增透技术简介 视频增透技术,一般指将因雾和水气灰尘等导致朦胧不清的图像变得清晰,强调图像当中某些感兴趣的特征,抑制不感兴趣的特征,使得图像的质量改善,信息量更加丰富。增强后的图像为图像的下一步应用提供良好的条件。一般来说增透技术有两种:空域的和频域的方法。但这些方法的对不同图像的适应性还存在一些缺陷。在上个世纪70年代,美国物理学家Land等提出了Retinex图像增强方法,它是基于人类视觉感知的图像处理模型。它能压缩图像动态范围,显示图像中被湮没的细节。但算法复杂,工程实现难度大,尤其是对实时视频的实时增强,因为计算量大,导致很难实际应用。随着硬件性能的提高,我们终于能把这个具有普遍适应性的图像增强算法变成实际的工程化产品。这是业内首次实现的Retinex算法的硬件产品。 下面我们以实际增强前后的图片来演示Retinex算法的效果和该算法对不同场景的普遍适应性。 图1 雾天天气增强对比1 图2 雾天天气增强对比2 图3水下 图4 水下 图5 沙尘天气 图6 霾天气 图7 昏暗天气 从这些对比图片,我们可以明显看到增强后的图像更加清晰,原先很难看到的细节变得很清楚,而且该算法对不同的气象环境具有非常好的普适性。 Retinex算法是基于人类视觉系统感知和调节物体颜色和亮度的模型,这个模型解释了一般颜色理论无法解释的人眼对颜色的波长与亮度不是特别对应的现象。Land通过大量的实验证明我提的表面颜色不会因为光照条件的变化而改变即颜色恒常性。简单来说颜色恒常就是说无论是在正午的阳光下、白炽灯下,还是在阴暗的光照条件下,人类感觉到的同样物体颜色是一致的。正因如此,在进行图像操作时应当去除光照强度,照射不均等一些不确定和非本质的影响,只保留物体本质的反射性质如反射率等信息。基于这种方法处理的图像可以使图像在边缘锐化、动态范围压缩和颜色的恒定方面都有很好的效果, Retinex理论的基本思想就是将原始图像看成是由照射图像和物体反射属性组成,照射光图像直接决定一幅图像中像素能够达到的动态范围,物体反射属性决定了图像的内在性质,因此,在原始图像中去除或降低照射图像的影响从而保留本质的反射属性是Retinex理论的基本思想。与其它图像增强方法相比,Retinex算法具有锐化、颜色恒常性、动态范围压缩大、色彩逼真度高等特点。 现在多部分的视频增强器只是采用基于全局的Retinex图像增强算法通过在对数域内计算相邻像素点灰度值之间的比值从而得到相邻像素点之间的相对明暗关系,继而通过该明暗关系对原像素点灰度值进行校正,最后再对校正后的像素点灰度值进行线性拉伸,得到增强的图像。所以得到的增强图像对比度不高。而CASEVision VE9901视频增强器采用先进的多尺度Retinex图像增强算法,具有较强的普适性。同时提供优化的对数直方图均衡处理和多种噪声滤波算法。 它基于DSP的嵌入式硬件结构,具有尺寸小、功耗低、高性能的优点。 且实时对图像处理,自动适应PAL制和NTSC制式视频图像。并具有极低的延迟,延迟时间不超过一帧,即PAL制视频延迟40ms,NTSC制式视频延迟33ms。 同时,它还支持全屏增强和局部窗口增强,局部增强窗口大小和位置可动态调整。
视频增透技术的现状及其在特殊环境上的应用
从这个对比的效果图片中,我们很明显感受到,通过对视频的增透处理,使图像的对比度得到了很大的提升,原先模糊不清的船只,变得更加清晰可见,从而提高了观瞄系统的观察距离,提高了系统对周围态势的感知能力。因此,视频增透技术在舰船飞机等观瞄系统上具有很好的应用前景。而这种视频增透技术应用,由于算法和硬件实现技术的限制,在我国刚刚起步,商业化的成熟产品更是很少见到。
上一篇:高速球技术全景剖析 智能网络夜视是方向
下一篇:视频服务器(DVS)的现状及发展趋势
推荐阅读最新更新时间:2024-03-16 10:54
- 柔灵科技陈涵:将小型、柔性的脑机接口睡眠设备,做到千家万户
- 微灵医疗李骁健:脑机接口技术正在开启意识与AI融合的新纪元
- USB Type-C® 和 USB Power Delivery:专为扩展功率范围和电池供电型系统而设计
- 景昱医疗耿东:脑机接口DBS治疗技术已实现国产替代
- 首都医科大学王长明:针对癫痫的数字疗法已进入使用阶段
- 非常见问题解答第223期:如何在没有软启动方程的情况下测量和确定软启动时序?
- 兆易创新GD25/55全系列车规级SPI NOR Flash荣获ISO 26262 ASIL D功能安全认证证书
- 新型IsoVu™ 隔离电流探头:为电流测量带来全新维度
- 英飞凌推出简化电机控制开发的ModusToolbox™电机套件
- 意法半导体IO-Link执行器电路板为工业监控和设备厂商带来一站式参考设计