视频监视系统中视频质量优化策略研究

最新更新时间:2011-10-26来源: 互联网关键字:视频监视  视频质量  优化 手机看文章 扫描二维码
随时随地手机看文章

随着自动化技术和软硬件技术的不断发展,传统工业对于自动化技术的要求显著提高,极大地促进了视频监视技术的发展;同时由于“911”事件的影响,世界对于安全的注重超过以往任何时候,安全防护成了各项活动的重中之重。在工业中,仪器设备的正常运行对工厂的安全正常运行有着决定性的意义,所以很有必要对这些仪器、设备进行监视。在安防中,由于涉及到巨大的人身及财产伤害,对于监视的实时性以及准确性的要求不言而喻。基于此,视频监视技术取得了长足的发展。而在视频监视技术的发展过程中,监视视频的质量成为视频监视系统中最重要的部分。因此对监视视频质量的优化策略研究直接影响整个视频监视系统的性能。

  1 存在的问题

  监视视频的质量主要体现在实时性、流畅性和清晰度等性能指标上。在一般视频监视系统中,实时性主要由监视终端视频处理性能决定。实时性要求客户端软件以最快的速率进行网络视频数据解码。由于远程监视系统中,监视终端存在接收缓冲区,缓存网络数据流,因此实时性要求数据在缓冲区中几乎不进行缓存。而对于视频流畅性,主要由监视终端解码、显示速率与网络视频流接收速率的相对关系决定,当解码、显示速率比视频流接收速率高时,解码、显示会阻塞等待视频接收,由于此等待过程并非平均分布在每一帧,因此会造成播放视频流畅性问题。清晰度主要和视频数据的丢包率有关,在网络状况理想的情况下,丢包率主要与监视终端数据处理效率有关,当终端数据处理速率较低时,由于视频数据累积,会造成接收缓冲区溢出,从而导致丢包率升高,引起清晰度问题。在实际应用中,网络拥塞对丢包率影响很大,决定了视频的清晰度。

  由上述分析可知,要想保证视频实时性能,必须提高视频终端的处理性能。而同时由于实时性和流畅性存在矛盾:实时性要求监视终端以最快速率进行数据处理;流畅性要求视频流进行缓冲,同时控制监视终端解码、显示速率。为了达到好的监视效果,必须找到均衡控制策略,一方面让视频进行缓冲,保证视频解码、显示不阻塞,另一方面保证数据快速解码,不产生累积时延。同时必须对网络拥塞进行抑制,以保证视频清晰度。

  2 优化控制策略

  2.1 零拷贝缓冲区策略

  流媒体编程中处理的数据量非常大,减少数据拷贝可以提高客户端对流媒体数据的处理速度、降低时延以及减轻处理器的负载;也可以减少客户端因为数据拷贝,来不及处理后续数据包而带来的丢包现象。从而节约系统资源,提高流媒体的播放质量。零拷贝缓冲区策略通过合理的缓冲区设计,能减少90%的数据拷贝工作,大大提高系统性能。

  零拷贝缓冲区策略合并接收缓冲区和解码器输入缓冲区,使得缓冲区间的数据拷贝操作变成指针操作。

  零拷贝缓冲区原理图如图1所示,Read-ptr:视频解码指针,指向待解码的数据;Write_ptr:接收数据指针,指向网络数据的存放地址;valid_data_ptr:有效缓冲区首地址,网络数据存放的首地址。备用缓冲区不存放从网络接收的视频流,当如图2所示,有效数据分为2块时,并且解码数据分别存在于缓冲区中的2个部分,则传递给解码器Read-ptr并不能满足要求,因此需要使用到备用缓冲区,具体策略是将Read-ptr后的数据拷贝到Buffer_ptr里,使得解码数据变成一块连续缓冲区。由于在视频监视系统中,一帧数据的数据量比接收缓冲区小得多,因此发生这种拷贝的几率很少,而且每次拷贝的数据量也很少,能大大优化系统性能,提高监视终端解码、显示的效率。

  

2.2 网络拥塞抑制策略
 
  当通信网络中有太多的分组需要传输时,会使整个网络的性能降低,传输质量下降,产生网络拥塞现象。当发生网络拥塞时,如果不能及时地对网络拥塞进行抑制,视频延时会上升、网络丢包率急剧增长,同时也会带来一定的流畅性问题,给视频质量造成很大的影响。对于拥塞的解决办法无非只有2种:增加网络资源和降低负荷。前者由整个互连网络决定,没有办法进行控制,后者由每个用户决定。当出现网络拥塞时,适当地减少服务器端视频采集的速率,这样既减少了传输的数据,降低了网络负载,同时又降低了客户端数据的需求,减少了视频质量下降的几率。
  在RTP协议中,使用RTCP(实时传送控制协议)来进行流量控制和拥塞控制。在RTP会话期间,各参与者周期性地传送RTCP包。RTCP包中有5种不同类型的RTCP控制分组,其中有2种:SR(Sender Report)发送者报告,用于当前发送者的发送情况和接收情况的统计;RR(Receiver Report)接受者报告,用于当前接受者的接受情况的统计。
  RTCP包中含有已发送的数据包的数量、丢失的数据包的数量等统计资料,可以利用这些信息动态地改变传输速率,甚至改变有效载荷类型。
  在客户端可以周期性统计接收数据包的总个数以及丢失数据包的个数,然后按照RTCP的数据包格式填充数据包,发送至服务器端,然后服务器端通过相应的流量控制算法,利用客户端传输过来的具体参数,则可以动态的调节数据包的采集以及发送速率。
  2.3 编解码速率协调策略
  在一般视频监视系统,监视终端进行视频解码时,为了确保每帧数据的完整性,需要判断接收缓冲区中数据是否达到一定要求Limit_ A,但是由于监视图像在背景固定和背景剧烈运动时,每帧数据量相差非常大,剧烈运动时的数量量往往是静止时的几倍,因此对于Limit_A的选择比较困难。当Limit_A选择较小时,在剧烈运动的情况下,解码数据可能不是完整一帧,造成视频质量问题;当Limit_A选择较大时,在几乎静止的情况下,可能会造成视频的停顿以及长时间的视频延时。因此Limit_A必须是动态变化的,同时缓冲区中的数据由于静止和运动时的数据量不同,数据量也必须进行严格的控制,防止在静止情况下出现大规模延时。
  在监视系统中,接收缓冲区就像一个漏斗,从网络接收数据写入缓冲区就像往漏斗里注水,从缓冲区取出数据进行解码播放,就像从漏斗出水一样。在一个漏斗中,当入水和出水相同时,不仅能使水流顺畅,同时漏斗里的储水量也几乎恒定,如图3所示。当然在监视的系统中,由于存在时间差(往缓冲区里存储的帧与从缓冲区中取出的帧在时间上存在着差异),“出水速率”和“入水速率”(帧的大小)往往不相同;当视频从运动变为静止时,“出水速率”会比“入水速率”大,当视频从静止变为运动时,“出水速率”会比“入水速率”小。因此不能简单地套用此模型。
  
 
  由于视频显示速度不是以比特(bit)为单位而是以“f/s”为单位,所以当“水”的单位变为“f”,相应的“出水速率”和“入水速率”也变成“f/s”,则整个系统模型变为:当输入帧率和输出帧率相同时,就可以保证缓冲区中具有恒定的帧数stay_M,如图4所示。同时只要确保Limit_A的值正确,那么每帧数据都可以是完整的,视频也会是流畅、完整的。
  输入速率就是从网络接收视频帧的速率,理想地来讲,也即是监视服务器采集、发送视频的速率;而输出速率应是从缓冲区取出数据进行解码的速率,由于视频质量最后呈现给用户的部分是显示部分,因此将输出速率改为显示速率更为妥当,同时为了保证视频帧的完整性,解码速率也要进行适当的控制。
  此策略的实施办法就是控制服务器端视频采集、编码的速率和客户端视频显示的速率,使它们速度相同,同时在Limit_A的选取上,根据视频连续性的关系,由实际消耗数据决定下一帧Limit_A的值,同时平滑解码速率,使得每帧的解码过程能够平均分布。
3 实验结果分析
 
  本文的测试环境为:监视服务器运行Davinci开发平台,具有ARM+DSP双核结构,ARM子系统进行常规处理,DSP子系统进行快速数字信号处理。ARM子系统最高主频为297 MHz,DSP子系统最高主频为594 MHz,最高速度为每秒4 752百万条指令;监视终端运行于PC机,处理器为奔腾42.8 GHz,内存1 GB,显存256 MB,内置100 Mb/s网卡,160 GB硬盘,操作系统为Windows XP。监视服务器与监视终端通过校园网络相连。测试内容主要是针对客户端发出连接请求后5 s,10 s,30 s,60 s,90 s,120 s,150 s,200 s,250 s,300 s时的系统状态:主要包括时延、丢包率以及产生停顿现象帧的百分比率。测试过程为单用户情况下,对优化前后视频质量进行比较。如图5所示为优化前、后的时延变化图。从图中可以观察出,优化前时延随着监视时间的增加而增长,这是由于监视终端缓冲区之间拷贝操作过多,造成客户端解码显示、速度相对较低,因而引起监视终端累积延时。而优化后的时延基本稳定,大概在1.5 s左右,没有累积时延。这是由于缓冲区策略的控制,监视终端视频解码、显示速度有了大幅提高,同时在编解码速率协调策略的控制下,视频编解码速度相对比较平均,有效的抑制了累积时延,保证了系统实时性。因此优化控制策略对于时延的控制十分有效。
  
 
  如图6所示为优化前、后的丢包率变化图。从图中可以观察出,优化前,系统丢包率在开始监视的时比较稳定,但随着监视时间的增长,丢包率迅速增加。由于累积时延存在,缓冲区必定会溢出,因此导致丢包率迅速增加。而在优化后的系统中,由于不存在累积时延,因此系统缓冲区利用率比较小,不会造成由于缓冲区溢出而产生的丢包现象,因此确保了系统的监视视频质量。在优化后的系统中,丢包率依然存在较大波动,这是因为在网络拥塞的情况下,不可避免会产生较大丢包率,但是由于拥塞控制的作用,丢包率会受到抑制,缓慢恢复到正常水平。
  
 
  图7为停顿帧百分比的变化图。从图中可以看出,优化后的停顿帧百分比比优化前有了较大的提升,优化后的停顿帧百分比大概稳定在1.5%左右。随着视频实时性的提高,视频缓冲的时间也大大减小,缓冲区数据量也大大减小,因此造成监视终端解码、线程间歇性等待网络数据流,从而造成停顿百分比增高,视频出现停顿现象。由于优化后视频停顿百分比基本稳定且居于可以接受的范围,这也进一步表明编解码速率协调策略进行了有效的控制。
  4 结语
  视频监视系统中,对系统软件硬件设计实现完成后,很重要的工作就是对监视视频质量的优化,只有监视视频的质量达到要求,系统才能满足实际应用的需求。因此本文基于这个问题,首先分析了监视视频性能指标的影响因素,然后提出2种优化策略,实验结果表明,这两种策略有效地提高了监视视频的质量,保证了监视视频的实时性,流畅性和高清晰度。
关键字:视频监视  视频质量  优化 编辑:神话 引用地址:视频监视系统中视频质量优化策略研究

上一篇:基于DM642的X.264编码器优化
下一篇:3D视频技术全面解析

推荐阅读最新更新时间:2023-10-12 20:31

奥迪研发绿灯优化技术 提升用户驾驶体验和舒适度
对于大多数驾驶者来说,一个接一个地通过一系列绿灯,是驾驶体验中最高兴的事情。现在,奥迪正在更新其嵌入式红绿灯读取技术,以帮助用户更精确地捕捉那些神秘的“绿波”。奥迪称这项新功能为“绿灯优化速度咨询” (Green Light Optimized Speed Advisory)或GLOSA,它告诉司机如何调节车速以减少红灯停车等待时间。 一些2017和2018奥迪车型具有内置的类似基础设施技术,允许它们通过内置的4G LTE热点从集中的交通灯管理系统接收信息。从本质上讲,安装在交通灯上的传感器与汽车“对话”,告诉它红灯变绿还需要多少时间。 使用交通信号信息和车辆的当前位置,奥迪车主现在将看到方向盘后面屏幕上显示的速度建议。离开信号
[汽车电子]
奥迪研发绿灯<font color='red'>优化</font>技术 提升用户驾驶体验和舒适度
集散式逆变器助力光伏电站优化设计
2016年1月13日,由光动传媒-光伏们,西北勘测设计研究院等联合举办的“2016电站设计与设备选型研讨会”在古都西安隆重举行。中电联水电与新能源处处长汪毅、西北勘测设计院长光电分院院长肖斌、北控清洁能源执行总裁王野、上能电气总工程师易强以及来自电站开发与投资企业、电力设计院、相关政府机构及组织、工程公司、第三方机构、制造企业和媒体的500余名业内人士出席了本次研讨会。 本次研讨会的主题是“探索电站设计,聚焦设备选型”,透过投资方、设计院、设备供应商、标准机构不同的视觉,从光伏电站设计理念和设计规范探讨,从不同应用场景对关键设备选型要求,从不同类型电站设计差异等方面进行深入讨论。 上能电气股份有限公司总工程师易强做了《集散式逆变
[新能源]
如何优化工业DAQ系统设计
可编程逻辑控制器( PLC )是很多工业自动化和过程控制系统的核心,可监控和控制复杂的系统变量。 基于PLC的系统采用多个传感器和执行器,可测量和控制模拟过程变量,例如压力、温度和流量。 PLC广泛应用于众多不同应用,例如工厂、炼油厂、医疗设备和航空航天系统,它们需要很高的精度,还要保持稳定的长时间工作。 此外,激烈的市场竞争形势要求必须降低成本和缩短设计时间。 因此,工业设备和关键基础设施的设计人员在满足客户对精度、噪声、漂移、速度和安全的严格要求方面遇到了严峻的挑战。   本文说明如何利用 ADAS3022 来替换模拟前端(AFE)级,从而降低复杂性,解决多通道数据采集系统设计中遇到的诸多难题。 这种高性能器件具有多个输
[嵌入式]
从规划到评估全生命周期优化PTN网络
      PTN从本质上讲是一种新型的数据设备,对网络的运维带来一种全新的挑战,比如网络开通复杂、需要规划的网络参数多、对运维人员的要求高等,如何将复杂的运维问题简单化,提高运维效率是PTN技术面临的最重要的课题。       四维度的网络规划       网络的规划是PTN建网前的一个重要步骤,主要包括如下几个方面的规划。       可扩展性规划。对网络进行层次划分,分为接入、汇聚、核心几个层次,接入环主要采用GE组网,汇聚和核心采用10GE组网,为了适应Backhaul这种大型网络的需要,采用静态LSP技术,以提高网络的可扩展性。同时在组网模式上,主要采用环网的方式,特殊情况下可以采用环带链的方式。    
[网络通信]
斯坦福大学利用两亲聚合物优化锂硫电池阴极
    锂硫电池与现在市场主流的锂电池相比,有着许多明显的优势,具有电池能量密度大、造价低的特点。然而,锂硫电池的随着充放电次数的增加其容量衰减情况相当严重。现在,斯坦福大学的Yi Cui教授发现了锂硫电池阴极容量衰减的新机理,并着力于克服这种现象。     Yi Cui发现的新的容量衰减机理具体为:在放电过程中硫化锂会从碳原子表面分离。为了解决这个问题,研究人员采用两亲性聚合物来优化碳层表面。实验结果显示,采用这类聚合物后,容量达到1180毫安时/克。在300次充放电循环后,其容量保持率在80%左右。 经过优化后的锂硫电池阴极容量与充放电循环次数的关系图     试验中的锂硫电池阴极容量约为1673毫安时/克,
[汽车电子]
采用MSP430的烟雾报警器优化设计
引 言 传统的烟雾报警器一般由烟雾传感器和烟雾探测芯片构成,探测芯片接收传感器信号并进行处理,从而判断是否有火灾发生。这种烟雾探测器结构简单、成本低,但存在误报率高和环境适应能力差的缺点。为了解决这一问题,单片机被嵌入到报警器中,以识别传感器因环境影响而产生的干扰信号。但是这样做又带来了其它方面的问题:(1)采用一般的单片机,比如51单片机,会大大增加报警器的功耗,这对于长时间需要电池供电的烟雾报警器而言是不能接受的;(2)传感器产生的是微弱的模拟信号,这一信号要经过放大、模数转换之后才能被单片机处理。采用独立的A/D转化电路不仅增加了系统的功耗,还降低了系统的可靠性;(3)单片机软件设计不合理,致使报警器误报率较高,操作控制
[单片机]
采用MSP430的烟雾报警器<font color='red'>优化</font>设计
C语言嵌入式系统编程修炼之六:性能优化
使用宏定义   在C语言中,宏是产生内嵌代码的唯一方法。对于嵌入式系统而言,为了能达到性能要求,宏是一种很好的代替函数的方法。   写一个 标准 宏MIN ,这个宏输入两个参数并返回较小的一个:   错误做法: #define MIN(A,B)  ( A = B ? A : B )   正确做法: #define MIN(A,B) ((A) = (B) ? (A) :(B) )   对于宏,我们需要知道三点:   (1)宏定义 像 函数;   (2)宏定
[单片机]
基于C语言的设计流优化语音识别芯片结构设计
据预测,市场对语音控制应用设备的需求将急剧增长,其推动力来自电话机市场。电话机将更多地采用语音命令进行控制。其他应用领域包括玩具和手持设备如计算器、语音控制的安全系统、家用电器及车载设备(立体声、视窗、环境控制、车灯和导航控制)。本文从可复用和优化芯片空间的角度出发介绍语音识别芯片结构设计的种种考虑,其思路有利于开发一系列其它语音识别芯片。 新加坡Columns公司在便携式语音控制产品应用中起步较早,其中一个产品是执行欧元与其他欧洲货币之间进行兑换的“语音控制欧洲货币兑换器”。欧元兑换器的设计要求包括:1. 功率小,电池寿命至少为1年;2. 价格低廉,产品零售价不超过9美元;3.具有很强的灵活性,能用多
[手机便携]
小广播
最新模拟电子文章
换一换 更多 相关热搜器件
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved