如何应对高清移动多媒体设计中的挑战?

发布者:量子启示最新更新时间:2009-10-11 来源: 电子工程专辑关键字:高清  视频  播放  检测  图像 手机看文章 扫描二维码
随时随地手机看文章

  可以设想一个具有高清视频质量的手机,它能用来观看电视节目、视频短片或电影,记录生活镜头,甚至通过控制台玩高质量的3D游戏,这是多么令人惬意的事啊!而在无线市场中正发生的戏剧性变化能驱使设计师在移动设备上实现令人称奇的高清视频。如今,高分辨率移动显示器有了巨大的改进,移动存储的成本正在快速下降,3G网络支持宽带下载,低功率媒体处理性能也有了显著的提高,这些技术的进步将使下一代精密手机和便携式媒体产品产生质的飞跃。移动视频市场要想跨越早期的试用阶段,设备制造商必须突破目前的技术限制以实现高清移动多媒体应用。

  未来的手机将能记录和回放高清视频,粗颗粒、低分辨率的手机摄像将成为过去。数码相机上的先进性能,如自动曝光补偿,光学校正,图像稳定,红眼消除和人脸检测等,都将被用到手机上以捕获高质量的静止照片。而未来手机上的3D游戏性能也将媲美专用的手持式播放器的视频效果。最终,移动设备将能播放几乎所有格式的高清视频,并通过HDMI接口输出到高清电视机上。  高清消费体验是未来移动多媒体的关键组成部分,因此也是一个很好的市场机遇。然而,随着市场机遇给无线多媒体带来的显著变化,移动高清的实现也面临着严格的性能、功耗需求所带来的设计挑战。为了应对这个挑战,设计工程师必须获取低功率多媒体处理技术,同时采用新的标准,以及充分考虑高清的可能性和挑战及相关的处理架构。

  实现移动高清视频回放

  随着蜂窝网络带宽的提高和WiFi的普及,越来越多的消费者会把视频下载到他们的手机和移动媒体播放器上。互联网是今天最主要的视频来源。2008年1月,仅美国就提供了超过98亿个可在线收看的视频,其中三分之一来自YouTube网站。其他来源包括视频共享站点、音视频站点以及提供在线剧情的电视网络。

  对于想在手机上观看视频的用户来说,移动多媒体处理器需要识别和支持多种视频编码标准。表1列出了目前在用的各种视频编解码器。内容兼容性是支持“任何地方,任何内容”这个理想目标的关键。为了推进移动视频的普及,用户不必知道他们的设备支持何种格式或分辨率。用户也许不能在他们的手机上以全高清的分辨率观看高清编码的视频,但他们希望能用手机播放出来,并能输送到电视机上观看。

  正如表1所示那样,许多应用都有向H.26?视频标准转变的趋势,因为H.26?具有很高的编解码效率。H.264标准具有广泛的协议以适用于从低分辨率视频会议到HDTV等各种类型的应用。为了最大化兼容性,移动设备应支持H.26?基线协议(Baseline profile)以及运算能力更强的主要协议(Main profile)和高端协议(High profile),后者使用更高效率的CABAC(内容自适应二进制算术编码)无损压缩技术。H.26?高端协议在指定比特率下可以提供更高的质量,是高清蓝光盘首选的视频编解码标准。

  目前,虽然H.26?已经成为主要的视频编解码标准,但随着技术的不断发展,成功的移动多媒体架构还需要支持未来的媒体标准。通过采用一定程度的软件可编程性,成功的移动多媒体架构将支持新特性和新应用的快速集成,并支持不断演变的音视频编解码器。

  手机或移动媒体设备的电池寿命是设计视频回放功能的重要考虑因素。从很小的文件中解码出高质量的图片通常需要很强的处理能力。移动设备要想支持几个小时的视频回放,同时保留足够的电池使用时间,移动多媒体处理器的视频解码功率必须小于200mW,其中包括图形存储器在内。高功效且解码720p高清视频只需160mW的设备使用900mAH手机电池可以实现6小时的视频回放。

  考虑到移动视频回放的各种使用情况,用户很可能希望同时在手机和电视机上观看视频。为了实现这个目标,多媒体处理器必须具备强大的缩放引擎,该引擎能够在尺寸完全不同的显示器上同时缩放和显示图像。为了高性价比地支持同时在模拟电视和HDTV上进行视频回放,处理器应采用片上模拟电路来支持复合接口、S端子或HDMI接口。

[page]

  实现移动高清摄像机

  除了解码高清视频以便用户能在手机上回放这些视频外,未来的无线技术将能帮助用户在移动设备上实现高质量高清视频的记录。虽然目前有些手机已经支持视频记录,但采用的是低分辨率的QVGA格式,只能产生粗颗粒、低质量的视频。在手机上播放高清视频是移动媒体领域中的重大进展,但使用移动设备记录远超QVGA质量的高清视频代表了这一行业更大的进步。

  在考虑用移动设备记录高质量视频的要求时,图像传感器不是主要因素,而高效的视频编码和图像信号处理(ISP)是最重要的。在移动设备上编码视频所需的处理功率要比解码相同视频大得多。

  100万像素图像传感器很容易捕获高清720p图像产生的921,600个像素,因此主要挑战不在于传感器。困难来自于这个事实:这些100万像素必须以30帧/秒的速度进行记录,相当于26?Mbps的原始数据流。另外,为了具备高质量高清视频所需的图像校正、防抖、自动对焦、去噪声和曝光控制等先进功能,ISP管线必须足够快地处理这些实时数据。采用正确的视频编码和ISP架构,使用H.26?高端协议压缩,720p的视频可以从庞大的26?Mbps压缩到可管理的2-5Mbps,相当于记录一个小时的视频内容只需2GB。

  随着闪存容量的迅速提高以及价格的迅速下降,未来移动多媒体设备有望具备16GB以上的内容存储器。从存储器角度来看,支持长时间高清视频记录不成问题,只要高清编码具有足够高的功效。

  仅仅实现庞大的移动视频数据的管理和压缩是不够的,还必须以足够低的功率来完成,以保证手机电池有足够的使用时间。采用H.26?高端协议的视频编码具有针对功率优化的多媒体架构,因此完全可以胜任。高质量高清记录(包括图形存储器在内)的处理功率小于450mW时,在使用标配电池的手机上记录音视频的时间可以长达数小时。在满足这种处理器功率规范的条件下,用户可以在手机上记录长达3小时的高清视频。手机提供高清摄像功能将极大地提升用户生成的内容等级,有助于推进移动多媒体应用的普及,进一步扩大基于web的视频共享应用范围。

  高清已经离我们不远了

  现在正是有创新能力的设计工程师开发未来移动设备的合适时机。设计足够的处理能力以使手机与其他多媒体设备能够播放和记录高清视频是一个令人兴奋的机遇,同时也是一个艰巨的任务。

  Broadcom最近推出的一款多媒体处理器可以让消费者在手机上记录与回放高清视频、捕获高质量照片,同时还能玩3D游戏。这款型号为BCM2727 VideoCore III的多媒体处理器是该公司首个高能效、大功率多媒体处理器,可以在低功耗条件下用H.26?高端协议的压缩技术提供720p高清编码和解码功能,从而实现移动高清应用。

  一些领先的手机和便携式媒体播放器公司正在设计下一代高清移动设备。在今后几年内,全球手机用户将能在手机上观看和记录高质量高清视频、捕获高质量照片,并同时玩3D游戏。


表1:流行的视频播放器和相关编解码器。

关键字:高清  视频  播放  检测  图像 引用地址:如何应对高清移动多媒体设计中的挑战?

上一篇:支持H.264高清编解码器的片上系统MG3500
下一篇:机顶盒价格高达2000元 成高清电视拦路虎

推荐阅读最新更新时间:2024-05-03 19:21

火灾监控系统的无线温度检测仪设计
0 引言 近年来,随着我国国民经济的高速增长,各行业用电量大幅度增加,同时伴随着电气火灾也呈现逐年上升的趋势,给国民经济和人民生命财产造成巨大损失。电气火灾的起火主要有漏电、短路、过负荷几种原因。由电力设备发热而最终导致的电气火灾在全部电气火灾中占到了60%以上的比例;另外,由绝缘受损、环境潮湿等引起的泄漏电流故障(以及由泄漏电流电火花引起)又在电气火灾的起因中占有10 %以上的比例。 当绝缘受损的线路上产生的泄漏电流为300~500 mA时,破损处将和邻近的接地导体产生火花放电现象。这时,释放出的电火花可以轻易地引燃周围的可燃物和易燃物,从而造成火灾事故。即使周围没有易燃、可燃物存在,泄漏电流产生的火花放电同样可加速绝缘
[单片机]
火灾监控系统的无线温度<font color='red'>检测</font>仪设计
高通骁龙625为华为nova提供动力支持
今年9月在IFA2016上首次亮相的华为nova于近日正式在国内发布。高通骁龙625处理器再次受到青睐,为这款面向年轻群体的新机提供支持。 主打拍照的华为nova配备了1200万大像素主摄像头,支持PDAF相位检测极速对焦,在暗光环境中也可显示极佳的拍摄水准。此外,它还支持4K高清视频的拍摄。它的处理器核心 骁龙625,在处理器端集成双ISP,支持更高质量的弱光快照及重新对焦、高级编辑和特殊效果等先进的后期处理特性;同时也支持4K高清视频的录制与播放。 在性能与功耗上,搭载骁龙625的华为nova可轻松应对大型游戏和其他各种应用的需求。骁龙625采用 14纳米FinFET制程工艺,在功耗较前代产品降低35%的同时,
[手机便携]
高通骁龙625为华为nova提供动力支持
基于GIO/FVID的DSP视频处理驱动程序
  引言   随着时代的发展,DSP技术在远程监控、可视电话、工业检测等视频处理领域得到了广泛的应用,对于不同的视频处理系统,会使用不同的视频设备,所以有必要为视频设备设计驱动程序,为高层应用程序提供统一的接口来操作底层硬件。只要是遵行此驱动程序接口标准开发的高层应用程序,都可以在具有相同接口的不同硬件平台上运行,具有很好的通用性和可移植性,同时高层应用程序设计人员只要会使用设备驱动程序提供的API接口,就不必了解底层硬件的具体实现,可以大大地提高整体视频系统的开发效率。   对于视频设备,TI公司提出了对应的视频设备驱动程序模型,但这些模型主要是针对6000系列高端DSP,甚至是DM64X这样的视频处理专用DSP设计的,而TM
[嵌入式]
法国创企融资210万欧元 研发用照片视频识别汽车损坏的AI技术
据外媒报道,法国初创公司Monk表示,其在种子轮融资中成功筹集了210万欧元(约合1683.89万元人民币),该轮融资由Iris Capital领投,Plug and Play以及Patrick Sayer、Yannis Yahiaoui和Arthur Waller等关键商业天使参投。Monk主要研发基于人工智能(AI)技术的检查和检测系统,用于识别汽车损坏情况。 (图片来源:Monk) 总部位于巴黎,Monk将把融得的资金用于研发项目、招聘新团队成员(尤其是数据科学家),以及扩大在欧洲的业务。 Monk公司首席执行官兼联合创始人Aboubakr Laraki表示:“Monk的使命是通过在汽车转手时提升信任和效率,以
[汽车电子]
法国创企融资210万欧元 研发用照片<font color='red'>视频</font>识别汽车损坏的AI技术
汽车检测中语音合成器的设计与实现
汽车数量的急剧增加,加大了汽车检测工作的工作量。汽车检测中,检测人员要用眼浏览并判定许多屏幕上的信息,并做出判断。调查研究发现,检测人员的耳未发挥出应有的功能,而用语音的形式告知检测人员的检测结果,可减轻检测人员的工作负担,汽车检测线语音合成器就是为此目的研制的。  1 主要技术指标  1.1 语音合成器输出语音信号要求  (1)输出语音信号特征  语音合成器输出语音信号特征为,语速:3~4字/秒;信噪比:20 dB;频率:300~3000 Hz,公输出大约90句话语。  (2)输出语音信号参数  电压 幅值:3 V (带负载,有效值);  输出阻抗: <50 Ω;负载阻抗: 600 Ω。  2
[嵌入式]
研华边缘AI系统AIR-030面市,赋能机器人和视频分析技术
研华边缘AI系统AIR-030面市,赋能机器人和视频分析技术 2023年,研华推出基于NVIDIA Jetson AGX Orin平台的 AIR-030边缘AI系统系列工控机。 NVIDIA Jetson AGX Orin模块可提供高达275个TOPS和8倍于上一代产品的性能,因此 AIR-030可为AI开发人员提供易于部署、配置的解决方案,以加速AI机器人和AI视觉应用落地。 AIR-030边缘AI解决方案 搭载面向边缘AI的DeviceOn软件,从AI容器部署、AI模型OTA更新、训练到性能优化,推动了AI开发生命周期管理。DeviceOn Edge AI软件还提供从边缘AI设备到云端AI的实时监控和管理。结合
[机器人]
研华边缘AI系统AIR-030面市,赋能机器人和<font color='red'>视频</font>分析技术
联咏科技获得CEVA-XM4图像和视觉DSP授权许可
专注于智能互联设备的全球领先信号处理IP授权许可厂商CEVA公司宣布中国台湾第二大无晶圆厂IC设计企业联咏科技(Novatek Microelectronics)已经获得CEVA-XM4智能视觉DSP授权许可,用于其下一代视觉功能系统级芯片(SoC)产品,瞄准一系列需要先进视觉智能功能的终端市场。联咏科技现有的摄像机SoC系列集成了第三代CEVA-MM3101图像和视觉DSP,用于汽车DVR和监控系统,正在批量付运。 通过集成CEVA-XM4作为其下一代SoC设计中的专用视觉处理器,联咏科技和其客户能够快速部署高度复杂的视觉算法以实现具有面部识别和认证的监控系统、无人机防撞系统和先进驾驶辅助系统(ADAS)等先进应用。这类应用使
[嵌入式]
英伟达新型AI模型将静态图像变为3D模型 可用于训练自动驾驶汽车
英伟达又为浅层图形增加了深度。在将2D图像转换为3D场景、模型和视频之后,该公司将重点转向了编辑。据外媒报道,当地时间6月22日,该家GPU巨头公布了一种新型AI方法,能够将静态图片转变成创造者可以轻松修改的3D物体。英伟达的研究人员研发了一种反向渲染产品——英伟达3D MoMa,能够让用户将一系列静态照片重建成有关一个物体甚至一个场景的3D计算机模型。与更为传统的摄影制图法相比,该工作流程的主要益处在于其能够输出干净的3D模型,还能够通过3D游戏和视觉引擎导入和输出。 英伟达新型AI模型(图片来源:英伟达) 据报道,其他摄影制图程序能够将3D图像转变为3D模型,而英伟达的3D MoMa技术则更进一步,通过创建物体的
[汽车电子]
英伟达新型AI模型将静态<font color='red'>图像</font>变为3D模型 可用于训练自动驾驶汽车
小广播
最新家用电子文章
换一换 更多 相关热搜器件

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 电视相关 白色家电 数字家庭 PC互联网 数码影像 维修拆解 综合资讯 其他技术 论坛

词云: 1 2 3 4 5 6 7 8 9 10

北京市海淀区中关村大街18号B座15层1530室 电话:(010)82350740 邮编:100190

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved