百万像素摄像机芯片技术解析

发布者:星光曲折最新更新时间:2012-11-05 来源: 21ic 关键字:高清摄像机  半导体  DSP 手机看文章 扫描二维码
随时随地手机看文章

  早在2008年高清视频监控已被业界提出,并一度成为关注的热点,但由于当时的技术、成本和实际的客户需求等多种原因高清视频监控的市场实际上并未真正启动。然而从现在来看,高清视频监控不再停留在口号上,各个厂商开始把它作为重点产品技术发展方向,也同样作为市场推广的重点。天地伟业同样把握了行业的趋势,集成尖端科技的同时结合成熟项目应用推出了应用于各个行业领域的高清视频监控解决方案。具有高清化、网络化和智能化三种特征相结合的新一代视频监控技术作为现代化安防技术的典型代表,正在获得越来越多的关注和实际应用,它将逐步取代传统的视频监控技术,在社会面治安监控系统中发挥不可替代的作用。

  面对越来越大的市场,需求量的提升会带来更高性能和功能的需求,高清摄像机产品的核心芯片技术的革新和性能的提升对高清视频监控市场的状况将起到决定性作用。首先,我们先简单分析目前高清摄像机产品常见的部件架构。常见的高清摄像机分为图像传感器、ISP(图像信号处理器)、压缩处理器或数字视频转换三个常见部分,市场上一些新发布的高清摄像机还会在ISP与压缩处理器之间包含一个智能分析处理器。

  

  百万像素摄像机芯片技术解析

  图像传感器

  图像传感器是组成数字摄像机的重要组成部分。根据元件的不同,可分为CCD和CMOS两大类。如SONY的 ICX 445、ICX274、IMX035/036,Aptina的MT9M033、MT9D131、MT9T031,Omnivison的OV2715等等。图像传感器的作用是将光学图像采集并转换成后端ISP可用的电信号。

  过去,我们常说CCD是应用在影像产品的高端技术元器件,而CMOS由于其低照性能、曝光模式等技术性能有限应用于低影像品质产品中。如今,CMOS技术快速发展,例如SONY推出了使用Exmor技术的IMX035/036图像传感器,其低照性能、图像分辨率及帧率、芯片处理速度有了很大程度的性能提升。

  ISP图像信号处理器

  ISP(Image Signal Processor)图像信号处理器的主要作用是对前端图像传感器输出的信号做后期的处理。不同的ISP用来匹配不同厂商的图像传感器。ISP的优异在整个摄像机产品中很重要,应当说它直接影响呈现给用户的影响画质的优劣。图像经过图像经过CCD或者CMOS的采集后,需要经过后期的处理才可以较好的适应不同的环境,在不同的光学条件下都能较好的还原出现场细节。在ISP中它会完成我们常常提及的2A(AWB/AE,自动白平衡/自动曝光)或者3A(AWB/AE/AF,自动白平衡/自动曝光/自动聚焦)。传统模式下一般采用一颗DSP或者一颗FPGA来完成对图像的后期处理。有些摄像机产品支持的3D降噪功能、宽动态、慢快门、帧累积、强光抑制等功能也都是ISP来完成的。[page]

  目前应用在高清摄像机产品中的ISP一般有以下几个来源:

  厂商自行研发:高清摄像机设备厂商为了更好的配合后端压缩、功能开发,自行研发ISP处理算法,将算法集成至FPGA或DSP芯片中,接驳前端图像传感器。

  第三方研发:2010年已经逐渐诞生了一批由非高清摄像机制造厂商推出的一些ISP解决方案,他们直接出售不同的ISP芯片给摄像机厂商配合不同厂商的Sensor。

  套片模式:由Sensor厂商将自主开发的ISP结合自家Sensor形成图像采集处理解决方案推向客户,其中的图像处理算法及各种调试工作已经完成,摄像机厂商只需要做接口对接并后端压缩或转换成数字视频(HD-SDI)即可。这种模式我们称为Stand-Alone Devices或者Camera System Onchip。

  第一种来源方式具备较高的灵活性,使得开发者在选择方案时拥有更多的组合(主要是选择不同厂商的Sensor)。但是对于产品而言,一方面增加了整机的功耗、散热等问题,另外也增加产品开发投入,也意味着研发高清摄像机产品的厂商需要更雄厚的技术实力。而后两种来源方案无疑大大降低了产品开发的门槛,但相对自主研发ISP肯定要增加部分成本。设想如果有集成度更高的高清摄像机芯片解决方案,将ISP和视频压缩编码功能融合在一起无疑是更好的选择。

  压缩处理器或数字视频转换

  首先我们来了解压缩处理和数字视频转换的概念。ISP将前端图像传感器信号处理后,一般会以MPTE296M/BT.1120/ YUV 4:2:2等数字接口格式传输到后端处理芯片中。压缩处理器(SoC或DSP)可以将视频信号以H.264/MPEG-4/MJPEG算法进行编码压缩,然后通过内建的网络服务以TCP/IP协议的网络信号进行传输给用户。数字视频转换则是非压缩方式,通过数字视频转换芯片将ISP输出的数字信号转换成SD-SDI/HD-SDI/3G-SDI信号,分别对应标准清晰度(VGA)、高清标准(1080P@30fps)、1080P@60fps甚至更高的分辨率。HD-SDI高清视频信号需要使用专用的传输周边设备,如SDI光端机、SDI矩阵等等。

  在此,我们着重介绍压缩处理器。我们看到一款高清摄像机产品的参数性能时,时常看到SoC这个字样,SoC(System On Chip)的定义多种多样,由于它的应用领域范围广,内涵丰富很难给出具体定义。一般来说我们称为系统级芯片,也称片上系统,意指它是一个系统,是一个专用的集成电路,其中包含完整的高清摄像机系统并嵌入软件服务。

  高清摄像机中的SoC市场上常见的厂商有Ti(德州仪器)、Ambarella(安霸)、Hislicon(海思半导体)、NXP(恩智浦半导体)等。不同厂家的硬件压缩处理器拥有各自的特性,比如低功耗、高性能、高视频压缩质量、高压缩比等。我们前文中提到将ISP图像信号处理与后端视频压缩融合的概念,传统意义上来讲,前文介绍的高清摄像机的几个重要器件是彼此分开的,不同的处理工作由不同的芯片完成,那么随着SoC芯片技术的发展和市场的大趋势,越来越多的厂商将ISP与视频压缩处理甚至是智能分析技术融合在一起,将功能固化在一颗芯片中。

  高清摄像机中应用的NXP ASC8850,Hislicon Hi3516,都集成了ISP中实现的3A、3D降噪、宽动态(WDR)、强光抑制、背光补偿、数字防抖等图像处理功能,Hi3516芯片还集成了智能分析加速引擎,支持智能运动侦测、周界防范、人脸检测、镜头保护等多种分析应用。并且,这些SoC芯片对我们厂商还开放了ISP相关的API(程序接口),可供我们对ISP效果二次调节开发优化。这些芯片技术使得高清摄像机的集成度越来越高,芯片的融合将是一个趋势。

  笔者认为高清摄像机SoC芯片的发展将会在功耗、编码性能、ISP、智能分析这几个方面做技术突破来寻求发展,那么将会带动高清摄像机产品的发展。

  更低的芯片功耗可以使得高清摄像机体积更小、可应用于更恶劣的环境、以及衍生出多种多样的高清摄像机产品形态。

  更高的编码性能可以使得高清摄像机拥有更高像素的实时压缩能力,大部分的高清芯片如TI的DM368、海思的Hi3515/3516、NXP的ASC8850等都可以做到1080P@30fps,3兆及5兆像素级还无法做到实时压缩,更高像素的高清摄像机可以替代我们传统模式的一点多机的多区域监控模式,可有效的降低设备投入成本以及周边布线成本。

  现在大部分内置ISP功能的视频芯片对CMOS芯片的支持都比较完善,可以直接对接各主要Sensor厂商的主要产品,但是对CCD芯片的支持则相对有限,还需要开发者做二次转换。

  目前的带智能分析功能的高清摄像机是在设备中预留一颗较高主频的DSP或者ARM核心,开发者可以自己选择将智能分析算法中的某一部分功能或者全部移植到该DSP或者ARM上,形成带智能分析的智能高清摄像机。

  目前业界主要的SoC厂商都已经意识到主控芯片的整合化趋势,并大量投入研发力量进行新一代高清SoC芯片的研发,不管是率先推出ASC8850的NXP和推出DM368的TI,还是新发布Hi3516的海思半导体,都已经开始在高度融合的高清摄像机主控芯片上有所建树,同时也还有一些有影响力的IC厂商正跃跃欲试,相信随着芯片厂商的努力和推动,结合下游设备厂商的市场推广和用户需求的拉动,高度集成的新一代高清摄像机SoC芯片将会取得越来越大的发展,并将逐步成为一个成熟的产业。

  结束语

  高清摄像机的相关芯片技术正在高速发展,市场对高清监控产品的性能要求也在不断提高,一般的720P分辨率已经有点捉襟见肘,200万像素、300万像素甚至500万像素高清摄像机的需求在不断涌现,这些需求对高清摄像机的相关芯片性能提出了更大的挑战。而真正要全方位的实现高清视频监控,势必是从前端产品的高清化,再到网络传输、集中存储、显示控制、平台管理等方面均支持高清视频监控。

关键字:高清摄像机  半导体  DSP 引用地址:百万像素摄像机芯片技术解析

上一篇:智能触摸屏之电阻式触摸解析与点评
下一篇:索尼VRD-MC1 DVD刻录机解析

推荐阅读最新更新时间:2024-05-02 22:25

官方:台湾半导体设备现在已经不能出售给晋华
        集微网消息 刚刚,有消息传出称美光掌握了确切证据,并在美国控告联电涉及经济间谍罪。         这无疑是美光与联电、晋华之间“战争”的升温。据台湾媒体报道,民进党发言人郑运鹏表示,在美中贸易战全面升级之际,修改《营业祕密法》成为台湾下阶段的重要任务。         2017年12月,美光指控联电与福建晋华公司合作研发DRAM,涉嫌侵害营业祕密;并指控晋华透过联电招揽台湾员工,窃取美光档案,以加持晋华的芯片技术。之后,联电遭台中地检署起诉。对于这场起诉已经有1年的时间,由于案件涉及商业机密而限制阅卷,因此案件目前还在台中地方法院审理中。         同样,福建晋华也遭受“重击”。美国时间10月2
[手机便携]
Entegris过滤器帮助提高半导体制程的良率
新型过滤器应用于化学机械研磨 (CMP) 生产机台中以去除来自环境空气中的酸类污染物 一家为先进制造环境提供良率提升材料和相关解决方案的领先企业,日前发布了 VaporSorb™ 系列气体分子污染 (AMC) 过滤器的新产品。此款新型的“多合一”单过滤器可在半导体制造的化学机械研磨 (CMP) 工艺中去除关键 AMC。领先的过滤器品牌 VaporSorb 在半导体制造的关键步骤中主要用于洁净室环境和生产机台,是面向 CMP 生产机台的首款过滤器,可抵御弱酸以及其他污染物。 此款新型过滤器专为 CMP 机台设计,可为单过滤器中所有关键 AMC 提供均衡寿命,从而避免多片过滤器处理的复杂性。此外,此款过滤器保留了 Va
[半导体设计/制造]
美国半导体芯片商最易受贸易战影响
集微网消息,从飞机到半导体,美国所有商品的制造商股价周三都出现下跌,此前针对特朗普政府对中国进口商品加征关税的计划,中国采取报復行动,使得很多美国大型企业面临贸易爭端升级带来的风险。 在特朗普政府提出对大约1300种中国工业、科技、运输和医疗產品征收25%关税后仅11个小时,中方便出手反击,列出了一份类似的加征关税清单,涵盖美国的大豆、飞机、汽车、牛肉和化工等重要进口產品。 中国营收佔24% 虽然特朗普在推特上表现得满不在乎,但美国政府却暗示此事有回旋余地。受贸易战影响最大的行业將包括美国科技业,尤其是芯片生产商,很多这类企业的股价本月因特朗普瞄准中国而重挫。 根据《汤森路透》数据,標普500指数下的半导体公司有约24%的营收来自
[手机便携]
西部数据或与东芝和解 欲购东芝半导体股份
    围绕着东芝半导体业务,合作伙伴西部数据正通过新方式寻求利益最大化。   12月4日,据外媒报道,对于东芝出售半导体子公司,西部数据不再竭力阻挠,双方倾向于走向和解。   据悉,在东芝半导体业务出售并上市之后,西部数据有意收购该业务的部分股份。而东芝半导体的主要收购方贝恩资本正在和西部数据进行最后的谈判,若达成一致,西部数据将不再阻止东芝出售。同时,东芝也会撤销西部数据妨碍交易的诉讼。   回顾事件始末,重要的节点在今年9月。彼时,东芝正式将半导体子公司出售给贝恩资本主导的“日美韩联盟”,在竞购的过程中,东芝和西部数据之间就纠葛不断。原先两者是半导体业务(主要为闪存芯片)的合作伙伴,却因东芝出售半导体业务而“反目
[半导体设计/制造]
半导体测试 | 新涌现的技术与物流挑战
半导体技术的发展迅猛而广泛,目前已经渗透并影响到我们生活的方方面面。半导体器件已经应用在我们的汽车、便携式电子产品、办公设备、医疗仪器、工业机械、通信基础设施和无数的其他方面,几乎无处不在。 尽管最近发生的影响广泛的全球事件对每个行业都提出了挑战,但半导体行业仍然充满活力,并继续保持增长势头。据行业分析公司 Statista 给出的预测数据,2021年半导体年出货量达到历史最高水平(如图1所示),即出货量将达到 1.14 万亿件,总价值约为 4700 亿美元。这一创纪录的增长也将为半导体行业带来一系列挑战。 图1. 2000年以来的全球半导体出货量 半导体公司必须提高产量来满足需求,同时需要避免以往发展繁荣期之后出现
[半导体设计/制造]
<font color='red'>半导体</font>测试 | 新涌现的技术与物流挑战
AI + IC为大陆半导体业迎来发展契机
半导体业是建设制造强国、网络强国的基石,是互联网、大数据、人工智能(AI)等新兴产业的重要载体。作为国家实力的战略制高点,“AI+IC”人工智能正为大陆IC产业开创全新的发展形势和机遇。   在IC咖啡“国际智能科技产业峰会”上,多位大陆IC业界重量级人士共聚探讨IC产业热门议题,对IC、物联网(IoT)、AI畅谈分享观点。   上海市浦东新区科技和经济委员会副主任徐敏栩、大陆国家积体电路产业基金管理公司副总裁韦俊、南京市浦口区委常委浦口高新区党工委书记丁爱民、IC咖啡创始人胡运旺、CEO王欣宇为论坛开幕致词。清芯华创投资公司投委会主席陈大同、中国半导体行业协会副理事长、国家封测联盟副理事长兼秘书长于燮康等人发表行业演说。   阿
[半导体设计/制造]
2018全球半导体收入将达4510亿美元 同比增长7.5%
根据Gartner公司的统计,到2018年,全球半导体收入预计将达到4510亿美元,比2017年的4190亿美元增长7.5%,这相当于Gartner之前估计的2018年增长率4%的两倍。 Gartner首席研究分析师Ben Lee表示:“2016年下半年内存行业的有利市场条件盛行至2017年,并将在2018年持续,为半导体收入带来重大推动。” “Gartner将2018年前景增加了236亿美元,其中内存市场规模为195亿美元,而DRAM和NAND闪存的价格上涨正在提升整个半导体市场的前景。” 然而,这些价格上涨将给关键半导体需求驱动的系统供应商带来压力,包括智能手机、个人电脑和服务器。Gartner预测,零部件短缺、原材料价格上
[嵌入式]
半导体设备大厂应用材料发布靓丽财报
美东时间周三,全球最大的半导体设备制造商之一应用材料发布财报。财报显示,尽管供应链仍然面临挑战,但该公司上季度财报收益仍然超过预期。    财报公布后,该公司股价在盘后交易中上涨4.3%至146.99美元。不过今年初截至周三收盘,该股已累计下跌10%。    应用材料的客户包括三星电子、台积电和英特尔等芯片大厂,因此应用材料的业绩预测也可以作为了解一些这些大厂支出计划和信心水平的窗口。    供应链仍是主要挑战    财报显示,在截至1月的2022财年第一财季中,应用材料销售额同比增长21%至62.71亿美元,超出市场预期;净利润为17.92亿美元,同比增长59%。    应用材料第一财季Non-GAAP每股收益增至每股1.89美
[半导体设计/制造]
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved