千兆多媒体串行链路(GMSL)相机用作GigE Vision相机的替代方案

发布者:EE小广播最新更新时间:2023-12-13 来源: EEWORLD作者: Kainan Wang,系统应用工程师关键字:串行链路  GigE  相机 手机看文章 扫描二维码
随时随地手机看文章

摘要


千兆多媒体串行链路™ (GMSL™)和千兆以太网(GigE)是相机应用中两种流行的链路技术,常见于不同的终端市场。本文对两种技术的系统架构、关键特性和局限性进行了比较分析。这将有助于解释这两种技术的基本原理,并深入了解为什么GMSL相机是GigE Vision®相机的有力替代方案。


背景知识


GigE Vision是基于以太网基础架构和协议的网络相机接口标准。它广泛用于工业领域。ADI公司的GMSL是一种专门用于视频数据传输的点对点串行链路技术,最初是为汽车摄像头和显示应用而设计的。


这两种技术都旨在扩展图像传感器视频数据的传输距离,但每种解决方案有其各自的特性。多年来,我们看到越来越多的GMSL相机在汽车之外的领域得到采用,它们通常作为GigE Vision相机的替代方案。


典型系统架构


图像传感器连接


GigE Vision相机的信号链(如图1所示)通常由三个主要元件组成:图像传感器、处理器和以太网PHY。处理器将图像传感器中的原始图像数据转换为以太网帧,该过程通常涉及图像处理和压缩或帧缓冲,以使数据速率适合以太网支持的带宽。


1.GigE Vision相机传感器侧的主要信号链元件。


GMSL相机的信号链(如图2所示)通常更加简单,仅包含图像传感器和串行器。在典型应用中,串行器转换图像传感器中的原始数据,然后以其原始格式通过链路发送。这些相机无需处理器,设计更简单,更适合需要小尺寸相机和低功耗的应用。


2.GMSL相机传感器侧的主要信号链元件。


主机处理器连接


GigE Vision相机因其与众多主机设备的兼容性而受到业界的广泛认可。千兆以太网端口几乎是个人计算机(PC)或嵌入式平台的标准配置。一些GigE Vision相机可以使用通用驱动程序,提供真正的即插即用体验。


GMSL相机需要主机侧提供解串器。在大多数用例中,主机设备是带有一个或多个解串器的定制嵌入式平台。解串器通过其MIPI发送器以图像传感器MIPI输出的原始格式传输图像数据。对于此类相机,每种定制相机设计都需要一个匹配的驱动程序,就像任何其他MIPI摄像头一样。然而,如果图像传感器的驱动程序已存在,则一对SerDes只需要几个预设寄存器或执行几次寄存器写操作,就能将视频流从相机传输到SoC。


3.典型GigE Vision网络。


当仅使用一个相机时,GigE Vision在系统复杂性方面可能比GMSL有一些优势,因为它可以直接连接到具有以太网端口的PC或嵌入式平台。然而,当使用多个GigE相机时,就需要以太网交换机。它可以是专用以太网交换机设备、具有多个以太网端口的网络接口卡(NIC)或多个以太网端口与SoC之间的以太网交换IC。在某些情况下,这将导致最大总数据速率降低,更糟糕的是,这将带来不可预测的延迟,具体情况取决于相机和终端设备之间的接口。参见图3。


在GMSL相机系统中,一个解串器可以连接多达四个链路,其MIPI C-PHY或D-PHY发送器支持所有四个相机的总带宽。只要SoC能够应对聚合后的数据速率,使用一个或多个GMSL器件就不会影响带宽或增加过多系统复杂性。


4.典型GMSL相机到主机的连接。


特性比较

传感器接口


GMSL串行器仅支持并行LVDS (GMSL1)和MIPI (GMSL2/GMSL3)传感器接口。MIPI是消费电子和汽车摄像头广泛使用的图像传感器接口,因此GMSL相机可以支持种类众多的图像传感器。然而,由于GigE Vision相机内部使用了处理器,其在传感器接口方面更加灵活。


视频规格

工作原理


图5显示了连续视频流中数据从图像传感器传输到GMSL链路或GigE网络的时序图示例。

在视频流的每一帧中,图像传感器在曝光周期之后立即发出数据,然后在下一帧开始之前进入空闲状态。示例图更好地展示了全局快门传感器的情况。对于滚动快门传感器,其曝光和读出是每行单独控制的,因此帧级别上的曝光和读出周期会有重叠。


传感器侧的GMSL串行器对图像传感器中的数据进行串行化,然后立即通过其专有协议将数据传输到链路。


GigE Vision相机中的处理器会缓冲并且通常还会处理图像传感器中的数据,然后将视频数据排列在以太网帧中并将其发送到网络。


链路速率


链路速率规定了链路上数据传输的理论最大速度。当比较不同数据链路技术时,链路速率通常是关键指标。GMSL2、GMSL3和GigE Vision均使用离散的固定链路速率。


5.视频传输时序图。


GMSL2支持3 Gbps和6 Gbps的数据速率。GMSL3支持12 Gbps的数据速率,并且所有GMSL3设备都向后兼容使用GMSL2协议的GMSL2设备。


GigE Vision遵循以太网标准。GigE、2.5 GigE、5 GigE和10 GigE Vision相机经常出现在常见应用中。顾名思义,它们分别支持1 Gbps至高达10 Gbps的链路速率。先进的GigE Vision相机将支持100 Gbps链路速率的100 GigE。1对于GigE Vision,所有高速协议都将向后支持低速协议。


尽管链路速率与视频分辨率、帧速率和延迟密切相关,但仅根据链路速率很难对这两种技术进行直接比较。


有效视频数据速率


数据通信中,有效数据速率描述了不包括协议开销的数据速率容量,此概念也适用于视频数据通信。通常,一个数据包或一帧中传输的有效视频数据量为:像素位深度×像素数。图6说明了有效视频数据和开销之间的关系。


6.数据帧/数据包中的有效载荷和开销。


GMSL以数据包的形式传输视频数据。GMSL2和GMSL3设备使用固定的数据包大小,因此有效视频数据速率也有明确定义。以GMSL2设备为例。当链路设置为6 Gbps时,建议使用不超过5.2 Gbps的视频带宽。然而,由于链路还承载来自传感器MIPI接口的一些开销和消隐时间,因此5.2 Gbps反映了所有输入MIPI数据通道的聚合数据速率,而不是每秒5.2 Gb的视频数据。


以太网以帧的形式传输数据。GigE Vision没有标准帧大小,它通常作为软件解决方案的一个权衡因素来提高效率(长帧的优势)或减少延迟(短帧的优势)。对于这些相机,开销通常不超过5%。较高速度的以太网会降低使用长帧的风险,以实现更好的有效视频数据速率。


这两种技术都以突发方式传输数据。因此,较长期间(一个视频帧或更长时间)内的平均数据速率甚至可能低于传输期间的有效视频数据速率。对于GMSL相机,突发时间仅取决于图像传感器的读出时间,实际应用中的突发比可能达到100%以支持完整的有效视频数据速率。GigE Vision相机可能用在更复杂和不可预测的网络环境中,在这种情况下,为了避免数据冲突,突发比通常较低。示例参见图7。


分辨率和帧速率


分辨率和帧速率是摄像机的两个至关重要的规格,它们是提高链路速率的关键驱动因素。对于这些规格,两种技术各有利弊。


GMSL设备不提供帧缓冲和处理。分辨率和帧速率全部取决于图像传感器或传感器侧ISP在链路带宽内的支持能力,而这通常是分辨率、帧速率和像素位深度之间的简单权衡。


GigE Vision的模型更为复杂。尽管在许多情况下其可用链路速率比GMSL慢,但它可以利用额外的缓冲和压缩来支持更高分辨率和/或更高帧速率。然而,这一切的代价是延迟和功耗的增加,并且相机系统两侧需要使用昂贵的元件。在一些不太常见的用例中,此类相机也以较低帧速率传输原始图像数据。


延迟


延迟是摄像机的另一个关键规格,尤其是在实时处理数据和做出决策的应用中。


从串行器的输入/传感器的输出到解串器的输出/接收SoC的输入,GMSL相机系统的延迟较低且具有确定性。


由于内部处理和更复杂的网络流量,GigE Vision相机的延迟通常较高且不具有确定性。然而,这些延迟并不总是会导致系统级延迟更长,尤其是当相机侧处理属于系统图像流水线的一部分且更专用、更高效时。


其他特性

传输距离


根据设计,GMSL串行器和解串器可在乘用车中使用同轴电缆将数据传输15米之远。但是,只要相机硬件系统满足GMSL通道规范,则传输距离不限于15米。


7.GMSLGigE Vision网络的数据流量。



通过以太网协议,GigE Vision可以使用铜缆将数据传输100米之远,使用光纤甚至可以更远,不过它可能会失去一些特性,例如以太网供电(PoE)。


PoCPoE/PoDL


这两种技术都能够通过同一根电缆传输电力和数据。GMSL使用同轴电缆供电(PoC),GigE Vision针对4对以太网使用PoE,针对单对以太网(SPE)使用数据线供电(PoDL)。大多数GigE Vision相机使用传统的4对线和PoE。


PoC很简单,采用同轴电缆配置的相机应用通常默认使用这种方式。在这种配置中,链路上的电力和数据来自单根电线,并且PoC电路仅需要几个无源元件。


支持1 Gbps或更高数据速率的PoE电路需要专用电路,相机和主机(或交换机)侧均需要有源元件。这使得PoE功能成本更高且不易获得。支持PoE的GigE Vision相机通常还具有本地外部供电选项。


外设控制和系统连接


GMSL作为专用相机或显示器链路,其并非设计用来支持各种各样的外围设备。在典型的GMSL相机应用中,链路传输控制信号(UART、I2C和SPI),仅与温度传感器、环境光传感器、IMU、LED控制器等相机外设进行通信。使用GMSL作为相机接口的较大系统通常还有其他低速接口,例如CAN和以太网,以便与其他设备通信。


GigE Vision相机一般利用其内置处理器处理相机外设控制。作为工业应用中流行的连接解决方案,工业以太网有多种标准协议来支持多样化的机器和设备,GigE Vision相机通过其软件和硬件接口直接连接到网络。


相机触发和时间戳


GMSL链路的正向和反向通道均支持微秒级的低延迟GPIO和I2C信号隧道,从而支持不同的相机触发/同步配置。GMSL相机系统中的触发信号源可以来自解串器侧的SoC,也可以来自串行器侧的图像传感器之一。


GigE Vision相机通常通过专用引脚/端口或以太网触发/同步数据包来提供硬件和软件触发选项。在典型应用中,硬件触发作为标准方法,用于与其他相机或非相机设备进行响应灵敏且准确的同步。这些相机的软件触发的主要问题是网络延迟。尽管有一些协议可用于提高同步精度,但它们要么精度不够高(网络时间协议(NTP),同步到毫秒级2),要么性价比不高(精密时间协议(PTP),同步到微秒级3,但需要兼容的硬件)。


当在以太网上使用同步协议时,来自同一网络的所有设备(包括GigE Vision相机)将能够在同一时钟域中提供时间戳。


GMSL没有时间戳功能。有些图像传感器可以通过MIPI嵌入式报头提供时间戳,但这通常不与更高级别系统上的其他设备相关。在某些系统架构中,GMSL解串器会连接到PTP网络上的SoC以使用集中式时钟。如果需要此功能,请使用AD-GMSL2ETH-SL作为参考。


结语


总之(参见表1),GMSL是现有GigE Vision解决方案的有力替代方案。与GigE Vision相机相比,GMSL相机通常能以更低的成本、更低的功耗、更简单的系统架构和更小的系统尺寸提供同等或更好的链路速率和特性。此外,由于GMSL最初是为汽车应用而设计的,因此它已经在恶劣的环境中经过了汽车工程师几十年的验证。在可靠性和功能安全至关重要的系统开发中,GMSL将为工程师和系统架构师提供信心保证。


1.GMSLGigE Vision主要特性比较


GMSLGigE Vision
拓扑结构点对点点对点或通过网络交换机
数据链路速率(Gbps)3/6/12,专用1/2.5/5/10,共享
传感器接口来自PHY是,MIPI D-PHY/C-PHY
控制信号实时当网络空闲时
视频压缩
视频延迟低且具确定性高(视频处理)、不具确定性(网络条件)
相机触发双向直通链路,µS级延迟触发引脚(附加硬件)、以太网数据包(延迟不具确定性)
尺寸5 mm × 5 mm(GMSL2串行器)4≥5 mm × 5 mm (GigE PHY)5,处理器除外
功耗260 mW(GMSL2串行器)4> 300 mW (GigE PHY)6,处理器除外
即插即用否,需要MIPI驱动程序
电缆供电简单,无源网络复杂,有源元件
标准网络同步协议
传输距离≤15 m(GMSL2,6 Gbps)
*假设老化,105°C LEONI Dacar 302同轴电缆
(–1.1 dB/m)
≤100 m


要开始使用GMSL进行设计,请访问GMSL技术页面以获取产品信息、硬件设计指南和用户指南。ADI公司的GMSL GitHub存储库提供了参考设计和驱动程序支持。


关键字:串行链路  GigE  相机 引用地址:千兆多媒体串行链路(GMSL)相机用作GigE Vision相机的替代方案

上一篇:生成式人工智能如何变革未来工作方式:Orange Business对Microsoft 365 Copilot的早期洞察
下一篇:熵码科技与奇景光电合作以硬件信任根强化边缘AI应用的用户与数据安全

推荐阅读最新更新时间:2024-11-11 17:31

手机和相机终于要正面交战了,领域就在vlog上
最近几年,在拍照领域,相机派被手机派压的抬不起头来,虽然全幅微单不断进化,但人家说“手机自拍效果更好”,就把很多人像摄影的爱好者给顶回去了,另一句“我可以随时拍风景”,又把喜欢拍风景的摄影爱好者说的无语…… 相机在手机不断进化面前似乎束手无策,销售量逐年下降。比如说当年卡西欧的自拍神器,基本也被国产自拍手机打得没有了换手之力。但在一个新领域,相机却可以和手机有一个短兵交火的机会,这就是vlog。 vlog就是“视频博客”,也称为“视频网络日志”,vlog作者以影像代替文字或相片,写其个人网志,上载与网友分享。 很多人想起vlog,是因为B站,但最近,则是因为一款明确打着vlog旗号的相机的出现,就是索尼A6400。 A6400采用
[家用电子]
手机和<font color='red'>相机</font>终于要正面交战了,领域就在vlog上
尼康半导体复活需另辟蹊径 相机生产线仍将维持
光学大厂尼康(Nikon)终为改善经营条件,进行大规模组织改造,进行超过1,000人的裁员,并停止备受期待的高端数码相机,希望能改善现在主力事业的数码相机与半导体设备,并从医疗器材等其他方向另寻出路;而对市场担心尼康是否会关闭数码相机工厂,带来失业,尼康则表示没有这方面的打算。 尼康最主要的事业,是以数码相机为主力的影像产品事业,及以半导体设备为主力的精密机械事业,以2016年4~12月的业绩来看,这两个事业占尼康总营收的4分之3以上。现在主要的问题,在于这两个事业的市场前景,都不乐观。 由于智能手机的摄影机能不断精进,消费型数码相机的市场遭到明显压缩,全球数码相机销售量在2010年达到1.2亿台的高峰,现在已经不到高峰期的4
[半导体设计/制造]
重磅升级!INDEMIND打造业内首款200FPS双目惯性相机
众所周知,自动驾驶、动作捕捉等场景非常依赖双目立体相机采集图像、位姿信息的清晰度、丰富度,单位时间内双目相机提供的信息越多,越有利于相关场景的算法追踪及定位,降低算法开发难度。 正因如此,为了满足不同场景使用需求,提升产品适用性,3月28日,国内新锐计算机视觉技术提供商INDEMIND更新了旗下双目惯性模组的驱动程序,本次更新中,模组开始支持1280*800@50FPS、1280*800@100FPS、640*400@100FPS、640*400@200FPS 4档不同帧率的图像输出模式,最大程度上满足了用户的不同帧率需求。 此前,INDEMIND双目视觉惯性模组主要用于视觉SLAM、室内外导航避障相关的计算机视觉技术研究,或无
[机器人]
什么是相机标定?视觉机械臂自主抓取全流程
简介 视觉机械臂是智能机器人的一个重要分支,它主要包括控制芯片、驱动电路、机械臂、相机等部分。 自主抓取是指,在没有人为干预的情况下,视觉机械臂系统通过摄像头获取到目标物体的位置,并且通过驱动机械臂来完成对于目标物体的抓取任务。 整个抓取过程大致分为以下几步(含图中九步): 相机标定——→相机和机械臂进行手眼标定 ——→①读取摄像头信息 ——→②识别出目标物体并得出位姿 ——→③物体在相机中的二维坐标转化成相对于相机光心的三维坐标 ——→④再转换成相对于机械臂底座的世界坐标 ——→⑤计算机械臂末端执行器抓取物体时的位姿 ——→⑥通过已知的目标位置和末端执行器的位姿信息来计算机械臂上每个电机应转动的角度 ——→⑦根据有无障碍
[嵌入式]
什么是<font color='red'>相机</font>标定?视觉机械臂自主抓取全流程
传统相机两大品牌双双换帅,终于拥抱变革?
刚刚踏入 2017 年不久,相机界两大老牌巨头就发生了大的人事变动。   近日,著名相机品牌 Hasselblad 哈苏的 CEO Perry Oosting 突然宣布辞职,并将在本月内完成所有手续,正式离开哈苏。在这个“敏感”的时间内宣布辞职,难免会引起外界一些猜疑。   哈苏 CEO Perry Oosting,图自:CameraJabber   但突然提出辞职的,不独 Perry Oosting 一人。     2017 年 2 月 1 日,LEICA  徕卡 相机的现任全球 CEO Oliver Kaltner 也宣布了他辞职的消息。他也将会在本年 8 月离开徕卡。   针对辞职这件事,Oliver Kaltner
[嵌入式]
未来相机成本低廉 贝尔实验室研发无镜头新式相机
    几乎比机身还昂贵的镜头,或许将不再是未来照相机离不开的配置了。据美国科技网站“The Verge”消息称,美国贝尔实验室的一个研究小组最近发明了一款成本低廉的无镜头新式相机。与传统相机相比,其不需要借助透镜采集对象过多的信息,却能始终捕获进而得到与前者成像效果相同的照片。     传统数码相机的成像原理,是要先获取拍摄对象的全部图像数据,再将其精简修改为更小型图像(譬如JPG格式)。而据贝尔实验室介绍,新技术可以让相机舍弃这一核心内涵。     研究人员采用的是一种正处于起步研究阶段、名为“压缩感应”的技术。其可以被看作是构架出了一款“单像素相机”:通过一组透明窗口来分类捕捉影像反射的光线,而不必再使用镜头来引导光线的介
[家用电子]
机器视觉系统中常用工业相机的分类
根据不同感光芯片划分  我们知道感光芯片是摄像机的核心部件,目前摄像机常用的感光芯片有CCD和CMOS两种:  1.CCD摄像机,CCD称为电荷耦合器件,CCD实际上只是一个把从图像半导体中出来的电子有组织地储存起来的方法。  2.CMOS摄像机,CMOS称为“互补金属氧化物半导体”,CMOS实际上只是将晶体管放在硅块上的技术,没有更多的含义。  尽管CCD表示“电荷耦合器件”而CMOS表示“互补金属氧化物半导体”,但是不论CCD或者CMOS对于图像感应都没有用,真正感应的传感器称做“图像半导体”,CCD和CMOS传感器实际使用的都是同一种传感器“图像半导体”,图像半导体是一个P N结合半导体,能够转换光线的光子爆炸
[嵌入式]
先拍后对焦 松下官方解析全新相机技术
    先拍摄后对焦,这种先进的影像技术在如今已经不算新鲜事。不论是光场相机还是新型的高端拍照手机,都已经将这一技术实战化、商品化,而松下成为了首个将这一技术运用到高端数码相机上的制造上,全新的GX8以及FZ300产品将会在今年年底装备这种技术,而松下在相关的官方网站上针对这一技术进行了详解。 外网相关技术说明截图      具体来看,这一技术主要借助于一种名为DFD(Depth From Defocus)的技术来进行实现的,它是采取超高速连拍的方式,以30fps拍摄大概50张4K格式的照片,其中每张照片的对焦点都略有不同,而用户可在拍摄后才触控LCD屏幕来选择对焦点。而此时相机就会为对焦在该点的图像,另建独立的影像档
[家用电子]
小广播
最新网络通信文章
换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved