✓ 预计到2025 年全球3D 视觉感知市场规模达到150 亿美元,年复合增长率(CAGR)达 20%
✓ 发源于,3D视觉技术快速迭代。
1)3D视觉感知技术最早被用于工业领域的测量和扫描。在技术刚刚诞生时,主要被用于工业设备和零部件的三维测量、物体和材料的微小形变测量等。在多家的积极推广下,3D视觉感知技术快速发展,在过去10 年内初步实现了从工业往领域延申的变革。
2)3D视觉目前主要有四种技术路线:激光三角测量、结构光、飞行时间(ToF)、多目视觉等是 3D 视觉目前主要的几种技术路线。几种技术路线的不同之处主要在于发射光获取数据的方式不同。
✓ 应用领域持续拓展,打开3D 视觉广阔空间。
1)据Yole Devolopement预测,全球3D视觉感知市场规模在2025年将达到150 亿美元,CAGR达 20%。
2)目前,3D视觉技术的主要下游行业主要包括消费电子、汽车(与座舱)、锂电、、OT、等。根据 Yole Devolopement 的预测,未来消费电子类和智能汽车行业是3D视觉市场扩容的重要推动力。
✓ 3D 视觉感知技术最早被用于工业领域的测量和扫描。
在技术刚刚诞生时,主要被用于工业设备和零部件的高精度三维测量、物体和材料的微小形变测量等。为了能够适应工业领域严苛的工况,并且满足精确到微米级别的测量精度,3D视觉测量设备一般需要多种技术融合使用,比如利用相位结构光以及高精度工业相机组成工业三维测量仪器。这会导致设备成本高、体积大、功耗高,应用普及缓慢。在这个阶段,市场上主要的玩家为德国高慕公司(GOM)、瑞典海克斯康(HEXAGON)、美国 公司等。这些公司的设备主要应用于测量工业零部件三维尺寸和形变,对工业部件实现高精度3D 数字化作业等。
✓ 3D 视觉目前主要有四种技术路线
激光三角测量、结构光、飞行时间(ToF)、多目视觉等是 3D 视觉目前主要的几种技术路线。几种技术路线的不同之处主要在于发射红外光获取数据的方式不同。
a) 激光三角测量:
:采用激光线扫描物体表面,观察激光线的变形以获取物体表面的深度数据。
特点:其精度非常高,可达微米级。但其扫描速度和工作范围有限。尽管如此,它在在线检测中仍得到了广泛应用,尤其是因为其高精度和动态测速性能。
b) 结构光:
工作原理:根据投影光束形态的不同,结构光法又可分为光点式结构光法、光条式结构光法和光面式结构光法等。通过被测物体反射回来的光栅与参考光栅之间的几何关系,分析得到每一个被测点之间的高度差和深度。
特点:计算简单,测量精度较高,对于平坦的、无明显纹理和形状变化的表面区域都可进行精密的测量。其缺点是对设备和外界光线要求高,造价昂贵。目前,结构光法主要应用在条件良好的室内。
c) 飞行时间(ToF):
工作原理:基于发射和反射光之间的时间延迟来测量物体的深度。
特点:与结构光相比,ToF不需要复杂的光模式解析,具有较高的鲁棒性。其深度图质量和精度都较好,但对于某些材质,如玻璃,可能存在挑战。ToF技术较为复杂,成本相对较高。
d) 立体视觉法:
工作原理:使用两个或多个RGB 彩色相机获取图像,并通过双目匹配、三角测量等来得到深度信息。
特点:这是一种被动的3D 测量技术,需求相对较低,但计算复杂度高。在弱光或目标特征不明显的情况下,其表现可能不佳。在工业自动化和X86 系统中,双目相机得到了广泛的应用。
✓ 应用领域持续拓展,打开3D 视觉广阔空间
3D 视觉感知技术与经过多年的发展,已在、半导体、AIoT、3C 消费电子、工业自动化、汽车应用等多个领域实现了推广应用,市场空间十分广阔。
全球3D 视觉市场维持高速增长
随着下游市场需求的不断增长和3D 视觉感知技术的升级,3D视觉感知市场将迎来快速增长期。随着技术的进步,2D成像技术已经不能满足当前日益复杂的应用需求,尤其是在、虚拟现实、增强现实等领域。3D视觉感知技术,凭借其能够提供深度信息的特性,为各种应用带来了更丰富的数据维度,从而大大提高了其应用价值。Yole Devolopement 的研究报告报告进一步证实了这一市场趋势。据其统计,2019年,全球 3D 视觉感知市场规模已达 50 亿美元。同时预计在 6 年之内,市场规模将会翻三倍,到2025 年达到 150 亿美元。年复合增长率(CAGR)达 20%,这也意味着 3D 视觉感知技术的应用和普及速度正在加快。
不同技术路线下的3D 视觉技术市场空间均在不断扩大
消费电子类和智能汽车行业是3D 视觉市场扩容的重要推动力。数据显示,2019 年至 2025 年间,领域的市场规模预期从20.17 亿美元激增至81.65 亿美元,年均复合增长率高达26%。市场规模占比从40%增至 54%。而汽车领域的市场规模则预计从8.54 亿美元增长至36.73 亿美元,年均复合增长率达到28%,市场规模占比从17%增至 25%。这两大应用领域将成为 3D 成像和的主力军,推动其在全球范围内的普及和应用。
✓ 技术已成为确保锂电池质量和效率的关键工具
锂电池制造:在现代的锂电池生产线上,机器视觉技术已经成为了确保产品质量和效率的关键工具。从动力电池的前期制造到后期的封装,机器视觉在每一个关键工序中都发挥着重要的作用。在涂布、辊压等前端工序中,锂电池可能会产生各种表面缺陷,例如露箔、暗斑和划痕。而机器视觉技术可以实时这些缺陷,确保生产出的产品达到标准。随着电池制造工艺的复杂性增加,如电芯后段的裸电芯极耳翻折和密封钉焊接,以及模组和PACK 阶段的底部蓝胶和焊缝等,机器视觉的应用已逐渐成为标准配置。
这一技术在应对锂电池行业快速发展中也面临着挑战。首先,随着大规模制造的到来,如何在保持高精度的同时提高生产效率,是一个普遍的问题。其次,新材料和新工艺的应用速度远超过了机器视觉技术的迭代速度。例如,随着磷酸锰铁、硅基负极、高镍三元等新材料的出现,以及CTC、CTB 等新工艺的应用,机器视觉技术需要更快地适应和升级。此外,虽然机器视觉已经在锂电池生产中发挥了重要作用,但对于大量的检测数据仍然没有得到充分利用。
为了解决这些问题,业内已经采取了一系列的措施。在技术层面,推出了轻量化语义模型,确保机器在面对新工艺时具有更强的应对能力。产能布局上,重点投入到工业人工智能、先进和计算成像等研发项目,以扩充自身的视觉系统和智能视觉装备的产能。此外,产品矩阵也进行了调整,重点发展了原材料隔膜检测、极片电极段的检测以及后工序的焊接检测。
✓ 半导体是机器视觉技术最早大规模应用的领域之一
半导体这一高度集成、精细的产业,无疑已经成为机器视觉技术最早大规模应用的领域之一。在过程中,机器视觉起到了不可或缺的作用。从硅片的检测分选,到晶圆的缺陷检测,再到成品的外观检测,机器视觉技术都发挥着核心作用。例如,硅片检测分选使用了3D 测量系统来对硅片的多种性能参数进行自动检测,实现了检测数据的管理与自动分类。又如在过程中,机器视觉用于检测晶圆表面的各种缺陷,如杂物、裂纹等,并在封装工艺中检测晶片、胶水、焊线等的质量。
机器视觉在半导体行业应用范围广泛
半导体行业仍然面临着一些技术与标准化的挑战。首先,目前关于半导体检测设备的技术,尤其是微纳米及纳米级的2D、3D 光学成像技术,主要掌握在国外,这给国内产业带来了一定的压力。其次,虽然3D 视觉检测与生产工艺紧密相关,但其设备还未有统一的国家标准,这在一定程度上制约了产业的进一步发展。
为了应对这些挑战,行业已经开始进行技术突破。例如,开发了基于AI的缺陷检测算法平台,提高了算法的迁移能力和缺陷的检测能力。同时,也在研发高速高精度的光学成像系统和运动隔震平台架构,以实现更加精确和稳定的检测效果。
随着 芯片、激光芯片等新技术的出现,对机器视觉技术的要求也将更高,但机器视觉技术在半导体行业的应用无疑将更加广泛和深入。
✓ 3D 视觉感知技术大幅提升工业自动化效率
随着3D 视觉感知技术的不断成熟其为工业领域的生产、制造和研发带来了革命性的机遇。
3D 视觉感知在工业领域有诸多基础应用场景
高精度数据采集:传统的2D 数据采集方法在许多领域中已不能满足高精度要求。3D视觉感知技术在汽车、航空、家电和医学等行业,为研究人员和生产线提供了细致、准确的三维数据,这大大提高了制造和检测的精度。
除基础应用外,3D视觉在工业中的应用场景不断拓展
先进质控在线检测:在工业生产中,质量控制是至关重要的。3D视觉技术不仅可以处理低对比度、高反射或透明材料,还能有效地识别和定位产品上的细微缺陷,从而实现更为精确的在线质量监控。
柔性装配与自动化:高度的生产自动化需要精确的数据支持。3D视觉在自动装配中的应用,尤其在需要高精度和灵活性的领域如精密仪器制造已经变得不可或缺。、协作臂配合3D 视觉系统可以实现更为精确的组装和定位。
仓库与供应链自动化 :在物流和供应链管理中,3D 视觉技术正在为仓库自动化带来全新的变革。从精确的货物定位到智能拣货,这项技术提供了必要的数据支持,使得仓库操作更为高效、准确。
机器人的导航与感知:在工业环境中,机器人稳定、安全的视觉引导是至关重要的。它通常分为两种主要策略:一种是结合移动机器人与机器视觉,另一种是结合机械臂与机器视觉。这两种策略为机器人提供了在其操作环境中精确定位和导航的能力。
在众多的环境感知技术中,激光雷达和各自拥有其独特的优点和局限性。例如,激光雷达以其高精度和广泛的探测范围为人所知,能够有效地为机器人构建其周围环境的3D 信息模型。然而,它在恶劣天气条件下可能会受到干扰。相对之下,毫米波雷达在烟雾、灰尘等低能见度环境中表现出色,其强大的穿透性使其能在这些特殊环境下提供可靠的测距信息。但是,其测距的精度相对较低。
3D 视觉被广泛应用于工厂移动机器人引导中
✓ AI 加速 3D 视觉技术发展
随着和人工智能的崛起,尤其是卷积(CNN)和变形器(Transfmer)的进步,3D 视觉技术的研究和优化已在精确度和效率上获得显著提升。
深度学习技术可与3D 视觉技术紧密结合
在3D 视觉的深度学习应用中,典型的工作流程可分为模型训练和图像识别两大阶段。
模型训练:此阶段的关键任务是从大量标注的3D 数据样本中提取和学习有代表性的特征。这通常涉及大量的计算,包括前向传播、误差反向传播以及优化等过程。在深度学习模型中,网络的深度、层数和结构复杂度都可能影响到模型的最终性能。
图像识别:在模型训练完毕后,我们可以使用它来识别新的、未标记的3D 图像数据。此阶段主要包括数据预处理、特征提取和最终的分类或回归等任务。
深度学习技术为3D 视觉带来了革命性变化
深度学习,尤其是卷积神经网络和变形器网络,已经为3D 视觉带来了多方面的革命性变化。
高精度和鲁棒性:通过多层网络结构,深度学习模型能够自动地从原始数据中提取和学习复杂的特征,这极大地提高了3D 物体识别和分类的精度。
广泛的应用领域:由于其出色的泛化能力,深度学习模型已被成功应用于多个3D 视觉领域,包括物体检测、场景理解、人体姿态估计、深度估计等。
✓ 群雄逐鹿,掘金3D工业视觉:老牌和初创企业者各有所长
3D 工业视觉领域的主流参与者大致可以划分为两大类别:传统2D 视觉的内外资领先厂商,以及国内新兴厂商。这些公司之间的业务范围和专长有所不同。
来自传统2D 视觉领域的头部厂商,无论是国内还是国外品牌,都在工业高精度和高效率的测量与识别领域展现出了明显的优势。这些公司通常在工业应用中结合1D、2D 和 3D 技术,实现更精准的识别和测量。
例如,基恩士和康耐视凭借其领先的镜头和CMOS 技术,能够在短短0.6 秒内完成检测。与此同时,他们在3D 技术的算法上也取得了显著的进步,如基恩士搭载的AI 芯片和康耐视的VisionPro Deep Learning 软件。
基恩士推出3D轮廓测量仪
在工业高端应用,如汽车、3C、锂电池、半导体等领域,这些头部企业,如基恩士、和奥普特等,凭借在 2D 视觉领域的深厚技术和客户基础,成功地转型和升级,赢得了大量的高价值订单。相比之下,许多国内的3D 视觉初创公司更多地聚焦于中低端的应用领域,例如物流、金属加工、3C等。
2021 年,我国机器视觉市场中海康机器人、基恩士、康耐视等厂商处于领先地位
部分机器视觉厂商以进行全产业链布局
在机器视觉软件方面,定位算法模块数量、算法性能、软件灵活性和易用性等因素都是决定性的考量点。在这一方面海内外主流玩家侧重点不同。
虹软的拍摄算法与VisDrive:手机方面,虹软科技作为全球安卓系手机拍摄算法的霸主,、华为、OPPO、VIVO、小米等手机厂商均是公司客户,公司技术储备丰富,已实现对于单摄、双摄、深摄的全面覆盖,并不断推出新的K 带动手机拍摄算法单机价值量提升。汽车方面,虹软科技推出了一系列舱内、舱外视觉解决方案。截至2023H1,分别搭载了公司DMS、OMS、Face ID、TOF 手势、舱外体态识别拍照、AVM 等舱内外算法的量产出货车型已有数十款,主要车型如理想L9,长城哈佛系列、欧拉系列、坦克系列,合众哪吒系列,长安CS75、PLUS、UNI-T,长安新能源深蓝SLO3,吉利豪越 L、银河 L7、领克 06,奇瑞星途揽月,东风岚图Free、梦想家、追光等。
康耐视的VisionPro:这款软件搭载了超过 100 种工具,其中 2D 定位精度在最好情况下可以达到1/40 像素,而通常情况下为1/4 像素。其处理效率非常出色,5M像素的图像处理时间在50ms 以内。但是在3D 视觉定位的精度上,VisionPro达到了 2.5μm,尽管其具体的处理效率尚未公开。除了硬件性能,VisionPro也为提供了不错的软件体验,虽然其不支持底层框架的开放,但确实支持二次开发,使得软件灵活性和易用性都保持在行业的中等水平。
奥普特的SciVision:与VisionPro 类似,SciVision也提供了超过 100 种工具。不过,它在 2D 定位的精度上并未披露具体数据,但其28M 像素的图像处理速度为68.19ms。从软件的灵活性和易用性角度看,SciVision主要针对直接应用,其工具的拖拽式操作和专用性设计使得整体易用性处于中等水平。
凌云光的VisionWare 展现了另一种竞争策略:其提供的工具超过100 种,2D 定位精度为 1/2 像素,5M 像素的图像处理速度为 20ms。更令人印象深刻的是,其 3D 定位精度达到了 2μm,处理速度为500ms。在识别算法上,其 99%的识别率和 5M 像素图像的 80ms 处理速度都表现出色。但从软件使用的角度来看,VisionWare主要以直接应用为主,其工具的拖拽式操作和专用性设计与SciVision相似。
海康机器人的VisionMaster:这款软件凭借其 1500+算子和 170+工具在数量上远超其他三家。在2D 定位上,其最好的精度可以达到1/16 像素,而通常情况下为1/4 像素,5M像素的图像处理时间仅为10ms。此外,其3D视觉定位的精度为6μm,处理速度为300ms。在软件的灵活性和易用性上,VisionMaster同样展现出了优势。它支持算子调用、SDK二次开发,以及底层框架的开放。整体的软件设计既图形化又流程化,为开发者提供了友好的交互体验。
编辑:黄飞
- 集成 遥控
- 使用 Microchip Technology 的 LM385BCOA-2.5 的参考设计
- LTC4162IUFD-FST 9V 至 35V 2 节 3.2A 充电器的典型应用,具有 PowerPath 和 2A 输入限制
- LD1117 的典型应用电路(在 1.2 V) 可调和固定低压降正电压调节器
- NB7V52MMNGEVB:1.8 V/2.5 V 差分 D 触发器评估板
- MCP1501T-30E/RW 3.000V 负参考电压的典型应用电路
- TAR5S44 点稳压器(低压差稳压器)的典型应用
- NCV33275 300 mA、低压差稳压器的典型应用
- 使用 Semtech 的 SC440A 的参考设计
- FEBFAN2306_LVA,基于 FAN2306 6A 超声波模式同步降压稳压器的评估板
- Nexperia ESD 应用手册|读 ESD 干货答题赢好礼
- Microchip 有奖问答,信号增益或滤波的原始传感器应用方案
- 庆元旦发热贴,EEWORLD好礼相送!
- 答题有礼|一起学习 Mentor PCB 手册
- 有奖直播:MPS新一代微功率隔离电源模块MIE系列产品介绍
- vishay照明,智勇闯关赢好礼!
- 得捷第二季Follow me第2期来袭,一起解锁功能强大且灵活的【Arduino UNO R4 WiFi】
- 一起哇:基于国产芯、便携烙铁系统IronOS(FreeRTOS)的智能烙铁
- 万用表,红外测温仪等你来拆!—— EEWorld拆你来玩拆解(第二期)
- TE 物联网专属平台齐上线,您值得拥有的专业全能助手