TI DLP®技术驱动结构光系统实现箱拣精度

2019-12-09来源: EEWORLD关键字:DLP  TI

在工业环境中,每天需要处理不同形状、尺寸、材料和光学特性(如反射比、吸收等)的零件。这些零件必须以特定的方向挑选和放置,然后进行加工。将这些零件随机从存放的环境(容器或其他)中自动挑选并放置的活动通常被称为箱拣。但这对机器人末端执行器(一种连接到机械臂末端的设备)提出了挑战,它需要准确地知道要抓取物体的3D位置、尺寸及其想方向。为了做到在箱子外壁和箱内其他物体周围准确导航,机器人的机器视觉系统除了需要获取2D相机信息外,还需要获取深度信息。

 

对于箱拣来说,捕获物体3D影像的难题可以由结构光技术解决。基于结构光技术的3D扫描仪/相机通过将一系列图案投射到被扫描的物体上而工作,并且用相机或传感器来捕获图案失真。然后三角剖分算法计算数据并输出3D点云。图像处理软件(如MVTech开发的Halcon)计算物体位置和机械臂的最佳进场路线(图1)。

 

 

图1:使用Halcon将管接头与其各自的3D模型进行匹配的示例(来源:MVTech开发的Halcon)

 

DLP技术通过安装在半导体芯片顶部的微镜矩阵(也称为数字微镜器件,DMD)提供高速图案投射能力,如图2所示。DMD上的每个像素表示投影图像中的一个像素,并允许像素精确图像投影。微镜在~ 3us时可以转换,以通过投影透镜将入射光反射到物体上或光块上。前者可以在投影场景中获得明亮像素,而后者可以创建暗像素。DLP技术也具备独特的优势,能够使用各种光源(如灯、LED和激光)在宽波长范围(420 nm – 2500 nm)内投射图案。

 

用于箱拣的由DLP技术驱动的结构光具备多种优势:

 

抗环境光照能力强。工厂的光照条件,如低曝光和不同照明区域之间的高对比度,导致传感器曝光不足或会对机器视觉系统产生干扰的闪光灯,对需要机器视觉的应用(如箱拣)来说是一大挑战。由DLP技术驱动的结构光本身具有主动照明,这使得它能够抵抗这些条件。

 

 无活动部件。结构光系统可以立即捕获整个场景,不再需要将光束扫过物体或通过光束移动物体(如在扫描解决方案中)。结构光系统保护在宏观尺度内不使用活动部件,这使其能够免受机械磨损。


 实时3D图像采集。DLP芯片中的微镜以高速度控制,可提供高达32kHz的自定义图案投影。除此之外,DLP控制器提供触发输出和输入,可用于使相机和其他设备与投影图案序列保持同步。这些功能有助于实现允许同时扫描和挑选的实时3D图像采集。

 

  投影图案的高对比度和高分辨率。由于每块微镜可以将光反射到目标或吸收表面上,因而可以获得高对比度,使得能够在不受物体表面属性影响情况下进行准确的点检测。再加上使用具有2560 x 1600块镜子的高分辨率DLP芯片,可以探测到微米级的物体。

 

适用于物体参数。与使用衍射光学元件的系统相比,可编程图案和各种点编码方案(如相移或格雷编码)使结构光系统更适合对象参数。

 

加快开发时间。尽管机器人提供较高的重复性,但在非结构化环境中,箱拣需要精确性。因为在这种环境下,每次从储存箱中取出一个物体时,所拣选的物体的位置和方向都会发生变化。成功应对这一挑战需要可靠的工艺流程——从机器视觉到计算软件,再到机器人的灵巧性和抓取器。使所有东西协同工作可能是一项耗费大量开发时间的挑战。


图2:DLP芯片包含数百万个可在高速下单独控制并反射光线以产生投影图案的微镜。

 

TI的DLP技术评估模块能够将结构光快速植入机器视觉工作流程。为了演示这种能力,工厂自动化与控制系统工程师以一定的距离和角度将DLP LightCrafter 4500评估板安装至单色相机。DLP评估板由相机通过一根互相连接的触发电缆触发;如图3所示。

图3:结构光设置,包括DLP产品LightCrafter 4500(左)、灰点前视红外线Flea3相机(右)和校准(后)。

 

电路板和相机都通过USB连接到PC,且整个设置都用于校准板。使用DLP®技术为3D机器视觉应用程序精确生成点云的参考设计中软件之后会被用于校准相机和投影仪的参数,如焦距、焦点、镜头失真、相对于校准板的相机平移和旋转。参考设计用户指南逐步介绍了此过程。

 

只有当相机相对于DLP产品板移动时,才需要重新校准。

 

在完成设置之后,可以创建真实目标的点云。这些云由软件以任意文件格式输出,然后由Halcon的HDevelop平台上开发的一些简短代码来读取和显示。图4显示了一个点云,该点云对装满咖啡杯的箱子的深度信息进行了颜色编码。


图4:在Halcon HDevelop(右)中显示的箱子中,捕捉到的杯子(左)和由DLP驱动的多个杯子的结构光获取的点云

 

Halcon的表面匹配可以通过比较点云和杯子的3D CAD模型来确定杯子的3D姿态。这样一来,机械臂现在就可以“看到”物体,并且可以计算出机械臂的最佳进场路线,使其能够避开非结构化和不断变化的环境中的障碍物,从而从箱中挑选出物体。

关键字:DLP  TI 编辑:muyan 引用地址:http://news.eeworld.com.cn/MEMS/ic482350.html 本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:不容小看的新型智能惯性传感器
下一篇:Vishay全新IHDF边绕电感器可减少功耗,提高效率

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

都是AR HUD,DLP凭什么更出色?
TI DLP®技术在增强现实(AR)抬头显示(HUD)等汽车应用中越来越受欢迎,主要原因之一是其具有明亮鲜艳的色彩。为了更好地理解颜色在AR HUD中的作用(如下图所示),我先介绍一下色彩饱和度和色域的概念。AR HUD示例色彩饱和度是指图像中色彩的强度。看看下图,您可以轻松分辨出哪种颜色的饱和度更高。色彩的饱和度越低,看起来也就越暗。用技术术语来说,饱和度是表示色彩的纯度,用其复合波长来定义色彩。当一种色彩完全饱和时,它只包含单一波长,因此被认为是最纯粹的色彩。事实上,赫姆霍兹-科尔劳施效应描述了色彩越饱和,看起来就越明亮。色彩饱和度的另一个有趣方面是它会影响反应时间。一项名为“用颜色捕捉用户注意力”的研究表明,色彩越饱和
发表于 2019-11-05
都是AR HUD,DLP凭什么更出色?
技术文章—增强现实HUD DLP
TI DLP®技术在增强现实(AR)抬头显示(HUD)等汽车应用中越来越受欢迎,主要原因之一是其具有明亮鲜艳的色彩。为了更好地理解颜色在AR HUD中的作用(如下图所示),我先介绍一下色彩饱和度和色域的概念。AR HUD示例色彩饱和度是指图像中色彩的强度。看看下图,您可以轻松分辨出哪种颜色的饱和度更高。色彩的饱和度越低,看起来也就越暗。用技术术语来说,饱和度是表示色彩的纯度,用其复合波长来定义色彩。当一种色彩完全饱和时,它只包含单一波长,因此被认为是最纯粹的色彩。事实上,赫姆霍兹-科尔劳施效应描述了色彩越饱和,看起来就越明亮。色彩饱和度的另一个有趣方面是它会影响反应时间。一项名为“用颜色捕捉用户注意力”的研究表明,色彩越饱和
发表于 2019-11-05
技术文章—增强现实HUD DLP
利用DLP® Pico™技术打造卓越的智能显示体验
随着消费者不断采用物联网(IoT)解决方案将家庭内设备连接到外部和内部网络,智能音箱将在越来越多的家庭中普遍应用。事实上,智能音箱市场可能会继续保持高增长态势;据Juniper Research预测,到2022年,Amazon Echo、Google Home、Apple HomePod和Sonos One等设备将在大多数美国家庭中普及。 常规智能音箱采用音频进行反馈,但新一代称为智能显示的产品(或带显示功能的智能音箱)可以通过视觉内容(如讲解视频、食谱和照片)丰富用户体验。但是,大型LCD显示难以封装到紧凑的家用音箱中。DLP®技术通过投影来取代常规的LCD屏幕,从而为设计师带来更多的
发表于 2019-10-21
利用DLP® Pico™技术打造卓越的智能显示体验
Peltier冷却器为DLP汽车大灯提供热稳定性
(图源:lairdthermal官网) 据外媒报道,Laird Thermal Systems公司推出HiTemp ET系列Peltier冷却器模块,可在高温下工作,为敏感电子器件提供现场冷却。 在智能汽车前照灯系统中,数字光处理(DLP)技术的应用越来越多。采用这种技术,可以使车前面的光线更加清晰明亮。汽车前照灯系统可在110°C的高温下工作,而DLP器件的最高工作温度只有70℃,超过温限可能会产生故障或导致运行停止。采用HiTemp ET系列热电制冷模块,能够保护敏感DLP电子器件,确保最佳性能。 该HiTemp ET系列提供主动点冷却,根据主动热负荷的不同,可将温度降至低于周边环境40°C以上
发表于 2019-10-10
Peltier冷却器为DLP汽车大灯提供热稳定性
使用单色甚至全彩动态显示汽车车窗创建人车沟通
(RGB)LED投影仪可照亮这类薄膜。•微透镜阵列光扩散片:这是一种设计后的扩散膜,可提供一定量的屏幕增益,从而提高画面亮度。屏幕增益是光线定向扩散或集中的结果。例如,薄膜的设计是为了确定图像可见的视角,并非在所有方向上透射光。在视角之外,无可见图像,因为所有光都集中在限定的视角内。RGB LED投影仪可照亮这类薄膜。•全息膜:这些薄膜具有一些非常独特的功能,例如能够创建从车内而非从外部可见的图像。RGB投影仪可照亮这类薄膜。要实现最高效率和亮度,需要仔细选择LED波长以匹配全息膜,并在适当的波长下使用真正的绿色LED(相对于转换的绿色LED)。所有这些薄膜都有其优点和缺点。根据应用情况,某种类型的薄膜可能比其他类型更适合。TI DLP
发表于 2019-09-30
使用单色甚至全彩动态显示汽车车窗创建人车沟通
TI - MCU - MSP430使用指南13 -> Timer定时器模块
出现不同的结果。为了避免这个情况,建议在设定CCR0值的时候,将MC设置成Stop模式(TI建议),其实这时候不仅仅应该设置成Stop模式,最重要的是要将TACLR设置成1(注意这个位是TAxR清除位,直接设置成1后会自动清0,去读的话 也都是0)。模式2:Continuous模式,此模式下定时器从0开始计数,一直计数到0xFFFF为止产生中断(如果使能了中断)并重新回到0,和Up模式地区别就是Up是计数到TAxCCR0(用户自己设定)值,而Continuous模式是直接计数到0xFFFF,这个值是固定的,不能设置,这样的话,定时器溢出的之间只能由计数频率决定了。如下图所示:这种模式下,仅有TAxIFG中断会用到,因为没有设定CCR寄存器
发表于 2020-01-16
TI - MCU - MSP430使用指南13 -> Timer定时器模块
小广播
电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2020 EEWORLD.com.cn, Inc. All rights reserved