利用 TI DLP® 技术驱动结构光系统实现箱拣精度
时间:2019-12-09 15:10来源:21Dianyuan
摘要:对于箱拣来说,捕获物体3D影像的难题可以由结构光技术解决。基于结构光技术的3D扫描仪相机通过将一系列图案投射到被扫描的物体上而工作,并且用相机或传感器来捕获图案失真。然后三角剖分算法计算数据并输出3D点云。
在工业环境中,每天需要处理不同形状、尺寸、材料和光学特性(如反射比、吸收等)的零件。这些零件必须以特定的方向挑选和放置,然后进行加工。将这些零件随机从存放的环境(容器或其他)中自动挑选并放置的活动通常被称为箱拣。但这对机器人末端执行器(一种连接到机械臂末端的设备)提出了挑战,它需要准确地知道要抓取物体的3D位置、尺寸及其想方向。为了做到在箱子外壁和箱内其他物体周围准确导航,机器人的机器视觉系统除了需要获取2D相机信息外,还需要获取深度信息。
对于箱拣来说,捕获物体3D影像的难题可以由结构光技术解决。基于结构光技术的3D扫描仪/相机通过将一系列图案投射到被扫描的物体上而工作,并且用相机或传感器来捕获图案失真。然后三角剖分算法计算数据并输出3D点云。图像处理软件(如MVTech开发的Halcon)计算物体位置和机械臂的最佳进场路线(图1)。
DLP技术通过安装在半导体芯片顶部的微镜矩阵(也称为数字微镜器件,DMD)提供高速图案投射能力,如图2所示。DMD上的每个像素表示投影图像中的一个像素,并允许像素精确图像投影。微镜在~ 3us时可以转换,以通过投影透镜将入射光反射到物体上或光块上。前者可以在投影场景中获得明亮像素,而后者可以创建暗像素。DLP技术也具备独特的优势,能够使用各种光源(如灯、LED和激光)在宽波长范围(420 nm – 2500 nm)内投射图案。
用于箱拣的由DLP技术驱动的结构光具备多种优势:
• 抗环境光照能力强。工厂的光照条件,如低曝光和不同照明区域之间的高对比度,导致传感器曝光不足或会对机器视觉系统产生干扰的闪光灯,对需要机器视觉的应用(如箱拣)来说是一大挑战。由DLP技术驱动的结构光本身具有主动照明,这使得它能够抵抗这些条件。
• 无活动部件。结构光系统可以立即捕获整个场景,不再需要将光束扫过物体或通过光束移动物体(如在扫描解决方案中)。结构光系统保护在宏观尺度内不使用活动部件,这使其能够免受机械磨损。
• 实时3D图像采集。DLP芯片中的微镜以高速度控制,可提供高达32kHz的自定义图案投影。除此之外,DLP控制器提供触发输出和输入,可用于使相机和其他设备与投影图案序列保持同步。这些功能有助于实现允许同时扫描和挑选的实时3D图像采集。
• 投影图案的高对比度和高分辨率。由于每块微镜可以将光反射到目标或吸收表面上,因而可以获得高对比度,使得能够在不受物体表面属性影响情况下进行准确的点检测。再加上使用具有2560 x 1600块镜子的高分辨率DLP芯片,可以探测到微米级的物体。
• 适用于物体参数。与使用衍射光学元件的系统相比,可编程图案和各种点编码方案(如相移或格雷编码)使结构光系统更适合对象参数。
• 加快开发时间。尽管机器人提供较高的重复性,但在非结构化环境中,箱拣需要精确性。因为在这种环境下,每次从储存箱中取出一个物体时,所拣选的物体的位置和方向都会发生变化。成功应对这一挑战需要可靠的工艺流程——从机器视觉到计算软件,再到机器人的灵巧性和抓取器。使所有东西协同工作可能是一项耗费大量开发时间的挑战。
TI的DLP技术评估模块能够将结构光快速植入机器视觉工作流程。为了演示这种能力,工厂自动化与控制系统工程师以一定的距离和角度将DLP LightCrafter 4500评估板安装至单色相机。DLP评估板由相机通过一根互相连接的触发电缆触发;如图3所示。
电路板和相机都通过USB连接到PC,且整个设置都用于校准板。使用DLP®技术为3D机器视觉应用程序精确生成点云的参考设计中软件之后会被用于校准相机和投影仪的参数,如焦距、焦点、镜头失真、相对于校准板的相机平移和旋转。参考设计用户指南逐步介绍了此过程。
只有当相机相对于DLP产品板移动时,才需要重新校准。
在完成设置之后,可以创建真实目标的点云。这些云由软件以任意文件格式输出,然后由Halcon的HDevelop平台上开发的一些简短代码来读取和显示。图4显示了一个点云,该点云对装满咖啡杯的箱子的深度信息进行了颜色编码。
Halcon的表面匹配可以通过比较点云和杯子的3D CAD模型来确定杯子的3D姿态。这样一来,机械臂现在就可以“看到”物体,并且可以计算出机械臂的最佳进场路线,使其能够避开非结构化和不断变化的环境中的障碍物,从而从箱中挑选出物体。
其他资源
• 了解更多有关“用于3D机器视觉的高度可扩展TI DLP技术。”
• 阅读白皮书“使用德州仪器DLP结构光技术进行高精度3D扫描。”
• 了解更多关于TI DLP技术的信息。
对于箱拣来说,捕获物体3D影像的难题可以由结构光技术解决。基于结构光技术的3D扫描仪/相机通过将一系列图案投射到被扫描的物体上而工作,并且用相机或传感器来捕获图案失真。然后三角剖分算法计算数据并输出3D点云。图像处理软件(如MVTech开发的Halcon)计算物体位置和机械臂的最佳进场路线(图1)。
图1:使用Halcon将管接头与其各自的3D模型进行匹配的示例
(来源:MVTech开发的Halcon)
(来源:MVTech开发的Halcon)
DLP技术通过安装在半导体芯片顶部的微镜矩阵(也称为数字微镜器件,DMD)提供高速图案投射能力,如图2所示。DMD上的每个像素表示投影图像中的一个像素,并允许像素精确图像投影。微镜在~ 3us时可以转换,以通过投影透镜将入射光反射到物体上或光块上。前者可以在投影场景中获得明亮像素,而后者可以创建暗像素。DLP技术也具备独特的优势,能够使用各种光源(如灯、LED和激光)在宽波长范围(420 nm – 2500 nm)内投射图案。
用于箱拣的由DLP技术驱动的结构光具备多种优势:
• 抗环境光照能力强。工厂的光照条件,如低曝光和不同照明区域之间的高对比度,导致传感器曝光不足或会对机器视觉系统产生干扰的闪光灯,对需要机器视觉的应用(如箱拣)来说是一大挑战。由DLP技术驱动的结构光本身具有主动照明,这使得它能够抵抗这些条件。
• 无活动部件。结构光系统可以立即捕获整个场景,不再需要将光束扫过物体或通过光束移动物体(如在扫描解决方案中)。结构光系统保护在宏观尺度内不使用活动部件,这使其能够免受机械磨损。
• 实时3D图像采集。DLP芯片中的微镜以高速度控制,可提供高达32kHz的自定义图案投影。除此之外,DLP控制器提供触发输出和输入,可用于使相机和其他设备与投影图案序列保持同步。这些功能有助于实现允许同时扫描和挑选的实时3D图像采集。
• 投影图案的高对比度和高分辨率。由于每块微镜可以将光反射到目标或吸收表面上,因而可以获得高对比度,使得能够在不受物体表面属性影响情况下进行准确的点检测。再加上使用具有2560 x 1600块镜子的高分辨率DLP芯片,可以探测到微米级的物体。
• 适用于物体参数。与使用衍射光学元件的系统相比,可编程图案和各种点编码方案(如相移或格雷编码)使结构光系统更适合对象参数。
• 加快开发时间。尽管机器人提供较高的重复性,但在非结构化环境中,箱拣需要精确性。因为在这种环境下,每次从储存箱中取出一个物体时,所拣选的物体的位置和方向都会发生变化。成功应对这一挑战需要可靠的工艺流程——从机器视觉到计算软件,再到机器人的灵巧性和抓取器。使所有东西协同工作可能是一项耗费大量开发时间的挑战。
图2:DLP芯片包含数百万个可在高速下单独控制并反射光线以产生投影图案的微镜。
TI的DLP技术评估模块能够将结构光快速植入机器视觉工作流程。为了演示这种能力,工厂自动化与控制系统工程师以一定的距离和角度将DLP LightCrafter 4500评估板安装至单色相机。DLP评估板由相机通过一根互相连接的触发电缆触发;如图3所示。
图3:结构光设置,包括DLP产品LightCrafter 4500(左)、灰点前视红外线Flea3相机(右)和校准(后)。
电路板和相机都通过USB连接到PC,且整个设置都用于校准板。使用DLP®技术为3D机器视觉应用程序精确生成点云的参考设计中软件之后会被用于校准相机和投影仪的参数,如焦距、焦点、镜头失真、相对于校准板的相机平移和旋转。参考设计用户指南逐步介绍了此过程。
只有当相机相对于DLP产品板移动时,才需要重新校准。
在完成设置之后,可以创建真实目标的点云。这些云由软件以任意文件格式输出,然后由Halcon的HDevelop平台上开发的一些简短代码来读取和显示。图4显示了一个点云,该点云对装满咖啡杯的箱子的深度信息进行了颜色编码。
图4:在Halcon HDevelop(右)中显示的箱子中,捕捉到的杯子(左)和由DLP驱动的多个杯子的结构光获取的点云
Halcon的表面匹配可以通过比较点云和杯子的3D CAD模型来确定杯子的3D姿态。这样一来,机械臂现在就可以“看到”物体,并且可以计算出机械臂的最佳进场路线,使其能够避开非结构化和不断变化的环境中的障碍物,从而从箱中挑选出物体。
其他资源
• 了解更多有关“用于3D机器视觉的高度可扩展TI DLP技术。”
• 阅读白皮书“使用德州仪器DLP结构光技术进行高精度3D扫描。”
• 了解更多关于TI DLP技术的信息。
免责声明:本文若是转载新闻稿,转载此文目的是在于传递更多的信息,版权归原作者所有。文章所用文字、图片、视频等素材如涉及作品版权问题,请联系本网编辑予以删除。
我要投稿
近期活动
- 仪器使用操作视频教程时间:2023年12月31日 - 2024年01月31日[立即参与]
- 安森美汽车&能源基础设施白皮书下载时间:2023年04月03日 - 2023年11月30日[立即参与]
- 2023年安森美(onsemi)在线答题活动时间:2023年08月01日 - 2023年08月31日[查看回顾]
- 【在线答题活动】PI 智能家居热门产品,带您领略科技智慧家庭时间:2023年06月15日 - 2023年07月15日[查看回顾]
- 2023年安森美(onsemi)在线答题活动时间:2023年06月01日 - 2023年06月30日[查看回顾]
分类排行榜
- 汽车电子电源行业可靠性要求,你了解多少?
- 内置可编程模拟功能的新型 Renesas Synergy™ 低功耗 S1JA 微控制器
- Vishay 推出高集成度且符合 IrDA® 标准的红外收发器模块
- ROHM 发布全新车载升降压电源芯片组
- 艾迈斯半导体推出行业超薄的接近/颜色传感器模块,助力实现无边框智能手机设计
- 艾迈斯半导体与 Qualcomm Technologies 集中工程优势开发适用于手机 3D 应用的主动式立体视觉解决方案
- 维谛技术(Vertiv)同时亮相南北两大高端峰会,精彩亮点不容错过
- 缤特力推出全新商务系列耳机 助力解决开放式办公的噪音难题
- CISSOID 和泰科天润(GPT)达成战略合作协议,携手推动碳化硅功率器件的广泛应用
- 瑞萨电子推出 R-Car E3 SoC,为汽车大显示屏仪表盘带来高端3D 图形处理性能
编辑推荐
小型化和稳定性如何兼得?ROHM 推出超小型高输出线性 LED 驱动器 IC,为插座型 LED 驱动 IC 装上一颗强有力的 “心脏”
众所周知,LED的驱动IC担负着在输入电压不稳定的情况下,为LED提供恒定的电流,并控制恒定(可调)亮度的作用。无论是室内照明,还是车载应用,都肩负着极为重要的使命。
- 关于反激电源效率的一个疑问
时间:2022-07-12 浏览量:9666
- 面对热拔插阐述的瞬间大电流怎么解决
时间:2022-07-11 浏览量:8426
- PFC电路对N线进行电压采样的目的是什么
时间:2022-07-08 浏览量:9038
- RCD中的C对反激稳定性有何影响
时间:2022-07-07 浏览量:6837
- 36W单反激 传导7~10M 热机5分钟后超标 不知道哪里出了问题
时间:2022-07-07 浏览量:5575
- PFC电感计算
时间:2022-07-06 浏览量:3800
- 多相同步BUCK
时间:2010-10-03 浏览量:37794
- 大家来讨论 系列之二:开机浪涌电流究竟多大?
时间:2016-01-12 浏览量:43078
- 目前世界超NB的65W适配器
时间:2016-09-28 浏览量:59954
- 精讲双管正激电源
时间:2016-11-25 浏览量:127222
- 利用ANSYS Maxwell深入探究软磁体之----电感变压器
时间:2016-09-20 浏览量:107351
- 【文原创】认真的写了一篇基于SG3525的推挽,附有详细..
时间:2015-08-27 浏览量:99843