视觉引导机器人单品类纸箱拆垛
本教程使用案例库中的“单品类拆垛”应用模板案例,介绍如何部署3D视觉引导机器人单品类纸箱拆垛应用。
适用场景:3D视觉系统引导机器人从托盘抓取单品类纸箱,放置到输送线上。
应用概述
-
工件:单品类纸箱。
-
该应用使用真实相机采集纸箱图像数据后进行工件识别。若想使用虚拟相机,请单击此处获取纸箱图像数据。
-
该应用使用了深度学习进行辅助识别。该案例的
resource/dl_model
目录下已内置了深度学习模型包。
-
-
相机:Mech-Eye DEEP相机,Eye to hand方式安装。
-
标定板:推荐使用型号为CGB-050/BDB-7的标定板。
-
机器人:六轴机器人。该应用以ABB_IRB6700_150_3_20为例。
-
软件:Mech-Vision & Mech-Viz 2.1.0,Mech-Eye Viewer 2.4.1
-
通信方案:标准接口通信,视觉系统输出Mech-Viz软件规划的路径。
-
末端工具:吸盘
该应用需提前为吸盘准备一个.obj格式的模型文件,用于路径规划中的碰撞检测。可单击此处下载。
-
场景物体:场景模型
该应用需提前为场景准备一个.stl格式的场景模型文件,用于模拟真实场景,并用于路径规划中的碰撞检测。可单击此处下载。
如果你使用的相机型号、机器人品牌或工件与本例中不同,请参考相应步骤中提供的参考内容进行调整。 |
部署视觉应用
视觉应用的部署通常划分为六个阶段,如下图所示:
下表说明了视觉应用部署的六个阶段。
序号 | 阶段 | 说明 |
---|---|---|
1 |
视觉方案设计 |
按照项目需求选择硬件型号,确定安装方式及视觉处理方式等。(本教程有配套的视觉方案,用户无需自行设计。) |
2 |
完成梅卡曼德视觉系统软硬件的安装与连接。 |
|
3 |
将机器人标准接口程序及配置文件导入到机器人系统中,实现梅卡曼德视觉系统与机器人标准接口通信。 |
|
4 |
完成Eye to hand场景下的自动手眼标定,建立相机坐标系与机器人坐标系对应关系。 |
|
5 |
使用Mech-Vision案例库中“单品类拆垛”应用模板工程,并通过“路径规划”步骤规划机器人运动路径。 |
|
6 |
基于机器人样例程序MM_S9_Viz_RunInAdvance,编写适用于现场的抓取程序,实现机器人抓放。 |
接下来,请参考如下章节完成应用部署。