电话:400-997-6700
邮箱:info@bekannter.cn
地址:江苏省宜昌市京口区港南路720号
在机械人视觉钻研领域,3D视觉一向都是热点。随着机械人在工业领域的不休宽泛利用,机械人共同3D视觉的利用场景也在不休增多。例如在物盛行业,机械人共同3D视觉可实现混拆混码的工作,通过3D视觉急剧正确的对纸箱进行尺丈量,机械人可实现随机尺寸纸箱的拆垛和码垛;在出产线上,多种型号的工件往往会被杂乱无章的堆放在料框里,同使剽些工件往往状态表观差距很大,通过3D视觉可获取料框内物体的三维概括特点信息,机械人可急剧正确的实现多种工件的分拣;在轻工行业,通过3D视觉可获取物体的三维概括信息,可使机械人急剧高精度实现涂胶、喷涂等有关工作。
随着传感技术水平的不休进取,相应的三维信息获取伎俩也不休美满。目前,获取表界物体三维信息的传感器重要有以下三种:传统RGB双目相机、结构光相机、TOF相机。
三种技术规划对比:
|
相机类型 |
RGB双目相机 |
结构光相机 |
TOF相机 |
|
测距方式 |
被动式 |
自动式 |
自动式 |
|
工作道理 |
RGB图像特点点匹配,三角丈量间接推算 |
自动投射已知编码图案,提升特点匹配成效 |
凭据光的飞行功夫直接丈量 |
|
丈量精度 |
毫米级精度 |
毫米级精度 |
厘米级精度 |
|
丈量领域 |
通常2米以内 |
通常10米以内 |
通常100米以内 |
|
影响成分 |
受光照和物体纹理影响较大,夜晚无法使用 |
不受光照和物体纹理影响,受反光影响 |
不受光照和物体纹理影响,受多沉反射影响 |
|
工作环境 |
户表无影响 |
户表有影响 |
户表有影响 |
图1 永信贵宾会217自主研发的串并混联六轴机械人
图2 永信贵宾会217自主研发机械人节造器与结构光3D相机
永信贵宾会217选取结构光相机共同自主研发的串并混联六轴机械人实现有关3D视觉检测抓取项目。其技术伎俩重要蕴含:
1) 物体的三维信息获。何坊袢∽ト≈副甑娜畔,选取Eye to hand的相机装置方式,将相机固定在抓取场景的特定地位,以最大限度地急剧正确获取三维图像。
2) 机械人手眼标定:选取基于双四元数的手眼标定步骤,在此基础上通过使用旋量一致性定理过滤观测数据野点,提高了标定精度。对于空间直线的刚体变换,选取单元双四元数来推算比直接用齐次矩阵更为有效。同时,对于陆续的刚体变换,能够暗示为两个单元双四元数的相乘,这个性质与齐次矩阵类似。使用单元双四元数能够紧凑地暗示三维空间的刚体变换。再凭据旋量一致性定理,选取误差公式,剔除野点。
图3 手眼标定道理图
图4 旋量与直线的 Plüker 坐标暗示
3) 点云精简:选取基于包抄盒与随机采样法实现大量点云简化,保留抓取指标有关有效带点云图。
4) 点云去噪:由于噪声点或失真点而不成预防线会产生误差较大的点和跳跃较大的点。选取高斯滤波步骤实现抓取指标有关点云图的去噪。
5) 点云宰割:选取基于边、区域、混合、聚类的步骤实现抓取指标与周围场景点云的宰割,使抓取指标点云特点更为清澈,显著。
6) 位姿估计:凭据彩色图像的梯度信息和物体表表的法向量选取特定算法找出最佳待抓取指标的最佳位姿。
图5 基于图像阈值的点云宰割模型
图6 视角变换的点云宰割模型
图7 相机采集的原始图像
图8 相机采集的深度图像
3D 视觉系统重要分为五大职能?椋罕鹄胧窍低潮甓?,点云处置?,通讯?,显示?楹臀募治理?。目前永信贵宾会217机械人钻研院钻研的3D视觉系统可利用于自动包装、码垛、机床高低料和焊接等多个方面。
“柔性”是新时期对工业机械人提出的新要求,对于抓取这个工作而言,“柔性”意味着不论何种工件呈此刻工作台的何种地位,机械人能够自动的鉴别并实现抓取。视觉辅助是解决问题的关键地点。利用视觉传感器丰硕的信息,机械人能够鉴别物体,并判断物体相对于机械人的地位和姿势。再凭据物体天生抓取位姿,实现活动规划后,执行抓取工作。其中对指标物体的鉴别和定位是抓取成功的前提前提。活动规划是实现柔性抓取,无需示教的关键地点。然而永信贵宾会217机械人已逐步实现了这个要求,在往更深的技术领域不休索求前进。