一种用于铸件打磨的视觉定位方法与流程

专利2022-06-29  65

本发明属于机加工技术领域,具体涉及一种用于铸件打磨的视觉定位方法。



背景技术:

铸件由于其表面光洁度以及粗糙度一般很大,若对产品光洁度、以及粗糙度有要求,则必须要进行进一步的切削或者打磨等加工,而目前我国铸件的清理仍以手工打磨为主,其定位和固定方式通常采用目视、手握,少数借助于机械定位,该方式生产效率低、产品一致性差,打磨人力成本也较高,因此非常有必要研究和开发具有自主知识产权的全自动铸件清理设备。

目前采用自动化的方式对铸件进行打磨的技术难点之一就是打磨过程中铸件产品的准确定位,为了解决打磨过程中的产品自动化定位问题,尤其针对铸件局部表面质量较差时,亟需提供一致性好、定位精度高的用于铸件打磨的视觉定位方法。



技术实现要素:

本发明的目的是提供一致性好、定位精度高的用于铸件打磨的视觉定位方法。

上述目的是通过如下技术方案实现:一种用于铸件打磨的视觉定位方法,包括如下步骤:

(1)标定相机图像坐标系与机器人坐标系之间的转换关系矩阵;

(2)确定铸件的扫描特征点:在靠近铸件边缘的位置确定3个以上的扫描特征点;

(3)确定铸件的扫描特征点在相机图像坐标系中的坐标;

(4)根据步骤(1)的转换关系矩阵,将扫描特征点的相机图像坐标系中的坐标转化为机器人坐标系下的坐标;

(5)计算确定的铸件的多个扫描特征点的几何中心以及按顺时针或逆时针方向相邻两扫描特征点的中点在机器人坐标系下的坐标;

(6)以多个扫描特征点的几何中心为起点,顺时针或逆时针方向任意相邻两扫描特征点的中点为终点记为第一向量,以多个扫描特征点的几何中心为起点,另一顺时针或逆时针方向相邻两扫描特征点的中点为终点记为第二向量,第一向量与第二向量的向量积记为第三向量,第一向量与第三向量的单位向量的向量积记为第四向量,以多个扫描特征点的几何中心为原点,分别以第一向量的方向、第三向量的方向和第四向量的方向作为铸件坐标系的x方向、z方向和y方向建立铸件坐标系。

应用过程中通过标定好的工业相机,获取铸件表面不同特征点之间的位置关系,通过该位置关系建立一个和铸件本身唯一固定的坐标系,且和铸件各区域位置关系明确,以该坐标系作为铸件打磨的坐标系,即可实现铸件打磨过程中的定位。

本发明可以解决使用小视野相机对大尺寸工件定位时,相机视野不够导致无法定位的问题,同时可以解决铸件局部表面质量较差,一致性较差时的定位精度不高的问题,另外本发明技术拓宽视觉定位在工业机器人领域的应用范围,相对于现有的机械定位方法,本方法效率高,成本低,产品一致性好。

进一步的技术方案是,所述步骤(2)中在靠近铸件边缘的位置确定四个扫描特征点;所述步骤(3)中基于图像匹配的方法,确定四个扫描特征点在相机图像坐标系中的坐标;所述步骤(4)中四个机器人坐标系下的坐标分别记为p1、p2、p3、p4;所述步骤(5)中分别计算特征点p1与p2,p2与p3中点,分别记为p12和p23,并计算p1、p2、p3、p4四个点的几何中心记为原点p0;所述步骤(6)中分别求出向量分别为第一向量和第二向量,的向量积为第三向量,与第三向量的单位向量的向量积为第四向量。

进一步的技术方案是,所述步骤(1)中相机采用线激光视觉传感器,标定方法采用线激光传感器的静态标定方法,具体包括如下步骤:

s1线激光视觉传感器平面垂直方向的标定;

s2标定工具的安装:将标定工具设置在机器人的末端,其中,标定工具包括n个标定圆,n≥2;

s3确定机器人坐标系,标定标定工具上的各个标定圆;

s4调整机器人的末端的位置,使得标定工具置于线激光传感器的视野范围内,同时保证机器人在激光传感器视野范围内的移动方向与激光平面保持垂直;

s5机器人带动标定工具在激光传感器视野范围内移动,确定第一次扫描位置起始位置和结束位置,采集标定工具第一个扫描位置起始点至结束点移动过程的图像信息;

s6重复步骤s4,调整机器人的位置,确定第二次扫描位置的起始位置和结束位置,采集标定工具第二个扫描位置起始点至结束点移动过程的图像信息;

s7对步骤s5和步骤s6中采集的图像上的标定圆进行拟合,得到标定圆圆心在线激光传感器坐标系中的坐标;

s8根据标定工具上标定点在线激光传感器坐标系中的坐标和在机器人坐标系中的坐标进行值拟合运算得到转换关系矩阵的最佳匹配值。

进一步的技术方案是,所述步骤s3中采用xyz-4点法和abc-2点法标定工具上的各个标定圆,得到标定工具上各标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z),所述标定点为标定工具上标定圆的圆心。

进一步的技术方案是,所述步骤s5中,确定机器人移动的第一次起始位置以及结束位置,采集标定工具第一个扫描位置起始点至结束点移动过程的图像信息,并提取图像中的二维图像信息,同时根据步骤s3获取的各标定圆的标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z)获取标定工具上n个标定点在此扫描过程起始位置时的机器人坐标系中的坐标q1(x,y,z)~qn(x,y,z)。

进一步的技术方案是,所述步骤s6中的具体过程为,重复步骤s4,调整机器人的位置,确定第二次扫描位置的起始位置和结束位置,采集标定工具第二个扫描位置起始点至结束点移动过程的图像信息,并提取图像中的二维图像信息,同时根据步骤s3获取的各标定圆的标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z)获取标定工具上n个标定点在此扫描过程起始位置时的机器人坐标系中的坐标qn 1(x,y,z)~q2n(x,y,z)。

进一步的技术方案是,所述步骤s8中,根据标定工具上的标定点在机器人坐标系和线激光传感器坐标系中的位置矩阵采用最小二乘法求解线激光传感器坐标系与机器人基坐标系的手眼标定矩阵。

进一步的技术方案是,所述步骤s8中具体步骤如下:

s8.1设机器人坐标系为q,线激光传感器坐标系为p,p到q的旋转矩阵和偏移矩阵分别为r和t,设空间某一点b在q和p坐标系下的齐次坐标分别为qb(x,y,1),pb(x,y,1),pb和qb之间转换关系如公式(1)所示:

其中r代表线激光传感器坐标系到机器人坐标系的旋转矩阵,t代表偏移量,stobmat2d为标定圆圆心在线激光传感器中的坐标和机器人坐标系中的坐标的变换关系;

s82给定一个最小误差限值minimum,将所有标定点在机器人坐标系中的坐标qi(x,y,)和在线激光传感器坐标系中的坐标pi(x,y,)代入到公式(2)中,通过不断迭代得到stobmat2d的最佳拟合值,将到stobmat2d的最佳拟合值代入公式(1)中得到线激光传感器坐标系到机器人坐标系的旋转矩阵r与偏移矩阵t;

其中,qx[i]表示第i个标定点在机器人坐标系中的x方向的坐标值,qy[i]表示第i个标定点在机器人坐标系中的y方向的坐标值,px[i]表示第i个标定点在线激光传感器坐标系中的的x方向的坐标值,py[i]表示第i个标定点在线激光传感器坐标系中的的y方向的坐标值。

本发明的使用,解决了非标准空间直角坐标系(当一个坐标轴为旋转轴)时的相机标定问题,本发明可解决线激光传感器使用过程中安装位置固定且不发生空间移动时的外部参数标定问题,降低基于激光视觉传感器应用系统外部设备间的误差,标定过程简单、操作简便、标定精度高,同时本发明拓宽了线激光在工业机器人领域的应用范围。

进一步的技术方案是,所述标定工具为标定纸,所述标定纸上的标定圆为黑色实心圆,所述标定圆的数量大于10个,所述标定纸平整粘贴于旋转轴上。

进一步的技术方案是,所述标定圆的数量为12个。

具体实施方式

下面结合对本发明进行详细描述,本部分的描述仅是示范性和解释性,不应对本发明的保护范围有任何的限制作用。此外,本领域技术人员根据本文件的描述,可以对本文件中实施例中以及不同实施例中的特征进行相应组合。

本发明实施例如下,一种用于铸件打磨的视觉定位方法,包括如下步骤:

(1)标定相机图像坐标系与机器人坐标系之间的转换关系矩阵;

(2)确定铸件的扫描特征点:在靠近铸件边缘的位置确定3个以上的扫描特征点;

(3)确定铸件的扫描特征点在相机图像坐标系中的坐标;

(4)根据步骤(1)的转换关系矩阵,将扫描特征点的相机图像坐标系中的坐标转化为机器人坐标系下的坐标;

(5)计算确定的铸件的多个扫描特征点的几何中心以及按顺时针或逆时针方向相邻两扫描特征点的中点在机器人坐标系下的坐标;

(6)以多个扫描特征点的几何中心为起点,顺时针或逆时针方向任意相邻两扫描特征点的中点为终点记为第一向量,以多个扫描特征点的几何中心为起点,另一顺时针或逆时针方向相邻两扫描特征点的中点为终点记为第二向量,第一向量与第二向量的向量积记为第三向量,第一向量与第三向量的单位向量的向量积记为第四向量,以多个扫描特征点的几何中心为原点,分别以第一向量的方向、第三向量的方向和第四向量的方向作为铸件坐标系的x方向、z方向和y方向建立铸件坐标系。

应用过程中通过标定好的工业相机,获取铸件表面不同特征点之间的位置关系,通过该位置关系建立一个和铸件本身唯一固定的坐标系,且和铸件各区域位置关系明确,以该坐标系作为铸件打磨的坐标系,即可实现铸件打磨过程中的定位。

本发明可以解决使用小视野相机对大尺寸工件定位时,相机视野不够导致无法定位的问题,同时可以解决铸件局部表面质量较差,一致性较差时的定位精度不高的问题,另外本发明技术拓宽视觉定位在工业机器人领域的应用范围,相对于现有的机械定位方法,本方法效率高,成本低,产品一致性好。

在上述实施例的基础上,本发明另一实施例中,所述步骤(2)中在靠近铸件边缘的位置确定四个扫描特征点;所述步骤(3)中基于图像匹配的方法,确定四个扫描特征点在相机图像坐标系中的坐标;所述步骤(4)中四个机器人坐标系下的坐标分别记为p1、p2、p3、p4;所述步骤(5)中分别计算特征点p1与p2,p2与p3中点,分别记为p12和p23,并计算p1、p2、p3、p4四个点的几何中心记为原点p0;所述步骤(6)中分别求出向量分别为第一向量和第二向量,的向量积为第三向量,与第三向量的单位向量的向量积为第四向量。

在上述实施例的基础上,本发明另一实施例中,所述步骤(1)中相机采用线激光视觉传感器,标定方法采用线激光传感器的静态标定方法,具体包括如下步骤:

s1线激光视觉传感器平面垂直方向的标定;

s2标定工具的安装:将标定工具设置在机器人的末端,其中,标定工具包括n个标定圆,n≥2;

s3确定机器人坐标系,标定标定工具上的各个标定圆;

s4调整机器人的末端的位置,使得标定工具置于线激光传感器的视野范围内,同时保证机器人在激光传感器视野范围内的移动方向与激光平面保持垂直;

s5机器人带动标定工具在激光传感器视野范围内移动,确定第一次扫描位置起始位置和结束位置,采集标定工具第一个扫描位置起始点至结束点移动过程的图像信息;

s6重复步骤s4,调整机器人的位置,确定第二次扫描位置的起始位置和结束位置,采集标定工具第二个扫描位置起始点至结束点移动过程的图像信息;

s7对步骤s5和步骤s6中采集的图像上的标定圆进行拟合,得到标定圆圆心在线激光传感器坐标系中的坐标;

s8根据标定工具上标定点在线激光传感器坐标系中的坐标和在机器人坐标系中的坐标进行值拟合运算得到转换关系矩阵的最佳匹配值。

在上述实施例的基础上,本发明另一实施例中,所述步骤s3中采用xyz-4点法和abc-2点法标定工具上的各个标定圆,得到标定工具上各标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z),所述标定点为标定工具上标定圆的圆心。

在上述实施例的基础上,本发明另一实施例中,所述步骤s5中,确定机器人移动的第一次起始位置以及结束位置,采集标定工具第一个扫描位置起始点至结束点移动过程的图像信息,并提取图像中的二维图像信息,同时根据步骤s3获取的各标定圆的标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z)获取标定工具上n个标定点在此扫描过程起始位置时的机器人坐标系中的坐标q1(x,y,z)~qn(x,y,z)。

在上述实施例的基础上,本发明另一实施例中,所述步骤s6中的具体过程为,重复步骤s4,调整机器人的位置,确定第二次扫描位置的起始位置和结束位置,采集标定工具第二个扫描位置起始点至结束点移动过程的图像信息,并提取图像中的二维图像信息,同时根据步骤s3获取的各标定圆的标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z)获取标定工具上n个标定点在此扫描过程起始位置时的机器人坐标系中的坐标qn 1(x,y,z)~q2n(x,y,z)。

在上述实施例的基础上,本发明另一实施例中,所述步骤s8中,根据标定工具上的标定点在机器人坐标系和线激光传感器坐标系中的位置矩阵采用最小二乘法求解线激光传感器坐标系与机器人基坐标系的手眼标定矩阵。

在上述实施例的基础上,本发明另一实施例中,所述步骤s8中具体步骤如下:

s8.1设机器人坐标系为q,线激光传感器坐标系为p,p到q的旋转矩阵和偏移矩阵分别为r和t,设空间某一点b在q和p坐标系下的齐次坐标分别为qb(x,y,1),pb(x,y,1),pb和qb之间转换关系如公式(1)所示:

其中r代表线激光传感器坐标系到机器人坐标系的旋转矩阵,t代表偏移量,stobmat2d为标定圆圆心在线激光传感器中的坐标和机器人坐标系中的坐标的变换关系;

s8.2给定一个最小误差限值minimum,将所有标定点在机器人坐标系中的坐标qi(x,y,)和在线激光传感器坐标系中的坐标pi(x,y,)代入到公式(2)中,通过不断迭代得到stobmat2d的最佳拟合值,将到stobmat2d的最佳拟合值代入公式(1)中得到线激光传感器坐标系到机器人坐标系的旋转矩阵r与偏移矩阵t;

其中,qx[i]表示第i个标定点在机器人坐标系中的x方向的坐标值,qy[i]表示第i个标定点在机器人坐标系中的y方向的坐标值,px[i]表示第i个标定点在线激光传感器坐标系中的的x方向的坐标值,py[i]表示第i个标定点在线激光传感器坐标系中的的y方向的坐标值。

本发明的使用,解决了非标准空间直角坐标系(当一个坐标轴为旋转轴)时的相机标定问题,本发明可解决线激光传感器使用过程中安装位置固定且不发生空间移动时的外部参数标定问题,降低基于激光视觉传感器应用系统外部设备间的误差,标定过程简单、操作简便、标定精度高,同时本发明拓宽了线激光在工业机器人领域的应用范围。

在上述实施例的基础上,本发明另一实施例中,所述标定工具为标定纸,所述标定纸上的标定圆为黑色实心圆,所述标定圆的数量大于10个,所述标定纸平整粘贴于旋转轴上。

在上述实施例的基础上,本发明另一实施例中,所述标定圆的数量为12个。

以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。


技术特征:

1.一种用于铸件打磨的视觉定位方法,其特征在于,包括如下步骤:

(1)标定相机图像坐标系与机器人坐标系之间的转换关系矩阵;

(2)确定铸件的扫描特征点:在靠近铸件边缘的位置确定3个以上的扫描特征点;

(3)确定铸件的扫描特征点在相机图像坐标系中的坐标;

(4)根据步骤(1)的转换关系矩阵,将扫描特征点的相机图像坐标系中的坐标转化为机器人坐标系下的坐标;

(5)计算确定的铸件的多个扫描特征点的几何中心以及按顺时针或逆时针方向相邻两扫描特征点的中点在机器人坐标系下的坐标;

(6)以多个扫描特征点的几何中心为起点,顺时针或逆时针方向任意相邻两扫描特征点的中点为终点记为第一向量,以多个扫描特征点的几何中心为起点,另一顺时针或逆时针方向相邻两扫描特征点的中点为终点记为第二向量,第一向量与第二向量的向量积记为第三向量,第一向量与第三向量的单位向量的向量积记为第四向量,以多个扫描特征点的几何中心为原点,分别以第一向量的方向、第三向量的方向和第四向量的方向作为铸件坐标系的x方向、z方向和y方向建立铸件坐标系。

2.根据权利要求1所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤(2)中在靠近铸件边缘的位置确定四个扫描特征点;所述步骤(3)中基于图像匹配的方法,确定四个扫描特征点在相机图像坐标系中的坐标;所述步骤(4)中四个机器人坐标系下的坐标分别记为p1、p2、p3、p4;所述步骤(5)中分别计算特征点p1与p2,p2与p3中点,分别记为p12和p23,并计算p1、p2、p3、p4四个点的几何中心记为原点p0;所述步骤(6)中分别求出向量分别为第一向量和第二向量,的向量积为第三向量,与第三向量的单位向量的向量积为第四向量。

3.根据权利要求2所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤(1)中相机采用线激光视觉传感器,标定方法采用线激光传感器的静态标定方法,具体包括如下步骤:

s1线激光视觉传感器平面垂直方向的标定;

s2标定工具的安装:将标定工具设置在机器人的末端,其中,标定工具包括n个标定圆,n≥2;

s3确定机器人坐标系,标定标定工具上的各个标定圆;

s4调整机器人的末端的位置,使得标定工具置于线激光传感器的视野范围内,同时保证机器人在激光传感器视野范围内的移动方向与激光平面保持垂直;

s5机器人带动标定工具在激光传感器视野范围内移动,确定第一次扫描位置起始位置和结束位置,采集标定工具第一个扫描位置起始点至结束点移动过程的图像信息;

s6重复步骤s4,调整机器人的位置,确定第二次扫描位置的起始位置和结束位置,采集标定工具第二个扫描位置起始点至结束点移动过程的图像信息;

s7对步骤s5和步骤s6中采集的图像上的标定圆进行拟合,得到标定圆圆心在线激光传感器坐标系中的坐标;

s8根据标定工具上标定点在线激光传感器坐标系中的坐标和在机器人坐标系中的坐标进行值拟合运算得到转换关系矩阵的最佳匹配值。

4.根据权利要求3所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤s3中采用xyz-4点法和abc-2点法标定工具上的各个标定圆,得到标定工具上各标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z),所述标定点为标定工具上标定圆的圆心。

5.根据权利要求4所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤s5中,确定机器人移动的第一次起始位置以及结束位置,采集标定工具第一个扫描位置起始点至结束点移动过程的图像信息,并提取图像中的二维图像信息,同时根据步骤s3获取的各标定圆的标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z)获取标定工具上n个标定点在此扫描过程起始位置时的机器人坐标系中的坐标q1(x,y,z)~qn(x,y,z)。

6.根据权利要求5所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤s6中的具体过程为,重复步骤s4,调整机器人的位置,确定第二次扫描位置的起始位置和结束位置,采集标定工具第二个扫描位置起始点至结束点移动过程的图像信息,并提取图像中的二维图像信息,同时根据步骤s3获取的各标定圆的标定点相对于的坐标偏移量t1(x,y,z)~tn(x,y,z)获取标定工具上n个标定点在此扫描过程起始位置时的机器人坐标系中的坐标qn 1(x,y,z)~q2n(x,y,z)。

7.根据权利要求6所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤s8中,根据标定工具上的标定点在机器人坐标系和线激光传感器坐标系中的位置矩阵采用最小二乘法求解线激光传感器坐标系与机器人基坐标系的手眼标定矩阵。

8.根据权利要求7所述的用于铸件打磨的视觉定位方法,其特征在于,所述步骤s8中具体步骤如下:

s8.1设机器人坐标系为q,线激光传感器坐标系为p,p到q的旋转矩阵和偏移矩阵分别为r和t,设空间某一点b在q和p坐标系下的齐次坐标分别为qb(x,y,1),pb(x,y,1),pb和qb之间转换关系如公式(1)所示:

其中r代表线激光传感器坐标系到机器人坐标系的旋转矩阵,t代表偏移量,stobmat2d为标定圆圆心在线激光传感器中的坐标和机器人坐标系中的坐标的变换关系;

s8.2给定一个最小误差限值minimum,将所有标定点在机器人坐标系中的坐标qi(x,y,)和在线激光传感器坐标系中的坐标pi(x,y,)代入到公式(2)中,通过不断迭代得到stobmat2d的最佳拟合值,将到stobmat2d的最佳拟合值代入公式(1)中得到线激光传感器坐标系到机器人坐标系的旋转矩阵r与偏移矩阵t;

其中,qx[i]表示第i个标定点在机器人坐标系中的x方向的坐标值,qy[i]表示第i个标定点在机器人坐标系中的y方向的坐标值,px[i]表示第i个标定点在线激光传感器坐标系中的的x方向的坐标值,py[i]表示第i个标定点在线激光传感器坐标系中的的y方向的坐标值。

9.根据权利要求7所述的用于铸件打磨的视觉定位方法,其特征在于,所述标定工具为标定纸,所述标定纸上的标定圆为黑色实心圆,所述标定圆的数量大于10个,所述标定纸平整粘贴于旋转轴上。

10.根据权利要求9所述的用于铸件打磨的视觉定位方法,其特征在于,所述标定圆的数量为12个。

技术总结
本发明涉及一种用于铸件打磨的视觉定位方法,包括如下步骤:(1)标定相机图像坐标系与机器人坐标系之间的转换关系矩阵;(2)确定铸件的扫描特征点;(3)确定铸件的扫描特征点在相机图像坐标系中的坐标;(4)将扫描特征点的相机图像坐标系中的坐标转化为机器人坐标系下的坐标;(5)计算确定的铸件的多个扫描特征点的几何中心以及按顺时针或逆时针方向相邻两扫描特征点的中点在机器人坐标系下的坐标;(6)确定铸件坐标系。本发明可以解决使用小视野相机对大尺寸工件定位时相机视野不够导致无法定位的问题,同时可以解决铸件局部表面质量较差,一致性较差时的定位精度不高的问题,本方法效率高,成本低,产品一致性好。

技术研发人员:孔拓;高狄;陈国利;梁宪峰;宋立冬;罗诒波;刘云云;周斌
受保护的技术使用者:长沙长泰机器人有限公司
技术研发日:2019.11.12
技术公布日:2020.06.09

转载请注明原文地址: https://bbs.8miu.com/read-37934.html

最新回复(0)