CN108490830B - 一种基于机器视觉的自动洗车的控制装置及其控制方法 - Google Patents

一种基于机器视觉的自动洗车的控制装置及其控制方法 Download PDF

Info

Publication number
CN108490830B
CN108490830B CN201810220468.XA CN201810220468A CN108490830B CN 108490830 B CN108490830 B CN 108490830B CN 201810220468 A CN201810220468 A CN 201810220468A CN 108490830 B CN108490830 B CN 108490830B
Authority
CN
China
Prior art keywords
vehicle
cleaned
coordinate system
lens
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810220468.XA
Other languages
English (en)
Other versions
CN108490830A (zh
Inventor
储昭碧
黄富元
陈波
冯小英
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei University of Technology
Original Assignee
Hefei University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei University of Technology filed Critical Hefei University of Technology
Priority to CN201810220468.XA priority Critical patent/CN108490830B/zh
Publication of CN108490830A publication Critical patent/CN108490830A/zh
Application granted granted Critical
Publication of CN108490830B publication Critical patent/CN108490830B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G05B19/0423Input/output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes

Abstract

本发明涉及一种基于机器视觉的自动洗车的控制装置及其控制方法。该装置包括主控制器、协处理器以及摄像机系统,摄像机系统用于获取待清洗车辆的图像信息,主控制器对待清洗车辆的图像信息进行处理得到摄像机系统坐标系下的三维坐标;主控制器根据摄像机系统坐标系下的三维坐标,得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器;协处理器用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车。本发明不仅结构简单、体积小、智能化程度高、应用范围更广,而且减少了空间的占用,节省了人力和时间,降低了成本。

Description

一种基于机器视觉的自动洗车的控制装置及其控制方法
技术领域
本发明属于自动控制洗车技术领域,特别涉及一种基于机器视觉的自动洗车的控制装置及其控制方法。
背景技术
现如今洗车行业成为每个城市必不可少的行业,主要分为机器自动洗车和人工洗车,大多数的城乡洗车门店是通过用手工进行操作,工作效率很低,浪费了人力和时间。
当前市场上也出现了一些自动洗车设备,现有的自动洗车设备采用的都是大旋转布轮擦洗方式,布轮直径很大,非常笨重,智能化程度低,而且设备体积太大,需要专门场地,因此不能被一般的小型场地的洗车门店利用,普及率很低,应用范围较窄。
发明内容
本发明为了克服上述现有技术的不足,提供了一种基于机器视觉的自动洗车的控制装置,本发明结构简单、体积小、智能化程度高、应用范围更广。
为实现上述目的,本发明采用了以下技术措施:
一种基于机器视觉的自动洗车的控制装置,包括主控制器、协处理器以及摄像机系统,其中,
摄像机系统,用于获取待清洗车辆的图像信息,并将待清洗车辆的图像信息发送至主控制器;
主控制器,用于对待清洗车辆的图像信息进行处理得到待清洗车辆的外围轮廓,主控制器存储此外围轮廓的二维坐标,并将此二维坐标转化为摄像机系统坐标系下的三维坐标;主控制器根据摄像机系统坐标系下的三维坐标,转化得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器;
协处理器,其与机械臂相连接,协处理器用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车;主控制器中的世界坐标系与机械臂所处的世界坐标系相同。
优选的,所述控制装置还包括构成停车区域的长方形的停车位检测边线,所述主控制器选取长方形的停车位检测边线的一个角作为世界坐标系的原点,此世界坐标系的原点也即为机械臂所处的世界坐标系的原点;主控制器以世界坐标系原点为相交点的两条边中的一条为X轴方向,另一条为Y轴方向,垂直地面向上的为Z轴方向。
优选的,所述控制装置还包括在获取待清洗车辆的图像信息时,利用光照进行图像特征增强的控制灯,所述主控制器与控制灯之间相连接。
优选的,所述主控制器包括DSP芯片,所述DSP芯片的型号为C6747系列芯片。
本发明还提供了一种基于前述的一种基于机器视觉的自动洗车的控制装置的控制方法,包括以下步骤:
S1、所述摄像机系统获取待清洗车辆的图像信息,并将待清洗车辆的图像信息发送至主控制器;
S2、所述主控制器对待清洗车辆的图像信息进行处理得到待清洗车辆的外围轮廓,主控制器存储此外围轮廓的二维坐标,并将此二维坐标转化为摄像机系统坐标系下的三维坐标;主控制器根据摄像机系统坐标系下的三维坐标,转化得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器;
S3、所述协处理器与机械臂电连接,协处理器用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车;所述主控制器中的世界坐标系与机械臂所处的世界坐标系相同。
优选的,在步骤S2中,所述主控制器对待清洗车辆的图像信息进行预处理,得到预处理后的待清洗车辆的图像信息的具体操作步骤包括:所述主控制器对待清洗车辆的图像信息进行高斯滤波处理,得到预处理后的待清洗车辆的图像信息。
优选的,在步骤S2中,所述主控制器根据预处理后的待清洗车辆的图像信息,得到待清洗车辆的外围轮廓的二维坐标的具体操作步骤包括:
所述主控制器对预处理后的待清洗车辆的图像信息依次进行灰度化、二值化处理,得到待清洗车辆的外围轮廓,利用CANNY边缘方法检测待清洗车辆的外围轮廓,基于OPENCV视觉函数库,利用FindContours函数实现查找面积最大的外围轮廓,并存储此面积最大的外围轮廓的二维坐标。
优选的,步骤S2中,所述主控制器将待清洗车辆的外围轮廓的二维坐标转换到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,具体操作步骤包括:
所述摄像机系统包括双目摄像机,所述双目摄像机包括第一镜头和第二镜头,第一镜头和第二镜头的像平面位于同一平面,光轴严格平行,距离一定,焦距相同;第一镜头和第二镜头在同一时刻获取待清洗车辆的外围轮廓的同一个二维坐标,此同一个二维坐标即为同一特征点P,特征点P在第一镜头下的坐标为Pl=(Xl,Yl),特征点P在第二镜头下的坐标为Pr=(Xr,Yr),其中,Yl=Yr=Y,Xl为特征点P在第一镜头下的X轴坐标,Yl为特征点P在第一镜头下的Y轴坐标,Xr为特征点P在第二镜头下的X轴坐标,Yr为特征点P在第二镜头下的Y轴坐标,Y为特征点P的Y轴坐标值,得到的坐标转换公式为公式(1):
Figure BDA0001599616780000031
其中,f为第一镜头和第二镜头的焦距,xc为特征点P在双目摄像机下的X轴坐标,xc也即摄像机系统坐标系下的X轴坐标,yc为特征点P在双目摄像机下的Y轴坐标,yc也即摄像机系统坐标系下的Y轴坐标,zc为特征点P在双目摄像机下的Z轴坐标,zc也即摄像机系统坐标系下的Z轴坐标,D为第一镜头的中心投影与第二镜头的中心投影之间的距离;
特征点P在第一镜头和第二镜头的X轴坐标之间的视差d为:d=Xl-Xr,根据视差d得到特征点P在摄像机系统坐标系下的三维坐标为公式(2):
Figure BDA0001599616780000041
根据公式(2),得到待清洗车辆的外围轮廓的世界坐标系下的三维坐标D(Xw,Yw,Zw,1)为公式(3):
Figure BDA0001599616780000042
其中,Xw为特征点P在世界坐标系下的X轴坐标,Yw为特征点P在世界坐标系下的Y轴坐标,Zw为特征点P在世界坐标系下的Z轴坐标,R为旋转矩阵,N为平移矩阵,T为转置矩阵符号;
所述R由三个旋转角度确定,R=R(α,β,γ),α、β、γ分别是摄像机系统坐标系下的点绕摄像机坐标系x、y、z轴旋转的角度;N=(tx,ty,tz)为摄像机坐标系相对于世界坐标系的平移距离,tx,ty,tz分别为摄像机系统坐标系下的点相对于摄像机坐标系原点在x、y、z轴三个方向的偏移距离。
R和N完全由摄像机系统相对于世界坐标系的位置决定,R和N也称为摄像机的外部参数,此两个外部参数在相机标定的时候确定,相机标定请参见现有技术中的标定方法,因此R和N可由现有技术中的标定方法求得。
本发明的有益效果在于:
1)、本发明包括主控制器、协处理器以及摄像机系统,所述主控制器能够将待清洗车辆的外围轮廓的二维坐标转换到世界坐标系下三维坐标,所述主控制器根据得到的待清洗车辆的外围轮廓的三维坐标信息,通过协处理器控制机械臂洗车,本发明不仅结构简单、体积小、智能化程度高、应用范围更广,而且减少了空间的占用,节省了人力和时间,降低了成本。
2)、所述机械臂所处的世界坐标系与主控制器中的世界坐标系相统一,由此,机械臂能够围绕着车辆的外围轮廓进行洗车,因此本发明能够精准控制洗车,大大地节约了水资源。
附图说明
图1为本发明的自动洗车的控制装置的结构原理框图;
图2为本发明的自动洗车的控制装置的整体结构示意图;
图3为本发明的自动洗车的控制装置的控制方法的流程图;
图4为本发明的摄像机系统的成像定位暨坐标转换原理图;
图5为本发明的车身外围轮廓检测效果图。
图中的附图标记含义如下:
1—停车位检测边线 10—主控制器
20—协处理器 30—摄像机系统
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1、2所示,一种基于机器视觉的自动洗车的控制装置,包括主控制器10、协处理器20、摄像机系统30以及控制灯40,其中,
摄像机系统30,如图1所示,摄像机系统30处于待清洗车辆的上方,优选是处于待清洗车辆的正上方。摄像机系统30用于获取待清洗车辆的图像信息,并将待清洗车辆的图像信息发送至主控制器10;
主控制器10,用于对待清洗车辆的图像信息进行处理得到待清洗车辆的外围轮廓,主控制器10存储此外围轮廓的二维坐标,并将此二维坐标转化为摄像机系统坐标系下的三维坐标;主控制器10根据摄像机系统坐标系下的三维坐标,转化得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器20;
协处理器20,其与机械臂相连接,协处理器20用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车;主控制器10中的世界坐标系与机械臂所处的世界坐标系相同。
如图2所示,所述控制装置还包括构成停车区域的长方形的停车位检测边线1,所述主控制器10选取长方形的停车位检测边线1的一个角作为世界坐标系的原点,此世界坐标系的原点也即为机械臂所处的世界坐标系的原点;主控制器10以世界坐标系原点为相交点的两条边中的一条为X轴方向,另一条为Y轴方向,垂直地面向上的为Z轴方向。
如图1所示,所述控制装置还包括在获取待清洗车辆的图像信息时,利用光照进行图像特征增强的控制灯40,所述主控制器10与控制灯40之间相连接。
所述控制灯40可以为LED灯,利用灯光进行车身特征增强,控制灯40发出的灯光一方面有助于提取深色颜色特征,另一方面,当车身颜色偏浅甚至和地面一样同为白色时,通过不同方向的灯光照射,可以使得车身外围轮廓与地面区分开来,得到清晰的图像像信息,有助于帮助提取车身外围轮廓特征。
具体的,所述主控制器10包括DSP芯片,所述DSP芯片的型号为C6747系列芯片。
具体的,所述协处理器20包括总线型运动控制器、伺服电机以及增量编码器。所述总线型运动控制器的型号为台达公司生产的DVP1MC11T,伺服电机的型号为台达公司生产的ASDA-A2-M,增量编码器的型号为台达公司生产的ECMA-C11010RS。
如图3所示,本发明还提供了一种基于机器视觉的自动洗车的控制装置的控制方法,包括以下步骤:
S1、所述摄像机系统30获取待清洗车辆的图像信息,并将待清洗车辆的图像信息发送至主控制器10;
S2、所述主控制器10对待清洗车辆的图像信息进行处理得到待清洗车辆的外围轮廓,主控制器10存储此外围轮廓的二维坐标,并将此二维坐标转化为摄像机系统坐标系下的三维坐标;所述主控制器10根据摄像机系统坐标系下的三维坐标,转化得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器20;
S3、所述协处理器20与机械臂电连接,协处理器20用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车;所述主控制器10中的世界坐标系与机械臂所处的世界坐标系相同。
优选的,在步骤S2中,所述主控制器10对待清洗车辆的图像信息进行预处理,得到预处理后的待清洗车辆的图像信息的具体操作步骤包括:所述主控制器10对待清洗车辆的图像信息进行高斯滤波处理,得到预处理后的待清洗车辆的图像信息。
优选的,在步骤S2中,所述主控制器10根据预处理后的待清洗车辆的图像信息,得到待清洗车辆的外围轮廓的二维坐标的具体操作步骤包括:
所述主控制器10对预处理后的待清洗车辆的图像信息依次进行灰度化、二值化处理,得到待清洗车辆的外围轮廓,利用CANNY边缘方法检测待清洗车辆的外围轮廓,基于OPENCV视觉函数库,利用FindContours函数实现查找面积最大的外围轮廓,此面积最大的外围轮廓如图5所示,并存储此外围轮廓的二维坐标。
优选的,步骤S2中,所述主控制器10将待清洗车辆的外围轮廓的二维坐标转换到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,具体操作步骤包括:
如图4所示,所述摄像机系统30包括双目摄像机,所述双目摄像机包括第一镜头和第二镜头,第一镜头和第二镜头的像平面位于同一平面,光轴严格平行,距离一定,焦距相同;第一镜头和第二镜头在同一时刻获取待清洗车辆的外围轮廓的同一个二维坐标,此同一个二维坐标即为同一特征点P,特征点P在第一镜头下的坐标为Pl=(Xl,Yl),特征点P在第二镜头下的坐标为Pr=(Xr,Yr),其中,Yl=Yr=Y,Xl为特征点P在第一镜头下的X轴坐标,Yl为特征点P在第一镜头下的Y轴坐标,Xr为特征点P在第二镜头下的X轴坐标,Yr为特征点P在第二镜头下的Y轴坐标,Y为特征点P的Y轴坐标值,得到的坐标转换公式为公式(1):
Figure BDA0001599616780000081
其中,f为第一镜头和第二镜头的焦距,xc为特征点P在双目摄像机下的X轴坐标,xc也即摄像机系统坐标系下的X轴坐标,yc为特征点P在双目摄像机下的Y轴坐标,yc也即摄像机系统坐标系下的Y轴坐标,zc为特征点P在双目摄像机下的Z轴坐标,zc也即摄像机系统坐标系下的Z轴坐标,D为第一镜头的中心投影与第二镜头的中心投影之间的距离;
特征点P在第一镜头和第二镜头的X轴坐标之间的视差d为:d=Xl-Xr,根据视差d得到特征点P在摄像机系统坐标系下的三维坐标为公式(2):
Figure BDA0001599616780000082
根据公式(2),得到待清洗车辆的外围轮廓的世界坐标系下的三维坐标D(Xw,Yw,Zw,1)为公式(3):
Figure BDA0001599616780000083
其中,Xw为特征点P在世界坐标系下的X轴坐标,Yw为特征点P在世界坐标系下的Y轴坐标,Zw为特征点P在世界坐标系下的Z轴坐标,R为旋转矩阵,N为平移矩阵,T为转置矩阵符号;
所述R由三个旋转角度确定,R=R(α,β,γ),α、β、γ分别是摄像机系统坐标系下的点绕摄像机坐标系x、y、z轴旋转的角度;N=(tx,ty,tz)为摄像机坐标系相对于世界坐标系的平移距离,tx,ty,tz分别为摄像机系统坐标系下的点相对于摄像机坐标系原点在x、y、z轴三个方向的偏移距离。
R和N完全由摄像机系统相对于世界坐标系的位置决定,R和N也称为摄像机的外部参数,此两个外部参数在相机标定的时候确定,相机标定请参见现有技术中的标定方法,因此R和N可由现有技术中的标定方法求得。
如图5所示,将车身外围坐标从车身坐标系先转到双目摄像机所在的坐标系,进一步转化到车身外侧在世界坐标系下的坐标,实现待洗车辆、双目摄像机、控制系统和机械臂坐标系统一,控制系统得到车身的三维坐标信息。
本发明可设计多个自动洗车的控制装置,每一个自动洗车的控制装置分别应用于一个停车位。本发明不仅节约了大量的物理空间,也有利于节约人力成本,提高工作效率。

Claims (4)

1.一种基于机器视觉的自动洗车的控制装置,其特征在于:包括主控制器(10)、协处理器(20)以及摄像机系统(30),其中,
摄像机系统(30),用于获取待清洗车辆的图像信息,并将待清洗车辆的图像信息发送至主控制器(10);
主控制器(10),用于对待清洗车辆的图像信息进行处理得到待清洗车辆的外围轮廓,主控制器(10)存储此外围轮廓的二维坐标,并将此二维坐标转化为摄像机系统坐标系下的三维坐标;主控制器(10)根据摄像机系统坐标系下的三维坐标,转化得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器(20);
协处理器(20),其与机械臂相连接,协处理器(20)用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车;主控制器(10)中的世界坐标系与机械臂所处的世界坐标系相同;
所述控制装置还包括构成停车区域的长方形的停车位检测边线(1),所述主控制器(10)选取长方形的停车位检测边线(1)的一个角作为世界坐标系的原点,此世界坐标系的原点也即为机械臂所处的世界坐标系的原点;主控制器(10)以世界坐标系原点为相交点的两条边中的一条为X轴方向,另一条为Y轴方向,垂直地面向上的为Z轴方向;
摄像机系统(30)处于待清洗车辆的正上方;
所述摄像机系统(30)包括双目摄像机,所述双目摄像机包括第一镜头和第二镜头,第一镜头和第二镜头的像平面位于同一平面,光轴严格平行,距离一定,焦距相同;第一镜头和第二镜头在同一时刻获取待清洗车辆的外围轮廓的同一个二维坐标;
所述主控制器(10)对待清洗车辆的图像信息进行预处理,得到预处理后的待清洗车辆的图像信息的具体操作步骤包括:所述主控制器(10)对待清洗车辆的图像信息进行高斯滤波处理,得到预处理后的待清洗车辆的图像信息;
所述主控制器(10)根据预处理后的待清洗车辆的图像信息,得到待清洗车辆的外围轮廓的二维坐标的具体操作步骤包括:
所述主控制器(10)对预处理后的待清洗车辆的图像信息依次进行灰度化、二值化处理,得到待清洗车辆的外围轮廓,利用CANNY边缘方法检测待清洗车辆的外围轮廓,基于OPENCV视觉函数库,利用FindContours函数实现查找面积最大的外围轮廓,并存储此外围轮廓的二维坐标;
所述主控制器(10)将待清洗车辆的外围轮廓的二维坐标转换到待清洗车辆的外围轮廓在世界系下的三维坐标,具体操作步骤包括:
此同一个二维坐标即为同一特征点P,特征点P在第一镜头下的坐标为Pl=(Xl,Yl),特征点P在第二镜头下的坐标为Pr=(Xr,Yr),其中,Yl=Yr=Y,Xl为特征点P在第一镜头下的X轴坐标,Yl为特征点P在第一镜头下的Y轴坐标,Xr为特征点P在第二镜头下的X轴坐标,Yr为特征点P在第二镜头下的Y轴坐标,Y为特征点P的Y轴坐标值,得到的坐标转换公式为公示(1):
Figure FDA0002402236480000021
其中,f为第一镜头和第二镜头的焦距,xc为特征点P在双目摄像机下的X轴坐标,xc也即摄像机系统坐标系下的X轴坐标,yc为特征点P在双目摄像机下的Y轴坐标,yc也即摄像机系统坐标系下的Y轴坐标,zc为特征点P在双目摄像机下的Z轴坐标,zc也即摄像机系统坐标系下的Z轴坐标,D为第一镜头的中心投影与第二镜头的中心投影之间的距离;
特征点P在第一镜头和第二镜头的X轴坐标之间的视差d为:d=Xl-Xr,根据视差d得到特征点P在摄像机系统坐标系下的三维坐标为公式(2):
Figure FDA0002402236480000031
根据公式(2),得到待清洗车辆的外围轮廓的世界坐标系下的三维坐标D(Xw,Yw,Zw,1)为公式(3):
Figure FDA0002402236480000032
其中,Xw为特征点P在世界坐标系下的X轴坐标,Yw为特征点P在世界坐标系下的Y轴坐标,Zw为特征点P在世界坐标系下的Z轴坐标,R为旋转矩阵,N为平移矩阵,T为转置矩阵符号;
所述R由三个旋转角度确定,R=R(α,β,γ),α、β、γ分别是摄像机系统坐标系下的点绕摄像机坐标系x、y、z轴旋转的角度;N=(tx,ty,tz)为摄像机坐标系相对于世界坐标系的平移距离,tx,ty,tz分别为摄像机系统坐标系下的点相对于摄像机坐标系原点在x、y、z轴三个方向的偏移距离。
2.如权利要求1所述的一种基于机器视觉的自动洗车的控制装置,其特征在于:所述控制装置还包括在获取待清洗车辆的图像信息时,利用光照进行图像特征增强的控制灯(40),所述主控制器(10)与控制灯(40)之间相连接。
3.如权利要求1所述的一种基于机器视觉的自动洗车的控制装置,其特征在于:所述主控制器(10)包括DSP芯片,所述DSP芯片的型号为C6747系列芯片。
4.如权利要求1~3任意一项所述的一种基于机器视觉的自动洗车的控制装置的控制方法,其特征在于,包括以下步骤:
S1、所述摄像机系统(30)获取待清洗车辆的图像信息,并将待清洗车辆的图像信息发送至主控制器(10);
S2、所述主控制器(10)对待清洗车辆的图像信息进行处理得到待清洗车辆的外围轮廓,主控制器(10)存储此外围轮廓的二维坐标,并将此二维坐标转化为摄像机系统坐标系下的三维坐标;主控制器(10)根据摄像机系统坐标系下的三维坐标,转化得到待清洗车辆的外围轮廓在世界坐标系下的三维坐标,并将待清洗车辆的外围轮廓的世界坐标系下的三维坐标发送至协处理器(20);
S3、所述协处理器(20)与机械臂电连接,协处理器(20)用于根据待清洗车辆的外围轮廓的世界坐标系下的三维坐标来控制机械臂进行洗车;所述主控制器(10)中的世界坐标系与机械臂所处的世界坐标系相同;
在步骤S2中,所述主控制器(10)对待清洗车辆的图像信息进行预处理,得到预处理后的待清洗车辆的图像信息的具体操作步骤包括:所述主控制器(10)对待清洗车辆的图像信息进行高斯滤波处理,得到预处理后的待清洗车辆的图像信息;
在步骤S2中,所述主控制器(10)根据预处理后的待清洗车辆的图像信息,得到待清洗车辆的外围轮廓的二维坐标的具体操作步骤包括:
所述主控制器(10)对预处理后的待清洗车辆的图像信息依次进行灰度化、二值化处理,得到待清洗车辆的外围轮廓,利用CANNY边缘方法检测待清洗车辆的外围轮廓,基于OPENCV视觉函数库,利用FindContours函数实现查找面积最大的外围轮廓,并存储此外围轮廓的二维坐标;
在步骤S2中,所述主控制器(10)将待清洗车辆的外围轮廓的二维坐标转换到待清洗车辆的外围轮廓在世界系下的三维坐标,具体操作步骤包括:
所述摄像机系统(30)包括双目摄像机,所述双目摄像机包括第一镜头和第二镜头,第一镜头和第二镜头的像平面位于同一平面,光轴严格平行,距离一定,焦距相同;第一镜头和第二镜头在同一时刻获取待清洗车辆的外围轮廓的同一个二维坐标,此同一个二维坐标即为同一特征点P,特征点P在第一镜头下的坐标为Pl=(Xl,Yl),特征点P在第二镜头下的坐标为Pr=(Xr,Yr),其中,Yl=Yr=Y,Xl为特征点P在第一镜头下的X轴坐标,Yl为特征点P在第一镜头下的Y轴坐标,Xr为特征点P在第二镜头下的X轴坐标,Yr为特征点P在第二镜头下的Y轴坐标,Y为特征点P的Y轴坐标值,得到的坐标转换公式为公示(1):
Figure FDA0002402236480000051
其中,f为第一镜头和第二镜头的焦距,xc为特征点P在双目摄像机下的X轴坐标,xc也即摄像机系统坐标系下的X轴坐标,yc为特征点P在双目摄像机下的Y轴坐标,yc也即摄像机系统坐标系下的Y轴坐标,zc为特征点P在双目摄像机下的Z轴坐标,zc也即摄像机系统坐标系下的Z轴坐标,D为第一镜头的中心投影与第二镜头的中心投影之间的距离;
特征点P在第一镜头和第二镜头的X轴坐标之间的视差d为:d=Xl-Xr,根据视差d得到特征点P在摄像机系统坐标系下的三维坐标为公式(2):
Figure FDA0002402236480000052
根据公式(2),得到待清洗车辆的外围轮廓的世界坐标系下的三维坐标D(Xw,Yw,Zw,1)为公式(3):
Figure FDA0002402236480000061
其中,Xw为特征点P在世界坐标系下的X轴坐标,Yw为特征点P在世界坐标系下的Y轴坐标,Zw为特征点P在世界坐标系下的Z轴坐标,R为旋转矩阵,N为平移矩阵,T为转置矩阵符号;
所述R由三个旋转角度确定,R=R(α,β,γ),α、β、γ分别是摄像机系统坐标系下的点绕摄像机坐标系x、y、z轴旋转的角度;N=(tx,ty,tz)为摄像机坐标系相对于世界坐标系的平移距离,tx,ty,tz分别为摄像机系统坐标系下的点相对于摄像机坐标系原点在x、y、z轴三个方向的偏移距离。
CN201810220468.XA 2018-03-16 2018-03-16 一种基于机器视觉的自动洗车的控制装置及其控制方法 Active CN108490830B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810220468.XA CN108490830B (zh) 2018-03-16 2018-03-16 一种基于机器视觉的自动洗车的控制装置及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810220468.XA CN108490830B (zh) 2018-03-16 2018-03-16 一种基于机器视觉的自动洗车的控制装置及其控制方法

Publications (2)

Publication Number Publication Date
CN108490830A CN108490830A (zh) 2018-09-04
CN108490830B true CN108490830B (zh) 2020-06-23

Family

ID=63339530

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810220468.XA Active CN108490830B (zh) 2018-03-16 2018-03-16 一种基于机器视觉的自动洗车的控制装置及其控制方法

Country Status (1)

Country Link
CN (1) CN108490830B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111752284B (zh) * 2020-08-06 2021-09-07 浙江驿公里智能科技有限公司 基于行走无人洗车设备的双视觉反馈运动控制系统
CN112109672A (zh) * 2020-08-10 2020-12-22 江苏悦达投资股份有限公司 一种洗车机器人系统及其控制方法
CN113096187B (zh) * 2021-05-03 2022-05-17 湖北汽车工业学院 一种车辆与障碍物相对位置自动获取方法
CN114178282B (zh) * 2021-11-12 2023-10-10 国能铁路装备有限责任公司 制动梁清洗生产线、识别定位系统、装置及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205341405U (zh) * 2016-01-05 2016-06-29 湖北三江航天江北机械工程有限公司 基于机器视觉的全自动激光清洗系统
CN105955188A (zh) * 2016-06-24 2016-09-21 长春思瑶科技有限公司 基于机器视觉的车辆清洗机仿形控制方法及装置
CN207029127U (zh) * 2017-06-20 2018-02-23 艾合麦提·麦麦提 一种基于图像识别的移动式自动洗车机器人

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01208249A (ja) * 1988-02-13 1989-08-22 Naoki Obata ブラシレス洗車機
JPH10226321A (ja) * 1997-02-14 1998-08-25 Daifuku Co Ltd 洗車機の乾燥装置の制御方法
CN203780498U (zh) * 2014-01-29 2014-08-20 郑州大学 基于双目相机三维成像的自动洗车设备
CN107291023B (zh) * 2017-05-05 2019-04-05 沃尔新(北京)自动设备有限公司 一种仿形曲线生成方法和系统及列车端面清洗方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205341405U (zh) * 2016-01-05 2016-06-29 湖北三江航天江北机械工程有限公司 基于机器视觉的全自动激光清洗系统
CN105955188A (zh) * 2016-06-24 2016-09-21 长春思瑶科技有限公司 基于机器视觉的车辆清洗机仿形控制方法及装置
CN207029127U (zh) * 2017-06-20 2018-02-23 艾合麦提·麦麦提 一种基于图像识别的移动式自动洗车机器人

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于图像的物体尺寸测量算法研究;赵明;《软件导刊》;20161231;第15卷(第11期);第48-52页 *

Also Published As

Publication number Publication date
CN108490830A (zh) 2018-09-04

Similar Documents

Publication Publication Date Title
CN108490830B (zh) 一种基于机器视觉的自动洗车的控制装置及其控制方法
US10899014B2 (en) Multiple lens-based smart mechanical arm and positioning and assembly method thereof
CN109785317B (zh) 自动码垛桁架机器人的视觉系统
CN109974582B (zh) 一种汽车线束的芯线尺寸非接触式视觉检测装置及方法
CN108107837A (zh) 一种基于视觉引导的玻璃加工装置及方法
CN103514437B (zh) 一种三维手势识别装置及三维手势识别方法
CN109978940B (zh) 一种sab安全气囊尺寸视觉测量方法
CN105631893A (zh) 一种通过拍照检测电容安装正确与否的方法及装置
CN109839384B (zh) 用于微型振动马达缺陷检测的视觉检测仪及检测方法
CN105690393A (zh) 一种基于机器视觉的四轴并联机器人分拣系统及其分拣方法
CN109159137B (zh) 一种可视频评估洗地效果的洗地机器人
CN110334625A (zh) 一种面向自动泊车的停车位视觉识别系统及其识别方法
CN111681283A (zh) 一种基于单目立体视觉的应用于无线充电对位的相对位姿解算方法
Xia et al. Workpieces sorting system based on industrial robot of machine vision
CN112927302A (zh) 一种多线激光雷达与相机联合标定的标定板及标定方法
CN111275665A (zh) 一种基于视觉的叶片磨抛加工振动检测系统及方法
CN110954555A (zh) Wdt 3d视觉检测系统
CN111702755A (zh) 一种基于多目立体视觉的机械臂智能控制系统
CN216348416U (zh) 一种铆钉质检设备及其图像及轮廓采集设备
CN113996499A (zh) 一种用于自动化工业点胶机器人的智能定位系统
CN111442817A (zh) 非接触结构光双目视觉污水水位测量装置及方法
CN111267094A (zh) 一种基于双目视觉的工件定位与抓取方法
CN111906767A (zh) 基于双目结构光的视觉纠偏机械臂及纠偏方法
CN116883498A (zh) 基于灰度质心提取算法的视觉合作靶标特征点定位方法
CN113723266B (zh) 一种无刷电机冲片筛选系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant