CN102506830B - 视觉定位方法及装置 - Google Patents
视觉定位方法及装置 Download PDFInfo
- Publication number
- CN102506830B CN102506830B CN201110371807.2A CN201110371807A CN102506830B CN 102506830 B CN102506830 B CN 102506830B CN 201110371807 A CN201110371807 A CN 201110371807A CN 102506830 B CN102506830 B CN 102506830B
- Authority
- CN
- China
- Prior art keywords
- target object
- image
- described target
- frames
- locating surface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000008569 process Effects 0.000 claims abstract description 28
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 6
- 239000007787 solid Substances 0.000 claims description 24
- 230000015572 biosynthetic process Effects 0.000 claims description 19
- 238000003786 synthesis reaction Methods 0.000 claims description 19
- 238000012545 processing Methods 0.000 claims description 18
- 230000005012 migration Effects 0.000 claims description 8
- 238000013508 migration Methods 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 9
- 238000005259 measurement Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种视觉定位方法及装置,属于视觉定位领域。所述方法包括:在目标区域上方采集所述目标区域的若干帧第一图像;根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标;根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像;根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态。本发明通过采用可移动的图像采集模块实现了采用一个相机就可以完成整个视觉定位过程,相较于现有技术,节省了至少一个相机的硬件成本。
Description
技术领域
本发明涉及视觉定位领域,特别涉及一种视觉定位方法及装置。
背景技术
机器视觉系统是指用计算机来实现人的视觉功能,也就是用计算机来实现对客观的三维物体的识别。据不完全统计,大约80%的工业机器视觉系统被用在检测与机械引导方面。
现有技术中有一种视觉定位方法,其采用固定的两个二维相机来实现目标物体的视觉定位,具体实施时,将两个二维相机采集的二维图像合成3D图像来实现目标物体的景深等计算。现有技术中存在的另一种用于机器人搬运作业的视觉定位方法则采用固定的一个二维相机结合一个三维相机的方式来实现目标物体的视觉定位,具体实施时,利用二维相机采集的二维图像完成目标物体的粗定位,利用三维相机来完成目标物体的相关位置参数和偏移参数的确定。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:第一,现有技术中通常需要两个甚至更多的二维相机或者三维相机来完成视觉定位过程,而工业用相机的成本相对较高;第二,现有技术中采用的二维相机或者三维相机多采用固定式,所以这些二维相机或者三维相机的测量范围为固定的一块区域,测量范围较小。
发明内容
为了能够减少采用多个相机的成本和加大视觉定位系统的测量范围,本发明实施例提供了一种视觉定位方法及装置。所述技术方案如下:
根据本发明的一个方面,本发明实施例提供了一种视觉定位方法,所述视觉定位方法包括:在目标区域上方采集所述目标区域的若干帧第一图像;根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标;根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像;根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态;
所述在目标区域上方采集所述目标区域的若干帧第一图像包括:
使图像采集单元在第一预定高度进行水平运动;所述图像采集单元在水平运动过程中采集所述目标区域的若干帧第一图像;
所述根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像包括:根据所述横纵坐标使所述图像采集单元在所述目标物体上方的第二预定高度进行匀速直线运动;所述图像采集单元在匀速直线运动过程中每隔预定时间间隔采集所述目标物体的一帧第二图像。
进一步地,所述根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标包括:
根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像;
根据第一预定模板识别所述水平扫描图像中的一个或者若干个目标物体;
确定各个目标物体的顶面的一个特征点在空间坐标系中的横纵坐标。
进一步地,所述根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态包括:根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像;将所述目标物体的三维图像与第二预定模板进行轮廓匹配,确定所述目标物体的中心点以及所述中心点在空间坐标系中的三维坐标;根据所述第二预定模板在所述目标物体的三维图像中确定至少三个位于定位面上的特征点,并根据所述至少三个特征点确定所述定位面所在平面,所述定位面为所述目标物体的一个表面;在所述空间坐标系中确定一定位面参考平面;根据所述定位面所在平面和所述定位面参考平面计算目标物体与空间坐标系各轴的偏移夹角。
根据本发明的另一方面,本发明还提供一种视觉定位装置,所述视觉定位装置包括:图像采集模块,用于在目标区域上方采集所述目标区域的若干帧第一图像;第一图像处理模块,用于根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标;所述图像采集模块,还用于根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像;第二图像处理模块,用于根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述目标物体的三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态;
所述图像采集模块包括载具单元和图像采集单元;所述载具单元用于使图像采集单元在第一预定高度进行水平运动;所述图像采集单元用于在水平运动过程中采集所述目标区域的若干帧第一图像;
所述载具单元还用于根据所述横纵坐标使所述图像采集单元在所述目标物体上方的第二预定高度进行匀速直线运动;所述图像采集单元还用于在匀速直线运动过程中每隔预定时间间隔采集所述目标物体的一帧第二图像。
进一步地,所述第一图像处理模块包括扫描图像合成单元、目标物体识别单元和水平坐标确定单元;所述扫描图像合成单元用于根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像;所述目标物体识别单元用于根据第一预定模板识别所述水平扫描图像中的一个或者若干个目标物体;所述水平坐标确定单元用于确定各个目标物体的顶面的一个特征点在空间坐标系中的横纵坐标。
进一步地,所述第二图像处理模块包括三维图像合成单元、第二模板匹配单元、定位面确定单元、定位面参考平面确定单元和偏移角度确定单元;所述三维图像合成单元用于根据所述目标物体的若干帧二维图像合成所述目标物体的三维图像;所述第二模板匹配单元用于将所述目标物体的三维图像与第二预定模板进行轮廓匹配,确定所述目标物体的中心点以及所述中心点在空间坐标系中的三维坐标;所述定位面确定单元用于根据所述第二预定模板在所述目标物体的三维图像中确定至少三个位于定位面上的特征点,并根据所述至少三个特征点确定所述定位面所在平面,所述定位面为所述目标物体的一个表面;所述定位面参考平面确定单元用于在所述空间坐标系中确定一定位面参考平面;所述偏移角度确定单元用于根据所述定位面所在平面和所述定位面参考平面计算目标物体与空间坐标系各轴的偏移夹角。
本发明实施例提供的技术方案带来的有益效果是:
第一,通过采用可移动的图像采集模块实现了采用一个相机就可以完成整个视觉定位过程,相较于现有技术,节省了至少一个相机的硬件成本;
第二,通过获取目标区域的水平扫描图像的方式,来对目标区域的多个目标物体进行初步定位,以方便后续对每个目标物体的精确定位,相较于现有技术采用固定的二维相机来进行粗定位的过程,本发明实施例提供的技术方案能够测量更大的目标区域。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的视觉定位方法的方法流程图;
图2是本发明实施例一提供的采集目标区域的若干帧第一图像的实施示意图;
图3是本发明实施例一提供的采集单个目标物体的若干帧第二图像的实施示意图;
图4是本发明实施例二提供的视觉定位装置的结构方框图;
图5是本发明实施例二提供的图像采集模块的结构方框图;
图6是本发明实施例二提供的第一图像处理模块的结构方框图;
图7是本发明实施例二提供的第二图像处理模块的结构方框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
实施例一
请参考图1,其示出了本发明实施例一提供的视觉定位方法的方法流程图。该视觉定位方法包括:
步骤102,在目标区域上方采集目标区域的若干帧第一图像;
由于大部分工业机器视觉系统被用在检测与机械引导方面,为了便于描述,本实施例假设需要进行视觉定位的目标是位于一片目标区域中的多个相同或者不同的目标物体,比如目标区域是汽车制造车间的一片区域,目标物体是汽车发动机缸盖,则可能目标区域摆放有多排多列多层的汽车发动机缸盖。为了对这些目标物体进行视觉定位,首先图像采集模块在目标区域上方采集目标区域的若干帧第一图像。图像采集模块可以被设置于与地面距离第一预定高度的位置,比如与地面距离3米高度的位置,继续设置图像采集模块中的相机的采集方向斜向下,与水平面成预定的角度。然后使图像采集模块在第一预定高度的不同水平位置采集目标区域的若干帧第一图像,优选地,图像采集模块可以包括用于采集图像的图像采集单元和用于承载和移动图像采集单元的载具单元,载具单元可以使图像采集单元在第一预定高度进行水平运动,且图像采集单元在水平运动过程中采集目标区域的若干帧第一图像。应当意识到,图像采集单元进行水平运动,可以是匀速水平运动、变速水平运动、匀速折线运动、变速曲线运动等等,视目标区域的大小和相机的采集范围,以尽量采集到目标区域的全部位置为准,比如如图2中所示,图像采集单元202在目标区域上方进行蛇形折线运动来采集目标区域的所有位置,该目标区域位置内有多个目标物体204。经此过程,可以获得若干张目标区域的第一图像。
步骤104,根据目标区域的若干帧第一图像合成目标区域的水平扫描图像,识别水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标;
根据所述目标区域的若干帧第一图像可以合成目标区域的水平扫描图像,该水平扫描图像也即目标区域的俯视图。
然后识别该水平扫描图像中的一个或者若干个目标物体,由于大部分应用场景中的目标物体都是已知的,比如目标物体是发动机缸盖,所以可以预先将目标物体的俯视图进行建模以获得第一预定模板,该第一预定模板可以应用于从水平扫描图像中识别目标物体的过程,具体的根据预定模板进行目标识别的过程是本领域技术人员所熟知的内容,本文不再累述。当然,视实施环境不同,也可能采用其它的识别方式从目标区域的水平扫描图像中识别目标物体,并且识别出的目标物体的个数可能为零到任意多个。
从该水平扫描图像中识别到目标物体后,可以确定各个目标物体在空间坐标系中的横纵坐标,该空间坐标系可以根据图像采集模块构建。因为从水平扫描图像中并不能获得高度信息,所以只能获得水平方向的两个坐标值,也即空间坐标系f(x,y,z)中的X坐标值和Y坐标值。另外,此处“目标物体在空间坐标系中的横纵坐标”可以是目标物体的顶面的一个特征点的横纵坐标,该特征点通常是目标物体的顶面中容易识别的、比较靠近中央的点。比如矩形发动机缸盖的对角线交叉点。同时应当认识到,此步骤中是为了后续对单个目标物体进行精确定位而进行的粗定位步骤,目的是为了确定各个目标物体在空间中的大概位置。
步骤106,根据横纵坐标在单个目标物体上方采集目标物体的若干帧第二图像;
在获得各个目标物体的横纵坐标以后,已经可以获知各个目标物体在空间中的大概位置,根据横纵坐标,可以相对精确地将图像采集模块设置在单个目标物体上方,以便采集该目标物体的若干帧第二图像。优选地,图像采集模块可以包括用于采集图像的图像采集单元和用于承载和移动图像采集单元的载具单元,载具单元可以根据横纵坐标使图像采集单元在单个目标物体上方的第二预定高度进行匀速直线运动;而图像采集单元202在匀速直线运动过程中每隔预定时间间隔采集目标物体204的一帧第二图像,如图3所示。经此过程,可以获得该目标物体的若干帧第二图像。此处的“第二预定高度”可以小于等于前述的“第一预定高度”,以能够尽快获得该目标物体的各个角度的精确图像为准。此处的“预定时间间隔”可以是按照脉冲序列获得的预定时间间隔,相邻的预定时间间隔通常是相等的。
步骤108,根据目标物体的若干帧第二图像合成目标物体的三维图像,并根据三维图像确定目标物体在空间坐标系中的三维坐标和姿态。
根据目标物体的若干帧第二图像可以合成目标物体的三维图像,此三维图像合成过程可以采用现有技术中的将多帧二维图像合成三维图像的相关技术。在合成目标物体的三维图像后,可以根据三维图像确定目标物体在空间坐标系中的三维坐标和姿态。目标物体在空间坐标系中的三维坐标是指目标物体在空间坐标系中与空间坐标系的各个轴之间的偏移距离;目标物体在空间坐标系中的姿态是指目标物体在空间坐标系中与空间坐标系的各个轴之间的偏移夹角。
可以首先确定目标物体在空间坐标系中与空间坐标系的各个轴之间的偏移距离。在此过程中,可以预先采集和设定目标物体的第二预定模板。如果有多种目标物体,可以针对不同目标物体设置多个第二预定模板。并在这些第二预定模板上预先选定有多个代表轮廓特征、形状特征或者表面特征的特征点。当合成目标物体的三维图像后,可以将目标物体的三维图像与第二预定模板进行轮廓匹配,以确定目标物体的中心点以及该中心点在空间坐标系中的坐标。为了突出图像中的重要细节,改善视觉质量,可以首先将目标物体的三维图像进行图像的二值化,也即将图像的灰度值(阈值)进行增强或减弱,然后在二值化后的三维图像中寻找若干个特征点与第二预定模板中的若干个对应特征点比对以进行轮廓匹配,并根据轮廓匹配的结果确定目标物体的中心点,以及中心点在空间坐标系内的坐标。该中心点的坐标代表了目标物体在空间坐标系内的位置,该中心点的坐标包括X、Y和Z,其中X表示中心点在X轴上的偏移值,Y表示中心点在Y轴上的偏移值,Z表示中心点在Z轴上的偏移值。
在确定目标物体的三维坐标也即中心点的坐标以后,还需要确定目标物体在空间中的姿态,也即需要确定目标物体与空间坐标系各个轴之间的角度偏差,为此需要确定目标物体的一个定位面,这个定位面通常是目标物体的一个表面,比如目标物体的顶面,然后根据定位面与参考面之间的角度偏移来计算目标物体与空间坐标系各个轴之间的角度偏差值。也就是说,在目标物体的三维图像与第二预定模板进行匹配后,可以选择目标物体的三维图像中的至少三个特征点来进行定位面的确定,定位面为目标物体的一个表面。比如在一个实施例中,目标物体为汽车发动机缸盖,其定位面预先定义为发动机缸盖的顶面,则此时需要确定目标物体的三维图像中处于发动机缸盖的顶面的三个特征点。在寻找到位于定位面的三个特征点后,可以利用ROI UNION工具(Region of interest union,有效区域合成工具)经过两次组合来形成定位面,也即确定了定位面在空间坐标系中的所在平面。
当定位面为目标物体的顶面时,可以利用FIT SURFACE工具(FIT SURFAC,参考平面选定工具)在空间坐标系内确定一水平参考面,继而还可以利用CO-PLANARITY工具(CO-PLANARITY,与参考平面夹角选定工具)在空间坐标系内确定定位面所在平面和定位面参考平面之间的夹角,从而计算出目标物体的A、B和C值,其中A代表目标物体绕Z轴的偏移夹角,B代表目标物体绕X轴的旋转夹角,C代表目标物体绕Y轴的旋转夹角。在计算完成后,可以将目标物体的X、Y、Z、A、B和C值存储到诸如可擦除的临时变量表之类的数据存储器中,以方便诸如机器人搬运模块之类的其它模块对数据的调用与输出。
综上所述,本实施例提供的视觉定位方法通过采用可移动的图像采集模块实现了采用一个相机就可以完成整个视觉定位过程,相较于现有技术,节省了至少一个相机的硬件成本。另外,通过获取目标区域的水平扫描图像的方式,来对目标区域的多个目标物体进行初步定位,以方便后续对每个目标物体的精确定位,相较于现有技术采用固定的二维相机来进行粗定位的过程,本实施例提供的视觉定位方法能够测量更大的目标区域和更多的目标物体。
实施例二
请参考图4,其示出了本发明实施例二提供的视觉定位装置的结构方框图。该视觉定位装置包括图像采集模块420、第一图像处理模块440和第二图像处理模块460。
图像采集模块420可以用于在目标区域上方采集目标区域的若干帧第一图像。图像采集模块420可以包括载具单元422和图像采集单元424,如图5所示。其中,载具单元422用于使图像采集单元424在第一预定高度进行水平运动,图像采集单424则用于在水平运动过程中采集目标区域的若干帧第一图像。
第一图像处理模块440用于根据图像采集模块420采集的目标区域的若干帧第一图像合成目标区域的水平扫描图像,识别水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标。第一图像处理模块440可以包括扫描图像合成单元442、目标物体识别单元444和水平坐标确定单元446,如图6所示。其中,扫描图像合成单元442用于根据图像采集模块420采集的目标区域的若干帧第一图像合成目标区域的水平扫描图像;目标物体识别单元444用于根据第一预定模板识别扫描图像合成单元442合成的水平扫描图像中的一个或者若干个目标物体;水平坐标确定单元446用于确定目标物体识别单元444识别出的各个目标物体的顶面的一个特征点在空间坐标系中的横纵坐标。
图像采集模块420还用于根据第一图像处理模块440确定的横纵坐标在单个目标物体上方采集目标物体的若干帧第二图像。具体来讲,图像采集模块420中的载具单元422还用于根据第一图像处理模块440确定的横纵坐标使图像采集单元444在单个目标物体上方的第二预定高度进行匀速直线运动;图像采集单元444还用于在匀速直线运动过程中每隔预定时间间隔采集目标物体的一帧第二图像。
第二图像处理模块460用于根据图像采集模块420采集的目标物体的若干帧第二图像合成目标物体的三维图像,并根据目标物体的三维图像确定目标物体在空间坐标系中的三维坐标和姿态。第二图像处理模块460可以包括三维图像合成单元461、第二模板匹配单元462、定位面确定单元463、定位面参考平面确定单元464和偏移角度确定单元465,如图7所示。其中,三维图像合成单元461用于根据图像采集模块420采集的若干帧连续的二维图像合成目标物体的三维图像;第二模板匹配单元462用于将三维图像合成单元461合成的目标物体的三维图像与第二预定模板进行轮廓匹配,以确定目标物体的中心点以及中心点在空间坐标系中的坐标;定位面确定单元463用于根据第二预定模板在目标物体的三维图像中确定至少三个位于定位面上的特征点,并根据这至少三个特征点确定定位面所在平面,该定位面为目标物体的一个表面;定位面参考平面确定单元464用于在空间坐标系中确定一定位面参考平面;偏移角度确定单元464用于根据定位面确定单元463确定的定位面所在平面和定位面参考平面确定单元464确定的定位面参考平面计算目标物体与空间坐标系各轴的偏移夹角。
综上所述,本实施例提供的视觉定位装置通过采用可移动的图像采集模块实现了采用一个相机就可以完成整个视觉定位过程,相较于现有技术,节省了至少一个相机的硬件成本。另外,通过获取目标区域的水平扫描图像的方式,来对目标区域的多个目标物体进行初步定位,以方便后续对每个目标物体的精确定位,相较于现有技术采用固定的二维相机来进行粗定位的过程,本实施例提供的视觉定位方法能够测量更大的目标区域和更多的目标物体。
需要说明的是:上述实施例提供的视觉定位装置在实施例二中描述时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的视觉定位装置与视觉定位方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (6)
1.一种视觉定位方法,其特征在于,所述方法包括:
在目标区域上方采集所述目标区域的若干帧第一图像;
根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标;
根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像;
根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述目标物体的三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态;
所述在目标区域上方采集所述目标区域的若干帧第一图像包括:
使图像采集单元在第一预定高度进行水平运动;
所述图像采集单元在水平运动过程中采集所述目标区域的若干帧第一图像;
所述根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像包括:
根据所述横纵坐标使所述图像采集单元在所述目标物体上方的第二预定高度进行匀速直线运动;
所述图像采集单元在匀速直线运动过程中每隔预定时间间隔采集所述目标物体的一帧第二图像。
2.根据权利要求1所述的视觉定位方法,其特征在于,所述根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标包括:
根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像;
根据第一预定模板识别所述水平扫描图像中的一个或者若干个目标物体;
确定各个目标物体的顶面的一个特征点在空间坐标系中的横纵坐标。
3.根据权利要求1所述的视觉定位方法,其特征在于,所述根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述目标物体的三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态包括:
根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像;
将所述目标物体的三维图像与第二预定模板进行轮廓匹配,确定所述目标物体的中心点以及所述中心点在空间坐标系中的三维坐标;
根据所述第二预定模板在所述目标物体的三维图像中确定至少三个位于定位面上的特征点,并根据所述至少三个特征点确定所述定位面所在平面,所述定位面为所述目标物体的一个表面;
在所述空间坐标系中确定一定位面参考平面;
根据所述定位面所在平面和所述定位面参考平面计算目标物体与空间坐标系各轴的偏移夹角。
4.一种视觉定位装置,其特征在于,其包括:
图像采集模块,用于在目标区域上方采集所述目标区域的若干帧第一图像;
第一图像处理模块,用于根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像,识别所述水平扫描图像中的目标物体,并确定各个目标物体在空间坐标系中的横纵坐标;
所述图像采集模块,还用于根据所述横纵坐标在单个目标物体上方采集所述目标物体的若干帧第二图像;
第二图像处理模块,用于根据所述目标物体的若干帧第二图像合成所述目标物体的三维图像,并根据所述目标物体的三维图像确定所述目标物体在空间坐标系中的三维坐标和姿态;
所述图像采集模块包括:载具单元和图像采集单元;
所述载具单元,用于使图像采集单元在第一预定高度进行水平运动;
所述图像采集单元,用于在水平运动过程中采集所述目标区域的若干帧第一图像;
所述载具单元,还用于根据所述横纵坐标使所述图像采集单元在所述目标物体上方的第二预定高度进行匀速直线运动;
所述图像采集单元,还用于在匀速直线运动过程中每隔预定时间间隔采集所述目标物体的一帧第二图像。
5.根据权利要求4所述的视觉定位装置,其特征在于,所述第一图像处理模块包括:扫描图像合成单元、目标物体识别单元和水平坐标确定单元;
所述扫描图像合成单元,用于根据所述目标区域的若干帧第一图像合成所述目标区域的水平扫描图像;
所述目标物体识别单元,用于根据第一预定模板识别所述水平扫描图像中的一个或者若干个目标物体;
所述水平坐标确定单元,用于确定各个目标物体的顶面的一个特征点在空间坐标系中的横纵坐标。
6.根据权利要求4所述的视觉定位装置,其特征在于,所述第二图像处理模块包括:三维图像合成单元、第二模板匹配单元、定位面确定单元、定位面参考平面确定单元和偏移角度确定单元;
所述三维图像合成单元,用于根据所述目标物体的若干帧二维图像合成所述目标物体的三维图像;
所述第二模板匹配单元,用于将所述目标物体的三维图像与第二预定模板进行轮廓匹配,确定所述目标物体的中心点以及所述中心点在空间坐标系中的三维坐标;
所述定位面确定单元,用于根据所述第二预定模板在所述目标物体的三维图像中确定至少三个位于定位面上的特征点,并根据所述至少三个特征点确定所述定位面所在平面,所述定位面为所述目标物体的一个表面;
所述定位面参考平面确定单元,用于在所述空间坐标系中确定一定位面参考平面;
所述偏移角度确定单元,用于根据所述定位面所在平面和所述定位面参考平面计算目标物体与空间坐标系各轴的偏移夹角。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110371807.2A CN102506830B (zh) | 2011-11-21 | 2011-11-21 | 视觉定位方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110371807.2A CN102506830B (zh) | 2011-11-21 | 2011-11-21 | 视觉定位方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102506830A CN102506830A (zh) | 2012-06-20 |
CN102506830B true CN102506830B (zh) | 2014-03-12 |
Family
ID=46218938
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110371807.2A Active CN102506830B (zh) | 2011-11-21 | 2011-11-21 | 视觉定位方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102506830B (zh) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103852066B (zh) * | 2012-11-28 | 2016-08-17 | 联想(北京)有限公司 | 一种设备定位的方法、控制方法、电子设备及控制系统 |
DE102015209896B3 (de) * | 2015-05-29 | 2016-08-18 | Kuka Roboter Gmbh | Ermittlung der Roboterachswinkel und Auswahl eines Roboters mit Hilfe einer Kamera |
CN105588545A (zh) * | 2015-12-31 | 2016-05-18 | 歌尔科技有限公司 | 一种多目标定位方法和系统 |
CN105700551A (zh) * | 2016-01-27 | 2016-06-22 | 浙江大华技术股份有限公司 | 无人机降落区域确定方法、无人机降落方法及相关装置 |
CN105758867B (zh) * | 2016-03-11 | 2019-11-05 | 苏州睿仟医疗科技有限公司 | 一种高速的显微缺陷复查方法 |
CN106248058B (zh) * | 2016-07-29 | 2018-12-21 | 感知控股集团有限公司 | 一种对于仓储运输工具的定位方法、装置及系统 |
CN106500628B (zh) * | 2016-10-19 | 2019-02-19 | 杭州思看科技有限公司 | 一种含有多个不同波长激光器的三维扫描方法及扫描仪 |
CN107907131B (zh) * | 2017-11-10 | 2019-12-13 | 珊口(上海)智能科技有限公司 | 定位系统、方法及所适用的机器人 |
CN108536151A (zh) * | 2018-05-06 | 2018-09-14 | 长春北方化工灌装设备股份有限公司 | 一种视觉导引的闭环执行系统及视觉导引方法 |
CN110163914B (zh) * | 2018-08-01 | 2021-05-25 | 京东方科技集团股份有限公司 | 基于视觉的定位 |
CN109269473B (zh) * | 2018-08-09 | 2021-01-12 | 厦门市计量检定测试院 | 一种基于四目视觉定位系统的定位方法 |
CN109764858B (zh) * | 2018-12-24 | 2021-08-06 | 中公高科养护科技股份有限公司 | 一种基于单目相机的摄影测量方法及系统 |
CN110176034B (zh) * | 2019-05-27 | 2023-02-07 | 上海盎维信息技术有限公司 | 用于vslam的定位方法及扫描终端 |
CN112634140B (zh) * | 2021-03-08 | 2021-08-13 | 广州松合智能科技有限公司 | 一种高精度的全尺寸视觉图像获取系统及方法 |
CN113563905B (zh) * | 2021-09-22 | 2022-01-07 | 深圳市信润富联数字科技有限公司 | 推焦车定位方法、装置、推焦系统、推焦车及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101329771A (zh) * | 2008-07-29 | 2008-12-24 | 浙江大学 | 一种基于图像序列的城市街区的快速建模方法 |
CN101825442A (zh) * | 2010-04-30 | 2010-09-08 | 北京理工大学 | 一种基于移动平台的彩色激光点云成像系统 |
CN102175225A (zh) * | 2011-01-18 | 2011-09-07 | 东南大学 | 基于多活动控制系统的交通事故现场摄影测量处理方法 |
-
2011
- 2011-11-21 CN CN201110371807.2A patent/CN102506830B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101329771A (zh) * | 2008-07-29 | 2008-12-24 | 浙江大学 | 一种基于图像序列的城市街区的快速建模方法 |
CN101825442A (zh) * | 2010-04-30 | 2010-09-08 | 北京理工大学 | 一种基于移动平台的彩色激光点云成像系统 |
CN102175225A (zh) * | 2011-01-18 | 2011-09-07 | 东南大学 | 基于多活动控制系统的交通事故现场摄影测量处理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102506830A (zh) | 2012-06-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102506830B (zh) | 视觉定位方法及装置 | |
CN102374860B (zh) | 三维视觉定位方法及系统 | |
Chen et al. | High-accuracy multi-camera reconstruction enhanced by adaptive point cloud correction algorithm | |
CN110780305B (zh) | 一种基于多线激光雷达的赛道锥桶检测及目标点追踪方法 | |
CN108416791B (zh) | 一种基于双目视觉的并联机构动平台位姿监测与跟踪方法 | |
CN103759648B (zh) | 一种基于激光双目视觉的复杂角焊缝位置检测方法 | |
Herráez et al. | 3D modeling by means of videogrammetry and laser scanners for reverse engineering | |
Broggi et al. | Self-calibration of a stereo vision system for automotive applications | |
CN111028340B (zh) | 精密装配中的三维重构方法、装置、设备及系统 | |
CN107796373B (zh) | 一种基于车道平面几何模型驱动的前方车辆单目视觉的测距方法 | |
CN102788572B (zh) | 一种工程机械吊钩姿态的测量方法、装置及系统 | |
CN102589516B (zh) | 一种基于双目线扫描摄像机的动态距离测量系统 | |
CN107392849B (zh) | 基于图像细分的靶标识别与定位方法 | |
CN103292695A (zh) | 一种单目立体视觉测量方法 | |
CN107358628B (zh) | 基于靶标的线阵图像处理方法 | |
CN105448184A (zh) | 地图道路的绘制方法及装置 | |
CN104567727A (zh) | 立体靶标及对线结构光轮廓传感器的全局统一校准方法 | |
CN110646231B (zh) | 一种扫地机器人测试方法和装置 | |
CN105225225A (zh) | 一种基于机器视觉的皮革自动划线方法和装置 | |
CN114964007A (zh) | 一种焊缝尺寸视觉测量与表面缺陷检测方法 | |
JP3629935B2 (ja) | 移動体の速度計測方法およびその方法を用いた速度計測装置 | |
Giosan et al. | Superpixel-based obstacle segmentation from dense stereo urban traffic scenarios using intensity, depth and optical flow information | |
CN116560062A (zh) | 显微镜对焦防碰撞控制方法 | |
CN102542563A (zh) | 一种移动机器人前向单目视觉的建模方法 | |
CN107292932B (zh) | 基于图像膨胀率的迎面视频测速方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |