CN106979757A - 一种三维测量方法及装置 - Google Patents

一种三维测量方法及装置 Download PDF

Info

Publication number
CN106979757A
CN106979757A CN201710122969.XA CN201710122969A CN106979757A CN 106979757 A CN106979757 A CN 106979757A CN 201710122969 A CN201710122969 A CN 201710122969A CN 106979757 A CN106979757 A CN 106979757A
Authority
CN
China
Prior art keywords
pattern
line
row
projection
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710122969.XA
Other languages
English (en)
Other versions
CN106979757B (zh
Inventor
高晶晶
周璐
刘羽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Huaray Technology Co Ltd
Original Assignee
Zhejiang Huaray Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Huaray Technology Co Ltd filed Critical Zhejiang Huaray Technology Co Ltd
Priority to CN201710122969.XA priority Critical patent/CN106979757B/zh
Publication of CN106979757A publication Critical patent/CN106979757A/zh
Application granted granted Critical
Publication of CN106979757B publication Critical patent/CN106979757B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/254Projection of a pattern, viewing through a pattern, e.g. moiré

Abstract

本发明公开了一种三维测量方法及装置,应用于电子设备,所述方法包括:根据预先保存的线移初始图案组中的每个图案;删除所述线移初始图案组中的每个图案的偶数行,将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案;根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值;根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的测量方法,确定待测物体的三维点云坐标提高了测量结果的准确度。

Description

一种三维测量方法及装置
技术领域
本发明涉及机器视觉三维测量技术领域,尤其涉及一种三维测量方法及装置。
背景技术
机器视觉三维测量技术具有非接触、高精度、高速度等优点,广泛应用于科学分析、生物工程、工业生产等领域。在三维测量中,存在一种单相机、单投影仪组成的三维测量系统,这种系统结构简单、测量效率高。
现有技术中的三维测量方法中,针对待测量物体,投影仪投影格雷码图案和线移图案到所述待测物体上,相机采集所述格雷码图案和所述线移图案,然后发送给电子设备,电子设备针对接收到的所述格雷码和所述线移图案,解码所述格雷码图案和所述线移图案,再根据本地保存的投影仪标定过程中得到的相机与投影仪的相对位置关系,以及相机与投影仪各自的内参、外参和畸变系数,通过三角测量方法,计算所述待测量物体的三维点云坐标。投影仪投影格雷码图案和线移图案的数量是由投影仪的分辨率决定的,所以需要投影多幅格雷码图案和线移图案,但是由于投影仪设备自身容量的原因,投影仪在投影过程中可能会出现存储空间不足,导致无法正常投影,从而导致测量结果准确率低下。
发明内容
本发明提供一种三维测量方法及装置,用以解决现有技术中存在的测量结果准确率低的问题。
为了解决上述问题,本发明提供了一种三维测量方法,应用于电子设备,该方法包括:
根据预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行,将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;
接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;
根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;
根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。
进一步地,所述接收格雷码投影图案组中的每个图案包括:
根据本地保存的格雷码图案生成规则,生成格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案及反向列格雷码初始图案;
将所述格雷码初始图案组中的每个图案发送给投影仪,使得投影仪将所述格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案送给电子设备。
进一步地,所述确定格雷码的行解码值和列解码值之前,所述方法还包括:
接收全白待测物体图案和全黑待测物体图案,其中所述全白待测物体图案为投影仪投影全白的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,所述全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的待测物体图案作为全黑待测物体图案发送给电子设备的;
所述根据所述格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值包括:
根据所述格雷码投影图案组中的图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值;
针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域;根据所述白条纹区域,确定白条纹区域的中心区域;
根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值;
根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值。
进一步地,所述预先保存的测量方法包括:
根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,确定所述投影仪发出的光线在世界坐标系中对应的第一向量集合,及所述图像采集设备接收的光线在世界坐标系中对应的第二向量集合;
计算所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的向量交点;
将每个向量交点的集合作为所述待测物体的三维点云坐标。
进一步地,所述确定待测物体的三维点云坐标后,所述方法还包括:
对所述待测物体的三维点云坐标进行滤波计算。
进一步地,所述本地保存图像采集设备与投影仪的标定结果的过程包括:
根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码的行标定解码值和列标定解码值,其中所述标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案由投影仪投影到棋盘格标定板后图像采集设备采集到的;
根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点;根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置;
根据每个角点在所述投影仪坐标系中的每个第一位置、所述每个角点在世界坐标系中的每个第二位置及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,及所述图像采集设备坐标系与所述世界坐标系的第二对应关系,标定投影仪与图像采集设备,并保存图像采集设备与投影仪的标定结果。
进一步地,所述棋盘格标定板为灰色棋盘格标定板。
进一步地,所述根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置包括:
根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系;
在所述行标定解码值和所述列标定解码值中,确定所述每个角点对应的行标定解码值和列标定解码值;
根据所述每个角点对应的行标定解码值和列标定解码值,确定所述每个角点在所述投影仪坐标系中的第一位置。
进一步地,所述根据接收到的全白板图案,确定所述全白图案中的棋盘格标定板图案的每个角点后,所述确定所述投影仪坐标系与所述世界坐标系的第一对应关系之前,所述方法还包括:
根据所述每个角点,及预设的邻域范围,确定所述每个角点对应的所述全白图案中的棋盘格标定板图案的邻域范围内的每个像素点;
在所述行标定解码值和所述列标定解码值中,确定所述每个像素点对应的行标定解码值和列标定解码值;
根据所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在所述投影仪坐标系中的每个第一位置;
根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第三对应关系;根据所述投影仪坐标系及图像采集设备坐标系的第三对应关系,及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述每个角点在所述投影坐标系中的每个第一位置。
本发明提供了一种三维测量装置,应用于电子设备,该装置包括:
确定模块,用于根据接预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行;
发送模块,用于将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;
接收模块,用于接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;
解码模块,用于根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;
测量模块,用于根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。
进一步地,所述发送模块,还用于根据本地保存的格雷码图案生成规则,生成格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案及反向列格雷码初始图案;将所述格雷码初始图案组中的每个图案发送给投影仪,使得投影仪将所述格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案送给电子设备。
进一步地,所述接收模块,还用于接收全白待测物体图案和全黑待测物体图案,其中所述全白待测物体图案为投影仪投影全白的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,所述全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的待测物体图案作为全黑待测物体图案发送给电子设备的;
所述解码模块,具体用于根据所述格雷码投影图案组中的图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值;针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域;根据所述白条纹区域,确定白条纹区域的中心区域;根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值;根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值。
进一步地,所述装置还包括:
保存模块,用于根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,确定所述投影仪发出的光线在世界坐标系中对应的第一向量集合,及所述图像采集设备接收的光线在世界坐标系中对应的第二向量集合;计算所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的向量交点;将每个向量交点的集合作为所述待测物体的三维点云坐标。
进一步地,所述装置还包括:
过滤模块,用于对所述待测物体的三维点云坐标进行滤波计算。
进一步地,所述保存模块,还用于根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码的行标定解码值和列标定解码值,其中所述标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案由投影仪投影到棋盘格标定板后图像采集设备采集到的;根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点,其中所述全白图案为投影仪投影全白的图案到棋盘格标定板上后,图像采集设备采集对应的图案,将采集到的图案作为全白图案发送给电子设备的;根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置;根据每个角点在所述投影仪坐标系中的每个第一位置、所述每个角点在世界坐标系中的每个第二位置及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,及所述图像采集设备坐标系与所述世界坐标系的第二对应关系,标定投影仪与图像采集设备,并保存图像采集设备与投影仪的标定结果。
进一步地,所述保存模块,具体用于根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系;在所述行标定解码值和所述列标定解码值中,确定所述每个角点对应的行标定解码值和列标定解码值;根据所述每个角点对应的行标定解码值和列标定解码值,确定所述每个角点在所述投影仪坐标系中的第一位置。
进一步地,所述保存模块,具体用于根据所述每个角点,及预设的邻域范围,确定所述每个角点对应的所述全白图案中的棋盘格标定板图案的邻域范围内的每个像素点;在所述行标定解码值和所述列标定解码值中,确定所述每个像素点对应的行标定解码值和列标定解码值;根据所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在所述投影仪坐标系中的每个第一位置;根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第三对应关系;根据所述投影仪坐标系及图像采集设备坐标系的第三对应关系,及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述每个角点在所述投影坐标系中的每个第一位置。
本发明提供了一种三维测量方法及装置,应用于电子设备,所述方法包括:根据预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行,将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。由于投影仪投影格雷码图案固有的一位解码误差,所以可以将解码结果不存在误差的那部分格雷码图案对应的线移图案删除,即删除偶数行线移图案,减少了线移图案的数量,将格雷码图案和线移图案的数量控制在投影仪存储空间允许的范围内,并且不影响解码结果,从而提高了测量结果的准确率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例1提供的一种三维测量方法的示意图;
图2为本发明实施例1提供的现有技术中的一种格雷码图案加线移图案的编码序列;
图3为本发明实施例1提供的一种格雷码图案加线移图案的编码序列;
图4为本发明实施例4提供的一种三维测量结果;
图5为本发明实施例5提供的一种三维测量系统;
图6为本发明实施例提供的一种三维测量装置结构示意图。
具体实施方式
为了提高三维测量结果的准确率,本发明实施例提供了一种三维测量方法及装置。
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在进行三维测量之前,需要先将投影仪、图像采集设备、电子设备所构成的三维测量系统调整好,从而进行三维测量的过程。
调整该投影仪标定系统包括:摆放投影仪、图像采集设备,使投影仪水平摆放,并与基准平面相距第一距离,使投影仪向下投影,将图案投影到在基准平面上摆放的待测物体上,并且使得待测物体的有效区域全部位于投影仪对应的投影区域内。将图像采集设备倾斜摆放,并与投影仪相距第二距离,使得图像采集设备能够采集到投影仪投影的全部有效区域。电子设备摆放在不干扰投影仪投影和图像采集设备采集图案的位置即可,其中投影仪与电子设备之间、图像采集设备与电子设备之间能够实现数据的接收和发送。
实施例1:
图1为本发明实施例提供的一种三维测量方法的示意图,该方法包括以下步骤:
S101:根据预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行,将删除偶数行后的所述线移初始图案中的每个图案发送给投影仪。
本发明实施例提供的三维测量方法应用于电子设备,该电子设备可以为平板电脑、个人电脑(PC)、笔记本电脑等能够进行数据处理的电子设备。电子设备可以预先保存有线移初始图案组中的每个图案。
在三维测量的过程中,投影仪还需要投影一幅全白待测物体图案和一幅全黑待测物体图案,图像采集设备采集对应的图案,将采集到的图案发送给电子设备。其中所述投影仪投影一幅全白待测物体图案和一幅全黑待测物体图案的过程可以是在三维测量系统调整好之后,投影格雷码初始图案组及线移初始图案组之前完成,也可以是电子设备在接收到格雷码投影图案组及线移投影图案组后完成的,只要保证在对格雷码投影图案组及线移投影图案组解码前完成即可。
所述全白待测物体图案为投影仪投影全白的图案到待测物体上后,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,所述全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全黑待测物体图案发送给电子设备的。
所述图像采集设备采集对应的图案的过程是图像采集设备同步采集的,即投影仪每投影仪一幅图案到待测物体上后,图像采集设备就同步采集一幅对应的图案。
图像采集设备可以为相机、摄像机、摄影机等能够进行图像采集的设备,图像采集设备可以将投影仪投影的图案采集后发送给电子设备。
投影仪投影的格雷码初始图案组中的每个图案可以是预先保存在投影仪中,也可以保存在电子设备中,由电子设备发送给投影仪的。
电子设备根据预设的线移图案生成规则,确定线移初始图案组,其中所述线移图案生成规则预先保存在电子设备中。
电子设备还可以接收格雷码投影图案组中的每个图案,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备同步采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的。
格雷码初始图案组中的图案数量和线移初始图案组中的图案数量由投影仪的分辨率决定。此外,投影仪还需要投影一幅全黑待测物体图案,和一幅全白待测物体图案来对待测物体进行三维测量。
所述格雷码投影图案组中的图案包括:行格雷码投影图案、反向行格雷码投影图案、列格雷码投影图案和反向列格雷码投影图案,所述线移初始图案组中的图案包括:行线移初始图案和列线移初始图案,并且所述格雷码投影图案中的行格雷码投影图案、反向行格雷码投影图案、列格雷码投影图案和反向列格雷码投影图案均为多幅,线移初始图案组中的行线移初始图案和列线移初始图案均为多幅。
所述根据预设的线移图案生成规则,确定线移初始图案组中的每个图案的过程属于现有技术,在本发明实施例中对该过程不做赘述。
由于投影仪设备自身存储能力的不足,无法存储投影时所需要的足够数量的图像,使得电子设备根据格雷码投影图案组和线移投影图案组,确定的格雷码的行解码值和列解码值不够准确,从而导致三维测量的结果不够准确。
所述格雷码初始图案组和所述线移初始图案组的数量由投影仪的分辨率决定。例如,所述投影仪的分辨率为912*1140,投影仪投影的格雷码初始图案组中的图案包括10幅行格雷码初始图案、10幅反向行格雷码初始图案、9幅列格雷码初始图案和9幅反向列格雷码初始图案,并且电子设备生成的线移初始图案组中的图案包括6幅行线移初始图案和6幅列线移初始图案,也需要在投影仪中保存,此外,投影仪中还需要存储1幅全白的图案和1幅全黑的图案,也就是在投影仪标定过程中投影仪至少需要存储52幅图案,而实际存在的问题是,投影仪设备自身存储能力是不能够满足52幅图案的存储需求的,以DMD4500型号的投影仪为例,该型号的投影仪允许存储的图案数量最多为48幅,无法满足52幅图案的存储需求,而根据48幅图案也就不能准确地标定投影仪。
为了满足投影仪自身存储能力,可以将线移初始图案组中的图案减半,并且同时不影响所述行解码值和所述列解码值,由于在解码过程中,线移投影图案组中的图案的偶数行的解码值与格雷码投影图案组中的图案正确的部分相同,而初始图案的奇数行可以消除格雷码投影图案组中的图案错误解码的部分,所以将所述线移初始图案组中的图案的偶数行删除,保留所述线移初始图案组中的图案的奇数行不影响所述行解码值和所述列解码值。
具体的,图2为本发明实施例提供的现有技术中的一种格雷码图案加线移图案的编码序列,如图2所示,编码32列的图案,需要5幅格雷码图案,但是由于投影仪设备自身的原因,只能投影到前4幅,即如图2所示的格雷码图案编码序列的第1行到第4行,该格雷码图案编码序列对应的格雷码图案解码值应该为01-23-45-67-89等,但是由于格雷码图案解码值存在一位固有误差如图3所示,格雷码图案解码值为00-22-44-66-88等,该一位固有误差如解码值中第二位的0、第四位的2、第六位的4、第八位的6、第十位的8等,导致投影仪的分辨率值应用了一半,而为了能够完全应用投影仪的分辨率,得到投影仪的全分辨率的码值,所以在该格雷码图案的基础上投影仪线移图案,线移图案编码序列如图3所示,该线移图案解码值如图2中白条纹的标号所示。如第一幅线移图案中的白条纹的标号为1-7-13-19等,则对应的该线移图案解码值为1-7-13-19等。将该线移条纹解码值与该格雷码图案解码值结合,则可以消除一位固有误差,从而得到投影仪的全分辨率的码值,进而测量待测物体。
图3为本发明实施例提供的一种格雷码图案加线移图案的编码序列。由于投影仪设备自身存储能力的不足,无法存储足够数量的图像,导致不能准确得到投影仪的全分辨率的码值,无法准确测量待测物体。所以在本发明实施例中将线移图案减半,根据图3所示的格雷码图案解码值和线移图案解码值可得,线移图案中奇数行的解码值可以消除格雷码图案解码值的一位固有误差,而线移图案中的偶数行的解码值与格雷码图案解码值正确的部分相同,所以删除线移图案中的偶数行,保留线移图案中的奇数行,不会影响最终的格雷码的行解码值和列解码值结果,而且还减少了删除了偶数行后的线移图案的数据量,提高测量的效率。
如图3所示,删除偶数行后的线移图案如线移图案中奇数行解码序列所示,删除偶数行后的线移图案的解码值如线移图案中奇数行解码值所示,线移图案中奇数行解码值如图3中的白条纹标号所示,如第一幅线移图案中奇数行的白条纹的标号为1-7-13-19等,则对应的该线移图案奇数行解码值为1-7-13-19等,如图3所示,是将格雷码解码值由原来的00-22-44-66-88等更新为01-23-45-67-89等,所以删除偶数行后的线移图案对该线移条纹解码值与该格雷码图案解码值结合结果没有影响,并且仍然能够得到投影仪的全分辨率的码值,从而删除偶数行后的线移图案仍然能够准确地测量待测物体。
所述删除所述线移初始图案组中的每个图案的偶数行的过程可以为电子设备根据格雷码投影图案及线移图案生成规则,生成线移初始图案组,其中线移初始图案组中包括多幅行线移初始图案和多幅列线移初始图案,电子设备将多幅行线移初始图案按照预设的方式进行组合,得到行线移初始图案,将多幅列线移初始图案按照预设的方式进行组合,得到列线移初始图案。其中将多幅行线移初始图案按照预设的方式进行组合,得到行线移初始图案,将多幅列线移初始图案按照预设的方式进行组合,得到列线移初始图案的过程属于现有技术,在本发明实施例中对该过程不进行赘述。
电子设备删除行线移初始图案中的偶数行,及删除列线移初始图案中的偶数行。因为得到的列线移初始图案中每一行即为一幅列线移初始图案,删除列线移初始图案中的偶数行后,使得列线移初始图案的数量减半,同样的,行线移初始图案中删除偶数行后,使得行线移初始图案的数量减半。
电子设备将删除偶数行后的行线移初始图案和删除偶数行后的列线移初始图案发送给投影仪,投影仪进行投影。
还以上述的实施例进行说明,如果所述投影仪的分辨率为912*1140,在本本发明实施例中,投影仪需要保存10幅行格雷码初始图案、10幅反向行格雷码初始图案、9幅列格雷码初始图案和9幅反向列格雷码初始图案来进行投影,图像采集设备同步采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案发送给电子设备,其中所述格雷码投影图案组中的图案包括10幅行格雷码投影图案、10幅反向行格雷码投影图案、9幅列格雷码投影图案和9反向列格雷码投影图案,电子设备根据预设的线移图案生成规则,生成6幅行线移初始图案和6幅列线移初始图案,电子设备将该6幅行线移初始图案按照预设的方式进行组合,得到行线移初始图案,将该6幅列线移初始图案按照预设的方式进行组合,得到列线移初始图案,删除行线移初始图案中的偶数行,及删除列线移初始图案中的偶数行,其中所述删除偶数行后的行线移初始图案中包括3幅行线移初始图案,所述删除奇数行后的线移初始图案中包括3幅列线移初始图案。电子设备将该3幅行线移初始图案和3幅列线移初始图案发送给投影仪进行投影,此外投影仪中还需要保存1幅全白的图案、1幅全黑的图案。也就是说投影仪中需要存储的图案一共是46幅,在投影仪设备自身的存储能力范围内,从而使得投影仪能够投影足够数量的图案,来得到投影仪的全分辨率的码值,也就是在减少了投影数据量,提高测量效率的同时,不影响最终的解码结果。
S102:接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的。
投影仪接收到的电子设备发送的删除偶数行后的线移初始图案组,将删除偶数行后的线移初始图案组完整地投影到待测物体上,图像采集设备同步采集对应的图案,将该采集的图案作为线移投影图案组中的每个图案发送给电子设备,电子设备接收线移投影图案组中的每个图案。
S103:根据所述格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值。
电子设备根据所述格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定所述格雷码投影图案组对应的行格雷码图案解码值和列格雷码解码值,及所述线移投影图案组对应的行线移解码值和列线移解码值,根据所述行格雷码解码值和所述行线移解码值,确定格雷码的行解码值,根据所述列格雷码解码值和所述列线移解码值,确定格雷码的列解码值。
所述根据所述行格雷码解码值和所述行线移解码值,确定格雷码的行解码值和所述根据所述列格雷码解码值和所述列线移解码值,确定格雷码的列解码值的过程属于现有技术,在本发明实施例中对该过程不做赘述。
S104:根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。
为了使得三维测量的结果更加准确,在三维测量前需要对图像采集设备和投影仪进行标定,所以电子设备在标定过程后,会在本地预先保存有图像采集设备与投影仪的标定结果,其中所述图像采集设备与投影仪的标定结果包括:图像采集设备与投影仪的相对位置关系,及图像采集设备与投影仪各自的内参、外参、畸变系数等标定结果。
所述图像采集设备与投影仪的相对位置关系为根据投影仪坐标系与世界坐标系的第一对应关系,和图像采集设备坐标系与世界坐标系的第二对应关系确定的。
所述预先保存的三角测量法不局限于是三角测量法,也可以其他的测量方法,只要能确定待测物体的三维点云坐标即可,其中所述三角测量法保存在电子设备中。
电子设备确定待测物体的三维点云坐标后,可以根据所述待测物体的三维点云坐标,绘制所述待测物体的三维图像,从而实现待测物体的三维测量。所述根据所述待测物体的三维点云坐标,绘制所述待测物体的三维图像的过程属于现有技术,在本发明实施例中不做赘述。
由于本发明实施例中提供的三维测量方法中,根据投影仪投影格雷码初始图案组中的图案固有的一位解码误差,所以可以将解码结果不存在误差的那部分格雷码投影图案组中的图案对应的线移初始图案组中的图案删除,即删除偶数行线移初始图案,减少了线移初始图案组中的图案数量,将格雷码初始图案组的图案数量和线移初始图案组的图案数量控制在投影仪存储空间允许的范围内,并且不影响解码结果,使得投影仪可以正常投影,从而提高了测量结果的准确度。
实施例2:
所述格雷码初始图案组中的每个图案可以预先保存在投影仪中,为了保证电子设备和投影仪中格雷码初始图案组中的每个图案的一致性,在上述实施例的基础上,本发明实施例中,所述接收格雷码投影图案组中的每个图案包括:
根据本地保存的格雷码图案生成规则,生成格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案及反向列格雷码初始图案;
将所述格雷码初始图案组中的每个图案发送给投影仪,使得投影仪将所述格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案送给电子设备。
电子设备根据预设的格雷码图案生成规则及进行标定的投影仪的分辨率,产生格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括:行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案和反向列格雷码初始图案,其中所述格雷码图案生成规则预先保存在电子设备中。所述电子设备生成的格雷码初始图案组中的图案数量由投影仪的分辨率决定。
所述行格雷码初始图案、反向行格雷码初始图案、列格雷码图案和方向列格雷码初始图案均包括多幅。
电子设备生成格雷码初始图案组后,将所述格雷码初始图案组中的每个图案发送给投影仪,投影仪将所述格雷码初始图案组中的每个图案完整地投影到待测物体上后,图像采集设备同步采集对应的图案,将采集到的图案作为格雷码投影图案组中的每个图案发送给电子设备。
例如,所述投影仪的分辨率为912*1140,电子设备根据预设的格雷码图案生成规则,生成格雷码初始图案组,其中所述格雷码初始图案组包括10幅行格雷码初始图案、10幅反向行格雷码初始图案、9幅列格雷码初始图案和9反向列格雷码初始图案,将所述格雷码初始图案组中的每个图案发送给投影仪。投影仪接收到所述格雷码初始图案中的每个图案后,将所述格雷码初始图案中的行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案、反向列格雷码初始图案按照顺序完整地投影在待测物体上,所述图像采集设备采集对应的图案,将采集到的图案作为格雷码投影图案组中的每个图案发送给电子设备。
在本发明实施例中,保证了电子设备和投影仪中格雷码初始图案组的一致性,使得根据所述初雷码始格图案组对应的格雷码投影图案组,确定的格雷码的行解码值和列解码值更加准确,从而使得三维测量的结果更加准确。
实施例3:
为了提高线移投影图案组对应的线移解码值的正确性,在上述各实施例的基础上,本发明实施例中,所述确定格雷码的行解码值和列解码值之前,所述方法还包括:
接收全白待测物体图案和全黑待测物体图案,其中所述全白待测物体图案为投影仪投影全白的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,所述全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全黑待测物体图案发送给电子设备的;
所述根据所述格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值包括:
根据所述格雷码投影图案组中的图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值;
针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域;根据所述白条纹区域,确定白条纹区域的中心区域;
根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的行线移解码值和列线移解码值;
根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值。
由于图像采集设备的采集视野通常大于投影仪的投影视野,也就是图像采集设备的采集区域通常大于投影仪的投影区域,所以投影仪投影一幅全黑待测物体图案和一幅全白待测物体图案,电子设备根据所述全黑待测物体图案和所述全白待测物体图案,可以检测出格雷码投影图案组及线移投影图案组的有效区域,从而使得确定的格雷码的行解码值和列解码值更加准确。
所述根据所述格雷码投影图案组中的图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值的过程包括:根据所述格雷码投影图案组中的行格雷码投影图案、反向行格雷码投影图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码图案的行格雷码解码值;根据所述格雷码投影图案组中的列格雷码投影图案、反向列格雷码投影图案、全白待测物体图案、全黑待测物体图案及所述格雷码解码算法,确定所述格雷码图案的列格雷码解码值。
所述全白图案为电子设备生成一幅全白的图案发送给投影仪,投影仪接收并投影该全白的图案到棋盘格标定板上后,图像采集设备同步采集对应的图案,将采集到的图案作为全白图案发送给电子设备的,所述全黑图案为电子设备生成一幅全黑的图案发送给投影仪,投影仪接收并投影该全黑的图案到棋盘格标定板上后,图像采集设备同步采集对应的图案,将采集到的图案作为全黑图案发送给电子设备的。
所述根据所述格雷码投影图案组中的行格雷码投影图案、反向行格雷码投影图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和所述根据所述格雷码投影图案组中的列格雷码投影图案、反向列格雷码投影图案、全白待测物体图案、全黑待测物体图案及所述格雷码解码算法,确定所述格雷码投影图案组中的图案的列格雷码解码值的过程属于现有技术,在本发明实施例中不做赘述。
为了提高线移解码的准确度,从而准确地实现待测物体的三维测量,本发明实施例中,通过将所述线移投影图案组中的每个图案的每个白条纹区域对应的中心区域,确定为每个中心区域作为待确定的每个白条纹的中心,从而确定每个白条纹,确定所述线移投影图案组中的图案的线移解码值。
针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域。所述确定所述线移投影图案组中的每个图案的白条纹区域可以是电子设备检测所述线移投影图案组中的每个图案的每个像素点的像素值,将由像素点集合确定的像素值均值大于设定像素值阈值的第一像素点集合作为白条纹区域,其中所述像素点集合中至少包括设定的第一数量个像素点。由于最终是为了确定每个白条纹的中心,所以所述像素值阈值可以是接近于白色像素点的像素值,例如可以是200、230或235等。
直接将白条纹区域确定为线移投影图案组中的每个图案的白条纹可能存在偏差,为了进一步提高线移投影图案组中的图案的行解码值和列解码值的准确度,可以将白条纹区域中的每个像素点对应的平峰图,经过高斯滤波处理后,产生对应的尖峰图,根据该尖峰图中的尖峰确定该白条纹区域的中心区域。具体地,在实际应用中,所述根据所述白条纹区域,确定白条纹区域的中心区域的过程不局限于上述过程,只要是本领域技术人员公知的白条纹区域的中心区域的方法即可。
此外,由于白条纹中包含的像素点均为白色像素点,所以根据白条纹区域,确定白条纹区域的中心区域可以是,针对白条纹区域中每个子区域的像素值,选择像素值最大的子区域,将该子区域确定为该白条纹区域的中心区域,其中像素值可以是每个子区域中的每个像素点像素值的和,也可是每个子区域中每个像素点像素值的均值。将像素值最大的子区域确定为白条纹区域的中心区域,可以保证由该中心区域确定的白条纹的准确度最高。
所述根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值的过程属于现有技术,在本发明实施例中不做赘述。
所述根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值的过程属于现有技术,在本发明实施例中不做赘述。
本发明实施例中根据确定的所述线移投影图案组中的每个图案的白条纹区域,确定中心区域,从而根据每个中心区域对应的白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值的过程是针对所述线移投影图案组中的每一幅行线移图案和每一幅列线移图案分别进行的。
由于本发明实施例中利用线移投影图案组中的每个图案的白条纹区域确定的中心区域,作为白条纹的中心区域,提高了线移投影图案组中的图案对应的线移解码值的准确性。
实施例4:
为了提高三维测量的效率,在上述各实施例的基础上,本发明实施例中,所述预先保存的三角测量法包括:
根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,确定所述投影仪发出的光线在世界坐标系中对应的第一向量集合,及所述图像采集设备接收的光线在世界坐标系中对应的第二向量集合;
计算所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的每个向量交点;
将每个向量交点的集合作为所述待测物体的三维点云坐标。
电子设备通过格雷码的行解码值和列解码值,确定了投影仪像素坐标系和图像采集设备像素坐标系,及待测物体所在的世界坐标系。由于所述格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案都是投影仪将图案投影到待测物体后,图像采集采集的,从而所述投影仪像素坐标系与所述世界坐标系存在第一对应关系,图像采集设备像素坐标系与所述世界坐标系存在第二对应关系。
所以投影仪发出的光线在所述世界坐标系中对应有第一向量集合,图像采集设备接收的光线在所述世界坐标系中对应有第二向量集合,本实施例中采用的三角测量法为线线相交测量法,即根据所述投影仪发出的光线对应的第一向量集合,及所述图像采集设备接收的光线对应的第二向量集合,将所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的每个向量交点,对应的每个向量交点的集合作为所述待测物体的三维点云坐标。
所述投影仪发出的光线的数量,与所述图像采集设备接收的光线的数量可以是由投影仪的分辨率决定的,例如所述投影仪的分辨率为912*1140,则所述投影仪发出的光线的数量,与所述图像采集设备接收的光线的数量均为912*1140=1039680条。本发明实施例提供的三维测量结果如图4所示。
当然,为了使得三维点云坐标的结果更可靠,使得绘制得到的待测物体的三维图案更准确,所述确定待测物体的三维点云坐标后,所述方法还包括:
对所述待测物体的三维点云坐标进行滤波计算。
由于实际的外界测量环境较为复杂,可能会对投影仪发出的光线或图像采集设备接收的光线造成干扰,而这些由于干扰而确定的三维坐标在测量结果中视为干扰点,由于干扰点不具备可靠性,反而会造成最终绘制的待测物体的三维图案的偏差,所以将所述干扰点过滤掉,能够使三维点云坐标的结果更可靠,使绘制得到的待测物体的三维图案更准确。当然过滤干扰点的方法不仅仅局限于所述滤波计算方法,本领域技术人员惯用的,能够过滤干扰点的其他过滤方法均可。
所述对所述待测物体的三维点云坐标进行滤波计算的过程属于现有技术,在本发明实施例中对该过程不做赘述。
由于本发明实施例中提供三维测量方法中,利用投影仪发射的光线与图像采集设备的光线的每个交点的集合作为待测物体的三维点云坐标,采用数学领域中的线线相交求交点的方法,提高了三维测量的效率,并且对三维点云坐标进行滤波操作,使得三维测量的结果更加准确。
实施例5:
下面以一个具体的实施例对上述各实施例进行说明,图5为本发明实施例提供的一种三维测量系统,该投影仪标定系统包括投影仪、图像采集设备、电子设备,其中在发明实施例中所述图像采集设备为CCD(Charge Coupled Device,电荷耦合器件)相机,所述电子设备为PC。
摆放投影仪、CCD相机,使投影仪水平摆放并距基准屏幕距离为a mm,使投影仪向下投影,CCD相机倾斜摆放,距投影仪距离为b mm,使CCD相机能够采集到投影仪投影的全部有效区域,即能够完全采集到投影仪投影的图案,并在投影仪的正下方,基准平面上放置有待测物体,使得投影仪投影的图案能够完整地呈现在待测物体上,即使得待测物体的有效区域全部位于投影仪对应的投影区域内。通过有线或无线的方法使投影仪与PC、CCD相机与PC间能实现数据的发送和接收,其中所述有线的方式可以是USB(Universal Serial Bus,通用串行总线)连接,所述无线的方式可以是蓝牙连接。
该投影仪分别投影一幅全黑待测物体图案,和一幅全白待测物体图案,CCD相机分别采集全黑待测物体图案,和全白待测物体图案发送给PC。
该投影仪的分辨率为912*1140,PC根据预设的格雷码图案生成规则,生成格雷码初始图案组,其中所述格雷码初始图案组中的图案包括10幅行格雷码初始图案、10幅反向行格雷码初始图案、9幅列格雷码初始图案和9幅反向列格雷码初始图案,将所述格雷码初始图案组中的每个图案发送给投影仪。投影仪接收到所述格雷码初始图案组中的每个图案后,将所述格雷码初始图案组中的行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案、反向列格雷码初始图案按照顺序完整地投影在待测物体上,所述CCD相机采集到投影仪投影的图案后,将该采集到的图案作为格雷码投影图案组中的每个图案发送给PC。PC根据预设的线移图案生成规则,产生线移初始图案组中的6幅行线移初始图案和6幅列线移投影图案,PC将线移初始图案组中的删除6幅行线移初始图案对应的组合图案中的偶数行对应的行线移初始图案,及删除6幅列线移初始图案对应的组合图案中的偶数行对应的列线移初始图案,并将删除偶数行后的行线移初始图案、删除偶数行后的列线移初始图案发送给投影仪,投影仪接收到所述删除偶数行后的行线移初始图案、删除偶数行后的列线移初始图案后,将所述删除偶数行后的行线移初始图案、删除偶数行后的列线移初始图案按照顺序完整地投影在待测物体上,所述CCD相机采集对应的图案,将该采集到的图案作为线移投影图案组中的每个图案发送给PC。
PC将所述格雷码投影图案组中的行格雷码投影图案、反向行格雷码投影图案对应的编码序列做差,再根据行差值与全黑待测物体图案对应的编码序列,将所述格雷码投影图案组中的行格雷码投影图案、反向行格雷码投影图案设全局阈值二值化,确定所述格雷码投影图案组中的图案的行格雷码解码值,同理,PC将所述格雷码投影图案组中的列格雷码投影图案、反向列格雷码投影图案对应的编码序列做差,再根据列差值与全黑待测物体图案对应的编码序列,将所述格雷码投影图案组中的列格雷码投影图案、反向列格雷码投影图案设全局阈值二值化,确定所述格雷码投影图案组中的图案的列格雷码解码值。
PC将所述线移投影图案组中的行线移投影图案,确定对应的白条纹区域,根据所述白条纹区域,再根据白条纹区域对应的中心区域,从而确定所述行线移投影图案组中的图案对应的行线移解码值,同理,所述线移投影图案组中的列线移投影图案对应的列线移解码值的确定过程与所述行线移解码值的确定过程相同,在本发明实施例中不做赘述。
根据所述行格雷码解码值和所述行线移解码值,确定格雷码的行解码值,根据所述列格雷码解码值和所述列线移解码值,确定格雷码的列解码值。并根据所述行解码值和所述列解码值,确定投影仪像素坐标系。PC根据所述全白待测物体图案,确定所述相机像素坐标系,并根据所述投影仪像素坐标系、所述相机像素坐标系,及本地保存的图像采集设备与投影仪的标定结果确定所述待测物体的世界坐标系。
PC根据所述投影仪像素坐标系与所述世界坐标系的第一对应关系,确定所述投影仪发出的光线对应的第一向量集合,并根据所述相机像素坐标系与所述世界坐标系的第二对应关系,确定所述相机接收的光线对应的第二向量集合,根据计算得到的所述第一向量集合中的每个第一向量,及所述第二向量集合中的每个第二向量的每个向量交点,将每个向量交点的集合作为所述待测物体的三维点云坐标。
由于本发明实施例中提供的三维测量方法中,根据投影仪投影格雷码初始图案组中的图案固有的一位解码误差,所以可以将解码结果不存在误差的那部分格雷码投影图案组中的图案对应的线移初始图案组中的图案删除,即删除偶数行线移初始图案,减少了线移初始图案组中的图案数量,将格雷码初始图案组的图案数量和线移初始图案组的图案数量控制在投影仪存储空间允许的范围内,并且不影响解码结果,使得投影仪可以正常投影,从而提高了测量结果的准确度。
实施例6:
为了使得图像采集设备与投影仪的标定结果更加准确,从而使得三维测量的结果更加准确,在上述各实施例的基础上,本发明实施例中,所述本地保存图像采集设备与投影仪的标定结果的过程包括:
根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码的行标定解码值和列标定解码值,其中所述标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案由投影仪投影到棋盘格标定板后图像采集设备采集到的;
根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点,其中所述全白图案为投影仪投影全白的图案到棋盘格标定板上后,图像采集设备采集对应的图案,将采集到的图案作为全白图案发送给电子设备的;根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置;
根据每个角点在所述投影仪坐标系中的每个第一位置、及所述每个角点在世界坐标系中的每个第二位置及所述每个角点在图像采集设备中的每个第三位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,及所述图像采集设备坐标系与所述世界坐标系的第二对应关系,标定投影仪与图像采集设备,并保存图像采集设备与投影仪的标定结果。
在本发明实施例中所应用的电子设备、图像采集设备及投影仪与三维测量方法中相同即可,摆放位置也应与三维测量方法中的摆放位置一致,但是标定过程中,棋盘格标定板的有效区域全部位于投影仪对应的投影区域内。
所述接收到的标定格雷码投影图案组包括:行标定格雷码投影图案、反向行标定格雷码投影图案、列标定格雷码投影图案和反向列标定格雷码投影图案,所述接收到的标定线移投影图案组包括:行标定线移投影图案和列标定线移投影图案,并且,所述标定格雷码投影图案组中的行标定格雷码投影图案、反向行标定格雷码投影图案、列标定格雷码投影图案和反向列标定格雷码投影图案均为多幅,所述标定线移投影图案组中的行标定线移投影图案和列标定线移投影图案均为多幅。
在投影仪的标定的过程中,投影仪还需要投影一幅全白图案和一幅全黑图案,图像采集设备采集对应的图案,将采集到的图案发送给电子设备。其中所述投影仪投影一幅全白图案和一幅全黑图案的过程可以是在投影仪标定系统调整好之后,投影标定格雷码初始图案组及标定线移初始图案组之前完成,也可以是电子设备在接收标定格雷码投影图案组及标定线移投影图案组后完成的,只要保证在对标定格雷码投影图案组及标定线移投影图案组解码前完成即可。
所述全白图案为电子设备生成一幅全白的图案发送给投影仪,投影仪接收并投影该全白的图案到棋盘格标定板上后,图像采集设备同步采集对应的图案,将采集到的图案作为全白图案发送给电子设备的,所述全黑图案为电子设备生成一幅全黑的图案发送给投影仪,投影仪接收并投影该全黑的图案到棋盘格标定板上后,图像采集设备同步采集对应的图案,将采集到的图案作为全黑图案发送给电子设备的。
所述标定格雷码投影图案组中的每个图案及所述标定线移投影图案组中的每个图案是由投影仪将标定格雷码初始图案组中的每个图案及标定线移初始图案组中的每个图案完整地投影在棋盘格标定板上后,图像采集设备采集对应的每个图案,将采集到的图案作为标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案发送给电子设备的。
所述标定格雷码初始图案组中的每个图案和所述标定线移初始图案组中的每个图案可以是预先保存在投影仪中的,也可以是保存在电子设备中,由电子设备发送给投影仪的。所述标定格雷码初始图案组的图案数量和所述标定线移初始图案组的图案数量由投影仪的分辨率决定。
如果所述标定格雷码初始图案组中的每个图案是由电子设备发送给投影仪的,则电子设备根据预设的格雷码图案生成规则及进行标定的投影仪的分辨率,生成标定格雷码初始图案组中的每个图案,其中所述标定格雷码初始图案组中的图案包括:行标定格雷码初始图案、反向行标定格雷码初始图案、列标定格雷码初始图案和反向列标定格雷码初始图案,其中所述格雷码图案生成规则预先保存在电子设备中。
例如,所述投影仪的分辨率为912*1140,投影仪投影的标定格雷码初始图案组中的图案包括10幅行标定格雷码初始图案、10幅反向行标定格雷码初始图案、9幅列标定格雷码初始图案和9幅反向列标定格雷码初始图案,投影仪投影的标定线移初始图案组中的图案可以包括6幅行标定线移初始图案和6幅列标定线移初始图案,此外,所述投影仪还需要投影一幅全黑图案和一幅全白图案来对投影仪进行标定。
电子设备可以根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码投影图案组中的图案对应的行标定格雷码解码值和列标定格雷码解码值,及线移投影图案组中的图案对应的行标定线移解码值和列标定线移解码值,根据所述行标定格雷码解码值和所述行标定线移解码值,确定格雷码的行标定解码值,根据所述列标定格雷码解码值和所述列标定线移解码值,确定格雷码的列标定解码值。
具体地,所述电子设备可以根据接收到的标定格雷码投影图案组中的每个图案,确定标定格雷码投影图案组中的图案对应的行标定格雷码解码值和列标定格雷码解码值,可以是电子设备根据所述标定行格雷码投影图案组中的行标定格雷码投影图案、反向行标定格雷码投影图案、全白图案和全黑图案,确定确定标定格雷码投影图案组中的图案对应的行标定格雷码解码值;根据所述标定行格雷码投影图案组中的列标定格雷码投影图案、反向列标定格雷码投影图案、全白图案和全黑图案,确定确定标定格雷码投影图案组中的图案对应的列标定格雷码解码值。
所述根据所述行格雷码解码值和所述行线移解码值,确定格雷码的行解码值和所述根据所述列格雷码解码值和所述列线移解码值,确定格雷码的列解码值的过程属于现有技术,在本发明实施例中针对该过程不进行赘述。
电子设备生成一幅全白的图案发送给投影仪,投影仪接收并投影该全白的图案到棋盘格标定板上后,图像采集设备采集对应的图案,将采集到的图案作为全白图案发送给电子设备,电子设备根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点。在本发明实施例中采用的棋盘格标定板的类型可以为包含有黑色棋盘格和白色棋盘格的棋盘格标定板,当然为了能够使得投影仪投影的格雷码图案及线移图案更加清晰,也可以采用包含有灰色棋盘格和白色棋盘格的棋盘格标定板,或包含有其它颜色棋盘格的棋盘格标定板等。
为了使得投影图案更加清晰,使得投影仪标定结果更加准确,从而提高测量的准确性,本发明实施例中所述棋盘格标定板为灰色棋盘格标定板,即包含有灰色棋盘格和白色棋盘格的棋盘格标定板。为了保证投影仪标定结果更加准确,棋盘格标定板至少符合以下要求:棋盘格标定板的有效区域全部位于投影仪对应的投影区域内。
如果所述标定线移初始图案组中的每个图案是由电子设备发送给投影仪的,则电子设备根据预设的线移图案生成规则,产生标定线移初始图案组中的每个图案,其中所述标定线移初始图案组中的图案包括:行标定线移初始图案和列标定格线移初始图案,其中所述线移图案生成规则预先保存在电子设备中。电子设备将生成的所述标定线移初始图案组中的每个图案发送给投影仪,投影仪接收并投影仪图案,图像采集设备采集对应的图案,将采集到的图案作为线移投影图案组中的每个图案发送给电子设备。
但是,在实际应用中,由于投影仪的自身的存储能力的不足,无法存储投影时所需要的足够数量的图像,使得电子设备根据标定格雷码投影组和线标定移投影图案组,确定的格雷码的行解码值和列解码值不够准确,从而导致投影仪的标定结果不够准确。
所以较佳地做法是删除所述标定线移初始图案组中的每个图案的偶数行,所述删除所述标定线移初始图案组中的每个图案的偶数行的过程可以为电子设备根据线移图案生成规则,生成标定线移初始图案组,其中标定线移初始图案组中包括多幅行标定线移初始图案和多幅列标定线移初始图案,电子设备将多幅行标定线移初始图案按照预设的方式进行组合,得到行标定线移初始图案,将多幅列标定线移初始图案按照预设的方式进行组合,得到列标定线移初始图案。其中将多幅行标定线移初始图案按照预设的方式进行组合,得到行标定线移初始图案,将多幅列标定线移初始图案按照预设的方式进行组合,得到列标定线移初始图案的过程属于现有技术,在本发明实施例中对该过程不进行赘述。
电子设备删除行标定线移初始图案中的偶数行,及删除列标定线移初始图案中的偶数行。因为得到的列标定线移初始图案中每一行即为一幅列标定线移初始图案,删除列标定线移初始图案中的偶数行后,使得列标定线移初始图案的数量减半,同样的,行标定线移初始图案中删除偶数行后,使得行标定线移初始图案的数量减半。
电子设备将删除偶数行后的行标定线移初始图案和删除偶数行后的列标定线移初始图案发送给投影仪,投影仪进行投影,图像采集设备采集对应的图案,将采集到的图案作为线移投影图案组中的每个图案发送给电子设备。
因为标定格雷码投影图案组中的每个图案和标定线移投影图案组中的每个图案是由投影仪投影得到的,所以标定格雷码投影图案组和标定线移投影图案组确定的格雷码的行解码值和列解码值,与投影仪坐标系存在对应关系,又因为格雷码的行解码值和列解码值具有唯一性,所以根据所述行解码值和所述列解码值可以确定所述投影仪坐标系。
由于标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案是由投影仪投影到棋盘格标定板上的,从而图像采集设备采集的全白图案中的棋盘格标定板图案的每个角点,与格雷码的行解码值、列解码值之间也是存在对应关系的,所以所述每个角点可以在投影仪坐标系中对应表示,进而可以确定所述全白图案中的棋盘格标定板图案的每个角点在所述投影仪坐标系中的每个第一位置。
图像采集设备采集到所述全白图案后,电子设备可以预先保存有所述全白图案中的棋盘格标定板图案对应的棋盘格标定板,在世界坐标系中的世界坐标,所以可以确定所述全白图案中的所述每个角点在所述世界坐标系中的每个第二位置。根据全白图案中的每个角点在所述投影仪坐标系中的每个第一位置,与所述每个角点在世界坐标系中的每个第二位置,从而能够确定所述投影仪坐标系和所述世界坐标系的第一对应关系,其中所述世界坐标系是由用户预先保存到电子设备中的。
电子设备根据所述投影仪坐标系和所述世界坐标系的第一对应关系,及预先保存的相机标定算法来标定投影仪。
在投影仪的标定过程中,为了使得投影仪的标定结果更加准确,通常用户需要改变棋盘格标定板的位置,并在每次改变棋盘格标定板的位置后,重新进行上述过程。因为棋盘格标定板的位置发生了变化,因此投影仪重新标定投影格雷码初始图案组及标定线移初始图案组,标定格雷码初始图案组及标定线移初始图案组中的每个图像在棋盘格标定板上的投影位置也会发生变化,图像采集设备重新采集投影的对应的每个图案,将采集到的图案作为标定格雷码投影图案组及标定线移投影图案组中的每个图案发送给电子设备,其中所述改变棋盘格标定的位置的操作为至少两次。
电子设备对标定格雷码投影图案组及标定线移投影图案组重新进行解码操作,因为棋盘格标定板的位置发生了变化,因此根据变化后的棋盘格标定板可能会产生的投影仪坐标系会发生变化,并且因为棋盘格标定板的位置发生了变化,这是也就使得每个角点在投影坐标系中的每个第一位置也发生了变化,根据变化后的每个角点在投影坐标系中的每个第一位置,及每个角点在世界坐标系中的每个第二位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,标定投影仪。所述根据每组根据变化后的每个角点在投影坐标系中的每个第一位置,及每个角点在世界坐标系中的每个第二位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系的过程可以是将多组每个角点在投影坐标系中的每个第一位置的结果的平均值,及多组每个角点在世界坐标系中的每个第二位置的结果的平均值,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,或者还可以是根据每组根据变化后的每个角点在投影坐标系中的每个第一位置,及每个角点在世界坐标系中的每个第二位置,确定所述投影坐标系与所述世界坐标系的每个第一对应关系,根据所述每个第一对应关系,最终确定所述投影仪坐标系与所述世界坐标系的第一对应关系。
由于本发明实施例中提供的投影仪标定方法中,投影仪投影标定格雷码初始图案组及标定线移初始图案组,图像采集设备采集投影仪的投影的对应的图案,将采集到的图案作为标定格雷码投影图案组及标定线移投影图案组发送给电子设备,电子设备根据接收到的标定格雷码投影图案组及标定线移投影图案组的解码结果,确定投影仪坐标系,再根据棋盘格标定板图案所在的世界坐标系,确定所述投影仪坐标系和所述世界坐标系的对应关系,从而标定投影仪,该标定方法较为简单,也不需要对标定格雷码投影图案组及标定线移投影图案组进行预先处理,从而在保证标定过程效率的同时,提高了标定结果的准确度,进一步地提高了三维测量的准确度。
实施例7:
为了使得投影仪标定结果更加准确,从而提高三维测量结果的准确度,在上述各实施例的基础上,本发明实施例中,所述根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置包括:
根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系;
在所述行标定解码值和所述列标定解码值中,确定所述每个角点对应的行标定解码值和列标定解码值;
根据所述每个角点对应的行标定解码值和列标定解码值,确定所述每个角点在所述投影仪坐标系中的第一位置。
因为标定格雷码投影图案组中的每个图案和标定线移投影图案组中的每个图案是经过投影仪投影后得到的,所以标定格雷码投影图案组和标定线移投影图案组确定的格雷码的行标定解码值和列标定解码值,与投影仪坐标系存在对应关系,又因为格雷码的行标定解码值和列标定解码值具有唯一性,所以电子设备根据所述行标定解码值和所述列标定解码值,可以确定所述投影仪坐标系。
电子设备根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点,在根据标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案确定的所述行标定解码值和所述列标定解码值中,查找所述每个角点对应的行标定解码值和列标定解码值,从而确定每个角点在投影仪坐标系中的第一位置,即每个角点在投影仪坐标系中对应的坐标。
为了进一步提高投影仪标定结果的准确性,在上述各实施例的基础上,本发明实例中,所述根据接收到的全白棋盘格标定板图案,确定所述全白棋盘格标定板图案中的每个角点后,所述确定所述投影仪坐标系与所述世界坐标系的第一对应关系之前,所述方法还包括:
根据所述每个角点,及预设的邻域范围,确定所述每个角点对应的所述全白棋盘格标定板图案中邻域范围内的每个像素点;
在所述行标定解码值和所述列标定解码值中,确定所述每个像素点对应的行标定解码值和列标定解码值;
根据所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在所述投影仪坐标系中的每个第一位置;
根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第三对应关系;根据所述投影仪坐标系及图像采集设备坐标系的第三对应关系,及所述每个角点在图像采集设备中的每个第三位置,确定所述每个角点在所述投影坐标系中的每个第一位置。
所述邻域范围内包含对应的角点,较佳地可以是以所述每个角点为中心,设定的区域范围,所述区域范围为x*y的区域范围,其中x,y均为大于0的正整数,x,y可以相等,也可以不等,例如x为11,y为11.则所述设定的区域范围为11*11的区域范围,即以所述每个角点为中心,11*11=121个像素点所构成的区域范围。则电子设备可以根据所述每个角点,及预设的邻域范围,确定所述每个角点在所述全白棋盘格标定板图案中对应领域范围内的每个像素点。在根据标定格雷码投影图案组及标定线移投影图案组确定的所述行标定解码值和所述列标定解码值中,查找所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在投影仪坐标系中的每个第一位置。
所述根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第二对应关系可以是全部投影仪坐标系及全部图像采集设备坐标系中的第二对应关系,为了使确定的投影仪坐标系与图像采集设备坐标的第二对应关系更加准确,也可以是根据每个角点对应的领域范围在投影仪坐标系及该每个角点对应的领域范围在图像采集设备坐标系中的每个第三对应关系。
根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,可以更加准确地确定投影仪坐标系与图像采集设备坐标系中的位置对应关系,从而使得投影仪坐标系与图像采集设备坐标系的第三对应关系更加准确,从而根据每个角点在图像采集设备坐标系中的每个第三位置,更加准确地确定每个角点在投影仪坐标系中的每个第一位置。再根据每个角点在投影仪坐标系中的每个第一位置,及所述每个角点在世界坐标系中的每个第二位置,确定所述投影仪坐标系与所述世界坐标系的对应关系,标定投影仪。
根据每个角点对应的每个第一位置,及每个角点在世界坐标系中的每个第二位置,可以使确定的投影仪坐标系与世界坐标系的对应关系的更加准确,从而使得投影仪的标定结果的更加准确,进一步提高三维测量的准确度。
图6为本发明实施例提供的一种三维测量装置结构示意图,应用于电子设备,该装置包括:
确定模块61,用于根据根据预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行;
发送模块62,用于将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;
接收模块63,用于接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;
解码模块64,用于根据根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;
测量模块65,用于根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。
所述发送模块62,还用于根据本地保存的格雷码图案生成规则,生成格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案及反向列格雷码初始图案;将所述格雷码初始图案组中的每个图案发送给投影仪,使得投影仪将所述格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案送给电子设备。
所述接收模块63,还用于接收全白待测物体图案和全黑待测物体图案,其中所述所述全白待测物体图案为投影仪投影全白的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全黑待测物体图案发送给电子设备的;
所述解码模块64,具体用于根据所述格雷码投影图案组中的图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值;针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域;根据所述白条纹区域,确定白条纹区域的中心区域;根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值;根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值。
所述装置还包括:
保存模块66,用于根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,确定所述投影仪发出的光线在世界坐标系中对应的第一向量集合,及所述图像采集设备接收的光线在世界坐标系中对应的第二向量集合;计算所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的向量交点;将每个向量交点的集合作为所述待测物体的三维点云坐标。
所述装置还包括:
过滤模块67,用于对所述待测物体的三维点云坐标进行滤波计算。
所述保存模块66,还用于根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码的行标定解码值和列标定解码值,其中所述标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案由投影仪投影到棋盘格标定板后图像采集设备采集到的;根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点点,其中所述全白图案为投影仪投影全白的图案到棋盘格标定板上后,图像采集设备采集对应的图案,将采集到的图案作为全白图案发送给电子设备的;根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置;根据每个角点在所述投影仪坐标系中的每个第一位置、所述每个角点在世界坐标系中的每个第二位置及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,及所述图像采集设备坐标系与所述世界坐标系的第二对应关系,标定投影仪与图像采集设备,并保存图像采集设备与投影仪的标定结果。
所述保存模块66,具体用于根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系;在所述行标定解码值和所述列标定解码值中,确定所述每个角点对应的行标定解码值和列标定解码值;根据所述每个角点对应的行标定解码值和列标定解码值,确定所述每个角点在所述投影仪坐标系中的第一位置。
所述保存模块66,具体用于根据所述每个角点,及预设的邻域范围,确定所述每个角点对应的所述全白图案中的棋盘格标定板图案的邻域范围内的每个像素点;在所述行标定解码值和所述列标定解码值中,确定所述每个像素点对应的行标定解码值和列标定解码值;根据所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在所述投影仪坐标系中的每个第一位置;根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第三对应关系;根据所述投影仪坐标系及图像采集设备坐标系的第三对应关系,及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述每个角点在所述投影坐标系中的每个第一位置。
本发明提供了一种三维测量方法及装置,应用于电子设备,所述方法包括:根据预先保存的线移初始图案组中的每个图案,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;删除所述线移初始图案组中的每个图案的偶数行,将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。由于投影仪投影格雷码图案固有的一位解码误差,所以可以将解码结果不存在误差的那部分格雷码图案对应的线移图案删除,即删除偶数行线移图案,减少了线移图案的数量,将格雷码图案和线移图案的数量控制在投影仪存储空间允许的范围内,并且不影响解码结果,从而提高了测量结果的准确率。
对于系统/装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (17)

1.一种三维测量方法,其特征在于,应用于电子设备,该方法包括:
根据预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行,将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;
接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;
根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;
根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。
2.如权利要求1所述的方法,其特征在于,所述接收格雷码投影图案组中的每个图案包括:
根据本地保存的格雷码图案生成规则,生成格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案及反向列格雷码初始图案;
将所述格雷码初始图案组中的每个图案发送给投影仪,使得投影仪将所述格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案送给电子设备。
3.如权利要求2所述的方法,其特征在于,所述确定格雷码的行解码值和列解码值之前,所述方法还包括:
接收全白待测物体图案和全黑待测物体图案,其中所述全白待测物体图案为投影仪投影全白的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,所述全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全黑待测物体图案发送给电子设备的;
所述根据所述格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值包括:
根据所述格雷码投影图案组中的图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值;
针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域;根据所述白条纹区域,确定白条纹区域的中心区域;
根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值;
根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值。
4.如权利要求1所述的方法,其特征在于,所述预先保存的三角测量法包括:
根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,确定所述投影仪发出的光线在世界坐标系中对应的第一向量集合,及所述图像采集设备接收的光线在世界坐标系中对应的第二向量集合;
计算所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的向量交点;
将每个向量交点的集合作为所述待测物体的三维点云坐标。
5.如权利要求1所述的方法,其特征在于,所述确定待测物体的三维点云坐标后,所述方法还包括:
对所述待测物体的三维点云坐标进行滤波计算。
6.如权利要求1或3所述的方法,其特征在于,所述本地保存图像采集设备与投影仪的标定结果的过程包括:
根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码的行标定解码值和列标定解码值,其中所述标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案由投影仪投影到棋盘格标定板后图像采集设备采集到的;
根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点,其中所述全白图案为投影仪投影全白的图案到棋盘格标定板上后,图像采集设备采集对应的图案,将采集到的图案作为全白图案发送给电子设备的;根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置;
根据每个角点在所述投影仪坐标系中的每个第一位置、所述每个角点在世界坐标系中的每个第二位置及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,及所述图像采集设备坐标系与所述世界坐标系的第二对应关系,标定投影仪与图像采集设备,并保存图像采集设备与投影仪的标定结果。
7.如权利要求6所述的方法,其特征在于,所述棋盘格标定板为灰色棋盘格标定板。
8.如权利要求6所述的方法,其特征在于,所述根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置包括:
根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系;
在所述行标定解码值和所述列标定解码值中,确定所述每个角点对应的行标定解码值和列标定解码值;
根据所述每个角点对应的行标定解码值和列标定解码值,确定所述每个角点在所述投影仪坐标系中的第一位置。
9.如权利要求6或8所述的方法,其特征在于,所述根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点后,所述确定所述投影仪坐标系与所述世界坐标系的第一对应关系之前,所述方法还包括:
根据所述每个角点,及预设的邻域范围,确定所述每个角点对应的所述全白图案中的棋盘格标定板图案的邻域范围内的每个像素点;
在所述行标定解码值和所述列标定解码值中,确定所述每个像素点对应的行标定解码值和列标定解码值;
根据所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在所述投影仪坐标系中的每个第一位置;
根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第三对应关系;根据所述投影仪坐标系及图像采集设备坐标系的第三对应关系,及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述每个角点在所述投影坐标系中的每个第一位置。
10.一种三维测量装置,其特征在于,应用于电子设备,该装置包括:
确定模块,用于根据预先保存的线移初始图案组中的每个图案,删除所述线移初始图案组中的每个图案的偶数行;
发送模块,用于将删除偶数行后的所述线移初始图案组中的每个图案发送给投影仪;
接收模块,用于接收删除偶数行后的所述线移初始图案组中的每个图案对应的线移投影图案组中的每个图案,其中所述线移投影图案组中的每个图案为投影仪将删除偶数行后的所述线移初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为线移投影图案组中的每个图案发送给电子设备的;
解码模块,用于根据接收到的格雷码投影图案组中的每个图案和所述线移投影图案组中的每个图案,确定格雷码的行解码值和列解码值,其中所述格雷码投影图案组中的每个图案为投影仪将格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的每个图案,将采集的每个图案作为格雷码投影图案组中的每个图案发送给电子设备的;
测量模块,用于根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,及预先保存的三角测量法,确定待测物体的三维点云坐标。
11.如权利要求10所述的装置,其特征在于,所述发送模块,还用于根据本地保存的格雷码图案生成规则,生成格雷码初始图案组中的每个图案,其中所述格雷码初始图案组中的图案包括行格雷码初始图案、反向行格雷码初始图案、列格雷码初始图案及反向列格雷码初始图案;将所述格雷码初始图案组中的每个图案发送给投影仪,使得投影仪将所述格雷码初始图案组中的每个图案投影到待测物体上后,图像采集设备采集对应的图案,将采集的图案作为格雷码投影图案组中的每个图案送给电子设备。
12.如权利要求10或11所述的装置,其特征在于,所述接收模块,还用于接收全白待测物体图案和全黑待测物体图案,其中所述全白待测物体图案为投影仪投影全白的图案到待测物体上,图像采集设备采集对应的图案,将采集到的图案作为全白待测物体图案发送给电子设备的,所述全黑待测物体图案为投影仪投影全黑的图案到待测物体上,图像采集设备采集对应的图案,将采集到的待测物体图案作为全黑待测物体图案发送给电子设备的;
所述解码模块,具体用于根据所述格雷码投影图案组中的图案、全白待测物体图案、全黑待测物体图案及预设的格雷码解码算法,确定所述格雷码投影图案组中的图案的行格雷码解码值和列格雷码解码值;针对所述线移投影图案组中的行线移投影图案和列线移投影图案,确定所述线移投影图案组中的每个图案的白条纹区域;根据所述白条纹区域,确定白条纹区域的中心区域;根据针对每个中心区域确定的每个白条纹,确定所述线移投影图案组中的图案的行线移解码值和列线移解码值;根据所述行格雷码解码值和所述行线移解码值,及所述列格雷码解码值和所述列线移解码值,确定格雷码的行解码值及列解码值。
13.如权利要求10或12所述的装置,其特征在于,所述装置还包括:
保存模块,用于根据所述行解码值、所述列解码值、本地保存的图像采集设备与投影仪的标定结果,确定所述投影仪发出的光线在世界坐标系中对应的第一向量集合,及所述图像采集设备接收的光线在世界坐标系中对应的第二向量集合;计算所述第一向量集合中的每个第一向量,及所述第二向量集合中对应的每个第二向量的向量交点;将每个向量交点的集合作为所述待测物体的三维点云坐标。
14.如权利要求10所述的装置,其特征在于,所述装置还包括:
过滤模块,用于对所述待测物体的三维点云坐标进行滤波计算。
15.如权利要求10或12所述的装置,其特征在于,所述保存模块,还用于根据接收到的标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案,确定标定格雷码的行标定解码值和列标定解码值,其中所述标定格雷码投影图案组中的每个图案及标定线移投影图案组中的每个图案由投影仪投影到棋盘格标定板后图像采集设备采集到的;根据接收到的全白图案,确定所述全白图案中的棋盘格标定板图案的每个角点,其中所述全白图案为投影仪投影全白的图案到棋盘格标定板上后,图像采集设备采集对应的图案,将采集到的图案作为全白图案发送给电子设备的;根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系,及所述每个角点在所述投影仪坐标系中的每个第一位置;根据每个角点在所述投影仪坐标系中的每个第一位置、所述每个角点在世界坐标系中的每个第二位置及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述投影仪坐标系与所述世界坐标系的第一对应关系,及所述图像采集设备坐标系与所述世界坐标系的第二对应关系,标定投影仪与图像采集设备,并保存图像采集设备与投影仪的标定结果。
16.如权利要求15所述的装置,其特征在于,所述保存模块,具体用于根据所述行标定解码值和所述列标定解码值,确定所述投影仪坐标系;在所述行标定解码值和所述列标定解码值中,确定所述每个角点对应的行标定解码值和列标定解码值;根据所述每个角点对应的行标定解码值和列标定解码值,确定所述每个角点在所述投影仪坐标系中的第一位置。
17.如权利要求15或16所述的装置,其特征在于,所述保存模块,具体用于根据所述每个角点,及预设的邻域范围,确定所述每个角点对应的所述全白图案中的棋盘格标定板图案的邻域范围内的每个像素点;在所述行标定解码值和所述列标定解码值中,确定所述每个像素点对应的行标定解码值和列标定解码值;根据所述每个像素点对应的行标定解码值和列标定解码值,确定每个像素点在所述投影仪坐标系中的每个第一位置;根据每个像素点在所述投影仪坐标系中的每个第一位置,及所述每个像素点在图像采集设备坐标系中的每个第三位置,确定投影仪坐标系及图像采集设备坐标系的第三对应关系;根据所述投影仪坐标系及图像采集设备坐标系的第三对应关系,及所述每个角点在图像采集设备坐标系中的每个第三位置,确定所述每个角点在所述投影坐标系中的每个第一位置。
CN201710122969.XA 2017-03-03 2017-03-03 一种三维测量方法及装置 Active CN106979757B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710122969.XA CN106979757B (zh) 2017-03-03 2017-03-03 一种三维测量方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710122969.XA CN106979757B (zh) 2017-03-03 2017-03-03 一种三维测量方法及装置

Publications (2)

Publication Number Publication Date
CN106979757A true CN106979757A (zh) 2017-07-25
CN106979757B CN106979757B (zh) 2019-03-26

Family

ID=59337940

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710122969.XA Active CN106979757B (zh) 2017-03-03 2017-03-03 一种三维测量方法及装置

Country Status (1)

Country Link
CN (1) CN106979757B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112414326A (zh) * 2020-11-10 2021-02-26 浙江华睿科技有限公司 物体表面平整度的检测方法、装置、电子装置和存储介质
CN112729166A (zh) * 2021-01-04 2021-04-30 熵智科技(深圳)有限公司 结构光编码方法、编解码方法、装置、计算机设备及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101975558A (zh) * 2010-09-03 2011-02-16 东南大学 基于彩色光栅投影的快速三维测量方法
CN103345768A (zh) * 2013-07-08 2013-10-09 苏州江奥光电科技有限公司 一种单帧结构光图案编码方法
CN103697815A (zh) * 2014-01-15 2014-04-02 西安电子科技大学 基于相位编码的混频结构光三维信息获取方法
CN104197861A (zh) * 2014-08-25 2014-12-10 深圳大学 基于结构光灰度向量的三维数字成像方法
CN104315996A (zh) * 2014-10-20 2015-01-28 四川大学 用二进制编码策略实现傅里叶变换轮廓术的方法
US20160065945A1 (en) * 2013-04-12 2016-03-03 The Trustees Of Columbia University In The City Of New York Systems, methods, and media for generating structured light
CN106091984A (zh) * 2016-06-06 2016-11-09 中国人民解放军信息工程大学 一种基于线激光的三维点云数据获取方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101975558A (zh) * 2010-09-03 2011-02-16 东南大学 基于彩色光栅投影的快速三维测量方法
US20160065945A1 (en) * 2013-04-12 2016-03-03 The Trustees Of Columbia University In The City Of New York Systems, methods, and media for generating structured light
CN103345768A (zh) * 2013-07-08 2013-10-09 苏州江奥光电科技有限公司 一种单帧结构光图案编码方法
CN103697815A (zh) * 2014-01-15 2014-04-02 西安电子科技大学 基于相位编码的混频结构光三维信息获取方法
CN104197861A (zh) * 2014-08-25 2014-12-10 深圳大学 基于结构光灰度向量的三维数字成像方法
CN104315996A (zh) * 2014-10-20 2015-01-28 四川大学 用二进制编码策略实现傅里叶变换轮廓术的方法
CN106091984A (zh) * 2016-06-06 2016-11-09 中国人民解放军信息工程大学 一种基于线激光的三维点云数据获取方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112414326A (zh) * 2020-11-10 2021-02-26 浙江华睿科技有限公司 物体表面平整度的检测方法、装置、电子装置和存储介质
CN112414326B (zh) * 2020-11-10 2022-05-20 浙江华睿科技股份有限公司 物体表面平整度的检测方法、装置、电子装置和存储介质
CN112729166A (zh) * 2021-01-04 2021-04-30 熵智科技(深圳)有限公司 结构光编码方法、编解码方法、装置、计算机设备及介质
CN112729166B (zh) * 2021-01-04 2022-03-11 熵智科技(深圳)有限公司 结构光编码方法、编解码方法、装置、计算机设备及介质

Also Published As

Publication number Publication date
CN106979757B (zh) 2019-03-26

Similar Documents

Publication Publication Date Title
CN104200086B (zh) 宽基线可见光相机位姿估计方法
CN102369413B (zh) 用于确定第一和第二成像设备相对位置的方法及设备
CN106991702A (zh) 一种投影仪标定方法及装置
CN103383773B (zh) 一种动态提取图像控制点的遥感卫星图像自动正射纠正的框架和方法
CN107830846A (zh) 一种利用无人机和卷积神经网络测量通信塔天线角度方法
CN102368810B (zh) 一种半自动化对齐的视频融合系统和方法
CN106441138A (zh) 基于视觉测量的变形监测方法
CN106576159B (zh) 一种获取深度信息的拍照设备和方法
CN108734744A (zh) 一种基于全站仪的远距离大视场双目标定方法
CN106875444A (zh) 一种目标物定位方法及装置
CN106600647A (zh) 一种双目视觉多线投影结构光标定方法
CN107167093A (zh) 一种激光线扫描与阴影莫尔的复合式测量系统及测量方法
CN102831601A (zh) 基于联合相似性测度和自适应支持权重的立体匹配方法
CN103247045A (zh) 一种从多视图中得到人造场景主方向及图像边缘的方法
CN108225216A (zh) 结构光系统标定方法及装置、结构光系统及移动设备
CN110111248A (zh) 一种基于特征点的图像拼接方法、虚拟现实系统、照相机
CN108063940B (zh) 一种人眼跟踪裸眼3d显示系统的校正系统和方法
CN104778869A (zh) 即时更新三维可视化教学系统及其建立方法
CN103593869B (zh) 一种扫描设备及其图像显示方法
CN107862712A (zh) 尺寸数据确定方法、装置、存储介质及处理器
CN105608703A (zh) 一种变电站智能巡检机器人的电流互感器油位检测方法
CN103389074A (zh) 一种多尺度景象匹配区的选取方法
CN111161358A (zh) 一种用于结构光深度测量的相机标定方法和装置
CN107346040A (zh) 裸眼3d显示设备的光栅参数的确定方法、装置及电子设备
CN105491315B (zh) 一种投影仪伽马校正方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: C10, No. 1199 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province

Patentee after: Zhejiang Huarui Technology Co.,Ltd.

Address before: C10, No. 1199 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province

Patentee before: ZHEJIANG HUARAY TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder