CN110276810B - 一种结构光散斑编码图案的生成方法 - Google Patents

一种结构光散斑编码图案的生成方法 Download PDF

Info

Publication number
CN110276810B
CN110276810B CN201810211623.1A CN201810211623A CN110276810B CN 110276810 B CN110276810 B CN 110276810B CN 201810211623 A CN201810211623 A CN 201810211623A CN 110276810 B CN110276810 B CN 110276810B
Authority
CN
China
Prior art keywords
speckle
matrix
code word
checkerboard
structured light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810211623.1A
Other languages
English (en)
Other versions
CN110276810A (zh
Inventor
葛晨阳
邓鹏超
谢艳梅
姚慧敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rgbdsense Information Technology Ltd
Original Assignee
Rgbdsense Information Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rgbdsense Information Technology Ltd filed Critical Rgbdsense Information Technology Ltd
Priority to CN201810211623.1A priority Critical patent/CN110276810B/zh
Publication of CN110276810A publication Critical patent/CN110276810A/zh
Application granted granted Critical
Publication of CN110276810B publication Critical patent/CN110276810B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/008Vector quantisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种结构光散斑编码图案的生成方法,包括:选取棋盘格作为基础图案;根据线性反馈移位寄存器生成伪随机序列,并生成相应的伪随机矩阵;根据伪随机矩阵规则,填充所选棋盘格图案中待填充的棋格,将伪随机矩阵重复映射到棋盘格图案中,生成方格码字矩阵;用散斑替代方格码字矩阵中的方格码字,生成散斑码字矩阵;对散斑码字矩阵进行旋转、码字对齐、拼接和周期性延拓,生成结构光散斑编码图案。本发明利用散斑码字代替符号码字,可以减小每个码字的复杂度、码字块的大小,可以改善符号结构光对微小物体的识别能力,同时,利用本发明提出的结构光散斑编码图案进行深度感知,具有较高的测量精度和较好的鲁棒性。

Description

一种结构光散斑编码图案的生成方法
技术领域
本发明涉及计算机视觉、深度感知和三维重建技术领域,具体涉及主动立体视觉中所投射的用于标记空间的一种结构光编码方法,尤其涉及一种结构光散斑编码图案的生成方法。
背景技术
结构光是一种基于立体视觉重建目标的主动式光学测量技术,通常由红外投射器和红外相机利用三角原理获得深度信息。和其它提取深度信息设备相比,如激光测距仪及声纳测距装置,结构光系统在精度、价格及速度方面具有潜在优势,可广泛用于三维空间测量、深度检测及三维表面恢复。
基于符号阵列的编码结构光技术能较为准确的获取深度信息,还具有不受环境光影响、算法简单、可靠性高等优势,同时符号阵列的空间编码所具有的全局唯一性,使符号阵列的编码结构光技术非常适用于动态场景。但是符号阵列的编码结构光技术在码字选取时,存在码字复杂、单一码字占有像素点数较多的问题,当较小的物体不能被一个完整码字覆盖时,对该物体进行识别时会产生无匹配,使该技术在识别部分较细小物体上存在困难。随机散斑的编码结构光适合块匹配方式实时处理,但存在匹配块大、难以实现误匹配的自校正功能。
发明内容
针对以上不足,本发明提出一种结构光散斑编码图案的生成方法,利用散斑替代码字,形成散斑码字矩阵,并通过翻转、拼接以及周期延拓生成结构光散斑编码图案,可对误匹配进行自校正纠错和对较细小物体进行有效识别。
一种结构光散斑编码图案的生成方法,包括如下步骤:
S100:选取棋盘格作为基础图案;
S200:根据线性反馈移位寄存器生成伪随机序列,并生成相应的伪随机矩阵;
S300:根据伪随机矩阵规则,填充所选棋盘格图案中待填充的棋格,将伪随机矩阵重复映射到棋盘格图案中,生成方格码字矩阵;
S400:用散斑替代方格码字矩阵中的方格码字,生成散斑码字矩阵;
S500:对散斑码字矩阵进行翻转、码字对齐、拼接和周期延拓,生成结构光散斑编码图案;
可选的,所述棋盘格内的棋格按照黑白间隔的方式排列,两相邻同色棋格之间的棋格为待填充棋格;
可选的,所述棋盘格中的一个码字包括1个白色棋格、4个黑色棋格和4个待填充棋格,其中,所述白色棋格为码字中心;
可选的,所述伪随机序列的特征多项式可表示为:
Figure BDA0001597107330000021
其中,c0=cn=1,c1,c2……,cn-1表示该多项式生成的线性移位寄存器反馈线路的连接状态,x1,x2......,xn表示第1到第n级寄存器的状态,且x∈{0,1};
可选的,所述伪随机序列表示为:{ak}=000111101011001000111101011001...,
所述伪随机矩阵表示为:
Figure BDA0001597107330000031
可选的,所述伪随机矩阵中的元素与所述棋盘格中待填充的棋格一一对应,其中,1代表将该待填充棋格置为白色,0代表将该待填充棋格置为黑色;
可选的,所述方格码字矩阵中的黑色方格用散斑点代替,白色方格作为黑色背景点;
可选的,所述S500包括如下步骤:
S501:将所述步骤S400中生成的散斑码字矩阵分为2个单独的矩阵,并分别上下翻转,并对码字进行对齐处理;
S502:将所述步骤S501中经处理得到的散斑码字矩阵分别拼接到原斑码字矩阵的左右两侧,形成较大尺寸的散斑码字矩阵;
S503:将所生成的较大尺寸的散斑码字矩阵进行周期延拓,最后生成结构光散斑编码图案;
可选的,所述对码字进行对齐是指将分割后的矩阵上下翻转后,把最后一行的矩阵移到第一行;
可选的,所述周期延拓是指将所述较大尺寸的散斑码字矩阵按照所述步骤S501、S502的方式重复进行操作。
相比于现有技术,本发明技术方案带来的技术效果为:
1、通过散斑码字替代符号码字,可以减小每个码字的复杂度和码字块的大小,可以改善符号结构光对微小物体的识别能力;
2、利用本发明技术方案生成的结构光散斑编码图案进行深度感知,具有较高的测量精度和较好的鲁棒性。
附图说明
图1是本发明实施例的一种结构光散斑编码图案的生成方法流程图;
图2是本发明实施例的初始棋盘格示意图;
图3是本发明实施例的伪随机序列的线性反馈移位寄存器结构示意图;
图4是本发明实施例的伪随机矩阵映射到待填充棋格的示意图;
图5是本发明实施例的散斑码字矩阵生成示意图;
图6是本发明实施例的翻转、周期性延拓得到散斑编码图案的示意图;
图7是本发明实施例最后得到的结构光散斑编码图案示意图;
图8(a)是本发明实施例得到的结构光散斑编码图案投射示意图;
图8(b)是图8(a)经抽象处理后的结构光散斑编码图案的示意图。
具体实施方式
本发明实施例用散斑点替代棋盘格中的每一个码字棋格,形成散斑码字矩阵,最后通过对散斑码字矩阵旋转、拼接以及周期延拓生成结构光散斑编码图案。利用本法明的技术方案可以减小每个码字的复杂度和码字块的大小,并改善符号结构光对微小物体的识别能力;其次,利用本发明得到的结构光散斑编码图案进行深度感知,具有较高的测量精度和较好的鲁棒性。
下面,结合实施例和附图对本发明的技术方案进行详细说明。
如图1所示,本发明实施例提供一种结构光散斑编码图案生成方法,具体包括如下步骤:
S100:选取棋盘格图案作为基础图案;
S200:根据线性反馈移位寄存器生成伪随机序列,并生成相应的伪随机矩阵;
S300:根据伪随机矩阵规则,填充所选棋盘格图案中待填充的棋格,将伪随机矩阵重复映射到棋盘格图案中,生成方格码字矩阵;
S400:用散斑替代方格码字矩阵中的每一个方格;用散斑替代方格码字,生成散斑码字矩阵;
S500:对散斑码字矩阵进行旋转、拼接,生成较大尺寸的散斑码字矩阵,再进行周期性延拓,最后生成结构光散斑编码图案。
下面结合图1-图8(b)对本发明的具体实施方案进行描述。
一种结构光散斑编码图案的生成方法,包括如下步骤:
S100:选取棋盘格作为基础图案;
在本实施例中,选用棋盘格作为基础图案,具体如图2所示。图案上每个棋盘格内都有一个白色或者黑色的棋格,并且按照黑白间隔的方式周期性排列,两相邻黑色棋格之间或两相邻白色棋格之间的棋格为待填充棋格。
在本实施例所示的棋盘格图案上,一个码字包括1个白色棋格、4个黑色棋格和4个待填充棋格。其中,所示每一个白色棋格表示一个编码码字的中心。
需要本领域技术人员理解的是,本实施例所示棋盘格图案具有严格的周期性并且抗干扰能力强。
S200:根据线性反馈移位寄存器生成伪随机序列,并生成相应的伪随机矩阵;
在本实施例中,用一个2元4阶的特征多项式来形成一个线性移位寄存器,n阶伪随机序列的特征多项式可表示为:
Figure BDA0001597107330000061
其中,c0=cn=1,c1,c2……,cn-1表示该多项式生成的线性移位寄存器反馈线路的连接状态,x1,x2......,Xn表示第1到第n级寄存器的状态,x∈{0,1},该伪随机序列的周期为:
p=2n-1
为生成2元4阶的伪随机序列,本实施例选择本原多项式为:
f(x)=x4+x+1
进一步地,利用上述本原多项式构成线性反馈移位寄存器,如图3所示。
其中,设初始状态a3a2a1a0=1000,由图3所示线性反馈移位寄存器生成周期为p的伪随机序列,如下式:
{ak}=000111101011001000111101011001...
在序列{ak}的一个周期内,每个4阶的子序列只出现一次,将序列{ak}一个周期内的4阶子序列全部罗列后可以得到下面的伪随机矩阵,矩阵中每个4位2进制子序列都是唯一:
Figure BDA0001597107330000071
S300:根据伪随机矩阵规则,填充棋盘格图案中待填充的棋格,将矩阵重复映射的棋盘格图案,生成方格码字矩阵;
如图4所示,本实施例将伪随机矩阵重复映射到棋盘格图案中,矩阵中的元素与棋盘格中待填充的棋格一一对应,其中,1代表将该棋格置为白色,0代表将该棋格置为黑色,映射完成后,生成一个没有重复图案的方格码字矩阵。
S400:用散斑替代方格码字矩阵中的方格码字,生成散斑码字矩阵;
在具体实施例中,若采用方格来表示码字属于符号结构光的方式,由于对码字识别的需求,需要将每个码字的中心亮点扩大(如将方格码字中的每个白棋格码字扩大3倍),以便于区分相邻码字,这会造成将原本只占有4个方格的码字扩大到16个方格,码字的扩大严重影响了对于微小物体的检测,因为对于微小物体很难被完整的码字所覆盖,导致无匹配的产生。
为了提高符号阵列结构光编码对微小物体的识别能力,本发明实施例采用散斑点来替代方格码字,具体如图5所示:用散斑点来代替方格码字矩阵中的黑色方格,将白色方格作为黑色背景点,从而生成散斑码字矩阵。
S500:对散斑码字矩阵进行翻转、码字对齐、拼接和周期性延拓,生成结构光散斑编码图案;
在本实施例中,步骤S400生成的散斑码字矩阵虽然满足每个码字完全不重复,但是矩阵的长度太短,不足以满足深度感知中水平搜索的范围需求,因此,需要对所生成的散斑码字矩阵进行旋转、拼接,进而生成较大尺寸的散斑码字矩阵,再进行周期性延拓,最后生成结构光散斑编码图案。
图6示出了本实施例中的散斑码字矩阵经翻转、周期性延拓得到散斑编码图案的过程,具体步骤如下:
S501:把步骤S400生成的散斑码字矩阵分割为两个单独的矩阵,并分别上下翻转,并对码字进行对齐处理。
在本实施例中,方格码字矩阵中的白色方格为每个码字的中心,如图中白色圆框所示,如果直接将上下翻转后的矩阵拼接到原矩阵上,会引起拼接前后的码字中心错行,因此上下翻转之后,需要对码字进行对齐处理,具体如图中黑色方框所示。
需要理解的是,本实施例中所述对码字进行对齐是指将分割后的散斑码字矩阵上下翻转后,把最后一行的矩阵移到第一行。
S502:将步骤S501中经处理得到的散斑码字矩阵分别拼接到原散斑码字矩阵的左右两侧,形成较大尺寸的散斑码字矩阵;
S503:将步骤S502中所生成的较大尺寸的散斑码字矩阵进行周期延拓,最后生成结构光散斑编码图案。
在本实施例中,需要重复执行步骤S501和S502,将所生成的较大尺寸的散斑码字矩阵进行周期性延拓,最后生成结构光散斑编码图案,具体如图7所示。
进一步地,所述周期性延拓是指将所形成的较大尺寸的散斑码字矩阵按照上述步骤S501和S502中所述的方式重复操作。
图8(a)为本实施例得到的结构光散斑编码图案投射示意图。将图7所示的散斑编码图案周期性重复将得到任意大小的编码图案,将该编码图案用于三维深度映射时,将其旋转成为水平方向码字周期性排列而垂直方向码字在一定范围内互不相同,编码图案经激光投射器以一定的角度投射出,从而确保在水平方向重复的码字中心落在不同垂直坐标上。从图8(a)中可以看出码字A2的中心落在801a所在的垂直坐标上,而与其相邻的两个相同码字A1和A3的中心都没有落在801a的垂直坐标上,而整条801a横线所覆盖的码字图案在一定范围内都没有与A2相同的码字出现,因此该图案符合三角测距原理。
图8(b)抽象表示了图8(a)展示的编码图像符合三角测距的原因。图中每种字母代表一种码字,当编码图案中的码字水平方向上逐一重复,竖直方向上一定范围内没有重复的时候,将该图案旋转一定的角度,则可以看出在同一水平方向上不会出现相同的码字。801b、802b、803b分别代表三个不同的随机选取的垂直坐标,三条横线穿过该编码图案时,相同的字母并没有落在相同的横线上。
通过上述方案,可以获得一个满足一定大小窗口唯一性分布要求的结构光散斑编码图案。本发明提出的利用散斑码字代替符号码字,以减小每个码字的复杂度、码字块的大小,用来改善符号结构光对微小物体的识别能力,同时以编码的方式生成结构光散斑编码图案,具备码字的识别能力,以及码字的纠错功能。通过编码改善了散斑结构光深度感知技术的抗干扰性,利用本发明提出的结构光散斑编码图案进行深度感知,具有较高的测量精度和较好的鲁棒性。
应当理解,以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施方式仅限于此,对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单的推演或替换,都应当视为属于本发明由所提交的权利要求书确定专利保护范围。

Claims (5)

1.一种结构光散斑编码图案的生成方法,包括如下步骤:
S100:选取棋盘格作为基础图案;
S200:根据线性反馈移位寄存器生成伪随机序列,并生成相应的伪随机矩阵;
S300:根据伪随机矩阵规则,填充所选棋盘格图案中待填充的棋格,将伪随机矩阵重复映射到棋盘格图案中,生成方格码字矩阵;
S400:用散斑替代方格码字矩阵中的方格码字,生成散斑码字矩阵;
S500:对散斑码字矩阵进行翻转、码字对齐、拼接和周期性延拓,生成结构光散斑编码图案;其中,
步骤S500包括如下步骤:
S501:将所述步骤S400中生成的散斑码字矩阵分为2个单独的矩阵,并分别上下翻转,并对码字进行对齐处理;所述对码字进行对齐是指将分割后的散斑码字矩阵上下翻转后,把最后一行的矩阵移到第一行;
S502:将所述步骤S501中经处理得到的散斑码字矩阵分别拼接到原散斑码字矩阵的左右两侧,形成较大尺寸的散斑码字矩阵;
S503:将所生成的较大尺寸的散斑码字矩阵进行周期延拓,最后生成结构光散斑编码图案;所述周期性延拓是指将所形成的较大尺寸的散斑码字矩阵按照步骤S501和S502中所述的方式重复操作。
2.根据权利要求1所述的生成方法,其特征在于,所述棋盘格内的棋格按照黑白间隔的方式排列,两相邻同色棋格之间的棋格为待填充棋格。
3.根据权利要求1或2所述的生成方法,其特征在于,所述棋盘格中的一个码字包括1个白色棋格、4个黑色棋格和4个待填充棋格,其中,所述白色棋格为码字中心。
4.根据权利要求1所述的生成方法,其特征在于,所述伪随机序列的特征多项式表示为:
,其中,表示该多项式生成的线性移位寄存器反馈线路的连接状态,表示第1到第n级寄存器的状态,且
5.根据权利要求1所述的生成方法,其特征在于,所述方格码字矩阵中的黑色方格用散斑点代替,白色方格作为黑色背景点。
CN201810211623.1A 2018-03-14 2018-03-14 一种结构光散斑编码图案的生成方法 Active CN110276810B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810211623.1A CN110276810B (zh) 2018-03-14 2018-03-14 一种结构光散斑编码图案的生成方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810211623.1A CN110276810B (zh) 2018-03-14 2018-03-14 一种结构光散斑编码图案的生成方法

Publications (2)

Publication Number Publication Date
CN110276810A CN110276810A (zh) 2019-09-24
CN110276810B true CN110276810B (zh) 2023-04-07

Family

ID=67957777

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810211623.1A Active CN110276810B (zh) 2018-03-14 2018-03-14 一种结构光散斑编码图案的生成方法

Country Status (1)

Country Link
CN (1) CN110276810B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111739106B (zh) * 2020-08-12 2020-12-25 成都极米科技股份有限公司 角点编码方法、标定方法、装置、电子设备和存储介质
CN113188453B (zh) * 2021-04-30 2022-11-01 东北电力大学 一种用于膜结构非接触位移、应变测量的散斑产生装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9754376B1 (en) * 2016-03-18 2017-09-05 Chenyang Ge Method and apparatus for generating a structured light speckle encoded pattern

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104809459B (zh) * 2015-04-21 2018-04-27 西安交通大学 一种符号阵列结构光码字校正方法
CN107657646B (zh) * 2017-09-22 2021-05-07 武汉中观自动化科技有限公司 一种半伪随机编码图案及其生成方法和系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9754376B1 (en) * 2016-03-18 2017-09-05 Chenyang Ge Method and apparatus for generating a structured light speckle encoded pattern

Also Published As

Publication number Publication date
CN110276810A (zh) 2019-09-24

Similar Documents

Publication Publication Date Title
CN106796661B (zh) 投影光图案的系统、方法和计算机程序产品
CN108225216B (zh) 结构光系统标定方法及装置、结构光系统及移动设备
Lim Optimized projection pattern supplementing stereo systems
CN106225719B (zh) 一种符号阵列结构光编码图案的生成方法及装置
EP3158504B1 (en) Coded light pattern having hermitian symmetry
CN110738273B (zh) 图像特征点的匹配方法、装置、设备及存储介质
CN111981982B (zh) 一种基于加权sfm算法的多向合作靶标光学测量方法
CN110276810B (zh) 一种结构光散斑编码图案的生成方法
Petriu et al. Object recognition using pseudo-random color encoded structured light
JP2015184056A (ja) 計測装置、方法及びプログラム
CN116250017A (zh) 用于使用结构化光直接恢复场景中的平面表面的系统、方法和介质
US10818030B2 (en) Three-dimensional measurement apparatus and three-dimensional measurement method
CN110044927B (zh) 一种空间编码光场对曲面玻璃表面缺陷的检测方法
CN108895979B (zh) 线段编码的结构光深度获取方法
CN110599588A (zh) 三维流场内粒子重构方法及装置、电子设备及存储介质
CN111947601B (zh) 一种灰度伪随机编码结构光条纹的投影解算方法
CN115880448B (zh) 基于双目成像的三维测量方法及装置
WO2022254854A1 (ja) 3次元計測装置
CN110796708B (zh) 基于Gold矩阵投影的投影仪的标定方法
Liang et al. A structured light encoding method for M-array technique
CN116745812A (zh) 提供校准数据以校准相机的方法、校准相机的方法、制造至少一个预定义点对称区域的方法和设备
Adán et al. Disordered patterns projection for 3D motion recovering
KR20130028594A (ko) 구조광 생성 방법, 그 장치 및 그 장치를 이용한 모션 인식 장치
CN111783877A (zh) 基于单帧网格复合编码模板结构光的深度信息测量方法
CN110428458A (zh) 基于单帧密集形状编码的深度信息测量方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant