CN103697815A - 基于相位编码的混频结构光三维信息获取方法 - Google Patents

基于相位编码的混频结构光三维信息获取方法 Download PDF

Info

Publication number
CN103697815A
CN103697815A CN201410018554.4A CN201410018554A CN103697815A CN 103697815 A CN103697815 A CN 103697815A CN 201410018554 A CN201410018554 A CN 201410018554A CN 103697815 A CN103697815 A CN 103697815A
Authority
CN
China
Prior art keywords
pixel
value
color
phase
video camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410018554.4A
Other languages
English (en)
Other versions
CN103697815B (zh
Inventor
石光明
高山
李甫
石悦鑫
李芹
杨莉莉
李若岱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN201410018554.4A priority Critical patent/CN103697815B/zh
Publication of CN103697815A publication Critical patent/CN103697815A/zh
Application granted granted Critical
Publication of CN103697815B publication Critical patent/CN103697815B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于相位编码的混频结构光三维信息获取方法,主要解决现有三维信息获取方法测量精度低、空间分辨率低、耗时长的问题。其实现步骤为:设计包含两种频率信息且强度变化的双颜色条纹模板;用投影仪将其投射到待测物体上,用摄像机记录变形条纹图像;求解变形条纹图像的颜色相位分布和强度相位分布;根据颜色相位分布和强度相位分布,计算变形条纹图像中像素点的截断相位展开值;根据截断相位展开值确定像素点在投影模板中的匹配点;用三角测距原理及匹配点坐标,求出变形条纹图像中每个像素点的三维坐标值。本发明具有空间分辨率高、测量精度高、测量速度快的优点,可用于对动态物体的三维信息获取。

Description

基于相位编码的混频结构光三维信息获取方法
技术领域
本发明属于测量技术领域,特别涉及静态或动态物体的三维信息获取,可用于人机互动、虚拟现实、逆向工程、文物三维重建。
背景技术
随着科学与技术的飞速发展,物体三维信息的获取在很多应用领域都有着广泛的应用前景,如生产自动化、人机交互、医学诊断、逆向工程、数字化建模等。其中,结构光测量法作为一种非接触式的三维信息获取技术,因其实现简单、速度快和精度高等优点得到了广泛应用。
结构光三维测量方法的基本思想是利用结构光投影的几何关系来获得物体的三维信息。首先通过投影设备将编码的结构光模版投射到待测物体上,并使用摄像机记录下投影图像,将所拍图像与所投影的结构光模版进行匹配,找到匹配点后,利用投影点、匹配点及物体的三角关系求解目标物体的三维信息。现有技术中获得目标物体三维信息的方法,基于相位信息编码结构光的主要有相位轮廓测量法和傅里叶轮廓法,其中:
相位轮廓测量法,采用相位偏移算法求解相位信息,至少需要投影三幅图像,有着高精度、高分辨率的特点,但因需要投射多幅模版,只适于静态物体的三维信息获取,且因对摄像机及投影设备的同步性要求较高,操作困难。
傅里叶轮廓测量法,基于光栅相位同光强基频分量的线性关系,只需投影一幅图像,但因需要对傅里叶基频分量进行分离,故深度测量范围小,不适用于复杂的深度突变物体。
此外,上述两种方法均需进行截断相位的展开,而现有的二维相位展开方法耗时较长,同时因为噪声的干扰,相位展开结果并不十分可靠;若通过增加投影模版数量对截断相位的周期进行编码,则加大了时间成本,不利于动态物体的三维信息获取。
发明内容
本发明的目的在于针对上述已有技术的不足,提出一种基于相位编码的混频结构光三维信息获取方法,以在使用单幅模版、不增加设备复杂性的情况下,提高相位展开的速度,实现适用于动态目标物体的高精度、高分辨率的三维信息获取。
为实现上述目的,本发明的技术方案包括如下步骤:
(1)设计包含两种频率信息且强度变化的双颜色条纹模板P:
(1a)设定双颜色条纹模版P的颜色为红色和蓝色,设强度变化的周期为Ti,颜色变化的周期为Tc,且Ti和Tc为互质的整数;
(1b)将双颜色条纹模板P中第x行、第y列的像素点(x,y)处的红色分量灰度值标记为Pr(x,y),蓝色分量灰度值标记为Pb(x,y),并按下式进行赋值,构成双颜色条纹模板P:
P r ( x , y ) = C ( x , y ) + 1 2 P ( x , y ) P b ( x , y ) = - C ( x , y ) - 1 2 P ( x , y )
其中,x、y分别表示像素点(x,y)的行、列坐标,P(x,y)=a+bcos(2πf1y),a、b为常量,分别表示模板的背景深度和调制强度,
Figure BDA0000457414470000022
C(x,y)=sign(l(x,y)-l(x,y-1))),l(y)=cos(2πf2y),
Figure BDA0000457414470000023
sign(·)为取正负操作,用1表示正,-1表示负;
(2)将投影仪T与摄像机V水平放置,并使两者光轴平行,再用投影仪T将双颜色条纹模板P投射到三维物体O上,用摄像机V拍摄经待测物体O调制过的变形条纹图像U;
(3)将变形条纹图像U中灰度值大于10的像素点,标记为有效像素点(i,j),计算有效像素点(i,j)的颜色编码信息C(i,j)及强度编码信息I(i,j):
C ( i , j ) = 1 P r ( i , j ) ≥ P b ( i , j ) - 1 P b ( i , j ) > P r ( i , j ) I ( i , j ) = max ( P r ( i , j ) , P b ( i , j ) )
其中,i、j分别表示有效像素点(i,j)的行、列坐标,Pr(i,j),Pb(i,j)分别为有效像素点(i,j)的红色分量和蓝色分量的灰度值,C(i,j)为1表示红色,C(i,j)为-1表示蓝色;
(4)计算变形条纹图像U中第i行、第j列的有效像素点(i,j)的颜色积分值:
Tr ( i , j ) = Σ j ′ = start j ′ = j C ( i , j ′ )
其中,start为第i行第一个有效像素点的列坐值;
(5)将颜色积分值Tr(i,j)与波长为Tc的一维Gabor滤波器进行卷积,求取像素点(i,j)的颜色相位分布
Figure BDA0000457414470000032
(6)将强度编码信息I(i,j)与波长为Ti的一维Gabor滤波器进行卷积,求取像素点(i,j)的强度相位分布
Figure BDA0000457414470000033
(7)假定在深度为zR处存在虚拟参考平面R,根据空间几何关系,计算像素点(i,j)对应于虚拟参考平面R的参考颜色相位分布
Figure BDA0000457414470000034
及参考强度相位分布
Figure BDA0000457414470000035
其中, y R ( i , j ) = jΔd V - fb / z R - f tan ( θ V / 2 ) + f tan ( θ T / 2 ) Δd T , f为摄像机的焦距,b为摄像机V光心和投影仪T光心的水平距离,θV为摄像机的水平视场角,θT为投影仪的水平视场角,ΔdV为摄像机单个像素所代表的实际宽度,其值为
Figure BDA0000457414470000038
NV为图像U的总列数,ΔdT为投影仪模版中单个像素所代表的实际宽度,其值为
Figure BDA0000457414470000039
NT为模版P的总列数,
Figure BDA00004574144700000310
(8)计算像素点(i,j)的强度截断相位差
Figure BDA00004574144700000311
和颜色截断相位差
Figure BDA00004574144700000312
Figure BDA00004574144700000313
(9)根据空间几何关系及余数定理,利用像素点的强度截断相位差
Figure BDA00004574144700000314
(i,j)和颜色截断相位差
Figure BDA00004574144700000315
求取像素点(i,j)的截断相位展开值Δφ(i,j);
(10)利用像素点(i,j)的截断相位展开值Δφ(i,j),求取像素点(i,j)在投影模版P中的匹配点(x(i,j),y(i,j)),其中x(i,j)和y(i,j)分别表示匹配点在投影模板P中的行、列坐标值;
(11)根据三角测距原理,利用像素点(i,j)与匹配点(x(i,j),y(i,j))的空间关系,计算待测物体的三维信息值。
本发明与现有技术相比具有以下优点:
第一,本发明采用基于相位信息的混频结构光模版,依据相位信息进行匹配,可达到亚像素级的匹配精度;
第二,本发明在不增加设备复杂性且仅使用一幅投影模版的情况下,实现了相位的快速展开,可用于实时三维测量;
第三,本发明对变形条纹图像中的任意像素点均可实现匹配,且匹配过程不依赖于特征点提取,有效地提高了三维测量的鲁棒性和空间分辨率。
附图说明
图1为本发明的实现流程图;
图2为本发明设计的双颜色条纹模板图;
图3为本发明使用的系统框图;
图4为本发明获取的颜色相位分布图及强度相位分布图;
图5为本发明获得的截断相位展开图;
图6为本发明中进行三维测量时使用的空间几何关系图;
图7为本发明获得的待测物体的三维重构图。
具体实施方式
本发明提出了一种基于相位编码的混频结构光三维信息获取方法,以在不增加设备复杂性的条件,实现适用于动态目标物体的高精度、高分辨率的三维信息获取。以下参照附图对本发明作进一步详细描述。
参照图1,本发明的具体实现步骤如下:
步骤1,设计包含两种频率信息且强度变化的双颜色条纹模板P。
(1a)设定双颜色条纹模版P的颜色为红色和蓝色,设强度变化的周期为Ti,颜色变化的周期为Tc,且Ti和Tc为互质的整数,本实例中,Ti=11,Tc=8;
(1b)将双颜色条纹模板P中第x行、第y列的像素点(x,y)处的红色分量灰度值标记为Pr(x,y),蓝色分量灰度值标记为Pb(x,y),并按下式进行赋值,构成双颜色条纹模板P,如图2所示:
P r ( x , y ) = C ( x , y ) + 1 2 P ( x , y ) P b ( x , y ) = - C ( x , y ) - 1 2 P ( x , y ) ,
其中,x、y分别表示像素点(x,y)的行、列坐标,P(x,y)=a+bcos(2πf1y),a、b为常量,分别表示模板的背景深度和调制强度,
Figure BDA0000457414470000052
C(x,y)=sign(l(x,y)-l(x,y-1))),l(y)=cos(2πf2y),sign(·)为取正负操作,用1表示正,-1表示负。
步骤2,拍摄待测物体O调制过的变形条纹图像U。
参照图3,拍摄时,将投影仪T与摄像机V水平放置,并使两者光轴平行,再用投影仪T将双颜色条纹模板P投射到待测物体O上,使待测物体O对双颜色条纹模板P进行调制,用摄像机V拍摄待测物体O调制过的变形条纹图像U。
步骤3,将变形条纹图像U中灰度值大于10的像素点,标记为有效像素点(i,j),计算有效像素点(i,j)的颜色编码信息C(i,j)及强度编码信息I(i,j):
C ( i , j ) = 1 P r ( i , j ) ≥ P b ( i , j ) - 1 P b ( i , j ) > P r ( i , j ) I ( i , j ) = max ( P r ( i , j ) , P b ( i , j ) )
其中,i、j分别表示有效像素点(i,j)的行、列坐标,Pr(i,j),Pb(i,j)分别为有效像素点(i,j)的红色分量和蓝色分量的灰度值,C(i,j)为1表示红色,C(i,j)为-1表示蓝色。
步骤4,计算变形条纹图像U中第i行、第j列的有效像素点(i,j)的颜色积分值:
Tr ( i , j ) = Σ j ′ = start j ′ = j C ( i , j ′ )
其中,start为第i行第一个有效像素点的列坐值。
步骤5,求取像素点(i,j)的颜色相位分布
Figure BDA0000457414470000056
(5a)将颜色积分值Tr(i,j)与波长为Tc的一维Gabor滤波器Gc(j,Tc)进行卷积,得到像素点(i,j)的响应值:
G c ( Tr ( i , j ) ) = G c ( j , T c ) ⊗ Tr ( i , j ) ,
其中,
Figure BDA0000457414470000062
li为复数虚部的单位,σ为高斯函数的标准差,取值为1;
(5b)求取像素点(i,j)的颜色相位分布
Figure BDA0000457414470000063
Figure BDA0000457414470000064
其中,imag(·)为取复数的虚部操作,real(·)为取复数的实部操作。
步骤6,求取像素点(i,j)的强度相位分布
Figure BDA00004574144700000612
(6a)将强度编码信息I(i,j)与波长为Ti的一维Gabor滤波器Gi(j,Ti)进行卷积,得到像素点(i,j)的响应值:
G i ( I ( i , j ) ) = G i ( j , T i ) ⊗ I ( i , j ) ,
其中,
Figure BDA0000457414470000066
li为复数虚部的单位,σ为高斯函数的标准差,取值为1;
(6b)求取像素点(i,j)的强度相位分布值
Figure BDA0000457414470000068
按照步骤(5)和步骤(6)得到的颜色相位分布图和强度相位分布图,分别如图4(a)和4(b)所示。图4中像素点的灰度值表示相位值大小,灰度值从最大变化到最小表示相位从2π变化到0。
步骤7,假定在深度为zR处存在虚拟参考平面R,根据空间几何关系,计算像素点(i,j)对应于虚拟参考平面R的参考颜色相位分布
Figure BDA0000457414470000069
及参考强度相位分布
Figure BDA00004574144700000610
Figure BDA00004574144700000611
其中,yR(i,j)为中间变量,其值为:
y R ( i , j ) = jΔd V - fb / z R - f tan ( θ V / 2 ) + f tan ( θ T / 2 ) Δd T ,
f为摄像机的焦距,b为摄像机V光心和投影仪T光心的水平距离,θV为摄像机的水平视场角,θT为投影仪的水平视场角,ΔdV为单个摄像机像素所代表的实际宽度,其值为
Figure BDA0000457414470000072
NV为图像U的总列数,ΔdT为投影仪模版中单个像素所代表的实际宽度,其值为
Figure BDA0000457414470000073
NT为双颜色条纹模版P的总列数,
Figure BDA0000457414470000074
Tc为双颜色条纹模板P的颜色变化周期。
步骤8,计算像素点(i,j)的强度截断相位差
Figure BDA0000457414470000075
和颜色截断相位差
Figure BDA0000457414470000076
其中,
Figure BDA0000457414470000078
为参考颜色相位分布,
Figure BDA0000457414470000079
为参考强度相位分布,
Figure BDA00004574144700000710
为颜色相位分布,为强度相位分布。
步骤9,根据空间几何关系及余数定理,利用像素点的强度截断相位差
Figure BDA00004574144700000712
和颜色截断相位差
Figure BDA00004574144700000713
求取像素点(i,j)的截断相位展开值Δφ(i,j)。
(9a)计算相位展开参考值:Vic(ni,nc)=niTi-ncTc,其中,Tc、Ti分别为双颜色条纹模板P的颜色变化周期和强度变化周期,ni和nc均为整数,分别表示截断相位展开的强度周期和颜色周期,且nc∈[0,Ti-1],ni∈[0,Tc-1];
(9b)计算像素点(i,j)的相位展开中间值V(i,j):
Figure BDA00004574144700000714
(9c)根据相位展开参考值Vic(ni,nc),按照查表法确定相位展开中间值[V(i,j)]对应的ni值,标记为n(i,j),其中[·]表示四舍五入操作;
(9d)给定可信赖的误差最大值σ和前后两帧变形条纹图像所允许的最大相位展开值之差σφ,根据相位展开参考值Vic(ni,nc)及相位展开中间值V(i,j),判断像素点(i,j)是否为可信赖像素点:
若像素点(i,j)同时满足以下两式,则判为可信赖像素点:
| V ( i , j ) - [ V ( i , j ) ] | &le; &sigma; | &Delta; &phi; n ( i , j ) - &Delta; &phi; &prime; ( i , j ) | < &sigma; &phi; ,
其中,Δφn(i,j)为截断相位展开预估值,其值为
Figure BDA0000457414470000087
Δφ'(i,j)为前一帧变形条纹图像中像素点(i,j)处的截断相位展开值;
反之,像素点(i,j)为不可信赖像素点;
(9e)对可信赖像素点求取其截断相位展开值:Δφ(i,j)=Δφn(i,j);
(9f)对于不可信赖的像素点(i,j),统计其邻域的八个像素点中为可信赖像素点的个数,标记为r(i,j);
(9g)按照r(i,j)从大到小的顺序,根据像素点(i,j)的邻域信息,求解不可信赖的像素点(i,j)的截断相位展开值Δφ(i,j):
(9g1)对标记为不可信赖点的像素点(i,j),根据相位展开参考值Vic(ni,nc),按照查表法确定?
Figure BDA0000457414470000085
对应的ni值,分别标记为n1(i,j),n2(i,j),n3(i,j),n4(i,j),其中
Figure BDA0000457414470000086
分别表示向下取整、向上取整;
(9g2)以不可信赖的像素点(i,j)为中心,取5×5大小的窗;
(9g3)计算窗内所有可信赖像素点的截断相位展开值的中值Δφm
(9g4)对不可信赖的像素点(i,j),求取四个可能的截断相位展开值
Figure BDA0000457414470000082
其中m=1~4;
(9g5)计算不可信赖的像素点(i,j)的截断相位展开值:
其中, m &prime; = min m | &Delta;&phi; i m ( i , j ) - &Delta;&phi; m | .
按照步骤9得到的截断相位展开图如图5所示,图中灰度值大小表示截断相位展开值的大小。
步骤10,利用像素点(i,j)的截断相位展开值Δφ(i,j),求取像素点(i,j)在投影模版P中的匹配点(x(i,j),y(i,j)),其中x(i,j)和y(i,j)分别表示匹配点在投影模板P中的行、列坐标值。
参照图6,根据空间几何关系,可知:
x ( i , j ) = i y ( i , j ) = y R ( i , j ) + &Delta;&phi; ( i , j ) 2 &pi; T i
其中,i为像素点(i,j)的行坐标,yR(i,j)为中间变量,其值在步骤7中给出,Δφ(i,j)为像素点(i,j)的截断相位展开值,Ti为双颜色条纹模版P的强度变化周期。
步骤11,根据三角测距原理,利用像素点(i,j)与匹配点(x(i,j),y(i,j))的空间关系,计算待测物体的三维信息值。
根据三角测距原理,像素点(i,j)在待测物体上的对应点为H(i,j),其在世界坐标系下的三维坐标为:
H x ( i , j ) = ( j - N V / 2 ) &Delta;d V H y ( i , j ) = - ( i - M V / 2 ) &Delta;d Vi H z ( i , j ) = fb H x ( i , j ) - ( y ( i , j ) - N T / 2 ) &Delta;d T
其中,Hx(i,j),Hy(i,j),Hz(i,j)分别为待测物体在世界坐标系下沿x轴、y轴、z轴的三维坐标值,世界坐标系的原点选在摄像机的光心,x轴沿摄像机成像平面的水平方向,y轴沿摄像机成像平面的垂直方向,z轴与摄像机成像平面垂直,i、j分别为像素点(i,j)的行、列坐标,y(i,j)为匹配点(x(i,j),y(i,j))的列坐标,f为摄像机的焦距,b为摄像机V光心和投影仪T光心的水平距离,MV为变形条纹图像U的总行数,NV为变形条纹图像U的总列数,NT为模版P的总列数,ΔdVi为摄像机单个像素所代表的实际高度,其值为
Figure BDA0000457414470000093
θVi为摄像机的垂直视场角,ΔdV为摄像机单个像素所代表的实际宽度,ΔdT为投影仪模版中单个像素所代表的实际宽度。
利用上述步骤得到的待测物体的三维信息,对待测物体进行重构的效果图如图7所示,从图7中可以看到,本发明能获得高精度、高分辨率的三维信息,而且所需时间仅为相位轮廓测量法的几百分之一,可应用于动态目标的三维信息获取。

Claims (7)

1.一种基于相位编码的混频结构光三维信息获取方法,包括如下步骤:
(1)设计包含两种频率信息且强度变化的双颜色条纹模板P:
(1a)设定双颜色条纹模版P的颜色为红色和蓝色,设强度变化的周期为Ti,颜色变化的周期为Tc,且Ti和Tc为互质的整数;
(1b)将双颜色条纹模板P中第x行、第y列的像素点(x,y)处的红色分量灰度值标记为Pr(x,y),蓝色分量灰度值标记为Pb(x,y),并按下式进行赋值,构成双颜色条纹模板P:
P r ( x , y ) = C ( x , y ) + 1 2 P ( x , y ) P b ( x , y ) = - C ( x , y ) - 1 2 P ( x , y )
其中,x、y分别表示像素点(x,y)的行、列坐标,P(x,y)=a+bcos(2πf1y),a、b为常量,分别表示模板的背景深度和调制强度,
Figure FDA0000457414460000012
C(x,y)=sign(l(x,y)-l(x,y-1))),l(y)=cos(2πf2y),
Figure FDA0000457414460000013
sign(g)为取正负操作,用1表示正,-1表示负;
(2)将投影仪T与摄像机V水平放置,并使两者光轴平行,再用投影仪T将双颜色条纹模板P投射到三维物体O上,用摄像机V拍摄经待测物体O调制过的变形条纹图像U;
(3)将变形条纹图像U中灰度值大于10的像素点,标记为有效像素点(i,j),计算有效像素点(i,j)的颜色编码信息C(i,j)及强度编码信息I(i,j):
C ( i , j ) = 1 P r ( i , j ) &GreaterEqual; P b ( i , j ) - 1 P b ( i , j ) > P r ( i , j ) I ( i , j ) = max ( P r ( i , j ) , P b ( i , j ) )
其中,i、j分别表示有效像素点(i,j)的行、列坐标,Pr(i,j),Pb(i,j)分别为有效像素点(i,j)的红色分量和蓝色分量的灰度值,C(i,j)为1表示红色,C(i,j)为-1表示蓝色;
(4)计算变形条纹图像U中第i行、第j列的有效像素点(i,j)的颜色积分值:
Tr ( i , j ) = &Sigma; j &prime; = start j &prime; = j C ( i , j &prime; )
其中,start为第i行第一个有效像素点的列坐值;
(5)将颜色积分值Tr(i,j)与波长为Tc的一维Gabor滤波器进行卷积,求取像素点(i,j)的颜色相位分布
Figure FDA00004574144600000214
(6)将强度编码信息I(i,j)与波长为Ti的一维Gabor滤波器进行卷积,求取像素点(i,j)的强度相位分布
Figure FDA00004574144600000215
(7)假定在深度为zR处存在虚拟参考平面R,根据空间几何关系,计算像素点(i,j)对应于虚拟参考平面R的参考颜色相位分布
Figure FDA0000457414460000022
及参考强度相位分布
Figure FDA0000457414460000023
Figure FDA0000457414460000024
其中, y R ( i , j ) = j&Delta;d V - fb / z R - f tan ( &theta; V / 2 ) + f tan ( &theta; T / 2 ) &Delta;d T , f为摄像机的焦距,b为摄像机V光心和投影仪T光心的水平距离,θV为摄像机的水平视场角,θT为投影仪的水平视场角,ΔdV为摄像机单个像素所代表的实际宽度,其值为
Figure FDA0000457414460000026
NV为图像U的总列数,ΔdT为投影仪模版中单个像素所代表的实际宽度,其值为
Figure FDA0000457414460000027
NT为模版P的总列数,Tc为双颜色条纹模板P的颜色变化周期;
(8)计算像素点(i,j)的强度截断相位差
Figure FDA0000457414460000029
和颜色截断相位差
Figure FDA00004574144600000210
Figure FDA00004574144600000211
(9)根据空间几何关系及余数定理,利用像素点的强度截断相位差
Figure FDA00004574144600000212
和颜色截断相位差求取像素点(i,j)的截断相位展开值Δφ(i,j);
(10)利用像素点(i,j)的截断相位展开值Δφ(i,j),求取像素点(i,j)在投影模版P中的匹配点(x(i,j),y(i,j)),其中x(i,j)和y(i,j)分别表示匹配点在投影模板P中的行、列坐标值;
(11)根据三角测距原理,利用像素点(i,j)与匹配点(x(i,j),y(i,j))的空间关系,计算待测物体的三维信息值。
2.根据权利要求1所述的基于相位编码的混频结构光三维信息获取方法,其中步骤(5)所述的求取像素点(i,j)的颜色相位分布
Figure FDA0000457414460000031
按如下步骤进行:
(5a)将颜色积分值Tr(i,j)与波长为Tc的一维Gabor滤波器进行卷积,得到像素点(i,j)的响应值Gc(Tr(i,j));
(5b)计算像素点(i,j)的颜色相位分布
Figure FDA0000457414460000032
Figure FDA0000457414460000033
其中,imag(·)为取复数的虚部操作,real(·)为取复数的实部操作。
3.根据权利要求1所述的基于相位编码的混频结构光三维信息获取方法,其中步骤(6)所述的求取像素点(i,j)的强度相位分布
Figure FDA0000457414460000034
按如下步骤进行:
(6a)将强度编码信息I(i,j)与波长为Ti的一维Gabor滤波器进行卷积,得到像素点(i,j)的响应值Gi(I(i,j));
(6b)计算像素点(i,j)的强度相位分布
Figure FDA0000457414460000035
Figure FDA0000457414460000036
4.根据权利要求1所述的基于相位编码的混频结构光三维信息获取方法,其中步骤(9)所述的求取像素点(i,j)的截断相位展开值Δφ(i,j),按如下步骤进行:
(9a)计算相位展开参考值:Vic(ni,nc)=niTi-ncTc,其中,Tc、Ti分别为双颜色条纹模板P的颜色变化周期和强度变化周期,ni和nc均为整数,分别表示截断相位展开的强度周期和颜色周期,且nc∈[0,Ti-1],ni∈[0,Tc-1];
(9b)计算像素点(i,j)的相位展开中间值V(i,j):
Figure FDA0000457414460000041
(9c)根据相位展开参考值Vic(ni,nc),按照查表法确定相位展开中间值[V(i,j)]对应的ni值,标记为n(i,j),其中[·]表示四舍五入操作;
(9d)给定可信赖的误差最大值σ和前后两帧变形条纹图像所允许的最大相位展开值之差σφ,根据相位展开参考值Vic(ni,nc)及相位展开中间值V(i,j),判断像素点(i,j)是否为可信赖像素点:
若像素点(i,j)同时满足以下两式,则判为可信赖像素点:
| V ( i , j ) - [ V ( i , j ) ] | &le; &sigma; | &Delta; &phi; n ( i , j ) - &Delta; &phi; &prime; ( i , j ) | < &sigma; &phi;
其中,Δφn(i,j)为截断相位展开预估值,其值为
Figure FDA0000457414460000043
Δφ'(i,j)为前一帧变形条纹图像中像素点(i,j)处的截断相位展开值;
反之,像素点(i,j)为不可信赖像素点。
(9e)对可信赖像素点求取其截断相位展开值:Δφ(i,j)=Δφn(i,j);
(9f)对于不可信赖的像素点(i,j),统计其邻域的八个像素点中为可信赖像素点的个数,标记为r(i,j);
(9g)按照r(i,j)从大到小的顺序,根据像素点(i,j)的邻域信息求解不可信赖的像素点(i,j)的截断相位展开值Δφ(i,j)。
5.根据权利要求4所述的基于相位编码的混频结构光三维信息获取方法,其中步骤(9g)中所述的根据邻域信息求解不可信赖的像素点(i,j)的截断相位展开值Δφ(i,j),按如下步骤进行:
(9g1)对标记为不可信赖点的像素点(i,j),根据相位展开参考值Vic(ni,nc),按照查表法确定
Figure FDA0000457414460000044
对应的ni值,分别标记为n1(i,j),n2(i,j),n3(i,j),n4(i,j),其中
Figure FDA0000457414460000045
分别表示向下取整、向上取整;
(9g2)以不可信赖的像素点(i,j)为中心,取5′5大小的窗;
(9g3)计算窗内所有可信赖像素点的截断相位展开值的中值Δφm
(9g4)对不可信赖的像素点(i,j),求取四个可能的截断相位展开值
Figure FDA0000457414460000054
其中m=1~4;
(9g5)计算不可信赖的像素点(i,j)的截断相位展开值:
Figure FDA0000457414460000055
其中, m &prime; = min m | &Delta;&phi; i m ( i , j ) - &Delta;&phi; m | .
6.根据权利要求1所述的基于相位编码的混频结构光三维信息获取方法,其中步骤(10)中所述的求取像素点(i,j)在投影模版P中的匹配点(x(i,j),y(i,j)),按如下公式进行:
x ( i , j ) = i y ( i , j ) = y R ( i , j ) + &Delta;&phi; ( i , j ) 2 &pi; T i
其中,i为像素点(i,j)的行坐标,yR(i,j)为中间变量,其值在步骤(7)中给出,Δφ(i,j)为像素点(i,j)的截断相位展开值,Ti为双颜色条纹模版P的强度变化周期。
7.根据权利要求1所述的基于相位编码的混频结构光三维信息获取方法,其中步骤(11)中所述的利用像素点(i,j)与匹配点(x(i,j),y(i,j))的空间关系,计算待测物体的三维信息值,按如下公式进行:
H x ( i , j ) = ( j - N V / 2 ) &Delta;d V H y ( i , j ) = - ( i - M V / 2 ) &Delta;d Vi H z ( i , j ) = fb H x ( i , j ) - ( y ( i , j ) - N T / 2 ) &Delta;d T
其中,Hx(i,j),Hy(i,j),Hz(i,j)分别为待测物体在世界坐标系下沿x轴、y轴、z轴的三维坐标值,世界坐标系的原点选在摄像机的光心,x轴沿摄像机成像平面的水平方向,y轴沿摄像机成像平面的垂直方向,z轴与摄像机成像平面垂直,i、j分别为像素点(i,j)的行、列坐标,y(i,j)为匹配点(x(i,j),y(i,j))的列坐标,f为摄像机的焦距,b为摄像机V光心和投影仪T光心的水平距离,MV为变形条纹图像U的总行数,NV为变形条纹图像U的总列数,NT为模版P的总列数,ΔdVi为摄像机单个像素所代表的实际高度,其值为θVi为摄像机的垂直视场角,ΔdV为摄像机单个像素所代表的实际宽度,ΔdT为投影仪模版中单个像素所代表的实际宽度。
CN201410018554.4A 2014-01-15 2014-01-15 基于相位编码的混频结构光三维信息获取方法 Expired - Fee Related CN103697815B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410018554.4A CN103697815B (zh) 2014-01-15 2014-01-15 基于相位编码的混频结构光三维信息获取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410018554.4A CN103697815B (zh) 2014-01-15 2014-01-15 基于相位编码的混频结构光三维信息获取方法

Publications (2)

Publication Number Publication Date
CN103697815A true CN103697815A (zh) 2014-04-02
CN103697815B CN103697815B (zh) 2017-03-01

Family

ID=50359427

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410018554.4A Expired - Fee Related CN103697815B (zh) 2014-01-15 2014-01-15 基于相位编码的混频结构光三维信息获取方法

Country Status (1)

Country Link
CN (1) CN103697815B (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103940370A (zh) * 2014-04-29 2014-07-23 西安电子科技大学 基于周期互质混合编码的目标物体三维信息获取方法
CN104197861A (zh) * 2014-08-25 2014-12-10 深圳大学 基于结构光灰度向量的三维数字成像方法
CN105844633A (zh) * 2016-03-21 2016-08-10 西安电子科技大学 基于De序列和相位编码的单帧结构光深度获取方法
CN106225702A (zh) * 2016-08-03 2016-12-14 武汉科技大学 裂缝宽度检测装置和方法
CN104050714B (zh) * 2014-06-03 2017-03-15 崔岩 一种基于光柵扫描的物体数字化三维重建系统及方法
CN106546185A (zh) * 2016-10-18 2017-03-29 福州觉感视觉软件科技有限公司 一种基于机器视觉检测的轮廓质量检测方法
CN106802137A (zh) * 2017-01-16 2017-06-06 四川大学 一种相位展开方法及系统
CN106979757A (zh) * 2017-03-03 2017-07-25 浙江华睿科技有限公司 一种三维测量方法及装置
CN107707839A (zh) * 2017-09-11 2018-02-16 广东欧珀移动通信有限公司 图像处理方法及装置
CN107734283A (zh) * 2017-09-11 2018-02-23 广东欧珀移动通信有限公司 视频聊天的画面处理方法、装置和存储介质
WO2018171384A1 (zh) * 2017-03-24 2018-09-27 南京理工大学 一种基于多模态复合编码和极线约束的高效三维图像获取方法
CN110500957A (zh) * 2019-09-10 2019-11-26 中国科学院苏州纳米技术与纳米仿生研究所 一种主动三维成像方法、装置、设备以及存储介质
CN111025324A (zh) * 2020-01-06 2020-04-17 青梧桐有限责任公司 一种基于测距传感器的户型图生成方法
CN112945140A (zh) * 2021-01-29 2021-06-11 四川大学 一种基于查找表和区域分割的彩色物体三维测量方法
WO2021168971A1 (zh) * 2020-02-24 2021-09-02 五邑大学 基于颜色分割的双条纹投影相位展开方法及装置
CN114061488A (zh) * 2021-11-15 2022-02-18 华中科技大学鄂州工业技术研究院 一种物体测量方法、系统以及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH102712A (ja) * 1996-06-18 1998-01-06 Minolta Co Ltd 3次元計測装置
WO2000070303A1 (en) * 1999-05-14 2000-11-23 3Dmetrics, Incorporated Color structured light 3d-imaging system
CN101290217A (zh) * 2007-04-17 2008-10-22 哈尔滨理工大学 基于绿条纹中心的颜色编码结构光三维测量方法
CN101571661A (zh) * 2009-06-03 2009-11-04 东南大学 一种三维实时摄像中的结构光方法
CN101738172A (zh) * 2008-11-05 2010-06-16 哈尔滨理工大学 基于绿条纹分割的高采样密度彩色结构光三维测量方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH102712A (ja) * 1996-06-18 1998-01-06 Minolta Co Ltd 3次元計測装置
WO2000070303A1 (en) * 1999-05-14 2000-11-23 3Dmetrics, Incorporated Color structured light 3d-imaging system
CN101290217A (zh) * 2007-04-17 2008-10-22 哈尔滨理工大学 基于绿条纹中心的颜色编码结构光三维测量方法
CN101738172A (zh) * 2008-11-05 2010-06-16 哈尔滨理工大学 基于绿条纹分割的高采样密度彩色结构光三维测量方法
CN101571661A (zh) * 2009-06-03 2009-11-04 东南大学 一种三维实时摄像中的结构光方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
邢文哲: "基于编码结构光的三维重建", 《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》 *

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103940370B (zh) * 2014-04-29 2016-08-17 西安电子科技大学 基于周期互质混合编码的目标物体三维信息获取方法
CN103940370A (zh) * 2014-04-29 2014-07-23 西安电子科技大学 基于周期互质混合编码的目标物体三维信息获取方法
CN104050714B (zh) * 2014-06-03 2017-03-15 崔岩 一种基于光柵扫描的物体数字化三维重建系统及方法
CN104197861B (zh) * 2014-08-25 2017-03-01 深圳大学 基于结构光灰度向量的三维数字成像方法
CN104197861A (zh) * 2014-08-25 2014-12-10 深圳大学 基于结构光灰度向量的三维数字成像方法
CN105844633A (zh) * 2016-03-21 2016-08-10 西安电子科技大学 基于De序列和相位编码的单帧结构光深度获取方法
CN105844633B (zh) * 2016-03-21 2019-03-26 西安电子科技大学 基于De序列和相位编码的单帧结构光深度获取方法
CN106225702A (zh) * 2016-08-03 2016-12-14 武汉科技大学 裂缝宽度检测装置和方法
CN106546185A (zh) * 2016-10-18 2017-03-29 福州觉感视觉软件科技有限公司 一种基于机器视觉检测的轮廓质量检测方法
CN106802137A (zh) * 2017-01-16 2017-06-06 四川大学 一种相位展开方法及系统
CN106802137B (zh) * 2017-01-16 2019-04-02 四川大学 一种相位展开方法及系统
CN106979757B (zh) * 2017-03-03 2019-03-26 浙江华睿科技有限公司 一种三维测量方法及装置
CN106979757A (zh) * 2017-03-03 2017-07-25 浙江华睿科技有限公司 一种三维测量方法及装置
WO2018171384A1 (zh) * 2017-03-24 2018-09-27 南京理工大学 一种基于多模态复合编码和极线约束的高效三维图像获取方法
US10911672B2 (en) 2017-03-24 2021-02-02 Nanjing University Of Science And Technology Highly efficient three-dimensional image acquisition method based on multi-mode composite encoding and epipolar constraint
CN107734283A (zh) * 2017-09-11 2018-02-23 广东欧珀移动通信有限公司 视频聊天的画面处理方法、装置和存储介质
CN107707839A (zh) * 2017-09-11 2018-02-16 广东欧珀移动通信有限公司 图像处理方法及装置
CN110500957A (zh) * 2019-09-10 2019-11-26 中国科学院苏州纳米技术与纳米仿生研究所 一种主动三维成像方法、装置、设备以及存储介质
CN110500957B (zh) * 2019-09-10 2021-09-14 中国科学院苏州纳米技术与纳米仿生研究所 一种主动三维成像方法、装置、设备以及存储介质
CN111025324A (zh) * 2020-01-06 2020-04-17 青梧桐有限责任公司 一种基于测距传感器的户型图生成方法
WO2021168971A1 (zh) * 2020-02-24 2021-09-02 五邑大学 基于颜色分割的双条纹投影相位展开方法及装置
CN112945140A (zh) * 2021-01-29 2021-06-11 四川大学 一种基于查找表和区域分割的彩色物体三维测量方法
CN114061488A (zh) * 2021-11-15 2022-02-18 华中科技大学鄂州工业技术研究院 一种物体测量方法、系统以及计算机可读存储介质
CN114061488B (zh) * 2021-11-15 2024-05-14 华中科技大学鄂州工业技术研究院 一种物体测量方法、系统以及计算机可读存储介质

Also Published As

Publication number Publication date
CN103697815B (zh) 2017-03-01

Similar Documents

Publication Publication Date Title
CN103697815A (zh) 基于相位编码的混频结构光三维信息获取方法
CN103400366B (zh) 基于条纹结构光的动态场景深度获取方法
CN105844633B (zh) 基于De序列和相位编码的单帧结构光深度获取方法
US10584963B2 (en) System and methods for shape measurement using dual frequency fringe pattern
US6125197A (en) Method and apparatus for the processing of stereoscopic electronic images into three-dimensional computer models of real-life objects
CN101813461B (zh) 基于复合彩色条纹投影的绝对相位测量方法
CN104596439A (zh) 一种基于相位信息辅助的散斑匹配三维测量方法
CN103438832B (zh) 基于线结构光的三维影像测量方法
CN202074952U (zh) 基于单相机-单投影仪的三维形貌和彩色纹理获取系统
US20070115484A1 (en) 3d shape measurement system and method including fast three-step phase shifting, error compensation and calibration
US20120176478A1 (en) Forming range maps using periodic illumination patterns
US20120176380A1 (en) Forming 3d models using periodic illumination patterns
CN105069789B (zh) 基于编码网格模板的结构光动态场景深度获取方法
CN103940370B (zh) 基于周期互质混合编码的目标物体三维信息获取方法
CN103292741A (zh) 一种基于k均值颜色聚类的物体表面三维轮廓的结构光视觉测量方法
JP2016075637A (ja) 情報処理装置およびその方法
CN101871773B (zh) 同步色相相移转换方法以及其三维形貌量测系统
CN104299211A (zh) 一种自由移动式三维扫描方法
CN107990846B (zh) 基于单帧结构光的主被动结合深度信息获取方法
Lv et al. Build 3D Scanner System based on Binocular Stereo Vision.
CN109945802A (zh) 一种结构光三维测量方法
CN104655051A (zh) 一种高速结构光三维面形垂直测量方法
CN109307483A (zh) 一种基于结构光系统几何约束的相位展开方法
CN103942802A (zh) 基于随机模板的结构光动态场景深度获取方法
CN106500626A (zh) 一种手机立体成像方法及三维成像手机

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170301

Termination date: 20220115