CN107507242A - 一种基于光场模型的多层折射系统成像模型构建方法 - Google Patents

一种基于光场模型的多层折射系统成像模型构建方法 Download PDF

Info

Publication number
CN107507242A
CN107507242A CN201710702222.1A CN201710702222A CN107507242A CN 107507242 A CN107507242 A CN 107507242A CN 201710702222 A CN201710702222 A CN 201710702222A CN 107507242 A CN107507242 A CN 107507242A
Authority
CN
China
Prior art keywords
mtd
mrow
mtr
msub
msup
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710702222.1A
Other languages
English (en)
Other versions
CN107507242B (zh
Inventor
张旭
朱禹轲
朱利民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HUST Wuxi Research Institute
Original Assignee
HUST Wuxi Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HUST Wuxi Research Institute filed Critical HUST Wuxi Research Institute
Priority to CN201710702222.1A priority Critical patent/CN107507242B/zh
Publication of CN107507242A publication Critical patent/CN107507242A/zh
Application granted granted Critical
Publication of CN107507242B publication Critical patent/CN107507242B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/75Determining position or orientation of objects or cameras using feature-based methods involving models
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0012Optical design, e.g. procedures, algorithms, optimisation routines

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Secondary Cells (AREA)

Abstract

本发明公开一种基于光场模型的多层折射系统成像模型构建方法,包括如下步骤:S101、构建多层折射模型的坐标系系统:构建摄像机坐标系ocxcyczc、折射系统成像坐标系orxryrzr及世界坐标系owxwywzw;S102、根据图像点的坐标构建光场矢量,并根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量;S103、根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型。本发明基于多层折射模型和光场模型,光场模型既包含光线的位置信息,又包含方向信息,给出了基于光场模型的光路传播和折射的表达式,可用于水下相机成像描述及所有加装防护玻璃或者滤波片的相机成像描述。

Description

一种基于光场模型的多层折射系统成像模型构建方法
技术领域
本发明涉及计算机视觉领域,尤其涉及一种基于光场模型的多层折射系统成像模型构建方法。
背景技术
在水下环境中,成像光线将依次通过水、滤波片、空气这三层折射介质。现有的方法常将传统的相机模型应用到这种折射系统中,使用径向畸变系数来校正折射造成的偏差。然而,折射对不同像素点产生偏差的影响是不同的,使用传统的相机模型会产生明显的误差。
发明内容
本发明的目的在于通过一种基于光场模型的多层折射系统成像模型构建方法,来解决以上背景技术部分提到的问题。
为达此目的,本发明采用以下技术方案:
一种基于光场模型的多层折射系统成像模型构建方法,其包括如下步骤:
S101、构建多层折射模型的坐标系系统:构建摄像机坐标系ocxcyczc、折射系统成像坐标系orxryrzr及世界坐标系owxwywzw
S102、根据图像点的坐标构建光场矢量,并根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量;
S103、根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型。
特别地,所述步骤S101包括:所述摄像机坐标系ocxcyczc建立在摄像机的光心上,以光轴为z方向;折射系统成像坐标系orxryrzr建立在摄像机的光心处,以介质平面的法向为z方向;摄像机坐标系ocxcyczc绕轴线oczc×orzr旋转至oczc与orzr重合得到折射系统成像坐标系orxryrzr,从而得到从折射系统成像坐标系orxryrzr到摄像机坐标系ocxcyczc的旋转矩阵cRr
特别地,所述步骤S102中根据图像点的坐标构建光场矢量,包括:计算第一个介质层的光线方向,并构建光场矢量:
根据摄像机小孔成像模型,建立摄像机坐标系下物点Pc=[X,Y,Z]T与成像点m=[u,v]T的关系:
其中,K为相机的内参矩阵;
根据小孔成像模型,任意像素m决定一根通过光心和像素的光线,光线方向在摄像机坐标系下表示为:
该光线转换到折射系统成像坐标系为:
lrrRclccRr -1lc (3)
将该光线表示为光场:
特别地,所述步骤S102中根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量,包括:光线在空间中传播用四维光场函数(u v s t)T表示;光场在垂直光场平面上传播一定距离d后的表达为:
光场折射的表达为:折射界面的法线与光场平面的法线平行,根据折射定律
其中,μ和μ′分别为入射层和折射层的折射率;
光线经过n层折射介质后光场的表达式为:
特别地,所述步骤S103包括:根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型:
其中(si ti)T为经过i次折射后的光场方向;di为第i个介质层的厚度;[Xw Yw Zw1]T为物点在世界坐标系owxwywzw下的齐次坐标;[Xr Yr Zr 1]T为物点在折射系统成像坐标系orxryrzr下的齐次坐标;世界坐标系owxwywzw相对折射系统成像坐标系orxryrzr的姿态为rRw和位置为rtw
本发明提出的基于光场模型的多层折射系统成像模型构建方法基于多层折射模型和光场模型,光场模型使用四维光场函数(u v s t)T来表示来表示空间中的一条光路,与传统方法相比,光场模型既包含光线的位置信息,又包含方向信息。本发明给出了基于光场模型的光路传播和折射的表达式,并给出了基于以上模型建立多层折射系统成像模型的方法。本发明可以应用于水下相机的成像描述乃至所有加装防护玻璃或者滤波片的相机成像描述。
本发明具有如下优点:一、精度高,由于采用物理模型的方法进行建模,该方法不存在系统误差,相比于传统的采用径向畸变进行补偿的方法精度高。二、采用光场变换的方法对成像过程进行描述。光场相比于传统的光矢量,不仅包含方向信息,还包含位置信息。光场的传播与折射直接用线性变换的方式来表示使得光线传播的过程更加直观。
附图说明
图1为本发明实施例提供的光场描述示意图;
图2为本发明实施例提供的基于光场模型的多层折射系统成像模型构建方法流程图;
图3为本发明实施例提供的多层折射模型的坐标系系统示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部内容,除非另有定义,本文所使用的所有技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述具体的实施例,不是旨在于限制本发明。
下面首先对光场相关知识进行说明,光线在空间中传播可以用四维光场函数(u vs t)T表示。如图1所示,光线穿过的第一个平面记录光线的位置信息(u v)T,第二个平面记录光线的方向信息(s t)T。光线穿过两个平行平面,分别交于o和od。两个平行平面的距离为d=1,oo′垂直于这两个平面。第一个平面上的点o表示为(u v)T,向量o′od表示为(s t)T
如图2所示,图2为本发明实施例提供的基于光场模型的多层折射系统成像模型构建方法流程图。本实施例中基于光场模型的多层折射系统成像模型构建方法具体包括如下步骤:
S101、构建多层折射模型的坐标系系统:构建摄像机坐标系ocxcyczc、折射系统成像坐标系orxryrzr及世界坐标系owxwywzw
如图3所示,图中dii,qi(i=0,1,...,n)分别表示第i介质层的厚度、折射率以及光路与第(i-1)介质层和第i介质层界面的交点,所述摄像机坐标系ocxcyczc建立在摄像机的光心上,以光轴为z方向;折射系统成像坐标系orxryrzr建立在摄像机的光心处,以介质平面的法向为z方向;摄像机坐标系ocxcyczc绕轴线oczc×orzr旋转至oczc与orzr重合得到折射系统成像坐标系orxryrzr,从而得到从折射系统成像坐标系orxryrzr到摄像机坐标系ocxcyczc的旋转矩阵cRr。在本实施例中假设世界坐标系owxwywzw相对折射系统成像坐标系orxryrzr的姿态rRw和位置rtw已知,具体计算方法本领域普通技术人员均可实现,在此不再赘述。
S102、根据图像点的坐标构建光场矢量,并根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量。
首先,计算第一个介质层的光线方向,并构建光场矢量:
根据摄像机小孔成像模型,建立摄像机坐标系下物点Pc=[X,Y,Z]T与成像点m=[u,v]T的关系:
根据小孔成像模型,任意像素m决定一根通过光心和像素的光线,光线方向在摄像机坐标系下表示为:
该光线转换到折射系统成像坐标系为:
lrrRclccRr -1lc (11)
将该光线表示为光场:
使用公式(1)-公式(4)构建初始光场0Lr。至此,得到了光心位置的光场矢量。
然后,根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量,过程包括:光场在垂直光场平面上传播一定距离后的表达为:
光场折射的表达为:折射界面的法线与光场平面的法线平行,折射定律使用光场矢量的表示方法如下:
根据公式(4)计算得到的光心位置初始光场0Lr,以及上式折射定律的光场表示式,可以进行如下递推得到各个介质层的光场矢量
由此得到每一层介质下的光场的方向信息(s0 t0)T,(s1 t1)T,…,(sn tn)T(光场传播不改变方向信息,故可略去)。
光线经过n层折射介质后光场的表达式为:
S103、根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型。
根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型:
其中(si ti)T为经过i次折射后的光场方向;di为第i个介质层的厚度;[Xw Yw Zw1]T为物点在世界坐标系owxwywzw下的齐次坐标;[Xr Yr Zr 1]T为物点在折射系统成像坐标系orxryrzr下的齐次坐标;世界坐标系owxwywzw相对折射系统成像坐标系orxryrzr的姿态为rRw和位置为rtw
本发明提出的技术方案基于多层折射模型和光场模型,光场模型使用四维光场函数(u v s t)T来表示来表示空间中的一条光路,与传统方法相比,光场模型既包含光线的位置信息,又包含方向信息。本发明给出了基于光场模型的光路传播和折射的表达式,并给出了基于以上模型建立多层折射系统成像模型的方法。本发明可以应用于水下相机的成像描述乃至所有加装防护玻璃或者滤波片的相机成像描述。本发明具有如下优点:一、精度高,由于采用物理模型的方法进行建模,该方法不存在系统误差,相比于传统的采用径向畸变进行补偿的方法精度高。二、采用光场变换的方法对成像过程进行描述。光场相比于传统的光矢量,不仅包含方向信息,还包含位置信息。光场的传播与折射直接用线性变换的方式来表示使得光线传播的过程更加直观。
本领域普通技术人员可以理解实现上述实施例中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (5)

1.一种基于光场模型的多层折射系统成像模型构建方法,其特征在于,包括如下步骤:
S101、构建多层折射模型的坐标系系统:构建摄像机坐标系ocxcyczc、折射系统成像坐标系orxryrzr及世界坐标系owxwywzw
S102、根据图像点的坐标构建光场矢量,并根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量;
S103、根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型。
2.根据权利要求1所述的基于光场模型的多层折射系统成像模型构建方法,其特征在于,所述步骤S101包括:所述摄像机坐标系ocxcyczc建立在摄像机的光心上,以光轴为z方向;折射系统成像坐标系orxryrzr建立在摄像机的光心处,以介质平面的法向为z方向;摄像机坐标系ocxcyczc绕轴线oczc×orzr旋转至oczc与orzr重合得到折射系统成像坐标系orxryrzr,从而得到从折射系统成像坐标系orxryrzr到摄像机坐标系ocxcyczc的旋转矩阵cRr
3.根据权利要求2所述的基于光场模型的多层折射系统成像模型构建方法,其特征在于,所述步骤S102中根据图像点的坐标构建光场矢量,包括:计算第一个介质层的光线方向,并构建光场矢量:
根据摄像机小孔成像模型,建立摄像机坐标系下物点Pc=[X,Y,Z]T与成像点m=[u,v]T的关系:
其中,K为相机的内参矩阵;
根据小孔成像模型,任意像素m决定一根通过光心和像素的光线,光线方向在摄像机坐标系下表示为:
<mrow> <msub> <mi>l</mi> <mi>c</mi> </msub> <mo>=</mo> <mfrac> <mrow> <msup> <mi>K</mi> <mrow> <mo>-</mo> <mn>1</mn> </mrow> </msup> <mover> <mi>m</mi> <mo>~</mo> </mover> </mrow> <mrow> <mo>|</mo> <mo>|</mo> <msup> <mi>K</mi> <mrow> <mo>-</mo> <mn>1</mn> </mrow> </msup> <mover> <mi>m</mi> <mo>~</mo> </mover> <mo>|</mo> <mo>|</mo> </mrow> </mfrac> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>2</mn> <mo>)</mo> </mrow> </mrow>
该光线转换到折射系统成像坐标系为:
lrrRclccRr -1lc (3)
将该光线表示为光场:
<mrow> <msub> <mi>L</mi> <mi>r</mi> </msub> <mo>=</mo> <msup> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <mn>0</mn> </mtd> <mtd> <mn>0</mn> </mtd> <mtd> <mrow> <msup> <msub> <mi>l</mi> <mi>r</mi> </msub> <mi>T</mi> </msup> </mrow> </mtd> <mtd> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <mfrac> <mn>1</mn> <mrow> <msub> <mi>l</mi> <mi>r</mi> </msub> <mrow> <mo>(</mo> <mn>3</mn> <mo>)</mo> </mrow> </mrow> </mfrac> </mtd> <mtd> <mn>0</mn> </mtd> </mtr> <mtr> <mtd> <mn>0</mn> </mtd> <mtd> <mfrac> <mn>1</mn> <mrow> <msub> <mi>l</mi> <mi>r</mi> </msub> <mrow> <mo>(</mo> <mn>3</mn> <mo>)</mo> </mrow> </mrow> </mfrac> </mtd> </mtr> <mtr> <mtd> <mn>0</mn> </mtd> <mtd> <mn>0</mn> </mtd> </mtr> </mtable> </mfenced> </mtd> </mtr> </mtable> </mfenced> <mi>T</mi> </msup> <mo>.</mo> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>4</mn> <mo>)</mo> </mrow> </mrow>
4.根据权利要求3所述的基于光场模型的多层折射系统成像模型构建方法,其特征在于,所述步骤S102中根据折射系统的折射参数和光场的传播与折射方程计算每个介质层的光场矢量,包括:光线在空间中传播用四维光场函数(u v s t)T表示;光场在垂直光场平面上传播一定距离后的表达为:
<mrow> <mtable> <mtr> <mtd> <mrow> <msup> <mi>L</mi> <mo>&amp;prime;</mo> </msup> <mo>=</mo> <mi>T</mi> <mrow> <mo>(</mo> <mi>d</mi> <mo>)</mo> </mrow> <mo>&amp;CircleTimes;</mo> <mi>L</mi> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mi>T</mi> <mrow> <mo>(</mo> <mi>d</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <mn>1</mn> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mi>d</mi> </mtd> <mtd> <mrow></mrow> </mtd> </mtr> <mtr> <mtd> <mrow></mrow> </mtd> <mtd> <mn>1</mn> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mi>d</mi> </mtd> </mtr> <mtr> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mn>1</mn> </mtd> <mtd> <mrow></mrow> </mtd> </mtr> <mtr> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mn>1</mn> </mtd> </mtr> </mtable> </mfenced> </mrow> </mtd> </mtr> </mtable> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>5</mn> <mo>)</mo> </mrow> </mrow>
光场折射的表达为:折射界面的法线与光场平面的法线平行,根据折射定律
<mrow> <mtable> <mtr> <mtd> <mrow> <msup> <mi>L</mi> <mo>&amp;prime;</mo> </msup> <mo>=</mo> <mi>R</mi> <mrow> <mo>(</mo> <mi>s</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&amp;mu;</mi> <mo>,</mo> <msup> <mi>&amp;mu;</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> <mo>&amp;CircleTimes;</mo> <mi>L</mi> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mi>R</mi> <mrow> <mo>(</mo> <mi>s</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&amp;mu;</mi> <mo>,</mo> <msup> <mi>&amp;mu;</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> <mo>=</mo> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <mn>1</mn> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> </mtr> <mtr> <mtd> <mrow></mrow> </mtd> <mtd> <mn>1</mn> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> </mtr> <mtr> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow> <mi>&amp;alpha;</mi> <mrow> <mo>(</mo> <mi>s</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&amp;mu;</mi> <mo>,</mo> <msup> <mi>&amp;mu;</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> </mrow> </mtd> <mtd> <mrow></mrow> </mtd> </mtr> <mtr> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow></mrow> </mtd> <mtd> <mrow> <mi>&amp;beta;</mi> <mrow> <mo>(</mo> <mi>s</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&amp;mu;</mi> <mo>,</mo> <msup> <mi>&amp;mu;</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> </mrow> </mtd> </mtr> </mtable> </mfenced> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mi>&amp;alpha;</mi> <mrow> <mo>(</mo> <mi>s</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&amp;mu;</mi> <mo>,</mo> <msup> <mi>&amp;mu;</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> <mo>=</mo> <mi>&amp;beta;</mi> <mrow> <mo>(</mo> <mi>s</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&amp;mu;</mi> <mo>,</mo> <msup> <mi>&amp;mu;</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> <mo>=</mo> <msqrt> <mfrac> <msup> <mi>&amp;mu;</mi> <mn>2</mn> </msup> <mrow> <msup> <mi>&amp;mu;</mi> <mrow> <mo>&amp;prime;</mo> <mn>2</mn> </mrow> </msup> <mrow> <mo>(</mo> <mn>1</mn> <mo>+</mo> <msup> <mi>s</mi> <mn>2</mn> </msup> <mo>+</mo> <msup> <mi>t</mi> <mn>2</mn> </msup> <mo>)</mo> </mrow> <mo>-</mo> <msup> <mi>&amp;mu;</mi> <mn>2</mn> </msup> <mrow> <mo>(</mo> <msup> <mi>s</mi> <mn>2</mn> </msup> <mo>+</mo> <msup> <mi>t</mi> <mn>2</mn> </msup> <mo>)</mo> </mrow> </mrow> </mfrac> </msqrt> </mrow> </mtd> </mtr> </mtable> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>6</mn> <mo>)</mo> </mrow> </mrow>
其中,μ和μ′分别为入射层和折射层的折射率;
光线经过n层折射介质后光场的表达式为:
<mrow> <msub> <mmultiscripts> <mi>L</mi> <mi>n</mi> </mmultiscripts> <mi>r</mi> </msub> <mo>=</mo> <munder> <mo>&amp;Pi;</mo> <mrow> <mi>i</mi> <mo>=</mo> <mi>n</mi> <mo>-</mo> <mn>1</mn> <mo>,</mo> <mi>n</mi> <mo>-</mo> <mn>2</mn> <mo>,</mo> <mo>...</mo> <mo>,</mo> <mn>2</mn> <mo>,</mo> <mn>1</mn> </mrow> </munder> <mrow> <mo>(</mo> <mi>R</mi> <mo>(</mo> <mrow> <msub> <mi>s</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>t</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>&amp;mu;</mi> <mi>i</mi> </msub> <mo>,</mo> <msub> <mi>&amp;mu;</mi> <mrow> <mi>i</mi> <mo>+</mo> <mn>1</mn> </mrow> </msub> </mrow> <mo>)</mo> <mo>&amp;CircleTimes;</mo> <mi>T</mi> <mo>(</mo> <msub> <mi>d</mi> <mi>i</mi> </msub> <mo>)</mo> <mo>)</mo> </mrow> <mo>&amp;CircleTimes;</mo> <msub> <mmultiscripts> <mi>L</mi> <mn>0</mn> </mmultiscripts> <mi>r</mi> </msub> <mo>.</mo> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>7</mn> <mo>)</mo> </mrow> </mrow>
5.根据权利要求4所述的基于光场模型的多层折射系统成像模型构建方法,其特征在于,所述步骤S103包括:根据计算好的每个介质层的光场矢量构建多层折射系统的成像模型:
<mrow> <mtable> <mtr> <mtd> <mrow> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <msub> <mi>s</mi> <mn>0</mn> </msub> </mtd> <mtd> <mn>...</mn> </mtd> <mtd> <msub> <mi>s</mi> <mrow> <mi>n</mi> <mo>-</mo> <mn>1</mn> </mrow> </msub> </mtd> <mtd> <msub> <mi>s</mi> <mi>n</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>t</mi> <mn>0</mn> </msub> </mtd> <mtd> <mn>...</mn> </mtd> <mtd> <msub> <mi>t</mi> <mrow> <mi>n</mi> <mo>-</mo> <mn>1</mn> </mrow> </msub> </mtd> <mtd> <msub> <mi>t</mi> <mi>n</mi> </msub> </mtd> </mtr> </mtable> </mfenced> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <msub> <mi>d</mi> <mn>0</mn> </msub> </mtd> </mtr> <mtr> <mtd> <mo>.</mo> </mtd> </mtr> <mtr> <mtd> <mo>.</mo> </mtd> </mtr> <mtr> <mtd> <mo>.</mo> </mtd> </mtr> <mtr> <mtd> <msub> <mi>d</mi> <mrow> <mi>n</mi> <mo>-</mo> <mn>1</mn> </mrow> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>d</mi> <mi>n</mi> </msub> </mtd> </mtr> </mtable> </mfenced> <mo>=</mo> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <mn>1</mn> </mtd> <mtd> <mn>0</mn> </mtd> <mtd> <mn>0</mn> </mtd> <mtd> <mn>0</mn> </mtd> </mtr> <mtr> <mtd> <mn>0</mn> </mtd> <mtd> <mn>1</mn> </mtd> <mtd> <mn>0</mn> </mtd> <mtd> <mn>0</mn> </mtd> </mtr> </mtable> </mfenced> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <msub> <mi>X</mi> <mi>r</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>Y</mi> <mi>r</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>Z</mi> <mi>r</mi> </msub> </mtd> </mtr> <mtr> <mtd> <mn>1</mn> </mtd> </mtr> </mtable> </mfenced> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <msub> <mi>X</mi> <mi>r</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>Y</mi> <mi>r</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>Z</mi> <mi>r</mi> </msub> </mtd> </mtr> <mtr> <mtd> <mn>1</mn> </mtd> </mtr> </mtable> </mfenced> <mo>=</mo> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <mrow> <msup> <mrow></mrow> <mi>r</mi> </msup> <msub> <mi>R</mi> <mi>w</mi> </msub> </mrow> </mtd> <mtd> <mrow> <msup> <mrow></mrow> <mi>r</mi> </msup> <msub> <mi>t</mi> <mi>w</mi> </msub> </mrow> </mtd> </mtr> <mtr> <mtd> <mi>0</mi> </mtd> <mtd> <mn>1</mn> </mtd> </mtr> </mtable> </mfenced> <mfenced open = "[" close = "]"> <mtable> <mtr> <mtd> <msub> <mi>X</mi> <mi>w</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>Y</mi> <mi>w</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>Z</mi> <mi>w</mi> </msub> </mtd> </mtr> <mtr> <mtd> <mn>1</mn> </mtd> </mtr> </mtable> </mfenced> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <msub> <mi>d</mi> <mi>n</mi> </msub> <mo>=</mo> <msub> <mi>Z</mi> <mi>r</mi> </msub> <mo>-</mo> <munderover> <mo>&amp;Sigma;</mo> <mrow> <mi>i</mi> <mo>=</mo> <mn>0</mn> </mrow> <mrow> <mi>n</mi> <mo>-</mo> <mn>1</mn> </mrow> </munderover> <msub> <mi>d</mi> <mi>i</mi> </msub> </mrow> </mtd> </mtr> </mtable> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>8</mn> <mo>)</mo> </mrow> </mrow>
其中(si ti)T为经过i次折射后的光场方向;di为第i个介质层的厚度;[Xw Yw Zw 1]T为物点在世界坐标系owxwywzw下的齐次坐标;[Xr Yr Zr 1]T为物点在折射系统成像坐标系orxryrzr下的齐次坐标;世界坐标系owxwywzw相对折射系统成像坐标系orxryrzr的姿态为rRw和位置为rtw
CN201710702222.1A 2017-08-16 2017-08-16 一种基于光场模型的多层折射系统成像模型构建方法 Active CN107507242B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710702222.1A CN107507242B (zh) 2017-08-16 2017-08-16 一种基于光场模型的多层折射系统成像模型构建方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710702222.1A CN107507242B (zh) 2017-08-16 2017-08-16 一种基于光场模型的多层折射系统成像模型构建方法

Publications (2)

Publication Number Publication Date
CN107507242A true CN107507242A (zh) 2017-12-22
CN107507242B CN107507242B (zh) 2021-02-26

Family

ID=60692044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710702222.1A Active CN107507242B (zh) 2017-08-16 2017-08-16 一种基于光场模型的多层折射系统成像模型构建方法

Country Status (1)

Country Link
CN (1) CN107507242B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108921936A (zh) * 2018-06-08 2018-11-30 上海大学 一种基于光场模型的水下激光条纹匹配和立体重建方法
CN109490251A (zh) * 2018-10-26 2019-03-19 上海大学 基于光场多层折射模型的水下折射率自标定方法
CN110533702A (zh) * 2019-08-12 2019-12-03 上海大学 一种基于光场多层折射模型的水下双目视觉立体匹配方法
CN110728745A (zh) * 2019-09-17 2020-01-24 上海大学 一种基于多层折射图像模型的水下双目立体视觉三维重建方法
CN111006610A (zh) * 2019-12-13 2020-04-14 中国科学院光电技术研究所 一种基于结构光三维测量的水下三维测量数据校正方法
CN116147582A (zh) * 2022-12-26 2023-05-23 深圳大学 一种水下摄影测量定位定向的方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106683188A (zh) * 2016-11-17 2017-05-17 长春理工大学 透明目标的双表面三维重构方法、装置和系统
CN107767420A (zh) * 2017-08-16 2018-03-06 华中科技大学无锡研究院 一种水下立体视觉系统的标定方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106683188A (zh) * 2016-11-17 2017-05-17 长春理工大学 透明目标的双表面三维重构方法、装置和系统
CN107767420A (zh) * 2017-08-16 2018-03-06 华中科技大学无锡研究院 一种水下立体视觉系统的标定方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JON HENDERSON: "Mapping Submerged Archaeological Sites using Stereo-Vision Photogrammetry", 《THE INTERNATIONAL JOURNAL OF NAUTICAL ARCHAEOLOGY》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108921936A (zh) * 2018-06-08 2018-11-30 上海大学 一种基于光场模型的水下激光条纹匹配和立体重建方法
CN109490251A (zh) * 2018-10-26 2019-03-19 上海大学 基于光场多层折射模型的水下折射率自标定方法
CN110533702A (zh) * 2019-08-12 2019-12-03 上海大学 一种基于光场多层折射模型的水下双目视觉立体匹配方法
CN110533702B (zh) * 2019-08-12 2023-04-18 上海大学 一种基于光场多层折射模型的水下双目视觉立体匹配方法
CN110728745A (zh) * 2019-09-17 2020-01-24 上海大学 一种基于多层折射图像模型的水下双目立体视觉三维重建方法
CN110728745B (zh) * 2019-09-17 2023-09-15 上海大学 一种基于多层折射图像模型的水下双目立体视觉三维重建方法
CN111006610A (zh) * 2019-12-13 2020-04-14 中国科学院光电技术研究所 一种基于结构光三维测量的水下三维测量数据校正方法
CN111006610B (zh) * 2019-12-13 2022-03-29 中国科学院光电技术研究所 一种基于结构光三维测量的水下三维测量数据校正方法
CN116147582A (zh) * 2022-12-26 2023-05-23 深圳大学 一种水下摄影测量定位定向的方法
CN116147582B (zh) * 2022-12-26 2023-09-01 深圳大学 一种水下摄影测量定位定向的方法

Also Published As

Publication number Publication date
CN107507242B (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
CN107507242A (zh) 一种基于光场模型的多层折射系统成像模型构建方法
CN108765328B (zh) 一种高精度多特征平面模板及其畸变优化和标定方法
KR101475529B1 (ko) 배열 이미징 시스템 및 관련 방법
US10210289B2 (en) Method for designing three-dimensional freeform surface to be used in design of the reflective mirrors
CN105096329B (zh) 一种精确校正超广角摄像头图像畸变的方法
CN104330074B (zh) 一种智能测绘平台及其实现方法
CN105654476B (zh) 基于混沌粒子群优化算法的双目标定方法
CN109615663A (zh) 全景视频校正方法及终端
CN107767420B (zh) 一种水下立体视觉系统的标定方法
CN102654391B (zh) 基于光束平差原理的条纹投影三维测量系统及其标定方法
CN108171758A (zh) 基于最小光程原理和透明玻璃标定板的多相机标定方法
CN108885347A (zh) 光瞳扩展
US20020071038A1 (en) Method and system for complete 3D object and area digitizing
CN104778656B (zh) 基于球面透视投影的鱼眼图像校正方法
CN105488810A (zh) 一种聚焦光场相机内外参数标定方法
CN106952309A (zh) 快速标定tof深度相机多种参数的设备及方法
CN101539397B (zh) 物体三维姿态的精密光学测量方法
CN107993266A (zh) 光场相机内参数标定装置及方法
CN106534670B (zh) 一种基于固联鱼眼镜头摄像机组的全景视频生成方法
CN109816732A (zh) 标定方法、标定系统、矫正方法、矫正系统及车辆
CN105787876A (zh) 一种基于surf特征跟踪匹配的全景视频自动拼接方法
Xie et al. Underwater large field of view 3D imaging based on fisheye lens
CN115375775A (zh) 基于前向投影折射模型的水下相机标定方法及装置
CN118334129A (zh) 一种基于多约束pso粒子群优化的交通相机标定方法
CN102034234B (zh) 一种多视图结构光系统自标定方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20171222

Assignee: Jiangsu Jihui Huake Intelligent Equipment Technology Co., Ltd.

Assignor: Wuxi research institute of the Central China University of Science and Technology

Contract record no.: X2019980000288

Denomination of invention: Multilayer refractive system imaging model construction method based on light field model

License type: Common License

Record date: 20191023

GR01 Patent grant
GR01 Patent grant