CN109461189A - 多相机的位姿计算方法、装置、设备及存储介质 - Google Patents
多相机的位姿计算方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN109461189A CN109461189A CN201811029187.2A CN201811029187A CN109461189A CN 109461189 A CN109461189 A CN 109461189A CN 201811029187 A CN201811029187 A CN 201811029187A CN 109461189 A CN109461189 A CN 109461189A
- Authority
- CN
- China
- Prior art keywords
- camera
- position orientation
- orientation relation
- shooting area
- polyphaser
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004364 calculation method Methods 0.000 title claims abstract description 20
- 238000000034 method Methods 0.000 claims abstract description 32
- 239000011159 matrix material Substances 0.000 claims description 27
- 238000013519 translation Methods 0.000 claims description 12
- 230000000007 visual effect Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 11
- 101150052583 CALM1 gene Proteins 0.000 description 6
- 101150114882 CALM2 gene Proteins 0.000 description 6
- 230000006854 communication Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 241000208340 Araliaceae Species 0.000 description 3
- 101150058073 Calm3 gene Proteins 0.000 description 3
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 3
- 235000003140 Panax quinquefolius Nutrition 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 235000008434 ginseng Nutrition 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本申请公开了一种多相机的位姿计算方法、装置、设备及存储介质。该方法包括:确定各相机的特征信息,特征信息包括各相机的坐标信息、视角信息、棋盘格信息;根据特征信息,计算各相邻相机的重叠拍摄区域,将重叠拍摄区域大于指定区域的相机进行关联,直到关联所包含的N个相机;根据接力法,通过前N‑1个相机的特征信息,计算第一相机与第N个相机之间的位姿关系。根据本申请实施例提供的技术方案,通过计算相邻相机的重叠拍摄区域,将重叠拍摄区域大于指定区域相机进行关联,直到关联所包含的N个相机,解决稀疏分布的多相机中任意两个的位姿关系计算问题。
Description
技术领域
本公开一般涉及图像处理领域和视觉测量技术领域,尤其涉及多 相机的位姿计算方法、装置、设备及存储介质。
背景技术
机场布置有无死角摄像机监控系统,通过该监控系统调用查看机场 各位置视频流,还可以回溯一定时间范围内的录像。而系统只能记录, 并不理解这些场景发生的内容,理解或者分析工作通常由人工参与。场 景的理解首先需要对场景中的物体进行定位,以确定物体是否合适的出 现在该出现的位置,是否出现在不该出现的位置,并给予相应的实时警 报。
机场场景范围非常大,直接导致相机分布广、分布稀疏,并且每个 相机具有一定的差异性。针对稀疏分布的多相机或者稀疏相机阵列,需 要将所有相机统一到一个坐标系中,其中,如何求解其相互之间的位置 和姿态是一个非常关键的技术问题。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种能够用于稀疏 分布的多相机的位姿计算方法、装置、设备及存储介质。
第一方面,提供一种多相机的位姿计算方法,方法包括:
确定各相机的特征信息,特征信息包括各相机的坐标信息、视角信 息、棋盘格信息;
根据特征信息,计算各相邻相机的重叠拍摄区域,将重叠拍摄区域 大于指定区域的相机进行关联,直到关联所包含的N个相机;
根据接力法,通过前N-1个相机的特征信息,计算第一相机与第N 个相机之间的位姿关系。
第二方面,提供一种多相机的位姿计算装置,装置包括:
特征单元,配置用于确定各相机的特征信息,特征信息包括各相机 的坐标信息、视角信息、棋盘格信息;
预处理单元,配置用于根据特征信息,计算各相邻相机的重叠拍摄 区域,将重叠拍摄区域大于指定区域的相机进行关联,直到关联所包含 的N个相机;
计算单元,配置用于根据接力法,通过前N-1个相机的特征信息, 计算第一相机与第N个相机之间的位姿关系。
第三方面,提供一种设备,设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当一个或多个程序被一个或多个处理器执行时,使得一个或多个 处理器执行本发明中各实施例所提供的多相机的位姿计算方法。
第四方面、提供一种存储有计算机程序的计算机可读存储介质, 该程序被处理器执行时实现本发明中各实施例所提供的多相机的位姿 计算方法。
根据本申请实施例提供的技术方案,通过计算各相邻相机的重叠拍 摄区域,将重叠拍摄区域大于指定区域的相机进行关联,直到关联所包 含的N个相机,以此能够解决稀疏分布的多相机中任意两个的位姿关 系的计算问题。进一步的,根据本申请的某些实施例,通过增加球形 相机,还能解决所计算的相邻相机的重叠拍摄区域小于指定区域的相机的关联问题。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述, 本申请的其它特征、目的和优点将会变得更明显:
图1示出了根据本申请实施例的多相机的位姿计算方法的示例性 流程图;
图2示出了根据本申请实施例的计算重叠拍摄区域示例性示意图;
图3示出了根据本申请实施例的步骤S20的示例性流程图;
图4示出了根据本申请实施例的借助球形相机增加重叠拍摄区域 的示例性示意图;
图5示出了根据本申请实施例的步骤S30的示例性流程图;
图6示出了根据本申请实施例的计算两个相机的位姿关系的示例 性示意图;
图7示出了根据本申请实施例的多相机的位姿计算装置的示例性 结构框图;
图8示出了根据本申请实施例的一种设备的示例性结构框图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解 的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发 明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与 发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例 中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本 申请。
请参考图1,示出了根据本申请实施例的多相机的位姿计算方法 的示例性流程图。如图所示,该方法包括:
步骤S10:确定各相机的特征信息,特征信息包括各相机的坐标信息、 视角信息、棋盘格信息;
步骤S20:根据特征信息,计算各相邻相机的重叠拍摄区域,将重叠 拍摄区域大于指定区域的相机进行关联,直到关联所包含的N个相机;
步骤S30:根据接力法,通过前N-1个相机的特征信息,计算第一相 机与第N个相机之间的位姿关系。
为了更好的说明本发明,将机场作为应用场景。在机场稀疏地布 置了N个相机,各相机之间的距离、各相机离地面的距离都不尽相同。 为了将所有相机统一到一个坐标系中,需要确定各相机之间的位置和 姿态,该位姿可通过相机之间的旋转矩阵和平移矩阵体现。
在步骤S10,确定已布置相机的坐标,即定义世界坐标点在各相 机坐标系的坐标,还包括视角信息、与棋盘格所在平面的距离信息。如 图2所示,图中包括相邻的相机Cam1和相机Cam2,其视角分别为α1 和α2。其中各相机与棋盘格所在的λ平面之间的距离分别为H1和H2。
在步骤S20,根据视角信息和距离信息计算相机Cam1和相机 Cam2之间的重叠区域L,其计算公式如下:
重叠区域L与指定区域Lk比较,重叠拍摄区域大于指定区域时相机 Cam1和相机Cam2进行关联,指定区域Lk为K×Wboard,其中 wboard为棋盘格的长度,系数K可根据情况而定,通常为保证整个棋盘 格位于重叠拍摄区域内,K的取值大于1,例如K=1.2棋盘格的形状为矩 形时取宽度和长度中的较大值。根据上述方法将机场中所布置的N个相 机都进行关联,即第一相机关联第二相机、第二相机关联第三相机、第 三相机关联第四相机…第N-1相机关联第N相机。。
在步骤S30,该接力法,是指根据关联关系依次计算各相机之间 的位姿关系。例如计算第一相机和第二相机的位姿关系;接着将第三 相机加入计算,计算第一相机和第三相机的位姿关系;再把第四相机 加入计算,并计算第一相机和第四相机的位姿关系;依次计算第一相 机和第N相机的位姿关系。
请参考图3,示出了根据本申请实施例的步骤S20的示例性流程 图。在步骤S20,重叠拍摄区域小于指定区域的而相机无法进行关联时, 采用如下方法增加重叠拍摄区域:
步骤S21,利用球形相机补偿重叠拍摄区域,使得重叠拍摄区域的 视角大于指定视角,球形相机位于重叠拍摄区域小于指定区域的第i相机 与第i+1相机之间,其中1≤i≤N;
步骤S22计算第一相机与第N个相机之间的位姿关系转换为计算第 一相机与第N+1个相机之间的位姿关系。
请参考图4,示出了根据本申请实施例的借助球形相机增加重叠 拍摄区域的示例性示意图。当相邻的相机Cam1与相机Cam3之间的 重叠拍摄区域L小于指定区域Lk时,借助球形相机Cam2以增加重叠拍 摄区域。可以理解的是相机Cam1、相机Cam3可以为相机1至相机N 中的任意一对相邻相机。如图所示,相机Cam1与球形相机Cam2之间 的重叠拍摄区域为L1,球形相机Cam2与相机Cam3之间的重叠拍摄区 域为L2,满足重叠拍摄区域L大于指定区域Lk的条件。与图2的区别 在于,因引入球形相机的缘故,两个相机的姿态关系变成三个相机的姿 态关系,进而,当存在N个相机时,每增加一个球形相机参与计算的相 机将增加一个。
接着,请参考图5,示出了根据本申请实施例的步骤S30的示例 性流程图。如图所示,步骤S30包括:
步骤S31:根据第一相机和第二相机特征信息,计算第一相机和第二 相机的位姿关系;
步骤S32:根据接力法,将第三个相机加入到计算中,计算第二相机 和第三相机的位姿关系;
步骤S33:通过第一相机和第二相机的位姿关系、第二相机和第三相 机的位姿关系,计算第一相机与第三相机的位姿关系,依次类推,计算 第一相机与第N个相机之间的位姿关系。
请参考图6,示出了根据本申请实施例的计算两个相机的位姿关 系的示例性示意图。其中,第一相机的坐标为X1=[Xcl Ycl Zcl]T, 第二相机的坐标为X2=[Xcr Ycr Zcr]T,棋盘格的坐标为Xc= [Xcc Ycc Zcc]T。棋盘格位于第一相机与第二相机的重叠拍摄区间,此时,通过PNP法可分别计算第一相机、第二相机相对于同一棋盘格的外 部矩阵R1、T1、R2、T2,其中R1、R2为3×3的旋转矩阵,T1、T2为的平移 矩阵。第一相机、第二相机与棋盘格之间存在如下关系:
X1=R1Xc+T1 (2)
X2=R2Xc+T2 (3)
X2=R12X1+T12 (4)
其中公式1的矩阵表示为:
其他公式的矩阵表示这里不再赘述。
其中,Xc为已知量,通过公式2、3、4求解。从公式1可将Xc表
示为:
并将该结果代入至公式3获得如下结果:
得出第一相机与第二相机之间的位姿即旋转矩阵R12及平移矩阵 T12,
同理,可以计算出第二相机与第三相机之间的旋转矩阵R23及平移矩 阵T23,此时,棋盘格位于第二相机与第三相机的重叠拍摄区域。
接着加入第三个相机,此时存在如下关系式:
X1=R12X2+T12 (5)
X2=R23X3+T23 (6)
将公式6代入公式5得出X1=R12R23X3+R12T23+T12
进而获得第一个相机与第三个相机之间的关系:
R13=R12R23
T13=R12T23+T12
依次类推,当有多个相机时,存在如下关系式:
X1=R12X2+T12 (5)
将下面的公式依次代入到公式5获得:
其中Ri(i+1)为相机i和相机i+1之间的外参旋转矩阵,Ti(i+1)为相机i和 相机i+1之间的外参平移矩阵。X1为世界坐标系下的点在相机1坐标系下 的坐标,Xn为世界坐标系下的点在相机n坐标系下的坐标。
从而推导出第1个相机和第n个相机之间的外参旋转矩阵R1n和平移 矩阵T1n为:
本申请还提供一种多相机的位姿计算装置。
图7示出了根据本申请实施例的多相机的位姿计算装置300的示 例性结构框图。如图所示,装置包括:
特征单元310,配置用于确定各相机的特征信息,特征信息包括各相 机的坐标信息、视角信息、棋盘格信息;
预处理单元320,配置用于根据特征信息,计算各相邻相机的重叠拍 摄区域,将重叠拍摄区域大于指定区域的相机进行关联,直到关联所包 含的N个相机;
计算单元330,配置用于根据接力法,通过前N-1个相机的特征信息, 计算第一相机与第N个相机之间的位姿关系。
在一些实施例中,所计算的相邻相机的重叠拍摄区域小于指定区域 的相机时,预处理单元320包括:
补偿单元321,配置用于利用球形相机补偿重叠拍摄区域,使得重叠 拍摄区域的视角大于指定视角,球形相机位于重叠拍摄区域小于指定区 域的第i相机与第i+1相机之间;
转换单元322,配置用于计算第一相机与第N个相机之间的位姿关 系转换为计算第一相机与第N+1个相机之间的位姿关系。
在一些实施例中,计算单元330包括:
第一计算单元331,配置用于根据第一相机和第二相机特征信息,计 算第一相机和第二相机的位姿关系;
第二计算单元332,配置用于根据接力法,将第三个相机加入到计算 中,计算第二相机和第三相机的位姿关系;
计算单元,还配置用于通过第一相机和第二相机的位姿关系、第二 相机和第三相机的位姿关系,计算第一相机与第三相机的位姿关系,依 次类推,计算第一相机与第N个相机之间的位姿关系。
在一些实施例中,第一计算单元331包括:
第一计算子单元335,配置用于利用棋盘格的特征点,通过PNP法 分别计算第一相机与第二相机相对于同一棋盘格的外部参数R1、T1、R2、T2, 棋盘格位于第一相机与第二相机的重叠拍摄区域;
第一计算单元,还配置用于基于外部参数R1、T1、R2、T2,计算第一 相机与第二相机之间的位姿即旋转矩阵R12及平移矩阵T12:
在一些实施例中,计算单元330还包括:
第三计算单元333,配置用于基于第一相机与第二相机之间的位姿关 系R12、T12,和与第二相机相邻的第三相机与第二相机之间的位姿关系R23、 T23,确定第一相机与第三相机之间的位姿关系即旋转矩阵R13及平移矩阵 T13:
R13=R12R23
T13=R12T23+T12;
计算单元,还配置用于确定任意两个相机之间的位姿关系:
下面参考图8,其示出了根据本申请实施例的一种设备的示例性 结构框图。
如图8所示,作为另一方面,本申请还提供了一种设备400,包 括一个或多个中央处理单元(CPU)401,其可以根据存储在只读存储 器(ROM)402中的程序或者从存储部分408加载到随机访问存储器 (RAM)403中的程序而执行各种适当的动作和处理。在RAM 403 中,还存储有系统400操作所需的各种程序和数据。CPU 401、ROM 402 以及RAM 403通过总线404彼此相连。输入/输出(I/O)接口405也 连接至总线404。
以下部件连接至I/O接口1005:包括键盘、鼠标等的输入部分406; 包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的 输出部分407;包括硬盘等的存储部分408;以及包括诸如LAN卡、 调制解调器等的网络接口卡的通信部分409。通信部分409经由诸如 因特网的网络执行通信处理。驱动器410也根据需要连接至I/O接口 405。可拆卸介质411,诸如磁盘、光盘、磁光盘、半导体存储器等等, 根据需要安装在驱动器410上,以便于从其上读出的计算机程序根据 需要被安装入存储部分408。
特别地,根据本公开的实施例,上文参考图1描述的过程可以被 实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序 产品,其包括有形地包含在机器可读介质上的计算机程序,计算机程 序包含用于执行多相机的位姿计算方法的程序代码。在这样的实施例 中,该计算机程序可以通过通信部分409从网络上被下载和安装,和/ 或从可拆卸介质411被安装。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、 方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点 上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码 的一部分,所述模块、程序段、或代码的一部分包含一个或多个用于 实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的 实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发 生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们 有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的 是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的 组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现, 或者可以用专用硬件与计算机指令的组合来实现。
作为又一方面,本申请还提供了一种计算机可读存储介质,该计 算机可读存储介质可以是上述实施例中所述装置中所包含的计算机可 读存储介质;也可以是单独存在,未装配入设备中的计算机可读存储 介质。计算机可读存储介质存储有一个或者一个以上程序,所述程序 被一个或者一个以上的处理器用来执行描述于本申请的多相机的位姿 计算方法。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、 方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点 上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码 的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实 现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实 现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。 例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时 也可以按相反的顺序执行,这根据所涉及的功能而定。也要注意的是, 框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合, 可以通过执行规定的功能或操作的专用的基于硬件的系统来实现,或 者可以通过专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元或模块可以通过软件的方 式实现,也可以通过硬件的方式来实现。所描述的单元或模块也可以 设置在处理器中,例如,各所述单元可以是设置在计算机或移动智能 设备中的软件程序,也可以是单独配置的硬件装置。其中,这些单元 或模块的名称在某种情况下并不构成对该单元或模块本身的限定。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。 本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上 述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述 发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形 成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有 类似功能的技术特征进行互相替换而形成的技术方案。
Claims (16)
1.一种多相机的位姿计算方法,其特征在于,所述方法包括:
确定各相机的特征信息,所述特征信息包括各相机的坐标信息、视角信息、棋盘格信息;
根据所述特征信息,计算各相邻相机的重叠拍摄区域,将所述重叠拍摄区域大于指定区域的相机进行关联,直到关联所包含的N个相机;
根据接力法,通过前N-1个相机的所述特征信息,计算第一相机与第N个相机之间的位姿关系。
2.根据权利要求1的多相机的位姿计算方法,其特征在于,所述重叠拍摄区域小于指定区域的而相机无法进行关联时,所述直到关联所包含的N个相机包括:
利用球形相机补偿所述重叠拍摄区域,使得所述重叠拍摄区域的视角大于所述指定视角,所述球形相机位于重叠拍摄区域小于指定区域的第i相机与第i+1相机之间;
计算所述第一相机与所述第N个相机之间的位姿关系转换为计算所述第一相机与第N+1个相机之间的位姿关系。
3.根据权利要求1或2的多相机的位姿计算方法,其特征在于,所述通过前N-1个相机的所述特征信息,计算第一相机与第N个相机之间的位姿关系包括:
根据所述第一相机和第二相机所述特征信息,计算所述第一相机和所述第二相机的位姿关系;
根据接力法,将第三个相机加入到计算中,计算所述第二相机和所述第三相机的位姿关系;
通过所述第一相机和所述第二相机的位姿关系、所述第二相机和所述第三相机的位姿关系,计算所述第一相机与所述第三相机的位姿关系,依次类推,计算所述第一相机与所述第N个相机之间的位姿关系。
4.根据权利要求3的多相机的位姿计算方法,其特征在于,所述计算第一相机和第二相机的位姿关系包括:
利用所述棋盘格的特征点,通过PNP法分别计算所述第一相机与所述第二相机相对于同一棋盘格的外部参数R1、T1、R2、T2,所述棋盘格位于所述第一相机与所述第二相机的重叠拍摄区域;
基于所述外部参数R1、T1、R2、T2,计算所述第一相机与所述第二相机之间的位姿即旋转矩阵R12及平移矩阵T12:
5.根据权利要求4的多相机的位姿计算方法,其特征在于,所述计算第一相机与第三相机的位姿关系,依次类推,计算第一相机与第N个相机之间的位姿关系包括:
基于所述第一相机与所述第二相机之间的位姿关系R12、T12,和与所述第二相机相邻的所述第三相机与所述第二相机之间的位姿关系R23、T23,确定所述第一相机与所述第三相机之间的位姿关系即旋转矩阵R13及平移矩阵T13:
R13=R12R23
T13=R12T23+T12;
依次类推,确定任意两个相机之间的位姿关系:
6.根据权利要求1的多相机的位姿计算方法,其特征在于,相机重叠拍摄区域L如下:
其中,H1为第一相机到棋盘格的垂直距离,H2为第二相机到棋盘格的垂直距离,α1为第一相机的视角,α2为第二相机的视角,Ltotal为相机在棋盘格所在平面正投影之间的距离。
7.根据权利要求1的多相机的位姿计算方法,其特征在于,指定区域Lk为K×Wboard,其中wboard为所述棋盘格的长度。
8.一种多相机的位姿计算装置,其特征在于,所述装置包括:
特征单元,配置用于确定各相机的特征信息,所述特征信息包括各相机的坐标信息、视角信息、棋盘格信息;
预处理单元,配置用于根据所述特征信息,计算各相邻相机的重叠拍摄区域,将所述重叠拍摄区域大于指定区域的相机进行关联,直到关联所包含的N个相机;
计算单元,配置用于根据接力法,通过前N-1个相机的所述特征信息,计算第一相机与第N个相机之间的位姿关系。
9.根据权利要求8的多相机的位姿计算装置,其特征在于,所计算的相邻相机的重叠拍摄区域小于指定区域的相机时,所述预处理单元包括:
补偿单元,配置用于利用球形相机补偿所述重叠拍摄区域,使得所述重叠拍摄区域的视角大于所述指定视角,所述球形相机位于重叠拍摄区域小于指定区域的第i相机与第i+1相机之间;
转换单元,配置用于所述计算第一相机与所述第N个相机之间的位姿关系转换为计算所述第一相机与第N+1个相机之间的位姿关系。
10.根据权利要求9的多相机的位姿计算装置,其特征在于,所述计算单元包括:
第一计算单元,配置用于根据所述第一相机和第二相机所述特征信息,计算所述第一相机和所述第二相机的位姿关系;
第二计算单元,配置用于根据接力法,将第三个相机加入到计算中,计算所述第二相机和所述第三相机的位姿关系;
所述计算单元,还配置用于通过所述第一相机和所述第二相机的位姿关系、所述第二相机和所述第三相机的位姿关系,计算所述第一相机与所述第三相机的位姿关系,依次类推,计算所述第一相机与所述第N个相机之间的位姿关系。
11.根据权利要求10的多相机的位姿计算装置,其特征在于,所述第一计算单元包括:
第一计算子单元,配置用于利用所述棋盘格的特征点,通过PNP法分别计算所述第一相机与所述第二相机相对于同一棋盘格的外部参数R1、T1、R2、T2,所述棋盘格位于所述第一相机与所述第二相机的重叠拍摄区域:
所述第一计算单元,还配置用于基于所述外部参数R1、T1、R2、T2,计算所述第一相机与所述第二相机之间的位姿即旋转矩阵R12及平移矩阵T12:
12.根据权利要求11的多相机的位姿计算装置,其特征在于,所述计算单元还包括:
第三计算单元,配置用于基于第一相机与第二相机之间的位姿关系R12、T12,和与第二相机相邻的第三相机与第二相机之间的位姿关系R23、T23,确定第一相机与第三相机之间的位姿关系即旋转矩阵R13及平移矩阵T13:
R13=R12R23
T13=R12T23+T12;
所述计算单元,还配置用于确定任意两个相机之间的位姿关系:
13.根据权利要求8的多相机的位姿计算装置,其特征在于,相机重叠拍摄区域L如下:
其中,H1为第一相机到棋盘格的垂直距离,H2为第二相机到棋盘格的垂直距离,α1为第一相机的视角,α2为第二相机的视角,Ltotal为相机在棋盘格所在平面正投影之间的距离。
14.根据权利要求8的多相机的位姿计算装置,其特征在于,指定区域Lk为K×Wboard,其中wboard为所述棋盘格的长度,K为取值大于1的系数。
15.一种设备,其特征在于,所述设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行如权利要求1-7中任一项所述多相机的位姿计算方法。
16.一种存储有计算机程序的计算机可读存储介质,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述多相机的位姿计算方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811029187.2A CN109461189A (zh) | 2018-09-04 | 2018-09-04 | 多相机的位姿计算方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811029187.2A CN109461189A (zh) | 2018-09-04 | 2018-09-04 | 多相机的位姿计算方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109461189A true CN109461189A (zh) | 2019-03-12 |
Family
ID=65606524
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811029187.2A Pending CN109461189A (zh) | 2018-09-04 | 2018-09-04 | 多相机的位姿计算方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109461189A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021190331A1 (zh) * | 2020-03-23 | 2021-09-30 | 深圳市瑞立视多媒体科技有限公司 | 确定相机布局位置的方法、装置、终端设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008109820A1 (en) * | 2007-03-08 | 2008-09-12 | Kla-Tencor Corporation | Methods for identifying array areas in dies formed on a wafer and methods for setting up such methods |
CN103824278A (zh) * | 2013-12-10 | 2014-05-28 | 清华大学 | 监控摄像机的标定方法和系统 |
CN104751486A (zh) * | 2015-03-20 | 2015-07-01 | 安徽大学 | 一种多ptz相机的运动目标接力跟踪算法 |
-
2018
- 2018-09-04 CN CN201811029187.2A patent/CN109461189A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008109820A1 (en) * | 2007-03-08 | 2008-09-12 | Kla-Tencor Corporation | Methods for identifying array areas in dies formed on a wafer and methods for setting up such methods |
CN103824278A (zh) * | 2013-12-10 | 2014-05-28 | 清华大学 | 监控摄像机的标定方法和系统 |
CN104751486A (zh) * | 2015-03-20 | 2015-07-01 | 安徽大学 | 一种多ptz相机的运动目标接力跟踪算法 |
Non-Patent Citations (2)
Title |
---|
刘煜等: "《阵列相机成像技术与应用》", 30 April 2018 * |
杨振先: "多摄像机标定技术研究及其应用", 《中国优秀硕士学位论文全文数据库信息科技辑》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021190331A1 (zh) * | 2020-03-23 | 2021-09-30 | 深圳市瑞立视多媒体科技有限公司 | 确定相机布局位置的方法、装置、终端设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105052129B (zh) | 级联相机运动估计、滚动快门检测和用于视频稳定性的相机抖动检测 | |
CN102170545B (zh) | 校正信息计算装置、图像处理装置、显示系统及校正方法 | |
CN106791623A (zh) | 一种全景视频拼接方法及装置 | |
CN115735227A (zh) | 反转用于姿态估计的神经辐射场 | |
CN109766896B (zh) | 一种相似度度量方法、装置、设备和存储介质 | |
CN109461213A (zh) | 基于虚拟现实的图像处理方法、装置、设备和存储介质 | |
CN102170544A (zh) | 校正信息计算装置、图像处理装置、显示系统及校正方法 | |
CN105320921B (zh) | 双眼定位方法及双眼定位装置 | |
CN108073909B (zh) | 合成模糊人脸图像的方法和装置、计算机装置及存储介质 | |
CN106251365A (zh) | 多曝光视频融合方法及装置 | |
CN109472829A (zh) | 一种物体定位方法、装置、设备和存储介质 | |
CN109327712A (zh) | 固定场景的视频消抖方法 | |
CN107451976A (zh) | 一种图像处理方法及装置 | |
CN107925727A (zh) | 3d相机图像中的点到点距离测量 | |
CN102722875A (zh) | 一种基于视觉注意和质量可变的图像超分辨率重建方法 | |
CN110136166A (zh) | 一种多路画面的自动跟踪方法 | |
US20220198768A1 (en) | Methods and apparatus to control appearance of views in free viewpoint media | |
WO2024000950A1 (zh) | 一种面向多光谱相机的图像快速配准方法及装置 | |
CN105488541A (zh) | 增强现实系统中基于机器学习的自然特征点识别方法 | |
CN109408856A (zh) | 多相机的地面标定方法、装置、设备及存储介质 | |
CN109461189A (zh) | 多相机的位姿计算方法、装置、设备及存储介质 | |
Jiang et al. | Self-calibration of Varying Internal Camera Parameters Algorithm Based on Quasi-affine Reconstruction. | |
US20220084269A1 (en) | Editor for images with depth data | |
KR20120015980A (ko) | 오브젝트 색상 보정 방법, 시스템 및 컴퓨터 프로그램 제품 | |
WO2007108041A1 (ja) | 画像変換方法、画像変換装置、サーバークライアントシステム、携帯機器およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190312 |