CN114529448A - 一种投影拼接方法和系统及设备 - Google Patents
一种投影拼接方法和系统及设备 Download PDFInfo
- Publication number
- CN114529448A CN114529448A CN202011319136.0A CN202011319136A CN114529448A CN 114529448 A CN114529448 A CN 114529448A CN 202011319136 A CN202011319136 A CN 202011319136A CN 114529448 A CN114529448 A CN 114529448A
- Authority
- CN
- China
- Prior art keywords
- projection
- small block
- small
- negative
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 239000011159 matrix material Substances 0.000 claims abstract description 124
- 230000009466 transformation Effects 0.000 claims abstract description 62
- 230000001131 transforming effect Effects 0.000 claims description 14
- 238000010586 diagram Methods 0.000 description 8
- 230000004927 fusion Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3188—Scale or resolution adjustment
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Projection Apparatus (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
本发明公开了一种投影拼接方法和系统及设备。方法包括:分别在第一、第二投影底片中选取具有相同画面的第一、第二小块;获取第一小块包含的像素点的像素坐标组成的坐标矩阵;调节第一小块的顶点使第一小块和第二小块在银幕上的投影重合;获取调节后的第一小块包含的像素点的像素坐标组成的坐标矩阵;基于第一小块调节前后坐标矩阵建立第一单应性变换矩阵;后续利用第一单应性变换矩阵调节第一投影底片的第一小块所在画面区域。本发明为投影拼接提供了一种更快捷的解决方案,简化了调试方法和步骤,无需使用三维测量仪器,解决了现有的相机视觉算法设备投入大、拼接调试时间长的问题。
Description
技术领域
本发明涉及投影技术领域,具体涉及一种投影拼接方法和系统及设备。
背景技术
目前市面上的大型环形曲面影像普遍采用多台投影机拼接完成,如图1所示,因此就必须要将完整的影像裁切变形并传输给各个投影机,为了使拼接处看起来不突兀,投影相接的地方必须留有余量并融合画面。现常见的拼接融合方案是基于相机的视觉算法拼接融合,需要特定的工业相机和三维测量仪器,前期调试准备时间长。
发明内容
本发明实施例的目的在于提供一种投影拼接方法和系统及设备,为投影拼接提供一种更快捷的解决方案,解决相机视觉算法设备投入大、拼接调试时间长的问题。
为实现上述发明目的,本发明采用的技术方案如下。
第一方面,提供一种投影拼接方法,所述方法包括:在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵;后续利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域,即,第一投影底片上位于所述第一小块位置的画面区域。
在一种可能的实现方式中,所述方法还包括:获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;在调节所述第一小块的顶点在第一投影底片上的像素坐标的情况下,还调节所述第二小块的顶点在第二投影底片上的像素坐标;获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵;利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域,即,第二投影底片上位于所述第二小块位置的画面区域。
在一种可能的实现方式中,所述方法还包括:获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;所述利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域,包括:将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照所述第一投射关系f1投射到银幕上;所述利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域,包括:将所述第二投影底片的所述第二小块所在画面区域按照所述第二单应性变换矩阵变换,然后按照所述第二投射关系f2投射到银幕上。
在一种可能的实现方式中,所述方法还包括:预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
在一种可能的实现方式中,所述获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵,具体包括:所述第一小块的每个顶点为一个像素点,获取所述第一小块各顶点在第一投影底片上的像素坐标,并用所述第一小块各顶点的像素坐标组成的坐标矩阵,表示所述第一小块。
在一种可能的实现方式中,所述第一小块和所述第二小块均为三角形小块或四边形小块。
其中,小块的形状和大小均可以根据实际需求进行选取。小块的形状可以选取三角形、四边形、五边形或其它多边形。当需要大区域调节时,可以将小块选取稍微大一些,小块形状可选为四边形、五边形等。当需要小区域高精度调节时,小块的形状为三角形更为适宜。最终小块的大小和形状,可以根据技术人员对图像的容忍程度确定。
第二方面,提供一种投影拼接系统,所述系统包括:获取模块,用于在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;调节模块,用于调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;所述获取模块,还用于获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;建立模块,用于基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵;调试模块,用于后续利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域。
在一种可能的实现方式中,所述获取模块,还用于获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;所述调节模块,还用于在调节所述第一小块的顶点在第一投影底片上的像素坐标的情况下,还调节所述第二小块的顶点在第二投影底片上的像素坐标;所述获取模块,还用于获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;所述建立模块,还用于基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵;所述调试模块,还用于利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域。
在一种可能的实现方式中,所述获取模块还用于:获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;所述调试模块具体用于:将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照所述第一投射关系f1投射到银幕上;将所述第二投影底片的所述第二小块所在画面区域依次按照所述第二单应性变换矩阵变换,然后按照所述第二投射关系f2投射到银幕上。
在一种可能的实现方式中,所述系统还包括:划分模块,用于预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
在一种可能的实现方式中,所述第一小块的每个顶点为一个像素点,所述获取模块具体用于:获取所述第一小块各顶点在第一投影底片上的像素坐标,并用所述第一小块各顶点的像素坐标组成的坐标矩阵,表示所述第一小块。
在一种可能的实现方式中,所述第一小块和所述第二小块均为三角形小块或四边形小块。
第三方面,提供一种计算机设备,其特征在于,包括处理器和存储器,所述存储器中存储有程序,所述程序包括计算机可执行指令,所述计算机设备运行时,所述处理器通过执行所述存储器中存储的程序,使得所述计算机设备执行如第一方面所述的投影拼接方法。
第四方面,提供一种存储有程序的存储设备,所述程序包括计算机可执行指令,当所述程序被包括处理器的计算机设备执行时,使得所述计算机设备执行如第一方面所述的投影拼接方法。
从以上技术方案可以看出,本发明实施例具有以下优点:本发明对第一、第二投影底片的待重合区域分别划分小块,对小块进行调节使包含相同画面的投影重合,得到小块调节前后的单应性变换矩阵,后续投影时先将投影底片的待重合区域通过单应性变换矩阵变换,投射时即可在银幕上得到完整拼接的投影画面,可见,本发明为投影拼接提供了一种更快捷的解决方案,极大简化了调试方法和步骤,无需相机与三维测量仪帮助即可完成环形幕的调试。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例和现有技术描述中所需要使用的附图作简单地介绍。
图1是两个投影图像在环幕上拼接形成完整画面的示意图;
图2是本发明实施例提供的一种投影拼接方法的流程示意图;
图3是本发明实施例建立坐标系的示意图;
图4是环幕角度量A和高度量h的示意图;
图5是本发明实施例在投影拼接区划分四边形小块的示意图;
图6是本发明实施例在投影拼接区划分三角形小块的示意图;
图7是本发明实施例中调节小块节点重合的示意图;
图8是本发明实施例的一种投影拼接系统的结构示意图;
图9是本发明实施例提供的一种计算机设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别不同的对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面通过具体实施例,分别进行详细的说明。
本发明实施例提供一种投影拼接方法。该方法可应用于包括至少两个投影通道的多通道投影系统。多通道投影系统可以包括多台投影机,由每一台投影机构成一个投影通道;或者,当一台投影机包括两个或两个以上投影镜头时,也可以由一台投影机提供两个或两个以上投影通道,此时,整个多通道投影系统可以仅包括一台投影机。多通道投影系统可以将至少两个投影图像分别通过不同的投影通道投向同一银幕的不同区域,在银幕上拼接形成完整的画面。所述银幕可以是各种形状的银幕,例如环幕(环形银幕)或球幕等,本文不予限定。其中,当银幕为环幕时,投影示意图如图1所示。
请参考图2,本发明一个实施例提供的投影拼接方法,可包括以下步骤:
步骤S0:获取投影底片上的像素点到银幕上的投影位置点的投射关系,包括第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;所述第一投射关系f1和第二投射关系f2的获取可采用现有技术;
步骤S1:确定第一投影底片和第二投影底片的待重合区域,在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;
步骤S2:获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;可选的,同时还获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;可选的,在应用中一般采用小块的各个顶点处的像素坐标组成的坐标矩阵代表该小块;
步骤S3:调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;可选的,调节所述第一小块的顶点在第一投影底片上的像素坐标时,可以同时调节所述第二小块的顶点在第二投影底片上的像素坐标,即,可以通过同时调节第一小块和第二小块的形状,使第一小块和第二小块在银幕上的投影重合;
步骤S4:获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;可选的,如果调节了第二小块,还获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;
步骤S5:基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵;可选的,如果调节了第二小块,还基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵;
步骤S6:后续利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域;可选的,如果调节了第二小块,还利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域。
本实施例中,所述第一投影底片和第二投影底片将会投影到银幕上的不同区域分别形成第一画面和第二画面,第一画面和第二画面拼接形成完整画面。为了使两个画面的拼接处看起来不突兀,则相接的地方必须留有余量,以进行画面融合。所述待重合区域是投影底片上用于进行画面拼接融合所留的余量区域,或者说拼接区域。
一些实施例中,所述方法换包括:获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;所述步骤S6具体包括:将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照第一投射关系f1投射到银幕上;将所述第二投影底片的所述第二小块所在画面区域按照所述第二单应性变换矩阵变换,然后按照第二投射关系f2投射到银幕上。
一些实施例中,所述方法还包括:预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
一些实施例中,所述获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵,具体包括:所述第一小块的每个顶点为一个像素点,获取所述第一小块各顶点在第一投影底片上的像素坐标,并用所述第一小块各顶点的像素坐标组成的坐标矩阵,表示所述第一小块。
一些实施例中,所述小块(包括第一小块、第二小块)可以为三角形或四边形或其它多边形的小块。
一些实施例中,当所述银幕具体为环幕时,步骤S0中建立投射关系具体包括:在投影底片中标记n个特征像素,n为不小于6的整数;通过调节所述特征像素在投影底片上的像素坐标位置,使标记的n个特征像素在环幕上的投影画面分别与指定的n个投影位置点重合,其中,指定的投影位置点在环幕坐标系上的坐标已知;获取重合时n个所述特征像素在投影底片上的像素坐标;建立所述特征像素投射至所述环幕的投射关系;按照所述投射关系将所述投影底片上的画面投射至所述环幕。
如上所述,本发明实施例公开了一种投影拼接方法,其通过计算机方法为投影拼接提供一种更快捷的解决方案,极大简化了调试方法和步骤,无需相机与三维测量仪帮助即可完成银幕的调试。
下面,通过一个以环幕为例的应用场景下的具体实施例,对本发明方法的技术方案作进一步详细描述。
投影机所需投射的画面即投影底片是二维图像,而投射到环幕上所形成的现实影像即投影画面是三维影像。根据光学原理,投影仪可以视为逆向的相机模型。
已知现有的相机模型有:
其中u,v代表芯片上的像素坐标,Xt,Yt,Zt为现实中的坐标,Zc为等效焦距,将m11~m34的矩阵简称为M矩阵。对于M矩阵,有六个或六个以上特征点且非共面时,可求解。则由数学原理有:M的逆矩阵与现实中的坐标相乘可得到相应的像素坐标。
本实施例中,可以逆向应用上述的相机模型计算投射关系,方法如下。
首先,建立坐标系。如图3所示,对于环幕,环幕坐标系可以以环幕旋转中心线高度二分之一处为坐标原点,Z轴朝向环幕中央,X轴水平向右建立。
其次,基于坐标方向,选取环幕范围均布的至少6个物理点作为指定的投影位置点。以环幕为例,可选的,可以顺时针方向取环幕上外框已知大概坐标[X,Y,Z]的至少6个投影位置点,如图3所示。投影位置点的坐标可由环幕图纸得到。坐标[X,Y,Z]是指投影位置点在环幕坐标系中的三维坐标。
然后,可通过计算机像素标记软件,在投影底片上标记至少6个特征像素,通过改变特征像素标记点位置,使得各个特征像素在环幕上的投影画面分别与各个投影位置点一一重合,记录下重合时各个特征像素的像素坐标[C,R]。
然后,将标记的至少6个投影位置点的坐标[X,Y,Z]及其对应的至少6个特征像素的像素坐标[C,R]代入逆向的相机模型,通过线性求解可计算出对应的M矩阵,该M矩阵的逆矩阵与投影位置点的坐标[X,Y,Z]相乘等于对应特征像素的像素坐标[C,R]。从而可以建立起[X,Y,Z]到[C,R]的变换矩阵。
进一步的,对于环幕上的投影画面,可以将其进行平面的二维展开,环幕的一点[X,Y,Z]可以化简为对应的环幕的角度量A和高度量h,公式为:
其中,角度量A为环幕卷曲方向的弧度数值,高度量h为与环幕卷曲方向垂直的长度数值,如图4所示。
横向的缩放因子即为环幕半径r,可通过调整原始图像的宽高比来体现,是可隐去的,因此结合公式可以建立[A,h]到[C,R]的变换矩阵。于是,可以建立起投影底片的像素投射到环幕的投射关系,基于该投射关系可完成投影底片的变形,将变形后的投影底片投射到环幕上形成投影画面。
然而,将变形后的投影底片由对应的投影机投射时,由于给定的6个投影位置点的坐标[X,Y,Z]是基于图纸理论位置的值,并非精准现实坐标数值,其中有可能存在一定的误差,即初版投影画面与环幕形状可能存在一定的偏离度程度,这种误差会造成投射出去的投影画面形状与环幕形状分离。为解决该问题,一些实施例中,可以按照图像偏离的程度调整标记的特征像素,将分离区域的特征像素向与投影画面重合的方向调整,获取调整后特征像素的像素坐标,通过进行重新计算来修正所述投射关系,实时输出改变后的变形图片,观察修正结果,可通过多次重复修正步骤,最终得与银幕准确吻合的变形图像。至此建立起更加准确的环幕的数学模型,建立起精确的投射关系。
以上,以环幕为例对如何建立投射关系进行了说明。值得说明的是,当银幕为其它形状时,建立投射关系的步骤类似,主要区别在于如何建立坐标系。对于球幕来说,基于球幕的银幕坐标系可以以球心为原点,以指向画面中心为水平方向为X轴,根据按照右手直角坐标系来确定Y坐标的方向。对于不规则银幕,则可以使用原导入模型散点的坐标系。
一些实施例中,若采用多通道投影系统将至少两个投影底片的画面投向同一环幕,则需要对投射至环幕上的两个投影画面进行拼接,以便在环幕上拼接形成完整的画面。投影拼接区(即投影画面的拼接区域,或称为拼接带)是两个投影画面的待重合区域,在该区域容易出现两个画面不能完全重合的现象。
请参考图5,为解决该问题,本发明一些实施例中,可将各个投影底片的拼接区(待重合区域)按照至少两个方向,例如按照环幕的角度量A和高度量h方向,进行节点划分,根据上所述的投射关系,进而在投影底片的待重合区域形成多个节点可动可调的小块(调节的是投影底片节点的像素坐标),每个小块由若干个节点(即顶点)围合而成。该小块为多边形小块,具体可以是四边形、三角形或正六边形或其它形状的小块,例如图5中所示的矩形小块,或者如图6所示的三角形小块。小块的每个顶点为一个可调节角度量A和高度量h的节点。通过调节小块的各个节点,可改变小块的形状。每个小块的大小取决于调试者容忍的画面变形效果,理论上使小块越接近平面越好,而当小块无限接近平面时,即使再进一步细分,对调试结果也不会产生太大影响。单个小块可近似视为平面,记为[C,R]矩阵。
如图7所示,可通过手动移动小块的若干个节点,使得互相拼接的两个相邻投影底片的包含相同画面的小块的相分离的节点重合。进一步的,为避免人为因素如视觉不同带来的影响,可以用辅助光标线仪器来保证效果。将小块调节变换后的坐标矩阵记为[C',R']矩阵,通过调节前后的两个坐标矩阵即可以建立起其中的单应性关系,得到小块调节变化前后的单应性变换矩阵。
矩阵变换变换关系如下:
简写为[P']=[H][P],[P]和[P']分别是对小块调节前后的矩阵,[H]是单应形变换矩阵。
具体的,调整方法可包括:在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵,记为[C1,R1]。然后,调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵,记为[C1',R1']。然后,基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵[H1]。后续投影时,利用所述第一单应性变换矩阵[H1]调节所述第一投影底片的所述第一小块所在画面区域。
进一步的,调整方法还包括:获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵[C2,R2],在调节所述第一小块的顶点在第一投影底片上的像素坐标的情况下,还调节所述第二小块的顶点在第二投影底片上的像素坐标,以及,获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵,记为[C2',R2'],基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵[H2],后续利用所述第二单应性变换矩阵[H2]调节所述第二投影底片的所述第二小块所在画面区域。
其中,可以预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
后续投影时,可以首先获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;然后,将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照所述第一投射关系f1投射到银幕上;将所述第二投影底片的所述第二小块所在画面区域按照所述第二单应性变换矩阵变换,然后按照所述第二投射关系f2投射到银幕上。
各个投影底片的待重合区域,先经过该单应性变换矩阵的映射变换,再经投影机投射画面到环幕上,就会形成一个完整的拼接画面。
另外,在银幕的边缘区域,容易出现投影画面与银幕边缘不能吻合的现象。
为解决该问题,本发明一些实施例中,如果投影画面的边缘与环幕的边缘没有重合,可将投影底片上的未重合区域,分成若干个节点(顶点)可动可调的小块,每个小块由多个节点围合构成,该小块可以是四边形、三角形或正六边形或其它多边形的小块,例如图5中所示的平面矩形小块,或者如图6中所示的三角形小块。可以通过调节各小块的顶点在投影底片上的像素坐标来改变小块的形状,使投影画面的边缘与银幕的边缘重合,获取每个小块调节前后包含的像素点在投影底片上的像素坐标组成的坐标矩阵;基于小块调节变化的坐标矩阵建立单应性变换矩阵;后续,就可以首先将需要投影的投影底片上的未重合区域通过所述单应性变换矩阵进行变换,然后再进行投射,以确保投影画面与环幕边缘重合。
综上,本发明实施例公开了一种投影拼接方法。相对于相机的视觉算法,本发明方法摆脱了相机和精准的三维测量仪,先得到初版粗略变形图像,并通过标记点修正来保证形,通过节点修正保证拼接区域的细,且提高了调试灵活性,极大简化了调试方法和步骤,可更快捷方便的完成银幕的调试。
请参考图8,本发明的一个实施例,还提供一种投影拼接系统。该系统可作为一个子系统用于多通道投影系统,使多通道投影系统将至少两个投影图像投向同一银幕,在银幕上拼接形成完整的画面。该投影拼接系统可包括:
获取模块81,用于在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;
调节模块82,用于调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;
所述获取模块81,还用于获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;
建立模块83,用于基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵;
调试模块84,用于后续投影时,利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域。
一些实施例中,所述获取模块81,还用于获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;所述调节模块82,还用于在调节所述第一小块的顶点在第一投影底片上的像素坐标的情况下,还调节所述第二小块的顶点在第二投影底片上的像素坐标;所述获取模块81,还用于获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;所述建立模块83,还用于基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵;所述调试模块84,还用于利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域。
一些实施例中,所述获取模块81还用于:获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;所述调试模块84具体用于:将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照所述第一投射关系f1投射到银幕上;将所述第二投影底片的所述第二小块所在画面区域依次按照所述第二单应性变换矩阵变换,然后按照所述第二投射关系f2投射到银幕上。
一些实施例中,所述系统还包括:划分模块85,用于预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
一些实施例中,所述第一小块的每个顶点为一个像素点,所述获取模块81具体用于:获取所述第一小块各顶点在第一投影底片上的像素坐标,并用所述第一小块各顶点的像素坐标组成的坐标矩阵,表示所述第一小块。
一些实施例中,所述第一小块和所述第二小块均为三角形小块或四边形小块或其它多边形小块。
请参考图9,本发明的一个实施例,还提供一种计算机设备90,包括处理器91和存储器92,所述存储器92中存储有程序,所述程序包括计算机可执行指令,所述计算机设备90运行时,所述处理器91通过执行所述存储器92中存储的程序,使得所述计算机设备90执行如上文所述的投影拼接方法。
本发明的一个实施例,还提供一种存储有程序的存储设备,所述程序包括计算机可执行指令,当所述程序被包括处理器的计算机设备执行时,使得所述计算机设备执行如上文所述的投影拼接方法。
综上,本发明实施例公开了一种投影拼接方法和系统及相关设备,从以上技术方案可以看出,本发明实施例具有以下优点:本发明对第一、第二投影底片的待重合区域分别划分小块,对小块进行调节使包含相同画面的投影重合,得到小块调节前后的单应性变换矩阵,后续投影时先将投影底片的待重合区域通过单应性变换矩阵变换,投射时即可在银幕上得到完整拼接的投影画面,可见,本发明通过计算机方法为投影拼接提供一种更快捷的解决方案,极大简化了调试方法和步骤,无需相机与三维测量仪帮助即可完成环形幕的调试。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详细描述的部分,可以参见其它实施例的相关描述。
上述实施例仅用以说明本发明的技术方案,而非对其限制;本领域的普通技术人员应当理解:其依然可以对上述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (14)
1.一种投影拼接方法,其特征在于,所述方法包括:
在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;
获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;
调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;
获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;
基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵;
利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域。
2.根据权利要求1所述的方法,其特征在于,还包括:
获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;
在调节所述第一小块的顶点在第一投影底片上的像素坐标的情况下,调节所述第二小块的顶点在第二投影底片上的像素坐标;
获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;
基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵;
利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域。
3.根据权利要求2所述的方法,其特征在于,
还包括:获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;
所述利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域,包括:将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照第一投射关系f1投射到银幕上;
所述利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域,包括:将所述第二投影底片的所述第二小块所在画面区域按照所述第二单应性变换矩阵变换,然后按照第二投射关系f2投射到银幕上。
4.根据权利要求1所述的方法,其特征在于,还包括:
预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
5.根据权利要求1所述的方法,其特征在于,
所述第一小块和所述第二小块均为三角形小块或四边形小块。
6.根据权利要求1所述的方法,其特征在于,所述获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵,具体包括:
所述第一小块的每个顶点为一个像素点,获取所述第一小块各顶点在第一投影底片上的像素坐标,并用所述第一小块各顶点的像素坐标组成的坐标矩阵,表示所述第一小块。
7.一种投影拼接系统,其特征在于,所述系统包括:
获取模块,用于在第一投影底片中选取第一小块,在第二投影底片中选取第二小块,所述第一小块和所述第二小块分别为第一投影底片和第二投影底片的待重合区域中的具有相同画面的多边形小块;获取所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;
调节模块,用于调节所述第一小块的顶点在第一投影底片上的像素坐标,以使所述第一小块和所述第二小块在银幕上的投影重合;
所述获取模块,还用于获取调节后的所述第一小块包含的像素点在第一投影底片上的像素坐标组成的坐标矩阵;
建立模块,用于基于所述第一小块调节前后坐标矩阵建立第一单应性变换矩阵;
调试模块,用于后续投影时,利用所述第一单应性变换矩阵调节所述第一投影底片的所述第一小块所在画面区域。
8.根据权利要求7所述的系统,其特征在于,
所述获取模块,还用于获取所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;
所述调节模块,还用于在调节所述第一小块的顶点在第一投影底片上的像素坐标的情况下,调节所述第二小块的顶点在第二投影底片上的像素坐标;
所述获取模块,还用于获取调节后的所述第二小块包含的像素点在第二投影底片上的像素坐标组成的坐标矩阵;
所述建立模块,还用于基于所述第二小块调节前后坐标矩阵建立第二单应性变换矩阵;
所述调试模块,还用于利用所述第二单应性变换矩阵调节所述第二投影底片的所述第二小块所在画面区域。
9.根据权利要求8所述的系统,其特征在于,
所述获取模块,还用于获取所述第一投影底片上的像素点到银幕上的投影位置点的第一投射关系f1,以及,所述第二投影底片上的像素点到银幕上的投影位置点的第二投射关系f2;
所述调试模块具体用于:将所述第一投影底片的所述第一小块所在画面区域按照所述第一单应性变换矩阵变换,然后按照所述第一投射关系f1投射到银幕上;以及,将所述第二投影底片的所述第二小块所在画面区域依次按照所述第二单应性变换矩阵变换,然后按照所述第二投射关系f2投射到银幕上。
10.根据权利要求7所述的系统,其特征在于,还包括:
划分模块,用于预先将所述第一投影底片的待重合区域划分为n个A小块,将所述第二投影底片的待重合区域划分为n个B小块,n个A小块与n个B小块一一对应,相对应的A小块和B小块具有相同画面;所述第一小块是n个A小块中的任一小块,所述第二小块是与所述第一小块对应的、具有相同画面的B小块。
11.根据权利要求7所述的系统,其特征在于,
所述第一小块和所述第二小块均为三角形小块或四边形小块。
12.根据权利要求7所述的系统,其特征在于,所述第一小块的每个顶点为一个像素点,所述获取模块具体用于:获取所述第一小块各顶点在第一投影底片上的像素坐标,并用所述第一小块各顶点的像素坐标组成的坐标矩阵,表示所述第一小块。
13.一种计算机设备,其特征在于,包括处理器和存储器,所述存储器中存储有程序,所述程序包括计算机可执行指令,所述计算机设备运行时,所述处理器通过执行所述存储器中存储的程序,使得所述计算机设备执行如权利要求1所述的投影拼接方法。
14.一种存储有程序的存储设备,所述程序包括计算机可执行指令,当所述程序被包括处理器的计算机设备执行时,使得所述计算机设备执行如权利要求1所述的投影拼接方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011319136.0A CN114529448A (zh) | 2020-11-23 | 2020-11-23 | 一种投影拼接方法和系统及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011319136.0A CN114529448A (zh) | 2020-11-23 | 2020-11-23 | 一种投影拼接方法和系统及设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114529448A true CN114529448A (zh) | 2022-05-24 |
Family
ID=81618505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011319136.0A Pending CN114529448A (zh) | 2020-11-23 | 2020-11-23 | 一种投影拼接方法和系统及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114529448A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116932978A (zh) * | 2023-09-18 | 2023-10-24 | 长春希达电子技术有限公司 | 一种球形屏拼接平整度评估方法 |
-
2020
- 2020-11-23 CN CN202011319136.0A patent/CN114529448A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116932978A (zh) * | 2023-09-18 | 2023-10-24 | 长春希达电子技术有限公司 | 一种球形屏拼接平整度评估方法 |
CN116932978B (zh) * | 2023-09-18 | 2023-12-08 | 长春希达电子技术有限公司 | 一种球形屏拼接平整度评估方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109272478B (zh) | 一种荧幕投影方法和装置及相关设备 | |
CN110336987B (zh) | 一种投影仪畸变校正方法、装置和投影仪 | |
US12114107B2 (en) | Projector keystone correction method, apparatus and system, and readable storage medium | |
US11386581B2 (en) | Multi view camera registration | |
EP3356887B1 (en) | Method for stitching together images taken through fisheye lens in order to produce 360-degree spherical panorama | |
CN107993276B (zh) | 一种全景图像的生成方法及装置 | |
US8311366B2 (en) | System and method for calibrating and adjusting a projected image of a projection apparatus | |
CN108846796B (zh) | 图像拼接方法及电子设备 | |
CN101132535A (zh) | 基于转台的多投影大屏拼接方法 | |
US7583307B2 (en) | Autostereoscopic display | |
US5898438A (en) | Texture mapping of photographic images to CAD surfaces | |
CN110191326A (zh) | 一种投影系统分辨率扩展方法、装置和投影系统 | |
CN114727081B (zh) | 投影仪投影校正方法、装置及投影仪 | |
CN108257183A (zh) | 一种相机镜头光轴校准方法和装置 | |
JP2014522591A (ja) | 角スライス実像3dディスプレイのためのアライメント、キャリブレーション、およびレンダリングのシステムおよび方法 | |
CN105308503A (zh) | 利用短程相机校准显示系统的系统和方法 | |
CN112734860B (zh) | 一种基于弧形幕先验信息的逐像素映射投影几何校正方法 | |
CN106709865B (zh) | 一种深度图像合成方法及装置 | |
CN107967666B (zh) | 一种全景图像生成方法及装置 | |
CN107527336B (zh) | 镜头相对位置标定方法及装置 | |
CN111062869B (zh) | 一种面向曲面幕的多通道校正拼接的方法 | |
CN107358577B (zh) | 一种立方体全景图的快速拼接方法 | |
KR100614004B1 (ko) | 자동화된 360°파노라마 이미지 생성 방법 | |
CN104869376A (zh) | 视频融合中多图像多像素级别几何校正方法 | |
CN110335307A (zh) | 标定方法、装置、计算机存储介质和终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |