CN114630087A - 投影融合方法、投影融合系统及计算机可读存储介质 - Google Patents
投影融合方法、投影融合系统及计算机可读存储介质 Download PDFInfo
- Publication number
- CN114630087A CN114630087A CN202011459435.4A CN202011459435A CN114630087A CN 114630087 A CN114630087 A CN 114630087A CN 202011459435 A CN202011459435 A CN 202011459435A CN 114630087 A CN114630087 A CN 114630087A
- Authority
- CN
- China
- Prior art keywords
- projection
- test pattern
- pattern
- assemblies
- patterns
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004927 fusion Effects 0.000 title claims abstract description 74
- 238000007500 overflow downdraw method Methods 0.000 title claims abstract description 40
- 238000012360 testing method Methods 0.000 claims abstract description 179
- 230000000712 assembly Effects 0.000 claims abstract description 116
- 238000000429 assembly Methods 0.000 claims abstract description 116
- 238000005070 sampling Methods 0.000 claims abstract description 79
- 238000013507 mapping Methods 0.000 claims abstract description 24
- 230000004044 response Effects 0.000 claims description 16
- 238000000691 measurement method Methods 0.000 claims description 4
- 125000004122 cyclic group Chemical group 0.000 claims description 2
- 238000000034 method Methods 0.000 description 37
- 230000003287 optical effect Effects 0.000 description 22
- 238000003384 imaging method Methods 0.000 description 15
- 230000009466 transformation Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 238000000605 extraction Methods 0.000 description 5
- 238000002156 mixing Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012876 topography Methods 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3141—Constructional details thereof
- H04N9/3147—Multi-projection systems
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Projection Apparatus (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
本申请公开了一种投影融合方法、投影融合系统及计算机可读存储介质。该投影融合方法用于投影融合系统，该投影融合系统包括多个投影组件，该投影融合方法包括：对多个投影组件的信息进行配置；控制每个投影组件投射测试图案；在每个投影组件投射测试图案时，控制多个投影组件分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系；利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件拼接融合。通过这种方式，能够实现多个投影组件的自动拼接融合，实现无人为干预的投影融合和3D映射校准。
Description
技术领域
本申请涉及投影技术领域，特别是涉及一种投影融合方法、投影融合系统及计算机可读存储介质。
背景技术
多投影机的拼接融合是通过将多台投影机的画面融合，能够实现更大面积的显示，或者实现复杂曲面上的投影。
本申请的发明人在长期的研发过程中发现，目前的3D映射和投影机边缘融合都是通过融合系统提供的校准功能，在现场安装时通过手动更改融合系统中的投影机模型参数、投影机的多点几何校正参数、边缘融合参数来进行调整，并未实现多投影机的自动融合。
发明内容
本申请主要解决的技术问题是提供投影融合方法、投影融合系统及计算机可读存储介质，以实现多个投影组件的自动拼接融合，实现无人为干预的投影融合和3D映射校准。
为解决上述技术问题，本申请采用的一个技术方案是：提供一种投影融合方法。该投影融合方法用于投影融合系统，该投影融合系统包括多个投影组件，该投影融合方法包括：对多个投影组件的信息进行配置；控制每个投影组件投射测试图案；在每个投影组件投射测试图案时，控制多个投影组件分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系；利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件拼接融合。
在一具体实施中，上述目标投影图案包括多个子图案，上述利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件拼接融合的步骤包括：利用相对位置关系生成每个投影组件在投影融合系统中的绝对位置关系；利用每个投影组件的绝对位置关系计算出目标投影图案的拆分和畸变映射；确定每个投影组件所需投影的子图案，控制每个投影组件同步投射对应的子图案。
在一具体实施中，上述多个投影组件包括第一投影组件和第二投影组件，第一投影组件用于投射测试图案，第二投影组件为投影融合系统中的其它投影组件，第一投影组件包括第一投影镜头和第一摄像头，第二投影组件包括第二投影镜头和第二摄像头，上述利用测试图案及采样图案获取投射测试图案的投影组件与其它投影组件的步骤包括：获取测试图案的特征点的位置信息；利用位置信息获取第一摄像头的第一外部参数；利用第一外部参数和位置信息获取第一投影组件与第二投影组件之间的相对位置关系。
在一具体实施中，位置信息包括坐标信息，第一外部参数包括空间坐标信息，上述获取测试图案的特征点的位置信息的步骤包括：获取测试图案的特征点在测试图案中的第一坐标信息；获取特征点在第一摄像头采集的采样图案中的第二坐标信息；上述利用位置信息获取第一摄像头的第一外部参数的步骤包括：获取第一摄像头对第一投影镜头的相对外参；将第一坐标信息转换到世界坐标系下，以获得特征点的第一方向向量，并将第二坐标信息转换到世界坐标系下，以获得特征点的第二方向向量；采用三角测距法对第一方向向量、第二方向向量及相对外参进行计算，以获取特征点在世界坐标系下的空间位置信息。
在一具体实施中，上述获取测试图案的特征点的位置信息的步骤进一步包括：获取特征点在第二摄像头采集的采集图案中的第三坐标信息；上述利用第一外部参数和位置信息获取第一投影组件与第二投影组件之间的相对位置关系的步骤包括：将第三坐标信息转换到世界坐标系下，以获得特征点的第三方向向量；采用三角测距法对第三向向量和空间位置信息进行计算，以获取世界坐标系下特征点相对于第一投影镜头的相对位置关系。
在一具体实施中，在上述获取测试图案的特征点的位置信息的步骤之前，上述投影融合方法进一步包括：响应于采样图案包含测试图案的图像信息，执行获取测试图案的特征点的位置信息的步骤。
在一具体实施中，在上述利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件拼接融合的步骤之前，上述投影融合方法进一步包括：累积已投射测试图案的投影组件的第一数量；响应于第一数量大于或者等于多个投影组件的总量，执行上述利用相对位置关系对目标投影图案进行拼接融合的步骤；响应于第一数量小于多个投影组件的总量，依次控制每个投影组件投射测试图案的步骤。
在一具体实施中，上述控制多个投影组件分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系的步骤包括以循环方式执行下述子步骤：控制一投影组件对测试图案进行采集，以获得一采样图案；利用测试图案和一采样图案获取投射测试图案的投影组件与采集采样图案的其它投射组件之间的相对位置关系；上述控制多个投影组件分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系的步骤进一步包括：累积已采集采样图案的投影组件的第二数量；响应于第二数量小于多个投影组件的总量，执行上述控制一投影组件对测试图案进行采集，以获得一采样图案的子步骤；响应于第二数量大于或等于多个投影组件的总量，执行上述依次控制每个投影组件投射测试图案的步骤。
为解决上述技术问题，本申请采用的一个技术方案是：提供一种投影融合系统。该投影融合系统包括：多个投影组件；处理器，分别与多个投影组件连接，处理器用于对多个投影组件的信息进行配置；处理器用于控制每个投影组件投射测试图案，并在每个投影组件投射测试图案时，控制多个投影组件分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系；处理器进一步用于利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件拼接融合。
为解决上述技术问题，本申请采用的一个技术方案是：提供一种计算机可读存储介质。该计算机可读存储介质上存储有程序指令，程序指令被执行时以实现上述滤波器的投影融合方法。
本申请的有益效果是：区别于现有技术，本申请实施例投影融合系统通过处理器控制多个投影组件分别投射测试图案，并在每个投影组件投射测试图案时，控制多个投影组件分别采集投射出来的测试图案，以获得多个采样图案，可以利用测试图案及采样图案计算出投射测试图案的投影组件与其它投影组件之间的相对于位置关系，采用类似的方法，即可获得多个投影组件中任意两者之间的相对位置关系，利用该相对位置关系能够实现多个投影组件的自动拼接融合，能够同时解决投影组件的建模和参数提取，实现无人为干预的投影融合和3D映射校准。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请投影融合系统一实施例的结构示意图；
图2是本申请投影融合方法一实施例的流程示意图；
图3是本申请投影融合系统中投影镜头及摄像头模型的结构示意图；
图4是世界坐标系下的极坐标示意图；
图5是图2实施例投影融合方法中步骤S202的一具体流程示意图；
图6是图5实施例中步骤S501的一具体流程示意图；
图7是图5实施例中步骤S502的一具体流程示意图；
图8是本申请投影融合方法中三角测距示意图；
图9是图5实施例中步骤S503的一具体流程示意图；
图10是图2实施例投影融合方法中步骤S203的一具体流程示意图；
图11是本申请投影融合方法一实施例的流程示意图；
图12是本申请计算机可读存储介质一实施例的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，均属于本申请保护的范围。
本申请中的术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
多机的拼接融合是投影应用中的一个重要的功能，尤其在工程应用中。通过将多台投影机的画面融合，能够实现更大面积的显示，或者实现复杂曲面上的投影。目前的投影机拼接融合都是通过融合器手动调整完成，需要现场安装的时候由有经验的操作人员分别调整每一台投影机以及融合器的融合带配置来实现。这个过程需要大量的工作量。同时，由于各台用于融合的投影机会随着时间和环境的变化发生画面的漂移，对于长期安装的多机融合系统经常会出现漂移导致的融合带重影，影响观看效果。现有技术通常采用硬件融合将图像的拆分和几何变换通过专用ASCII芯片实现，成本较低。但是硬件融合灵活度不高，一般难以做到任意安装和数目的投影机的融合处理，且投影面和投影机的建模都是通过手工建模完成，而投影机的位置和方向信息则通过现场的参数调节完成，需要安装人员在现场安装和调试实现理想的拼接融合和三维映射。对于复杂投影环境下的多机融合和三维映射，需要专业的设计人员进行建模和内容设计，也局限了投影显示在环境装饰方面的应用。
综上所述，目前的多投影机实现融合和3D映射，都需要有投影对象的建模和投影系统模型参数的校准。通过文献和专利的调研，并没有发现有同时能够满足对象建模和投影系统参数校准的方法，也未见能够完整获取投影系统参数的方法。本申请提出的投影融合系统及方法，能够同时解决投影对象的建模和投影系统的完整参数提取，实现无人为干预的投影机融合和3D映射校准。
本申请首先提出一种投影融合系统，如图1所示，图1是本申请投影融合系统一实施例的结构示意图。本实施例投影融合系统10包括多个投影组件110和处理器120；其中，处理器120分别与多个投影组件110连接，处理器120用于对多个投影组件110的信息进行配置；处理器120用于控制每个投影组件110投射测试图案，并在每个投影组件110投射测试图案时，控制多个投影组件110分别对测试图案进行采集，以获得多个采样图案；处理器120进一步用于利用测试图案和采样图案获取投射测试图案的投影组件110与其它投影组件112之间的相对位置关系，并利用相对位置关系对目标投影图案进行拆分，通过多个投影组件110拼接融合。
本实施例投影融合系统10包括n(n为大于或者等于2的自然数)个投影组件110(即P1-Pn)；处理器120通过通信网络150与各个投影组件110通信以获取投影组件110的信息，具体来说，处理器120用于获取投影组件110的网络访问信息、视频采集信息及光学参数信息，并控制和配置投影组件110。需要说明的是，处理器120获取投影组件信息的方法可分为主动获取或被动获取，其中主动获取可以通过用户配置，预设配置文件，云端数据库查询等方式建立投影组件的列表和数据集；被动获取通过投影组件自动上报参数信息。
其中，通信网络150可以是任意类型的通信网络，只要能保证处理器120能与投影组件110实现双向通信，以及投影组件110之间的双向通信以实现投影组件110的集群控制和视频同步；通信网络150可以是蜂窝网络(如4G，5G)、无线局域网(WiFi)、有线以太网(LAN)、互联网，HDMI视频信道，DP视频信道等。
其中，处理器120还可以称为CPU(Central Processing Unit，中央处理单元)。处理器120可能是一种集成电路芯片，具有信号的处理能力。处理器120还可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器120也可以是任何常规的处理器等。
处理器120可以为独立的处理器，也可以是集于投影组件110内的处理器。多个投影组件110可以组成主-从的关系拓扑，也可以组成Peer to Peer(P2P)的关系拓扑。在主-从关系拓扑中，某一个投影组件110通过竞争机制或通过配置成为主控节点，其它的投影组件110为从节点，接受主控节点的指令进行测试图案的投射和采集。当采用P2P的拓扑时，每个节点采用总线竞争的方式在通信网络150中发布测试图案投射消息，其它投影组件110采集测试图案，并用于定位。在这种模式下，每个投影组件110都会计算并存储所有节点的相对位置信息。
区别于现有技术，本实施例投影融合系统10通过处理器120控制多个投影组件110分别投射测试图案，并在每个投影组件110投射测试图案时，控制多个投影组件110分别采集投射出来的测试图案，以获得多个采样图案，可以利用测试图案及采样图案计算出投射测试图案的投影组件110与其它投影组件110之间的相对位置关系，采用类似的方法，即可获得多个投影组件110中任意两者之间的相对位置关系，利用该相对位置关系能够实现多个投影组件110的自动拼接融合，能够同时解决投影组件110的建模和参数提取，实现无人为干预的投影融合和3D映射校准。
其中，本实施例的处理器120依次控制多个投影组件110分别投射测试图案，即每次有且仅有一个投影组件110投射测试图案，能够减少测试图案之间的干扰，降低处理器120的计算复杂度。
当然，在其它实施例中，处理器120可以同时控制两个或者两个以上的投影组件110分别投射测试图案，能够减少投影融合系统10投射测试图案的时间。
在一应用场景中，成像面较大时，处理器120控制相距最远的两个投影组件110，例如最左边和最右边的投影组件110分别投射测试图案，不仅可以减少测试图案之间的干扰，而且还能减少投影融合系统10投射测试图案的时间。
其中，每个投影组件110包括投影镜头130和摄像头140；其中，投影镜头130与处理器120连接，投影镜头130用于在处理器120的控制下投影带编码的测试图案；摄像头140与处理器120连接，摄像头140用于在处理器120的控制下对带编码的测试图案进行采集，以获取采样图案。
在其它实施例中，还可以采用其它器件代替投影镜头，也可以采用其它图像采集器件代替摄像头。
其中，每个投影组件110中的摄像头140和投影镜头130之间的相对于位置关系是固定的，且是已知的，而投影组件110与其它投影组件110之间的位置关系是未知的。
处理器120先获取投影组件110的型号，然后从与该型号对应的数据库中获取该投影组件110的投影镜头130和摄像头140之间的相对位置关系；若所有的投影组件110的型号相同，获取一个投影组件110上的投影镜头130和摄像头140之间的相对位置关系即可。
处理器120控制每个投影镜头130投射测试图案，同时控制各个摄像头140对测试图案进行采样，以获取采样图案。
需要注意的是，各个投影镜头130投射的测试图案不同，以区分投射测试图案的投影组件110，也就是说，不同投影镜头投射特定编码的测试图案。
本实施例投影融合系统10还用于实现下述投影融合方法。
本申请进一步提出一种投影融合方法，如图2所示，图2是本申请投影融合系统一实施例的流程示意图。本实施例投影融合方法可以用于上述投影融合系统10，本实施例投影融合方法包括以下步骤：
步骤S201：对多个投影组件110的信息进行配置。
处理器120对各投影组件110的网络信息验证登录，并对光学参数采集及数据库查询等基础信息进行配置。其中，处理器120首先得获取各投影组件110的型号，根据型号采集查询每个投影组件110的光学参数，例如投射比、投影镜头130的高度、投影镜头130和摄像头140之间距离等必要信息。
处理器120载入投影融合系统10中的所有投影组件110，即n个投影组件110的信息，该信息包括投影组件110的网络访问信息和投影组件110的图像采集信息和光学参数信息。
获取各个投影组件110的信息的方法可以分为主动获取和被动获取两种。主动获取是连网后通过互联网等渠道自动获取，其可以通过用户配置、预设配置文件及云端数据库查询等方式建立投影组件110的列表和数据集；被动获取可以在CPU接入投影组件110时，投影组件110主动将信息打包上报或网络内广播等方式获取信息。
步骤S202：控制每个投影组件110投射测试图案。
在处理器120载入所有投影组件110的信息后，处理器120通过与投影组件110的通信协议下发指令控制每个投影组件110的投影镜头130轮流投射特定编码的测试图案，以将测试图案投射在目标表面160上，其中目标表面160可以是任何形貌的曲面或平面。
本实施例中，处理器120需要保证在同一时间控制有且仅有一个投影组件110投射测试图案，以减少测试图案之间的干扰，降低处理器120的计算复杂度。
当然，在其它实施例中，处理器可以同时控制两个或者两个以上的投影组件分别投射测试图案，能够减少投影融合系统投射测试图案的时间。
步骤S203：在每个投影组件110投射测试图案时，控制多个投影组件110分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件110与其它投影组件110之间的相对位置关系。
由上述分析可知，处理器120需要保证在同一时间控制有且仅有一个投影组件110投射测试图案，在n个中任意一个投影镜头130投射测试图案时，处理器120控制n个投影组件110的摄像头140对测试图案进行采集，以获得n个采样图案；处理器120利用一个测试图案和n个采样图案即可获得投射测试图案的投影组件110与其它(n-1)个投影组件110之间的相对位置关系。需要说明的是，对于部分投影组件110的摄像头140未采集到测试图案信息的情况，处理器无法获取到投射测试图案的投影组件110的编码信息，进一步无法解码获取投射测试图案的投影组件的位置信息，此时用于采集测试图案的摄像头对应的投影组件110不参与解码位置计算。
下面对投影镜头和摄像头的模型进行介绍，以便于下文介绍步骤S202的具体实现方式。
请一并参阅图1至图4，图3是本申请投影融合系统中投影镜头及摄像头模型的结构示意图；图4是世界坐标系下的极坐标示意图。本实施例的投影镜头130及摄像头140可以用图3所示的模型来表示，其中301为摄像头140的成像面或投影镜头130的图像面，302为等效的光学中心，303为等效的主光轴，304-1、304-2、304-3及304-4为图像采集区域(或投影成像区域)的边界，摄像头140的图像采集空间范围或投影镜头130的投影范围为以等效光学中心302为顶点，且以304-1到304-4为边界的锥。定义一个球坐标系
以等效光学中心302为原点，等效主光轴303为主轴，305的方向为上方向，306的方向为水平旋转正方向。其中305、303及306相互两两垂直，305与成像面的宽边垂直，303、305及306组成右手坐标系。
本实施例可以将图像采集区域或投影成像区域内的任意点表示为
其中
为光学中心到该点的向量在
坐标系中的方位角，θ为光学中心到该点的向量在
坐标系中的倾角，ρ为光学中心到该点的向量的长度。这样，在像平面上的任何一点307，具有在该像坐标系下的归一化坐标(x,y)，能够唯一映射到
坐标系下的方位角和倾角
映射关系可以表示为：
其中，D为畸变变换，由摄像头140的光学系统特性决定，T为透视映射变换，这两个变换由摄像头140或投影镜头130的内参决定。像平面一般为像素化的成像器件(例如CCD、CMOS等感光芯片或DMD、LCoS及LCD等光调制器件)。归一化坐标(x,y)与像素之间的关系可以表示为：
其中，[I,J]为成像器件的分辨率，[i,j]为像素的索引号，表示第j行第i列的像素。例如分辨率为1080p的成像器件，[I,J]＝[1920,1080]。以上归一化坐标的定义，定义了成像器件的中心为坐标的原点。
对于摄像头140和投影镜头130，主光轴303垂直于成像面301。则该投影组件110的透视映射变换可以由以下几个参数决定：归一化焦距
其中f为镜头的焦距，单位为长度单位，W为成像芯片的宽，单位与镜头焦距相同；成像芯片宽高比
其中H为成像芯片的高，单位与镜头焦距相同；归一化镜头偏移量off＝(x0,y0)，为等效主光轴偏离成像芯片中心的位移除以成像芯片的宽W。则透视映射变换T(x,y)可以表示为：
投影组件110在全局坐标系下，由六个参数决定：位置
和方向向量
其中的
决定了投影组件110在全局坐标系下的光学中心的位置，方向向量
决定了摄像头140的朝向和投影镜头130沿主光轴的旋转。
图4所示为世界坐标系下的极坐标示意图，其中的North方向为世界坐标系下的笛卡尔坐标系的y方向，Up方向为笛卡尔坐标系的z方向。笛卡尔坐标系和极坐标系的变换为基本的坐标系变换，任何三维解析几何的书都有描述，这里不再展开。
空间中的任意点
都可以唯一映射到摄像头140的归一化坐标。将空间中的任意点
从世界坐标系变换到摄像头140的局部坐标系：
其中的Τ为旋转变换矩阵：
则空间中任意点到摄像头140的归一化坐标可以表示为：
式(4)和式(6)定义了从空间任意点到摄像头140像素的空间映射关系。而式(3)和式(4)则定义了摄像头140像素点到空间映射方向的映射关系。在投影组件110中，成像芯片上的任意点，都对应了以投影组件110光学中心为起点，确定一个方向的射线，投影像素的成像位置，为该射线与第一个相交平面的焦点。
由上述分析可知，每投影一个测试图案时采集获得n个采样图案，本实施例可以采用如图5所示的方法获取投射测试图案的投影组件110与(n-1)个投影组件110之间的相对位置关系。
便于分析，本实施例将投影融合系统10中的n个投影组件110分为一个第一投影组件和(n-1)个第二投影组件，其中，第一投影组件为投射测试图案的投影组件110，第二投影组件为投影融合系统10中的其它投影组件110；并将第一投影组件中的投影镜头130称之为第一投影镜头，将第一投影组件中的摄像头140称之为第一摄像头，将第二投影组件中的投影镜头130称之为第二投影镜头，将第二投影组件中的摄像头140称之为第二摄像头。
需要注意的是，每次投射测试图案的投影组件110不同，第一投影组件所具体指代的投影组件110也不同，第二投影组件所具体指代的投影组件110也会变化。
本实施例将以第一投影组件为投影融合系统10中第i个投影组件110，第二投影组件为投影融合系统10中第j个投影组件110为例进行介绍。
具体地，如图5所示，本实施例的方法具体包括步骤S501至步骤S504。
步骤S501：获取测试图案的特征点的位置信息。
具体地，本实施例的位置信息包括坐标信息，本实施例可以通过如图6所示的方法实现步骤S501。本实施例的方法具体包括步骤S601和步骤S602。
步骤S601：获取测试图案的特征点在测试图案中的第一坐标信息。
测试图案具有特殊的特征点分布，其特征点的特征描述算子与图像的几何变换和透视变换无关。
本实施例通过设置特殊特征点，能够根据这些特殊特征点在测试图案上的坐标信息与这些特殊特征点在采样图案上的坐标信息来获取投射该测试图案的投影组件110与采集该采样图案的投影组件110之间的相对位置关系。
处理器120从存储介质中获取第一投影镜头投射的测试图案的内容、每一个特征点的特征算子，并获取特征点在测试图案中的第一坐标信息为
步骤S602：获取特征点在第一摄像头采集的采样图案中的第二坐标信息。
处理器120从第一投影组件的第一摄像头采集的采样图案中提取出该特征点在该采样图案中的第二坐标信息为
进一步地，处理器120还获取特征点在第二摄像头采集的采集图案中的第三坐标信息
步骤S502：利用位置信息获取第一摄像头的第一外部参数。
具体地，本实施例的第一外部参数包括空间坐标信息，本实施例可以通过如图7所示的方法实现步骤S502。本实施例的方法具体包括步骤S701至步骤S703。
步骤S701：获取第一摄像头对第一投影镜头的相对外参。
处理器120获取第一摄像头对第一投影镜头光心的相对外参为
和
分别代表了第一摄像头在第一投影镜头坐标系下的相对位置和方向。
步骤S702：将第一坐标信息转换到世界坐标系下，以获得特征点的第一方向向量，并将第二坐标信息转换到世界坐标系下，以获得特征点的第二方向向量。
在第一摄像头坐标系下，特征点
对应的第二方向向量
为：
其中，Τ-1为由
定义的旋转变换。
用相同的方法，可以求得特征点
对应的第一方向向量
为：
步骤S703：采用三角测距法对第一方向向量和第二方向向量进行计算，以获取特征点在世界坐标系下的空间位置信息。
如图8所示，处理器120采用三角测距法，即下述等式对第一方向向量
和第二方向向量
进行计算，求得特征点
空间位置坐标
其中，l0和l1分别为
到第一摄像头和第一投影镜头的距离。
利用该方法，可以提取测试图案中的多个特征点，并计算这些特征点的空间位置信息。
步骤S503：利用第一外部参数和位置关系获取第一投影组件与第二投影组件之间的相对位置关系。
具体地，本实施例的本实施例可以通过如图9所示的方法实现步骤S503。本实施例的方法具体包括步骤S901和步骤S902。
步骤S901：将第三坐标信息转换到世界坐标系下，以获得特征点的第三方向向量。
由上述分析可知，处理器120获取特征点在第二摄像头采集的采集图案中的第三坐标信息为
假设第二投影组件中的第二摄像头相对第一投影镜头的相对外参为
和
则第k个特征点对应的第三方向向量为：
步骤S902：采用三角测距法对第三向向量和空间位置信息进行计算，以获取世界坐标系下特征点相对于第一投影镜头的相对位置关系。
处理器120利用三角测距法生成第k个特征点的三角测距方程：
其中，
为第k个特征点的空间位置信息。
为求解第二摄像头相对第一投影镜头的相对外参为
和
可以采用两个或者两个以上的特征点生成三角测距方程组。由此，能求解出第二投影组件中第二摄像头相对于第一投影组件中第一投影镜头的相对位置关系，即获得第j个投影组件110中摄像头相对于第i个投影组件110中投影镜头的相对于位置关系。
因同一个投影组件110中摄像头140与投影镜头130之间的位置关系为已知的固定值，因此可以获得第j个投影组件110中投影镜头130与第i个投影组件110中投影镜头130的相对于位置关系，及第j个投影组件110中摄像头140与第i个投影组件110中摄像头140的相对于位置关系。
进一步地，处理器120可以通过上述方法获取第i个投影组件110与其它(n-1)个投影组件110之间的相对于位置关系。
因此通过上述方法，处理器120能够获取n个投影组件110中任意两个投影组件110之间的相对位置关系。
在其它实施例中，为减少计算开销，处理器120还可以在步骤S501之前，即在利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系之前，对采样图案与测试图案进行匹配，以判断采样图案是否包含测试图案的部分或者全部图像信息，响应于采样图案包含测试图案的图像信息，执行步骤S501；响应于采样图案不包含测试图案的图像信息，则继续利用下一个投影组件110采样测试图案的，以获取下一个采样图案。
步骤S204：利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件110拼接融合。
其中，目标投影图案包括多个子图案。
本实施例可以通过如图10所示的方法实现步骤S204。本实施例的方法包括步骤S1001至步骤S1003。
步骤S1001：利用相对位置关系生成每个投影组件110在投影融合系统10中的绝对位置关系。
处理器120利用相对位置关系生成每个投影组件110在投影融合系统10中的绝对位置关系，并存储于融合和映射关系表。
步骤S1002：利用每个投影组件110的绝对位置关系计算出目标投影图案的拆分和畸变映射。
处理器120利用融合和映射关系表可完成目标投影图案的分割、映射和融合功能。
步骤S1003：确定每个投影组件110所需投影的子图案，控制每个投影组件110同步投射对应的子图案。
区别于现有技术，本实施例投影融合系统10通过处理器120控制多个投影组件110分别投射测试图案，并在每个投影组件110投射测试图案时，控制多个投影组件110分别采集投射出来的测试图案，以获得多个采样图案，可以利用测试图案及采样图案计算出投射测试图案的投影组件110与其它投影组件110之间的相对于位置关系，采用类似的方法，即可获得多个投影组件110中任意两者之间的相对位置关系，利用该相对位置关系能够实现多个投影组件110的自动拼接融合，能够同时解决投影组件110的建模和参数提取，实现无人为干预的投影融合和3D映射校准。
本申请进一步提出另一实施例的投影融合方法，如图11所示，本实施例投影融合方法包括以下步骤：
步骤S1101：对多个投影组件110的信息进行配置。
步骤S1101与步骤S201类似，这里不赘述。
步骤S1102：控制每个投影组件110投射测试图案。
步骤S1102与步骤S202类似，这里不赘述。
步骤S1103：在每个投影组件110投射测试图案时，控制一投影组件110对测试图案进行采集，以获得一采样图案。
步骤S1104：利用测试图案和一采样图案获取投射测试图案的投影组件110与采集采样图案的其它投射组件110之间的相对位置关系。
在某个投影组件110投射测试图案时，依次控制其它投影组件110采集采样图案，并依次获取投射测试图案的投影组件110与采集采样图案的投影组件110之间的相对位置关系，对处理器120的运算能力要求较低。
步骤S1105：累积已采集采样图案的投影组件110的第二数量。
步骤S1106：响应于第二数量小于多个投影组件110的总量，执行步骤1103。
处理器120判定已采集采样图案的投影组件110的第二数量小于多个投影组件110的总量，则认为还有投影组件110未采集采样图案，处理器120控制下一个投影组件110采集采样图案。
步骤S1107：响应于第二数量大于或等于多个投影组件110的总量。
处理器120判定已采集采样图案的投影组件110的第二数量大于或者等于多个投影组件110的总量，则认为所有投影组件110均已采集采样图案。
步骤S1108：累积已投射测试图案的投影组件110的第一数量。
步骤S1109：响应于第一数量大于或者等于多个投影组件110的总量，执行步骤S1111。
处理器120判定已投射测试图案的投影组件110的第一数量大于或者等于多个投影组件110的总量，则认为所有投影组件110均已投射测试图案，处理器120执行步骤S1111。
步骤S1110：响应于第一数量小于多个投影组件110的总量，执行步骤S1102。
处理器120判定已投射测试图案的投影组件110的第一数量小于多个投影组件110的总量，则认为还有投影组件110未投射测试图案，处理器120控制下一个投影组件110投射测试图案。
步骤S1111：利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件110拼接融合。
步骤S1112与步骤S204类似，这里不赘述。
在其它实施例中，在某个投影组件投射测试图案时，还可以控制其它投影组件同时对测试图案进行采集，以获得多个采样图案和/或同时对于多个采样图案进行计算，以同时获得多个相对于位置关系，能够提高处理器120的处理效率。
在上述实施例的基础上，本实施例进一步对已投射测试图案的投影组件110的数量进行判定处理及对已采集采样图案的投影组件110的数量进行判定处理，能够避免部分投影组件110未投射测试图案或者未采集采样图案，以避免部分投影组件110的位置信息未获取的问题。
本申请进一步提出一种计算机可读存储介质，如图12所示，图12是本申请计算机可读存储介质一实施例的结构示意图。计算机可读存储介质90其上存储有程序指令91，程序指令91被处理器(图未示)执行时实现上述投影融合方法。
本实施例计算机可读存储介质90可以是但不局限于U盘、SD卡、PD光驱、移动硬盘、大容量软驱、闪存、多媒体记忆卡、服务器等。
区别于现有技术，本申请实施例投影融合方法用于投影融合系统，该投影融合系统包括多个投影组件，该投影融合方法包括：对多个投影组件进行信息配置；控制每个投影组件投射测试图案；在每个投影组件投射测试图案时，控制多个投影组件分别对测试图案进行采集，以获得多个采样图案，并利用测试图案和采样图案获取投射测试图案的投影组件与其它投影组件之间的相对位置关系；利用相对位置关系对目标投影图案进行拆分，并通过多个投影组件拼接融合。本申请实施例投影融合系统通过处理器控制多个投影组件分别投射测试图案，并在每个投影组件投射测试图案时，控制多个投影组件分别采集投射出来的测试图案，以获得多个采样图案，可以利用测试图案及采样图案计算出投射测试图案的投影组件与其它投影组件之间的相对于位置关系，采用类似的方法，即可获得多个投影组件中任意两者之间的相对位置关系，利用该相对位置关系能够实现多个投影组件的自动拼接融合，能够同时解决投影组件的建模和参数提取，实现无人为干预的投影融合和3D映射校准。
本申请实施例投影组件通过控制测试图案的内容，如采用传统结构光的方法，能够计算并生成投影目标曲面的三维点云并由此生成投影目标曲面的三维几何模型。
本申请实施例投影组件根据完整的本申请实施例投影组件模型和投影目标曲面的三维几何模型，计算目标图像的拆分和映射变换，生成每个投影组件的投射内容并通过通信信道下发给每个本申请实施例投影组件显示。
另外，上述功能如果以软件功能的形式实现并作为独立产品销售或使用时，可存储在一个移动终端可读取存储介质中，即，本申请还提供一种存储有程序数据的存储装置，所述程序数据能够被执行以实现上述实施例的方法，该存储装置可以为如U盘、光盘、服务器等。也就是说，本申请可以以软件产品的形式体现出来，其包括若干指令用以使得一台智能终端执行各个实施例所述方法的全部或部分步骤。
在本申请的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(可以是个人计算机，服务器，网络设备或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
以上所述仅为本申请的实施方式，并非因此限制本申请的专利范围，凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种投影融合方法，其特征在于，用于投影融合系统，所述投影融合系统包括多个投影组件，所述投影融合方法包括：
对所述多个投影组件进行信息配置；
控制每个所述投影组件投射测试图案；
在每个所述投影组件投射所述测试图案时，控制所述多个投影组件分别对所述测试图案进行采集，以获得多个采样图案，并利用所述测试图案和所述采样图案获取投射所述测试图案的所述投影组件与其它所述投影组件之间的相对位置关系；
利用所述相对位置关系对目标投影图案进行拆分，并通过所述多个投影组件拼接融合。
2.根据权利要求1所述的投影融合方法，其特征在于，所述目标投影图案包括多个子图案，所述利用所述相对位置关系对目标投影图案进行拆分，并通过所述多个投影组件拼接融合的步骤包括：
利用所述相对位置关系生成每个所述投影组件在所述投影融合系统中的绝对位置关系；
利用每个所述投影组件的绝对位置关系计算出目标投影图案的拆分和畸变映射；
确定每个所述投影组件所需投影的所述子图案，控制每个所述投影组件同步投射对应的所述子图案。
3.根据权利要求1所述的投影融合方法，其特征在于，所述多个投影组件包括第一投影组件和第二投影组件，所述第一投影组件用于投射所述测试图案，所述第二投影组件为所述投影融合系统中的其它所述投影组件，所述第一投影组件包括第一投影镜头和第一摄像头，所述第二投影组件包括第二投影镜头和第二摄像头，所述利用所述测试图案及所述采样图案获取投射所述测试图案的所述投影组件与其它所述投影组件的步骤包括：
获取所述测试图案的特征点的位置信息；
利用所述位置信息获取所述第一摄像头的第一外部参数；
利用所述第一外部参数和所述位置信息获取所述第一投影组件与所述第二投影组件之间的相对位置关系。
4.根据权利要求3所述的投影融合方法，其特征在于，所述位置信息包括坐标信息，所述第一外部参数包括空间坐标信息，所述获取所述测试图案的特征点的位置信息的步骤包括：
获取所述测试图案的特征点在所述测试图案中的第一坐标信息；
获取所述特征点在所述第一摄像头采集的所述采样图案中的第二坐标信息；
所述利用所述位置信息获取所述第一摄像头的第一外部参数的步骤包括：
获取所述第一摄像头对所述第一投影镜头的相对外参；
将所述第一坐标信息转换到世界坐标系下，以获得所述特征点的第一方向向量，并将所述第二坐标信息转换到所述世界坐标系下，以获得所述特征点的第二方向向量；
采用三角测距法对所述第一方向向量、所述第二方向向量及所述相对外参进行计算，以获取所述特征点在所述世界坐标系下的空间位置信息。
5.根据权利要求4所述的投影融合方法，其特征在于，所述获取所述测试图案的特征点的位置信息的步骤进一步包括：
获取所述特征点在所述第二摄像头采集的所述采集图案中的第三坐标信息；
所述利用所述第一外部参数和所述位置信息获取所述第一投影组件与所述第二投影组件之间的相对位置关系的步骤包括：
将所述第三坐标信息转换到世界坐标系下，以获得所述特征点的第三方向向量；
采用三角测距法对所述第三向向量和所述空间位置信息进行计算，以获取所述世界坐标系下所述特征点相对于所述第一投影镜头的相对位置关系。
6.根据权利要求3所述的投影融合方法，其特征在于，在所述获取所述测试图案的特征点的位置信息的步骤之前，所述投影融合方法进一步包括：
响应于所述采样图案包含所述测试图案的图像信息，执行所述获取所述测试图案的特征点的位置信息的步骤。
7.根据权利要求1所述的投影融合方法，其特征在于，在所述利用所述相对位置关系对目标投影图案进行拆分，并通过所述多个投影组件拼接融合的步骤之前，所述投影融合方法进一步包括：
累积已投射所述测试图案的所述投影组件的第一数量；
响应于所述第一数量大于或者等于所述多个投影组件的总量，执行所述利用所述相对位置关系对目标投影图案进行拼接融合的步骤；
响应于所述第一数量小于所述多个投影组件的总量，执行依次控制每个所述投影组件投射测试图案的步骤。
8.根据权利要求1所述的投影融合方法，其特征在于，所述控制所述多个投影组件分别对所述测试图案进行采集，以获得多个采样图案，并利用所述测试图案和所述采样图案获取投射所述测试图案的所述投影组件与其它所述投影组件之间的相对位置关系的步骤包括以循环方式执行下述子步骤：
控制一所述投影组件对所述测试图案进行采集，以获得一采样图案；
利用所述测试图案和所述一采样图案获取投射所述测试图案的所述投影组件与采集所述采样图案的其它所述投射组件之间的相对位置关系；
所述控制所述多个投影组件分别对所述测试图案进行采集，以获得多个采样图案，并利用所述测试图案和所述采样图案获取投射所述测试图案的所述投影组件与其它所述投影组件之间的相对位置关系的步骤进一步包括：
累积已采集所述采样图案的所述投影组件的第二数量；
响应于所述第二数量小于所述多个投影组件的总量，执行所述控制一所述投影组件对所述测试图案进行采集，以获得一采样图案的子步骤；
响应于所述第二数量大于或等于所述多个投影组件的总量，执行所述依次控制每个所述投影组件投射测试图案的步骤。
9.一种投影融合系统，其特征在于，所述投影融合系统包括：
多个投影组件；
处理器，分别与所述多个投影组件连接，所述处理器用于对所述多个投影组件的信息进行配置；所述处理器用于控制每个所述投影组件投射测试图案，并在每个所述投影组件投射所述测试图案时，控制所述多个投影组件分别对所述测试图案进行采集，以获得多个采样图案，并利用所述测试图案和所述采样图案获取投射所述测试图案的所述投影组件与其它所述投影组件之间的相对位置关系；所述处理器进一步用于利用所述相对位置关系对目标投影图案进行拆分，并通过所述多个投影组件拼接融合。
10.一种计算机可读存储介质，其特征在于，其上存储有程序数据，所述程序数据被执行时以实现权利要求1至8任一项所述的投影融合方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011459435.4A CN114630087A (zh) | 2020-12-11 | 2020-12-11 | 投影融合方法、投影融合系统及计算机可读存储介质 |
| PCT/CN2021/132870 WO2022121686A1 (zh) | 2020-12-11 | 2021-11-24 | 投影融合方法、投影融合系统及计算机可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011459435.4A CN114630087A (zh) | 2020-12-11 | 2020-12-11 | 投影融合方法、投影融合系统及计算机可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114630087A true CN114630087A (zh) | 2022-06-14 |
Family
ID=81895819
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011459435.4A Pending CN114630087A (zh) | 2020-12-11 | 2020-12-11 | 投影融合方法、投影融合系统及计算机可读存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN114630087A (zh) |
| WO (1) | WO2022121686A1 (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115314690B (zh) * | 2022-08-09 | 2023-09-26 | 北京淳中科技股份有限公司 | 一种图像融合带处理方法、装置、电子设备及存储介质 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7019713B2 (en) * | 2002-10-30 | 2006-03-28 | The University Of Chicago | Methods and measurement engine for aligning multi-projector display systems |
| CN102288131A (zh) * | 2011-05-12 | 2011-12-21 | 上海大学 | 物体360°轮廓误差的自适应条纹测量装置和方法 |
| TWI436249B (zh) * | 2011-07-26 | 2014-05-01 | Univ Nat Cheng Kung | 觸控投影系統 |
| CN102881006A (zh) * | 2012-08-03 | 2013-01-16 | 吉林禹硕动漫游戏科技股份有限公司 | 多投影显示系统中的图像拼接与融合方法 |
| CN106060493A (zh) * | 2016-07-07 | 2016-10-26 | 广东技术师范学院 | 多源投影无缝边缘拼接方法及系统 |
| CN110191326B (zh) * | 2019-05-29 | 2021-09-17 | 北京小鸟听听科技有限公司 | 一种投影系统分辨率扩展方法、装置和投影系统 |
| CN111918045B (zh) * | 2020-08-05 | 2021-09-17 | 华强方特(深圳)软件有限公司 | 用于多个投影机进行投影拼接校正的网格数据生成方法 |
-
2020
- 2020-12-11 CN CN202011459435.4A patent/CN114630087A/zh active Pending
-
2021
- 2021-11-24 WO PCT/CN2021/132870 patent/WO2022121686A1/zh active Application Filing
Also Published As
| Publication number | Publication date |
|---|---|
| WO2022121686A1 (zh) | 2022-06-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6951595B2 (ja) | 住宅のデータ収集およびモデル生成方法 | |
| US11012622B2 (en) | Digital 3D/360 degree camera system | |
| US20190378330A1 (en) | Method for data collection and model generation of house | |
| CN107798715B (zh) | 立体图形的对齐吸附方法、装置、计算机设备及存储介质 | |
| CN103843329B (zh) | 用于立体图像对的有条件显示的方法和设备 | |
| KR20200035457A (ko) | 이미지 스플라이싱 방법 및 장치, 그리고 저장 매체 | |
| CN105681772A (zh) | 显示控制装置及其控制方法 | |
| CN110945868B (zh) | 用于生成场景的平铺三维图像表示的装置和方法 | |
| CN111669564B (zh) | 图像重建方法、系统、设备及计算机可读存储介质 | |
| CN113808220A (zh) | 双目摄像机的标定方法、系统、电子设备和存储介质 | |
| CN110099220B (zh) | 一种全景拼接方法及装置 | |
| KR101853269B1 (ko) | 스테레오 이미지들에 관한 깊이 맵 스티칭 장치 | |
| CN105389845A (zh) | 三维重建的图像获取方法和系统、三维重建方法和系统 | |
| CN114640833A (zh) | 投影画面调整方法、装置、电子设备和存储介质 | |
| CN114630087A (zh) | 投影融合方法、投影融合系统及计算机可读存储介质 | |
| JPWO2018167918A1 (ja) | プロジェクタ、マッピング用データ作成方法、プログラム及びプロジェクションマッピングシステム | |
| CN105094739A (zh) | 一种基于移动终端前置摄像头的多终端屏幕自动拼接方法 | |
| CN110191284B (zh) | 对房屋进行数据采集的方法、装置、电子设备和存储介质 | |
| WO2023087894A1 (zh) | 区域调整方法和装置、摄像头和存储介质 | |
| WO2021022989A1 (zh) | 标定参数的获取方法、装置、处理器及电子设备 | |
| US20230342973A1 (en) | Image processing method and apparatus, device, storage medium, and computer program product | |
| CN116405642A (zh) | 一种视频与实景三维模型融合的方法及装置 | |
| CN117611765A (zh) | 虚拟场景模型的生成方法、装置、存储介质及电子设备 | |
| JP5535840B2 (ja) | ３次元画像生成装置 | |
| CN116486047A (zh) | 虚拟制片的处理方法、装置、电子设备、介质及程序产品 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |