CN116389698A - 一种将球形全景视频投影到异形屏幕的方法及装置 - Google Patents

Abstract

本申请公开了一种将球形全景视频投影到异形屏幕的方法及装置。该方法包括首先获取球形全景视频，对球形全景视频进行截取得到源全景图片，并将源全景图片中设置参考线及参考点得到第一全景图片；通过投影融合算法将第一全景图片投影到异形屏幕上；然后在异形屏幕前选定观察点，并通过全景摄像机在观察点处对异形屏幕上的投影进行拍摄得到第二全景图片；最后比对第一全景图片和第二全景图片中参考线及参考点的对应位置，根据比对结果对投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。本发明能够将球形全景视频变形到现场的各种封闭异形屏幕。

Description

一种将球形全景视频投影到异形屏幕的方法及装置

技术领域

本发明涉及图像处理技术领域，特别涉及一种将球形全景视频投影到异形屏幕的方法及装置。

背景技术

近几年，在展示展览、娱乐等领域，沉浸式场景备受关注，它通过视觉的超长延伸，给人来带来身临其境的空间感，从而使人获得震撼的、刺激的、不可思议的体验。LED显示屏可搭建超大的屏幕，并可实现高清分辨率，从而成为打造沉浸式场景的主要显示方案。

在搭建整个沉浸式场景中，受现场环境因素影响比较大，由于现场环境各不相同，所以搭建出来的屏幕也是形状各异，有球形、圆柱形、立方体、圆柱加穹顶、以及各种其他的形状。但是现有全景视频一般是针对球形屏幕制作出来的。

球形的全景视频是经过严重变形的视频，只有在贴到球形屏幕上的时候显示才是正常的。如果将球形全景视频没有变形就均匀的投到异形屏幕的各个面上，必然会出现有的地方看上去比较小，有的地方看上去比较大，有的地方有扭曲的现象。

发明内容

基于此，本申请实施例提供了一种将球形全景视频投影到异形屏幕的方法及装置，能够将球形全景视频变形到现场的各种封闭异形屏幕。

第一方面，提供了一种将球形全景视频投影到异形屏幕的方法，该方法包括：

获取球形全景视频，对所述球形全景视频进行截取得到源全景图片，并将所述源全景图片中设置参考线及参考点得到第一全景图片；

通过预设的投影融合算法将所述第一全景图片投影到异形屏幕上；

在所述异形屏幕前选定观察点，并通过全景摄像机在观察点处对所述异形屏幕上的投影进行拍摄得到第二全景图片；

比对第一全景图片和第二全景图片中参考线及参考点的对应位置；其中，将第二全景图片设置到预设的透明度，并与第一全景图片进行叠加，根据两张全景图片对应的参考线及参考点位置进行比对；

根据比对结果对所述投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。

可选地，将所述源全景图片中设置参考线及参考点得到第一全景图片，包括：

在源全景图片的水平及竖直方向均匀设置多个参考线，并将水平方向参考线和竖直方向参考线的焦点作为参考点。

可选地，所述预设的投影融合算法具体采用kommanderT3技术，根据异形屏幕的面积将全景图片大小做出适应性变形，并在异形屏幕中输出。

第二方面，提供了一种将球形全景视频投影到异形屏幕的装置，该装置包括：

获取模块，用于获取球形全景视频，对所述球形全景视频进行截取得到源全景图片，并将所述源全景图片中设置参考线及参考点得到第一全景图片；

第一投影模块，用于通过预设的投影融合算法将所述第一全景图片投影到异形屏幕上；

拍摄模块，用于在所述异形屏幕前选定观察点，并通过全景摄像机在观察点处对所述异形屏幕上的投影进行拍摄得到第二全景图片；

比对模块，用于比对第一全景图片和第二全景图片中参考线及参考点的对应位置；其中，将第二全景图片设置到预设的透明度，并与第一全景图片进行叠加，根据两张全景图片对应的参考线及参考点位置进行比对；

校正模块，用于根据比对结果对所述投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。

可选地，获取模块将所述源全景图片中设置参考线及参考点得到第一全景图片，包括：

在源全景图片的水平及竖直方向均匀设置多个参考线，并将水平方向参考线和竖直方向参考线的焦点作为参考点。

可选地，所述预设的投影融合算法具体采用kommanderT3技术，根据异形屏幕的面积将全景图片大小做出适应性变形，并在异形屏幕中输出。

第三方面，提供了一种电子设备，包括存储器和处理器，存储器存储有计算机程序，处理器执行计算机程序时实现上述第一方面任一所述的一种将球形全景视频投影到异形屏幕的方法。

第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述第一方面任一所述的一种将球形全景视频投影到异形屏幕的方法。

本申请实施例提供的技术方案中，首先获取球形全景视频，对球形全景视频进行截取得到源全景图片，并将源全景图片中设置参考线及参考点得到第一全景图片；通过预设的投影融合算法将第一全景图片投影到异形屏幕上；然后在异形屏幕前选定观察点，并通过全景摄像机在观察点处对异形屏幕上的投影进行拍摄得到第二全景图片；最后比对第一全景图片和第二全景图片中参考线及参考点的对应位置，根据比对结果对投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。可以看出，本发明能够将球形全景视频变形到现场的各种封闭异形屏幕。

附图说明

为了更清楚地说明本发明的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引伸获得其它的实施附图。

图1为本申请实施例提供的一种将球形全景视频投影到异形屏幕的方法的步骤流程图；

图2为本申请实施例提供的一种将球形全景视频投影到异形屏幕的装置的框图；

图3为本申请实施例提供的一种电子设备的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

在本发明的描述中，除非另有说明“多个”的含义是两个或两个以上。本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”旨在区别指代的对象。对于具有时序流程的方案，这种术语表述方式不必理解为描述特定的顺序或先后次序，对于装置结构的方案，这种术语表述方式也不存在对重要程度、位置关系的区分等。

此外，术语“包括”、“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包括了一系列步骤或单元的过程、方法、系统、产品或设备不必限于已明确列出的那些步骤或单元，而是还可包含虽然并未明确列出的但对于这些过程、方法、产品或设备固有的其它步骤或单元，或者基于本发明构思进一步的优化方案所增加的步骤或单元。

球形的全景视频是经过严重变形的视频，只有在贴到球形屏幕上的时候显示才是正常的。如果我们将球形全景视频没有变形就均匀的投到异形屏幕的各个面上，必然会出现有的地方看上去比较小，有的地方看上去比较大，有的地方有扭曲的现象。本申请通过将球形全景视频贴到任意封闭异形屏幕的方法实现将球形全景视频变形到现场的各种封闭异形屏幕。为便于对本实施例进行理解，首先对本申请实施例所公开的一种将球形全景视频投影到异形屏幕的方法进行详细介绍。

请参考图1，其示出了本申请实施例提供的一种将球形全景视频投影到异形屏幕的方法的流程图，该方法可以包括以下步骤：

步骤101，获取球形全景视频，对球形全景视频进行截取得到源全景图片，并将源全景图片中设置参考线及参考点得到第一全景图片。

其中，在源全景图片的水平及竖直方向均匀设置多个参考线，并将水平方向参考线和竖直方向参考线的焦点作为参考点。

步骤102，通过预设的投影融合算法将第一全景图片投影到异形屏幕上。

具体采用kommanderT3技术，根据异形屏幕的面积将全景图片大小做出适应性变形，并在异形屏幕中输出。

步骤103，在异形屏幕前选定观察点，并通过全景摄像机在观察点处对异形屏幕上的投影进行拍摄得到第二全景图片。

步骤104，比对第一全景图片和第二全景图片中参考线及参考点的对应位置。

其中，具体将第二全景图片设置到预设的透明度，并与第一全景图片进行叠加，根据两张全景图片对应的参考线及参考点位置进行比对。

步骤105，根据比对结果对投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。

本申请实施例提供的技术方案中，首先获取球形全景视频，对球形全景视频进行截取得到源全景图片，并将源全景图片中设置参考线及参考点得到第一全景图片；通过预设的投影融合算法将第一全景图片投影到异形屏幕上；然后在异形屏幕前选定观察点，并通过全景摄像机在观察点处对异形屏幕上的投影进行拍摄得到第二全景图片；最后比对第一全景图片和第二全景图片中参考线及参考点的对应位置，根据比对结果对投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。可以看出，本发明能够将球形全景视频变形到现场的各种封闭异形屏幕，在观察点上看的时候就是一个比较完美的全景图像。

以下给出应用上述方法的另一个可选实施例：

1、将带有标记点的原图P1(第一全景图片)添加到程序(投影融合算法)里面。

2、通过程序将原图P1输出到LED屏幕上(此时由于屏幕不规则，站在屏幕的中心点将无法看到一个正确的全景图)。

3、在观看的地方放一个全景相机，可以拍摄到LED屏幕的图像。

4、通过采集卡将全景相机的画面采集到程序里面，称这个画面为P2(第二全景图片)。

5、经过前面4步以后，P1和P2的画面已经都在程序里面，将P2的画面设置一定的透明度叠加在画面P1上，此时可以看到画面上的参考线和参考点对不上。

6、通过投影融合模块的功能修正投到LED屏幕上的图像，直到P1和P2图像上的参考线和参考点完全重合为止。

请参考图2，其示出了本申请实施例提供的一种将球形全景视频投影到异形屏幕的装置200的框图。如图2所示，该装置200可以包括：获取模块201、第一投影模块202、拍摄模块203、比对模块204以及校正模块205。

获取模块201，用于获取球形全景视频，对所述球形全景视频进行截取得到源全景图片，并将所述源全景图片中设置参考线及参考点得到第一全景图片；

第一投影模块202，用于通过预设的投影融合算法将所述第一全景图片投影到异形屏幕上；

拍摄模块203，用于在所述异形屏幕前选定观察点，并通过全景摄像机在观察点处对所述异形屏幕上的投影进行拍摄得到第二全景图片；

比对模块204，用于比对第一全景图片和第二全景图片中参考线及参考点的对应位置；其中，将第二全景图片设置到预设的透明度，并与第一全景图片进行叠加，根据两张全景图片对应的参考线及参考点位置进行比对；

校正模块205，用于根据比对结果对所述投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。

在本申请可选的实施例中，获取模块201将源全景图片中设置参考线及参考点得到第一全景图片，包括在源全景图片的水平及竖直方向均匀设置多个参考线，并将水平方向参考线和竖直方向参考线的焦点作为参考点。

在本申请可选的实施例中，预设的投影融合算法具体采用kommanderT3技术，根据异形屏幕的面积将全景图片大小做出适应性变形，并在异形屏幕中输出。

关于一种将球形全景视频投影到异形屏幕的装置的具体限定可以参见上文中对于一种将球形全景视频投影到异形屏幕的方法的限定，在此不再赘述。上述一种将球形全景视频投影到异形屏幕的装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种电子设备，该电子设备可以是计算机，其内部结构图可以如图3所示。该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该设备的处理器用于提供计算和控制能力。该设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于一种将球形全景视频投影到异形屏幕的数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种将球形全景视频投影到异形屏幕的方法。

本领域技术人员可以理解，如图3中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在本申请的一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述一种将球形全景视频投影到异形屏幕的方法的步骤。

本实施例提供的计算机可读存储介质，其实现原理和技术效果与上述方法实施例类似，在此不再赘述。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以M种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(SyMchliMk)DRAM(SLDRAM)、存储器总线(RaMbus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (8)

1.一种将球形全景视频投影到异形屏幕的方法，其特征在于，所述方法包括：

获取球形全景视频，对所述球形全景视频进行截取得到源全景图片，并将所述源全景图片中设置参考线及参考点得到第一全景图片；

通过预设的投影融合算法将所述第一全景图片投影到异形屏幕上；

在所述异形屏幕前选定观察点，并通过全景摄像机在观察点处对所述异形屏幕上的投影进行拍摄得到第二全景图片；

比对第一全景图片和第二全景图片中参考线及参考点的对应位置；其中，将第二全景图片设置到预设的透明度，并与第一全景图片进行叠加，根据两张全景图片对应的参考线及参考点位置进行比对；

根据比对结果对所述投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。

2.根据权利要求1所述的将球形全景视频投影到异形屏幕的方法，其特征在于，将所述源全景图片中设置参考线及参考点得到第一全景图片，包括：

在源全景图片的水平及竖直方向均匀设置多个参考线，并将水平方向参考线和竖直方向参考线的焦点作为参考点。

3.根据权利要求1所述的将球形全景视频投影到异形屏幕的方法，其特征在于，所述预设的投影融合算法具体采用kommanderT3技术，根据异形屏幕的面积将全景图片大小做出适应性变形，并在异形屏幕中输出。

4.一种将球形全景视频投影到异形屏幕的装置，其特征在于，所述装置包括：

获取模块，用于获取球形全景视频，对所述球形全景视频进行截取得到源全景图片，并将所述源全景图片中设置参考线及参考点得到第一全景图片；

第一投影模块，用于通过预设的投影融合算法将所述第一全景图片投影到异形屏幕上；

拍摄模块，用于在所述异形屏幕前选定观察点，并通过全景摄像机在观察点处对所述异形屏幕上的投影进行拍摄得到第二全景图片；

比对模块，用于比对第一全景图片和第二全景图片中参考线及参考点的对应位置；其中，将第二全景图片设置到预设的透明度，并与第一全景图片进行叠加，根据两张全景图片对应的参考线及参考点位置进行比对；

校正模块，用于根据比对结果对所述投影融合算法进行调整，直到第一全景图片和第二全景图片中参考线及参考点完全重合，利用调整后的投影融合算法实现对球形全景视频的投影图像校正。

5.根据权利要求4所述的将球形全景视频投影到异形屏幕的装置，其特征在于，获取模块将所述源全景图片中设置参考线及参考点得到第一全景图片，包括：

在源全景图片的水平及竖直方向均匀设置多个参考线，并将水平方向参考线和竖直方向参考线的焦点作为参考点。

6.根据权利要求4所述的将球形全景视频投影到异形屏幕的装置，其特征在于，所述预设的投影融合算法具体采用kommanderT3技术，根据异形屏幕的面积将全景图片大小做出适应性变形，并在异形屏幕中输出。

7.一种电子设备，其特征在于，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至3任一所述的一种将球形全景视频投影到异形屏幕的方法。

8.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至3任一所述的一种将球形全景视频投影到异形屏幕的方法。

Images