CN108012160A - 一种基于全景视频的台标插入方法 - Google Patents
一种基于全景视频的台标插入方法 Download PDFInfo
- Publication number
- CN108012160A CN108012160A CN201610926325.1A CN201610926325A CN108012160A CN 108012160 A CN108012160 A CN 108012160A CN 201610926325 A CN201610926325 A CN 201610926325A CN 108012160 A CN108012160 A CN 108012160A
- Authority
- CN
- China
- Prior art keywords
- coordinates
- spherical
- point
- station caption
- cylindrical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012966 insertion method Methods 0.000 title claims abstract description 9
- 238000000034 method Methods 0.000 claims abstract description 49
- 238000003780 insertion Methods 0.000 claims abstract description 8
- 230000037431 insertion Effects 0.000 claims abstract description 8
- 238000012216 screening Methods 0.000 claims description 7
- 239000000126 substance Substances 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 5
- 238000013507 mapping Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/08—Projecting images onto non-planar surfaces, e.g. geodetic screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明提供了一种基于全景视频的台标插入方法，涉及视频播放技术领域，包括：S1建立全景视频对应矩形平面的坐标系，同时设定台标在该坐标系中的插入位置；S2根据矩形平面的尺寸得到全景视频对应球面/柱面中各像素点的坐标；S3采用投影几何的方法将球面/柱面上各像素点的坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标；S4采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，并基于此将其插入全景视频对应矩形平面。其在将台标插入全景视频之前先对其进行畸变，以此在播放过程中不再会出现畸变，给人们带来便利。
Description
技术领域
本发明涉及视频播放技术领域，尤其涉及一种基于全景视频的台标插入方法。
背景技术
全景视频是虚拟现实(VR，Virtual Reality)的一种表现形式，它能将360°或720°的场景呈现给观众，使观众得到沉浸式的观赏体验。目前全景视频一般采用柱面投影(如图1所示)或球面投影的方式(如图2所示)。具体，当有柱面显示设备时，采用柱面投影方式的全景视频可以在柱面显示设备上直接播放；当有球面显示设备时，采用球面投影方式的全景视频可以在球面显示设备上直接播放。当没有柱面或球面显示设备、只有平面显示设备时，可以采用一种折中的播放方法，即假设平面播放设备是一个窗口(在图1和图2中离人较近的框)，用户通过该窗口看到全景视野中的一部分(在图1和图2中离人较远的框)。以此，用户可通过鼠标拖动等方式控制自己在全景视野中的视角。显然，离人较近框中所显示的内容是较远框中像素点向圆心或球心汇聚的光学投影。视窗式全景视频播放器即采用了该原理进行工作，例如UtoVR播放器等。
目前，全景视频一般采用矩形平面的方式来表示和存储，即在制作全景视频时将柱面或球面映射为矩形平面进行存储。图3所示为球面映射为矩形平面示意图，从图中可以看出，经过从“球面→矩面”的映射之后图像呈现出了较为严重的畸变；在球面播放器上播放时，畸变会自动消失。若该视频通过“视窗式全景播放器”播放，那么播放器将根据用户选定的观察视角，将全景视频中的某个子区域投影到视窗平面上，这一过程称为反畸变，图4所示为图3中一个子区域反畸变的结果。
全景视频制作时的“球面/柱面→矩面”映射过程和播放时的“球面/柱面→视窗”映射过程造成了台标插入的困难。在现有技术中，在全景视频中插入台标的方法与普通视频中插入台标的一样，即直接在全景视频对应的矩形平面的右上角直接插入台标，如图3所示，从图中可以看出，在该矩形平面中，台标是正常的，没有出现畸变，但是该全景视频在播放过程中，无论是使用球面/柱面显示设备播放还是使用视窗式全景播放器播放，所呈现的台标都存在严重的畸变。
发明内容
针对上述问题，本发明旨在提供了一种基于全景视频的台标插入方法，有效解决了现有技术中采用球面/柱面投影方式制作的全景视频播放时出现的台标畸变的问题。
本发明提供的技术方案如下：
一种基于全景视频的台标插入方法，所述全景视频采用球面/柱面投影方式制作，包括：
S1建立全景视频对应矩形平面的坐标系，同时设定台标在该坐标系中的插入位置；
S2根据矩形平面的尺寸得到全景视频对应球面/柱面中各像素点的坐标；
S3采用投影几何的方法将球面/柱面上各像素点的坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标；
S4采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，并基于此将其插入全景视频对应矩形平面。
进一步优选地，在步骤S2中具体包括：
S21根据矩形平面的尺寸得到球面/柱面对应的球半径/柱半径；
S22根据球面/柱面的球半径/柱半径得到球面/柱面中各像素点的球坐标/柱坐标；
S23将球面/柱面中各像素点的球坐标/柱坐标变换为欧几里得空间坐标；
S24将球面/柱面中各像素点的欧几里得空间坐标进行旋转，使得旋转后的z轴正对台标中心；
步骤S3具体为：采用投影几何的方法将旋转后球面/柱面上各像素点的欧几里得空间坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标。
进一步优选地，在步骤S21中根据矩形平面的尺寸得到球面/柱面对应的球半径/柱半径r，具体为：
其中，col为步骤S1矩形平面中像素点的列数。
进一步优选地，在步骤S22中，球面中各像素点的球坐标为(x,y,r)，其中，(x,y)为步骤S1矩形平面中任意一点的坐标，r为球半径；
在步骤S23中，将球面中各像素点的球坐标(x,y,r)变换为欧几里得空间坐标(x',y',z')，具体为：
其中，r为球半径。
进一步优选地，在步骤S22中，柱面中各像素点的柱坐标为(x,y,r)，其中，(x,y)为步骤S1矩形平面中任意一点的坐标，r为柱半径；
在步骤S23中，将柱面中各像素点的柱坐标(x,y,r)变换为欧几里得空间坐标(x/,y/,z/)，具体为：
其中，r为柱半径。
进一步优选地，在步骤S24中，将球面/柱面中各像素点的欧几里得空间坐标进行旋转，使得旋转后的z轴正对台标中心，具体为：
(x//,y//,z//)T＝RβRα(x/,y/,z/)T
其中，
若(x/,y/,z/)T为球面坐标点，则
为欧几里得空间坐标中x轴旋转角度；
为欧几里得空间坐标中y轴旋转角度，
若(x/,y/,z/)T为柱面坐标点，则
为欧几里得空间坐标中x轴旋转角度；
为欧几里得空间坐标中y轴旋转角度。
(xL,yL)为台标在步骤S1中矩形平面的插入位置坐标，(x/,y/,z/)为球面/柱面中各像素点的欧几里得空间坐标，(x//,y//,z//)为球面/柱面中各像素点的欧几里得空间坐标旋转后的坐标。
进一步优选地，在步骤S3中，采用投影几何的方法将旋转后球面/柱面上各像素点的欧几里得空间坐标投影到台标所在平面，具体为：
其中，(x//,y//,z//)为球面/柱面中各像素点的欧几里得空间坐标旋转后的坐标，(x///,y///,z///)为球面/柱面中各像素点投影到台标所在平面各点坐标，r为球半径/柱半径。
进一步优选地，在步骤S3中，根据预设条件筛选出台标对应的各点坐标，具体为：
其中，Q为筛选出的台标对应的各点坐标集合，预设条件包括：及z///＞0，其中，cL为台标中像素点的列数，rL为台标中像素点的行数。
进一步优选地，在步骤S4中，采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，具体为：
其中，Interp2d为二维插值函数，I表示台标各像素坐标及各点对应的像素值集合，为台标各点坐标插值得到的像素值。
在本发明提供的台标插入方法中，采用球面/柱面投影方式及台标的插入位置对台标进行预畸变，再将其插入全景视频中，这样，在播放过程中，不管是在球面播放器中播放，还是在柱面播放器中播放，亦或是在视窗式全景播放器中进行播放，台标都不会出现畸变，以此给人们带来便利，而无需担心播放过程中台标出现畸变的问题。
附图说明
下面将以明确易懂的方式，结合附图说明优选实施方式，对上述特性、技术特征、优点及其实现方式予以进一步说明。
图1为现有技术中柱面投影的全景示意图；
图2为现有技术中球面投影的全景示意图；
图3为现有技术中将球面映射为矩形平面示意图；
图4为现有技术中对图3所示矩形平面某一子区域反畸变示意图；
图5为本发明中球面全景视频转换为柱面全景视频的方法一种实施方式流程示意图；
图6为本发明中球面全景视频转换为柱面全景视频的方法另一种实施方式流程示意图；
图7为本发明中球面全景视频的球面对应的矩形平面的坐标系；
图8为本发明中投影几何方法坐标点变换示意图。
具体实施方式
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对照附图说明本发明的具体实施方式。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图，并获得其他的实施方式。
如图5所示为本发明提供的基于全景视频的台标插入方法一种实施方式示意图，具体该全景视频采用球面/柱面投影方式制作，从图中可以看出，在该台标插入方法中包括：S1建立全景视频对应矩形平面的坐标系，同时设定台标在该坐标系中的插入位置；S2根据矩形平面的尺寸得到全景视频对应球面/柱面中各像素点的坐标；S3采用投影几何的方法将球面/柱面上各像素点的坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标；S4采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，并基于此将其插入全景视频对应矩形平面。
对上述实施方式进行改进得到本实施方式，如图6所示，从图中可以看出，在本实施方式中，该台标插入方法中包括：S1建立全景视频对应矩形平面的坐标系，同时设定台标在该坐标系中的插入位置；S21根据矩形平面的尺寸得到球面/柱面对应的球半径/柱半径；S22根据球面/柱面的球半径/柱半径得到球面/柱面中各像素点的球坐标/柱坐标；S23将球面/柱面中各像素点的球坐标/柱坐标变换为欧几里得空间坐标；S24将球面/柱面中各像素点的欧几里得空间坐标进行旋转，使得旋转后的z轴正对台标中心；S3采用投影几何的方法将旋转后球面/柱面上各像素点的欧几里得空间坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标；S4采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，并基于此将其插入全景视频对应矩形平面。
具体来说，在上述实施方式中，在步骤S1中建立的矩形平面的坐标系如图7所示，且设定台标在该坐标系中的插入位置为(xL,yL)。假定该矩形平面视频中有row行像素点，col列像素点，且包含了水平360°的场景信息。则在一种实施方式中，假定全景视频采用球面投影方式制作，在步骤S21中根据矩形平面的尺寸得到的球半径为在另一种实施方式中，假定全景视频采用柱面投影方式制作，在步骤S21中根据矩形平面的尺寸得到的柱半径同样为
基于此，在一种实施方式中，假定采用球面投影方式制作的全景视频的矩形平面中任意一点的坐标为(x,y)，则球面中各像素点的球坐标为(x,y,r)，以此在步骤S23中，将球面中各像素点的球坐标(x,y,r)变换为欧几里得空间坐标(x',y',z')，具体为：
在另一种实施方式中，假定采用柱面投影方式制作的全景视频的矩形平面中任意一点的坐标为(x,y)，则柱面中各像素点的柱坐标为(x,y,r)，以此在步骤S23中，将柱面中各像素点的柱坐标(x,y,r)变换为欧几里得空间坐标(x',y',z')，具体为：
在上述实施方式中，基于上述公式得到欧几里得空间坐标(x',y',z')之后，在步骤S24中，将球面/柱面中各像素点的欧几里得空间坐标进行旋转，使得旋转后的z轴正对台标中心，具体为：
(x//,y//,z//)T＝RβRα(x/,y/,z/)T
其中，
若(x/,y/,z/)T为球面坐标点，则
为欧几里得空间坐标中x轴旋转角度；
为欧几里得空间坐标中y轴旋转角度，
若(x/,y/,z/)T为柱面坐标点，则
为欧几里得空间坐标中x轴旋转角度；
为欧几里得空间坐标中y轴旋转角度。
(xL,yL)为台标在步骤S1中矩形平面的插入位置坐标，(x/,y/,z/)为球面/柱面中各像素点的欧几里得空间坐标，(x//,y//,z//)为球面/柱面中各像素点的欧几里得空间坐标旋转后的坐标。
对欧几里得空间坐标系进行旋转之后，如图8所示，在步骤S3中，采用投影几何的方法将旋转后球面/柱面上各像素点的欧几里得空间坐标投影到台标所在平面，具体为：
其中，(x//,y//,z//)为球面/柱面中各像素点的欧几里得空间坐标旋转后的坐标，(x///,y///,z///)为球面/柱面中各像素点投影到台标所在平面各点坐标(台标所在平面与z///轴垂直)，r为球半径/柱半径。
由此，经过上述坐标旋转和几何投影步骤之后，台标正好出现在与坐标原点距离为r，且与z///轴垂直的平面上。由台标的位置只是该平面中的一小块，以此，在步骤S3中，根据预设条件筛选出台标对应的各点坐标，即将集合(x///,y///,z///)中满足预设条件的像素点筛选出来形成新的坐标点集合Q，具体为：
其中，Q为筛选出的台标对应的各点坐标集合，预设条件包括： 及z///＞0，其中，cL为台标中像素点的列数，rL为台标中像素点的行数。
由球面/柱面投影到台标所在平面得到的坐标点不一定是整像素点的位置，因而，将步骤S3中筛选出来的坐标点集合Q＝{(x///,y///,z///)}作为插值查询点，并在步骤S4中，采用二维插值的方法得到各插值查询点的像素值，具体为：
其中，Interp2d为二维插值函数，I＝(x,y,f<x,y>)表示台标各像素坐标及各点对应的像素值集合，为台标各点坐标插值得到的像素值。
基于上述描述可知，(x///,y///,z///)与采用球面/柱面上各像素点(x,y,r)是一一对应的，即将上式左侧的(x///,y///,z///)替换为(x,y,r)就可得到{(x,y,r,f<x,y,r>)}，即台标到球面/柱面投影方式制作的全景视频的畸变图像，最后，将得到的畸变图像叠加到矩形平面中即完成了台标的插入。在一种实施方式中，对于有多个通道的彩色图像来说，每个通道的像素值分别使用上式进行插值得到，完成台标的插入。
以上通过分别描述每个过程的实施场景案例，详细描述了本发明，本领域的技术人员应能理解。在不脱离本发明实质的范围内，可以作修改和变形。
Claims (9)
1.一种基于全景视频的台标插入方法，其特征在于，所述全景视频采用球面/柱面投影方式制作，所述台标插入方法中包括：
S1建立全景视频对应矩形平面的坐标系，同时设定台标在该坐标系中的插入位置；
S2根据矩形平面的尺寸得到全景视频对应球面/柱面中各像素点的坐标；
S3采用投影几何的方法将球面/柱面上各像素点的坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标；
S4采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，并基于此将其插入全景视频对应矩形平面。
2.如权利要求1所述的台标插入方法，其特征在于，在步骤S2中具体包括：
S21根据矩形平面的尺寸得到球面/柱面对应的球半径/柱半径；
S22根据球面/柱面的球半径/柱半径得到球面/柱面中各像素点的球坐标/柱坐标；
S23将球面/柱面中各像素点的球坐标/柱坐标变换为欧几里得空间坐标；
S24将球面/柱面中各像素点的欧几里得空间坐标进行旋转，使得旋转后的z轴正对台标中心；
步骤S3具体为：采用投影几何的方法将旋转后球面/柱面上各像素点的欧几里得空间坐标投影到台标所在平面，并根据预设条件筛选出台标对应的各点坐标。
3.如权利要求2所述的台标插入方法，其特征在于，在步骤S21中根据矩形平面的尺寸得到球面/柱面对应的球半径/柱半径r，具体为：
<mrow>
<mi>r</mi>
<mo>=</mo>
<mfrac>
<mrow>
<mi>c</mi>
<mi>o</mi>
<mi>l</mi>
<mo>+</mo>
<mn>1</mn>
</mrow>
<mrow>
<mn>2</mn>
<mi>&pi;</mi>
</mrow>
</mfrac>
</mrow>
其中，col为步骤S1矩形平面中像素点的列数。
4.如权利要求3所述的台标插入方法，其特征在于，
在步骤S22中，球面中各像素点的球坐标为(x,y,r)，其中，(x,y)为步骤S1矩形平面中任意一点的坐标，r为球半径；
在步骤S23中，将球面中各像素点的球坐标(x,y,r)变换为欧几里得空间坐标(x',y',z')，具体为：
<mfenced open = "{" close = "">
<mtable>
<mtr>
<mtd>
<msup>
<mi>x</mi>
<mo>/</mo>
</msup>
<mo>=</mo>
<mi>r</mi>
<mo>&times;</mo>
<mi>s</mi>
<mi>i</mi>
<mi>n</mi>
<mo>(</mo>
<mi>x</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
</mtd>
</mtr>
<mtr>
<mtd>
<msup>
<mi>y</mi>
<mo>/</mo>
</msup>
<mo>=</mo>
<mi>r</mi>
<mo>&times;</mo>
<mi>c</mi>
<mi>o</mi>
<mi>s</mi>
<mo>(</mo>
<mi>x</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
<mo>&times;</mo>
<mi>sin</mi>
<mo>(</mo>
<mi>y</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
</mtd>
</mtr>
<mtr>
<mtd>
<msup>
<mi>z</mi>
<mo>/</mo>
</msup>
<mo>=</mo>
<mi>r</mi>
<mo>&times;</mo>
<mi>cos</mi>
<mo>(</mo>
<mi>x</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
<mo>&times;</mo>
<mi>c</mi>
<mi>o</mi>
<mi>s</mi>
<mo>(</mo>
<mi>y</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
</mtd>
</mtr>
</mtable>
</mfenced>
其中，r为球半径。
5.如权利要求3所述的台标插入方法，其特征在于，
在步骤S22中，柱面中各像素点的柱坐标为(x,y,r)，其中，(x,y)为步骤S1矩形平面中任意一点的坐标，r为柱半径；
在步骤S23中，将柱面中各像素点的柱坐标(x,y,r)变换为欧几里得空间坐标(x/,y/,z/)，具体为：
<mfenced open = "{" close = "">
<mtable>
<mtr>
<mtd>
<mrow>
<msup>
<mi>x</mi>
<mo>/</mo>
</msup>
<mo>=</mo>
<mi>x</mi>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msup>
<mi>y</mi>
<mo>/</mo>
</msup>
<mo>=</mo>
<mi>r</mi>
<mo>&times;</mo>
<mi>s</mi>
<mi>i</mi>
<mi>n</mi>
<mrow>
<mo>(</mo>
<mi>y</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
</mrow>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msup>
<mi>z</mi>
<mo>/</mo>
</msup>
<mo>=</mo>
<mi>r</mi>
<mo>&times;</mo>
<mi>c</mi>
<mi>o</mi>
<mi>s</mi>
<mrow>
<mo>(</mo>
<mi>y</mi>
<mo>/</mo>
<mi>r</mi>
<mo>)</mo>
</mrow>
</mrow>
</mtd>
</mtr>
</mtable>
</mfenced>
其中，r为柱半径。
6.如权利要求4或5所述的台标插入方法，其特征在于，在步骤S24中，将球面/柱面中各像素点的欧几里得空间坐标进行旋转，使得旋转后的z轴正对台标中心，具体为：
(x//,y//,z//)T＝RβRα(x/,y/,z/)T
其中，
若(x/,y/,z/)T为球面坐标点，则
为欧几里得空间坐标中x轴旋转角度；
为欧几里得空间坐标中y轴旋转角度，
若(x/,y/,z/)T为柱面坐标点，
为欧几里得空间坐标中x轴旋转角度；
为欧几里得空间坐标中y轴旋转角度；
(xL,yL)为台标在步骤S1中矩形平面的插入位置坐标，(x/,y/,z/)为球面/柱面中各像素点的欧几里得空间坐标，(x//,y//,z//)为球面/柱面中各像素点的欧几里得空间坐标旋转后的坐标。
7.如权利要求6所述的台标插入方法，其特征在于，在步骤S3中，采用投影几何的方法将旋转后球面/柱面上各像素点的欧几里得空间坐标投影到台标所在平面，具体为：
<mrow>
<mo>(</mo>
<msup>
<mi>x</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>y</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>)</mo>
<mo>=</mo>
<mfrac>
<mi>r</mi>
<mrow>
<mo>|</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>|</mo>
</mrow>
</mfrac>
<mo>(</mo>
<msup>
<mi>x</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>y</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>)</mo>
</mrow>
其中，(x//,y//,z//)为球面/柱面中各像素点的欧几里得空间坐标旋转后的坐标，(x///,y///,z///)为球面/柱面中各像素点投影到台标所在平面各点坐标，r为球半径/柱半径。
8.如权利要求7所述的台标插入方法，其特征在于，在步骤S3中，根据预设条件筛选出台标对应的各点坐标，具体为：
<mrow>
<mi>Q</mi>
<mo>=</mo>
<mrow>
<mo>{</mo>
<mrow>
<mrow>
<mo>(</mo>
<mrow>
<msup>
<mi>x</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>y</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
</mrow>
<mo>)</mo>
</mrow>
<mo>|</mo>
<mo>-</mo>
<mfrac>
<msub>
<mi>c</mi>
<mi>L</mi>
</msub>
<mn>2</mn>
</mfrac>
<mo>&le;</mo>
<msup>
<mi>x</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>&le;</mo>
<mfrac>
<msub>
<mi>c</mi>
<mi>L</mi>
</msub>
<mn>2</mn>
</mfrac>
<mo>,</mo>
<mo>-</mo>
<mfrac>
<msub>
<mi>r</mi>
<mi>L</mi>
</msub>
<mn>2</mn>
</mfrac>
<mo>&le;</mo>
<msup>
<mi>y</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>&le;</mo>
<mfrac>
<msub>
<mi>r</mi>
<mi>L</mi>
</msub>
<mn>2</mn>
</mfrac>
<mo>,</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>></mo>
<mn>0</mn>
</mrow>
<mo>}</mo>
</mrow>
</mrow>
其中，Q为筛选出的台标对应的各点坐标集合，预设条件包括：及z///＞0，其中，cL为台标中像素点的列数，rL为台标中像素点的行数。
9.如权利要求8所述的台标插入方法，其特征在于，在步骤S4中，采用二维插值的方法得到步骤S3中台标对应各坐标点的像素值，具体为：
<mrow>
<mo>(</mo>
<msup>
<mi>x</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>y</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msub>
<mi>f</mi>
<mrow>
<mo><</mo>
<msup>
<mi>x</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>y</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>,</mo>
<msup>
<mi>z</mi>
<mrow>
<mo>/</mo>
<mo>/</mo>
<mo>/</mo>
</mrow>
</msup>
<mo>></mo>
</mrow>
</msub>
<mo>)</mo>
<mo>=</mo>
<mi>I</mi>
<mi>n</mi>
<mi>t</mi>
<mi>e</mi>
<mi>r</mi>
<mi>p</mi>
<mn>2</mn>
<mi>d</mi>
<mo>(</mo>
<mi>I</mi>
<mo>,</mo>
<mi>Q</mi>
<mo>)</mo>
</mrow>
其中，Interp2d为二维插值函数，I表示台标各像素坐标及各点对应的像素值集合，为台标各点坐标插值得到的像素值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610926325.1A CN108012160B (zh) | 2016-10-31 | 2016-10-31 | 一种基于全景视频的台标插入方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610926325.1A CN108012160B (zh) | 2016-10-31 | 2016-10-31 | 一种基于全景视频的台标插入方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108012160A true CN108012160A (zh) | 2018-05-08 |
| CN108012160B CN108012160B (zh) | 2019-07-23 |
Family
ID=62047739
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610926325.1A Active CN108012160B (zh) | 2016-10-31 | 2016-10-31 | 一种基于全景视频的台标插入方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108012160B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110047033A (zh) * | 2019-03-18 | 2019-07-23 | 北京奇艺世纪科技有限公司 | 投影变形方法、设备、图像处理设备及介质 |
| CN111107419A (zh) * | 2019-12-31 | 2020-05-05 | 福州大学 | 一种基于全景视频的播放及标注多点即时添加方法 |
| CN114051089A (zh) * | 2021-10-12 | 2022-02-15 | 聚好看科技股份有限公司 | 一种全景视频中投放资源的方法及显示设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101038623A (zh) * | 2006-03-13 | 2007-09-19 | 欧姆龙株式会社 | 特征点检测装置、特征点检测方法及特征点检测程序 |
| CN102446272A (zh) * | 2011-09-05 | 2012-05-09 | Tcl集团股份有限公司 | 一种台标分割及识别的方法、装置及电视机 |
| CN105812759A (zh) * | 2016-04-15 | 2016-07-27 | 杭州当虹科技有限公司 | 一种360度全景视频的平面投射方法及编码方法 |
| CN105979241A (zh) * | 2016-06-29 | 2016-09-28 | 深圳市优象计算技术有限公司 | 一种柱面立体全景视频快速反变换方法 |
-
2016
- 2016-10-31 CN CN201610926325.1A patent/CN108012160B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101038623A (zh) * | 2006-03-13 | 2007-09-19 | 欧姆龙株式会社 | 特征点检测装置、特征点检测方法及特征点检测程序 |
| CN102446272A (zh) * | 2011-09-05 | 2012-05-09 | Tcl集团股份有限公司 | 一种台标分割及识别的方法、装置及电视机 |
| CN105812759A (zh) * | 2016-04-15 | 2016-07-27 | 杭州当虹科技有限公司 | 一种360度全景视频的平面投射方法及编码方法 |
| CN105979241A (zh) * | 2016-06-29 | 2016-09-28 | 深圳市优象计算技术有限公司 | 一种柱面立体全景视频快速反变换方法 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110047033A (zh) * | 2019-03-18 | 2019-07-23 | 北京奇艺世纪科技有限公司 | 投影变形方法、设备、图像处理设备及介质 |
| CN111107419A (zh) * | 2019-12-31 | 2020-05-05 | 福州大学 | 一种基于全景视频的播放及标注多点即时添加方法 |
| CN114051089A (zh) * | 2021-10-12 | 2022-02-15 | 聚好看科技股份有限公司 | 一种全景视频中投放资源的方法及显示设备 |
| CN114051089B (zh) * | 2021-10-12 | 2023-09-15 | 聚好看科技股份有限公司 | 一种全景视频中投放资源的方法及显示设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108012160B (zh) | 2019-07-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107637060B (zh) | 相机装备和立体图像捕获 | |
| US20170363949A1 (en) | Multi-tier camera rig for stereoscopic image capture | |
| US9706135B2 (en) | Method and apparatus for generating an image cut-out | |
| US10158846B2 (en) | Pseudo-3d forced perspective methods and devices | |
| US10154194B2 (en) | Video capturing and formatting system | |
| US20070247518A1 (en) | System and method for video processing and display | |
| EP3398016A1 (en) | Adaptive stitching of frames in the process of creating a panoramic frame | |
| EP3304894A1 (en) | Omnistereo capture and render of panoramic virtual reality content | |
| US8401339B1 (en) | Apparatus for partitioning and processing a digital image using two or more defined regions | |
| MX2007012650A (es) | Sistema y metodo para igualacion de tamano de cabeza de imagenes panoramicas de 360 grados. | |
| US10567649B2 (en) | Parallax viewer system for 3D content | |
| CN110691175B (zh) | 演播室中模拟摄像机运动跟踪的视频处理方法及装置 | |
| WO2018035347A1 (en) | Multi-tier camera rig for stereoscopic image capture | |
| CN108012160A (zh) | 一种基于全景视频的台标插入方法 | |
| CN108022204A (zh) | 一种柱面全景视频转换为球面全景视频的方法 | |
| CN107483913A (zh) | 一种多维度画中画显示方法 | |
| CN108124108B (zh) | 一种球面全景图像/视频中像素均衡方法 | |
| US8855444B2 (en) | Method for partitioning and processing a digital image | |
| US11388378B2 (en) | Image processing apparatus, image processing method and projection system | |
| CN109375369B (zh) | 一种vr巨幕影院模式下的畸变预处理方法 | |
| US20220122216A1 (en) | Generating and processing an image property pixel structure | |
| US11119396B1 (en) | Camera system with a plurality of image sensors | |
| CN116016959A (zh) | 一种视频流的处理方法、装置、服务器及存储介质 | |
| WO2018205055A1 (zh) | 一种图像处理方法和系统 | |
| JP2005234680A (ja) | 画像処理装置、画像処理方法、画像処理プログラムおよび記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |