CN108737907A - 一种生成字幕的方法及装置 - Google Patents

一种生成字幕的方法及装置 Download PDF

Info

Publication number
CN108737907A
CN108737907A CN201710254051.0A CN201710254051A CN108737907A CN 108737907 A CN108737907 A CN 108737907A CN 201710254051 A CN201710254051 A CN 201710254051A CN 108737907 A CN108737907 A CN 108737907A
Authority
CN
China
Prior art keywords
subtitle
pixel
spherical surface
character
generated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710254051.0A
Other languages
English (en)
Other versions
CN108737907B (zh
Inventor
林耀冬
张欣
陈杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201710254051.0A priority Critical patent/CN108737907B/zh
Priority to PCT/CN2018/083244 priority patent/WO2018192455A1/zh
Publication of CN108737907A publication Critical patent/CN108737907A/zh
Application granted granted Critical
Publication of CN108737907B publication Critical patent/CN108737907B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278Subtitling

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明实施例公开了一种生成字幕的方法及装置,属于视频领域。所述方法包括:获取待生成字符在平面坐标系中的起始位置;根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。所述装置包括:获取模块、计算模块和渲染模块。本发明实施例能够显示全景视频的字幕。

Description

一种生成字幕的方法及装置
技术领域
本发明涉及视频领域,特别涉及一种生成字幕的方法及装置。
背景技术
全景视频是把相机环360度拍摄的一组或多组照片拼接成一个全景图像,并将多个全景图像依次映射在一个球的表面上形成一帧帧图像的视频,它能在空间域上提供给用户360度无死角的新体验,提供虚拟的3D环境。
用户可以使用播放器播放全景视频,且在播放全景视频时用户可以通过选择视点,改变视频播放的视角,提高用户的交互体验。但是目前的全景视频美中不足的是没有字幕。
发明内容
为了为了能够显示全景视频的字幕,本发明提供了一种生成字幕的方法及装置。所述技术方案如下:
第一方面,本申请公开了一种生成字幕的方法,所述方法包括:
获取待生成字符在平面坐标系中的起始位置;
根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;
根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;
根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。
可选的,所述根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置,包括:
根据所述待生成字符的编码生成预设大小的点阵,所述点阵包括所述待生成字符;
在所述起始位置处将所述点阵填写在所述平面坐标系中;
从所述平面坐标系中读取所述待生成字符包括的像素点在所述平面坐标系中的第一位置。
可选的,所述根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置,包括:
根据所述像素点的第一位置计算所述像素点在球面坐标系中的仰角和方位角,所述球面坐标系的坐标原点与所述字幕球面的球心重合;
根据所述字幕球面的半径、所述像素点的仰角和方位角,计算所述像素点在所述字幕球面上的第二位置。
可选的,所述形成所述待生成字符之后,还包括:
确定一转轴,所述转轴经过所述字幕球面的球心,控制所述字幕球面绕所述转轴转动。
可选的,所述形成所述待生成字符之后,还包括:
根据第一连线和第二连接之间的夹角计算透明度,所述第一连线为所述字幕球面的球心与视点之间连线,所述第二连线为所述字幕球面的球心与所述待生成字符中的一点之间的连线;
所述根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,包括:
根据所述透明度和所述像素点的第二位置,在所述字幕球面上渲染所述像素点。
可选的,所述根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置,包括:
根据所述像素点的第一位置和第i个字幕球面的半径,计算所述像素点在所述第i个字幕球面上的第二位置,i=1、2……N;
其中,N为字幕球面的总数且N为大于1的整数,N个字幕球面的球心重合,所述N个字幕球面的半径互不相等。
可选的,所述根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,包括:
在第i个时间段内,根据所述像素点在所述第i个字幕球面上的第二位置,在所述第i个字幕球面上渲染所述像素点。
第二方面,本申请公开了一种生成字幕的装置,所述装置包括:
获取模块,用于获取待生成字符在平面坐标系中的起始位置;根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;
计算模块,用于根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;
渲染模块,用于根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。
可选的,所述获取模块包括:
生成单元,用于根据所述待生成字符的编码生成预设大小的点阵,所述点阵包括所述待生成字符;
填写单元,用于在所述起始位置处将所述点阵填写在所述平面坐标系中;
读取单元,用于从所述平面坐标系中读取所述待生成字符包括的像素点在所述平面坐标系中的第一位置。
可选的,所述计算模块包括:
第一计算单元,用于根据所述像素点的第一位置计算所述像素点在球面坐标系中的仰角和方位角,所述球面坐标系的坐标原点与所述字幕球面的球心重合;
第二计算单元,用于根据所述字幕球面的半径、所述像素点的仰角和方位角,计算所述像素点在所述字幕球面上的第二位置。
可选的,所述装置还包括:
转动模块,用于确定一转轴,所述转轴经过所述字幕球面的球心,控制所述字幕球面绕所述转轴转动。
可选的,所述计算模块,还用于根据第一连线和第二连接之间的夹角计算透明度,所述第一连线为所述字幕球面的球心与视点之间连线,所述第二连线为所述字幕球面的球心与所述待生成字符中的一点之间的连线;
所述渲染模块,用于根据所述透明度和所述像素点的第二位置,在所述字幕球面上渲染所述像素点。
可选的,所述计算模块,用于根据所述像素点的第一位置和第i个字幕球面的半径,计算所述像素点在所述第i个字幕球面上的第二位置,i=1、2……N;
其中,N字幕球面的总数且N为大于1的整数,N个字幕球面的球心重合,所述N个字幕球面的半径互不相等。
可选的,所述渲染模块,用于在第i个时间段内,根据所述像素点在所述第i个字幕球面上的第二位置,在所述第i个字幕球面上渲染所述像素点。
本发明实施例通过获取待生成字符在平面坐标系中的起始位置;根据该起始位置获取待生成字符包括的像素点在平面坐标系中的第一位置;根据该像素点的第一位置,计算该像素点在字幕球面上的第二位置;根据该像素点的第二位置,在字幕球面上渲染该像素点,以形成待生成字符,从而可以在字幕球面上显示全景视频的字幕。
附图说明
图1是本发明实施例提供了一种生成字幕的方法流程图;
图2-1是本发明实施例提供的一种生成字幕的方法流程图;
图2-2是本发明实施例提供的点阵示意图;
图2-3是本发明实施例提供的字幕球面示意图;
图2-4是本发明实施例提供的多个字幕球面示意图;
图2-5是本发明实施例提供的在不同视点下显示字幕示意图;
图3是本发明实施例提供的一种生成字幕的装置结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
全景视频是将视频图像映射在图像球面的表面形成的视频,全景视频可以包括N个字幕球面,N是大于或等于1的整数,该N个字幕球面中的每个字幕球面的球心、图像球面的球心和球面坐标系的坐标原点均重合。在本发明的一个可选实施例中该N个字幕球面中的每个字幕球面的半径均不相等。
在本发明提供的如下任一实施例的执行主体可以为终端或服务器等,终端可以为手机、台式电脑、笔记本电脑、摄像机或相机等。
可选的,本发明提供的如下任一实施例的执行主体可以为终端或服务器中包括的处理器。
参见图1,本发明实施例提供了一种生成字幕的方法,所述方法包括:
步骤101:获取待生成字符在平面坐标系中的起始位置。
步骤102:根据该起始位置获取待生成字符包括的像素点在平面坐标系中的第一位置。
步骤103:根据该像素点的第一位置,计算该像素点在字幕球面上的第二位置。
步骤104:根据该像素点的第二位置,在字幕球面上渲染该像素点,以形成待生成字符。
在本发明实施例中,通过获取待生成字符在平面坐标系中的起始位置;根据该起始位置获取待生成字符包括的像素点在平面坐标系中的第一位置;根据该像素点的第一位置,计算该像素点在字幕球面上的第二位置;根据该像素点的第二位置,在字幕球面上渲染该像素点,以形成待生成字符,从而可以在字幕球面上显示全景视频的字幕。
本发明实施例提供了一种生成字幕的方法,该方法可以生成全景视频的字幕,参见图2-1,该方法包括:
步骤201:获取待生成字符在平面坐标系中的起始位置。
待生成字符可以为文字、颜文字或表情图像等。获取的待生成字符可以为为用户输入的字符或全景视频对应的字幕文件中的字符等。
假设一个全景视频对应一个字幕文件,该字幕文件包括至少一个字符。该字幕文件还可以包括该至少一个字符中的部分字符在平面坐标系中的起始位置或者可以包括该至少一个字符中的每个字符在平面坐标系中的起始位置。字幕文件中的字符在平面坐标系中的起始位置可以是事先设置的并存储在字幕文件中,或者也可以是用户临时设置后被存储在字幕文件中,在此不做限定。
待生成字符可以是该字幕文件中的任一个字符。可以从字幕文件中获取一个字符作为待生成字符。如果字幕文件中包括待生成字符在平面坐标系中的起始位置,则还可以从字幕文件中获取待生成字符在平面坐标系中的起始位置。如果字幕文件中不包括待生成字符在平面坐标系中的起始位置,则可以根据字幕文件中的具有起始位置的字符、待生成字符与该字符之间的间隔的字符数目、相邻两字符之间的间隔和字符大小,计算出待生成字符在平面坐标系中的起始位置。
假设待生成字符为用户输入的字符,用户在输入字符时还可以输入或选择该字符在平面坐标系中的起始位置。在本步骤中,可以直接获取用户输入的待生成字符和待生成字符在平面坐标系中的起始位置。
另外,用户在输入字符时,对于输入的第一个字符,可以为第一个字符输入在平面坐标系中的起始位置,对于输入的除第一个字符以外的第二个字符、第三个字符、第四个字符等字符,可以不用一一输入各字符在平面坐标系中的起始位置。因此在本步骤中,用户没有输入待生成字符输入在平面坐标系中的起始位置时,可以获取待生成字符与用户输入的第一个字符之间间隔的字符数目,根据第一个字符在平面坐标系中的起始位置、该字符数目、相邻两字符之间的间隔和字符大小计算待生成字符在平面坐标系中的起始位置。
步骤202:根据待生成字符的编码生成预设大小的点阵,该点阵包括待生成字符。
可以将待生成字符的编码输入到Freetype字体库中,通过该Freetype字体库生成预设大小的点阵;对于该点阵中的每个点,如果该点是待生成字符中的像素点,则该点的比特值为预设第一比特值,如果该点不是待生成字符中的像素点,则该点的比特值为预设第二比特值。
第一比特值可以为1,第二比特值可以为0,或者,第一比特值可以为0,第二比特值为1。
例如,假设待生成字符为字符“我”,预设大小为24×24,以及假设第一比特值为1,第二比特值为0。将待生成字符“我”的编码输入到Freetype字体库中,通过Freetype字体库生成大小为24×24的点阵,该点阵如图2-2的左图所示。
图2-2左图所示意的点阵中,填充黑色的点都为待生成字符“我”中的像素点,这些点的比特值均为第一比特值1,在图中用黑色表示第一比特值1;填充无色的点均不是待生成字符“我”中的像素点,这些点的比特值均为第二比特值0,在图中用无色表示第二比特值0。
步骤203:在该起始位置处将该点阵填写在平面坐标系中,从平面坐标系中读取待生成字符包括的像素点在平面坐标系中的第一位置。
例如,参见图2-2,可以将该起始位置作为该点阵的左上角顶点的位置,然后将图2-2左图中的点阵填写图2-2右图中的平面坐标系中。然后从平面坐标系中读取待生成字符“我”包括的每个像素点的第一位置。
步骤204:根据该像素点的第一位置计算该像素点在球面坐标系中的仰角和方位角,该球面坐标系的坐标原点与字幕球面的球心重合。
平面坐标系中的像素点在字幕球面上都对应一个点。例如,参见图2-2右图所示的平面坐标系中的P点;参见图2-3,该P点在字幕球面上对应一个Q点,该字幕球面的球心与该球面坐标系xyz的坐标原点O重合。
该P点在球面坐标系中的仰角实质为Q点和坐标原点O的连线OQ与xOz平面之间的夹角α;该P点在球面坐标系中的方位角实质为Q点在xOz平面上的投影点R和坐标原点O的连线OR与x轴之间的夹角γ。
步骤204可以通过下述方式实现:对于待生成字符包括的每个像素点,假设为P点,P点在平面坐标系中的位置为(u,v),u为P点在平面坐标系中的横坐标,v为P点在平面坐标系中的纵坐标;根据P点在平面坐标系中的位置(u,v)按如下公式(1)计算该P点在球面坐标系中的仰角和方位角;
在公式(1)中,α为P点在球面坐标系中的仰角,γ为P点在球面坐标系中的方位角。
对待生成字符中的其他每个像素点,都同P点一样,按上述公式(1)计算出其他每个像素点在球面坐标系中的仰角和方位角。
步骤205:根据字幕球面的半径、该像素点的仰角和方位角,计算该像素点在字幕球面上的第二位置。
该像素点在字幕球面上的第二位置实质是该像素点在字幕球面上对应的点的位置。例如,参见图2-2和2-3,P点在字幕球面上的第二位置实质是P点在字幕球面上对应的Q点的位置。
本步骤可以为:对于待生成字符包括的每个像素点,假设为P点,根据字幕球面的半径、该P点的仰角α和方位角γ,按如下公式(2)计算P点在字幕球面上的第二位置(x,y,z),该第二位置(x,y,z)实质为Q点的位置;
在公式(2)中,R为字幕球面的半径,x为P点在字幕球面上的横坐标,y为P点在字幕球面上的纵坐标,z为P点在字幕球面上的竖坐标。
对待生成字符中的其他每个像素点,都同P点一样,按上述公式(2)计算出其他每个像素点在字幕球面上的第二位置。
对于包括多个字幕球面的情况,即N为大于1的整数,此时需要根据该像素点的第一位置和第i个字幕球面的半径,计算该像素点在第i个字幕球面上的第二位置,i=1、2……N。详细过程为:
根据该像素点在平面坐标系中的第一位置计算该像素点在球面坐标系中的仰角和方位角(详细计算过程参见步骤204中的内容),然后根据第i个字幕球面的半径、该像素点的仰角和方位角,计算该像素点在第i个字幕球面上的第二位置。
可以通过如下的公式(3)计算该像素点在第i个字幕球面上的第二位置。
在公式(3)中,Ri为第i个字幕球面的半径,xi为P点在第i个字幕球面上的横坐标,yi为P点在第i个字幕球面上的纵坐标,zi为P点在第i个字幕球面上的竖坐标。
步骤206:根据该像素点的第二位置,在字幕球面上渲染该像素点,以形成待生成字符。
字幕字符中还可以包括每个字符的配置信息,字符的配置信息可以为该字符的颜色等信息。
例如,从字幕文件中获取待生成字符的配置信息,对于待生成字符包括的每个像素点,假设为P点,P点在字幕球面上的第二位置(x,y,z)实质为Q点的位置,根据该配置信息在字幕球面上的Q点位置处渲染出一个Q点。对于待生成字符包括的其他每个像素点,同P点一样,按上述方式渲染其他每个像素点在字幕球面上对应的点,从而由字幕球面上的每个像素点组成待生成字符。
这样,如果字幕文件中包括多个字符,每个字符都按上述201至206的过程渲染在字幕球面上,就可以形成了全景视频的字幕。
为了提高字幕显示的视觉效度,本实施例还可以采用如下两种方式来显示待生成字符,包括:
第一、设置N个时间段,每个时间段在一个字幕球面上渲染并显示待生成字符,这样可以实现字幕由远到近显示或由近到远显示。详细实现过程可以为:
对于待生成字符包括的每个像素点,在第i个时间段内,根据该像素点在第i个字幕球面上的第二位置,在第i个字幕球面上渲染该像素点,以在第i个字幕球面上显示待生成字符。
例如,参见图2-4,假设存在第一个字幕球面、第二个字幕球面和第三个字幕球面,第一个字幕球面的半径小于第二个字幕球面的半径,第二个字幕球面的半径小于第三个字幕球面半径;设置三个时间段,在第一个时间段内根据该像素点在第一个字幕球面上的第二位置,在第一个字幕球面上渲染并显示待生成字符1;在第二个时间段内根据该像素点在第二个字幕球面上的第二位置,在第二个字幕球面上渲染并显示待生成字符2;在第三个时间段内根据该像素点在第三个字幕球面上的第二位置,在第三个字幕球面上渲染并显示待生成字符3,这样实现字幕由近到远显示。
又例如,在第一个时间段内根据该像素点在第三个字幕球面上的第二位置,在第三个字幕球面上渲染并显示待生成字符3;在第二个时间段内根据该像素点在第二个字幕球面上的第二位置,在第二个字幕球面上渲染并显示待生成字符2;在第三个时间段内根据该像素点在第一个字幕球面上的第二位置,在第一个字幕球面上渲染并显示待生成字符1,这样实现字幕由远到近显示,提高了显示效果。
第二、根据用户视点与待生成字符之间的远近来设置透明度,根据该透明度来显示待生成字符,这样可以实现当用户视点与待生成字符幕之间越远,待生成字符越模糊,反之,越清晰。详细实现过程可以为:
对于待生成字符包括的每个像素点,先确定第一连线和第二连线,第一连线为字幕球面的球心与视点之间连线,第二连线为字幕球面的球心与待生成字符中的一点之间的连线,获取第一连线和第二连线之间的夹角,根据第一连线和第二连接之间的夹角计算透明度;然后,根据该透明度和该像素点在字幕球面上的位置,在字幕球面上分别渲染该像素点,以在字幕球面上显示待生成字符。
用户可以通过手指滑动或鼠标等设备在图像球面上选择观看视频的视点,所以可以获取到该视点并确定出字幕球面的球心与该视点之间的第一连线。例如,参见图2-5,用户先在图像球面上选择视点1,获取视点1,确定球心到视点1的连线1,根据连线1与第二连线之间的夹角计算透明度,根据该透明度显示字幕。用户可以继续选择视点2,获取视点2,确定球心到视点2的连线2,根据连线2与第二连线之间的夹角计算透明度,根据该透明度显示字幕。
用户可以通过手指点击触摸屏、或者鼠标点击视频、或者操作操纵杆等方式选择视点。
可以预设计算公式,根据第一连线和第二连接之间的夹角,通过该计算公式计算透明度。例如,可以根据第一连线和第二连线之间面向球心的夹角和设置的该计算公式实现:当该夹角越大时,计算出的透明度越小,当该夹角越小时,计算的透明度越大。该计算公式可以是线性公式或非线性公式。
第一连线和第二连接之间的夹角越大表明用户视点与待生成字符之间越远,反之,表明用户视点与待生成字符之间越近。这样可以实现当用户视点与待生成字符之间越远,待生成字符越模糊,反之,越清晰,提高了显示效果。
为了提高显示效果,在生成待生成字符后,还可以确定一转轴,该转轴经过字幕球面的球心,控制字幕球面绕该转轴转动。
这样就能够在360度观看全景视频的同时观看到全视角范围的字幕。
在本发明实施例中,通过获取待生成字符在平面坐标系中的起始位置;根据该起始位置获取待生成字符包括的像素点在平面坐标系中的第一位置;根据该像素点的第一位置,计算该像素点在字幕球面上的第二位置;根据该像素点的第二位置,在字幕球面上渲染该像素点,以形成待生成字符,从而可以在字幕球面上显示全景视频的字幕。
参见图3,本发明实施例提供了一种生成字幕的装置300,所述装置300包括:
获取模块301,用于获取待生成字符在平面坐标系中的起始位置;根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;
计算模块302,用于根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;
渲染模块303,用于根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。
可选的,所述获取模块301包括:
生成单元,用于根据所述待生成字符的编码生成预设大小的点阵,所述点阵包括所述待生成字符;
填写单元,用于在所述起始位置处将所述点阵填写在所述平面坐标系中;
读取单元,用于从所述平面坐标系中读取所述待生成字符包括的像素点在所述平面坐标系中的第一位置。
可选的,所述计算模块302包括:
第一计算单元,用于根据所述像素点的第一位置计算所述像素点在球面坐标系中的仰角和方位角,所述球面坐标系的坐标原点与所述字幕球面的球心重合;
第二计算单元,用于根据所述字幕球面的半径、所述像素点的仰角和方位角,计算所述像素点在所述字幕球面上的第二位置。
可选的,所述装置还包括:
转动模块,用于确定一转轴,所述转轴经过所述字幕球面的球心,控制所述字幕球面绕所述转轴转动。
可选的,所述计算模块302还用于根据第一连线和第二连接之间的夹角计算透明度,所述第一连线为所述字幕球面的球心与视点之间连线,所述第二连线为所述字幕球面的球心与所述待生成字符中的一点之间的连线;
所述渲染模块303,用于根据所述透明度和所述像素点的第二位置,在所述字幕球面上渲染所述像素点。
可选的,可以事先设置N个字幕球面,N为大于1的整数,所述N个字幕球面的球心重合,所述N个字幕球面的半径互不相等;
所述计算模块302,用于根据所述像素点的第一位置和第i个字幕球面的半径,计算所述像素点在所述第i个字幕球面上的第二位置,i=1、2……N。
可选的,可以设置N个用于显示所述待生成字符的时间段;
所述渲染模块303,用于在第i个时间段内,根据所述像素点在所述第i个字幕球面上的第二位置,在所述第i个字幕球面上渲染所述像素点。
在本发明实施例中,通过获取待生成字符在平面坐标系中的起始位置;根据该起始位置获取待生成字符包括的像素点在平面坐标系中的第一位置;根据该像素点的第一位置,计算该像素点在字幕球面上的第二位置;根据该像素点的第二位置,在字幕球面上渲染该像素点,以形成待生成字符,从而可以在字幕球面上显示全景视频的字幕。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (14)

1.一种生成字幕的方法,其特征在于,所述方法包括:
获取待生成字符在平面坐标系中的起始位置;
根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;
根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;
根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。
2.如权利要求1所述的方法,其特征在于,所述根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置,包括:
根据所述待生成字符的编码生成预设大小的点阵,所述点阵包括所述待生成字符;
在所述起始位置处将所述点阵填写在所述平面坐标系中;
从所述平面坐标系中读取所述待生成字符包括的像素点在所述平面坐标系中的第一位置。
3.如权利要求1所述的方法,其特征在于,所述根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置,包括:
根据所述像素点的第一位置计算所述像素点在球面坐标系中的仰角和方位角,所述球面坐标系的坐标原点与所述字幕球面的球心重合;
根据所述字幕球面的半径、所述像素点的仰角和方位角,计算所述像素点在所述字幕球面上的第二位置。
4.如权利要求1所述的方法,其特征在于,所述形成所述待生成字符之后,还包括:
确定一转轴,所述转轴经过所述字幕球面的球心,控制所述字幕球面绕所述转轴转动。
5.如权利要求1所述的方法,其特征在于,所述形成所述待生成字符之后,还包括:
根据第一连线和第二连接之间的夹角计算透明度,所述第一连线为所述字幕球面的球心与视点之间连线,所述第二连线为所述字幕球面的球心与所述待生成字符中的一点之间的连线;
所述根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,包括:
根据所述透明度和所述像素点的第二位置,在所述字幕球面上渲染所述像素点。
6.如权利要求1所述的方法,其特征在于,所述根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置,包括:
根据所述像素点的第一位置和第i个字幕球面的半径,计算所述像素点在所述第i个字幕球面上的第二位置,i=1、2……N;
其中,N为字幕球面的总数且N为大于1的整数,N个字幕球面的球心重合,所述N个字幕球面的半径互不相等。
7.如权利要求6所述的方法,其特征在于,所述根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,包括:
在第i个时间段内,根据所述像素点在所述第i个字幕球面上的第二位置,在所述第i个字幕球面上渲染所述像素点。
8.一种生成字幕的装置,其特征在于,所述装置包括:
获取模块,用于获取待生成字符在平面坐标系中的起始位置;根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;
计算模块,用于根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;
渲染模块,用于根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。
9.如权利要求8所述的装置,其特征在于,所述获取模块包括:
生成单元,用于根据所述待生成字符的编码生成预设大小的点阵,所述点阵包括所述待生成字符;
填写单元,用于在所述起始位置处将所述点阵填写在所述平面坐标系中;
读取单元,用于从所述平面坐标系中读取所述待生成字符包括的像素点在所述平面坐标系中的第一位置。
10.如权利要求8所述的装置,其特征在于,所述计算模块包括:
第一计算单元,用于根据所述像素点的第一位置计算所述像素点在球面坐标系中的仰角和方位角,所述球面坐标系的坐标原点与所述字幕球面的球心重合;
第二计算单元,用于根据所述字幕球面的半径、所述像素点的仰角和方位角,计算所述像素点在所述字幕球面上的第二位置。
11.如权利要求8所述的装置,其特征在于,所述装置还包括:
转动模块,用于确定一转轴,所述转轴经过所述字幕球面的球心,控制所述字幕球面绕所述转轴转动。
12.如权利要求8所述的装置,其特征在于,
所述计算模块,还用于根据第一连线和第二连接之间的夹角计算透明度,所述第一连线为所述字幕球面的球心与视点之间连线,所述第二连线为所述字幕球面的球心与所述待生成字符中的一点之间的连线;
所述渲染模块,用于根据所述透明度和所述像素点的第二位置,在所述字幕球面上渲染所述像素点。
13.如权利要求8所述的装置,其特征在于,
所述计算模块,用于根据所述像素点的第一位置和第i个字幕球面的半径,计算所述像素点在所述第i个字幕球面上的第二位置,i=1、2……N;
其中,N为字幕球面的总数且N为大于1的整数,N个字幕球面的球心重合,所述N个字幕球面的半径互不相等。
14.如权利要求13所述的装置,其特征在于,
所述渲染模块,用于在第i个时间段内,根据所述像素点在所述第i个字幕球面上的第二位置,在所述第i个字幕球面上渲染所述像素点。
CN201710254051.0A 2017-04-18 2017-04-18 一种生成字幕的方法及装置 Active CN108737907B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710254051.0A CN108737907B (zh) 2017-04-18 2017-04-18 一种生成字幕的方法及装置
PCT/CN2018/083244 WO2018192455A1 (zh) 2017-04-18 2018-04-16 一种生成字幕的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710254051.0A CN108737907B (zh) 2017-04-18 2017-04-18 一种生成字幕的方法及装置

Publications (2)

Publication Number Publication Date
CN108737907A true CN108737907A (zh) 2018-11-02
CN108737907B CN108737907B (zh) 2020-05-12

Family

ID=63855575

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710254051.0A Active CN108737907B (zh) 2017-04-18 2017-04-18 一种生成字幕的方法及装置

Country Status (2)

Country Link
CN (1) CN108737907B (zh)
WO (1) WO2018192455A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112019772A (zh) * 2020-09-07 2020-12-01 中图云创智能科技(北京)有限公司 一种全景视频中纠正字幕桶状变形的方法
CN112532962A (zh) * 2020-11-24 2021-03-19 聚好看科技股份有限公司 一种全景视频字幕显示方法及显示设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101902582A (zh) * 2010-07-09 2010-12-01 清华大学 一种立体视频字幕添加方法及装置
CN101923813A (zh) * 2009-06-11 2010-12-22 阳一鸣 点阵文字图形贴装置及方法
CN102256154A (zh) * 2011-07-28 2011-11-23 中国科学院自动化研究所 实现三维全景视频的定位与播放的方法及系统
US20150022645A1 (en) * 2012-04-10 2015-01-22 Huawei Technologies Co., Ltd. Method and Apparatus for Providing a Display Position of a Display Object and for Displaying a Display Object in a Three-Dimensional Scene
CN106527857A (zh) * 2016-10-10 2017-03-22 成都斯斐德科技有限公司 一种基于虚拟现实的全景视频交互方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6461679B2 (ja) * 2015-03-31 2019-01-30 大和ハウス工業株式会社 映像表示システム及び映像表示方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101923813A (zh) * 2009-06-11 2010-12-22 阳一鸣 点阵文字图形贴装置及方法
CN101902582A (zh) * 2010-07-09 2010-12-01 清华大学 一种立体视频字幕添加方法及装置
CN102256154A (zh) * 2011-07-28 2011-11-23 中国科学院自动化研究所 实现三维全景视频的定位与播放的方法及系统
US20150022645A1 (en) * 2012-04-10 2015-01-22 Huawei Technologies Co., Ltd. Method and Apparatus for Providing a Display Position of a Display Object and for Displaying a Display Object in a Three-Dimensional Scene
CN106527857A (zh) * 2016-10-10 2017-03-22 成都斯斐德科技有限公司 一种基于虚拟现实的全景视频交互方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112019772A (zh) * 2020-09-07 2020-12-01 中图云创智能科技(北京)有限公司 一种全景视频中纠正字幕桶状变形的方法
CN112532962A (zh) * 2020-11-24 2021-03-19 聚好看科技股份有限公司 一种全景视频字幕显示方法及显示设备

Also Published As

Publication number Publication date
CN108737907B (zh) 2020-05-12
WO2018192455A1 (zh) 2018-10-25

Similar Documents

Publication Publication Date Title
US8997021B2 (en) Parallax and/or three-dimensional effects for thumbnail image displays
WO2018188499A1 (zh) 图像、视频处理方法和装置、虚拟现实装置和存储介质
TWI637355B (zh) 紋理貼圖之壓縮方法及其相關圖像資料處理系統與產生360度全景視頻之方法
CN105872353A (zh) 一种在移动设备上实现播放全景视频的系统和方法
CN108282694B (zh) 全景视频渲染方法、装置及电子设备
KR20190039118A (ko) 파노라마 영상 압축 방법 및 장치
CN105930464B (zh) Web富媒体跨屏适配方法和装置
WO2019076348A1 (zh) 一种虚拟现实vr界面生成的方法和装置
US20230209031A1 (en) Methods, systems, and media for generating and rendering immersive video content
CN108174174A (zh) Vr视频显示方法、装置及终端
CN108737907A (zh) 一种生成字幕的方法及装置
WO2019042028A1 (zh) 全视向的球体光场渲染方法
US20230048284A1 (en) Integrating digital content into displayed data on an application layer via processing circuitry of a server
CN105138296B (zh) 虚拟观众头像拼字的方法和装置
US20230326095A1 (en) Overlaying displayed digital content with regional transparency and regional lossless compression transmitted over a communication network via processing circuitry
CN109741465A (zh) 图像处理方法及装置、显示装置
US20240094886A1 (en) Applying visual modifiers to objects of interest selected by a pointer from a video feed in a frame buffer via processing circuitry
KR102622709B1 (ko) 2차원 영상에 기초하여 3차원 가상객체를 포함하는 360도 영상을 생성하는 방법 및 장치
US11288788B2 (en) Anti-aliasing for distance field graphics rendering
US20230334791A1 (en) Interactive reality computing experience using multi-layer projections to create an illusion of depth
US20230334790A1 (en) Interactive reality computing experience using optical lenticular multi-perspective simulation
CN113476835B (zh) 一种画面显示的方法及装置
US20240185546A1 (en) Interactive reality computing experience using multi-layer projections to create an illusion of depth
WO2023070329A9 (zh) 内容显示方法、内容显示装置、存储介质及电子设备
US20230334792A1 (en) Interactive reality computing experience using optical lenticular multi-perspective simulation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant