CN106412718A - 一种字幕在3d空间中的渲染方法及其装置 - Google Patents

一种字幕在3d空间中的渲染方法及其装置 Download PDF

Info

Publication number
CN106412718A
CN106412718A CN201610830390.4A CN201610830390A CN106412718A CN 106412718 A CN106412718 A CN 106412718A CN 201610830390 A CN201610830390 A CN 201610830390A CN 106412718 A CN106412718 A CN 106412718A
Authority
CN
China
Prior art keywords
caption stream
rendering
video image
frame video
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610830390.4A
Other languages
English (en)
Inventor
胡雪莲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Leshi Zhixin Electronic Technology Tianjin Co Ltd
LeTV Holding Beijing Co Ltd
Original Assignee
Leshi Zhixin Electronic Technology Tianjin Co Ltd
LeTV Holding Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Leshi Zhixin Electronic Technology Tianjin Co Ltd, LeTV Holding Beijing Co Ltd filed Critical Leshi Zhixin Electronic Technology Tianjin Co Ltd
Priority to CN201610830390.4A priority Critical patent/CN106412718A/zh
Publication of CN106412718A publication Critical patent/CN106412718A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Abstract

本发明实施例提供了一种字幕在3D空间中的渲染方法及其装置，属于虚拟现实技术领域。所述方法包括：将视频流中的字幕流以及各帧视频图像分别渲染至3D空间；将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。本申请避免了因字幕流和视频图像共同渲染到3D空间，而出现的字幕字体模糊的问题，改善了3D空间中的字幕渲染效果。

Description

一种字幕在3D空间中的渲染方法及其装置
技术领域
本发明属于虚拟现实技术领域，具体涉及一种字幕在3D空间中的渲染方法及其装置。
背景技术
虚拟现实技术综合了计算机图形技术、计算机仿真技术、传感器技术、显示技术等多种科学技术，它在多维信息空间上创建一个虚拟信息环境，能使用户具有身临其境的沉浸感，具有与环境完善的交互作用能力，并有助于启发构思。
由于虚拟现实技术的上述优势，其改进了现有音视频设备的用户体验，它已涉及更广的领域，如电视会议、网络技术和分布计算技术，并向分布式虚拟现实发展。虚拟现实技术已成为新产品设计开发的重要手段。
采用虚拟现实技术观看视频能够得到更佳的观看效果，但是在实现本发明过程中，发明人发现现有技术中至少存在如下问题：同样的视频流通过虚拟现实技术在3D空间中进行播放时，由于播放空间比大屏幕更小，视频流中的图像采样率更低，容易造成同视频图像共同渲染到3D空间中的字幕字体模糊，严重影响观看效果。
因此，如何改善3D空间中的字幕渲染效果，成为现有技术中亟需解决的技术问题。
发明内容
本发明实施例解决的技术问题之一在于提供一种字幕在3D空间中的渲染方法及其装置，其避免了3D空间中的字幕字体模糊，改善了3D空间中的字幕渲染效果。
本发明实施例提供一种视频中文字在3D空间中的渲染方法，包括：
将视频流中的字幕流以及各帧视频图像分别渲染至3D空间；
将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。
在本发明一具体实施例中，所述将视频流中的字幕流以及各帧视频图像分别渲染至3D空间之前还包括：
对所述视频流进行处理，截取出所述视频流中的字幕流。
在本发明一具体实施例中，所述将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中包括：
分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳；
根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的各帧视频图像。
在本发明一具体实施例中，所述将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中为：
将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的所在的平面上。
在本发明一具体实施例中，所述将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像的所在的平面上为：
将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
对应于上述方法，本发明另一实施例提供一种视频中文字在3D空间中的渲染装置，包括：
图像渲染模块，用于将视频流中的字幕流以及各帧视频图像分别渲染至3D空间；
图像加载模块，用于将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。
在本发明一具体实施例中，所述装置还包括：
字幕截取模块，用于对所述视频流进行处理，截取出所述视频流中的字幕流。
在本发明一具体实施例中，所述图像加载模块包括：
时间戳获取单元，用于分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳；
同步播放单元，用于根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的各帧视频图像。
在本发明一具体实施例中，所述图像加载模块具体用于将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的所在的平面上。
在本发明一具体实施例中，所述图像加载模块具体用于将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
本发明实施例将视频流中的字幕流以及各帧视频图像分别渲染至3D空间，将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。因此，本发明实施例字幕流单独渲染至3D空间，不会因字幕流同视频图像共同渲染到3D空间，而出现字幕的字体模糊现象。本发明实施例将单独渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中，改善了3D空间中的字幕渲染效果。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。
图1是本发明提供的一种字幕在3D空间中的渲染方法一实施例流程图；
图2是本发明提供的一种字幕在3D空间中的渲染方法另一实施例流程图；
图3是本发明提供的一种字幕在3D空间中的渲染方法再一实施例流程图。
图4是本发明提供的一种字幕在3D空间中的渲染装置一实施例的结构示意图。
图5是本发明提供的一种字幕在3D空间中的渲染装置另一实施例的结构示意图。
图6是本发明提供的一种字幕在3D空间中的渲染装置再一实施例的结构示意图。
图7是本发明一种字幕在3D空间中的渲染的电子设备的硬件结构图；
图8是本发明提供的一种字幕在3D空间中的渲染方法一具体应用场景的流程图。
具体实施方式
本发明实施例将视频流中的字幕流以及各帧视频图像分别渲染至3D空间，将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。因此，本发明实施例字幕流单独渲染至3D空间，不会因字幕流同视频图像共同渲染到3D空间，而出现字幕的字体模糊现象。本发明实施例将单独渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中，改善了3D空间中的字幕渲染效果。
尽管本发明能够具有许多不同形式的实施例，但在附图中显示并且将在本文详细描述的特定实施例，应该理解，这种实施例的公开应该被视为原理的示例，而非意图把本发明限制于显示和描述的特定实施例。在以下的描述中，相同的标号用于描述附图的几个示图中的相同、相似或对应的部分。
如本文所使用，术语“一个”或“一种”被定义为一个(种)或超过一个(种)。如本文所使用，术语“多个”被定义为两个或超过两个。如本文所使用，术语“其他”被定义为至少再一个或更多个。如本文所使用，术语“包含”和/或“具有”被定义为包括(即，开放式语言)。如本文所使用，术语“耦合”被定义为连接，但未必是直接连接，并且未必是以机械方式连接。如本文所使用，术语“程序”或“计算机程序”或类似术语被定义为设计用于在计算机系统上执行的指令序列。“程序”或“计算机程序”可包括子程序、函数、过程、对象方法、对象实现、可执行应用、小应用程序、小服务程序、源代码、目标代码、共享库/动态加载库和/或设计用于在计算机系统上执行的其它指令序列。
在整个本文件中对“一个实施例”、“某些实施例”、“实施例”或类似术语的提及表示结合实施例描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。因此，在整个本说明书的各种地方的这种词语的出现不必全部表示相同的实施例。另外，所述特定特征、结构或特性可非限制性地在一个或多个实施例中以任何合适的方式组合。
如本文所使用，术语“或者”应该被解释为是包括性的或者表示任何一种或任何组合。因此，“A、B或者C”表示“下面的任何一种：A；B；C；A和B；A和C；B和C；A，B和C”。仅当元件、功能、步骤或动作的组合以某种方式固有地相互排斥时，将会发生这种定义的例外。
如本文所使用，术语3D或三维旨在应用于立体三维视觉体验。这种体验能够以许多方法创建，包括使用针对每只眼睛不同地偏振或针对每只眼睛滤色的图像。具体地讲，在本发明的上下文内，通过分开的左眼和右眼图像的产生和显示来创建三维视觉体验。在呈现分开的用于每只眼睛的图像的显示装置上观看这种图像，其中主动技术(诸如，由每只眼睛观看的图像的交替的同步的阻挡和通过)用于创建左眼和右眼图像的分离，或者被动技术(诸如，偏振或有色眼镜)用于分离左眼和右眼图像，由此产生立体三维视觉体验幻觉。
为了使本领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员所获得的所有其他实施例，都应当属于本发明保护的范围。
下面结合本发明附图进一步说明本发明具体实现。
本发明一实施例提供一种视频中文字在3D空间中的渲染方法，通常应用于计算机设备或便携设备。
实施例一
参见图1，所述方法包括：
S1、将视频流中的字幕流以及各帧视频图像分别渲染至3D空间。
视频(Video)泛指将一系列静态影像以电信号的方式加以捕捉、纪录、处理、储存、传送与重现的各种技术。连续的图像变化每秒超过24帧(frame)画面以上时，根据视觉暂留原理，人眼无法辨别单幅的静态画面；看上去是平滑连续的视觉效果，这样连续的画面叫做视频。视频技术最早是为了电视系统而发展，但现在已经发展为各种不同的格式以利消费者将视频记录下来。网络技术的发达也促使视频的纪录片段以串流媒体的形式存在于因特网之上并可被电脑接收与播放。视频与电影属于不同的技术，后者是利用照相术将动态的影像捕捉为一系列的静态照片。
渲染是3D显示的最后一道工序，也是最终使图像符合3D场景的阶段。渲染有多种软件，如：各3D软件自带渲染引擎，还有诸如RenderMan等。建筑设计、动画制作等利用3DSMAX、MAYA等软件制作好模型、动画帧之后，将所设计内容利用软件本身或者辅助软件(lightscape、vray等)制作成最终效果图或者动画的过程。
本发明实施例将视频流中的字幕以及各帧视频图像分别渲染至3D空间，分别获得3D空间中的字幕流图像以及各帧视频图像。
S2、将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。
本发明实施例分别获得3D空间中的字幕流图像以及与所述字幕流对应的各帧视频图像，将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像中。
因此，本发明实施例字幕流单独渲染至3D空间，不会因字幕流同视频图像共同渲染到3D空间，而出现字幕的字体模糊现象。本发明实施例将单独渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中，改善了3D空间中的字幕渲染效果。
实施例二
本发明还提供另一实施例，参见图2，所述步骤S1之前还包括：
S0、对所述视频流进行处理，截取出所述视频流中的字幕流。
视频的字幕分为内置字幕和外挂字幕，对于外挂字幕的视频，一般的视频转换软件都能将其字幕转换出来，但对于内置字幕的视频，比如常见的MKV高清视频，一般都是内置字幕。对于内置字幕，可以用mkvextractgui2来提取。下载附件，解压，运行其中的mkvextractgui2，打开mkv文件，如果能看到字幕轨，就可以提取了。
本发明实施例截取出所述视频流中的字幕流，从而对视频流中的字幕流以及各帧视频图像分别渲染，避免同时渲染视频流及字幕流造成字幕的字体模糊。
实施例三
本发明还提供再一实施例，参见图3，所述步骤S2包括：
S21、分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳。
时间戳(timestamp)，通常是一个字符序列，唯一地标识某一刻的时间。数字时间戳技术是数字签名技术一种变种的应用。
本发明实施例分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳。
S22、根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的各帧视频图像。
本发明实施例参考所述字幕流的时间戳以及所述与所述字幕流对应的各帧视频图像的时间戳，从而保证两者能够同步播放。
实施例四
本发明还提供再一实施例，步骤S2为：
将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的所在的平面上。
本发明实施例在3D空间中，令字幕与视频图像处于同一平面上，便于观众读取字幕，实现更佳的视频观看效果。
具体地，步骤S2为：
将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
由于2D空间中字幕通常位于图像的下部，为了更加符合观看习惯，本发明实施例将所述渲染后的字幕流加载到所述渲染后的各帧视频图像的下部。
实施例五
对应上述方法，本发明另一实施例提供一种视频中文字在3D空间中的渲染装置，通常应用于计算机设备或便携设备。
参见图4，所述装置包括：
图像渲染模块41，用于将视频流中的字幕流以及各帧视频图像分别渲染至3D空间。
图像加载模块42，用于将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。
视频(Video)泛指将一系列静态影像以电信号的方式加以捕捉、纪录、处理、储存、传送与重现的各种技术。连续的图像变化每秒超过24帧(frame)画面以上时，根据视觉暂留原理，人眼无法辨别单幅的静态画面；看上去是平滑连续的视觉效果，这样连续的画面叫做视频。视频技术最早是为了电视系统而发展，但现在已经发展为各种不同的格式以利消费者将视频记录下来。网络技术的发达也促使视频的纪录片段以串流媒体的形式存在于因特网之上并可被电脑接收与播放。视频与电影属于不同的技术，后者是利用照相术将动态的影像捕捉为一系列的静态照片。
渲染是3D显示的最后一道工序，也是最终使图像符合3D场景的阶段。渲染有多种软件，如：各3D软件自带渲染引擎，还有诸如RenderMan等。建筑设计、动画制作等利用3DSMAX、MAYA等软件制作好模型、动画帧之后，将所设计内容利用软件本身或者辅助软件(lightscape、vray等)制作成最终效果图或者动画的过程。
本发明实施例将视频流中的字幕以及各帧视频图像分别渲染至3D空间，分别获得3D空间中的字幕流图像以及各帧视频图像。
本发明实施例分别获得3D空间中的字幕流图像以及与所述字幕流对应的各帧视频图像，将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像中。
因此，本发明实施例字幕流单独渲染至3D空间，不会因字幕流同视频图像共同渲染到3D空间，而出现字幕的字体模糊现象。本发明实施例将单独渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中，改善了3D空间中的字幕渲染效果。
实施例六
本发明还提供另一实施例，参见图5，所述装置还包括：
字幕截取模块40，用于对所述视频流进行处理，截取出所述视频流中的字幕流。
视频的字幕分为内置字幕和外挂字幕，对于外挂字幕的视频，一般的视频转换软件都能将其字幕转换出来，但对于内置字幕的视频，比如常见的MKV高清视频，一般都是内置字幕。对于内置字幕，可以用mkvextractgui2来提取。下载附件，解压，运行其中的mkvextractgui2，打开mkv文件，如果能看到字幕轨，就可以提取了。
本发明实施例截取出所述视频流中的字幕流，从而对视频流中的字幕流以及各帧视频图像分别渲染，避免同时渲染视频流及字幕流造成字幕的字体模糊。
实施例七
本发明还提供再一实施例，参见图6，所述图像加载模块42包括：
时间戳获取单元421，用于分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳。
同步播放单元422，用于根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的各帧视频图像。
时间戳(timestamp)，通常是一个字符序列，唯一地标识某一刻的时间。数字时间戳技术是数字签名技术一种变种的应用。
本发明实施例分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳。
本发明实施例参考所述字幕流的时间戳以及所述与所述字幕流对应的帧视频图像的时间戳，从而保证两者能够同步播放。
实施例八
本发明还提供再一实施例，所述图像加载模块42具体用于将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的所在的平面上。
本发明实施例在3D空间中，令字幕与视频图像处于同一平面上，便于观众读取字幕，实现更佳的视频观看效果。
具体地，所述图像加载模块42具体用于将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
由于2D空间中字幕通常位于图像的下部，为了更加符合观看习惯，本发明实施例将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
实施例九
图7是本申请实施例提供的视频中文字在3D空间中的渲染方法的电子设备的硬件结构示意图，如图7所示，该设备包括：
一个或多个处理器710以及存储器720，图7中以一个处理器710为例。
执行视频中文字在3D空间中的渲染电子设备还可以包括：输入装置730和输出装置740。
处理器710、存储器720、输入装置730和输出装置740可以通过总线或者其他方式连接，图7中以通过总线连接为例。
存储器720作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本申请实施例中的视频中文字在3D空间中的渲染方法对应的程序指令/模块(例如，附图4所示的图像渲染模块41、图像加载模块42)。处理器710通过运行存储在存储器720中的非易失性软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例视频中文字在3D空间中的渲染的方法。
存储器720可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据视频中文字在3D空间中的渲染电子设备的使用所创建的数据等。此外，存储器720可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器720可选包括相对于处理器710远程设置的存储器，这些远程存储器可以通过网络连接至视频中文字在3D空间中的渲染的处理装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置730可接收输入的数字或字符信息，以及产生与视频中文字在3D空间中的渲染电子设备的用户设置以及功能控制有关的键信号输入。输出装置740可包括显示屏等显示设备。
所述一个或者多个模块存储在所述存储器720中，当被所述一个或者多个处理器710执行时，执行上述任意方法实施例中的视频中文字在3D空间中的渲染的方法。
上述产品可执行本申请实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本申请实施例所提供的方法。
本申请实施例的电子设备以多种形式存在，包括但不限于:
(1)移动通信设备:这类设备的特点是具备移动通信功能，并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iPhone)、多媒体手机、功能性手机，以及低端手机等。
(2)超移动个人计算机设备:这类设备属于个人计算机的范畴，有计算和处理功能，一般也具备移动上网特性。这类终端包括:PDA、MID和UMPC设备等，例如iPad。
(3)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如iPod)，掌上游戏机，电子书，以及智能玩具和便携式车载导航设备。
(4)服务器:提供计算服务的设备，服务器的构成包括处理器、硬盘、内存、系统总线等，服务器和通用的计算机架构类似，但是由于需要提供高可靠的服务，因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。
(5)其他具有数据交互功能的电子装置。
下面通过本发明一具体应用场景来进一步说明本发明实现。
本发明应用于一计算机设备或便携设备上，观众通过3D眼镜观看其播放的视频。
参见图8，所述方法包括：
801、对所述视频流进行处理，截取出所述视频流中的字幕流。
802、将视频流中的字幕流以及各帧视频图像分别渲染至3D空间。
803、分别获得所述渲染后的字幕流的时间戳以及渲染后的与所述字幕流对应的各帧视频图像的时间戳。
804、根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，处于同一平面上，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的各帧视频图像，将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
因此，本发明实施例字幕流单独渲染至3D空间，不会因字幕流同视频图像共同渲染到3D空间，而出现字幕的字体模糊现象。本发明实施例将单独渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中，改善了3D空间中的字幕渲染效果。
本领域的技术人员应明白，本发明的实施例可提供为方法、装置(设备)、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照实施例的方法、装置(设备)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种字幕在3D空间中的渲染方法，其特征在于，包括：
将视频流中的字幕流以及各帧视频图像分别渲染至3D空间；
将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。
2.如权利要求1所述的方法，其特征在于，所述将视频流中的字幕流以及各帧视频图像分别渲染至3D空间之前还包括：
对所述视频流进行处理，截取出所述视频流中的字幕流。
3.如权利要求1或2所述的方法，其特征在于，所述将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中包括：
分别获得所述渲染后的字幕流的时间戳以及所述渲染后的与所述字幕流对应的各帧视频图像的时间戳；
根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的的各帧视频图像。
4.如权利要求1所述的方法，其特征在于，所述将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中为：
将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像的所在的平面上。
5.如权利要求4所述的方法，其特征在于，所述将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像的所在的平面上为：
将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像的下部。
6.一种字幕在3D空间中的渲染装置，其特征在于，包括：
图像渲染模块，用于将视频流中的字幕流以及各帧视频图像分别渲染至3D空间；
图像加载模块，用于将所述渲染后的字幕流加载到渲染后的与所述字幕流对应的各帧视频图像中。
7.如权利要求6所述的装置，其特征在于，所述装置还包括：
字幕截取模块，用于对所述视频流进行处理，截取出所述视频流中的字幕流。
8.如权利要求6或7所述的装置，其特征在于，所述图像加载模块包括：
时间戳获取单元，用于分别获得渲染后的字幕流的时间戳以及渲染后的与所述字幕流对应的各帧视频图像的时间戳；
同步播放单元，用于根据所述字幕流的时间戳以及所述各帧视频图像的时间戳，同步播放所述渲染后的字幕流及所述渲染后的与所述字幕流对应的各帧视频图像。
9.如权利要求6所述的装置，其特征在于，所述图像加载模块具体用于将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的所在的平面上。
10.如权利要求9所述的装置，其特征在于，所述图像加载模块具体用于将所述渲染后的字幕流加载到所述渲染后的与所述字幕流对应的各帧视频图像的下部。
CN201610830390.4A 2016-09-18 2016-09-18 一种字幕在3d空间中的渲染方法及其装置 Pending CN106412718A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610830390.4A CN106412718A (zh) 2016-09-18 2016-09-18 一种字幕在3d空间中的渲染方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610830390.4A CN106412718A (zh) 2016-09-18 2016-09-18 一种字幕在3d空间中的渲染方法及其装置

Publications (1)

Publication Number Publication Date
CN106412718A true CN106412718A (zh) 2017-02-15

Family

ID=57996862

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610830390.4A Pending CN106412718A (zh) 2016-09-18 2016-09-18 一种字幕在3d空间中的渲染方法及其装置

Country Status (1)

Country Link
CN (1) CN106412718A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107613405A (zh) * 2017-09-30 2018-01-19 福州瑞芯微电子股份有限公司 一种vr视频字幕显示方法和装置
CN108419141A (zh) * 2018-02-01 2018-08-17 广州视源电子科技股份有限公司 一种字幕位置调整的方法、装置、存储介质及电子设备
CN109561263A (zh) * 2018-11-23 2019-04-02 重庆爱奇艺智能科技有限公司 在vr设备的3d视频中实现3d字幕效果
WO2023246302A1 (zh) * 2022-06-20 2023-12-28 北京字跳网络技术有限公司 字幕的显示方法、装置、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102106153A (zh) * 2008-07-25 2011-06-22 皇家飞利浦电子股份有限公司 字幕的3d显示处理
CN102970556A (zh) * 2012-12-03 2013-03-13 深圳市维尚视界立体显示技术有限公司 3dv 视频封装、播放方法及其系统
CN103026713A (zh) * 2010-07-12 2013-04-03 皇家飞利浦电子股份有限公司 3d视频广播中的辅助数据
CN103155574A (zh) * 2011-07-07 2013-06-12 索尼公司 发射机、传送方法和接收机

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102106153A (zh) * 2008-07-25 2011-06-22 皇家飞利浦电子股份有限公司 字幕的3d显示处理
CN103026713A (zh) * 2010-07-12 2013-04-03 皇家飞利浦电子股份有限公司 3d视频广播中的辅助数据
CN103155574A (zh) * 2011-07-07 2013-06-12 索尼公司 发射机、传送方法和接收机
CN102970556A (zh) * 2012-12-03 2013-03-13 深圳市维尚视界立体显示技术有限公司 3dv 视频封装、播放方法及其系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107613405A (zh) * 2017-09-30 2018-01-19 福州瑞芯微电子股份有限公司 一种vr视频字幕显示方法和装置
CN107613405B (zh) * 2017-09-30 2019-12-27 福州瑞芯微电子股份有限公司 一种vr视频字幕显示方法和装置
CN108419141A (zh) * 2018-02-01 2018-08-17 广州视源电子科技股份有限公司 一种字幕位置调整的方法、装置、存储介质及电子设备
CN108419141B (zh) * 2018-02-01 2020-12-22 广州视源电子科技股份有限公司 一种字幕位置调整的方法、装置、存储介质及电子设备
CN109561263A (zh) * 2018-11-23 2019-04-02 重庆爱奇艺智能科技有限公司 在vr设备的3d视频中实现3d字幕效果
WO2023246302A1 (zh) * 2022-06-20 2023-12-28 北京字跳网络技术有限公司 字幕的显示方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
KR102560187B1 (ko) 3차원(＂3d＂) 장면의 2차원(＂2d＂) 캡처 이미지를 기반으로 하는 가상 현실 콘텐츠를 렌더링하기 위한 방법 및 시스템
CN107682688B (zh) 基于增强现实的视频实时录制方法及录制设备
CN104469179A (zh) 一种将动态图片结合到手机视频中的方法
CN105447898A (zh) 一种虚拟现实设备中显示2d应用界面的方法和装置
CN101729791B (zh) 图像处理设备和方法
CN103108197A (zh) 一种用于3d视频无线显示的优先级压缩方法和系统
US20140368495A1 (en) Method and system for displaying multi-viewpoint images and non-transitory computer readable storage medium thereof
CN109803180A (zh) 视频预览图生成方法、装置、计算机设备及存储介质
CN110505471B (zh) 一种头戴显示设备及其屏幕采集方法、装置
CN106412718A (zh) 一种字幕在3d空间中的渲染方法及其装置
CN106303289A (zh) 一种将真实对象与虚拟场景融合显示的方法、装置及系统
CN103081476A (zh) 利用深度图信息转换三维图像的方法和设备
CN105740029A (zh) 一种内容呈现的方法、用户设备及系统
CN103686393A (zh) 基于窗口可视性状态的媒体流选择性解码
CN105007477A (zh) 基于Unity3D引擎实现裸眼3D显示的方法
CN108924538A (zh) Ar设备的屏幕拓展方法
CN104936030B (zh) 一种开机画面显示方法、设备以及组合终端系统
CN106162303A (zh) 信息处理方法、信息处理装置及用户设备
CN106156237A (zh) 信息处理方法、信息处理装置及用户设备
CN107995482A (zh) 视频文件的处理方法和装置
CN106201396A (zh) 一种数据展示方法及装置、虚拟现实设备与播放控制器
CN102215418A (zh) 3d影像显示方法及接口单元
CN102450025A (zh) 图像处理方法和设备
WO2021209044A1 (zh) 多媒体数据收发方法、系统、处理器和播放器
CN106485789A (zh) 一种3d模型加载方法及其装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170215