CN108924584A - 交互视频的封装方法及装置 - Google Patents

交互视频的封装方法及装置 Download PDF

Info

Publication number
CN108924584A
CN108924584A CN201810542929.5A CN201810542929A CN108924584A CN 108924584 A CN108924584 A CN 108924584A CN 201810542929 A CN201810542929 A CN 201810542929A CN 108924584 A CN108924584 A CN 108924584A
Authority
CN
China
Prior art keywords
interactive video
information
element information
video
interactive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810542929.5A
Other languages
English (en)
Inventor
刘杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mutual Shadow Technology (beijing) Co Ltd
Original Assignee
Mutual Shadow Technology (beijing) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mutual Shadow Technology (beijing) Co Ltd filed Critical Mutual Shadow Technology (beijing) Co Ltd
Priority to CN201810542929.5A priority Critical patent/CN108924584A/zh
Publication of CN108924584A publication Critical patent/CN108924584A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4351—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reassembling additional data, e.g. rebuilding an executable program from recovered modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明公开了一种交互视频的封装方法及装置，涉及视频技术领域，可以满足交互视频对图片、文字、特效等的多元化需求。所述方法包括：获取需要封装在交互视频对应封装文件内的交互视频元素信息，所述交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在所述封装文件内的交互视频其余元素信息；将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，以便生成所述交互视频对应的视频文件。本发明适用于交互视频的封装。

Description

交互视频的封装方法及装置
技术领域
本发明涉及视频技术领域，特别是涉及一种交互视频的封装方法及装置。
背景技术
随着视频技术的不断发展，交互视频越来越流行。交互视频是指通过各种技术手段，将交互体验融入到线性播放的视频的新型视频，播放器在播放交互视频时，会在特定的视频节点展开显示可供用户选择的不同分支剧情的选项，用户在选择某一分支剧情的选项后，会根据该选择的分支剧情进行播放，进而可以满足不同用户的个性化观看需求。例如，对于同一剧集的交互视频，用户可以根据自己的需要选择不同的分支剧情进行播放，使得不同用户实际观看的视频内容可能是不同的。
目前，现有的视频封装方式只包含视频、音频和字幕三种形式的元素，视频播放器播放通过该封装方式得到的视频文件时，对该视频文件进行读取和解码后显示出画面、声音和字幕。
然而，上述这种封装方式无法满足交互视频对图片、文字、特效等的多元化需求。在采用现有技术解决方案来实现交互视频的多元化效果时，需要视频播放器在播放通过这种封装方式得到的视频文件的同时从该视频文件以外获得相应的图片、文字等素材以满足交互视频的播放需求，但是这样会额外增加系统开销，并且加大了响应延时，进而影响了互动时的流畅性。
发明内容
有鉴于此，本发明提供了一种交互视频的封装方法及装置，主要目的在于解决目前通过现有的视频封装方式无法满足交互视频对图片、文字、特效等多元化需求，在播放通过这种封装方式得到的视频文件时会额外增加系统开销，加大了响应延时，进而影响互动时流畅性的问题。
依据本发明一个方面，提供了一种交互视频的封装方法，该方法包括：
获取需要封装在交互视频对应封装文件内的交互视频元素信息，所述交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在所述封装文件内的交互视频其余元素信息；
将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，以便生成所述交互视频对应的视频文件。
依据本发明另一个方面，提供了一种交互视频的封装装置，该装置包括：
获取单元，用于获取需要封装在交互视频对应封装文件内的交互视频元素信息，所述交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在所述封装文件内的交互视频其余元素信息；
封装单元，用于将所述获取单元获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，以便生成所述交互视频对应的视频文件。
依据本发明又一个方面，提供了一种存储设备，其上存储有计算机程序，所述程序被处理器执行时实现上述交互视频的封装方法。
依据本发明再一个方面，提供了一种交互视频封装的实体装置，包括存储设备、处理器及存储在存储设备上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述交互视频的封装方法。
借由上述技术方案，本发明提供的一种交互视频的封装方法及装置，与目前现有的视频封装方式相比，本发明可以将除了视频元素信息、音频元素信息、字幕元素信息以外的交互视频其余元素信息，连同视频元素信息、音频元素信息、字幕元素信息一起封装在交互视频对应的封装文件内，以便生成得到交互视频对应的视频文件，进而可以满足交互视频对图片、文字、特效等的多元化需求，从而可以在播放该交互视频时直接从该视频文件中获取相应元素素材信息进行组织播放，无需从该视频文件以外获得这些元素素材信息就可满足交互视频的播放需求，减少了系统开销，降低了交互视频播放响应延时，提升了互动时的流畅性。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本发明实施例提供的一种交互视频的封装方法流程示意图；
图2示出了本发明实施例提供的一种IVF格式文件包含元素内容的实例示意图；
图3示出了本发明实施例提供的一种存档式封装方法的实例示意图；
图4示出了本发明实施例提供的一种流式封装方法的实例示意图；
图5示出了本发明实施例提供的一种交互视频的封装装置结构示意图；
图6示出了本发明实施例提供的另一种交互视频的封装装置结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明实施例提供了一种交互视频的封装方法，可以满足交互视频对图片、文字、特效等的多元化需求，如图1所示，该方法包括：
101、获取需要封装在交互视频对应封装文件内的交互视频元素信息。
其中，交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在封装文件内的交互视频其余元素信息。交互视频其余元素信息包括但不限于：文字元素信息、字体元素信息、图片元素信息、三维(Three Dimensions，3D)模型元素信息、剧本元素信息、配置信息，这些交互视频元素信息可以由交互视频编辑人员预先根据交互视频的内容播放需求进行配置。
视频元素信息中可以包含视频素材片段；音频元素信息中可以包含与视频相对应的音频和音频特效，例如点击声、语音提示声等；字幕元素信息中可以包含与视频相对应的字幕；文字元素信息中可以包含交互视频内需要提示的文字，例如对分支视频内容的文字提示、分支视频播放的付费提示等；字体元素信息中可以包含与文字提示相对应的字体；图片元素信息中可以包含显示在播放画面内的图片；三维模型元素信息中可以包含显示在播放画面内的三维模型描述。
剧本元素信息中可以包含交互视频播放时所依据的播放规则，例如在何时弹出分支剧情选择界面、选择界面上的组成元素、图片文字出现的位置和对应的跳转链接等；配置信息中可以包含描述交互视频自身和各元素属性的信息，例如交互视频格式版本、各元素在封装文件中的对应位置、音视频的编码格式、文字的字体字号显示位置等，配置信息以JSON格式来记录这些信息。
在本发明实施例中，交互视频可以为二维(Two Dimensions，2D)、三维、四维(FourDimensions，4D)等多维视频，具体可以为包括但不限于交互电影，交互综艺，交互电视剧，交互网络剧，交互网络大电影，交互短视频，交互短综艺，交互动画片，交互游戏视频，交互广告，交互教育视频，交互虚拟现实影像等。
对于本发明实施例的执行主体可以为用于交互视频封装的装置，在该装置接收到封装指令时，执行步骤101至步骤102所述的过程，以便一键自动化实现交互视频的封装过程。
102、将获取到的交互视频元素信息按照预设封装规则封装在封装文件内。
进一步的，以便于生成交互视频对应的视频文件。其中，预设封装规则可以根据实际不同的封装需求预先进行设置。
例如，如图2所示，可以封装得到IVF(Interactive Video Format)格式的交互视频文件，该IVF格式是一种新型的支持交互视频的封装格式，该IVF格式文件可以将视频、音频、字幕、文字、字体、图片、三维模型、剧本、配置参数等多种元素按照规则进行合理的安排和组织，以满足交互视频对图片、文字、特效等的多元化需求，从而可以在播放该交互视频时直接从该IVF格式文件中获取相应元素素材进行组织播放，无需从该IVF格式文件以外获得这些元素素材就可满足交互视频的播放需求，减少了系统开销，降低了交互视频播放响应延时，提升了互动时的流畅性。
进一步的，作为上述实施例具体实施方式的细化和扩展，为了实现将交互视频高效地存储在外部非易失性的存储介质上，例如硬盘、磁带等存储介质上，在本发明的一个可选实施例中，预设封装规则可以为预设存档型封装规则，相应的，步骤102具体可以包括：将获取到的交互视频元素信息进行元素类别分类，得到不同元素类别的交互视频元素信息，其中同一元素类别的交互视频元素信息中包含一个或多个元素信息；然后将不同元素类别的交互视频元素信息按照视频播放器读取的预置顺序，独立连续地配置在封装文件内，并根据交互视频元素信息在封装文件中的对应位置，更新配置信息。
例如，将获取到交互视频元素信息进行元素类别分类，得到视频类别、音频类别、字幕类别、字体类别、图片类别、模型类别、剧本类别、配置信息类别的元素信息，其中视频类别的元素信息包含3个视频元素信息，分别为视频1、视频2、视频3，音频类别的元素信息包含5个音频元素信息，分别为音频1、音频2、音频3、音频4、音频5，将这些元素信息按照视频播放器读取的预置顺序，独立连续地配置在封装文件内，并根据这些元素信息被封装在封装文件中的对应位置更新配置信息，如图3所示，将配置信息优先封装在封装文件中开头，以便在视频播放器读取时，首先读取配置信息，根据配置信息定位剧本，然后根据剧本中描述的剧情逻辑定位视频、音频等素材元素。
通过上述这种存档型的封装方式，可以占用尽量少的存储空间，进而可以将交互视频高效地存储在外部非易失性的存储介质上，这种封装方式相对适用于将交互视频下载完成后再进行播放的场景以及对交互视频进行备份存储的场景。
进一步的，为了满足交互视频在网络上边传输边播放的需求，在本发明的另一个可选实施例中，预设封装规则可以为预设流式封装规则，相应的，步骤102具体可以包括：根据交互视频元素信息的体积大小，将体积大于或等于预定阈值的交互视频元素信息进行分段处理，得到多个分段元素信息；将多个分段元素信息与体积小于预定阈值的交互视频元素信息，按照交互视频播放的时间顺序进行组织；将每个组织结果中包含的各个元素信息按照视频播放器读取的预置顺序，独立连续地配置在封装文件内，并根据元素信息在封装文件中的对应位置和元素信息对应的分段处理结果，更新配置信息。
例如，参照预定阈值可以区分较大体积的视频、音频等素材元素，将体积较大的视频和音频等素材元素进行分段，与图片、字幕等体积较小的元素一同按照交互视频播放的时间顺序进行组织，得到多个组织结果，其中每个组织结果包含的各个元素可以组织成为一段分段视频进行播放，交互视频由这些分段视频组成，然后将每个组织结果中包含的各个元素信息按照视频播放器读取的预置顺序，独立连续地配置在封装文件内，并根据元素信息在封装文件中的对应位置和元素信息对应的分段处理结果，更新配置信息，如图4所示，将配置信息优先封装在封装文件中开头，将体积较大的视频1和对应的音频1，分成15小段，封装在封装文件中，以便在视频播放器读取时，首先读取配置信息，根据配置信息定位剧本，然后根据剧本描述需要播放视频1时，依次读取这15个小段内容进行播放，先读取已下载的前几个小段内容，后面几个未下载的小段内容可以继续下载。
通过上述这种流式的封装方式，可以满足交互视频在网络上边传输边播放的需求，可不必下载完毕整个交互视频，在下载交互视频的过程中即可实现播放和互动，这种封装方式相对适用于边下载交互视频边进行播放的场景。
进一步的，为了实现播放封装得到的视频文件充分兼容现有的音视频、图像图形格式标准，在本发明的又一个可选实施例中，步骤102具体可以包括：将获取到的交互视频元素信息按照预设格式标准进行转换处理；然后将转换处理后的交互视频元素信息按照预设封装规则封装在封装文件内。
在本发明可选实施例中，预设格式标准可以参照现有的音视频、图像图形格式标准进行设定，通过这种先转换再打包封装在封装文件中的方式，可以使得封装得到交互视频文件在播放解码时充分兼容现有的音视频、图像图形格式标准，无需进行额外开发。
进一步的，为了降低在下载交互视频文件时相应的网络带宽，在本发明的再一个可选实施例中，步骤102具体可以包括：将获取到的交互视频元素信息进行压缩处理；然后将压缩处理后的交互视频元素信息按照预设封装规则封装在封装文件内。
在本发明可选实施例中，压缩处理方式可以采用现有的压缩方式，通过这种二次压缩的方式得到的交互视频文件，在传输时可以降低网络带宽，并且在存储该视频文件时，也能减少存储空间，提高存储效率；在视频播放器在读取该压缩的元素信息时可以先进行相应解压再读取。
基于上述封装方法得到交互视频文件之后，当需要播放交互视频时，可以先从该视频文件中读取配置信息；根据配置信息中包含的剧本元素对应位置，定位剧本元素信息；根据配置信息中记录的各元素在封装文件中的对应位置，参照剧本元素信息中包含的交互视频播放时所依据的播放规则，提取相应的视频元素信息、音频元素信息、字幕元素信息、文字元素信息、字体元素信息、图片元素信息、三维模型元素信息；依据播放规则中记录的元素展现时刻，将提取的各个元素信息进行组织播放。通过这种播放方式播放交互视频时，直接从该视频文件中获取相应元素素材进行组织播放，无需从该视频文件以外获得这些元素素材就可满足交互视频的播放需求，可以减少系统开销，降低交互视频播放响应延时，提升互动时的流畅性。
例如，播放交互视频时，首先读取配置信息，根据配置信息定位剧本，根据剧本中描述的剧情逻辑定位视频、音频、图片等素材并根据剧本里记录的时刻在屏幕上显示。
通过应用本发明实施例提供的一种交互视频的封装方法得到的视频文件，可以将音频、视频、文字、图片、3D图形、视频脚本、配置参数等元素按规则进行合理的安排和组织，已达到存档或在网络上进行流媒体播放的要求；充分兼容现有的音视频、图像图形格式标准，可将上述元素进行转换后打包进封装文件中；满足网络播放时低延迟快速响应的需求，对音视频等数据量大的元素进行分段组织；并且为满足播放端对用户交互的即时响应，支持各项元素的预加载；对各项元素进行二次压缩，可以降低网络带宽，提高存储效率。
进一步的，作为图1所述方法的具体实现，本发明实施例提供了一种交互视频的封装装置，如图5所示，所述装置包括：获取单元21、封装单元22。
获取单元21，可以用于获取需要封装在交互视频对应封装文件内的交互视频元素信息，其中所述交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在所述封装文件内的交互视频其余元素信息；获取单元21为本装置中获取交互视频元素信息的主要功能模块，在获取得到这些元素信息后触发封装单元22进行工作。
封装单元22，可以用于将所述获取单元21获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，进一步的，以便于生成所述交互视频对应的视频文件。封装单元22为本装置中进行元素信息封装的主要功能模块。
在具体的应用场景中，所述交互视频其余元素信息包括但不限于：文字元素信息、字体元素信息、图片元素信息、三维模型元素信息、剧本元素信息、配置信息，其中所述剧本元素信息中包含交互视频播放时所依据的播放规则，所述配置信息中包含描述交互视频自身和各元素属性的信息。
在具体的应用场景中，为了实现将交互视频高效地存储在外部非易失性的存储介质上，所述预设封装规则可以为预设存档型封装规则，则封装单元22，具体可以用于将获取到的所述交互视频元素信息进行元素类别分类，得到不同元素类别的交互视频元素信息，其中同一元素类别的交互视频元素信息中包含一个或多个元素信息；将所述不同元素类别的交互视频元素信息按照视频播放器读取的预置顺序，独立连续地配置在所述封装文件内，并根据交互视频元素信息在所述封装文件中的对应位置，更新所述配置信息。
通过上述这种存档型的封装方式，可以占用尽量少的存储空间，进而可以将交互视频高效地存储在外部非易失性的存储介质上。
在具体的应用场景中，为了满足交互视频在网络上边传输边播放的需求，所述预设封装规则还可以为预设流式封装规则，则封装单元22，具体还可以用于根据交互视频元素信息的体积大小，将体积大于或等于预定阈值的交互视频元素信息进行分段处理，得到多个分段元素信息；将所述多个分段元素信息与体积小于所述预定阈值的交互视频元素信息，按照交互视频播放的时间顺序进行组织；将每个组织结果中包含的各个元素信息按照视频播放器读取的预置顺序，独立连续地配置在所述封装文件内，并根据元素信息在所述封装文件中的对应位置和元素信息对应的分段处理结果，更新所述配置信息。
通过上述这种流式的封装方式，可以满足交互视频在网络上边传输边播放的需求，可不必下载完毕整个交互视频，在下载交互视频的过程中即可实现播放和互动。
在具体的应用场景中，如图6所示，所述装置还包括：读取单元23、定位单元24、提取单元25、播放单元26。
读取单元23，用于当需要播放所述交互视频时，从所述视频文件中读取配置信息；
定位单元24，用于根据所述配置信息，定位所述剧本元素信息；
提取单元25，用于根据所述配置信息，参照所述剧本元素信息中包含的所述交互视频播放时所依据的播放规则，提取相应的视频元素信息、音频元素信息、字幕元素信息、文字元素信息、字体元素信息、图片元素信息、三维模型元素信息；
播放单元26，用于依据所述播放规则中记录的元素展现时刻，将提取的各个元素信息进行组织播放。通过这种播放方式播放交互视频时，直接从该视频文件中获取相应元素素材进行组织播放，无需从该视频文件以外获得这些元素素材就可满足交互视频的播放需求，可以减少系统开销，降低交互视频播放响应延时，提升互动时的流畅性。
在具体的应用场景中，为了实现播放封装得到的视频文件充分兼容现有的音视频、图像图形格式标准，封装单元22，具体还可以用于将获取到的所述交互视频元素信息按照预设格式标准进行转换处理；将转换处理后的交互视频元素信息按照预设封装规则封装在所述封装文件内。
在具体的应用场景中，为了降低在下载交互视频文件时相应的网络带宽，封装单元22，具体还可以用于将获取到的所述交互视频元素信息进行压缩处理；将压缩处理后的交互视频元素信息按照预设封装规则封装在所述封装文件内。
需要说明的是，本发明实施例提供的一种交互视频的封装装置所涉及各功能单元的其他相应描述，可以参考图1中的对应描述，在此不再赘述。
基于上述如图1所示方法，为了实现上述目的，根据本发明实施例所提出的技术方案的另一方面，本发明实施例还提供了一种存储设备，其上存储有计算机程序，在所述程序运行时控制所述存储设备所在设备执行上述如图1所述的交互视频的封装方法。
基于上述如图1所示方法和如图5和图6所示虚拟装置的实施例，为了实现上述目的，根据本申请实施例所提出的技术方案的另一方面，本发明实施例还提供了一种交互视频封装的实体装置，所述交互视频封装的实体装置包括存储设备和处理器；所述存储设备，用于存储计算机程序；所述处理器，用于执行所述计算机程序以实现上述如图1所述的交互视频的封装方法。
通过应用本发明实施例提供的技术方案，可以满足交互视频对图片、文字、特效等的多元化需求，充分兼容现有的音视频、图像图形格式标准，可将上述元素进行转换后打包进封装文件中；满足网络播放时低延迟快速响应的需求，对音视频等数据量大的元素进行分段组织；并且为满足播放端对用户交互的即时响应，支持各项元素的预加载；对各项元素进行二次压缩，可以降低网络带宽，提高存储效率。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本申请可以通过硬件实现，也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施场景所述的方法。
本领域技术人员可以理解附图只是一个优选实施场景的示意图，附图中的模块或流程并不一定是实施本申请所必须的。
本领域技术人员可以理解实施场景中的装置中的模块可以按照实施场景描述进行分布于实施场景的装置中，也可以进行相应变化位于不同于本实施场景的一个或多个装置中。上述实施场景的模块可以合并为一个模块，也可以进一步拆分成多个子模块。
上述本申请序号仅仅为了描述，不代表实施场景的优劣。
以上公开的仅为本申请的几个具体实施场景，但是，本申请并非局限于此，任何本领域的技术人员能思之的变化都应落入本申请的保护范围。

Claims (10)

1.一种交互视频的封装方法，其特征在于，包括：
获取需要封装在交互视频对应封装文件内的交互视频元素信息，所述交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在所述封装文件内的交互视频其余元素信息；
将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，以便生成所述交互视频对应的视频文件。
2.根据权利要求1所述的方法，其特征在于，所述交互视频其余元素信息包括但不限于：文字元素信息、字体元素信息、图片元素信息、三维模型元素信息、剧本元素信息、配置信息，其中所述剧本元素信息中包含交互视频播放时所依据的播放规则，所述配置信息中包含描述交互视频自身和各元素属性的信息。
3.根据权利要求1至2任一项所述的方法，其特征在于，若所述预设封装规则为预设存档型封装规则，则所述将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，具体包括：
将获取到的所述交互视频元素信息进行元素类别分类，得到不同元素类别的交互视频元素信息，其中同一元素类别的交互视频元素信息中包含一个或多个元素信息；
将所述不同元素类别的交互视频元素信息按照视频播放器读取的预置顺序，独立连续地配置在所述封装文件内，并根据交互视频元素信息在所述封装文件中的对应位置，更新所述配置信息。
4.根据权利要求1至3任一项所述的方法，其特征在于，若所述预设封装规则为预设流式封装规则，则所述将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，具体包括：
根据交互视频元素信息的体积大小，将体积大于或等于预定阈值的交互视频元素信息进行分段处理，得到多个分段元素信息；
将所述多个分段元素信息与体积小于所述预定阈值的交互视频元素信息，按照交互视频播放的时间顺序进行组织；
将每个组织结果中包含的各个元素信息按照视频播放器读取的预置顺序，独立连续地配置在所述封装文件内，并根据元素信息在所述封装文件中的对应位置和元素信息对应的分段处理结果，更新所述配置信息。
5.根据权利要求2所述的方法，其特征在于，所述生成所述交互视频对应的视频文件之后，所述方法还包括：
当需要播放所述交互视频时，从所述视频文件中读取配置信息；
根据所述配置信息，定位所述剧本元素信息；
根据所述配置信息，参照所述剧本元素信息中包含的所述交互视频播放时所依据的播放规则，提取相应的视频元素信息、音频元素信息、字幕元素信息、文字元素信息、字体元素信息、图片元素信息、三维模型元素信息；
依据所述播放规则中记录的元素展现时刻，将提取的各个元素信息进行组织播放。
6.根据权利要求1所述的方法，其特征在于，所述将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，具体包括：
将获取到的所述交互视频元素信息按照预设格式标准进行转换处理；
将转换处理后的交互视频元素信息按照预设封装规则封装在所述封装文件内。
7.根据权利要求1所述的方法，其特征在于，所述将获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，具体包括：
将获取到的所述交互视频元素信息进行压缩处理；
将压缩处理后的交互视频元素信息按照预设封装规则封装在所述封装文件内。
8.一种交互视频的封装装置，其特征在于，包括：
获取单元，用于获取需要封装在交互视频对应封装文件内的交互视频元素信息，所述交互视频元素信息除了包含视频元素信息、音频元素信息、字幕元素信息以外，还包含需要封装在所述封装文件内的交互视频其余元素信息；
封装单元，用于将所述获取单元获取到的所述交互视频元素信息按照预设封装规则封装在所述封装文件内，以便生成所述交互视频对应的视频文件。
9.一种存储设备，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现权利要求1至7中任一项所述的交互视频的封装方法。
10.一种交互视频的封装装置，包括存储设备、处理器及存储在存储设备上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至7中任一项所述的交互视频的封装方法。
CN201810542929.5A 2018-05-30 2018-05-30 交互视频的封装方法及装置 Pending CN108924584A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810542929.5A CN108924584A (zh) 2018-05-30 2018-05-30 交互视频的封装方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810542929.5A CN108924584A (zh) 2018-05-30 2018-05-30 交互视频的封装方法及装置

Publications (1)

Publication Number Publication Date
CN108924584A true CN108924584A (zh) 2018-11-30

Family

ID=64419416

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810542929.5A Pending CN108924584A (zh) 2018-05-30 2018-05-30 交互视频的封装方法及装置

Country Status (1)

Country Link
CN (1) CN108924584A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110784753A (zh) * 2019-10-15 2020-02-11 腾讯科技（深圳）有限公司 互动视频播放方法及装置、存储介质、电子设备
CN111212311A (zh) * 2020-01-13 2020-05-29 四川长虹电器股份有限公司 一种语音交互视频的生成及播放方法
CN112104909A (zh) * 2019-06-18 2020-12-18 上海哔哩哔哩科技有限公司 互动视频播放方法、装置、计算机设备及可读存储介质
CN112104920A (zh) * 2019-06-18 2020-12-18 上海哔哩哔哩科技有限公司 互动视频文件生成方法、装置、计算机设备及存储介质
CN113254393A (zh) * 2021-04-07 2021-08-13 互影科技（北京）有限公司 一种互动视频的封装方法及装置、电子设备
CN113382291A (zh) * 2020-03-09 2021-09-10 海信视像科技股份有限公司 一种显示设备及流媒体播放方法
CN113784213A (zh) * 2021-10-08 2021-12-10 智令互动(深圳)科技有限公司 基于非线编模式的互动视频编辑器的互动控件实现方法
CN116166627A (zh) * 2023-04-19 2023-05-26 启迪数字科技(深圳)有限公司 实验操作轨迹记录方法、装置、设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080177793A1 (en) * 2006-09-20 2008-07-24 Michael Epstein System and method for using known path data in delivering enhanced multimedia content to mobile devices
CN101247511A (zh) * 2008-03-21 2008-08-20 中国电信股份有限公司 Iptv内容相关信息展现方法及系统
CN101420452A (zh) * 2008-12-05 2009-04-29 深圳市迅雷网络技术有限公司 一种视频文件的发布方法及装置
CN102479532A (zh) * 2010-11-30 2012-05-30 上海博路信息技术有限公司 一种复合多媒体文件结构的实现方法
CN103514351A (zh) * 2012-06-28 2014-01-15 三星电子（中国）研发中心 一种多媒体文件的编辑方法、装置和系统
CN105472456A (zh) * 2015-11-27 2016-04-06 北京奇艺世纪科技有限公司 一种视频播放方法及装置
CN106507189A (zh) * 2016-11-01 2017-03-15 热波（北京）网络科技有限责任公司 一种基于vr视频的人机交互方法及系统
CN107770626A (zh) * 2017-11-06 2018-03-06 腾讯科技（深圳）有限公司 视频素材的处理方法、视频合成方法、装置及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080177793A1 (en) * 2006-09-20 2008-07-24 Michael Epstein System and method for using known path data in delivering enhanced multimedia content to mobile devices
CN101247511A (zh) * 2008-03-21 2008-08-20 中国电信股份有限公司 Iptv内容相关信息展现方法及系统
CN101420452A (zh) * 2008-12-05 2009-04-29 深圳市迅雷网络技术有限公司 一种视频文件的发布方法及装置
CN102479532A (zh) * 2010-11-30 2012-05-30 上海博路信息技术有限公司 一种复合多媒体文件结构的实现方法
CN103514351A (zh) * 2012-06-28 2014-01-15 三星电子（中国）研发中心 一种多媒体文件的编辑方法、装置和系统
CN105472456A (zh) * 2015-11-27 2016-04-06 北京奇艺世纪科技有限公司 一种视频播放方法及装置
CN106507189A (zh) * 2016-11-01 2017-03-15 热波（北京）网络科技有限责任公司 一种基于vr视频的人机交互方法及系统
CN107770626A (zh) * 2017-11-06 2018-03-06 腾讯科技（深圳）有限公司 视频素材的处理方法、视频合成方法、装置及存储介质

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112104909A (zh) * 2019-06-18 2020-12-18 上海哔哩哔哩科技有限公司 互动视频播放方法、装置、计算机设备及可读存储介质
CN112104920A (zh) * 2019-06-18 2020-12-18 上海哔哩哔哩科技有限公司 互动视频文件生成方法、装置、计算机设备及存储介质
CN110784753A (zh) * 2019-10-15 2020-02-11 腾讯科技（深圳）有限公司 互动视频播放方法及装置、存储介质、电子设备
CN110784753B (zh) * 2019-10-15 2023-01-17 腾讯科技（深圳）有限公司 互动视频播放方法及装置、存储介质、电子设备
CN111212311A (zh) * 2020-01-13 2020-05-29 四川长虹电器股份有限公司 一种语音交互视频的生成及播放方法
CN113382291A (zh) * 2020-03-09 2021-09-10 海信视像科技股份有限公司 一种显示设备及流媒体播放方法
CN113254393A (zh) * 2021-04-07 2021-08-13 互影科技（北京）有限公司 一种互动视频的封装方法及装置、电子设备
CN113254393B (zh) * 2021-04-07 2024-07-05 互影科技（北京）有限公司 一种互动视频的封装方法及装置、电子设备
CN113784213A (zh) * 2021-10-08 2021-12-10 智令互动(深圳)科技有限公司 基于非线编模式的互动视频编辑器的互动控件实现方法
CN116166627A (zh) * 2023-04-19 2023-05-26 启迪数字科技(深圳)有限公司 实验操作轨迹记录方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN108924584A (zh) 交互视频的封装方法及装置
WO2017107758A1 (zh) 应用于图像或视频的ar显示系统及方法
US20170169598A1 (en) System and method for delivering augmented reality using scalable frames to pre-existing media
US20180061364A1 (en) Variable refresh rate video capture and playback
US20040136698A1 (en) DVD conversion for on demand
US20140325568A1 (en) Dynamic creation of highlight reel tv show
CN111491174A (zh) 虚拟礼物获取及展示方法、装置、设备及存储介质
JP2017504230A (ja) ビデオコンテンツを配布するビデオブロードキャストシステム及び方法
EP3338106B1 (en) Generating objects in real time panoramic video
CN107547933B (zh) 播放画面生成方法、装置及系统
WO2019007120A1 (zh) 一种媒体数据的处理方法和装置
WO2020064026A1 (zh) 一种游戏广告制作方法及平台、存储介质
CN110996150A (zh) 视频融合方法、电子设备及存储介质
CN110913278A (zh) 视频播放方法、显示终端及存储介质
CN108616768B (zh) 多媒体资源的同步播放方法、装置、存储位置及电子装置
US8452160B2 (en) System and method for portrayal of object or character target features in an at least partially computer-generated video
KR102073230B1 (ko) 특정 영역의 화질을 개선하기 위해 복수의 가상현실영상을 재생하는 가상현실영상재생장치 및 가상현실영상생성방법
US7356250B2 (en) Systems and methods for creating a single video frame with one or more interest points
KR20200101583A (ko) Vr 영상 컨텐츠 제작 방법, 장치 및 프로그램
CN113259705A (zh) 录制与合成视频的方法和装置
Kim et al. Design and implementation for interactive augmented broadcasting system
CN102474650B (zh) 立体观察影像的再现装置、集成电路、再现方法
CN106792219B (zh) 一种直播回看的方法及装置
JP7054351B2 (ja) 自由視点映像のリプレイ映像を再生するシステム
JP2016072858A (ja) メディアデータ生成方法、メディアデータ再生方法、メディアデータ生成装置、メディアデータ再生装置、コンピュータ読み取り可能な記録媒体、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181130

RJ01 Rejection of invention patent application after publication