CN112312219A - 一种流媒体视频播放、生成方法及设备 - Google Patents
一种流媒体视频播放、生成方法及设备 Download PDFInfo
- Publication number
- CN112312219A CN112312219A CN202011349470.0A CN202011349470A CN112312219A CN 112312219 A CN112312219 A CN 112312219A CN 202011349470 A CN202011349470 A CN 202011349470A CN 112312219 A CN112312219 A CN 112312219A
- Authority
- CN
- China
- Prior art keywords
- information
- scene
- playing
- streaming media
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 230000008569 process Effects 0.000 claims abstract description 21
- 230000000153 supplemental effect Effects 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 18
- 238000004458 analytical method Methods 0.000 claims description 3
- 238000003860 storage Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 238000009826 distribution Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请提供了一种流媒体视频生成和播放方案，该方案中可以在流媒体视频编码之前，预先生成设备编辑生成流媒体视频的场景信息，并在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，由于场景信息包括多个场景内容所对应的场景起始时间，因此播放设备可以在解码播放的过程中从所述补充增强信息中解析获得场景信息，并利用该场景信息提示用户选择需要的播放偏好，使得播放设备可以根据用户的选择同时或者按照顺序依次播放场景内容，实现视频内容呈现形式的多样性，满足不同用户对同一视频内容的不同观看需求。
Description
技术领域
本申请涉及信息技术领域，尤其涉及一种流媒体视频播放、生成方法及设备。
背景技术
目前传统的视频内容的呈现形式都是按照拍摄者规划的线索来拍摄和播放的，制作完成之后，视频的播放顺序就固定了。在播放过程中，用户除了拖拽进度条播放或者修改播放速率之外，就没有其它的方式能够对播放的过程进行调节和控制。例如图1示出了目前传统的视频播放流程图，首开始解码并渲染图像和声音后，播放界面显示相应的视频内容，然后顺序往后播放。播放期间，检测是否有拖拽进度条的操作，若是则跳转到拖拽的时间点播放，若否则继续往后播放。同时，可以检测是否有触发倍速播放的操作，若是则改变播放速度，若否则继续往后播放，直至视频结束。由此可知，此种播放方式中的视频内容的播放顺序较为固定，导致了视频内容的呈现形式单一，无法满足不同用户对同一视频内容的不同观看需求。
发明内容
本申请的一个目的是提供一种流媒体视频播放、生成方法及设备，用以解决视频内容的呈现形式单一，无法满足不同用户对同一视频内容的不同观看需求的问题。
为实现上述目的，本申请的一些实施例提供了一种流媒体视频播放方法，该方法包括：
播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，其中，所述场景信息包括多个场景内容所对应的场景起始时间；
所述播放设备在所述流媒体视频播放至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，所述播放偏好信息包括同时播放或顺序播放；
所述播放设备在获取到用户选择的播放偏好信息时，根据所述播放偏好信息播放所述场景起始时间对应的场景内容。
进一步地，播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，包括：
播放设备在接收流媒体视频时，对流媒体视频的网络抽象层数据进行解码，获得补充增强信息；
所述播放设备根据预设的场景信息协议，从所述补充增强信息中的自定义信息块解析获得场景信息。
进一步地，所述自定义信息块的格式符合所述场景信息协议，至少包括场景信息总长度和场景信息；
所述播放设备根据预设的场景信息协议，从所述补充增强信息中的自定义信息块解析获得场景信息，包括：
所述播放设备根据预设的场景信息协议，从所述补充增强信息中获取场景信息总长度；
所述播放设备按照所述场景信息总长度，从所述补充增强信息读取自定义信息块，并从所述自定义信息块解析获得场景信息。
进一步地，所述播放设备在所述流媒体视频播放至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，包括：
所述播放设备检测当前播放的流媒体视频的播放时间，若所述播放时间到达场景起始时间，则在播放界面中显示用于输入播放偏好信息的操作入口；
所述播放设备在检测到用户基于所述操作入口输入的播放偏好信息时，确定播放偏好信息为同时播放或顺序播放。
进一步地，所述播放设备在获取到用户选择的播放偏好信息时，根据所述播放偏好信息播放所述场景起始时间对应的场景内容，包括：
所述播放设备在获取到用户选择的播放偏好信息序为同时播放时，在播放界面中显示多个子画面，并在每个子画面中播放所述场景起始时间对应的一个场景内容；
所述播放设备在获取到用户选择的播放偏好信息为顺序播放时，在播放界面中按照用户选择的顺序播放所述场景起始时间对应的场景内容。
进一步地，所述方法还包括：
所述播放设备在预设时间内未获取到用户选择的播放偏好信息时，根据默认的播放偏好信息播放所述场景起始时间对应的场景内容。
基于本申请的另一方面，还提供了一种流媒体视频生成方法，该方法包括：
生成设备编辑生成流媒体视频的场景信息，所述场景信息包括多个场景内容所对应的场景起始时间；
所述生成设备在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，以使所述播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，在播放流媒体视频至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，以及在获取到用户选择的播放偏好信息时，根据所述播放偏好信息播放所述场景起始时间对应的场景内容，其中，所述播放偏好信息包括同时播放或顺序播放。
进一步地，所述生成设备在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，包括：
所述生成设备在编码过程中，将所述场景信息按照预设的场景信息协议封装为自定义信息块，并在所述流媒体视频的网络抽象层数据中增加补充增强信息；
所述生成设备将自定义信息块写入所述补充增强信息。
进一步地，所述自定义信息块的格式符合所述场景信息协议，至少包括场景信息总长度和场景信息，以使所述播放设备在解码获取流媒体视频的补充增强信息后，根据预设的场景信息协议，从所述补充增强信息中获取场景信息总长度，按照所述场景信息总长度，从所述补充增强信息读取自定义信息块，并从所述自定义信息块解析获得场景信息。
本申请实施例还提供了一种计算设备，该设备包括用于存储计算机程序指令的存储器和用于执行计算机程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发所述设备执行所述流媒体视频播放方法或流媒体视频生成方法。
本申请实施例还提供了一种计算机可读介质，其上存储有计算机程序指令，所述计算机可读指令可被处理器执行以实现所述流媒体视频播放方法或流媒体视频生成方法。
相较于现有技术，本申请的一些实施例提供的一种流媒体视频播放方案中，播放设备可以获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，由于所述场景信息中至少包括了多个场景内容所对应的场景起始时间，因此在所述流媒体视频播放至场景起始时间时，播放设备可以根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，使得用户可以根据提示的引导选择顺序播放或者同时播放等不同播放偏好，并且在获取到播放偏好信息时，同时播放或者按照选择的顺序播放所述场景起始时间对应的场景内容，由此实现视频内容呈现形式的多样性，满足不同用户对同一视频内容的不同观看需求。
此外，本申请的一些实施例还提供了一种流媒体视频生成方案，该方案中可以在流媒体视频编码之前，预先生成设备编辑生成流媒体视频的场景信息，并在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，由于场景信息包括多个场景内容所对应的场景起始时间，因此播放设备可以在解码播放的过程中从所述补充增强信息中解析获得场景信息，从而实现前述的流媒体视频播放，实现视频内容呈现形式的多样性，满足不同用户对同一视频内容的不同观看需求。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
图1为传统的视频播放流程图；
图2为本申请实施例提供了一种流媒体视频播放方法的处理流程图；
图3为本申请实施例中解析获取场景信息的处理过程示意图；
图4为本申请实施例提供的一种用于获取输入偏好信息的操作入口的示意图；
图5为本申请实施例同时播放多个场景内容时的播放界面示意图；
图6为本申请实施例提供的一种流媒体视频生成方法的处理流程图；
图7为采用申请实施例提供的方案实现流媒体视频的发布以及点播时的交互流程图；
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在本申请一个典型的配置中，终端、服务网络的设备均包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体，可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
图2示出了本申请实施例提供了一种流媒体视频播放方法的处理流程，该方法可以在播放设备端实现，至少包括了如下处理步骤：
步骤S201，播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，所述场景信息至少包括多个场景内容所对应的场景起始时间。
其中，所述播放设备可以是交互装置以及数据处理装置的设备，交互装置用于向用户显示视频的播放界面以及获取用户向设备输入的信息，而处理装置用于对获取到的相关数据进行处理并控制设备执行相应的处理。例如，所述播放设备可以的具体实现可以包括但不限于计算机、手机、平板电脑、智能穿戴设备等各类用户终端。
在流媒体视频的播放过程中，播放设备可以从流媒体服务器以数据流的形式接收关于流媒体视频的数据，并实时对这些数据进行解码获得可以播放的视频内容，而后在播放界面中向用户播放，由此实现视频的在线观看。例如，用户在使用播放设备打开视频播放应用后，可以在视频播放应用中点播需要观看的视频，播放设备可以根据用户的点播操作由流媒体服务器中请求获取用户点播的流媒体视频。
在流媒体视频常用的编解码标准(如H.264)中，视频的相关数据可以分为两个层面，即视频编码层(Video Coding Layer，VCL)数据和网络抽象层(Network AbstractionLayer，NAL)数据，视频编码层数据用于表示有效视频数据的内容，网络抽象层数据用于格式化视频编码层数据并提供头信息，以保证数据适合各种信道和存储介质上的传输。
其中，视频编码层数据中可以添加补充增强信息(Supplemental EnhancementInformation，SEI)，以用于传递一些额外的信息，例如编码器参数、视频版权信息、摄像头参数等。而在本申请实施例的方案中，是将场景信息以自定义的协议格式写入到补充增强信息中，使得播放设备在解码过程中即可按照约定的协议格式解析出后续播放时需要使用到的场景信息，从而实现播放过程中视频内容呈现形式的多样性。由此，在本实施例中，可以通过如下的方式解析获得需要场景信息：首先，播放设备在接收流媒体视频时，对流媒体视频的网络抽象层数据进行解码，获得补充增强信息，然后再根据预设的场景信息协议，从所述补充增强信息中的自定义信息块解析获得场景信息。
其中，自定义信息块的格式符合本申请实施例方案中自定义的场景信息协议，可以至少包括场景信息总长度和场景信息。以H.264视频编码标准中的一个网络抽象层单元(NAL unit)为例，可以包括如下的内容：00 0000 01 06 05FF xx xx xx xx……，该NALunit即为播放设备可以获取到的流媒体视频的网络抽象层数据。其中，“00 00 00 01”为H.264中的NAL unit分隔符，“06”用于表示NAL unit的类型是SEI类型，“05”用于表示SEI中的内容是自定义的数据，即本申请实施例中符合自定义协议格式的自定义信息块，“FF”表示自定义信息块的长度为255字节，最大取值为255，可以根据实际长度填写，而“xx xx xxxx……”则是场景信息按照自定义的场景信息协议的格式所封装的场景信息的具体内容。
由此，播放设备在根据预设的场景信息协议从所述补充增强信息中的自定义信息块解析获得场景信息时，可以先根据预设的场景信息协议，从所述补充增强信息中获取场景信息总长度，然后按照所述场景信息总长度，从所述补充增强信息读取自定义信息块，并从所述自定义信息块解析获得场景信息。
对于包含上述网络抽象层数据的流媒体视频为例，解析获取场景信息的处理过程可以包括如图3所示的步骤：
步骤S301，解码器开始解码。
步骤S302，读取网络抽象层单元的类型；
步骤S303，判断类型的标识是否等于06，若为是，表示是网络抽象层单元中的内容是补充增强信息，继续执行下一步；
步骤S304，读取后一个字节的内容；
步骤S305，判断后一个字节的内容是否等于05，若为是，表示后续内容的自定义信息块。
步骤S306，继续读取后一个字节的内容，根据该字节的值，获得场景信息的总长度；
步骤S307，根据场景信息的总长度，读取相应数量的数据，并按照约定的场景信息协议解析出从读取的数据中解析出场景信息。例如，若步骤S306中读取的内容为“FA”，则表示场景信息的总长度为250字节，此时会继续向后读取250字节的数据，通过解析这些数据即可获得场景信息。
步骤S202，所述播放设备在所述流媒体视频播放至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息。
步骤S203，所述播放设备在获取到用户选择的播放偏好信息为顺序播放时，在播放界面中按照用户选择的顺序播放所述场景起始时间对应的场景内容。
由于所述场景信息至少包括多个场景内容所对应的场景起始时间，因此在解析获得场景信息之后，播放设备可以判断当前播放的流媒体视频是否已经播放至各个场景内容所对应的场景起始时间，并确定已播放至任意一个或多个场景内容所对应的场景起始时间时，提示用户选择播放偏好信息。
例如，本申请的一些实施例中的一种场景信息协议的格式可以定义如下：4Bytes+1Bytes+4Bytes+4Bytes+8Bytes+4Bytes+4Bytes+8Bytes+……4Bytes+4Bytes+8Bytes(协议总长度+场景个数+场景1起始时间+场景1时长+场景1关键字+……场景n-1起始时间+场景n-1时长+场景n-1关键字+场景n起始时间+场景n时长+场景n关键字)。其中，前4个字节的内容是协议总长度，后续一个字节的内容是场景内容的个数，后续每组4个字节+4个字节+8个字节的组合的内容分别是该流媒体视频中包含的一个场景的场景起始时间、场景时长和场景关键字。
对于采用该场景信息协议的场景信息，播放设备检测当前播放的流媒体视频的播放时间，与从场景信息中读取到的场景起始时间进行比较判断，若所述播放时间到达场景起始时间，则在播放界面中显示用于输入播放偏好信息的操作入口，然后在检测到用户基于所述操作入口输入的播放偏好信息时，确定播放偏好信息为同时播放或顺序播放。
例如，对于场景内容1、2、3这三个场景内容，其对应场景起始时间分别为上述的场景1起始时间、场景2起始时间和场景3起始时间。若上述场景起始时间均为00:01:00，播放设备可以检测当前播放的流媒体视频的播放时间时，若当前的播放时间同样达到了00:01:00，则可以在播放界面中显示用于输入播放偏好信息的操作入口。
其中，所述操作入口可以根据实际场景的需求设定为任意可以接受用户输入操作的交互组件，例如输入框、按钮等。图4示出了本申请实施例提供的一种操作入口的示意图，包括信息提示区域410和偏好输入区域420，其中，信息提示区域410中用于显示当前的场景起始时间所对应的场景内容，即场景内容1、2和3，为了使得用户在选择时可以具有一定的参考信息，可以调取对应的场景时长和场景关键字显示于各个场景内容的附近，提供用户了解各个场景内容的相关细节。例如，本申请的一些实施例中可以将各个场景内容中的人物、地点作为场景关键字，由此信息提示区域410中显示的内容分别如下：
场景内容1，时长：50s，关键字：地点1a，人物1b；
场景内容2，时长：61s，关键字：地点2a，人物2b；
场景内容3，时长：50s，关键字：地点3a，人物3b。
而偏好输入区域420用于获取用户输入的播放偏好信息，例如可以包括一个用于获取顺序播放的播放偏好信息以及具体顺序的输入框421，以及一个用于获取同时播放的播放偏好信息的按钮422。若用户希望依次顺序观看场景内容3、场景内容2、场景内容1，则可以在输入框421中输入按顺序输入3,2,1，由此播放设备可以获取到用户的播放偏好信息为顺序播放，且具体顺序为3→2→1。当播放设备获取到用户选择的播放偏好信息为顺序播放时，可以在播放界面中按照用户选择的顺序播放所述场景起始时间对应的场景内容，即先播放50s的场景内容1，播放完成后再播放61s的场景内容2，然后再播放50s的场景内容3。
若用户希望同时观看场景内容1、2、3，则可以点击按钮422，由此播放设备可以获取到用户的播放偏好信息为同时播放。当播放设备获取到用户选择的播放偏好信息序为同时播放时，可以在播放界面中显示多个子画面，子画面的数量与需要同时播放的场景内容的数量一致。例如，本实施例中同时播放的场景内容的数量为三个，则可以在播放界面中显示三个子画面，并在每个子画面中播放所述场景起始时间对应的一个场景内容。例如，图5即为同时播放时播放界面的示意图，其中包括三个子画面510、520和530，分别用于播放场景内容1、2、3。
此外，若用户在预设时间内未通过操作入口输入播放偏好信息，由此播放设备可能会出现无法在预设时间内获取到用户选择的播放偏好信息的情况。此时，可以根据默认的播放偏好信息播放所述场景起始时间对应的场景内容。其中，默认的播放偏好信息可以由观看的用户或者视频的制作者预先设定，若默认的播放偏好信息为同时播放，则可以采用前述的方式，显示多个子画面并在子画面中同时播放该场景起始时间对应的所有场景内容，若默认的播放偏好为顺序播放，则可以按照默认的顺序逐一播放对应的各个场景内容即可。
为了获得可供实现前述播放方法的流媒体视频，本申请的另一些实施例中还提供一种流媒体视频生成方法，该方法至少包括如图6所示的处理步骤：
步骤S601，生成设备编辑生成流媒体视频的场景信息，所述场景信息包括多个场景内容所对应的场景起始时间。
步骤S602，所述生成设备在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，使得播放设备在获取到完成编码的流媒体视频后可以采用前述的播放方法进行播放，实现视频内容呈现形式的多样性，满足不同用户对同一视频内容的不同观看需求。
所述生成设备在编码过程中，可以先将所述场景信息按照预设的场景信息协议封装为自定义信息块，并在所述流媒体视频的网络抽象层数据中增加补充增强信息，然后将自定义信息块写入所述补充增强信息。
其中，所述自定义信息块的格式符合所述场景信息协议，至少包括场景信息总长度和场景信息，以使所述播放设备在解码获取流媒体视频的补充增强信息后，根据预设的场景信息协议，从所述补充增强信息中获取场景信息总长度，按照所述场景信息总长度，从所述补充增强信息读取自定义信息块，并从所述自定义信息块解析获得场景信息。
图7示出了采用申请实施例提供的方案实现流媒体视频的发布以及点播时的交互流程，由生成设备实现流媒体视频的发布，并由播放设备实现流媒体视频的点播，整个过程包括以下的步骤：
步骤S701，使用各类设备中的应用程序进行拍摄录制，或者对已有的多媒体文件进行编辑，获得视频内容。
步骤S702，根据视频内容中，找出其中出现多个场景内容的时间点，作为该组场景内容的场景起始时间，并确定各个场景内容的时长和关键字。
步骤S703，对视频内容进行H.264编码的过程中，将场景起始时间、时长、关键字等信息按照场景信息协议的格式封装成自定义信息块。
步骤S704，在NAL单元中添加SEI，并将自定义信息块写入到SEI中。
步骤S705，获得一个包含场景信息的视频文件后，将视频文件发布到流媒体服务器中，完成流媒体视频的发布。
步骤S706，根据用户的点播操作从流媒体服务器中请求被点播的流媒体视频。
步骤S707，在解码过程中，解析NAL单元中的SEI。
步骤S708，判断SEI中是否包含自定义信息块，如果存在自定义信息块，则执行步骤S709，如果不存在自定义信息块，则说明该视频是普通视频，采用传统的方式正常播放即可。
步骤S709，根据场景信息协议解从自定义信息块中解析出场景信息。
步骤S710，根据场景信息，在播放过程中引导用户选择播放偏好信息，如多画面同时播放或者是顺序播放。
步骤S711，在播放至场景起始时间时，判断用户选择的播放偏好信息是否为同时播放，若为是，则执行步骤S712，若为否，则执行步骤S713。
步骤S712，在播放界面中显示多个子画面，同时播放多个场景内容，直至播放结束或下一场景起始时间时重新判断。
步骤S713，判断用户选择的偏好信息是否为顺序播放，若为是，若为是，则执行步骤S714，若为否，则执行步骤S715。
步骤S714，在播放界面中按照用户选择的顺序依次播放多个场景内容，直至播放结束或下一场景起始时间时重新判断。
步骤S715，在播放界面中按照默认的播放偏好信息播放多个场景内容，直至播放结束或下一场景起始时间时重新判断。
此外，本申请实施例还提供了一种计算设备，该设备包括用于存储计算机程序指令的存储器和用于执行计算机程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发所述设备执行前述的流媒体视频播放方法或流媒体视频生成方法。
特别地，本申请实施例中的方法和/或实施例可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在该计算机程序被处理单元执行时，执行本申请的方法中限定的上述功能。
需要说明的是，本申请所述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中，计算机可读介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
而在本申请中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图或框图示出了按照本申请各种实施例的设备、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的针对硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个计算机程序指令，所述计算机可读指令可被处理器执行以实现前述本申请的多个实施例的方法和/或技术方案。
需要注意的是，本申请可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一些实施例中，本申请的软件程序可以通过处理器执行以实现上文步骤或功能。同样地，本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本申请的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。
对于本领域技术人员而言，显然本申请不限于上述示范性实施例的细节，而且在不背离本申请的精神或基本特征的情况下，能够以其他的具体形式实现本申请。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本申请的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。
Claims (11)
1.一种流媒体视频播放方法，其中，该方法包括：
播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，其中，所述场景信息包括多个场景内容所对应的场景起始时间；
所述播放设备在所述流媒体视频播放至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，所述播放偏好信息包括同时播放或顺序播放；
所述播放设备在获取到用户选择的播放偏好信息时，根据所述播放偏好信息播放所述场景起始时间对应的场景内容。
2.根据权利要求1所述的方法，其中，播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，包括：
播放设备在接收流媒体视频时，对流媒体视频的网络抽象层数据进行解码，获得补充增强信息；
所述播放设备根据预设的场景信息协议，从所述补充增强信息中的自定义信息块解析获得场景信息。
3.根据权利要求2所述的方法，其中，所述自定义信息块的格式符合所述场景信息协议，至少包括场景信息总长度和场景信息；
所述播放设备根据预设的场景信息协议，从所述补充增强信息中的自定义信息块解析获得场景信息，包括：
所述播放设备根据预设的场景信息协议，从所述补充增强信息中获取场景信息总长度；
所述播放设备按照所述场景信息总长度，从所述补充增强信息读取自定义信息块，并从所述自定义信息块解析获得场景信息。
4.根据权利要求1所述的方法，其中，所述播放设备在所述流媒体视频播放至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，包括：
所述播放设备检测当前播放的流媒体视频的播放时间，若所述播放时间到达场景起始时间，则在播放界面中显示用于输入播放偏好信息的操作入口；
所述播放设备在检测到用户基于所述操作入口输入的播放偏好信息时，确定播放偏好信息为同时播放或顺序播放。
5.根据权利要求1所述的方法，其中，所述播放设备在获取到用户选择的播放偏好信息时，根据所述播放偏好信息播放所述场景起始时间对应的场景内容，包括：
所述播放设备在获取到用户选择的播放偏好信息序为同时播放时，在播放界面中显示多个子画面，并在每个子画面中播放所述场景起始时间对应的一个场景内容；
所述播放设备在获取到用户选择的播放偏好信息为顺序播放时，在播放界面中按照用户选择的顺序播放所述场景起始时间对应的场景内容。
6.根据权利要求1所述的方法，其中，所述方法还包括：
所述播放设备在预设时间内未获取到用户选择的播放偏好信息时，根据默认的播放偏好信息播放所述场景起始时间对应的场景内容。
7.一种流媒体视频生成方法，其中，该方法包括：
生成设备编辑生成流媒体视频的场景信息，所述场景信息包括多个场景内容所对应的场景起始时间；
所述生成设备在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，以使所述播放设备解码获取流媒体视频的补充增强信息，并从所述补充增强信息中解析获得场景信息，在播放流媒体视频至场景起始时间时，根据所述场景信息提示用户选择所述场景起始时间对应的场景内容的播放偏好信息，以及在获取到用户选择的播放偏好信息时，根据所述播放偏好信息播放所述场景起始时间对应的场景内容，其中，所述播放偏好信息包括同时播放或顺序播放。
8.根据权利要求7所述的方法，其中，所述生成设备在编码过程中，将所述场景信息写入流媒体视频的补充增强信息，包括：
所述生成设备在编码过程中，将所述场景信息按照预设的场景信息协议封装为自定义信息块，并在所述流媒体视频的网络抽象层数据中增加补充增强信息；
所述生成设备将自定义信息块写入所述补充增强信息。
9.根据权利要求8所述的方法，其中，所述自定义信息块的格式符合所述场景信息协议，至少包括场景信息总长度和场景信息，以使所述播放设备在解码获取流媒体视频的补充增强信息后，根据预设的场景信息协议，从所述补充增强信息中获取场景信息总长度，按照所述场景信息总长度，从所述补充增强信息读取自定义信息块，并从所述自定义信息块解析获得场景信息。
10.一种计算设备，该设备包括用于存储计算机程序指令的存储器和用于执行计算机程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发所述设备执行权利要求1至9中任一项所述的方法。
11.一种计算机可读介质，其上存储有计算机程序指令，所述计算机可读指令可被处理器执行以实现如权利要求1至9中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011349470.0A CN112312219A (zh) | 2020-11-26 | 2020-11-26 | 一种流媒体视频播放、生成方法及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011349470.0A CN112312219A (zh) | 2020-11-26 | 2020-11-26 | 一种流媒体视频播放、生成方法及设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112312219A true CN112312219A (zh) | 2021-02-02 |
Family
ID=74486883
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011349470.0A Pending CN112312219A (zh) | 2020-11-26 | 2020-11-26 | 一种流媒体视频播放、生成方法及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112312219A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114745600A (zh) * | 2022-06-10 | 2022-07-12 | 中国传媒大学 | 一种基于sei的视频标签标注方法及装置 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101127867A (zh) * | 2006-08-16 | 2008-02-20 | 任峰 | 可选择情节的视频播放方法 |
| US20080101456A1 (en) * | 2006-01-11 | 2008-05-01 | Nokia Corporation | Method for insertion and overlay of media content upon an underlying visual media |
| CN104581380A (zh) * | 2014-12-30 | 2015-04-29 | 联想(北京)有限公司 | 一种信息处理的方法及移动终端 |
| CN104618708A (zh) * | 2009-01-28 | 2015-05-13 | Lg电子株式会社 | 广播接收机及其视频数据处理方法 |
| CN105472456A (zh) * | 2015-11-27 | 2016-04-06 | 北京奇艺世纪科技有限公司 | 一种视频播放方法及装置 |
| CN106888169A (zh) * | 2017-01-06 | 2017-06-23 | 腾讯科技（深圳）有限公司 | 视频播放方法及装置 |
| US20180027298A1 (en) * | 2016-07-25 | 2018-01-25 | Google Inc. | Methods, systems, and media for facilitating interaction between viewers of a stream of content |
| CN108391171A (zh) * | 2018-02-27 | 2018-08-10 | 京东方科技集团股份有限公司 | 视频播放的控制方法及装置、终端 |
| CN111147955A (zh) * | 2019-12-31 | 2020-05-12 | 咪咕视讯科技有限公司 | 视频播放方法、服务器和计算机可读存储介质 |
-
2020
- 2020-11-26 CN CN202011349470.0A patent/CN112312219A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080101456A1 (en) * | 2006-01-11 | 2008-05-01 | Nokia Corporation | Method for insertion and overlay of media content upon an underlying visual media |
| CN101127867A (zh) * | 2006-08-16 | 2008-02-20 | 任峰 | 可选择情节的视频播放方法 |
| CN104618708A (zh) * | 2009-01-28 | 2015-05-13 | Lg电子株式会社 | 广播接收机及其视频数据处理方法 |
| CN104581380A (zh) * | 2014-12-30 | 2015-04-29 | 联想(北京)有限公司 | 一种信息处理的方法及移动终端 |
| CN105472456A (zh) * | 2015-11-27 | 2016-04-06 | 北京奇艺世纪科技有限公司 | 一种视频播放方法及装置 |
| US20180027298A1 (en) * | 2016-07-25 | 2018-01-25 | Google Inc. | Methods, systems, and media for facilitating interaction between viewers of a stream of content |
| CN106888169A (zh) * | 2017-01-06 | 2017-06-23 | 腾讯科技（深圳）有限公司 | 视频播放方法及装置 |
| CN108391171A (zh) * | 2018-02-27 | 2018-08-10 | 京东方科技集团股份有限公司 | 视频播放的控制方法及装置、终端 |
| CN111147955A (zh) * | 2019-12-31 | 2020-05-12 | 咪咕视讯科技有限公司 | 视频播放方法、服务器和计算机可读存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114745600A (zh) * | 2022-06-10 | 2022-07-12 | 中国传媒大学 | 一种基于sei的视频标签标注方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12009014B2 (en) | Generation and use of user-selected scenes playlist from distributed digital content | |
| US8701008B2 (en) | Systems and methods for sharing multimedia editing projects | |
| US8819559B2 (en) | Systems and methods for sharing multimedia editing projects | |
| JP4304108B2 (ja) | メタデータ配信装置、動画再生装置および動画再生システム | |
| US8799757B2 (en) | Synchronization aspects of interactive multimedia presentation management | |
| US7721308B2 (en) | Synchronization aspects of interactive multimedia presentation management | |
| US8504591B2 (en) | Data generating device and data generating method, and data processing device and data processing method | |
| US20030035648A1 (en) | Navigation for MPEG streams | |
| US20190104325A1 (en) | Event streaming with added content and context | |
| CN109348252A (zh) | 视频播放方法、视频传输方法、装置、设备及存储介质 | |
| CN111800668B (zh) | 弹幕的处理方法、装置、设备及存储介质 | |
| WO2022116770A1 (zh) | 一种流媒体视频播放、生成方法及设备 | |
| US20150039778A1 (en) | Transition points in an image sequence | |
| CN108124170A (zh) | 一种视频播放方法、装置和终端设备 | |
| JP5158727B2 (ja) | ２ｄ映像及び３ｄ立体映像を含む映像ファイルの生成及び再生を行うためのコンピュータ読み取り可能な記録媒体及び方法並びに装置 | |
| CN112312219A (zh) | 一种流媒体视频播放、生成方法及设备 | |
| JP5043711B2 (ja) | ビデオ評価装置及び方法 | |
| US20200233543A1 (en) | Display apparatus and control method thereof | |
| WO2020182524A1 (en) | Method, device, and computer program for signaling available portions of encapsulated media content | |
| CN116095388A (zh) | 视频生成方法、视频播放方法及相关设备 | |
| CN113891108A (zh) | 字幕优化方法、装置、电子设备和存储介质 | |
| KR102101923B1 (ko) | 컨텐츠 생성 장치 및 방법 | |
| CN108614656B (zh) | 信息处理方法、介质、装置和计算设备 | |
| CN115552904A (zh) | 信息处理方法及编码器、解码器、存储介质设备 | |
| CN117939252A (zh) | 一种数据处理方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |