CN104683858A

CN104683858A - 一种流媒体的内容的预览方法及装置

Info

Publication number: CN104683858A
Application number: CN201510080916.7A
Authority: CN
Inventors: 陈文龙
Original assignee: Sumavision Technologies Co Ltd
Current assignee: Sumavision Technologies Co Ltd
Priority date: 2015-02-13
Filing date: 2015-02-13
Publication date: 2015-06-03
Anticipated expiration: 2035-02-13
Also published as: CN104683858B

Abstract

本发明涉及流媒体的内容的预览方法及装置。所述方法包括：接收终端发送来的、用于预览流媒体的内容的预览请求，所述预览请求中包括所述流媒体的资源标识和用于进行预览的预览时间点；根据所述资源标识确定所述资源标识对应的流媒体文件；以所述预览时间点为基准，从所述流媒体文件中抽取预设帧数的图像；对抽取的图像进行处理后，将处理结果发送给所述终端，并由所述终端进行显示。通过本发明提供的方法，能够节约流媒体服务器的存储资源，提高提供预览服务的速度。

Description

一种流媒体的内容的预览方法及装置

技术领域

本发明涉及流媒体技术领域，尤其涉及一种流媒体的内容的预览的方法及装置。

背景技术

在目前的流媒体领域中，大部分的流媒体资源在服务器端存储，并由终端进行播放。终端用户在播放并观看流媒体期间，可能想预览流媒体的内容，从流媒体的时间轴的某个时间点开始播放流媒体。具体的，用户可以先预览某个时间点或该时间点相邻时间段内的帧图像，然后选择自己感兴趣的帧图像，从该帧图像对应的时间点开始播放。

通常，针对每一个流媒体，流媒体服务器从该流媒体中抽取多帧图像，并将这多帧图像缩小后存储起来，并存储每帧缩小的图像所对应的播放时间点。当终端请求预览流媒体的内容时，流媒体服务器根据预览请求中的预览时间点(即预览时间点)，和缩小后的图像对应的播放时间点，从存储的多帧缩小后的帧图像中获取与该预览时间点对应的至少两帧图像，然后发送给终端显示，从而实现用户对流媒体的内容的预览。

然而，上述方法中，用于预览流媒体的内容的图像都是额外存储在流媒体服务器中的，占用了流媒体服务器的存储资源。

发明内容

本发明的目的是提供一种流媒体的内容的预览方法及装置，以克服相关技术中用于预览流媒体的内容的图像占用了流媒体服务器的存储资源、造成存储资源浪费的问题。

一方面，本发明提供一种流媒体的内容的预览方法，所述方法包括：

接收终端发送来的、用于预览流媒体的内容的预览请求，所述预览请求中包括所述流媒体的资源标识和用于进行预览的预览时间点；

根据所述资源标识确定所述资源标识对应的流媒体文件；

以所述预览时间点为基准，从所述流媒体文件中抽取预设帧数的图像；

对抽取的图像进行处理后，将处理结果发送给所述终端，并由所述终端进行显示。

另一方面，本发明提供一种流媒体的内容的预览装置，所述装置包括：

接收模块，用于接收终端发送来的、用于预览流媒体的内容的预览请求，所述预览请求中包括所述流媒体的资源标识和用于进行预览的预览时间点；

文件确定模块，用于根据所述资源标识确定所述资源标识对应的流媒体文件；

抽取模块，用于以所述预览时间点为基准，从所述流媒体文件中抽取预设帧数的图像；

发送处理模块，用于对抽取的图像进行处理后，将处理结果发送给所述终端，并由所述终端进行显示。

本发明至少具有以下有益效果：首先，为了节约流媒体服务器的存储资源，提出一种流媒体的内容的预览方法。在该方法中，在用户请求预览流媒体的内容时，根据预览请求，从流媒体文件中抽取用于预览流媒体内容的图像，然后发送给终端进行显示。从而使得流媒体服务器中不再存储用于预览流媒体内容的图像，从而能够节约流媒体服务器的存储资源。其次，在本发明实施例中，从倍速文件中抽取图像，由于倍速文件是一个文件，在存储介质中数据连续，因此从倍速文件中读取数据的速度较高，由此使得本发明实施例能够及时快速的将用于预览流媒体的内容的帧图像反馈给终端显示。因而，相对现有技术，本发明实施例提供的流媒体的内容的预览方法的预览速度较高。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

图1为本发明实施例中流媒体的内容的预览方法的示例性流程图之一；

图2为本发明实施例中流媒体的内容的预览方法的示例性流程图之二；

图3为本发明实施例中流媒体的内容的预览装置方法的示意图之一；

图4为本发明实施例中流媒体的内容的预览装置方法的示意图之二。

具体实施方式

以下结合附图对本发明的实施例进行说明，应当理解，此处所描述的实施例仅用于说明和解释本发明，并不用于限定本发明。

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

在流媒体服务器中，对于一个流媒体，可能对应有多个流媒体文件，该流媒体文件可以是流媒体的不同倍速下的倍速文件。其中倍速文件均是用于播放流媒体的文件。例如，正常播放速度可以称为1倍速，用1X表示1倍速，流媒体的源文件即1倍速文件。当快速播放流媒体内容时，则使用的是流媒体的高倍数文件，例如2倍速文件(也可用2X倍速文件表示)，且2倍速文件的播放时长是源文件的一半。以此类推，4X倍速的倍速文件的播放时长是源文件的四分之一、16X倍速的倍速文件的播放时长是源文件的十六分之一、32X倍速的倍速文件的播放时长是源文件的三十二分之一等等，当然，还可以有其它倍速的倍速文件。

由此可见，在流媒体服务器中存储有很多冗余的信息，例如同一帧图像，可能在各倍速文件中都存在。而这时，为了满足预览流媒体的内容的需要，现有技术中还存储了多个缩小的但内容相同的用于预览流媒体内容的图像，由此则进一步产生冗余信息，浪费服务器的存储资源。

综上，在本发明实施例中，首先，为了节约流媒体服务器的存储资源，提出一种流媒体的内容的预览方法。在该方法中，在用户请求预览流媒体的内容时，根据预览请求，从流媒体文件中抽取用于预览流媒体内容的图像，然后发送给终端进行显示。从而使得流媒体服务器中不再存储用于预览流媒体内容的图像，从而能够节约流媒体服务器的存储资源。

其次，现有技术中由于用于预览流媒体内容的图像是多个独立的文件，这些独立的文件之间在存储后，在存储介质中，同一文件的数据连续，而不同文件的数据可能不连续。那么，当流媒体服务器从存储介质中读取多帧用于预览流媒体内容的图像时，不仅需要消耗额外的计算资源去查找不同的图像，由于不同的图像的数据不连续还导致读取速度慢。在本发明实施例中，从倍速文件中抽取图像，由于倍速文件是一个文件，在存储介质中数据连续，因此从倍速文件中读取数据的速度较高，由此使得本发明实施例能够及时快速的将用于预览流媒体的内容的帧图像反馈给终端显示。因而，相对现有技术，本发明实施例提供的流媒体的内容的预览方法的预览速度较高。

再次，在本发明实施例中，通过在流媒体服务器对用于预览流媒体的内容的图像进行处理，例如该处理操作是降低图像分辨率，从而能够减少传输的数据量，节约传输资源；或该处理操作时缩小图像后将其嵌入到具有交互功能的网页模板中，使得客户端接收到的是具有交互功能的网页，客户端可以直接显示该网页，而无需客户端对用于预览的图像进行处理和制作网页。

此外，本发明实施例中，还可以针对每一帧用于预览的帧图像，将从该帧用于预览的图像开始播放的、预设时长内的流媒体数据发送给客户端，使得用户在想从某帧图像开始播放时，客户端不用再向服务器请求流媒体数据，客户端可以及时快速的播放流媒体供用户观看。

下面，通过几个简单的实施例，对上述内容进行详细说明。

实施例一

如图1所示，为本发明实施例中流媒体的内容的预览方法的示例性流程图，该方法包括以下步骤：

步骤101：接收终端发送来的、用于预览流媒体的内容的预览请求，所述预览请求中包括所述流媒体的资源标识和用于进行预览的预览时间点。

其中，利用用户在观看流媒体文件时，从流媒体文件的时间轴上选择一时间点，那么，选择的这一时间点即为预览时间点。

步骤102：根据所述资源标识确定所述资源标识对应的流媒体文件。

步骤103：以所述预览时间点为基准，从所述流媒体文件中抽取预设帧数的图像。

步骤104：对抽取的图像进行处理后，将处理结果发送给所述终端，并由所述终端进行显示。

下面，对上述各步骤进行详细说明:

在步骤102中：

其中，所述流媒体文件为所述流媒体的倍速文件。较佳的，所述倍速文件为高于预设倍速的倍速文件。例如预设倍速为16X(16倍速)时，高于预设倍速的倍速文件例如是32X(32倍速)的倍速文件。

其中，在一个实施例中，可以根据以下方法生成倍速文件，该方法包括步骤A1-步骤A2：

步骤A1：针对每一个流媒体，生成所述流媒体的预设倍速下的初始倍速文件；所述初始倍速文件中包括至少一个GOP((Group of Pictures，画面组)。

其中，较佳的，以流媒体的源文件为基础，根据流媒体的源文件生成该流媒体的预设倍速下的初始倍速文件，例如可以采用对源文件重新进行编解码，生成初始倍速文件。当然，较佳的，为了能够节约设备的计算资源，可以从根据以下方法生成所述流媒体的预设倍速下的初始倍速文件：针对每一个预设倍速，从所述流媒体的源文件中抽取第二预设帧数的图像，组成该预设倍速下的初始倍速文件。需要说明的是，也可以采用现有技术中的其他方法生成初始倍速文件，本发明对此不做限定。

步骤A2：针对每一个初始倍速文件的每一个GOP，在该GOP的头部添加正向倍速播放信息，并在该GOP的尾部添加反向倍速播放信息。

其中，所述正向倍速播放信息包括：正向倍速播放时的参考时钟PCR、解码时间DTS、每一帧图像的播放时间PTS；

所述反向倍速播放信息包括：反向倍速播放时的参考时钟PCR、解码时间DTS、每一帧图像的播放时间PTS。

以上描述的生成倍速文件的方法，使一个倍速文件中既包括正向倍速播放信息和反向倍速播放信息，从而使得抽取帧图像时可以根据正向倍速播放信息抽取，也可以根据反向倍速播放信息抽取。此外，由于倍速文件是一个文件，存储的数据是连续的，故而相对于从不连续的存储空间读取数据，可以快速的读取帧图像。提高读取帧图像的速度。

其中，在一个实时流中，可以根据以下方法抽取第一预设帧数的图像：

1)、第一预设帧数为N+1((N为正整数)，则从预览时间点对应的帧图像开始(包括该帧图像)，连续抽取N+1帧I帧图像。

2)、从预览时间点对应的图像开始(包括该帧图像)，每间隔预设播放时长或者每间隔第三预设帧数后抽取1帧图像；

3)以预览时间点对应的图像为中心，前后各抽取连续的M(M为正整数)帧图像，算上预览时间点对应的图像，要共获取第一预设帧数的帧图像。当然，前后抽取图像的帧数也可以不一致，本发明对此不做限定。

4)、以预览时间点对应的图像为中心，前后每间隔预设播放时长或者每间隔第四预设帧数后抽取1帧图像，算上预览时间点对应的图像，要共获取第一预设帧数的帧图像。当然，前后抽取的帧图像的数量也可以不一致，本发明对此不做限定。

当然，需要说明的是，当流媒体文件中不存在显示时间为预览时间点的一帧图像时，可以将显示时间与预览时间点最近的一帧图像，作为预览时间点对应的帧图像。

在步骤103中：

其中，在一个实施例中，当根据上述步骤A1-步骤A2的方法生成倍速文件后，每个倍速文件中至少包括一个GOP。为了便于根据定位时间信息确定抽取的图像的偏移位置，本发明实施例中每一个倍速文件对应一个索引信息，该索引信息中至少包括对应倍速文件的时长、码率和参考时钟PCR。

在步骤104中：

抽取的图像为用于预览流媒体的内容的图像，则对抽取的图像进行处理，可以包括降低抽取的图像的分辨率。从而相对传输降低分辨率之前前的图像，能够减少传输的数据量、节约传输资源。

此外，当降低抽取的图像的分辨率后，还可以将降低分辨率后的图像插入网页模板中形成预览网页，其中，所述预览网页具有根据预设操作执行相应响应的交互功能；然后，将包含降低分辨率后的图像的预览网页发送给所述终端。其中，预设操作包括以下操作中的一种或多种：对图像的选择操作、从选择的图像开始播放的操作和关闭预览网页的操作等。其中，对预设操作识别可以由终端完成。下面对根据预设操作执行相应响应的交互功能进行说明：

1)、当预设操作为表示对预览网页中的图像的选择操作时，对选择的图像进行突出显示，以便于用户了解选择的哪个图像。

其中，突出显示例如是：在选择的图像的四周添加边框并显示该边框、例如将选择的图像放大，使选择的帧图像大于预览网页中的其他的用于预览流媒体内容的图像；或者，当预览网页中所有的图像都有排列成一行或一列时，调整选择的图像的位置，使选择的图像的位置与其它的帧图像不在同一行或同一列中等等，任何能够突出显示选择的图像的方法均适用于本发明实施例，本发明对此不做限定。

2)、当预设操作为用于表示从选择的图像开始播放的操作时，确定选择的图像对应的播放时间点并加载流媒体数据给播放器进行播放。

3)、当预设操作为表示关闭预览网页的操作时，关闭预览网页。

本发明实施例中，由流媒体服务器辅助制作预览网页，便于终端显示，在供用户预览流媒体的内容的同时，还可以使得该预览网页具有交互功能，便于用户操作。

此外，在一个实施例中，在执行步骤104对抽取的图像进行处理后，将处理结果发送给所述终端的同时或之后，还可以针对抽取的每一帧图像，将从该帧图像对应的播放时间点开始的、预设时长内的流媒体数据发送给所述终端。这样，使得终端能够接收并存储从每一帧用于预览流媒体的内容的图像开始播放的流媒体数据，以便于用户在请求从选择的图像开始播放时，终端不必向流媒体服务器请求流媒体数据，而是直接读取流媒体数据并开始播放，能够提高播放流媒体的速度。减少终端与流媒体交互的次数，节约带宽资源。

实施例二

以从32X(32倍速)的倍速文件中抽取帧图像供用户预览为例，对本发明实施例中的流媒体的内容的预览方法进行详细说明，如图2所示，该方法包括以下步骤：

步骤201：终端检测用户对流媒体播放器执行的用户操作。

步骤202：当终端检测到的用户操作为表示请求预览流媒体内容的操作时，生成预览请求，并将该预览请求发送给流媒体服务器，其中，该预览请求中包括所述流媒体的资源标识和用于进行预览的预览时间点。

其中，表示请求预览流媒体内容的操作中包含选择预览的时间点。当终端为触摸屏时，表示请求预览流媒体内容的操作，例如是双击或长按时间轴上的时间点；当终端为不可触控的显示屏，例如CRT显示器时，表示请求预览流媒体内容的操作，例如是将光标放置在时间轴上的一时间点。当然，任何能够被检测出为包含选择预览时间点的用户操作均可用作表示请求预览流媒体内容的操作，本发明对此不做限定。

步骤203：流媒体服务器接收终端发送来的预览请求。

步骤204：流媒体服务器根据所述资源标识确定所述资源标识对应的32倍速文件。

步骤205：流媒体服务器以所述预览时间点为基准，从32倍速文件的索引信息中确定出待抽取的预设帧数的图像的各自的偏移位置。

步骤206：流媒体服务器根据确定的各帧图像的偏移位置，从32倍速文件中抽取预设帧数的图像。

步骤207：流媒体服务器降低抽取的图像的分辨率。

步骤208：流媒体服务器将降低分辨率后的图像插入网页模板中形成预览网页，其中，所述预览网页具有根据预设操作执行相应响应的交互功能。

步骤209：流媒体服务器将包含将降低分辨率后的图像的预览网页发送给所述终端，并针对抽取的每一帧图像，将从该帧图像对应的播放时间点开始的、预设时长内的流媒体数据发送给所述终端。

步骤210：终端接收流媒体服务器发送来的预览网页，并接收流媒体服务器发送来的从该帧图像对应的播放时间点开始的、预设时长内的流媒体数据。

步骤211：终端显示预览网页，并检测用户对预览网页执行的预设操作。

步骤212：终端根据用户对预览网页执行的预设操作执行相应响应。

其中，根据用户对预览网页执行的预设操作执行相应响应的方法，已经在实施例一中详细说明，在此不再赘述。

实施例三

基于相同的发明构思，本发明实施例还提供一种流媒体的内容的预览装置，如图3所示，所述装置包括：

接收模块301，用于接收终端发送来的、用于预览流媒体的内容的预览请求，所述预览请求中包括所述流媒体的资源标识和用于进行预览的预览时间点；

文件确定模块302，用于根据所述资源标识确定所述资源标识对应的流媒体文件；

抽取模块303，用于根据所述预览时间点，从所述流媒体文件中抽取预设帧数的图像，其中，所述预设帧数的图像中包括所述预览时间点对应的图像；

发送处理模块304，用于以所述预览时间点为基准，从所述流媒体文件中抽取预设帧数的图像。

其中，在一个实施例中，所述流媒体文件为所述流媒体的倍速文件。

其中，在一个实施例中，如图4所示，所述发送处理模块304，具体包括：

缩小单元305，用于降低抽取的图像的分辨率。

其中，在一个实施例中，如图4所示，所述发送处理模块304还包括

网页生成单元306，用于所述缩小单元305降低抽取的图像的分辨率之后，将降低分辨率后的图像插入网页模板中形成预览网页，其中，所述预览网页具有根据预设操作执行相应响应的交互功能；

发送单元307，用于将包含降低分辨率后的图像的预览网页发送给所述终端。

其中，在一个实施例中，如图4所示，所述装置还包括：

流媒体数据发送模块308，用于所述发送处理模块对抽取的图像进行处理后，将处理结果发送给所述终端的同时或之后，针对抽取的每一帧图像，将从该帧图像对应的播放时间点开始的、预设时长内的流媒体数据发送给所述终端。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种流媒体的内容的预览方法，其特征在于，所述方法包括：

根据所述资源标识确定所述资源标识对应的流媒体文件；

2.根据权利要求1所述的方法，其特征在于，所述流媒体文件为所述流媒体的倍速文件。

3.根据权利要求1所述的方法，其特征在于，所述对抽取的图像进行处理，具体包括：

降低抽取的图像的分辨率。

4.根据权利要求3所述的方法，其特征在于，所述降低抽取的图像的分辨率之后，所述方法还包括：

将降低分辨率后的图像插入网页模板中形成预览网页，其中，所述预览网页具有根据预设操作执行相应响应的交互功能；

所述将处理结果发送给所述终端，具体包括：

将包含降低分辨率后的图像的预览网页发送给所述终端。

5.根据权利要求1所述的方法，其特征在于，所述对抽取的图像进行处理后，将处理结果发送给所述终端的同时或之后，所述方法还包括：

针对抽取的每一帧图像，将从该帧图像对应的播放时间点开始的、预设时长内的流媒体数据发送给所述终端。

6.一种流媒体的内容的预览装置，其特征在于，所述装置包括：

7.根据权利要求6所述的装置，其特征在于，所述流媒体文件为所述流媒体的倍速文件。

8.根据权利要求7所述的装置，其特征在于，所述发送处理模块，具体包括：

缩小单元，用于降低抽取的图像的分辨率。

9.根据权利要求8所述的装置，其特征在于，所述发送处理模块还包括

网页生成单元，用于所述缩小单元降低抽取的图像的分辨率之后，将降低分辨率后的图像插入网页模板中形成预览网页，其中，所述预览网页具有根据预设操作执行相应响应的交互功能；

发送单元，用于将包含降低分辨率后的图像的预览网页发送给所述终端。

10.根据权利要求6所述的装置，其特征在于，所述装置还包括：

流媒体数据发送模块，用于所述发送处理模块对抽取的图像进行处理后，将处理结果发送给所述终端的同时或之后，针对抽取的每一帧图像，将从该帧图像对应的播放时间点开始的、预设时长内的流媒体数据发送给所述终端。