CN109714650B - 一种数据处理方法及装置 - Google Patents

Abstract

本发明公开了一种数据处理方法，所述方法包括：发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述第一区域位置信息对应的第一目标数据进行处理后的数据。同时，本发明还公开了一种数据处理装置。

Description

一种数据处理方法及装置

技术领域

本申请涉及数据处理技术，尤其涉及一种数据处理方法及装置。

背景技术

在通过流媒体协议处理流媒体数据时，通常会将流媒体数据的原始数据进行压缩存储，由于压缩后的流媒体数据的播放画面较差，用户无法看清画面中某一区域的画面，并且现有技术也不支持对用户指定区域的流媒体数据进行处理，从而导致用户体验较差。

发明内容

有鉴于此，本发明实施例期望提供一种连一种数据处理方法及装置。

为达到上述目的，本发明实施例的技术方案是这样实现的：

根据本发明实施例的一方面，提供一种数据处理方法，所述方法包括：

发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述第一区域位置信息对应的第一目标数据进行处理后的数据。

上述方案中，所述区域定位请求中还携带有时间信息；

所述第二目标数据是基于所述动作信息在所述时间信息对应的起始时间和终止时间所对应的时间段内，对所述第一目标数据进行处理后的数据。

上述方案中，所述方法还包括：

发送针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；

接收基于所述区域定位取消请求，返回响应信息，所述响应信息是根据所述第二区域位置信息和所述第一区域位置信息的匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，对所述第一目标数据进行结束处理的响应信息。

根据本发明实施例中的另一方面，提供一种数据处理方法，所述方法包括：

接收针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

基于所述第一区域位置信息，确定所述流媒体数据中与所述第一区域位置信息匹配的第一目标数据；

基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；

发送所述第二目标数据。

上述方案中，所述区域定位请求中还携带有时间信息；

所述方法还包括：

基于所述时间信息，确定用于执行所述目标数据的起始时间和终止时间；

相应地，基于所述动作信息，执行对所述第一目标数据的处理，包括：

在所述起始时间到所述终止时间这一时间段内，基于所述动作信息，执行对所述第一目标数据的处理。

上述方案中，所述方法还包括：

接收针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；

将所述第二区域位置信息与所述第一区域位置信息进行匹配；

根据匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，结束对所述第一目标数据的处理；

发送对所述第一目标数据进行结束处理的响应信息。

上述方案中，所述方法还包括：

基于所述动作信息，确定所述动作信息针对所述第一目标数据的动作执行权限；

基于所述第一目标数据和所述动作执行权限，异步响应所述区域定位请求。

上述方案中，在所述接收区域定位请求之前，所述方法还包括：

在网络流媒体协议中增加针对所述区域定位请求的扩展协议；

相应地，所述接收区域定位请求，包括：

接收基于所述扩展协议生成的所述区域定位请求。

根据本发明实施例的第三方面，提供一种数据处理装置，所述装置包括：

发送单元，用于发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

接收单元，用于接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述区域位置信息对应的第一目标数据进行处理后的数据。

根据本发明实施例的第四方面，提供一种数据处理装置，所述装置包括：

接收单元，用于接收针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

确定单元，用于基于所述第一区域位置信息，确定所述流媒体数据中与所述区域位置信息匹配的第一目标数据；

执行单元，用于基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；

发送单元，用于发送所述第二目标数据。

根据本发明实施例的第五方面，提供一种数据处理装置，所述装置包括：存储器、处理器以及存储在存储器被处理器运动的可执行程序，其特征在于，所述处理器运行所述可执行程序时执行上述数据处理方法中任一项所述的数据处理方法的步骤。

本发明所提供的一种数据处理方法和装置，通过客户端向服务端发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；并接收服务端基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是服务端基于所述动作信息对所述流媒体数据中与所述区域位置信息对应的第一目标数据进行处理后的数据。如此，能够实现客户端向服务端发送对流媒体数据中指定区域的定位请求以及服务端对流媒体数据中指定区域的数据进行处理，提高了用户体验。

附图说明

图1为本发明实施例中数据处理方法的流程示意图一；

图2为本发明实施例中数据处理方法的流程示意图二；

图3为本发明实施例中以扩展协议实现数据处理流程的示意图；

图4为本发明实施例提供的一种数据处理装置的结构组成示意图一；

图5为本发明实施例中数据处理装置的结构组成示意图二；

图6为本发明实施例中数据处理装置的结构组成示意图三。

具体实施方式

为了能够更加详尽地了解本发明的特点与技术内容，下面结合附图对本发明的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本发明。

图1为本发明实施例中数据处理方法的流程示意图一，如图1所示，所述方法包括：

步骤101，发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

本发明实施例中，该方法主要应用于具有播放流媒体数据功能的终端设备，例如该终端设备可以是台式电脑、智能手机、平板电脑、智能电视、录像机、智能跑步机等设备。

当用户通过终端设备向流媒体服务器请求播放流媒体数据时，流媒体服务器会连续并实时地向该终端设备传输该用户请求的流媒体数据。在终端设备播放流媒体数据的过程中，如果用户想要只观看该流媒体数据对应的视频画面中某一区域的视频数据时，可以在终端设备上针对该视频画面中的某个画面区域进行选取。当用户在终端设备上对该视频画面中的某个画面区域进行选取操作时，该选取操作会触发终端设备生成一个区域定位请求，并且在该区域定位请求中携带有第一区域位置信息。该第一区域位置信息具体可以是根据用户所选的画面区域在整个视频画面中的位置所确定。然后，用户还可以在该区域定位请求中针对所选的画面区域选取要执行的处理动作，以得到动作信息。例如该动作信息可以是“高清播放”、“放大2倍播放”或“慢速播放”等。并由该终端设备将携带有第一区域位置信息和动作信息的区域定位请求向流媒体服务器发送。

步骤102，接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述第一区域位置信息对应的第一目标数据进行处理后的数据。

本发明实施例中，当终端设备将区域定位请求发送给流媒体服务器后，流媒体服务器会根据区域定位请求中携带的第一区域位置信息，在当前的流媒体数据中确定与该第一区域位置信息相匹配的帧图像，并将与该第一区域位置对应的帧图像，确定为与该第一区域位置信息匹配的第一目标数据，然后，再根据该区域定位请求中携带的动作信息，执行对第一目标数据的处理，以得到第二目标数据，并将得到的第二目标数据向终端设备发送。终端设备接收到流媒体服务器发送的与该目标区域对应的第二目标数据之后，在该终端设备上播放该第二目标数据，以供用户观看。

本发明实施例中，该区域定位请求中还可以携带有时间信息。

当该区域定位请求中携带有时间信息时，该流媒体服务器接收到终端设备发送的区域定位请求后，可以基于该区域定位请求中携带的时间信息，确定用于执行该第二目标数据的起始时间和终止时间。然后，基于区域定位请求中携带的动作信息，在该起始时间到该终止时间这一时间段内执行对第一目标数据的处理，以得到第二目标数据，并将得到的第二目标数据向终端设备发送，使得终端设备接收到该第二目标数据后，播放该第二目标数据。

这里，流媒体服务器基于区域定位请求中携带的动作信息，执行对第一目标数据的处理时，可以先对在该动作信息中进行关键字提取，然后，将提取的关键字与预设关键字进行匹配得到匹配结果，当匹配结果表征提取的关键字与预设关键字匹配成功时，则根据匹配结果执行对第一目标数据的处理。这里，对第一目标数据的处理可以是对第一目标数据进行放大处理、高清处理和/或播放速度调节处理等中的至少一种。

例如，该区域定位请求中携带的动作信息是“放大2倍播放”，流媒体服务器通过在该动作信息“放大2倍播放”中进行关键字提取，得到关键字“放大”和“2倍”，通过将关键字“放大”和“2倍”与预设关键字进行匹配得到表征匹配成功的结果时，则根据该动作信息对第一目标数据对应的视频画面进行50％的放大处理。

再如，该区域定位请求中携带的动作信息是“高清播放”，流媒体服务器通过在该动作信息“高清播放”中进行关键字提取，得到关键字“高清”，通过将关键字“高清”与预设关键字进行匹配得到表征匹配成功的结果时，则根据该动作信息对第一目标数据对应的视频画面进行高清处理后播放；

再如，该区域定位请求中携带的动作信息是“放慢2倍播放”，流媒体服务器通过在该动作信息“放慢2倍播放”中进行关键字提取，得到关键字“慢”和“2倍”，通过将关键字“慢”和“2倍”与预设关键字进行匹配得到表征匹配成功的结果时，则根据该动作信息对第一目标数据对应的视频画面的播放速度进行2倍的放慢处理后播放。

本发明实施例中，终端设备在播放该第二目标数据的过程中，如果用户想要结束播放该第二目标数据时，还可以通过在终端设备上针对该第二目标数据对应的播放区域进行再次选取，来触发终端设备生成区域定位取消请求。并且在该区域定位取消请求中携带有第二区域位置信息。这里，该第二区域位置信息具体可以是根据用户所选的画面区域在整个视频画面中的位置所确定。然后，用户还可以在该区域定位取消请求中针对所选的画面区域选取要消除执行的处理动作，以得到动作取消信息。例如该动作取消信息可以是“停止高清放大”、“停止放大2倍”或“停止慢速播放”等。并由终端设备将携带有第二区域位置信息和动作取消信息的区域定位取消请求向流媒体发送。

然后，该终端设备还可以接收流媒体服务器基于该区域定位取消请求返回的响应信息。该响应信息是由流媒体服务器根据该第二区域位置信息和该第一区域位置信息的匹配结果，确定该第二区域位置信息与该第一区域位置信息匹配成功时，基于该动作取消信息，对该第一目标数据进行结束处理的响应信息。

具体地，流媒体服务器接收到该区域定位取消请求时，会将该区域定位取消请求中携带的第二区域位置信息与区域定位请求中携带的第一区域位置信息进行匹配，当匹配结果表征第二区域位置信息与第一区域位置信息匹配成功时，会基于该区域定位取消请求中携带的动作取消信息，结束对第一目标数据的处理，此时，流媒体服务器不再向终端设备发送第二目标数据，而是将对该第一目标数据进行结束处理的结果向终端设备发送。如此，可以实现针对流媒体数据进行指定区域的处理，方便用户观看到自己想看的内容。

图2为本发明实施例中数据处理方法的流程示意图二，如图2所示，该方法包括：

步骤201，接收针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

本发明实施例中，该方法主要应用于具有处理流媒体数据能力的服务端设备，例如该服务端设备可以是流媒体服务器。该流媒体服务器与普通的万维网服务器不同，两者最大的区别就是流媒体服务器支持流式音频和视频的传送，因此在客户端的媒体播放器上可以对接收到的音频和视频进行边下载边播放。而从普通的万维网服务器下载多媒体数据时，需要先将整个多媒体文件下载完毕之后，再进行播放。

具体地，在终端设备播放流媒体数据的过程中，如果用户想要只观看该流媒体数据对应的视频画面中某一区域的视频数据时，可以在终端设备上针对该视频画面中待播放的目标区域进行选取。当用户在终端设备上对该视频画面中待播放的目标区域进行选取操作时，该终端设备会接收到因选取操作所产生的区域定位请求，并由终端设备将该区域定位请求发送到服务端设备。服务端设备能够接收到终端设备针对流媒体数据发送的区域定位请求。其中，该区域定位请求中携带有第一区域位置信息和动作信息。

步骤202，基于所述第一区域位置信息，确定所述流媒体数据中与所述第一区域位置信息匹配的第一目标数据；基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；

本发明实施例中，服务端设备在接收到该区域定位请求后，会根据该区域定位请求中携带的第一区域位置信息，在流媒体数据中获取与该第一区域位置对应的帧图像，并将与该第一区域位置对应的帧图像，确定为与该第一区域位置信息匹配的第一目标数据；然后，根据该区域定位请求中携带的动作信息，执行对第一目标数据的处理，以得到第二目标数据。

例如，该动作信息可以是图像放大、高清播放、慢速播放等信息。

当该动作信息是“图像放大”时，该服务端设备则对第一目标数据的图像显示尺寸进行成比例的放大处理。如在原视频画面上放大50％。

当该动作信息是“高清播放”时，该服务端设备则对第一目标数据当前的图像分辨率进行调整，以提高原视频画面的清晰度。

当该动作信息是“慢速播放”时，该服务端设备则对第一目标数据当前的播放速度进行调整，以降低原视频画面的播放速度。

本发明实施例中，该区域定位请求中还可以携带有时间信息。

当服务端设备接收到终端设备发送的区域定位请求后，还可以基于该区域定位请求中携带的时间信息，确定用于执行该第二目标数据的起始时间和终止时间；并在该起始时间到该终止时间这一时间段内，基于区域定位请求中携带的动作信息，执行对第一目标数据的处理，以得到第二目标数据。

步骤203，发送所述第二目标数据。

本发明实施例中，当服务端设备得到第二目标数据后，会将第二目标数据实时并连续地发送给终端设备，以供用户通过终端设备能够观看到指定区域对应的流媒体数据。

本发明实施例中，终端设备在播放该第二目标数据的过程中，如果用户想要结束播放该第二目标数据时，还可以通过在终端设备上针对该第二目标数据对应的播放区域进行再次选取来生成区域定位取消请求。并由终端设备将区域定位取消请求发送给服务端设备。其中，该区域定位取消请求中携带有第二区域位置信息和动作取消信息。

当服务端设备接收到该区域定位取消请求时，会将该区域定位取消请求中携带的第二区域位置信息与区域定位请求中携带的第一区域位置信息进行匹配，当匹配结果表征第二区域位置信息与第一区域位置信息匹配成功时，基于该区域定位取消请求中携带的动作取消信息，结束对第一目标数据的处理，此时，服务端设备不再向终端设备发送第二目标数据，而是将对第一目标数据进行结束处理的结果作为响应信息发送给终端设备。

本发明实施例中，服务端设备在基于该区域定位请求中的动作信息，执行对第一目标数据的处理之前，还可以基于该动作信息，确定该动作信息针对该第一目标数据的动作执行权限；基于该第一目标数据和该动作执行权限，异步响应该区域定位请求。

这里，服务端设备基于该动作信息，确定该第一目标数据针对该动作信息的动作执行权限时，具体可以通过获取该流媒体数据支持的动作信息，将该区域定位请求中携带的动作信息与该流媒体数据支持的动作信息进行匹配，当匹配结果表征该区域定位请求中携带的动作信息与该流媒体数据支持的动作信息匹配成功时，确定该区域定位请求中携带的动作信息针对该流媒体数据中的第一目标数据具有动作执行权限，则服务端设备支持以该区域定位请求中携带的动作信息对该流媒体数据进行处理；当匹配结果表征该区域定位请求中携带的动作信息与该流媒体数据支持的动作信息匹配失败时，确定该区域定位请求中携带的动作信息针对该流媒体数据中的第一目标数据没有动作执行权限，则服务端设备不支持以该区域定位请求中携带的动作信息对该流媒体数据进行处理。

这里，异步响应该区域定位请求是指：服务端设备接收到区域定位请求时，先响应是否支持以该区域定位请求中携带的动作信息对目标区域的流媒体数据进行处理，再响应针对目标区域对应的流媒体数据的处理结果。

通过本发明实施例，可以根据用户需求，在流媒体播放过程中以独立协议或机制的形式或者以客户端设备和服务端设备的交互机制实现对视频画面中指定区域的流媒体数据进行处理。

本发明实施例中，在服务端设备接收区域定位请求之前，还可以在网络流媒体协议中增加针对该区域定位请求的扩展协议；然后，接收基于该扩展协议生成的该区域定位请求。例如，可以在实时流媒体协议(RTSP，Real Time Streaming Protocol)中扩展LOCATION类型操作。如此，可以根据用户需求，在流媒体播放过程中以协议扩展的形式实现对视频画面中指定区域的流媒体数据处理。

这里RTSP协议是一个基于文本的多媒体播放控制协议，属于应用层，RTSP协议以客户端方式工作，对流媒体提供播放、暂停、后退、前进等操作。但是，RTSP协议本身并不用于传输流媒体数据，数据的传输是通过基于下层传输协议(如RTP协议、RTCP协议)所提供的服务来完成流媒体数据的传输。

客户端要播放RTSP媒体流，就需要知道媒体源的URL，RTSP的URL格式，该格式一般如下：

请求消息：方法URI RTSP版本CR LF；消息头CR LF CR LF；消息体CR LF。

响应消息：RTSP版本状态码解释CR LF；消息头CR LF CR LF；消息体CR LF。

下面，以扩展RTSP协议为例对客户端与流媒体服务器之间的交互过程进行描述，具体如图3所示：

图3为本发明实施例中以扩展协议实现数据处理流程的示意图，如图3所示：包括RTSP客户端(Client)301和RTSP服务端(Server)302。下面，用C表示RTSP客户端，用S表示RTSP服务端对两者之间的交互过程进行描述：

C->S:OPTION request//询问S有哪些方法可用；

这里，RTSP客户端301向RTSP服务端302发送OPTION请求，以询问

RTSP服务端302有哪些方法可用；

S->C:OPTION response//S回应信息中包括提供的可用方法；

这里，RTSP服务端302向RTSP客户端301发送OPTION请求的响应信息，该响应信息中包括RTSP服务端302提供的可用方法；

C->S:DESCRIBE request//要求得到S提供的媒体初始化描述信息；

这里，RTSP客户端301向RTSP服务端302发送DESCRIBE请求，以请求获得RTSP服务端302提供的媒体初始化描述信息；

S->C:DESCRIBE response//S回应媒体初始化描述信息；

这里，RTSP服务端302向RTSP客户端301发送DESCRIBE请求的响应信息，该响应信息中携带有媒体初始化描述信息，主要是SDP信息。

这里，SDP信息中具体包括以下信息：

1)会话的名称和目的；

2)会话存活时间；

3)包含在会话中的媒体信息，包括：媒体类型(video,audio,etc)、传输协议(RTP/UDP/IP,H.320,etc)、媒体格式(H.264video,MPEG video,etc)和多播或远端(单播)地址和端口。

4)为接收媒体而需的信息(地址，端口，编码格式等)；

5)本端的带宽信息；

6)可信赖的接洽信息(Contact information)。

C->S:SETUP request//设置会话的属性，以及传输模式，提醒S建立会话；

这里，RTSP客户端301向RTSP服务端302发送SETUP请求，以请求设置会话的属性以及传输模式，提醒RTSP服务端302建立会话；

S->C:SETUP response//S建立会话，返回会话标识符，以及会话相关信息；

这里，RTSP服务端302向RTSP客户端301发送SETUP请求的响应信息，并建立会话，返回会话标识符，以及会话相关信息；

通过SETUP请求可以确定具体的媒体流如何传输，该请求必须在PLAY请求之前发送。SETUP请求包含媒体流的URL和客户端用于接收RTP数据(audio or video)的端口以及接收RTCP数据(meta information)的端口。RTSP服务端302的回复通常包含客户端请求参数的确认，并会补充缺失的部分，比如RTSP服务端302选择的发送端口。每一个媒体流在发送PLAY请求之前，都要首先通过SETUP请求来进行相应的配置。

C->S:PLAY request//C请求播放；

这里，RTSP客户端301向RTSP服务端302发送PLAY请求，以请求播放流媒体数据；

S->C:PLAY response//S回应该请求的信息S->C:发送流媒体数据；

这里，RTSP服务端302向RTSP客户端301发送PLAY请求的响应信息，并向RTSP客户端301发送流媒体数据；

RTSP客户端301通过PLAY请求来播放一个或全部媒体流，PLAY请求可以发送一次或多次，发送一次时，URL为包含所有媒体流的地址，发送多次时，每一次请求携带的URL只包含一个相应的媒体流。PLAY请求中可指定播放的range，若未指定，则从媒体流的开始播放到结束，如果媒体流在播放过程中被暂停，则可在暂停处重新启动流的播放。

C->S:TEARDOWN request//C请求关闭会话；

这里，RTSP客户端301向RTSP服务端302发送TEARDOWN请求，以请求关闭会话；

S->C:TEARDOWN response//S回应该请求；

这里，RTSP服务端302向RTSP客户端301发送TEARDOWN请求的响应信息，以回应该TEARDOWN请求。

本发明实施例需要对该RTSP协议做扩展及修改，即图3中的虚框部分，具体扩展和修改如下：

1)扩展DESCRIBE请求，请求和回复实例如下；

C->S:DESCRIBE rtsp://example.com/media.mp4RTSP/1.0

CSeq:2

这里，由于RTSP客户端301向RTSP服务端302发送了一个新的DESCRIBE请求，该新的DESCRIBE请求是基于RTP协议所提供的服务来完成的。

S->C:RTSP/1.0 200 OK

CSeq:2

这里，RTSP服务端302向RTSP客户端301发送针对新的DESCRIBE请求的响应消息。

Content-Base:rtsp://example.com/media.mp4

Content-Type:application/sdp

Content-Length:460

Action-Type:non-coding

m＝video 0 RTP/AVP 96

a＝control:streamid＝0

a＝range:npt＝0-7.741000

a＝length:npt＝7.741000

a＝rtpmap:96 MP4V-ES/5544

a＝mimetype:string；"video/MP4V-ES"

a＝AvgBitRate:integer；304018

a＝StreamName:string；"hinted video track"

m＝audio 0 RTP/AVP 97

a＝control:streamid＝1

a＝range:npt＝0-7.712000

a＝length:npt＝7.712000

a＝rtpmap:97 mpeg4-generic/32000/2

a＝mimetype:string；"audio/mpeg4-generic"

a＝AvgBitRate:integer；65790

a＝StreamName:string；"hinted audio track"

2)新增一个LOCATION类型的请求，请求和回复实例如下：

C->S:LOCATION rtsp://example.com/media.mp4 RTSP/1.0

CSeq:4

Range:npt＝5-20

Coordinate:1,1,0；

Action:non-coding

Session:12345678

S->C:RTSP/1.0 200OK

CSeq:4

Session:12345678

RTP-Info:

url＝rtsp://example.com/media.mp4/streamid＝0；seq＝9810092；rtptime＝3450012

其中，Coordinate：是指视频画面中的局部区域坐标信息；

Range：用于指明Coordinate字段的作用时间范围，若不指定，代表从当前开始一直到结束；

Action：用于定义对定位区域需要采取的动作。

3)RTSP server端扩展：

handle_location(header,**kwargs)

action_location(coordinate,action,**kwargs)

cancel_location(coordinate,action,session,**kwargs)

新增请求类型后，协议工作简单流程如下：

a)播放流程

1.C->S:OPTION request

1.S->C:OPTION response

2.C->S:DESCRIBE request

2.S->C:DESCRIBE response

3.C->S:SETUP request

3.S->C:SETUP response

4.C->S:PLAY request

4.S->C:PLAY response

5.C->S:LOCATION request

5.S->C:LOCATION response

6.C->S:TEARDOWN request

6.S->C:TEARDOWN response

b)撤销局部混合分辨率：

取消局部混合分辨率示例：

C->S:LOCATION rtsp://example.com/media.mp4 RTSP/1.0

CSeq:4

Range:npt＝5-20

Coordinate:1,1,0；

Action:！non-coding

Session:12345678。

通过本发明实施例提供的数据处理方法，能够通过协议扩展，实现客户端与流媒体服务端之间的交互，从客户端传递视频中的区域定位信息至流媒体服务端，以控制流媒体服务端对相应区域的视频做出对应处理，从而实现对视频细粒度的控制。

图4为本发明实施例提供的一种数据处理装置的结构组成示意图一，如图4所示，所述装置包括：

发送单元401，用于发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

接收单元402，用于接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述区域位置信息对应的第一目标数据进行处理后的数据。

这里，该装置具体可以是具有播放流媒体数据功能的终端播放器，例如可以是智能手机、平板电脑、台式机等。

本发明实施例中，所述区域定位请求中还携带有时间信息；所述第二目标数据还可以是基于所述动作信息在所述时间信息对应的起始时间和终止时间所对应的时间段内，对所述第一目标数据进行处理后的数据。

本发明实施例中，所述发送单元401，还用于发送针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；

所述接收单元402，还用于接收基于所述区域定位取消请求，返回响应信息，所述响应信息是根据所述第二区域位置信息和所述第一区域位置信息的匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，对所述第一目标数据进行结束处理的响应信息。

需要说明的是：上述实施例提供的数据处理装置在对指定区域的流媒体数据进行处理时，仅以上述各程序模块的划分进行举例说明，实际应用中，可以根据需要而将上述处理分配由不同的程序模块完成，即将数据处理装置的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分处理。另外，上述实施例提供的数据处理装置与上述数据处理方法实施例一属于同一构思，其具体实现过程详见方法实施例一，这里不再赘述。

图5为本发明实施例中数据处理装置的结构组成示意图二，如图5所示，所述装置包括：

接收单元501，用于接收针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；

确定单元502，用于基于所述第一区域位置信息，确定所述流媒体数据中与所述区域位置信息匹配的第一目标数据；

执行单元503，用于基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；

发送单元504，用于发送所述第二目标数据。

这里，该装置具体可以是具有处理流媒体数据能力的流媒体编码器或流媒体服务器。

本发明实施例中，所述区域定位请求中还携带有时间信息；

所述确定单元502，还用于基于所述时间信息，确定用于执行所述目标数据的起始时间和终止时间；

所述执行单元503，具体用于在所述起始时间到所述终止时间这一时间段内，基于所述动作信息，执行对所述第一目标数据的处理。

本发明实施例中，所述装置还包括：匹配单元505；

具体地，所述接收单元501，还用于接收针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；

所述匹配单元505，用于将所述第二区域位置信息与所述第一区域位置信息进行匹配；

确定单元501，还用于根据匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，结束对所述第一目标数据的处理；

所述发送单元504，还用于发送对所述第一目标数据进行结束处理的响应信息。

本发明实施例中，所述装置还包括响应单元506；

具体地，所述确定单元502，还用于基于所述动作信息，确定所述动作信息针对所述第一目标数据的动作执行权限；

所述响应单元506，用于基于所述第一目标数据和所述动作执行权限，异步响应所述区域定位请求。

本发明实施例中，所述装置还包括增加单元507；

具体地，所述增加单元507，用于在网络流媒体协议中增加针对所述区域定位请求的扩展协议；

所述接收单元501，具体用于接收基于所述扩展协议生成的所述区域定位请求。

需要说明的是：上述实施例提供的数据处理装置在对指定区域的流媒体数据进行处理时，仅以上述各程序模块的划分进行举例说明，实际应用中，可以根据需要而将上述处理分配由不同的程序模块完成，即将数据处理装置的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分处理。另外，上述实施例提供的数据处理装置与上述数据处理方法实施例二属于同一构思，其具体实现过程详见方法实施例二，这里不再赘述。

图6为本发明实施例中数据处理装置的结构组成示意图三，如图6所示，数据处理装置600可以是移动电话、计算机、数字广播终端、信息收发设备、游戏控制台、平板设备、个人数字助理、信息推送服务器、内容服务器等。图6所示的数据处理装置600包括：至少一个处理器601、存储器602、至少一个网络接口604和用户接口603。数据处理装置600中的各个组件通过总线系统605耦合在一起。可理解，总线系统605用于实现这些组件之间的连接通信。总线系统605除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图6中将各种总线都标为总线系统605。

其中，用户接口603可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。

可以理解，存储器602可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(ROM，Read Only Memory)、可编程只读存储器(PROM，Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM，Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM，Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM，ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM，Compact Disc Read-Only Memory)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM，Random AccessMemory)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(SRAM，Static Random Access Memory)、同步静态随机存取存储器(SSRAM，Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM，Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM，SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM，Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM，Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM，SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM，Direct Rambus Random Access Memory)。本发明实施例描述的存储器602旨在包括但不限于这些和任意其它适合类型的存储器。

本发明实施例中的存储器602用于存储各种类型的数据以支持数据处理装置600的操作。这些数据的示例包括：用于在数据处理装置600上操作的任何计算机程序，如操作系统6021和应用程序6022；其中，操作系统6021包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序6022可以包含各种应用程序，例如媒体播放器(Media Player)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序6022中。

上述本发明实施例揭示的方法可以应用于处理器601中，或者由处理器601实现。处理器601可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器601中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器601可以是通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器601可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法的步骤，可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中，该存储介质位于存储器602，处理器601读取存储器602中的信息，结合其硬件完成前述方法的步骤。

在示例性实施例中，数据处理装置600可以被一个或多个应用专用集成电路(ASIC，Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD，Programmable Logic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable LogicDevice)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)、通用处理器、控制器、微控制器(MCU，Micro Controller Unit)、微处理器(Microprocessor)、或其他电子元件实现，用于执行前述方法。

在一种实施例中，具体所述处理器601运行所述计算机程序时，执行：发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述第一区域位置信息对应的第一目标数据进行处理后的数据。

所述区域定位请求中还携带有时间信息；所述第二目标数据是基于所述动作信息在所述时间信息对应的起始时间和终止时间所对应的时间段内，对所述第一目标数据进行处理后的数据。

所述处理器601运行所述计算机程序时，还执行：发送针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；接收基于所述区域定位取消请求，返回响应信息，所述响应信息是根据所述第二区域位置信息和所述第一区域位置信息的匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，对所述第一目标数据进行结束处理的响应信息。

在另一实施例中，所述处理器601运行所述计算机程序时，执行：接收针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；基于所述第一区域位置信息，确定所述流媒体数据中与所述第一区域位置信息匹配的第一目标数据；基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；发送所述第二目标数据。

所述区域定位请求中还携带有时间信息；

所述处理器601运行所述计算机程序时，还执行：基于所述时间信息，确定用于执行所述目标数据的起始时间和终止时间；在所述起始时间到所述终止时间这一时间段内，基于所述动作信息，执行对所述第一目标数据的处理。

所述处理器601运行所述计算机程序时，还执行：接收针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；将所述第二区域位置信息与所述第一区域位置信息进行匹配；根据匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，结束对所述第一目标数据的处理；发送对所述第一目标数据进行结束处理的响应信息。

所述处理器601运行所述计算机程序时，还执行：基于所述动作信息，确定所述动作信息针对所述第一目标数据的动作执行权限；基于所述第一目标数据和所述动作执行权限，异步响应所述区域定位请求。

所述处理器601运行所述计算机程序时，还执行：在网络流媒体协议中增加针对所述区域定位请求的扩展协议；接收基于所述扩展协议生成的所述区域定位请求。

在示例性实施例中，本发明实施例还提供了一种计算机可读存储介质，例如包括计算机程序的存储器602，上述计算机程序可由数据处理装置600的处理器601执行，以完成前述方法所述步骤。计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、FlashMemory、磁表面存储器、光盘、或CD-ROM等存储器；也可以是包括上述存储器之一或任意组合的各种设备，如移动电话、计算机、平板设备、个人数字助理等。

一种计算机可读存储介质，其上存储有计算机程序，一种实施例中，该计算机程序被处理器运行时，执行：发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述第一区域位置信息对应的第一目标数据进行处理后的数据。

所述区域定位请求中还携带有时间信息；所述第二目标数据是基于所述动作信息在所述时间信息对应的起始时间和终止时间所对应的时间段内，对所述第一目标数据进行处理后的数据。

该计算机程序被处理器运行时，还执行：发送针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；接收基于所述区域定位取消请求，返回响应信息，所述响应信息是根据所述第二区域位置信息和所述第一区域位置信息的匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，对所述第一目标数据进行结束处理的响应信息。

在另一实施例中，该计算机程序被处理器运行时，执行：接收针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；基于所述第一区域位置信息，确定所述流媒体数据中与所述第一区域位置信息匹配的第一目标数据；基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；发送所述第二目标数据。

所述区域定位请求中还携带有时间信息；

该计算机程序被处理器运行时，执行：基于所述时间信息，确定用于执行所述目标数据的起始时间和终止时间；在所述起始时间到所述终止时间这一时间段内，基于所述动作信息，执行对所述第一目标数据的处理。

该计算机程序被处理器运行时，执行：接收针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；将所述第二区域位置信息与所述第一区域位置信息进行匹配；根据匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，结束对所述第一目标数据的处理；发送对所述第一目标数据进行结束处理的响应信息。

该计算机程序被处理器运行时，执行：基于所述动作信息，确定所述动作信息针对所述第一目标数据的动作执行权限；基于所述第一目标数据和所述动作执行权限，异步响应所述区域定位请求。

该计算机程序被处理器运行时，执行：在网络流媒体协议中增加针对所述区域定位请求的扩展协议；接收基于所述扩展协议生成的所述区域定位请求。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种数据处理方法，所述方法包括：

基于流媒体协议或流媒体扩展协议，发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；所述流媒体协议可以在流媒体播放过程中实现对视频画面中指定区域的流媒体数据进行处理；所述流媒体扩展协议为在网络流媒体协议中增加的针对所述区域定位请求的扩展协议；

接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述第一区域位置信息对应的第一目标数据进行处理后的数据。

2.根据权利要求1所述的方法，所述区域定位请求中还携带有时间信息；

所述第二目标数据是基于所述动作信息在所述时间信息对应的起始时间和终止时间所对应的时间段内，对所述第一目标数据进行处理后的数据。

3.根据权利要求1所述的方法，所述方法还包括：

发送针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；

接收基于所述区域定位取消请求，返回响应信息，所述响应信息是根据所述第二区域位置信息和所述第一区域位置信息的匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，对所述第一目标数据进行结束处理的响应信息。

4.一种数据处理方法，所述方法包括：

接收基于流媒体协议或流媒体扩展协议生成的针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；所述流媒体协议可以在流媒体播放过程中实现对视频画面中指定区域的流媒体数据进行处理；所述流媒体扩展协议为在网络流媒体协议中增加的针对所述区域定位请求的扩展协议；

基于所述第一区域位置信息，确定所述流媒体数据中与所述第一区域位置信息匹配的第一目标数据；

基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；

发送所述第二目标数据。

5.根据权利要求4所述的方法，所述区域定位请求中还携带有时间信息；

所述方法还包括：

基于所述时间信息，确定用于执行所述目标数据的起始时间和终止时间；

相应地，基于所述动作信息，执行对所述第一目标数据的处理，包括：

在所述起始时间到所述终止时间这一时间段内，基于所述动作信息，执行对所述第一目标数据的处理。

6.根据权利要求4所述的方法，所述方法还包括：

接收针对所述流媒体数据的区域定位取消请求，所述区域定位取消请求中携带有第二区域位置信息和动作取消信息；

将所述第二区域位置信息与所述第一区域位置信息进行匹配；

根据匹配结果，确定所述第二区域位置信息与所述第一区域位置信息匹配成功时，基于所述动作取消信息，结束对所述第一目标数据的处理；

发送对所述第一目标数据进行结束处理的响应信息。

7.根据权利要求4所述的方法，在所述基于所述动作信息，执行对所述第一目标数据的处理之前，所述方法还包括：

基于所述动作信息，确定所述动作信息针对所述第一目标数据的动作执行权限；

基于所述第一目标数据和所述动作执行权限，异步响应所述区域定位请求。

8.一种数据处理装置，所述装置包括：

发送单元，用于基于流媒体协议或流媒体扩展协议发送针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；所述流媒体协议可以在流媒体播放过程中实现对视频画面中指定区域的流媒体数据进行处理；所述流媒体扩展协议为在网络流媒体协议中增加的针对所述区域定位请求的扩展协议；

接收单元，用于接收基于所述第一区域位置信息和所述动作信息返回的第二目标数据，所述第二目标数据是基于所述动作信息对所述流媒体数据中与所述区域位置信息对应的第一目标数据进行处理后的数据。

9.一种数据处理装置，所述装置包括：

接收单元，用于接收基于流媒体协议或流媒体扩展协议生成的针对流媒体数据的区域定位请求，所述区域定位请求中携带有第一区域位置信息和动作信息；所述流媒体协议可以在流媒体播放过程中实现对视频画面中指定区域的流媒体数据进行处理；所述流媒体扩展协议为在网络流媒体协议中增加的针对所述区域定位请求的扩展协议；

确定单元，用于基于所述第一区域位置信息，确定所述流媒体数据中与所述区域位置信息匹配的第一目标数据；

执行单元，用于基于所述动作信息，执行对所述第一目标数据的处理，得到第二目标数据；

发送单元，用于发送所述第二目标数据。

10.一种数据处理装置，所述装置包括：存储器、处理器以及存储在存储器被处理器运动的可执行程序，其特征在于，所述处理器运行所述可执行程序时执行如权利要求1至7任一项所述的数据处理方法的步骤。

Images