CN109874026B - 数据处理方法与装置、存储介质、电子设备 - Google Patents

Abstract

本公开属于计算机技术领域，涉及一种数据处理方法及装置、计算机可读存储介质、电子设备。该方法包括：确定视频数据的图像帧，并获取位于图像帧中的功能区域的位置信息；获取功能区域的编码信息，并对编码信息和位置信息建立第一映射关系；获取图像帧的时间戳，并对时间戳与第一映射关系建立第二映射关系。本公开通过对视频直播的直播端画面中的功能区域与软件功能建立对应的映射关系的方式，使观众端可以在主播的引导下对功能区域进行触控操作，达到开启软件相应功能的效果。一方面解决了部分软件功能感知度小的问题；另一方面，为视频直播的直播端和观众端提供了一种新的互动方法，增加视频直播的趣味性，提升观众的观看体验。

Description

数据处理方法与装置、存储介质、电子设备

技术领域

本公开涉及计算机技术领域，尤其涉及一种数据处理方法与数据处理装置、计算机可读存储介质及电子设备。

背景技术

当前线上直播软件功能越来越多，而直播软件的布局空间有限。同时，基于美术美感的要求，导致很多软件功能入口较为隐蔽，使大部分普通用户和新用户无法及时感知。一方面，软件平台投入的开发无法被用户使用，开发工作徒劳；另一方面，用户无法感知软件平台的特性，会认为大多直播软件的功能并无差异，不利于存留用户。

目前，有两种常用的软件功能介绍的方法。一种是制作软件教程，将软件的各功能依次编排成文档或者网页的形式，以供用户自行查阅；另一种是在软件功能的入口处添加说明文案等。虽然这两种方法在一定程度上有其适用性，但是对于大不多直播类软件，用户一般不会花费时间阅读冗长的功能说明教程。另一方面，直播类平台经常会通过一些活动的新玩法吸引用户与主播进行互动，并且这些活动会根据直播的种类而有所不同，且一般一两周更新一次，周期较短，用户阅读教程的必要性较弱。

鉴于此，本领域亟需开发一种新的数据处理方法及装置。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种数据处理方法、数据处理装置、计算机可读存储介质及电子设备，进而至少在一定程度上克服由于相关技术的限制而导致的软件功能感知不足的问题。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本发明实施例的第一个方面，提供一种数据处理方法，应用于视频直播的直播端，所述方法包括：确定视频数据的图像帧，并获取位于所述图像帧中的功能区域的位置信息；获取所述功能区域的编码信息，并对所述编码信息和所述位置信息建立第一映射关系；获取所述图像帧的时间戳，并对所述时间戳与所述第一映射关系建立第二映射关系。

在本发明的一种示例性实施例中，在所述对所述时间戳与所述第一映射关系建立第二映射关系之后，所述方法还包括：获取与所述视频数据中的各个图像帧相对应的各个所述第二映射关系的映射关系集合；对所述视频数据与所述映射关系集合进行编码，以获取数据映射编码信息；将所述数据映射编码信息上传至服务器。

在本发明的一种示例性实施例中，在所述对所述时间戳与所述第一映射关系建立第二映射关系之后，所述方法还包括：获取与所述视频数据中的各个图像帧相对应的各个所述第二映射关系的映射关系集合；将所述视频数据和所述映射关系集合分别上传至服务器。

在本发明的一种示例性实施例中，所述将所述视频数据和所述映射关系集合分别上传至服务器，包括：判断所述图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系是否存在差异；若判定所述图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系存在差异，则将所述图像帧的时间戳对应的第二映射关系上传至服务器。

在本发明的一种示例性实施例中，所述获取位于所述图像帧中的功能区域的位置信息，包括：在所述图像帧上确定对应于功能区域的多个位置点；获取所述多个位置点的位置信息。

在本发明的一种示例性实施例中，所述获取位于所述图像帧中的功能区域的位置信息，包括：在所述图像帧上确定对应于功能区域的位置区域；获取所述位置区域的位置信息。

根据本发明实施例的第二个方面，提供一种数据处理装置，所述装置包括：信息获取模块，被配置为确定视频数据的图像帧，并获取位于所述图像帧中的功能区域的位置信息；第一映射模块，被配置为获取所述功能区域的编码信息，并对所述编码信息和所述位置信息建立第一映射关系；第二映射模块，被配置为获取所述图像帧的时间戳，并对所述时间戳与所述第一映射关系建立第二映射关系。

根据本发明实施例的第三个方面，提供一种数据处理方法，应用于视频直播的观众端，所述方法包括：确定视频数据中的图像帧，并接收作用于所述图像帧上的触控操作；获取所述图像帧的时间戳，以及触控操作作用在所述图像帧上的触控位置信息；基于第二映射关系，获取与所述时间戳对应的第一映射关系；基于所述第一映射关系，获取与所述触控位置信息对应的编码信息，并执行与所述编码信息指示的功能区域对应的功能，其中，所述第一映射关系包含所述图像帧中功能区域的编码信息与所述功能区域的位置信息之间的映射关系，所述第二映射关系包含所述图像帧的时间戳之间的映射关系。

在本发明的一种示例性实施例中，在所述确定视频数据中的图像帧，并接收作用于所述图像帧上的触控操作之前，所述方法还包括：获取所述第二映射关系的第二关系信息；将所述第二关系信息与所述视频数据保存至本地数据库。

在本发明的一种示例性实施例中，所述基于第二映射关系，获取与所述触发时间戳对应的第一映射关系，包括：判断在所述本地数据库中是否保存有与所述时间戳对应的第一映射关系；若所述本地数据库中未保存与所述时间戳对应的第一映射关系，则将所述时间戳上传至服务器，以从所述服务器处获取所述时间戳对应的第一映射关系。

根据本发明实施例的第四个方面，提供一种数据处理装置，所述装置包括：指令接收模块，被配置为确定视频数据中的图像帧，并接收作用于所述图像帧上的触控操作；指令信息模块，被配置为获取所述图像帧的时间戳，以及触控操作作用在所述图像帧上的触发位置信息；第一获取模块，被配置为基于第二映射关系，获取与所述时间戳对应的第一映射关系；第二获取模块，被配置为基于所述第一映射关系，获取与所述触控位置信息对应的编码信息，并执行与所述编码信息指示的功能区域对应的功能，其中，所述第一映射关系包含所述图像帧中功能区域的编码信息与所述功能区域的位置信息之间的映射关系，所述第二映射关系包含所述图像帧的时间戳之间的映射关系。

根据本发明实施例的第五个方面，提供一种数据处理方法，所述方法包括：获取视频数据中的图像帧的时间戳与所述图像帧上可接受指令的区域的第一映射关系；判断所述图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致；若所述图像帧的时间戳对应的第一映射关系与所述下一帧图像的时间戳对应的第一映射关系一致，则将所述图像帧和所述下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

根据本发明实施例的第六个方面，提供一种数据处理装置，所述装置包括：关系获取模块，被配置为获取视频数据中的图像帧的时间戳与所述图像帧上可接受指令的区域的第一映射关系；映射判断模块，被配置为判断所述图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致；关系整合模块，被配置为若所述图像帧的时间戳对应的第一映射关系与所述下一帧图像的时间戳对应的第一映射关系一致，则将所述图像帧和所述下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

根据本发明实施例的第七个方面，提供一种电子设备，包括：处理器和存储器；其中，存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现上述任意示例性实施例中的数据处理方法。

根据本发明实施例的第八个方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任意示例性实施例中的数据处理方法。

由上述技术方案可知，本公开示例性实施例中的数据处理方法、数据处理装置、计算机存储介质及电子设备至少具备以下优点和积极效果：

在本公开的示例性实施例提供的方法及装置中，通过对视频直播的直播端画面中的功能区域与软件功能建立对应的映射关系的方式，使观众端可以在主播的引导下对功能区域进行触控操作，达到开启软件相应功能的效果。一方面解决了部分软件功能感知度小的问题，提高观众与直播软件的软件功能的联系性及互动性；另一方面，为视频直播的直播端和观众端提供了一种新的互动方法，增加视频直播的趣味性，提升观众的观看体验。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示意性示出本公开示例性实施例中一种数据处理方法的流程示意图；

图2示意性示出本公开示例性实施例中一种获取功能区域的位置信息的方法的流程示意图；

图3示意性示出本公开示例性实施例中另一种获取功能区域的位置信息的方法的流程示意图；

图4示意性示出本公开示例性实施例中一种对第二映射关系的处理方法的流程示意图；

图5示意性示出本公开示例性实施例中另一种获对第二映射关系的处理方法的流程示意图；

图6示意性示出本公开示例性实施例中一种分别上传视频数据和第二映射关系的方法的流程示意图；

图7示意性示出本公开示例性实施例中一种数据处理装置的结构示意图；

图8示意性示出本公开示例性实施例中另一种数据处理方法的流程示意图；

图9示意性示出本公开示例性实施例中一种获取与时间戳对应的第一映射关系的方法的流程示意图；

图10示意性示出本公开示例性实施例中一种将第二映射关系保存至本地数据库的方法的流程示意图；

图11示意性示出本公开示例性实施例中另一种数据处理装置的结构示意图；

图12示意性示出本公开示例性实施例中再一种数据处理方法的流程示意图；

图13示意性示出本公开示例性实施例中再一种数据处理装置的结构示意图；

图14示意性示出本公开示例性实施例中主播端对应的数据处理方法的流程示意图；

图15示意性示出本公开示例性实施例中截取屏幕生成视频图像的应用界面示意图；

图16示意性示出本公开示例性实施例中观众端对应的数据处理方法的流程示意图；

图17示意性示出本公开示例性实施例中数据处理系统的流程示意图；

图18示意性示出本公开示例性实施例中一种用于实现数据处理方法的电子设备；

图19示意性示出本公开示例性实施例中一种用于实现数据处理方法的计算机可读存储介质。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中，提供许多具体细节从而给出对本公开的实施方式的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而省略所述特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。

本说明书中使用用语“一个”、“一”、“该”和“所述”用以表示存在一个或多个要素/组成部分/等；用语“包括”和“具有”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等；用语“第一”和“第二”等仅作为标记使用，不是对其对象的数量限制。

此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。

针对相关技术中存在的问题，本公开提出了一种数据处理方法。图1示出了数据处理方法的流程图，如图1所示，数据处理方法至少包括以下步骤：

步骤S101.确定视频数据的图像帧，并获取位于图像帧中的功能区域的位置信息。

步骤S102.获取功能区域的编码信息，并对编码信息和位置信息建立第一映射关系。

步骤S103.获取图像帧的时间戳，并对时间戳与第一映射关系建立第二映射关系。

在本公开的示例性实施例中，通过对视频直播的直播端画面中的功能区域与软件功能建立对应的映射关系的方式，使观众端可以在主播的引导下对功能区域(功能区域可以是在直播过程中由主播指定的，或者由直播端软件/直播服务器自动设置的区域)进行触控操作，达到开启软件相应功能的效果。一方面解决了部分软件功能感知度小的问题，提高观众与直播软件的软件功能的联系性及互动性；再一方面，在直播软件有限的显示布局空间中实现众多功能操作区域的同时避免了对观众端视频画面的遮挡；另一方面，为视频直播的直播端和观众端提供了一种新的互动方法，增加视频直播的趣味性，提升观众的观看体验。

下面对数据处理方法的各个步骤进行详细说明。

在步骤S101中，确定视频数据的图像帧，并获取位于图像帧中的功能区域的位置信息。

在本公开的示例性实施例中，视频数据本身是由一个个连续的图像帧组成的，一帧图像就是一幅静止的画面，连续的图像帧就形成了视频。在视频数据中，每秒钟的帧数越多，所显示的画面就会越流畅，越逼真；每秒钟的帧数越少，视频画面就会显示的不连贯，流畅度变低。举例而言，视频数据中可以由60帧图像帧组成，也可以由80帧图像帧组成，二者可以显示相同的内容，但是，视频数据的流畅度上会存在明显的差异。对视频数据的图像帧进行确定的方法可以是对视频数据进行分解，本示例性实施例对视频数据包括的图像帧的个数不做限定，举例而言，若该视频数据包括4个图像帧，则可以分解该视频数据以得到4个图像帧。除此之外，本示例性实施例对视频数据的格式也不做限定，可以是实时直播视频数据，也可以是mp4、avi、mkv、dvd、flv等格式的视频数据，也可以是其他格式的视频文件，还可以包括单通道的灰度视频数据和三通道的彩色视频数据。

为确定视频帧中的功能区域的位置，可以通过屏幕坐标系进行确定。屏幕坐标系以屏幕的左下角作为原点，以像素为单位，坐标轴向屏幕的走上方延伸，但不会超过屏幕的最大宽度和最大高度。按照功能区域在屏幕坐标系中的对应像素可以确定该图像帧中的功能区域的位置信息。其中，功能区域可以是在直播过程中由主播端选定的区域，也可以是由直播端软件或者直播服务器自动设置的，本示例性实施例对该功能区域的具体确定方式以及功能区域的形状等属性不做特殊限定。在可选的实施例中，图2示出了获取位于图像帧中的功能区域的位置信息的方法的流程示意图，如图2所示，该方法至少包括以下步骤：在步骤S201中，在图像帧上确定对应于功能区域的多个位置点。功能区域可以由多个位置点组成，可以在该图像帧中确定各个位置点。在步骤S202中，获取多个位置点的位置信息。由于这些位置点是基于屏幕坐标系建立的，可以对应屏幕坐标系的像素值确定各个位置点的位置信息以确定功能区域的位置信息。举例而言，多个位置点的位置信息分别为(1,2)、(1,3)、(2,2)和(2,3)，那么可以确定该功能区域是一个边长为1且四个点的坐标已确定的正方形，该功能区域的坐标信息是唯一且确定的，本示例性实施例对通过位置点确定功能区域的位置信息的具体方式不做特殊限定，可根据实际情况进行确定。

在可选的实施例中，如3示出了另一种获取位于图像帧中的功能区域的位置信息的方法的流程示意图，如图3所示，该方法至少包括以下步骤：在步骤S301中，在图像帧上确定对应于功能区域的位置区域。功能区域可以是一个有对应功能的区域，该区域在该图像帧的屏幕坐标系中对应有一位置区域。在步骤S302中，获取位置区域的位置信息。通过屏幕坐标系的像素值，可以确定该位置区域的位置信息。举例而言，该功能区域的位置区域的位置信息可以是(1，2，3，4)，表明该功能区域是一个以坐标(1，2)为起始点，宽为3，高为4的位置区域，该位置区域的单位为像素值。在如图2和图3所示的两个可选的实施例，可以针对不同的功能区域的设置，选择对应的功能区域的位置信息的确定方法，更具有针对性，确定的位置信息更为准确。

在步骤S102中，获取功能区域的编码信息，并对编码信息和位置信息建立第一映射关系。

在本公开的示例性实施例中，该功能区域是已经进行过功能编码的区域，可以获取该功能区域的编码信息。可以对已获得的该功能区域的位置信息和编码信息建立二者之间的第一映射关系，举例而言，该第一映射关系的形式可以是功能区域和编码信息的映射关系集合R，R的具体形式可以是如下方式：((x1,y1,width1,height1)->code1,(x2,y2,width2,height2)->code2,……)，值得说明的是，本示例性实施例对第一映射关系的具体形式不做特殊限定。

在步骤S103中，获取图像帧的时间戳，并对时间戳与第一映射关系建立第二映射关系。

在本公开的示例性实施例中，时间戳通常是一个字符序列，唯一地标识某一时刻的时间，图像帧的时间戳可以唯一的标识某一时刻的图像帧的播放时间。其中，字符序列是指由数字、字母、下划线组成的一串字符。根据步骤S101中确定视频数据的图像帧的时候，可以唯一确定的获取到该图像帧的时间戳。在步骤S102建立图像帧中的功能区域的第一映射关系之后，可以建立该图像帧的第一映射关系与时间戳之间的第二映射关系，举例而言，该第二映射关系的形式可以是时间戳与第一映射关系F，F的具体形式可以是如下方式：(timestamp->R)，本示例性实施例对第二映射关系的具体形式不做特殊限定。

在本公开的示例性实施例中，图4示出了建立第二映射关系之后的处理方法的流程示意图，如图4所示，该方法至少包括以下步骤：在步骤S401中，获取与视频数据中的各个图像帧相对应的各个第二映射关系的映射关系集合。根据步骤S101-S103可以确定各个图像帧对应的第二映射关系。视频数据中包括多个图像帧，因此也可以确定多个第二映射关系。将该视频数据中的所有第二映射关系进行集合，可以确定该视频数据的映射关系集合。在步骤S402中，对视频数据与映射关系集合进行编码，以获取数据映射编码信息。对该视频数据与映射关系二者进行编码，可以根据编码结果得到数据映射编码信息。在步骤S403中，将数据映射编码信息上传至服务器。为便于观众端获取视频数据与映射关系集合，可以将编码后得到的数据映射编码信息上传至服务器端。在本示例性实施例中，将视频数据与映射关系集合进行编码，同时上传至服务器端，可以将二者编码成数据映射编码信息，使服务器端保存的映射关系集合与视频数据之间存在唯一且确定的关系，在观众端进行解码处理的时候，更便于查询。

在本公开的另一示例性实施例中，图5示出了另一种建立第二映射关系之后的处理方法的流程示意图，如图5所示，该方法至少包括以下步骤：在步骤S501中，获取与视频数据中的各个图像帧相对应的各个第二映射关系的映射关系集合。根据步骤S101-S103可以确定各个图像帧对应的第二映射关系。视频数据中包括多个图像帧，因此也可以确定多个第二映射关系。将该视频数据中的所有第二映射关系进行集合，可以确定该视频数据的映射关系集合。在步骤S502中，将视频数据与映射关系集合分别上传至服务器。为便于观众端获取视频数据与映射关系集合，可以将视频数据与映射关系集合分别进行上传。在本公开的示例性实施例中，通过分别上传视频数据与映射关系集合可以更便于观众端对功能编码信息的查询，以更快速的完成执行对应软件功能的需求，提升了观众的用户体验。

在可选的实施例中，图6示出了分别上传视频数据与第二映射关系的方法的流程示意图，如图6所示，该方法至少包括以下步骤：在步骤S601中，判断图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系是否存在差异。由于时间戳与图像帧之间具有一一对应的关系，而各个图像帧都建立有对应的第一映射关系，因此时间戳与第一映射关系之间具有一一对应的关系。但是，由于图像帧的划分可能过于细密，会存在图像帧的时间戳对应的第一映射关系与上一图像的时间戳对应的第一映射关系之间不存在差异的情况。为便于上传且节约时间与资源，可以对图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系是否存在差异进行判断。在步骤S602中，若判定图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系存在差异，则将图像帧的时间戳对应的第二映射关系上传至服务器。若判定图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系存在差异，才上传该时间戳对应的映射关系；若判定图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系不存在差异，则可以将连续的时间戳关联的第一映射关系进行合并。举例而言，在100帧的视频数据中，从1-100帧的第一映射关系相同，则只保存一条对应的存储记录，即只给服务器上传第一帧对应的第二映射关系。在本公开的示例性实施例中，分别将视频数据与映射关系集合进行上传，并且在上传之前，可以判断这一时刻的时间戳对应的第一映射关系与上一时刻的时间戳对应的第一映射关系之间是否存在差异，只有存在差异的时候，才上传至服务器，不仅节约了上传服务器的工作量和时间，还可以节省服务器资源，是一种较为优选的上传服务器的方案。

此外，在本公开的示例性实施例中，还提供一种数据处理装置。图7示出了数据处理装置的结构示意图，如图7所示，数据处理装置700可以包括：信息获取模块701、第一映射模块702、第二映射模块703。其中：

信息获取模块701，被配置为确定视频数据的图像帧，并获取位于图像帧中的功能区域的位置信息；第一映射模块702，被配置为获取功能区域的编码信息，并对编码信息和位置信息建立第一映射关系；第二映射模块703，被配置为获取图像帧的时间戳，并对时间戳与第一映射关系建立第二映射关系。

上述数据处理装置的具体细节已经在对应的数据处理方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了数据处理装置700的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

针对相关技术中存在的问题，本公开还提出另一种数据处理方法，应用于视频直播的观众端，图8示出了该数据处理方法的流程示意图，如图8所示，该数据处理方法至少包括以下步骤：

步骤S801.确定视频数据中的图像帧，并接收作用于图像帧上的触控操作；

步骤S802.获取图像帧的时间戳，以及触控操作作用在图像帧上的触控位置信息；

步骤S803.基于第二映射关系，获取与时间戳对应的第一映射关系；

步骤S804.基于第一映射关系，获取与触控位置信息对应的编码信息，并执行与编码信息指示的功能区域对应的功能，其中，第一映射关系包含图像帧中功能区域的编码信息与功能区域的位置信息之间的映射关系，第二映射关系包含图像帧的时间戳之间的映射关系。

在本公开的示例性实施例中，通过对视频直播的直播端画面中的功能区域与软件功能建立对应的映射关系的方式，使观众端可以在主播的引导下对功能区域进行触控操作，达到开启软件相应功能的效果。一方面可以精准的捕获观众触控操作的触控位置信息，执行对应区域的软件功能，解决了部分软件功能感知度小的问题，提高观众与直播软件的软件功能的联系性及互动性；再一方面，在直播软件有限的显示布局空间中实现众多功能操作区域的同时，避免了对观众端视频画面的遮挡，提供给观众端更好的视觉效果；另一方面，为视频直播的直播端和观众端提供了一种新的互动方法，增加视频直播的趣味性，提升观众的观看体验。

下面对该数据处理方法的各个步骤进行详细说明。

在步骤S801中，确定视频数据中的图像帧，并接收作用于图像帧上的触控操作。

在本公开的一种示例性实施例中，视频数据本身是由一个个连续的图像帧组成的，一帧图像就是一幅静止的画面，连续的图像帧就形成了视频。在视频数据中，每秒钟的帧数越多，所显示的画面就会越流畅，越逼真；每秒钟的帧数越少，视频画面就会显示的不连贯，流畅度变低。举例而言，视频数据中可以由60帧图像帧组成，也可以由80帧图像帧组成，二者可以显示相同的内容，但是，视频数据的流畅度上会存在明显的差异。对视频数据的图像帧进行确定的方法可以是对视频数据进行分解，本示例性实施例对视频数据包括的图像帧的个数不做限定，举例而言，若该视频数据包括4个图像帧，则可以分解该视频数据以得到4个图像帧。除此之外，本示例性实施例对视频数据的格式也不做限定，可以是实时直播视频数据，也可以是mp4、avi、mkv、dvd、flv等格式的视频文件，也可以是其他格式的视频数据，还可以包括单通道的灰度视频数据和三通道的彩色视频数据。确定视频数据中的一个图像帧，并接收作用于该图像帧上的触控操作。该触控操作可以是点击操作、滑动操作、按压操作等，本示例性实施例对具体的触控操作不做特殊限定。

在步骤S802中，获取图像帧的时间戳，以及触控操作作用在图像帧上的触控位置信息。

在本公开的示例性实施例中，时间戳通常是一个字符序列，唯一地标识某一时刻的时间，图像帧的时间戳可以唯一的标识某一时刻的图像帧的播放时间。在确定视频数据的图像帧的时候，可以唯一确定的获取到该图像帧的时间戳。确定触控操作在图像帧中的触控位置信息可以通过屏幕坐标系进行确定。屏幕坐标系以屏幕的左下角作为原点，以像素为单位，坐标轴向屏幕的走上方延伸，但不会超过屏幕的最大宽度和最大高度。按照触控操作在屏幕坐标系中的对应像素可以确定该触控位置信息。该触控位置信息可以是多个触控点的位置信息，举例而言，获取多个位置点的位置信息以确定该触控位置信息。由于这些位置点是基于屏幕坐标系建立的，可以对应屏幕坐标系的像素值确定各个位置点的位置信息以确定触控位置信息。举例而言，多个位置点的位置信息分别为(1,2)、(1,3)、(2,2)和(2,3)，那么可以确定该触控操作的作用区域是一个边长为1且四个点的坐标已确定的正方形，该触控位置的坐标信息可以唯一确定。该触控位置信息可以是一个触控区域的位置信息，通过屏幕坐标系的像素值，可以确定该触控区域的位置信息。举例而言，该触控区域的位置信息可以是(1，2，3，4)，表明该触控区域是一个以坐标(1，2)为起始点，宽为3，高为4的位置区域，该位置区域的单位为像素值，则根据(1，2，3，4)的位置信息确定了触控位置信息，并且该触控位置信息在图像帧中是唯一确定的。

在步骤S803中，基于第二映射关系，获取与时间戳对应的第一映射关系。

在本公开的示例性实施例中，图9示出了基于第二映射关系，获取与时间戳对应的第一映射关系的方法的流程示意图，如图9所示，该方法至少包括以下步骤：在步骤S901中，判断在本地数据库中是否保存有与时间戳对应的第一映射关系。在观众端解码视频数据时，获取视频数据的时间戳之后，用该时间戳请求服务器获取第一映射关系。为了减少请求量，服务器端会将该视频数据的第二映射关系一起发送给观众端，以便于后续解码。其中，第二映射关系包含图像帧的时间戳之间的映射关系，举例而言，该第二映射关系的形式可以是时间戳与第一映射关系F(timestamp->R)。因此，观众端在解码时，会首先查询本地数据库中是否保存有与时间戳对应的第一映射关系。若本地数据库中保存有与时间戳对应的第一映射关系，则直接获取该第一映射关系即可。在步骤S902中，若本地数据库中未保存与时间戳对应的第一映射关系，则将时间戳上传至服务器，以从服务器处获取时间戳对应的第一映射关系。若在本地数据库中未查询到时间戳对应的第一映射关系，则向服务器发起请求，将时间戳上传至服务器，并从服务器处获取与时间戳对应的第一映射关系。在本公开的示例性实施例中，通过判断时间戳对应的第一映射关系在本地数据库中未保存的时候，才从服务器端通过上传的时间戳查询对应的第一映射关系，减少了观众端对于服务器端的访问量，节约了服务器端的并发资源。

在步骤S804中，基于第一映射关系，获取与触控位置信息对应的编码信息，并执行与编码信息指示的功能区域对应的功能，其中，第一映射关系包含图像帧中功能区域的编码信息与功能区域的位置信息之间的映射关系，第二映射关系包含图像帧的时间戳之间的映射关系。

在本公开的示例性实施例中，第一映射关系包含图像帧中功能区域的编码信息与功能区域的位置信息之间的映射关系，该第一映射关系的形式可以是功能区域和编码信息的映射集合R((x1,y1,width1,height1)->code1,(x2,y2,width2,height2)->code2,……)，本示例性实施例对第一映射关系的形式不做特殊限定。根据获取到的第一映射关系，按照触控位置信息可以获取对应的功能区域的编码信息，可以执行该编码信息以使观众端实现对应的功能。其中，该功能区域可以是在直播过程中由主播指定的，或者可以是由直播端软件/直播服务器自动设置的，本示例性实施例对该功能区域的具体确定形式不做特殊限定。

在本公开的示例性实施例中，图10示出了将第二映射关系保存至本地数据库的方法的流程示意图，如图10所示，该方法至少包括以下步骤：在步骤S1001中，获取第二映射关系的第二关系信息。为减少对服务器的访问量，可以将视频数据的第二映射关系上传至本地数据库中。获取第二映射关系中的第二关系信息，该第二关系信息是图像帧的时间戳与图像帧的第一映射关系之间的对应关系信息。在步骤S1002中，将第二关系信息与视频数据保存至本地数据库。将建立有第二关系信息的视频数据及其第二关系信息保存至本地数据库，以便于观众端在解码时现在本地数据库中查询第二映射关系。

此外，在本公开的示例性实施例中，还提供一种数据处理装置。图11示出了数据处理装置的结构示意图，如图11所示，数据处理装置1100可以包括：指令接收模块1101、指令信息模块1102、第一获取模块1103、第二获取模块1104。其中：

指令接收模块1101，被配置为确定视频数据中的图像帧，并接收作用于图像帧上的触控操作；指令信息模块1102，被配置为获取图像帧的时间戳，以及触控操作作用在图像帧上的触发位置信息；第一获取模块1103，被配置为基于第二映射关系，获取与时间戳对应的第一映射关系；第二获取模块1104，被配置为基于第一映射关系，获取与触控位置信息对应的编码信息，并执行与编码信息指示的功能区域对应的功能，其中，第一映射关系包含图像帧中功能区域的编码信息与功能区域的位置信息之间的映射关系，第二映射关系包含图像帧的时间戳之间的映射关系。

上述数据处理装置的具体细节已经在对应的数据处理方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了数据处理装置1100的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

针对相关技术中存在的问题，本公开还提出另一种数据处理方法。图12示出了该数据处理方法的流程图，如图12所示，该数据处理方法至少包括以下步骤：

步骤S1201.获取视频数据中的图像帧的时间戳与图像帧上可接受指令的区域的第一映射关系；

步骤S1202.判断图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致；

步骤S1203.若图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系一致，则将图像帧和所述下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

在本公开的示例性实施例中，通过对视频直播的直播端画面中的功能区域与软件功能建立对应的映射关系的方式，使观众端可以在主播的引导下对功能区域进行触控操作，达到开启软件相应功能的效果。除此之外，视频直播的服务器端可以对接收到的视频数据中的图像帧的时间戳对应的第一映射关系与接收到的下一帧时间戳的第一映射关系是否一致进行判断，当判断结果为一致的时候，对两帧的第一映射关系进行合并。通过服务器端的整合操作可以再一次对建立的映射关系进行处理，不仅节约了服务器资源，还从第三方的角度再一次减少了观众端解码处理时的查询工作量，一定程度上使观众端和直播端的交互更为流畅和方便。

下面对该数据处理方法的各个步骤进行详细说明。

在步骤S1201中，获取视频数据中的图像帧的时间戳与图像帧上可接收触控操作的区域的第一映射关系。

在本公开的示例性实施例中，视频数据本身是由一个个连续的图像帧组成的，一帧图像就是一幅静止的画面，连续的图像帧就形成了视频。在视频数据中，每秒钟的帧数越多，所显示的画面就会越流畅，越逼真；每秒钟的帧数越少，视频画面就会显示的不连贯，流畅度变低。举例而言，视频数据中可以由60帧图像帧组成，也可以由80帧图像帧组成，二者可以显示相同的内容，但是，视频数据的流畅度上会存在明显的差异。对视频数据的图像帧进行确定的方法可以是对视频数据进行分解，本示例性实施例对视频数据包括的图像帧的个数不做限定，举例而言，若该视频数据包括4个图像帧，则可以分解该视频数据以得到4个图像帧。除此之外，本示例性实施例对视频数据的格式也不做限定，可以是实时直播视频数据，也可以是mp4、avi、mkv、dvd、flv等格式的视频文件，也可以是其他格式的视频数据，还可以包括单通道的灰度视频数据和三通道的彩色视频数据。时间戳通常是一个字符序列，唯一地标识某一时刻的时间，图像帧的时间戳可以唯一的标识某一时刻的图像帧的播放时间。在确定视频数据的图像帧的时候，可以唯一确定的获取到该图像帧的时间戳。触控操作可以是点击操作、滑动操作、按压操作等，本示例性实施例对具体的触控操作不做特殊限定。对视频数据进行分解可以获取到图像帧，并同时获取该图像帧的时间戳与可接收触控操作的第一映射关系。第一映射关系包含图像帧中功能区域的编码信息与可接收触控操作的区域的位置信息之间的映射关系，该第一映射关系的形式可以是功能区域和编码信息的映射集合R((x1,y1,width1,height1)->code1,(x2,y2,width2,height2)->code2,……)。其中，可接收触控操作的区域的位置信息可以通过屏幕坐标系进行确定。屏幕坐标系以屏幕的左下角作为原点，以像素为单位，坐标轴向屏幕的走上方延伸，但不会超过屏幕的最大宽度和最大高度。按照触控操作在屏幕坐标系中的对应像素可以确定该可接收触控的区域的位置信息。该位置信息可以是多个触控点的位置信息，举例而言，获取多个位置点的位置信息以确定该区域的位置信息。由于这些位置点是基于屏幕坐标系建立的，可以对应屏幕坐标系的像素值确定各个位置点的位置信息以确定可接收触控操作的区域的位置信息。举例而言，多个位置点的位置信息分别为(1,2)、(1,3)、(2,2)和(2,3)，那么可以确定该可接收触控操作的区域是一个边长为1且四个点的坐标已确定的正方形，该可接收触控操作的区域的位置信息可以唯一确定。该可接收触控操作的区域的位置信息可以是一个触控区域的位置信息，通过屏幕坐标系的像素值，可以确定该触控区域的位置信息。举例而言，该可接收触控操作的区域的位置信息可以是(1，2，3，4)，表明该触控区域是一个以坐标(1，2)为起始点，宽为3，高为4的位置区域，该位置区域的单位为像素值，则根据(1，2，3，4)的位置信息确定了可接收触控操作的区域的位置信息，本示例性实施例对该区域的位置信息的具体确定形式不做特殊限定。并且，该可接收触控操作的区域可以是在直播过程中直接由主播指定的，还可以是由直播端软件或者直播服务器自行设置的，本示例性实施例对该区域的具体确定方式不做特殊限定，且对该区域的区域形状等其他属性不做特殊限定。

在步骤S1202中，判断图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致。

在本公开的示例性实施例中，由于时间戳与图像帧之间具有一一对应的关系，而各个图像帧都建立有对应的第一映射关系，因此，时间戳与第一映射关系之间具有一一对应的关系。但是，由于图像帧的划分可能过于细密，会存在图像帧的时间戳对应的第一映射关系与上一图像的时间戳对应的第一映射关系之间不存在差异的情况。为便于上传且节约时间与资源，可以按照图像帧的时间戳可以对该时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致进行判断，亦即判断两图像帧中的可接收触控操作的区域上的编码信息是否一致。若判定结果为不一致，说明两个图像帧中不包含的功能不一致，可以将两条第一映射关系都保存。

在步骤S1203中，若图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系一致，则将图像帧和下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

在本公开的示例性实施例中，若图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系一致，说明两个图像帧只是时间戳发生变化，其中包含的功能并未改变，为节省服务器的容量，可以将图像帧与下一帧图像对应的两个第一映射关系进行整合，只保存一条第一映射关系，此时，两个时间戳对应同一第一映射关系，还可以方便观众端在服务器中的查询，以节约查询时间，更快响应观众端的功能解锁需求。

此外，在本公开的示例性实施例中，还提供一种数据处理装置。图13示出了数据处理装置的结构示意图，如图11所示，数据处理装置1100可以包括：关系获取模块1301、映射判断模块1302、关系整合模块1303。其中：

关系获取模块1301，被配置为获取视频数据中的图像帧的时间戳与图像帧上可接收触控操作的区域的第一映射关系；映射判断模块1302，被配置为判断图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致；关系整合模块1303，被配置为若图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系一致，则将图像帧和下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

上述数据处理装置的具体细节已经在对应的数据处理方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了数据处理装置1300的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

下面结合一应用场景对本公开实施例中的数据处理方法做出详细说明。

图14示出了本公开在主播端提供的数据处理的方法的流程示意图，如图14所示，该方法至少包括以下步骤：在步骤S1401中，使用截取屏幕区域生成视频图像，并在该视频图像中编码的方式是普遍使用的开播方式。图15示出了截取屏幕生成视频图像的应用界面示意图，如图15所示，1501对应的区域即为截取屏幕进行直播的区域。选定了截取屏幕直播的区域后，可以得到一个基于屏幕坐标系的矩形区域，则将该矩形区域置于直播区域中，并将该矩形区域中包含的功能映射到直播区域中。在步骤S1402中，将视频直播区域发送给矩形区域所在的软件中，该软件可以返回处于直播区域中的各功能区域以及功能区域的位置信息和编码信息组成的第一映射关系R((x1,y1,width1,height1)->code1,(x2,y2,width2,height2)->code2,……)。并且，可以将功能区域的位置信息从基于屏幕坐标系的位置信息转化成直播区域的相对位置信息。举例而言，功能区域的位置信息为(1,1,4,4)，将该坐标信息转化成直播区域的相对位置信息可以是(0,0,4,4)，本示例性实施例对具体的相对位置信息转换方式不做特殊限定，便于直播区域内功能区域的位置确定即可。在步骤S1403中，对视频数据进行编码时，产生的每个视频帧都会同时生成视频帧对应的时间戳，该时间戳是观众端能够正常观看直播视频的必须条件。在步骤S1404中，将得到的时间戳与第一映射关系之间建立一一对应的关系，得到第二映射关系。在步骤S1405中，将视频数据和第二映射关系上传到服务器。其中，服务器的种类可以包括个人电脑(PersonalComputer,简称PC)服务器、大型机、小型机，还可以包括云服务器，本示例性实施例对服务器的种类不做具体限定。由于直播视频一般是以1秒16-30帧的效率进行编码，但出于截屏区域中的软件一般不会很快移动，因此，可以对上传服务器的操作优化为：只上传与上一图像帧中的功能区域不同的第二映射关系。举例而言，视频数据的时间戳为1-100，视频画面都是相同的，并且第一映射关系也是相同的，那么可以只上传时间戳为1的第二映射关系，2-100帧的图像帧的第二映射关系均不上传。如果在时间戳为101时，第一映射关系与1帧的第一映射关系不同，这时才上传101帧的第二映射关系。

直播端将已经功能编码的视频数据上传至服务器端之后，观众端要经过相对应的解码处理才可以在一边观看视频的同时，一边通过点击视频画面的对应位置执行软件功能。

图16示出了本公开在观众端的数据处理的方法的流程示意图，如图16所示，该方法至少包括以下步骤：在步骤S1601中，观众端对视频数据进行解码时，可以得到视频数据与各个图像帧的时间戳。在步骤S1602中，使用图像帧的时间戳请求服务器，如果服务器存在于该时间戳对应的第二映射关系，则下发到观众端。并且，提供一种优化方法：将该时间戳之后的后续时间戳对应的第二映射关系同时下发到观众端，避免过多的观众端发起请求，占用服务器并发资源。观众端接收到服务器返回的数据后，可以保存在本地数据库中。在步骤S1603中，观众对直播区域发送触控操作时，可以获取观众发起触控操作所在的图像帧的时间戳，以及该触控操作的触控位置信息。基于第二映射关系，可以按照时间戳确定出第一映射关系，以确定触控操作命中的功能区域。举例而言，第一映射关系为(x i,y i,width i,height i)->code i，可以根据触控位置信息确定编码信息code i。并且，若该触控操作未命中功能区域时，可以返回一未命中的提示信息。在步骤S1604中，观众端将编码信息返回给软件，软件接收到对应的编码信息后，则执行相对应的软件功能，举例而言，可以是“每日任务”对应的软件功能，例如每日签到、打卡、或者是其他对应的软件功能等。

为便于将本公开提供的数据处理方法系统化，本公开还提供一种数据处理系统，下面对系统中的各个模块执行的功能和对应的操作进行具体说明。

图17示出了本公开提供的数据处理系统，如图17所示，该数据处理系统包括软件功能编码模块1701，主播端对位于直播区域的软件功能与图像帧映射处理模块1702，观众端对时间戳进行解码处理，获取第一映射关系，处理观众端点击模块1703，服务器端存储编码信息和处理主播端以及观众端请求的模块1704。其中，服务器端存储编码信息和处理主播端以及观众端请求的模块1704包括存储及检索编码信息模块和请求处理模块。软件功能编码模块1701用于对软件可接收触控操作的功能区域进行编码，对外提供基于屏幕坐标系的点或者区域的查询软件功能编码信息的接口，以及接收到执行软件功能编码信息的请求时，执行相对应的软件功能。主播端对位于直播区域的软件功能与图像帧映射处理模块1702，用于向模块1701查询位于直播区域中的功能区域的第一映射关系，并在对视频编码后获得时间戳时，生成视频数据的第二映射关系，并将第二映射关系的映射关系集合上传至服务器模块。观众端对时间戳进行解码处理，获取第一映射关系，处理观众端点击模块1703，用于在对视频数据进行解码处理得到时间戳后，在本地数据库中查询对应的第二映射关系是否存在，若存在，则直接向观众端返回第一映射关系；若不存在，则向服务器模块发送时间戳对应的查询第一映射关系请求。若查询到时间戳对应的第二映射关系时，则直接返回相应的第一映射关系，并且，服务器模块会将从该时间戳起的后续时间戳对应的第二映射关系同时返回给观众端，观众端将第二映射关系保存在本地数据库中；或者未查询到对应的第二映射关系时，返回未查询到与该时间戳对应的第二映射关系的反馈信息。当观众端发送一例如点击操作的触控操作时，可以得到该点击操作的时间戳，通过本地数据库中的第二映射关系的映射关系集合计算得到对应的第一映射关系。当得到第一映射关系时，再计算第一映射关系中是否包含点击操作为触控位置信息对应的软件功能区域，当包含时，则返回相应的软件功能编码信息，将编码信息发送给模块1701以执行对应功能。服务器端存储编码信息和处理主播端以及观众端请求的模块1704中的存储及检索编码信息模块用于在服务器端存储来自主播端的视频数据的时间戳的第二映射关系的映射关系集合，以及观众端发送请求的时间戳，检索对应的第二映射关系和后续的第二映射关系集合；服务器端存储编码信息和处理主播端以及观众端请求的模块1704中的请求处理模块是在视频的服务器端，用于在处理来自主播端和观众端的数据请求，并返回处理结果。

此外，在本公开的示例性实施例中，还提供了一种能够实现上述方法的电子设备。

下面参照图18来描述根据本发明的这种实施例的电子设备1800。图18显示的电子设备1800仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图18所示，电子设备1800以通用计算设备的形式表现。电子设备1800的组件可以包括但不限于：上述至少一个处理单元1810、上述至少一个存储单元1820、连接不同系统组件(包括存储单元1820和处理单元1810)的总线1830、显示单元1840。

其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元1810执行，使得所述处理单元1810执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。

存储单元1820可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)1821和/或高速缓存存储单元1822，还可以进一步包括只读存储单元(ROM)1823。

存储单元1820还可以包括具有一组(至少一个)程序模块1825的程序/实用工具1824，这样的程序模块1825包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线1830可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备1800也可以与一个或多个外部设备2000(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备1800交互的设备通信，和/或与使得该电子设备1800能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口1850进行。并且，电子设备1800还可以通过网络适配器1860与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器1840通过总线1830与电子设备1800的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备1800使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

通过以上的实施例的描述，本领域的技术人员易于理解，这里描述的示例实施例可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施例的方法。

在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。

参考图19所示，描述了根据本发明的实施例的用于实现上述方法的程序产品1900，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

Claims (14)

1.一种数据处理方法，应用于视频直播的直播端，其特征在于，所述方法包括：

确定视频数据的图像帧，并获取位于所述图像帧中的功能区域的位置信息；

获取所述功能区域的编码信息，并对所述编码信息和所述位置信息建立第一映射关系；其中，所述编码信息用于指示所述功能区域的功能；

获取所述图像帧的时间戳，并对所述时间戳与所述第一映射关系建立第二映射关系；

获取与所述视频数据中的各个图像帧相对应的各个所述第二映射关系的映射关系集合；

对所述视频数据与所述映射关系集合进行编码，以获取数据映射编码信息；

将所述数据映射编码信息上传至服务器。

2.根据权利要求1所述的数据处理方法，其特征在于，在所述对所述时间戳与所述第一映射关系建立第二映射关系之后，所述方法还包括：

获取与所述视频数据中的各个图像帧相对应的各个所述第二映射关系的映射关系集合；

将所述视频数据和所述映射关系集合分别上传至服务器。

3.根据权利要求2所述的数据处理方法，其特征在于，所述将所述视频数据和所述映射关系集合分别上传至服务器，包括：

判断所述图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系是否存在差异；

若判定所述图像帧的时间戳对应的第一映射关系与上一帧图像的时间戳对应的第一映射关系存在差异，则将所述图像帧的时间戳对应的第二映射关系上传至服务器。

4.根据权利要求1所述的数据处理方法，其特征在于，所述获取位于所述图像帧中的功能区域的位置信息，包括：

在所述图像帧上确定对应于功能区域的多个位置点；

获取所述多个位置点的位置信息。

5.根据权利要求1所述的数据处理方法，其特征在于，所述获取位于所述图像帧中的功能区域的位置信息，包括：

在所述图像帧上确定对应于功能区域的位置区域；

获取所述位置区域的位置信息。

6.一种数据处理装置，其特征在于，包括：

信息获取模块，被配置为确定视频数据的图像帧，并获取位于所述图像帧中的功能区域的位置信息；

第一映射模块，被配置为获取所述功能区域的编码信息，并对所述编码信息和所述位置信息建立第一映射关系；其中，所述编码信息用于指示所述功能区域的功能；

第二映射模块，被配置为获取所述图像帧的时间戳，并对所述时间戳与所述第一映射关系建立第二映射关系；

集合获取模块，被配置为获取与所述视频数据中的各个图像帧相对应的各个所述第二映射关系的映射关系集合；

数据编码模块，被配置为对所述视频数据与所述映射关系集合进行编码，以获取数据映射编码信息；

信息上传模块，被配置为将所述数据映射编码信息上传至服务器。

7.一种数据处理方法，应用于视频直播的观众端，其特征在于，所述方法包括：确定视频数据中的图像帧，并接收作用于所述图像帧上的触控操作；

获取所述图像帧的时间戳，以及触控操作作用在所述图像帧上的触控位置信息；

基于第二映射关系，获取与所述时间戳对应的第一映射关系；

基于所述第一映射关系，获取与所述触控位置信息对应的编码信息，并执行与所述编码信息指示的功能区域对应的功能，其中，所述编码信息用于指示所述功能区域的功能，所述第一映射关系包含所述图像帧中功能区域的编码信息与所述功能区域的位置信息之间的映射关系，所述第二映射关系包含所述图像帧的时间戳之间的映射关系。

8.根据权利要求7所述的数据处理方法，其特征在于，在所述确定视频数据中的图像帧，并接收作用于所述图像帧上的触控操作之前，所述方法还包括：

获取所述第二映射关系的第二关系信息；

将所述第二关系信息与所述视频数据保存至本地数据库。

9.根据权利要求8所述的数据处理方法，其特征在于，所述基于第二映射关系，获取与所述时间戳对应的第一映射关系，包括：

判断在所述本地数据库中是否保存有与所述时间戳对应的第一映射关系；

若所述本地数据库中未保存与所述时间戳对应的第一映射关系，则将所述时间戳上传至服务器，以从所述服务器处获取所述时间戳对应的第一映射关系。

10.一种数据处理装置，其特征在于，包括：

指令接收模块，被配置为确定视频数据中的图像帧，并接收作用于所述图像帧上的触控操作；

指令信息模块，被配置为获取所述图像帧的时间戳，以及触控操作作用在所述图像帧上的触发位置信息；

第一获取模块，被配置为基于第二映射关系，获取与所述时间戳对应的第一映射关系；

第二获取模块，被配置为基于所述第一映射关系，获取与所述触控位置信息对应的编码信息，并执行与所述编码信息指示的功能区域对应的功能，其中，所述编码信息用于指示所述功能区域的功能，所述第一映射关系包含所述图像帧中功能区域的编码信息与所述功能区域的位置信息之间的映射关系，所述第二映射关系包含所述图像帧的时间戳之间的映射关系。

11.一种数据处理方法，其特征在于，所述方法包括：

获取视频数据中的图像帧的时间戳与所述图像帧上可接收触控操作的区域的第一映射关系；

判断所述图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致；

若所述图像帧的时间戳对应的第一映射关系与所述下一帧图像的时间戳对应的第一映射关系一致，则将所述图像帧和所述下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

12.一种数据处理装置，其特征在于，包括：

关系获取模块，被配置为获取视频数据中的图像帧的时间戳与所述图像帧上可接收触控操作的区域的第一映射关系；

映射判断模块，被配置为判断所述图像帧的时间戳对应的第一映射关系与下一帧图像的时间戳对应的第一映射关系是否一致；

关系整合模块，被配置为若所述图像帧的时间戳对应的第一映射关系与所述下一帧图像的时间戳对应的第一映射关系一致，则将所述图像帧和所述下一帧图像分别对应的两个第一映射关系整合为一个第一映射关系。

13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-5、7-9或者11所述的数据处理方法。

14.一种电子设备，其特征在于，包括：

处理器；

存储器，用于存储所述处理器的可执行指令；

其中，所述处理器被配置为经由执行时实现如权利要求1-5、7-9或者11所述的数据处理方法。

Images