CN110302536B - 一种基于交互式应用的对象检测方法及相关装置 - Google Patents

Abstract

本申请公开了一种基于交互式应用的对象检测方法及相关装置，用于检测交互式应用中的对象是否有穿越不可通行的区域，检测效率高，且能够节省大量的人力成本。本申请方法包括：根据待检测视频，获取目标图像集合，图像集合包括有多个第一图像；在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；将路径图像与第三图像进行对比，获得检测结果，其中，第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域。

Description

一种基于交互式应用的对象检测方法及相关装置

技术领域

本申请涉及互联网技术领域，尤其涉及一种基于交互式应用的对象检测方法及相关装置。

背景技术

随着网络技术的飞速发展，应用产品的种类越来越多，常见的应用产品有游戏，其主要包括有网络游戏和单机游戏。一款新的游戏从开发到上市，往往需要反复修改和测试，测试其在长时间使用情况下的稳定性，如若稳定性达到预定要求，才能考虑将其推向市场。若在测试阶段耗费了过多时间，延迟了该款游戏的上市时间，将可能错失大批的用户。

对于一些特定的游戏，例如第一人称射击类(first person shooting，FPS)游戏或者多人在线战术竞技(multiplayer online battle arena，MOBA)游戏，通常是由用户控制游戏内的角色在预先布置好的虚拟场景中行动来进行游戏的游玩。通常，在这些游戏的虚拟场景中往往会布置有诸如道路、建筑物、障碍物或墙壁等设施，游戏内的角色通常被设定为可以在道路上行走，而无法穿越障碍物或墙壁这些不可通行的区域。对于这些特定的游戏，在游戏的测试过程中，往往需要检测游戏中的角色是否能够穿越不可通行的区域，以避免游戏中存在有影响用户体验的漏洞。

目前，主要是靠人工观看游戏运行过程中的视频，来检测角色是否有穿越不可通行的区域，检测效率低，且浪费人力物力。

发明内容

本申请实施例提供了一种基于交互式应用的对象检测方法及相关装置，能够基于游戏视频自动检测游戏中的角色是否有穿越不可通行的区域，检测效率高，且节省了大量的人力和物力。

本申请实施例第一方面提供一种基于交互式应用的对象检测方法，包括：

根据待检测视频，获取目标图像集合，待检测视频为记录有交互式应用运行过程的视频，图像集合包括有多个第一图像；

在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；

对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；

根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；

将路径图像与第三图像进行对比，获得检测结果，其中，第三图像为基于交互式应用的全局图像，且第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域。

本申请实施例第二方面提供一种基于交互式应用的对象检测装置，包括：

获取单元，用于根据待检测视频，获取目标图像集合，待检测视频为记录有交互式应用运行过程的视频，图像集合包括有多个第一图像；

截取单元，用于在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；

获取单元，还用于对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；

获取单元，还用于根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；

对比单元，用于将路径图像与第三图像进行对比，获得检测结果，其中，第三图像为基于交互式应用的全局图像，且第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域。

在一种可能的设计中，在本申请实施例的第二方面的一种实现方式中，还包括确定单元；

获取单元，还用于对第二图像进行检测，获取第一位置对应的第一坐标点，第一位置为第二图像中交互对象的位置；

确定单元，用于根据多个第二图像，确定分别与多个第二图像对应的多个第一坐标点；

获取单元，还用于若多个第一坐标点中包括有第二坐标点和第三坐标点，则将第二坐标点与第三坐标点连接，获得路径图像，其中，第二坐标点和第三坐标点分别对应于任意两个相邻的第二图像。

在一种可能的设计中，在本申请实施例的第二方面的一种实现方式中，

获取单元，还用于获取路径图像中第一区域的颜色以及第三图像中第二区域的颜色，其中，第一区域在路径图像中的位置与第二区域在第三图像中的位置相同，路径图像中的路径为第一颜色，第三图像中的不可通行区域为第一颜色；

对比单元，还用于若第一区域的颜色和第二区域的颜色均为第一颜色，则获得检测结果为交互对象穿过不可通行区域；

对比单元，还用于若第一区域的颜色和第二区域的颜色并非均为第一颜色，则获得检测结果为交互对象未穿过不可通行区域。

在一种可能的设计中，在本申请实施例的第二方面的一种实现方式中，还包括输出单元；

获取单元，还用于根据路径图像和第三图像获取合并图像，合并图像为路径图像与第三图像合并后得到的图像；

输出单元，用于输出合并图像。

在一种可能的设计中，在本申请实施例的第二方面的一种实现方式中，还包括处理单元；

获取单元，用于获取图像库，图像库中包括有多个待匹配图像，多个待匹配图像为基于交互式应用的全局图像，且多个待匹配图像对应于交互式应用中的不同场景；

处理单元，用于将第二图像与多个待匹配图像进行匹配处理；

确定单元，用于若图像库中存在有与第二图像匹配的待匹配图像，则确定与第二图像匹配的待匹配图像为第三图像。

在一种可能的设计中，在本申请实施例的第二方面的一种实现方式中，

处理单元，还用于对图像库中的待匹配图像进行灰度化处理，获得多个灰度图像；

处理单元，还用于根据多个灰度图像中像素点的灰度值，对多个灰度图像进行区域标记，获得多个标记有可通行区域和不可通行区域的待匹配图像；

处理单元，还用于将第二图像与图像库中标记有可通行区域和不可通行区域的待匹配图像进行匹配处理。

在一种可能的设计中，在本申请实施例的第二方面的一种实现方式中，

获取单元，还用于根据待检测视频，获取多帧连续的图像；

获取单元，还用于若多帧连续的图像中包括有第四图像和第五图像，则根据多帧连续的图像获取位于第四图像和第五图像之间的多个目标图像，获得目标图像集合，其中第四图像中包括有第一标识，第一标识表示交互式应用运行过程中的第一场景，第五图像中包括有第二标识，第二标识表示交互式应用运行过程中的第二场景。

本申请实施例第三方面提供一种终端设备，包括：存储器、收发器、处理器以及总线系统；

其中，存储器用于存储程序；

处理器用于执行存储器中的程序，包括如下步骤：

根据待检测视频，获取目标图像集合，待检测视频为记录有交互式应用运行过程的视频，图像集合包括有多个第一图像；

在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；

对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；

根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；

将路径图像与第三图像进行对比，获得检测结果，其中，第三图像为基于交互式应用的全局图像，且第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域；

总线系统用于连接存储器以及处理器，以使存储器以及处理器进行通信。

本申请实施例第四方面提供了一种计算机可读存储介质，计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一方面的方法。

本申请实施例第五方面提供了一种包含指令的计算机程序产品，当其在计算机或者处理器上运行时，使得计算机或者处理器执行上述任一方面的方法。

从以上技术方案可以看出，本申请实施例具有以下优点：

本申请实施例中基于待检测视频获取目标图像集合，然后截取目标图像集合中图像所对应的小地图，并且检测这些小地图中游戏角色的位置，从而获得游戏角色的行走路径，最后通过将游戏角色的行走路径与标记有不可通行区域的图像进行对比，获得游戏角色是否有穿过不可通行区域的检测结果，通过检测和对比图像即可完成整个检测过程，检测效率高，且无需人工参与，节省了人力和物力。

附图说明

图1为本申请实施例提供的具有小地图的游戏画面示例图；

图2为本申请实施例中基于交互式应用的对象检测系统的一个架构示意图；

图3为本申请实施例提供的一种基于交互式应用的对象检测方法的示例图；

图4为本申请实施例提供的一种路径图像和第三图像合并之后得到的路径相交图示例图；

图5为本申请实施例提供的一种路径图像和第三图像合并之后得到的路径相交图示例图；

图6为本申请实施例提供的基于多张游戏图像中的小地图生成纯净小地图的示例图；

图7为本申请实施例提供的一种目标图像集合的示例图；

图8为本申请实施例提供的基于交互式应用的对象检测方法的示例图；

图9为本申请实施例中提供的一种基于交互式应用的对象检测装置一个实施例示意图；

图10是本申请实施例提供的一种服务器结构示意图。

具体实施方式

本申请实施例提供了一种基于交互式应用的对象检测方法及相关装置，能够基于游戏视频自动检测游戏中的角色是否有穿越不可通行的区域，检测效率高，且节省了大量的人力和物力。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“对应于”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

应理解，本申请应用于对交互式应用中的对象进行检测的场景，具体地，可以应用于检测游戏应用中的角色是否有穿越不可通行区域。可以理解的是，对于一些特定的游戏，例如FPS游戏或MOBA游戏，用户通常是控制游戏内的角色在预设布置好的虚拟场景(即预设的空间范围内，俗称游戏地图)中活动。一般地，为了便于用户实时掌握自己所操控的游戏角色在整个游戏地图中的位置，这些游戏中通常会向用户展示一个能够大体上呈现的全局地图的缩小版场景图(即小地图)，这个小地图通常设置在游戏画面的左上角或者右下角等角落位置处，既保证了不会影响到用户正常观看当前的游戏画面，又能够向用户展示能够呈现全局信息的小地图。基于此，本申请实施例中通过获取游戏视频中多帧连续图像各自对应的小地图，并且检测游戏角色在这些小地图中的位置，形成游戏角色在小地图中的行走路径，最后通过将游戏角色的行走路径与标注有不可通行区域的小地图图像进行对比，获得游戏角色是否有穿越不可通行区域的检测结果。具体地，如图1所示，图1为本申请实施例提供的具有小地图的游戏画面示例图。如图所示，其中，101表示的是在用户操作的终端屏幕上所显示的游戏画面；102表示的是在游戏画面的左上角所展示的小地图，由图可以看出，小地图中展示有全局游戏的设施布置情况(其中，黑色区域为障碍物，即不可通行区域，白色区域为可通行区域)以及游戏角色当前所处位置(小地图中间位置处的黑点表示游戏角色)。显然，用户在游玩游戏的过程中，通过观察左上角的小地图，可以快速获知整个游戏中设施的布置情况以及游戏角色当前所处的位置情况。

为了便于理解，以下先对本申请实施例所应用的系统架构进行介绍。本申请实施例提出了一种基于交互式应用的对象检测方法，该方法应用于图2所示的基于交互式应用的对象检测系统，请参阅图2，图2为本申请实施例中基于交互式应用的对象检测系统的一个架构示意图，如图所示，终端通过网络与服务器通信连接，用户在终端上进行游戏的游玩，并且对游玩过程中的游戏画面进行录制，得到相应的游戏视频；服务器收集得到游戏视频，并且对游戏视频中的小地图进行检测处理，从而获得游戏角色是否有穿越不可通行区域的检测结果。

其中，图2中所示的终端仅为简单的示意，在实际应用中，终端包含但不仅限于手机、平板电脑、台式电脑、笔记本电脑以及掌上电脑等可部署即时通讯客户端，并且能够实现文档的访问或者编辑的终端设备。

需要说明的是，本申请实施例所提供的基于交互式应用的对象检测方法，除了可以应用于检测游戏中的对象是否有穿越不可通行区域，还可以应用于检测其他的一些应用中的对象是否有穿越不可通行区域，例如检测地图导航应用中对象是否有穿越不可通行区域等等，具体此处不做任何限定。为了便于叙述，以下将以检测游戏应用中的对象为例，对本申请实施例提供的方法进行详细的介绍。

以上为对本申请实施例提供的基于交互式应用的对象检测系统进行的描述，请参阅图3，图3为本申请实施例提供的一种基于交互式应用的对象检测方法的示例图。

本申请实施例中提供的一种基于交互式应用的对象检测方法一个实施例包括：

301、根据待检测视频，获取目标图像集合，待检测视频为记录有交互式应用运行过程的视频，图像集合包括有多个第一图像；

在本实施例中，获取待检测视频的方式可以是在用户或者专门的游戏测试人员在游玩游戏的过程中，将相应的游戏画面录制下来，从而获得待检测视频。可以理解的是，在游戏开发完毕到游戏正式上市之前，为了便于游戏厂商能够尽可能地发现游戏中的漏洞以对游戏进行修复，游戏厂商通常会将游戏开放给部分用户或者专门的游戏测试人员来进行游戏的提前游玩(俗称游戏内测)，通过观察这部分用户或者游戏测试人员在游戏内测过程中游玩游戏的情况，来查看游戏的稳定性是否达到要求。基于此，在用户或者专门的游戏测试人员游玩游戏的过程中，可以将游戏运行过程中的游戏画面录制下，从而得到包括有游戏画面的待检测视频。

值得注意的是，本申请实施例中所提供的方法除了可以应用在游戏测试阶段，还可以应用在游戏正常运行阶段，以判断是否有用户利用第三方作弊软件(俗称“外挂”)来进行作弊。可以理解的是，在游戏中，不可通行区域对于游戏角色而言是不可以穿越以及不可以通行的，但是有些用户为了能够追求游戏的胜利，可能会恶意使用一些第三方软件来使得其操控的游戏角色可以穿越不可通行区域(即俗称的“穿墙”)，从而影响了游戏的公平性。为了能够检测出是否有用户采用了第三方软件进行作弊，在游戏上市之后，可以通过在服务器录制部分用户在游玩游戏过程中对应的游戏画面，来获得待检测视频，然后基于该待检测视频进行后续的检测处理。

在获得待检测视频之后，由于待检测视频实际上是由多帧连续的图像拼接组成的，因此，可以将待检测视频转换为多帧图像，得到包括有多个第一图像的目标图像集合，其中，第一图像指的是整个游戏画面的图像，该游戏画面中包括有小地图。具体地，将视频转换为图像的过程为现有的技术，在此不对具体的转换过程进行赘述。

302、在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；

在本实施例中，第二图像指的是基于游戏中整个场景的全局图像，也就是展示有全局游戏的设施布置情况的小地图，由于在本申请实施例中主要是通过对小地图中游戏角色的行走路径进行检测来获得角色是否有穿越不可通行区域，因此，在获得包括有整个游戏画面的第一图像之后，可以在第一图像中截取第二图像，以便于后续对第二图像进行相应的检测处理。

值得注意的是，对于不同的游戏，小地图在第一图像中的位置可能是不一样的，例如，对于游戏A来说，小地图可能是设置在游戏画面的左上角，对于游戏B来说，小地图则可能是设置在游戏画面的右下角，因此，在截取第二图像的过程中，可以根据当前待检测视频所对应的游戏来决定如何进行第二图像的截取，也就是说，在截取第二图像之前，可以先对待检测视频所属的游戏类型进行检测。具体地，可以通过在获取待检测视频的时候对待检测视频进行标记，以标记待检测视频具体所属的游戏类型，这样在对第一图像进行第二图像截取之前，便可以根据待检测视频所属的游戏类型，来决定在第一图像的哪个位置进行第二图像的截取。通常来说，对于某一个游戏，其小地图设置的位置以及小地图的大小都是基本固定的，那么只要预先设置好具体的游戏类型与截取位置之间的关系，就可以顺利截取到完整的小地图。例如，以图1中的游戏画面为例，假设以图1中左下角端点为坐标轴的原点(0,0)，图1中左上角的小地图的四个端点所对应的坐标分别为(0,200)、(0,250)、(50,200)以及(50,250)，那么对于每一张第一图像，都可以通过截取坐标点(0,200)、(0,250)、(50,200)以及(50,250)内的图像来得到第二图像。

303、对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；

可以理解的是，对于大部分有小地图的游戏来说，为了保证用户可以快速分辨出小地图中可通行区域、不可通行区域以及游戏角色，在小地图中通常会采用不同的颜色来表示不同的区域或者是游戏角色。例如，对于游戏A来说，在小地图中采用浅灰色来表示可通行区域，采用深灰色或者黑色来表示不可通行区域，而游戏角色则采用红色或者蓝色的一个点(例如圆点)来表示，这样，用户在观看小地图的时候，便可以迅速判断其操控的游戏角色位于什么位置上。

基于此，在本实施例中，可以根据用于表示游戏角色的颜色对小地图进行检测，获得游戏角色的位置。具体地，首先获取在小地图中用于表示游戏角色的颜色，然后获取该颜色对应的色彩数值(例如RGB数值)，最后根据该色彩数值对第二图像中的每个像素点进行检测，将色彩数值满足要求的像素点检测出来，从而获得游戏角色的位置。

304、根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；

在本实施例中，对于基于待检测视频获得的多个连续的第二图像，在检测得到这些第二图像中游戏角色对应的位置之后，可以基于这些得到的位置，获取游戏角色在一段时间内的行走路径。可以理解的是，在游戏的运行过程中，游戏角色是随着用户的操控而不断移动的，因此，小地图上用于表示游戏角色的圆点也是随着游戏角色的移动而在小地图中不断地移动。在待检测视频分成多个连续的图像之后，相对而言，用于表示游戏角色的圆点也分散在各个第二图像的不同位置上。因此，对于多张连续的第二图像，只要将分布于不同位置上的圆点连接起来，便可以得到游戏角色的移动轨迹，即游戏角色的行走路径。

可选地，在本申请实施例提供的一种基于交互式应用的对象检测方法的一个可选实施例中，对第二图像进行检测，获取第一位置，具体包括：对第二图像进行检测，获取第一位置对应的第一坐标点，第一位置为第二图像中交互对象的位置；

根据多个第二图像，获取路径图像，具体包括：根据多个第二图像，确定分别与多个第二图像对应的多个第一坐标点；若多个第一坐标点中包括有第二坐标点和第三坐标点，则将第二坐标点与第三坐标点连接，获得路径图像，其中，第二坐标点和第三坐标点分别对应于任意两个相邻的第二图像。

在本实施例中，在检测游戏角色的位置时，获取该游戏角色在第二图像中的坐标点，以该坐标点作为游戏角色在第二图像中的位置；然后，对于每两个相邻的第二图像(即在对待检测视频进行图像分帧时，帧数相邻的两个第一图像所对应的第二图像)，可以计算这两个第二图像中的两个第一坐标点之间的距离，如果距离小于预先设定的阈值，则连接两个第一坐标点，否则不连接这两个第一坐标点。这样一来，根据所有的第二图像连接完所有的第一坐标点之后，便可以得到由多个第一坐标点连接形成的路径。基于该路径，可以生成一张与第二图像大小一致的路径图像，例如，该路径图像中可以是一个以白色为底色，红色为游戏角色行走的路径的图像。其中，该预先设定的阈值可以是一个根据具体的游戏类型所设定的一个数值，由于在检测第二图像的过程中，可以会由于第二图像清晰度不够等原因而导致游戏角色的位置检测错误；另外，对于一些MOBA类型游戏而言，游戏中的角色可能会拥有一些可以快速穿墙的技能(俗称“闪现”技能)，游戏角色通过释放该技能可以迅速穿过障碍物或墙壁等不可通行的区域，在游戏角色释放这些技能的时候，游戏角色实际上并不是移动并且逐渐穿过这些不可通行的区域，而是前一时刻在不可通行的区域的一侧，而下一时刻则在不可通行的区域的另一侧，如果此时将两个时刻对应的第一坐标点连接起来，则会认为游戏角色通过不正当的方式穿过了不可通行的区域。基于此，如果两个相邻的第一坐标点之间的距离大于阈值，则不将这两个相邻的第一坐标点连接起来。此外，值得注意的是，在游戏角色正常移动的过程中，对于两个相邻的第二图像，两个第二图像对应的第一坐标点之间的距离也有可能是间隔了一个或者多个像素点的，该像素点距离可以称为游戏角色在每帧图像前进的最大像素距离，显然，为了保证大部分的第一坐标点能够被连接起来，该阈值是要大于该最大像素距离的。

305、将路径图像与第三图像进行对比，获得检测结果，其中，第三图像为基于交互式应用的全局图像，且第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域。

在本实施例中，第三图像指的是与第二图像对应的小地图，该小地图上标记有可通行区域和不可通行区域，并且在该小地图上没有相应的表示游戏角色的圆点，即可以称之为“纯净”的小地图。显然，在获得路径图像和第三图像之后，通过对比路径图像中的路径是否有与第三图像中的不可通行区域有重叠，即可获得游戏角色是否有穿过不可通行区域的结果；具体地，如果路径图像中的路径与第三图像中的不可通行区域有重叠，那么便可以认为游戏角色穿过了不可通行区域，否则，可以认为游戏角色没有穿过不可通行区域。

可选地，在本申请实施例提供的一种基于交互式应用的对象检测方法的一个可选实施例中，将路径图像与第三图像进行对比，获得检测结果，包括：获取路径图像中第一区域的颜色以及第三图像中第二区域的颜色，其中，第一区域在路径图像中的位置与第二区域在第三图像中的位置相同，路径图像中的路径为第一颜色，第三图像中的不可通行区域为第一颜色；若第一区域的颜色和第二区域的颜色均为第一颜色，则获得检测结果为交互对象穿过不可通行区域；若第一区域的颜色和第二区域的颜色并非均为第一颜色，则获得检测结果为交互对象未穿过不可通行区域。

具体地，首先可以将路径图像中的路径设置为第一颜色(例如白色)，将路径图像中除路径之外的区域设置为第二颜色(例如黑色)，也就是说，将路径图像的底色设置为黑色，路径设置为白色；其次，对于第三图像，将第三图像中不可通行区域的颜色设置为第一颜色，将第三图像中可通行区域的颜色设置为第二颜色；然后对路径图像和第三图像进行并操作，保留路径图像和第三图像两个图像中均为白色的区域，也就是说，路径图像中的任一位置，如果在路径图像中该位置的颜色为白色，对应地，在第三图像中该位置的颜色也为白色，那么可以保留该位置的颜色为白色，否则该位置的颜色则为黑色；通过上述的并操作，可以得到一个由路径图像和第三图像合并后的图像，如果该图像为一个全黑的图像，即没有白色的区域，则可以认为没有路径与不可通行区域相交，即检测结果为游戏角色未穿过不可通行区域；如果该图像存在有白色的区域，则可以认为路径与不可通行区域存在相交，即游戏角色穿过不可通行区域。

此外，在本实施例中还可以通过比较路径图像和第三图像中坐标点的位置来获得检测结果。具体地，可以获取路径图像中路径上的所有坐标点，并且获取第三图像中不可通行区域上的所有坐标点，然后将用于构成路径的坐标点(以下简称路径坐标点)与用于构成不可通行区域的坐标点(以下简称不可通行区域坐标点)进行比较，若存在有路径坐标点是与不可通行区域坐标点一致的，那么可以认为路径与不可通行区域存在相交，即游戏角色穿过不可通行区域，否则，认为没有路径与不可通行区域相交，即检测结果为游戏角色未穿过不可通行区域。

本申请实施例中基于待检测视频获取目标图像集合，然后截取目标图像集合中图像所对应的小地图，并且检测这些小地图中游戏角色的位置，从而获得游戏角色的行走路径，最后通过将游戏角色的行走路径与标记有不可通行区域的图像进行对比，获得游戏角色是否有穿过不可通行区域的检测结果，通过检测和对比图像即可完成整个检测过程，检测效率高，且无需人工参与，节省了人力和物力。

可选地，在本申请实施例提供的一种基于交互式应用的对象检测方法的一个可选实施例中，获得检测结果为交互对象穿过不可通行区域之后，方法还包括：根据路径图像和第三图像获取合并图像，合并图像为路径图像与第三图像合并后得到的图像；输出合并图像。

在本实施例中，在获得检测结果为交互对象穿过不可通行区域之后，可以输出路径图像和第三图像合并之后得到的路径相交图，以便于后续测试人员可以进一步根据路径相交图核实游戏角色是否确实穿过了不可通行区域。具体地，可以参阅图4和图5，图4为本申请实施例提供的一种路径图像和第三图像合并之后得到的路径相交图示例图；图5为本申请实施例提供的一种路径图像和第三图像合并之后得到的路径相交图示例图。可以看出，在图4和图5中，相当于将路径图像中的路径叠加在了第三图像中，得到了路径图像和第三图像重叠之后的图像。具体地，图4和图5中的黑色区域为不可通行区域，曲线为游戏角色的行走路径，显然，表示行走路径的曲线与其中的不可通行区域存在有相交，也就是说，游戏角色穿过了不可通行区域。

可选地，在本申请实施例提供的一种基于交互式应用的对象检测方法的一个可选实施例中，将路径图像与第三图像进行对比之前，方法还包括：获取图像库，图像库中包括有多个待匹配图像，多个待匹配图像为基于交互式应用的全局图像，且多个待匹配图像对应于交互式应用中的不同场景；将第二图像与多个待匹配图像进行匹配处理；若图像库中存在有与第二图像匹配的待匹配图像，则确定与第二图像匹配的待匹配图像为第三图像。

可以理解的是，对于某些FPS游戏来说，该游戏中可能会存在有多种虚拟场景，用户可以选择在不同的虚拟场景进行作战，例如包括有以轮船建筑为背景的虚拟场景、以沙漠中的建筑为背景的虚拟场景或者是以雪地中的建筑为背景的虚拟场景，用户选择了不同的作战场景时，所对应的小地图也是不一样的。因此，即便是对于同一个游戏的待检测视频来说，在整个待检测视频可能有多场对局游戏，而不同的对局游戏对应的小地图是不一样的。基于此，可以预先建立一个图像库，图像库中包括有多个对应于不同场景下的纯净小地图，这样，在需要将路径图像和第三图像进行对比之前，将图像库中的纯净小地图和第二图像进行匹配处理，例如将图像库中的每一个纯净小地图都和第二图像进行模板匹配，并且记录下每一次匹配的相似度；然后在图像库中找出与第二图像之间的相似度最大的纯净小地图，如果该纯净小地图与第二图像之间的相似度大于预设的匹配阈值时，则将该纯净小地图作为对局场景中的小地图，即作为与路径图像进行对比的第三图像。

其中，图像库中的待匹配图像是通过收集游戏中所有场景的游戏图像，并且对这些游戏图像进行处理后得到的。具体地，首先收集某一个游戏中所有场景下的游戏图像，并且对于同一个场景，采集多张游戏图像，每张图像中游戏角色在小地图中的位置均不相同；然后，根据小地图在这些游戏图像中的位置，截取这些游戏图像中的小地图；最后，根据同一个场景中的多张游戏图像生成纯净小地图，具体地，可以参阅图6，图6为本申请实施例提供的基于多张游戏图像中的小地图生成纯净小地图的示例图。如图6所示，原始小地图中是带有游戏角色的圆点的，然后通过对原始小地图进行检测，获得原始小地图中用于表示游戏角色的圆点，并且将这些圆点标记出来，得到处理后的小地图；通过对比多张处理后的小地图，去掉小地图中的圆点，便可以合成得到一个纯净的小地图。

可选地，在本申请实施例提供的一种基于交互式应用的对象检测方法的一个可选实施例中，确定与第二图像匹配的待匹配图像为第三图像之前，方法还包括：对图像库中的待匹配图像进行灰度化处理，获得多个灰度图像；根据多个灰度图像中像素点的灰度值，对多个灰度图像进行区域标记，获得多个标记有可通行区域和不可通行区域的待匹配图像；将第二图像与多个待匹配图像进行匹配处理，包括：将第二图像与图像库中标记有可通行区域和不可通行区域的待匹配图像进行匹配处理。

可以理解的是，由于游戏中的小地图往往采用不同的颜色来表示可通行区域和不可通行区域，例如采用深褐色表示不可通行区域，而采用浅褐色表示可通行区域，那么，在需要获得标记有可通行区域以及不可通行区域的待匹配图像时，可以先将待匹配图像进行灰度化处理，即将待匹配图像中的每个像素点均转化为灰度像素点，即每个像素点可以用0-255灰度值来表示，这样一来，便可以根据每个像素点原来的深色程度赋予相应的灰度值。对于大部分游戏来说，不可通行区域一般设置为较为深色，而可通行区域则设置为较为浅色，因此，转化为灰度图像之后的待匹配图像中不可通行区域的灰度值往往会大于可通行区域的灰度值。基于此，可以通过设置一个预设的灰度阈值，当像素点的灰度阈值大于该灰度阈值时，认为该像素点属于不可通行区域，当像素点的灰度阈值小于该灰度阈值时，认为该像素点属于可通行区域，这样，便可以将灰度图像中的可通行区域和不可通行区域标记出来。

可选地，在本申请实施例提供的一种基于交互式应用的对象检测方法的一个可选实施例中，根据待检测视频，获取目标图像集合，包括：

根据待检测视频，获取多帧连续的图像；若多帧连续的图像中包括有第四图像和第五图像，则根据多帧连续的图像获取位于第四图像和第五图像之间的多个目标图像，获得目标图像集合，其中第四图像中包括有第一标识，第一标识表示交互式应用运行过程中的第一场景，第五图像中包括有第二标识，第二标识表示交互式应用运行过程中的第二场景。

可以理解的是，对于一些FPS或者MOBA游戏来说，游戏是以对局的方式进行游玩的，即用户通过参加一个游戏对局来和其他的用户共同在一个场景下进行游戏，这样的一个游戏对局可能需要十多分钟或者二十多分钟，甚至更长时间，在游戏对局开始之前，用户往往需要选择加入哪个游戏对局，并且在进入游戏对局的时候也需要先进入到加载页面，在游戏对局结束之后，用户则可以查看游戏对局的战绩，或者更换自己的装备等等。显然，只有在用户加入了游戏对局且游戏对局正常开始之后，在游戏过程中才会显示相应的小地图，即在用户加入游戏对局之前，或者是进行了游戏对局之后，相应的游戏画面对于检测是否可以穿越不可通行区域是没有帮助的。此外，由于同一个待检测视频中可能包括有多次对局的情况，而每次对局的场景可能是不一样的，即每次对局的小地图可能是不一样的，因此，可以将待检测视频按对局情况进行分段，得到属于同一个对局内的目标图像集合。因此，在获得待检测视频对应的图像集合之后，可以将图像集合中与游戏对局无关的图像剔除，即只考虑游戏对局中存在有小地图的图像。具体地，由于基于待检测视频得到的图像是连续的，那么可以对这些图像进行检测，如果检测到图像中存在有表示游戏对局开始的标识(即第一标识)，即代表该图像之后的图像为一个游戏对局中的图像，如果检测到图像中存在有表示游戏对局结束的标识(即第二标识)，则代表该图像之前的图像为一个游戏对局中的图像，因此，只要获取到表示游戏对局开始对应的图像和表示游戏对局结束对应的图像之间的图像作为目标图像集合，即可以得到一个游戏对局内的所有图像。具体地，可以参阅图7，图7为本申请实施例提供的一种目标图像集合的示例图。如图7所示，图7中701表示的是检测到的表示游戏对局开始的第四图像；702表示的是位于表示游戏对局开始的第四图像和表示游戏对局结束的第五图像之间的所有图像；703表示的是表示游戏对局结束的第五图像。

为了便于理解，以下将结合具体的例子对本申请实施例提供的基于交互式应用的对象检测方法进行详细的描述。

可以参阅图8，图8为本申请实施例提供的基于交互式应用的对象检测方法的示例图。

其中，整个检测流程分为两部分，分别为准备阶段和检测阶段，各个阶段的具体流程具体如下：

一、准备阶段；

801、首先输入预先收集到的游戏图像集合，该游戏图像集合中可以包括同一个游戏中不同场景的游戏图像，也可以包括不同游戏中的游戏图像，主要用于构建小地图库；

802、对游戏图像集合中的游戏图像进行小地图采集，并且生成纯净小地图；

803、对所生成的纯净小地图进行区域标记，标记出纯净小地图中的可通行区域和不可通行区域；

804、在对所有的纯净小地图进行区域标记之后，输出得到的小地图库；

二、检测阶段。

805、输入待检测的游戏视频，该待检测的游戏视频可以同一个游戏中的游戏视频，也可以是多个游戏对应的游戏视频；

806、对该待检测的游戏视频进行分段，得到多个对局游戏所对应的游戏视频，并且基于这些分段后的游戏视频，获取相应的目标图像集合；

807、对目标图像集合进行小地图识别，识别并且截取目标图像集合中的目标图像对应的小地图；

808、基于截取到的目标图像中的小地图，检测这些小地图中游戏角色的位置，得到游戏角色的路径；

809、根据游戏角色的路径，检测该游戏角色是否有穿越不可通行区域；

810、输出检测结果，该检测结果为游戏角色穿越不可通行区域或游戏角色未穿越不可通行区域。

下面对本申请实施例中的业务处理的装置进行详细描述，请参阅图9，图9为本申请实施例中提供的一种基于交互式应用的对象检测装置一个实施例示意图，基于交互式应用的对象检测装置90包括：

获取单元901，用于根据待检测视频，获取目标图像集合，待检测视频为记录有交互式应用运行过程的视频，图像集合包括有多个第一图像；

截取单元902，用于在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；

获取单元901，还用于对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；

获取单元901，还用于根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；

对比单元903，用于将路径图像与第三图像进行对比，获得检测结果，其中，第三图像为基于交互式应用的全局图像，且第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域。

可选地，在上述图9所对应的实施例的基础上，本申请实施例提供的基于交互式应用的对象检测装置90的另一实施例中，还包括确定单元904；

获取单元901，还用于对第二图像进行检测，获取第一位置对应的第一坐标点，第一位置为第二图像中交互对象的位置；

确定单元904，用于根据多个第二图像，确定分别与多个第二图像对应的多个第一坐标点；

获取单元901，还用于若多个第一坐标点中包括有第二坐标点和第三坐标点，则将第二坐标点与第三坐标点连接，获得路径图像，其中，第二坐标点和第三坐标点分别对应于任意两个相邻的第二图像。

可选地，在上述图9所对应的实施例的基础上，本申请实施例提供的基于交互式应用的对象检测装置90的另一实施例中，

获取单元901，还用于获取路径图像中第一区域的颜色以及第三图像中第二区域的颜色，其中，第一区域在路径图像中的位置与第二区域在第三图像中的位置相同，路径图像中的路径为第一颜色，第三图像中的不可通行区域为第一颜色；

对比单元903，还用于若第一区域的颜色和第二区域的颜色均为第一颜色，则获得检测结果为交互对象穿过不可通行区域；

对比单元903，还用于若第一区域的颜色和第二区域的颜色并非均为第一颜色，则获得检测结果为交互对象未穿过不可通行区域。

可选地，在上述图9所对应的实施例的基础上，本申请实施例提供的基于交互式应用的对象检测装置90的另一实施例中，还包括输出单元905；

获取单元901，还用于根据路径图像和第三图像获取合并图像，合并图像为路径图像与第三图像合并后得到的图像；

输出单元905，用于输出合并图像。

可选地，在上述图9所对应的实施例的基础上，本申请实施例提供的基于交互式应用的对象检测装置90的另一实施例中，还包括处理单元906；

获取单元901，用于获取图像库，图像库中包括有多个待匹配图像，多个待匹配图像为基于交互式应用的全局图像，且多个待匹配图像对应于交互式应用中的不同场景；

处理单元906，用于将第二图像与多个待匹配图像进行匹配处理；

确定单元904，用于若图像库中存在有与第二图像匹配的待匹配图像，则确定与第二图像匹配的待匹配图像为第三图像。

可选地，在上述图9所对应的实施例的基础上，本申请实施例提供的基于交互式应用的对象检测装置90的另一实施例中，

处理单元906，还用于对图像库中的待匹配图像进行灰度化处理，获得多个灰度图像；

处理单元906，还用于根据多个灰度图像中像素点的灰度值，对多个灰度图像进行区域标记，获得多个标记有可通行区域和不可通行区域的待匹配图像；

处理单元906，还用于将第二图像与图像库中标记有可通行区域和不可通行区域的待匹配图像进行匹配处理。

可选地，在上述图9所对应的实施例的基础上，本申请实施例提供的基于交互式应用的对象检测装置90的另一实施例中，

获取单元901，还用于根据待检测视频，获取多帧连续的图像；

获取单元901，还用于若多帧连续的图像中包括有第四图像和第五图像，则根据多帧连续的图像获取位于第四图像和第五图像之间的多个目标图像，获得目标图像集合，其中第四图像中包括有第一标识，第一标识表示交互式应用运行过程中的第一场景，第五图像中包括有第二标识，第二标识表示交互式应用运行过程中的第二场景。

图10是本申请实施例提供的一种服务器结构示意图，该服务器1000可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上中央处理器(central processingunits，CPU)1022(例如，一个或一个以上处理器)和存储器1032，一个或一个以上存储应用程序1042或数据1044的存储介质1030(例如一个或一个以上海量存储设备)。其中，存储器1032和存储介质1030可以是短暂存储或持久存储。存储在存储介质1030的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对服务器中的一系列指令操作。更进一步地，中央处理器1022可以设置为与存储介质1030通信，在服务器1000上执行存储介质1030中的一系列指令操作。

服务器1000还可以包括一个或一个以上电源1026，一个或一个以上有线或无线网络接口1050，一个或一个以上输入输出接口1058，和/或，一个或一个以上操作系统1041，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM等等。

在本申请实施例中，该服务器1000所包括的CPU 1022还具有以下功能：

根据待检测视频，获取目标图像集合，待检测视频为记录有交互式应用运行过程的视频，图像集合包括有多个第一图像；

在第一图像中截取第二图像，第二图像为基于交互式应用的全局图像；

对第二图像进行检测，获取第一位置，第一位置为第二图像中交互对象的位置；

根据多个第二图像，获取路径图像，路径图像中包括有由多个第一位置连接构成的路径；

将路径图像与第三图像进行对比，获得检测结果，其中，第三图像为基于交互式应用的全局图像，且第三图像中标记有可通行区域和不可通行区域，检测结果为交互对象穿过不可通行区域或交互对象未穿过不可通行区域。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (9)

1.一种基于交互式应用的对象检测方法，其特征在于，包括：

根据待检测视频，获取目标图像集合，所述待检测视频为记录有交互式应用运行过程的视频，所述图像集合包括有多个第一图像；

在所述第一图像中截取第二图像，所述第二图像为基于所述交互式应用的全局图像；

对所述第二图像进行检测，获取第一位置对应的第一坐标点，所述第一位置为所述第二图像中交互对象的位置；

根据多个所述第二图像，确定分别与多个所述第二图像对应的多个所述第一坐标点；

若多个所述第一坐标点中包括有第二坐标点和第三坐标点，则将所述第二坐标点与所述第三坐标点连接，获得路径图像，所述第二坐标点和所述第三坐标点分别对应于任意两个相邻的所述第二图像，所述路径图像中包括有由多个所述第一位置连接构成的路径；

将路径图像与第三图像进行对比，获得检测结果，其中，所述第三图像为基于所述交互式应用的全局图像，且所述第三图像中标记有可通行区域和不可通行区域，所述检测结果为所述交互对象穿过所述不可通行区域或所述交互对象未穿过所述不可通行区域。

2.根据权利要求1所述的基于交互式应用的对象检测方法，其特征在于，所述将路径图像与第三图像进行对比，获得检测结果，包括：

获取所述路径图像中第一区域的颜色以及所述第三图像中第二区域的颜色，其中，所述第一区域在所述路径图像中的位置与所述第二区域在所述第三图像中的位置相同，所述路径图像中的路径为第一颜色，所述第三图像中的不可通行区域为所述第一颜色；

若所述第一区域的颜色和所述第二区域的颜色均为所述第一颜色，则获得检测结果为所述交互对象穿过所述不可通行区域；

若所述第一区域的颜色和所述第二区域的颜色并非均为所述第一颜色，则获得检测结果为所述交互对象未穿过所述不可通行区域。

3.根据权利要求2所述的基于交互式应用的对象检测方法，其特征在于，所述获得检测结果为所述交互对象穿过所述不可通行区域之后，所述方法还包括：

根据所述路径图像和第三图像获取合并图像，所述合并图像为所述路径图像与所述第三图像合并后得到的图像；

输出所述合并图像。

4.根据权利要求1所述的基于交互式应用的对象检测方法，其特征在于，所述将路径图像与第三图像进行对比之前，所述方法还包括：

获取图像库，所述图像库中包括有多个待匹配图像，所述多个待匹配图像为基于所述交互式应用的全局图像，且所述多个待匹配图像对应于所述交互式应用中的不同场景；

将所述第二图像与所述多个待匹配图像进行匹配处理；

若所述图像库中存在有与所述第二图像匹配的待匹配图像，则确定所述与所述第二图像匹配的待匹配图像为第三图像。

5.根据权利要求4所述的基于交互式应用的对象检测方法，其特征在于，所述确定所述与所述第二图像匹配的待匹配图像为第三图像之前，所述方法还包括：

对所述图像库中的待匹配图像进行灰度化处理，获得多个灰度图像；

根据所述多个灰度图像中像素点的灰度值，对所述多个灰度图像进行区域标记，获得多个标记有可通行区域和不可通行区域的待匹配图像；

将所述第二图像与所述多个待匹配图像进行匹配处理，包括：

将所述第二图像与图像库中标记有可通行区域和不可通行区域的待匹配图像进行匹配处理。

6.根据权利要求1所述的基于交互式应用的对象检测方法，其特征在于，所述根据待检测视频，获取目标图像集合，包括：

根据所述待检测视频，获取多帧连续的图像；

若所述多帧连续的图像中包括有第四图像和第五图像，则根据所述多帧连续的图像获取位于所述第四图像和所述第五图像之间的多个目标图像，获得目标图像集合，其中所述第四图像中包括有第一标识，所述第一标识表示交互式应用运行过程中的第一场景，所述第五图像中包括有第二标识，所述第二标识表示交互式应用运行过程中的第二场景。

7.一种基于交互式应用的对象检测装置，其特征在于，包括：

获取单元，用于根据待检测视频，获取目标图像集合，所述待检测视频为记录有交互式应用运行过程的视频，所述图像集合包括有多个第一图像；

截取单元，用于在所述第一图像中截取第二图像，所述第二图像为基于所述交互式应用的全局图像；

所述获取单元，还用于对所述第二图像进行检测，获取第一位置对应的第一坐标点，所述第一位置为所述第二图像中交互对象的位置；

所述获取单元，还用于根据多个所述第二图像，确定分别与多个所述第二图像对应的多个所述第一坐标点；

所述获取单元，还用于若多个所述第一坐标点中包括有第二坐标点和第三坐标点，则将所述第二坐标点与所述第三坐标点连接，获得路径图像，所述第二坐标点和所述第三坐标点分别对应于任意两个相邻的所述第二图像，所述路径图像中包括有由多个所述第一位置连接构成的路径；

对比单元，用于将路径图像与第三图像进行对比，获得检测结果，其中，所述第三图像为基于所述交互式应用的全局图像，且所述第三图像中标记有可通行区域和不可通行区域，所述检测结果为所述交互对象穿过所述不可通行区域或所述交互对象未穿过所述不可通行区域。

8.一种终端设备，其特征在于，包括：存储器、收发器、处理器以及总线系统；

其中，所述存储器用于存储程序；

所述处理器用于执行所述存储器中的程序，包括如下步骤：

根据待检测视频，获取目标图像集合，所述待检测视频为记录有交互式应用运行过程的视频，所述图像集合包括有多个第一图像；

在所述第一图像中截取第二图像，所述第二图像为基于所述交互式应用的全局图像；

对所述第二图像进行检测，获取第一位置对应的第一坐标点，所述第一位置为所述第二图像中交互对象的位置；

根据多个所述第二图像，确定分别与多个所述第二图像对应的多个所述第一坐标点；

若多个所述第一坐标点中包括有第二坐标点和第三坐标点，则将所述第二坐标点与所述第三坐标点连接，获得路径图像，所述第二坐标点和所述第三坐标点分别对应于任意两个相邻的所述第二图像，所述路径图像中包括有由多个所述第一位置连接构成的路径；

将路径图像与第三图像进行对比，获得检测结果，其中，所述第三图像为基于所述交互式应用的全局图像，且所述第三图像中标记有可通行区域和不可通行区域，所述检测结果为所述交互对象穿过所述不可通行区域或所述交互对象未穿过所述不可通行区域；

所述总线系统用于连接所述存储器以及所述处理器，以使所述存储器以及所述处理器进行通信。

9.一种计算机可读存储介质，包括指令，当其在计算机上运行时，使得计算机执行如权利要求1至6中任一项所述的方法。

Images