CN108355347B - 交互控制方法、装置、电子设备及存储介质 - Google Patents

Abstract

本公开提供了一种交互控制方法、交互控制装置、电子设备及计算机可读存储介质，涉及人机交互领域。该方法包括：呈现所述图像采集模块获取的现实场景的图像，所述现实场景至少包含一可识别的现实对象；根据接收到的选择操作事件，指定一所述现实对象为控制主体；获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动。本公开可以使玩家不依靠外设装置的实现游戏的体感控制，操作方便。

Description

交互控制方法、装置、电子设备及存储介质

技术领域

本公开涉及人机交互领域，具体而言，涉及一种交互控制方法、交互控制装置、电子设备及计算机可读存储介质。

背景技术

体感类游戏近年来深受玩家欢迎。传统的PC游戏必须用键盘或鼠标操作，手机游戏必须用触屏操作，而体感类游戏中玩家通过自己的肢体动作控制游戏，具有更好的沉浸感与交互感，并且玩家能够一边游戏一边运动，游戏方式更加健康。

现有体感类游戏中的体感控制大多是通过外设装置实现的，例如日本任天堂公司的Wii游戏机就有大量外设装置，在羽毛球、网球类游戏中，玩家需要手持游戏球拍控制游戏中的人物做挥拍、击球等动作，在射击、射箭类游戏中，玩家需要用游戏枪对准屏幕瞄准或射击；基于VR(Virtual Reality，虚拟现实)设备的体感游戏同样离不开外设装置，以日本索尼公司为其PS(Play Station)游戏机配套开发的PS VR为例，在基于PS VR的游戏中，人物的手部动作，如移动物品、挥动武器等，均需要通过外设手柄实现。

目前还没有不依靠外设装置，使玩家直接用手或身体其他部位操作游戏的方法。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种信息提示方法及一种信息提示装置、电子设备及计算机可读存储介质，进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的无法摆脱外设装置而直接用手或身体其他部位控制游戏中虚拟对象的问题。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的一个方面，提供一种交互控制方法，应用于具有图像采集模块的终端，所述终端可至少部分的呈现一虚拟场景，所述方法包括：

呈现所述图像采集模块获取的现实场景的图像，所述现实场景至少包含一可识别的现实对象；

根据接收到的选择操作事件，指定一所述现实对象为控制主体；

获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动。

在本公开的一种示例性实施例中，所述方法还包括：

根据作用于所述虚拟控制器的第一指令事件，建立所述虚拟控制器与所述虚拟场景中虚拟对象之间的临时关联；

根据作用于所述虚拟控制器的第二指令事件，对所述虚拟对象执行第二指令；

根据作用于所述虚拟控制器的第三指令事件，解除所述临时关联。

在本公开的一种示例性实施例中：所述第二指令包括移动指令、转动指令或移除指令中的一种或几种。

在本公开的一种示例性实施例中，所述方法还包括：

根据接收到的关联操作事件，建立所述虚拟控制器与所述虚拟场景中虚拟角色之间的固定关联；

根据所述虚拟控制器的运动控制所述虚拟角色运动。

在本公开的一种示例性实施例中：所述图像采集模块包括空间定位单元，所述现实场景的图像为三维图像。

在本公开的一种示例性实施例中，所述根据接收到的选择操作事件，指定一所述现实对象为控制主体包括：

根据接收到的第一选择操作事件指定一所述现实对象为控制主体，并呈现与所述控制主体同步移动的控制光标；

根据所述控制主体的位置变化移动所述控制光标；

根据接收到的第二选择操作事件重新指定所述控制主体；

根据接收到的第三选择操作事件确定所述控制主体。

在本公开的一种示例性实施例中，所述方法还包括：

通过检测所述控制主体的移动和/或转动，校准所述控制主体。

在本公开的一种示例性实施例中，所述方法还包括：

如果检测到所述控制主体移动到所述图像采集模块的采集范围以外，则维持所述虚拟控制器在当前位置静止。

在本公开的一种示例性实施例中：所述现实对象包括第一现实对象与第二现实对象，所述控制主体包括第一控制主体与第二控制主体，所述虚拟控制器包括第一虚拟控制器与第二虚拟控制器。

根据本公开的一个方面，提供一种交互控制装置，应用于可至少部分的呈现一虚拟场景的终端，所述装置包括：

图像采集模块，用于获取并呈现现实场景的图像，所述现实场景至少包含一可识别的现实对象；

对象选择模块，用于根据接收到的选择操作事件，指定一所述现实对象为控制主体；

运动控制模块，用于获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动。

根据本公开的一个方面，提供一种电子设备，包括：

处理器；以及

存储器，用于存储所述处理器的可执行指令；

其中，所述处理器配置为经由执行所述可执行指令来执行上述任意一项所述的交互控制方法。

根据本公开的一个方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任意一项所述的交互控制方法。

本公开示例实施实施提供的交互控制方法、交互控制装置、电子设备及计算机可读存储介质，在现实场景的图像中选择一现实对象为控制主体，获取该控制主体在现实场景中的位置，并控制虚拟场景中的虚拟控制器进行相应的运动，一方面，使玩家能够通过移动作为控制主体的现实对象进行游戏操作，从而实现不依靠外设装置的游戏体感控制，操作方便，同时节省了外设装置的成本；另一方面，玩家可以任意选择现实场景中的现实对象为控制主体，除了身体部位外，还可以是其他物体，游戏的交互方式具有很高的自由度，玩家的游戏体验好。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

通过参照附图来详细描述其示例实施例，本公开的上述和其他特征及优点将变得更加明显。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1示出本公开示例性实施例中一种交互控制方法的流程图；

图2示出本公开示例性实施例中一种交互控制显示界面的示意图；

图3示出本公开示例性实施例中一种交互控制方法的流程图；

图4示出本公开示例性实施例中一种交互控制显示界面的示意图；

图5示出本公开示例性实施例中一种交互控制显示界面的示意图；

图6示出本公开示例性实施例中一种控制主体选择方法的示意图；

图7示出本公开示例性实施例中一种交互控制装置的结构框图；

图8示出本公开示例性实施例中一种电子设备的结构示意图；

图9示出本公开示例性实施例中一种程序产品的示意图。

具体实施方式

现在将参考附图更全面地描述示例实施例。然而，示例实施例能够以多种形式实施，且不应被理解为限于在此阐述的实施例；相反，提供这些实施例使得本公开将全面和完整，并将示例实施例的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。

此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本公开的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而没有所述特定细节中的一个或更多，或者可以采用其他的方法、组元、材料、装置、步骤等。在其他情况下，不详细示出或描述公知结构、方法、装置、实现、材料或者操作以避免模糊本公开的各方面。

附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个软件硬化的模块中实现这些功能实体或功能实体的一部分，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

需要说明的是，本公开中，用语“一个”、“一”、“该”和“所述”用以表示存在一个或多个要素/组成部分/等；用语“包括”、“具有”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等；用语“第一”、“第二”与“第三”等仅作为标记使用，不是对其对象顺序的限制。

在本公开的示例性实施例中，提供了一种交互控制方法，可以应用于具有图像采集模块的终端，所述终端可至少部分的呈现一虚拟场景。其中，所述图像采集模块可以包括摄像单元与显示单元，所述摄像单元可以是光学摄像头、数码摄像头或红外摄像头等，所述显示单元可以是所述终端的显示区域，如显示器、触控屏幕等，摄像单元对现实场景进行拍摄后，通过显示单元进行呈现；所述终端可以是具备拍摄功能的PC、智能手机、平板电脑或游戏机等电子设备，目前大部分电子设备都内置有摄像头，可以实现图像采集功能；所述终端还可以包括用于存储数据的存储器和用于数据处理的处理器，在存储器上安装游戏应用，实现游戏程序的执行；游戏程序可以通过终端的应用程序接口控制终端的显示区域呈现游戏的虚拟场景，例如虚拟战斗场景、虚拟自然环境等，显示区域所呈现的可以为所述虚拟场景的一部分，也可以为虚拟场景的全部，本公开对此不作特别限定。如图1所示，所述交互控制方法可以包括以下步骤：

S101.呈现所述图像采集模块获取的现实场景的图像，所述现实场景至少包含一可识别的现实对象；

S102.根据接收到的选择操作事件，指定一所述现实对象为控制主体；

S103.获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动。

在一示例性实施例中，如图2所示，在手机上玩移动木块类的游戏，在开始游戏前，程序可以先通过手机上的摄像头201拍照，玩家在照片202中选择控制主体，例如可以选择手指203；开始游戏后，程序显示出游戏场景204，其中包含一虚拟控制器，例如可以是一光标205，游戏时摄像头201保持打开状态，可以实时获取当前现实场景的图像，玩家在摄像头201的拍摄范围内移动手指203，程序通过摄像头201获取手指203的实时位置，可以控制游戏中光标205相应的移动。

在本示例性实施例中，所使用的摄像头可以是前置摄像头，也可以是后置摄像头。使用前置摄像头可以使玩家在面对手机屏幕的情况下进行游戏，符合玩家的操作习惯以及多数游戏设计的操作环境；而通常后置摄像头具有更高的拍摄质量，使用后置摄像头可以获得更高的操作精准度，可以适用于一些特殊情况下，例如用大屏幕投影手机屏幕进行游戏时，可以通过后置摄像头操作游戏，不影响玩家同时观看屏幕，或者适用于一些特别设计的游戏中，例如双人配合的趣味游戏，可以一人在手机屏幕前指挥，另一人在后置摄像头前做动作控制游戏，从而给玩家多样的游戏体验。选择控制主体可以通过摄像头拍照后，点击照片中的现实对象，例如点击手指，以进行选择，也可以在摄像头打开的状态下，移动现实场景中的现实对象，例如移动手指，使摄像头识别出移动的对象，指定其为控制主体。控制主体可以选取现实场景内的任意物体，除了玩家的手指外，也可以是其他身体部位，例如在跳舞机类的游戏中，玩家可以指定脚部为控制主体，通过脚部的移动及跳跃控制游戏角色，或者可以是玩家身体部位以外的物体，例如可以是场景中的一支铅笔，在游戏中移动该铅笔可使虚拟控制器移动，或者现实的一个球拍，通过挥动该球拍控制游戏角色做挥拍等动作，通常选取与场景的背景反差比较明显的对象为控制主体，有利于程序更好的识别与定位。游戏虚拟场景中的虚拟控制器可以是进行游戏控制的一个标识或工具，例如一个点、光标、指针等，也可以是在游戏中具有实际形态的对象，例如游戏中的一把武器、游戏人物的一只手等，通过移动该虚拟控制器实现游戏控制，例如本实施例中用手指控制虚拟控制器移动，进而移动游戏中的障碍物，虚拟控制器在不同游戏中可以实现不同的控制功能，其操作方式与类型也非常多样化，在后面的实施例中将具体说明。

本示例性实施例中的交互控制方法，通过在现实场景的图像中选择一现实对象为控制主体，并检测该控制主体在现实场景中的位置，控制虚拟场景中的虚拟控制器运动，作为控制主体的现实对象可以是玩家的手或其他身体部位，从而使玩家能够不依靠外设装置的实现游戏的体感控制，游戏操作方便，同时节省了外设装置的成本；另一方面，还可以选择玩家身体部位以外的物体作为控制主体，使玩家的操作具有很高的自由度，游戏体验好。

在一示例性实施例中，虚拟场景中有多个虚拟对象，可以通过虚拟控制器选择需要操作的虚拟对象，如图3所示，所述方法还可以包括：

S308.根据作用于所述虚拟控制器的第一指令事件，建立所述虚拟控制器与所述虚拟场景中虚拟对象之间的临时关联；

S309.根据作用于所述虚拟控制器的第二指令事件，对所述虚拟对象执行第二指令；

S310.根据作用于所述虚拟控制器的第三指令事件，解除所述临时关联。

如图2所示，在本实施例中，第一指令事件可以是将光标205移至需要控制的木块206上停留一定时间，程序在光标205与木块206之间建立临时关联，临时关联是指临时的为虚拟控制器的指令指定执行对象，被虚拟控制器临时关联的虚拟对象可以通过一定的方式进行标识，例如可以用虚线圈出虚拟对象，也可以使该虚拟对象变色等；然后玩家通过光标205下达的第二指令都在木块206上进行执行，例如向下移动光标205，木块206也随之向下移动，当玩家想结束对木块206的操作转而操作其他木块时，可以通过第三指令事件解除临时关联，第三指令事件可以是以顺时针45°转动光标205。当解除临时关联后，如果玩家想重新选择其他的虚拟对象，则可以返回S308步骤。

在不同的游戏中，第一、第二与第三指令事件可以是不同的指令或操作形式。第一指令事件的作用是选择虚拟对象与建立临时关联，选择虚拟对象的操作通常可以是移动虚拟控制器到虚拟对象上，也可以通过呈现一罗列场景中全部虚拟对象的选择框，使玩家在该选择框内用虚拟控制器选择具体的虚拟对象；建立临时关联的操作可以是使虚拟控制器在虚拟对象上停留一定时间，当停留时间超过预设的时间阈值时，程序触发临时关联，也可以是使虚拟控制器在虚拟对象的范围内转动一定角度，通过类似手势操作的方法触发临时关联，在具备麦克风的终端上，还可以通过语音控制的方法，例如可以在虚拟控制器处于虚拟对象上时，玩家对麦克风说“关联”，程序识别出该语音后触发临时关联；第二指令事件的作用是对虚拟对象实施具体的操作，在一示例性实施例中，所述第二指令可以包括移动指令、转动指令或移除指令中的一种或几种，例如可以通过移动虚拟控制器移动虚拟对象，可以通过转动虚拟控制器转动虚拟对象，可以通过快速滑动虚拟控制器从虚拟场景中移除虚拟对象，也可以在建立临时关联后弹出指令选项框，玩家可以移动虚拟控制器在其中选择所要实施的具体指令，除此，第二指令还可以是对虚拟对象执行的查看、使用、装备等其他类型的指令；第三指令事件的作用是解除虚拟控制器与当前虚拟对象的临时关联，使玩家可以结束对当前虚拟对象的操作，或者转而去操作其他虚拟对象，其具体的方式可以是类似于第一指令事件中建立临时关联的操作，例如停留一定时间、特定角度转动等，建立临时关联与解除临时关联的操作可以相同，例如可以将虚拟控制器置于一虚拟对象上，停留一定时间建立临时关联，再停留一定时间解除关联，也可以不同，例如可以将虚拟控制器置于一虚拟对象上，逆时针45°转动虚拟控制器建立临时关联，顺时针45°转动虚拟控制器解除临时关联；在临时关联期间，由于虚拟控制器与虚拟对象是同步移动的，可以隐藏虚拟控制器，在解除临时关联后再显示，也可以始终显示虚拟控制器。需要说明的是，第一、第二与第三指令事件还可以是上述各种指令以外的指令形式，本公开对此不作特别限定。

在一示例性实施例中，玩家可以通过控制主体与虚拟控制器控制虚拟角色，所述方法还可以包括：

根据接收到的关联操作事件，建立所述虚拟控制器与所述虚拟场景中虚拟角色之间的固定关联；

根据所述虚拟控制器的运动控制所述虚拟角色运动。

固定关联是指为虚拟控制器的指令指定固定的执行对象，在游戏过程中始终保持该关联，通常固定关联对象可以是玩家控制的虚拟角色，如图4所示，当玩家选择控制主体401后，程序可以默认将虚拟控制器与虚拟角色402固定关联，当玩家移动控制主体401时，程序控制虚拟角色402相应的移动，例如用图4中的平面坐标系来说明，可以将控制主体401从(X1，Y1，A1)处移动到(X2，Y2，A2)处，即向下平移同时顺时针转动，则虚拟角色402也相应的向下移动并顺时针转身。在此过程中，由于虚拟控制器与虚拟角色402始终关联，在虚拟场景中可以隐藏虚拟控制器，使虚拟场景更加简洁，当然也可以在虚拟场景中显示出虚拟控制器，以便于玩家识别及操作。

本实施例的控制方法可以应用于2D平面游戏中，玩家通过在图像采集模块所能检测的平面范围内移动控制主体，实现对游戏虚拟场景中虚拟角色或虚拟对象的操控，也可以应用于3D游戏中，玩家通过在现实的空间范围内移动控制主体，使游戏中对应的虚拟角色或虚拟对象在三维场景中运动。理论上同侧的单摄像头可以实现平面定位，同侧的双摄像头可以实现空间定位，目前市面上后置双摄像头已经成为高端手机的标准配置，甚至有多款手机还配备了前置双摄像头，都具有一定的空间成像能力，能通过距离检测与调节景深达到更好的拍照效果，在配置了合适的软件程序的情况下，其也可以实现空间定位。除了手机外，目前主流的VR设备也都具备一定的空间定位功能，例如HTC Vive头戴式设备配套的Lighthouse系统通过灯塔激光技术定位，PS VR头戴式显示器通过摄像头模组光学定位，在软件改进的基础上，都可以实现对场景内任一物体空间定位，例如实时检测玩家的手在现实空间中的位置，将其关联至游戏中的虚拟控制器，使玩家不用手持手柄就能操作游戏。

因此，在一示例性实施例中，所述图像采集模块可以包括空间定位单元，所述现实场景的图像可以为三维图像。例如在VR平台的3D游戏中，玩家选择控制主体，例如可以选择右手，则在三维空间内移动右手可以使虚拟控制器在游戏的3D场景中移动，以图5中玩家控制游戏角色拾取地上的刀为例，可以将虚拟控制器501移到作为虚拟对象的刀上，通过长时间停留或者佩戴VR设备的头部反复上下动作等触发临时关联，程序可以直接触发右手拾取刀的动作，也可以显示一弹窗，罗列出例如装备、丢弃、移至物品栏等指令选项，玩家选择装备后触发右手拿刀的动作，然后玩家可以移动右手可以相应的控制游戏人物挥刀，在三维空间的不同方向上移动右手，可使游戏人物在3D场景中作出左右挥砍、上下挥砍、前刺等立体化的动作，使玩家可以模仿真实持刀的动作从而实现体感控制。

无论是2D游戏还是3D游戏，程序都可以建立现实场景与虚拟场景的映射，以及控制主体与虚拟控制器的映射。在2D游戏中，现实场景和虚拟场景都是平面图像，该映射可以是两幅图像按照比例的对应，以及控制主体与虚拟控制器分别在两个场景中的位置坐标，通常平面位置坐标至少包含横坐标与纵坐标，考虑到控制主体并不是一个点，其具有一定的形状，因此在可以进行转动操作的游戏中，位置坐标还可以包括角度坐标，程序可以检测控制主体的角度变化。以图4的坐标图为例，选择手指作为控制主体401，控制主体401除了可以平移，还可以转动，其转动可以控制虚拟控制器转动(图4中隐藏了虚拟控制器，程序可以在后台运行)，进而再控制虚拟角色402转身，程序为了获取控制主体401的位置变化，可以在指定控制主体401的步骤对控制主体401分配一个参考点403及一条参考线404，参考点403可以是控制主体401的几何中心，也可以是一个端点等，参考线404可以是穿过参考点403的任意一条中线，也可以是其他方法形成的参考线，位置坐标除了代表横坐标的X与纵坐标的Y以外，还可以包括一个角度坐标A，其可以是参考线404与+X轴的夹角，也可以是参考线404与另外任意一条参考线形成的夹角。这样通过(X，Y，A)三个坐标的变化，就可以表征控制主体401发生的平移与转动，从而控制虚拟控制器相应的平移与转动。在考虑到控制主体的转动与角度坐标后，游戏多了使虚拟控制器转动的操作方式，增加了游戏的多样性。需要说明的是，上述引入参考点与参考线只是程序检测位置坐标的一种方式，除此还可以通过引入三个或多个标记点，分别测量标记点的位置后，计算出控制主体的位置变化，或者可以将控制主体近似为规则形状，通过测定该规则形状的位置变化，推算出控制主体的位置变化等。

以上说明了2D游戏场景中的映射方法，在3D游戏中的映射方法与2D类似，所不同的是其位置坐标通常可以包含X、Y、Z三个方向的坐标，考虑控制主体在三维空间内的转动情况时，通常需要测定至少两个角度坐标，例如可以是参考线在X-Y平面内的投影与+X轴的夹角以及参考线与+Z轴的夹角等；测定方法也与2D游戏中类似，可以是引入参考点与参考线，或者多点标记、形状近似等。具备空间定位功能的图像采集模块可以同时实现空间定位与角度检测。

需要补充的是，上述的映射方法是通过控制主体与虚拟控制器的点对点对应，实现运动控制。在一些游戏中，终端的显示区域只能呈现全部游戏虚拟场景中的一部分，当虚拟控制器移动时，虚拟场景也跟随移动，使虚拟控制器始终处于显示区域的中心，对于这类游戏，无法通过上述映射的方法实现运动控制。则可以将控制主体的位置对应特定的运动指令，例如在一示例性实施例中，可以将现实场景划分为上、下、左、右与中心五个分区，当检测到控制主体处于上分区时，可以控制虚拟控制器向上移动，即虚拟场景向下移动，当检测到控制主体处于左分区时，可以控制虚拟控制器向左移动，即虚拟场景向右移动，当检测到控制主体处于中心分区时，可以控制虚拟控制器静止；或者在此基础上进行更细致的划分，例如将上分区按照从下到上的顺序划分成第一上分区、第二上分区及第三上分区，从第一到第三上分区分别对应使虚拟控制器以越来越快的速度向上运动。在3D场景中，如果玩家移动控制主体靠近显示屏幕，可以使虚拟控制器在场景中前进，即控制虚拟场景向后移动，如果玩家移动控制主体远离显示屏幕，可以使虚拟控制器在场景中后退，即控制虚拟场景向前移动。凡是对控制主体处于现实场景中特定位置赋予特定指令，使通过移动控制主体可以实现移动虚拟控制器的方法，无论其现实场景的位置怎样限定以及指令形式如何，都属于本公开的保护范围。

在一示例性实施例中，当控制主体选择错误时，可以加入重新选择的步骤，如图3所示，所述根据接收到的选择操作事件，指定一所述现实对象为控制主体可以包括：

S302.根据接收到的第一选择操作事件指定一所述现实对象为控制主体，并呈现与所述控制主体同步移动的控制光标；

S303.根据所述控制主体的位置变化移动所述控制光标；

S304.根据接收到的第二选择操作事件重新指定所述控制主体；

S305.根据接收到的第三选择操作事件确定所述控制主体。

第一选择操作事件是指初次选择控制主体的操作，可以是在现实场景的图像中点击目标的现实对象，也可以是在实时拍摄的图像中移动目标现实对象等；第二选择操作是指在控制主体选择错误时重新选择的操作，可以是在现实场景的图像中点击另一现实对象，也可以是在实时拍摄的图像中移动另一现实对象等；第三选择操作是指最终确定控制主体的操作，可以是点击图像中的“确定”按钮，也可以是在一定的时间内不做重新选择等。在一示例性实施例中，上述过程可以如图6所示，首先可以拍摄现实场景的照片(图6-1)，然后玩家在其中点击一现实对象，程序可以将其初次识别为控制主体(图6-2)，画面中可以显示一控制光标(图6-3)，玩家移动现实对象，此时如果程序识别的控制主体就是玩家想要选择的现实对象，则控制光标跟随现实对象一起移动(图6-4)，玩家确认无误后可以点击“确定”按钮完成选择(图6-6)，如果程序识别的控制主体不是玩家想要选择的现实对象，则玩家移动现实对象，控制光标不会一起移动，使玩家得知程序识别错误，可以点击照片重新选择(图6-5)。控制光标是辅助玩家确认控制主体是否选择正确的一个工具，其可以是图中的一个点，也可以是光标形式，还可以是程序根据识别结果显示的一个控制主体的轮廓等。

需要说明的是，在本示例性实施例选择控制主体的流程中，S302步骤通常是最先进行的，之后S303、S304、S305步骤之间没有特定的顺序限定，例如在初次选择控制主体后，玩家可以在不移动控制主体的情况下直接通过第二选择操作事件重新选择或通过第三选择操作事件确定选择，或者玩家可以在S302步骤之后认为选择正确无误，直接通过第三选择操作事件确定选择。

在一示例性实施例中，为了更准确的识别控制主体，如图3所示，所述方法还可以包括：

S306.通过检测所述控制主体的移动和/或转动，校准所述控制主体。

校准控制主体的过程通常可以在完成选择控制主体之后，移动控制主体可以使程序更好的识别出控制主体的边界，转动控制主体可以使程序更好的识别出不同角度下控制主体的形态。在一示例性实施例中，玩家使用具备空间定位功能的VR设备进行3D游戏，选择手指为控制主体后，可以进入校准的步骤，玩家可以分别沿X轴、Y轴、Z轴来回移动手指，完成移动校准，然后可以分别围绕X轴、Y轴、Z轴来回转动手指，完成转动校准，则程序通过图像采集模块得到了手指的3D模型，其可以达到较高的精准度，游戏中当玩家移动或转动手指时，程序能够检测出其具体的位置及角度变化，从而精准的控制虚拟控制器运动。

在一示例性实施例中，考虑到终端的图像采集模块有一定的采集范围限制，对于摄像头来说，其摄像范围就是采集范围，因此所述方法还可以包括：

S311.如果检测到所述控制主体移动到所述图像采集模块的采集范围以外，则维持所述虚拟控制器在当前位置静止。

即当程序检测到控制主体超出采集边界后，可以认定此时控制主体处于无效位置，则维持虚拟控制器在上一次控制主体有效位置所对应的虚拟场景位置，通常上一次有效位置可以是控制主体移动路径所通过的边界位置。超出边界的条件可以是控制主体的任意部分超出，也可以是控制主体的中心点超出，在超出边界时可以触发虚拟场景中显示相关的提示信息，进一步的还可以设置临近边界的警示区域，当控制主体进入该警示区域时，触发显示警示信息，以提高玩家的游戏体验。

在一示例性实施例中，所述现实对象可以包括第一现实对象与第二现实对象，所述控制主体可以包括第一控制主体与第二控制主体，所述虚拟控制器可以包括第一虚拟控制器与第二虚拟控制器。

在双人同时进行的游戏中，两个玩家可以分别选择控制主体，在游戏中分别控制两个虚拟控制器进行游戏，此外，在图像采集模块的能力范围内，还可以在三人甚至人数更多的游戏中实现本示例性实施例所述的交互控制方法，从而大大增加游戏的趣味性。

在本公开的示例性实施例中，还提供了一种交互控制装置，可以应用于可至少部分的呈现一虚拟场景的终端，如图7所示，该装置可以包括：

图像采集模块701，用于获取并呈现现实场景的图像，所述现实场景至少包含一可识别的现实对象；

对象选择模块702，用于根据接收到的选择操作事件，指定一所述现实对象为控制主体；

运动控制模块703，用于获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动。

上述交互控制装置模块的具体细节已经在对应的交互控制方法中进行了详细的描述，因此此处不再赘述。

在本公开的示例性实施例中，还提供了一种能够实现上述方法的电子设备。

所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。

下面参照图8来描述根据本发明的这种实施方式的电子设备800。图8显示的电子设备800仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图8所示，电子设备800以通用计算设备的形式表现。电子设备800的组件可以包括但不限于：上述至少一个处理单元810、上述至少一个存储单元820、连接不同系统组件(包括存储单元820和处理单元810)的总线830、显示单元840。

其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元810执行，使得所述处理单元810执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的步骤。例如，所述处理单元810可以执行如图1中所示的步骤：S101.呈现所述图像采集模块获取的现实场景的图像，所述现实场景至少包含一可识别的现实对象；S102.根据接收到的选择操作事件，指定一所述现实对象为控制主体；S103.获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动。

存储单元820可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)8201和/或高速缓存存储单元8202，还可以进一步包括只读存储单元(ROM)8203。

存储单元820还可以包括具有一组(至少一个)程序模块8205的程序/实用工具8204，这样的程序模块8205包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线830可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备800也可以与一个或多个外部设备1000(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备800交互的设备通信，和/或与使得该电子设备800能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口850进行。并且，电子设备800还可以通过网络适配器860与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图8所示，网络适配器860通过总线830与电子设备800的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备800使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。

在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的步骤。

参考图9所示，描述了根据本发明的实施方式的用于实现上述方法的程序产品900，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。

Claims (10)

1.一种交互控制方法，应用于具有图像采集模块的终端，所述图像采集模块包括两个摄像头，所述终端可至少部分的呈现一虚拟场景，其特征在于，所述方法包括：

呈现所述图像采集模块获取的现实场景的图像，所述现实场景至少包含一可识别的现实对象；

根据接收到的选择操作事件，指定一所述现实对象为控制主体；

获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动，所述虚拟场景为三维场景；

其中，所述根据接收到的选择操作事件，指定一所述现实对象为控制主体，包括：

根据接收到的第一选择操作事件指定一所述现实对象为控制主体，并呈现与所述控制主体同步移动的控制光标；

根据所述控制主体的位置变化移动所述控制光标；

根据接收到的第二选择操作事件重新指定所述控制主体；或

根据接收到的第三选择操作事件确定所述控制主体。

2.根据权利要求1所述的交互控制方法，其特征在于，所述方法还包括：

根据作用于所述虚拟控制器的第一指令事件，建立所述虚拟控制器与所述虚拟场景中虚拟对象之间的临时关联；

根据作用于所述虚拟控制器的第二指令事件，对所述虚拟对象执行第二指令；

根据作用于所述虚拟控制器的第三指令事件，解除所述临时关联。

3.根据权利要求2所述的交互控制方法，其特征在于：所述第二指令包括移动指令、转动指令或移除指令中的一种或几种。

4.根据权利要求1所述的交互控制方法，其特征在于，所述方法还包括：

根据接收到的关联操作事件，建立所述虚拟控制器与所述虚拟场景中虚拟角色之间的固定关联；

根据所述虚拟控制器的运动控制所述虚拟角色运动。

5.根据权利要求1所述的交互控制方法，其特征在于，所述方法还包括：

通过检测所述控制主体的移动和/或转动，校准所述控制主体。

6.根据权利要求5所述的交互控制方法，其特征在于，所述方法还包括：

如果检测到所述控制主体移动到所述图像采集模块的采集范围以外，则维持所述虚拟控制器在当前位置静止。

7.根据权利要求1-6任一项所述的交互控制方法，其特征在于：所述现实对象包括第一现实对象与第二现实对象，所述控制主体包括第一控制主体与第二控制主体，所述虚拟控制器包括第一虚拟控制器与第二虚拟控制器。

8.一种交互控制装置，应用于可至少部分的呈现一虚拟场景的终端，其特征在于，所述装置包括：

图像采集模块，包括两个摄像头，所述图像采集模块用于获取并呈现现实场景的图像，所述现实场景至少包含一可识别的现实对象；

对象选择模块，用于根据接收到的选择操作事件，指定一所述现实对象为控制主体；

运动控制模块，用于获取所述控制主体在所述现实场景中的位置，并根据所述控制主体的位置控制所述虚拟场景中的虚拟控制器运动，所述虚拟场景为三维场景；

其中，所述对象选择模块，被配置为：

根据接收到的第一选择操作事件指定一所述现实对象为控制主体，并呈现与所述控制主体同步移动的控制光标；

根据所述控制主体的位置变化移动所述控制光标；

根据接收到的第二选择操作事件重新指定所述控制主体；或

根据接收到的第三选择操作事件确定所述控制主体。

9.一种电子设备，其特征在于，包括：

处理器；以及

存储器，用于存储所述处理器的可执行指令；

其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1-7中任一项所述的交互控制方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1-7中任一项所述的交互控制方法。

Images