CN111381670B - 虚拟内容的交互方法、装置、系统、终端设备及存储介质 - Google Patents

Abstract

本申请实施例公开了一种虚拟内容的交互方法、装置、系统、终端设备及存储介质，该虚拟内容的交互方法应用于第一终端，所述第一终端与第一交互设备连接；所述第一终端还连接至少一个第二终端，所述第二终端对应至少一个第二交互设备，所述方法包括：根据所述第一终端与所述第一交互设备之间的第一相对空间位置关系显示第一虚拟内容；基于所述第一虚拟内容获取第二虚拟内容；向所述第二终端发送与所述第二虚拟内容对应的内容数据，所述内容数据用于指示所述第二终端显示所述第二虚拟内容，并根据所述对应的第二交互设备发送的控制指令控制所述第二虚拟内容的显示。本方法可以较好的实现终端之间显示的虚拟内容的交互和控制。

Description

虚拟内容的交互方法、装置、系统、终端设备及存储介质

技术领域

本申请涉及显示技术领域，更具体地，涉及一种虚拟内容的交互方法、装置、系统、终端设备及存储介质。

背景技术

近年来，随着科技的进步，增强现实(AR，Augmented Reality)等技术已逐渐成为国内外研究的热点，增强现实是通过计算机系统提供的信息增加用户对现实世界感知的技术，其将计算机生成的虚拟对象、场景或系统提示信息等内容对象叠加到真实场景中，来增强或修改对现实世界环境或表示现实世界环境的数据的感知。在增强现实的显示技术中，终端之间的显示内容的交互是影响技术应用的一个关键问题。

发明内容

本申请实施例提出了一种虚拟内容的交互方法、装置、系统、终端设备及存储介质，以较好的实现终端之间显示的虚拟内容的交互和控制。

第一方面，本申请实施例提供了一种虚拟内容的交互方法，应用于第一终端，所述第一终端与第一交互设备连接；所述第一终端还连接至少一个第二终端，所述第二终端对应至少一个第二交互设备，所述方法包括：根据所述第一终端与所述第一交互设备之间的第一相对空间位置关系显示第一虚拟内容；基于所述第一虚拟内容获取第二虚拟内容；向所述第二终端发送与所述第二虚拟内容对应的内容数据，所述内容数据用于指示所述第二终端显示所述第二虚拟内容，并根据所述对应的第二交互设备发送的控制指令控制所述第二虚拟内容的显示。

第二方面，本申请实施例提供了一种虚拟内容的交互方法，应用于第二终端，所述第二终端与第二交互设备连接；所述第二终端还连接至少一个第一终端，所述第一终端对应至少一个第一交互设备，所述方法包括：接收所述第一终端发送的与第二虚拟内容对应的内容数据，所述第二虚拟内容为所述第一终端根据显示的第一虚拟内容获取的虚拟内容；确定所述第二终端与第二交互设备之间的第二相对空间位置关系；根据所述内容数据以及所述第二相对空间位置关系显示所述第二虚拟内容；接收所述第二交互设备发送的控制指令，根据所述控制指令控制所述第二虚拟内容的显示。

第三方面，本申请实施例提供了一种虚拟内容的交互装置，应用于第一终端，所述第一终端与第一交互设备连接；所述第一终端还连接至少一个第二终端，所述第二终端对应至少一个第二交互设备，所述装置包括：内容显示模块、内容获取模块以及数据发送模块，其中，所述内容显示模块用于根据所述第一终端与所述第一交互设备之间的第一相对空间位置关系显示第一虚拟内容；所述内容获取模块用于基于所述第一虚拟内容获取第二虚拟内容；所述数据发送模块用于向所述第二终端发送与所述第二虚拟内容对应的内容数据，所述内容数据用于指示所述第二终端显示所述第二虚拟内容，并根据所述对应的第二交互设备发送的控制指令控制所述第二虚拟内容的显示。

第四方面，本申请实施例提供了一种虚拟内容的交互系统，所述虚拟内容的交互系统包括：第一终端、第一交互设备、第二终端及第二交互设备，所述第一终端与至少一个所述第二终端连接，所述第一终端与至少一个所述第一交互设备连接，所述第二终端与至少一个所述第二交互设备连接，其中，所述第一终端用于根据所述第一终端与连接的第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，基于所述第一虚拟内容获取第二虚拟内容，向连接的第二终端发送与所述第二虚拟内容对应的内容数据；所述第二终端用于接收连接的第一终端发送的所述内容数据，根据所述内容数据以及所述第二终端与连接的第二交互设备之间的第二相对空间位置关系显示所述第二虚拟内容，根据所述第二交互设备发送的控制指令，控制所述第二虚拟内容的显示。

第五方面，本申请实施例提供了一种终端设备，包括：一个或多个处理器；存储器；一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行上述第一方面提供的虚拟内容的交互方法和/或上述第二方面提供的虚拟内容的交互方法。

第六方面，本申请实施例提供了一种存储介质，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行上述第一方面提供的虚拟内容的交互方法和/或上述第二方面提供的虚拟内容的交互方法。

本申请提供的方案，应用于第一终端，第一终端与第一交互设备连接，第一终端还连接至少一个第二终端，第二终端对应至少一个第二交互设备，第一终端根据第一终端与第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，基于第一虚拟内容获取第二虚拟内容，向第二终端发送与第二虚拟内容对应的内容数据，第二终端可显示第二虚拟内容，并根据对应的第二交互设备发送的控制指令控制第二虚拟内容的显示，从而较好的实现终端之间显示的虚拟内容的交互和控制。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了一种适用于本申请实施例的应用场景的示意图。

图2示出了根据本申请一个实施例的虚拟内容的交互方法流程图。

图3示出了本申请一个实施例提供的一种显示效果示意图。

图4示出了本申请一个实施例提供的另一种显示效果示意图。

图5示出了本申请一个实施例提供的又一种显示效果示意图。

图6示出了根据本申请另一个实施例的虚拟内容的交互方法流程图。

图7示出了本申请另一个实施例提供的显示效果示意图。

图8示出了根据本申请又一个实施例的虚拟内容的交互方法流程图。

图9示出了根据本申请再一个实施例的虚拟内容的交互方法流程图。

图10示出了本申请再一个实施例提供的一种显示效果示意图。

图11示出了根据本申请实施例提供的一种手势操作的示意图。

图12示出了根据本申请实施例提供的一种手势操作的示意图。

图13示出了本申请再一个实施例提供的另一种显示效果示意图。

图14示出了本申请再一个实施例提供的又一种显示效果示意图。

图15示出了根据本申请实施例提供的一种手势操作的示意图。

图16示出了根据本申请实施例提供的一种手势操作的示意图。

图17示出了根据本申请实施例提供的一种手势操作的示意图。

图18示出了根据本申请实施例提供的一种手势操作的示意图。

图19示出了根据本申请一个实施例的虚拟内容的交互装置的框图。

图20示出了根据本申请另一个实施例的虚拟内容的交互装置的框图。

图21是本申请实施例的用于执行根据本申请实施例的虚拟内容的交互方法的终端设备的框图。

图22是本申请实施例的用于保存或者携带实现根据本申请实施例的虚拟内容的交互方法的程序代码的存储单元。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

随着显示技术的发展，增强现实(AR，Augmented Reality)的显示技术逐渐深入到人们的生活中。AR技术可以实现将计算机生成的虚拟对象、虚拟场景或虚拟系统提示信息等内容对象叠加到真实场景中，来增强或修改对现实世界环境或表示现实世界环境的数据的感知。在目前，可通过识别现实空间中的标记物，实现在显示屏上对应的位置显示出与该标记物绑定的虚拟图像，让用户享受科幻式的观感体验。

发明人经过长期研究发现，在传统的增强现实的显示技术中，在利用设备进行显示内容时，设备之间仅能单独显示虚拟内容，使用户间的互动性较差。基于上述问题，发明人提出了本申请中的虚拟内容的交互方法、装置、系统、终端设备及存储介质，以较好地实现终端之间的显示内容的交互和控制。

下面对本申请实施例提供的虚拟内容的交互方法的应用场景进行介绍。

请参阅图1，示出了本申请实施例提供的虚拟内容的交互方法的应用场景图，该应用场景包括虚拟内容的交互系统10，该虚拟内容的交互系统10包括：第一终端、第二终端、第一交互设备以及第二交互设备，其中，第一终端与第一交互设备以及第二终端连接，第二终端与第一终端及第二交互设备连接。在一些实施方式中，第二终端的数量可以不作为限定，可以为一个，也可以为多个。

在本申请实施例中，上述第一终端以及第二终端可以是头戴显示装置，也可以是手机、平板等移动设备。第一终端以及第二终端为头戴显示装置时，头戴显示装置可以为一体式头戴显示装置。第一终端以及第二终端也可以是与外接式头戴显示装置连接的手机等智能终端，即第一终端以及第二终端可作为头戴显示装置的处理和存储设备，插入或者接入外接式头戴显示装置，在头戴显示装置中对虚拟内容进行显示。

本申请实施例中，上述第一交互设备可以包括控制面板，该控制面板上设置有第一标记物310以及第一触控区域320。其中，设置于第一交互设备300上的第一标记物310的数量可以是一个或多个。第一终端100与第一交互设备300可以通过蓝牙、WiFi(Wireless-Fidelity，无线保真)、ZigBee(紫峰技术)等通信方式连接，当然，第一终端100与第一交互设备300的连接方式在本申请实施例中可以不作为限定。

在一些实施方式中，第一终端100可采集包含第一标记物310的图像，并识别该图像中的第一标记物310后显示虚拟内容，用户通过第一终端100可以看到显示的虚拟内容与现实世界中第一交互设备300叠加。

在本申请实施例中，上述第一标记物310的图像存储于第一终端100中。上述第一标记物310可以包括至少一个具有一个或者多个特征点的子标记物。当上述第一标记物310处于第一终端100的视野范围内时，第一终端100可采集包含该第一标记物310的图像。在采集到包含该第一标记物310的图像时，可以识别采集到的包含第一标记物310的图像，得到该第一标记物310相对第一终端100的位置、朝向等空间位置信息，以及第一标记物310的身份信息等识别结果。第一终端100可根据第一标记物310对第一交互设备300进行定位及追踪。第一终端100可基于第一标记物310相对第一终端100的空间位置等信息显示相应的虚拟内容。可以理解地，具体的第一标记物310在本申请实施例中并不作为限定，仅需可以被第一终端100识别追踪即可。

作为一种方式，第一交互设备300可以是由用户手持，也可以是固定在操作台上，供用户操作及观看虚拟内容。第一交互设备300上还可以设置有触控区域，以供用户对触控区域进行触控操作，从而控制第一终端100在与第一交互设备300对应位置上显示的虚拟内容。第一交互设备300可以通过触控区域检测到手势控制操作，可将手势控制操作的操作数据发送给第一终端100。第一终端100可根据该操作数据生成控制指令，并根据控制指令控制虚拟内容的显示，实现对虚拟内容的控制(例如控制虚拟内容滚动、位移、切分、旋转等)，有利于提高用户与虚拟内容之间的交互性。第一交互设备300也可直接根据检测到的手势控制操作生成控制指令，并将控制指令发送给第一终端100，以使实对虚拟内容的控制。

在一些实施方式中，第一终端100可以向第二终端200发送虚拟内容的内容数据，该虚拟内容可以是与第一终端100显示的内容相关的虚拟内容，第二终端200在接收该内容数据之后，可以根据内容数据对虚拟内容进行显示。

在本申请实施例中，第二交互设备400可以与第一交互设备300大致相同，第二交互设备400可以包括控制面板，该控制面板上设置有第二标记物410以及第二触控区域420。其中，设置于第二交互设备400上的第二标记物410的数量可以是一个或多个。第二交互设备400的内容，以及第二终端200与第二交互设备400之间的交互可以参阅上述内容，在此不再赘述。

在一些实施方式中，第一终端100与第二终端200可以进行信息以及指令的交互。其中，信息交互可以包括虚拟内容的内容数据等。第一终端100与第二终端200可以通过蓝牙、WiFi(Wireless-Fidelity，无线保真)、ZigBee(紫峰技术)等通信方式连接，当然，第一终端100与第二终端200的连接方式在本申请实施例中可以不作为限定。

请参阅图2，本申请实施例提供了一种虚拟内容的交互方法，可应用于上述虚拟内容的交互系统中的第一终端，该虚拟内容的交互方法可以包括：

步骤S110：根据第一终端与第一交互设备之间的第一相对空间位置关系显示第一虚拟内容。

在本申请实施例中，第一终端可以根据第一交互设备的空间位置，对第一虚拟内容进行显示。第一终端在根据第一交互设备显示第一虚拟内容时，可以获取第一终端与第一交互设备之间的第一相对空间位置关系，以便根据该第一相对空间位置关系显示第一虚拟内容。其中，该第一相对空间位置关系可以包括第一交互设备相对第一终端的位置信息以及姿态信息等，姿态信息为第一交互设备相对第一终端的朝向及旋转角度。

在一些实施方式中，上述第一交互设备上的第一标记物可以由第一终端识别，并获取第一终端与第一标记物之间的相对空间位置，从而可根据第一终端与第一标记物之间的相对空间位置得到第一终端与第一交互设备之间的第一相对空间位置关系。

在一些实施方式中，上述第一交互设备可以包括惯性测量单元(Inertialmeasurement unit，IMU)，其中，惯性测量单元可以检测第一交互设备的姿态数据。姿态数据可以包括第一交互设备在三维空间中的角速度和加速度等，当然具体的姿态数据可以不作为限定。第一终端获取第一终端与第一交互设备之间的相对空间位置，可以是接收第一交互设备发送的检测到的第一交互设备的姿态数据，然后根据该姿态数据，来确定第一终端与第一交互设备之间的第一相对空间位置关系。当然，获取第一终端与第一交互设备之间的第一相对空间位置关系的方式在本申请实施例中可以不作为限定。

在本申请实施例中，在获取到第一终端与第一交互设备之间的第一相对空间位置关系之后，则可以根据第一终端与第一交互设备之间的第一相对空间位置关系，显示第一虚拟内容。

在一些实施方式中，在得到上述第一终端与第一交互设备之间的第一相对空间位置关系之后，则可以根据该第一相对空间位置关系，获取第一虚拟内容的显示位置，对需要显示的第一虚拟内容进行显示。其中，显示位置为用户通过第一终端可以看到的第一虚拟内容的位置，也即第一虚拟内容在虚拟空间中的渲染坐标。

进一步的，第一终端可以根据需要显示的第一虚拟内容与第一交互设备的位置相对关系，以及第一终端与第一交互设备之间的第一相对空间位置关系，以得到第一虚拟内容的显示位置。可以理解的，在实现第一虚拟内容叠加于第一交互设备所在真实世界时，可以获取第一交互设备于现实空间中的空间坐标，该空间坐标可以用于表示第一交互设备与头戴显示装置上的跟踪摄像头之间的位置关系，也可以用于表示第一交互设备与第一终端之间的位置关系。

在获取到第一终端与第一交互设备的第一相对空间位置关系后，可以获得第一交互设备在现实空间中的空间坐标，将第一交互设备在现实空间中的空间坐标转换为虚拟空间的虚拟坐标之后，根据需要显示的第一虚拟内容与第一交互设备的位置相对关系，得到需要显示的第一虚拟内容在虚拟空间中的渲染坐标，从而得到了第一虚拟内容的显示位置，以便对第一虚拟内容进行显示。

在得到第一虚拟内容的显示位置之后，则可以根据需要现实的第一虚拟内容的数据，以及获取到的显示位置，渲染第一虚拟内容。其中，上述第一虚拟内容的数据可以包括第一虚拟内容的模型数据，模型数据为用于渲染第一虚拟内容的数据。例如，模型数据可以包括用于建立第一虚拟内容对应的颜色数据、顶点坐标数据、轮廓数据等。另外，第一虚拟内容的数据可以是存储于第一终端中，也可以是从第一交互设备、服务器等其他电子设备获取。

从而可以在虚拟空间中显示第一虚拟内容，用户通过第一终端可以看到第一虚拟内容与真实世界叠加进行显示，实现了第一虚拟内容的增强现实的显示效果，提升了第一虚拟内容的显示效果。例如，如图3所示，用户可以通过第一终端看到真实世界中的第一交互设备300，并且可以看到虚拟空间中叠加显示在第一交互设备300对应位置上的第一虚拟内容20(图3中第一虚拟内容20为人体模型)。

步骤S120：基于第一虚拟内容获取第二虚拟内容。

在本申请实施例中，第一终端在显示第一虚拟内容之后，可以基于第一虚拟内容获取第二虚拟内容，其中，第二虚拟内容为用于上述第二终端显示的虚拟内容。

进一步的，第一终端基于第一虚拟内容获取第二虚拟内容，可以是获取与第一虚拟内容相关的第二虚拟内容。作为一种方式，与第一虚拟内容相关的第二虚拟内容，可以是与第一虚拟内容在类型上相关的虚拟内容，例如，第二虚拟内容为与第一虚拟内容的类型相同的虚拟内容。作为另一种方式，与第一虚拟内容相关的第二虚拟内容，可以是从属于第一虚拟内容的虚拟内容，例如，第二虚拟内容为第一虚拟内容的部分内容。作为又一种方式，与第一虚拟内容相关的第二虚拟内容，可以是第一虚拟内容的扩展内容，例如，多页面的虚拟内容中，第一虚拟内容为上级页面的内容，第二虚拟内容为次级页面的内容，又例如，第一虚拟内容为地图中的部分内容，第二虚拟内容为地图中该部分内容邻接的内容。当然，第一虚拟内容与第二虚拟内容具体的关系在本申请实施例中可以不作为限定。

步骤S130：向第二终端发送与第二虚拟内容对应的内容数据，内容数据用于指示第二终端显示第二虚拟内容，并根据对应的第二交互设备发送的控制指令控制第二虚拟内容的显示。

在本申请实施例中，在第一终端基于第一虚拟内容获取到第二虚拟内容之后，则可以向第二终端发送与第二虚拟内容对应的内容数据。其中，第二虚拟内容对应的内容数据，用于指示第二终端显示虚拟内容，并根据第二交互设备发送的控制指令控制第二虚拟内容的显示。也就是说，在第二终端接收到上述内容数据之后，可以根据上述第二虚拟内容对应的内容数据，对第二虚拟内容进行显示。第二终端可与第二交互设备进行连接，在显示第二虚拟内容之后，可以根据第二交互设备检测到的不同的控制操作，对第二虚拟内容进行不同的控制显示，例如，对第二虚拟内容进行切换、移动、对尺寸进行调整等，具体的控制在本申请实施例中可以不作为限定。第一终端的用户可以将与第一虚拟内容相关的第二虚拟内容分享给第二终端的用户，使得第二终端的用户可以观看到与第一终端的用户分享的虚拟内容，且可以通过第二交互设备对分享的虚拟内容进行控制操作，满足用户的控制需求。

在一些实施方式中，上述第二虚拟内容对应的内容数据可以是第一终端预先存储，也可是第一终端从服务器下载得到的，还可以是从其他终端处获取得到的。在本申请实施例中，具体获取第二虚拟内容对应的内容数据的方式可以不作为限定。

在一种应用场景中，通过上述实施例提供的方法，可以多人查看图3所示的人体模型，如图4所示，第一终端100可以显示第一虚拟内容20(人体模型)，第一终端100与分享者对应，分享者可以察看到虚拟空间中显示的上述第一虚拟内容20，第二终端200作为被分享者，可以接收上述第一虚拟内容20对应的第二虚拟内容30(例如，人体模型的心脏器官)的内容数据，显示该第二虚拟内容30(心脏器官)，并且第二终端200可以根据第二交互设备400发送的控制指令，对显示的心脏器官进行控制。

在一个实施例中，第二终端接收第一终端发送的第二虚拟内容的内容数据，也可根据与第三标记物之间的相对空间位置显示第二虚拟内容，其中，该第三标记物可以是设置在真实世界中的某个位置或某个实际物体上。可以多个第二终端同时基于第三标记物显示相同的第二虚拟内容，也即，不同第二终端的第二虚拟内容可以叠加显示在真实世界的同一位置，不同第二终端的用户可以看到第二虚拟内容显示在真实世界的相同位置处。由于第三标记物相对不同第二终端的位置及姿态信息等不同，第二终端可根据与第三标记物之间的相对空间位置显示第二虚拟内容的对应视角。

在上述应用场景中，如图5所示，一个或者多个第三标记物50(图中仅示出1个)设置于同一物体(例如桌子)上，多个第二终端200(图中仅示出2个)可以同时给予第三标记物显示相同的第二虚拟内容30(例如，心脏器官)，多个第二终端200的用户可以看到上述第二虚拟内容200显示在上述桌子上的第三标记物50的位置处。实现第一终端100分享与其显示的第一虚拟内容20对应的第二虚拟内容30至多个第二终端200显示，并且多个第二终端200可以根据相对同一第三标记物50的位置，显示相同的第二虚拟内容。

本申请实施例提供的虚拟内容的交互方法，第一终端根据显示的第一虚拟内容，发送基于其显示的第一虚拟内容获取的第二虚拟内容的内容数据至第二终端，使第二终端可以显示与第一虚拟内容相对应的第二虚拟内容，并且第二终端可以根据第二交互设备对显示的第二虚拟内容进行控制，较好的实现终端之间显示内容的交互与控制。

请参阅图6，本申请实施例提供了另一种虚拟内容的交互方法，可应用于上述虚拟内容的交互系统中的第一终端，该虚拟内容的交互方法可以包括：

步骤S210：获取包含第一标记物的图像。

在本申请实施例中，第一终端在根据第一交互设备显示第一虚拟内容时，可以获取第一终端与第一交互设备之间的第一相对空间位置关系，以便根据该第一相对空间位置关系显示第一虚拟内容。

进一步的，第一终端获取第一终端与第一交互设备之间的第一相对空间位置关系，可以是根据第一终端相对第一交互设备上的标记物的空间位置确定。

可以理解的是，与第一终端连接的第一交互设备上可以设置有第一标记物，上述第一交互设备上的第一标记物可以由第一终端识别，第一终端可以根据识别得到的第一终端相对第一标记物之间的空间位置，得到第一终端与第一交互设备之间的相对空间位置关系。

具体的，第一终端在获取第一终端与第一交互设备的相对空间位置时，可以采集包含第一交互设备上的第一标记物的第一标记物图像。在一些实施方式中，可以通过移动第一终端的图像采集装置的位置，以使第一交互设备的第一标记物处于图像采集装置的视野范围内，对第一标记物进行图像采集，从而得到包含第一交互设备上的第一标记物的第一标记物图像；也可以通过移动第一交互设备的位置，以使第一交互设备的第一标记物处于图像采集装置的视野范围内，对第一标记物进行图像采集，从而得到包含第一交互设备上的第一标记物的第一标记物图像。

在一些实施方式中，上述第一标记物可以包括至少一个子标记物，子标记物可以是具有一定形状的图案。在一个实施例中，每个子标记物可具有一个或多个特征点，其中，特征点的形状不做限定，可以是圆点、圆环，也可以是三角形、其他形状。另外，不同第一标记物内的子标记物的分布规则不同，因此，每个第一标记物可具备不同的身份信息。第一终端通过识别第一标记物中包含的子标记物，可以获取与第一标记物对应的身份信息，该身份信息可以是编码等可用于唯一标识第一标记物的信息，但不限于此。

作为一种实施方式，第一标记物的轮廓可以为矩形，当然，第一标记物的形状也可以是其他形状，在此不做限定，矩形的区域以及该区域内的多个子标记物构成一个第一标记物。当然，具体的第一标记物在本申请实施例中并不作为限定，第一标记物仅需要能被第一终端识别即可。

步骤S220：识别图像中的第一标记物，并获取第一终端与第一交互设备之间的第一相对空间位置关系。

第一终端在获取到上述第一标记物图像之后，则可以对该第一标记物图像进行识别，以得到对第一标记物的识别结果。其中，对第一标记物的识别结果可以包括第一终端相对第一标记物的空间位置，以及第一标记物的身份信息等。其中，第一终端相对第一标记物的空间位置可以包括第一终端相对第一标记物的位置以及姿态信息等，姿态信息为第一标记物相对第一终端的朝向及旋转角度，从而，可以得到上述第一终端相对第一标记物的空间位置。

第一终端在得到第一终端相对第一标记物的空间位置之后，则可以根据第一标记物与第一交互设备之间的位置关系，得到第一终端与第一交互设备之间的第一相对空间位置关系。其中，第一标记物与第一交互设备之间的位置关系可以预先存储于第一终端中。

步骤S230：根据第一相对空间位置关系显示第一虚拟内容。

在本申请实施例中，在获取到第一终端与第一交互设备之间的相对空间位置之后，则可以根据第一终端与第一交互设备之间的相对空间位置，显示第一虚拟内容。

在一些实施方式中，第一终端在得到上述第一终端与第一交互设备之间的相对空间位置之后，则可以根据该相对空间位置，获取第一虚拟内容的显示位置，对需要显示的第一虚拟内容进行显示。其中，显示位置为用户通过第一终端可以看到的第一虚拟内容的位置，也即第一虚拟内容在虚拟空间中的渲染坐标。

在得到虚拟内容的显示位置之后，则可以根据需要现实的第一虚拟内容的数据，以及获取到的显示位置，渲染虚拟内容。在一些实施方式中，上述第一虚拟内容的数据可以根据第一交互设备的第一标记物的身份信息获取，也就是说，可以通过标记物的身份信息读取对应的第一虚拟内容的数据，使显示的第一虚拟内容与第一交互设备的标记物的身份信息对应。

从而可以在虚拟空间中显示第一虚拟内容，用户通过第一终端可以看到第一虚拟内容与真实世界叠加进行显示，实现了第一虚拟内容的增强现实的显示效果，提升了第一虚拟内容的显示效果。

步骤S240：当接收到第一交互设备发送的控制指令时，根据第一交互设备发送的控制指令控制第一虚拟内容的显示。

在本申请实施例中，第一终端在对第一虚拟内容显示时，可以根据第一交互设备发送的控制指令，控制第一虚拟内容的显示。

第一交互设备可以根据第一触控区域检测到的用户的手势控制操作，得到手势控制操作的操作数据，该操作数据可以包括手势参数，第一终端根据该手势参数生成控制指令，发送至第一终端，该控制指令用于指示第一终端对显示的第一虚拟内容进行控制。可以理解的是，第一交互设备在检测到用户的手势控制操作时，可以根据手势控制操作得到手势参数。其中，手势参数包括用户执行手势控制操作的手指数量、滑动轨迹、执行手势控制操作的按压压力、手势控制操作的持续时间以及手势控制操作的操作频率中的至少一种。其中，执行手势控制操作的手指数量，为第一交互设备的第一触控区域的传感器检测到手势控制操作时被按压的区域的数量，例如数量为1，又例如，数量为3；滑动轨迹为手势控制操作为滑动操作时的滑动方向、滑动距离等，例如向下滑动1厘米的滑动轨迹；执行手势控制操作的按压压力为交互设备的第一触控区域的传感器检测到的压力的大小，例如按压压力为3N(牛)；手势控制操作的持续时间为第一交互设备的第一触控区域检测到的手势在屏幕上接触的时间，例如长按时的持续时间为1.5S(秒)；手势控制操作的操作频率为第一交互设备的第一触控区域检测到预设时间内的操作次数，手势控制操作为多次点击操作时，点击频率为3次/秒。当然具体的手势参数可以不作为限定，手势参数也还可以包括其他参数，例如，手势控制操作的触控面积，又例如，触控面积与第一触控区域的总面积的比值等。

进一步的，交互设备在得到手势控制操作对用的手势参数之后，则可以根据手势参数生成控制指令，并将控制指令发送至第一终端，以便第一终端根据该控制指令对显示的第一虚拟内容进行控制，例如对第一虚拟内容进行切换、移动、对尺寸进行调整等。其中，第一交互设备可以根据手势参数与控制指令的对应关系，获取上述接收的手势参数对应的控制指令，然后生成该控制指令，该控制指令用于指示第一终端控制第一终端显示的第一虚拟内容。上述手势参数与控制指令的对应关系可以预先存储于第一交互设备中，该对应关系可以是用户自行设置，也可以是第一交互设备出厂时默认的，还可以是第一交互设备从服务器获取的。

在接收到第一交互设备发送的上述控制指令时，则可以根据该控制指令控制上述第一虚拟内容的显示。其中，不同的控制指令对应对第一虚拟内容不同的控制效果，例如，手势控制操作为单指点击操作时，根据该控制指令可以选取第一虚拟内容，又例如，手势控制操作为滑动操作时，根据该控制指令可以控制第一虚拟内容的移动或滚动等。当然，具体控制指令对应的对第一虚拟内容的控制内容在本申请实施例中可以不作为限定。

步骤S250：接收第二终端发送的身份信息，身份信息包括第二终端对应的第二交互设备上的第二标记物的身份信息。

在本申请实施例中，不同第二交互设备上可设有不同的第二标记物。第二终端在对第二交互设备上的第二标记物进行识别后，得到第二标记物的身份信息。第二终端可以发送上述第二标记物的身份信息至第一终端，该身份信息用于获取与身份信息对应的第二虚拟内容。其中，第二终端对第二标记物的识别可以参阅上述实施例中第一终端识别第一标记物的内容，在此不再赘述。相应的，第一终端可以接收到上述第二标记物的身份信息，以便后续基于第一虚拟内容，获取与第二标记物的身份信息对应的第二虚拟内容。

步骤S260：从第一虚拟内容中获取与身份信息对应的第二虚拟内容。

第一终端在接收到第二终端发送的上述第二标记物的身份信息之后，则第一终端可以基于第一虚拟内容，获取与该身份信息对应的第二虚拟内容。

在一些实施方式中，第二虚拟内容可以是第一虚拟内容的部分内容，并且上述第二标记物的身份信息与第一虚拟内容的部分内容对应，从而可以根据第一标记物的身份信息，从第一虚拟内容中，获取到该身份信息对应的第二虚拟内容。例如，第一虚拟内容由内容A、内容B以及内容C构成，则第二虚拟内容为内容A、内容B以及内容C中的其中一个，另外，上述第二标记物的身份信息与内容A、内容B以及内容C中的其中一个对应，因此，可以根据该身份信息从第一虚拟内容中，获取到内容A、内容B、或者内容C，将获取到的内容A、内容B、或者内容C作为第二虚拟内容。

步骤S270：向第二终端发送与身份信息对应的第二虚拟内容的内容数据，内容数据用于指示第二终端显示第二虚拟内容，并根据对应的第二交互设备发送的控制指令控制第二虚拟内容的显示。

在本申请实施例中，步骤S270可以参阅上述实施例的内容，在此不再赘述。

例如，如图7所示，在多人查看零件模型的应用场景中，包括第一终端100、第二终端202及第二终端204。第一终端100可以显示第一虚拟内容20(零件模型)，该第一虚拟内容20(零件模型)由第一部分21与第二部分22构成，第一终端100与分享者对应，分享者可以察看到上述零件模型。第二终端202及第二终端204作为被分享者，第二终端202可以获取对应的第二交互设备402上的第二标记物412的身份信息，该身份信息比如可以是ID001，第二终端204可以获取对应的第二交互设备404上的第二标记物414的身份信息，该身份信息比如可以是ID002。第二终端202和第二终端204可分别向第一终端100发送身份信息。第一终端100可根据第二终端202发送的身份信息ID001获取对应的第二虚拟内容为第一部分21，并将第一部分21的内容数据发送给第二终端202。第二终端202可以接收第一部分21的内容数据，并对第一部分21进行显示，还可利用第二交互设备402对显示的第一部分21进行操控。其中第二终端202可以据其对应的第二交互设备402上的第二标记物412的身份信息ID001，获取到第一部分21对应的内容数据，并显示第一部分21，第二终端204可以据其对应的第二交互设备404上的第二标记物414的身份信息，获取到第二部分22对应的内容数据，并显示第二部分22，从而实现第一终端100根据显示的第一虚拟内容20，分享不同的内容至不同的第二终端200进行显示。并且，第二终端202可以对其显示的第二虚拟内容进行控制。

本申请实施例提供的虚拟内容的交互方法，第一终端根据第一交互设备上的标记物，确定与第一交互设备之间的第一相对空间位置关系，基于第一相对空间位置关系显示第一虚拟内容，并基于该第一虚拟内容发送第二标记物的身份信息对应的第二虚拟内容的内容数据至第二终端，使第二终端可以显示与第一虚拟内容相对应的第二虚拟内容，并且第二终端可以根据第二交互设备对显示的第二虚拟内容进行控制，实现终端之间显示内容的良好交互，提升了与虚拟内容的交互性。

请参阅图8，本申请实施例提供了又一种虚拟内容的交互方法，可应用于上述虚拟内容的交互系统中的第二终端，该虚拟内容的交互方法可以包括：

步骤S310：接收第一终端发送的与第二虚拟内容对应的内容数据，第二虚拟内容为第一终端根据显示的第一虚拟内容获取的虚拟内容。

在本申请实施例中，第一终端可以向第二终端发送与第一终端显示的第一虚拟内容对应的第二虚拟内容的内容数据，对应的，第二终端可以接收到第二虚拟内容的内容数据。其中，该内容数据用于第二终端显示第二虚拟内容。

步骤S320：确定第二终端与第二交互设备之间的第二相对空间位置关系。

具体的，第二终端确定第二终端与第二交互设备之间的第二相对空间位置关系的方式，可以参阅上述实施例中第一终端确定第一终端与第一交互设备之间的第一相对空间位置关系的内容。

步骤S330：根据内容数据以及第二相对空间位置关系显示第二虚拟内容。

在本申请实施例中，第二终端在接收到上述内容数据，及确定出上述第二相对空间位置关系之后，则可以根据内容数据对第二虚拟内容进行显示。具体的，第二终端可以根据内容数据以及上述第二相对空间位置关系，显示上述第二虚拟内容。其中，第二终端显示第二虚拟内容的方式，可以参阅上述实施例中第一终端显示第一虚拟内容的方式，在此不再赘述。

步骤S340：根据第二交互设备发送的控制指令，控制第二虚拟内容的显示。

在本申请实施例中，在第二终端显示第二虚拟内容之后，可以根据第二交互设备发送的控制指令，对显示的第二虚拟内容进行控制。其中，第二终端根据第二交互设备的控制指令控制第二虚拟内容的方式，可以参阅上述实施例中第一终端根据第一交互设备的控制指令控制第一虚拟内容的方式，在此不再赘述。

本申请实施例提供的虚拟内容的交互方法，第二终端接收第一终端发送的与第一终端显示的第一虚拟内容对应的第二虚拟内容的内容数据，确定第二终端与第二交互设备之间的第二相对空间位置关系，并根据内容数据以及第二相对空间位置关系，显示第二虚拟内容，实现第一终端分享与其显示的第一虚拟内容对应的第二虚拟内容至第二终端进行显示，实现终端之间显示内容的良好交互。并且，第二终端可以根据第二交互设备的控制指令，控制第二虚拟内容的显示，实现了对显示内容的控制，提升了与虚拟内容的交互性。

请参阅图9，本申请实施例提供了又一种虚拟内容的交互方法，可应用于上述虚拟内容的交互系统中的第二终端，该虚拟内容的交互方法可以包括：

步骤S410：发送身份信息至第一终端，身份信息包括第二终端对应的第二交互设备上的第二标记物的身份信息。

可以理解的，第二交互设备上设有第二标记物。第二终端在对第二交互设备上的第二标记物进行识别后，得到第二标记物的身份信息。并且，可以发送上述第二标记物的身份信息至第一终端，该身份信息用于获取与身份信息对应的第二虚拟内容。其中，第二终端对第二标记物的识别可以参阅上述实施例中第一终端识别第一标记物的内容，在此不再赘述。第一终端可以接收到上述第二标记物的身份信息，以便后续基于第一虚拟内容，获取与第二标记物的身份信息对应的第二虚拟内容，并向第二终端返回第二虚拟内容的内容数据，具体可以参阅上述实施例中的内容，在此不再赘述。

步骤S420：接收第一终端发送的第二虚拟内容的内容数据，第二虚拟内容为第一终端从显示的第一虚拟内容中获取的与身份信息对应的虚拟内容。

第二终端可以接收到第一终端发送的上述第二虚拟内容的内容数据，其中，第二虚拟内容可以是第一虚拟内容的部分内容，并且上述第二标记物的身份信息与第一虚拟内容的部分内容对应，从而第二终端可以获取到第一终端显示的第一虚拟内容中，与上述第二标记物的身份信息对应的第二虚拟内容。例如，第一虚拟内容由多部分内容构成，则第二虚拟内容为多部分内容中的其中一部分内容。

步骤S430：确定第二终端与第二交互设备之间的第二相对空间位置关系。

步骤S440：根据内容数据以及第二终端与第二交互设备之间的第二相对空间位置关系显示第二虚拟内容。

在本申请实施例中，步骤S430及步骤S440可以参阅上述实施例的内容，在此不再赘述。

步骤S450：判断第二终端是否具备对显示的第二虚拟内容的控制权限。

在本申请实施例中，第二终端可以判断第二终端是否具备对显示的第二虚拟内容的控制权限，以确定在接收到第二交互设备发送的控制指令时，确定是否可以对第二虚拟内容进行控制。可以理解的，如果判断出第二终端的具备对第二虚拟内容的控制权限，则确定可以对第二虚拟内容进行控制，如果断出第二终端不具备对第二虚拟内容的控制权限，则确定不可以对第二虚拟内容进行控制。

在一些实施方式中，当确定出第二终端不具备对第二虚拟内容的控制选项时，第二终端可以从第一终端获取上述用于控制第二虚拟内容的控制权限。因此，该虚拟内容的交互方法还可以包括：

当不具备控制权限时，发送权限获取请求至第一终端，权限获取请求用于向第一终端获取对显示的虚拟内容的控制权限。

可以理解的是，当确定出第二终端不具备上述控制权限时，第二终端可以根据用户的操作，生成权限获取请求，并将权限获取请求发送至第一终端，该权限获取请求用于从第一终端获取用于控制第二虚拟内容的控制权限。上述用户的操作可以由第一交互设备检测得到，也可以由第二终端的图像采集装置采集到的用户的手势操作获得，具体上述用户的操作的获取方式可以不作为限定。

第二终端在发送权限获取请求之后，可以接收到第一终端根据该权限获取请求返回的权限添加信息，该权限添加信息中携带有上述用于控制第二虚拟内容的控制权限。第二终端接收到上述权限添加信息之后，可以将该权限添加信息写入到第二终端的权限信息中，从而使第一终端的权限包括对第二虚拟内容的控制权限。

当然，第二终端获取用于控制第二虚拟内容的控制权限的方式可以不作为限定，例如，也还可以从服务器获取上述控制权限。

步骤S460：当具备控制权限时，根据第二交互设备发送的控制指令，控制第二虚拟内容的显示。

当上述步骤S450判断出第二终端具备对第二虚拟内容的控制权限时，则表示第二终端可以对第二虚拟内容的控制权限。当第二终端接收到第二交互设备的控制指令时，则第二终端可以响应该控制指令，对第二虚拟内容进行控制。对虚拟内容进行控制可以包括对第二虚拟内容在二维平面下的控制以及在三维空间中的控制，第二虚拟内容在二维平面下的控制，指对第二虚拟内容进行同一个平面上的控制，且该平面可以是平行于所述用户双眼之间构成的直线的平面。对第二虚拟内容在三维空间下的控制，指对第二虚拟内容在其显示的三维虚拟空间中的控制。

在本申请实施例中，第二终端根据第二交互设备发送的控制指令，控制第二虚拟内容的显示，包括：

根据第二交互设备发送的控制指令，对第二虚拟内容进行选取、旋转、缩放比例调整、移动、或者页面选取。

对虚拟内容进行选取，指在二维平面中将虚拟内容或者虚拟内容的部分内容选取，以使虚拟内容或者虚拟内容的部分内容处于选中状态。例如，如图10所示，在菜品选择场景中，第二虚拟内容30为用于用户选择的菜品的多个虚拟选项内容时，通过上述二维平面下的选取则可以对其中部分选项内容30进行选取。又例如，在地图显示的场景中，第二虚拟内容为地图，通过上述二维平面下的选取则可以对地图中部分地图进行选取。当然，应用场景并不仅限于此，也还可以是其他应用场景。另外，上述对第二虚拟内容进行选取，可以与第二交互设备检测到的单指点击操作对应，例如与图11所示的单指点击操作对应。

对第二虚拟内容进行旋转，指在二维平面或者三维空间中将第二虚拟内容进行指定方向(例如，水平方向、垂直方向、或者自由方向等)上的转动，也就是将第二虚拟内容沿指定方向的旋转轴进行转动，使显示的第二虚拟内容的姿态(朝向方向等)发生变换。当然，应用场景并不仅限于此，也还可以是其他应用场景。另外，上述对第二虚拟内容进行旋转，可以与第二交互设备检测到的单指滑动操作或者多指滑动操作对应，例如，也可以与图12所示的多指滑动操作对应。

对第二虚拟内容进行缩放比例调整，指在将第二虚拟内容的模型进行放大比例或者缩小比例的调整，其中，放大比例以及缩小比例为显示的虚拟内容的大小相对于第二虚拟内容的原始大小的比例。例如，请同时参见图5及图13，在显示的第二虚拟内容30为心脏器官时，则可以对上述对第二虚拟内容30进行三维空间中的缩小。又例如，请同时参见图5及图14，在显示的第二虚拟内容30为心脏器官时，则可以对上述对第二虚拟内容30进行三维空间中的放大。当然，应用场景并不仅限于此，也还可以是其他应用场景。另外，上述对第二虚拟内容进行缩放比例调整，可以与第二交互设备检测到的多指滑动操作对应，例如，可以与如图15及图16所示的多指滑动操作对应，其中，图15中的多指滑动操作可以与缩小虚拟内容对应，图16中的多指滑动操作可以与放大虚拟内容对应。

对第二虚拟内容进行移动，指将第二虚拟内容或者第二虚拟内容的部分内容进行任意方向的移动。例如，在棋类游戏场景中，第二虚拟内容为显示的棋盘和棋子时，通过上述滚动可以实现棋子于棋盘上任意方向的移动。又例如，在菜品显示场景中，第二虚拟内容可以为菜品和桌面，通过上述滚动可以实现菜品于桌面上任意方向的移动。当然，应用场景并不仅限于此，也还可以是其他应用场景。另外，上述对第二虚拟内容进行移动，可以与第二交互设备检测到的单指滑动操作或者多指滑动操作对应。

对第二虚拟内容进行页面选取，指第二终端在显示多页面的第二虚拟内容时，可以从多页面的第二虚拟内容中，选取其中一个页面的显示内容进行显示。其中，进行页面选取可以包括左/右翻页、选取数字选项对应的页面等。例如，在菜品选择的场景中，可以显示多级页面的虚拟菜品选项，其中，每级页面中包括多个虚拟菜品选项，通过上述对第二虚拟内容进行页面选取，可以实现多级页面中其中一个页面的显示。当然，应用场景并不仅限于此，也还可以是其他应用场景。其中，对第二虚拟内容进行页面选取可以与单指滑动操作或者多指滑动操作对应。例如，可以与如图17及图18所示的单指滑动操作对应，其中，图17所示的单指滑动操作与向左翻页对应，图18所示的单指滑动操作与向右翻页对应。

当然，对于第二虚拟内容的控制，并不限于上述的内容，对第二虚拟内容的控制也还可以是其他控制，例如，对第二虚拟内容进行切分、对第二虚拟内容进行复制等。

在一种实施方式中，作为步骤S460的另一种方案，第二终端可以接收第二交互设备发送的手势控制参数，并根据手势参数生成控制指令，控制虚拟内容的显示。

进一步的，手势参数至少包括执行手势控制操作的手指数量，根据手势参数生成控制指令，并根据控制指令控制第二虚拟内容的显示，包括：根据手指数量，确定手势控制操作的操作类型，操作类型包括单指触控操作类型以及多指触控操作类型；基于操作类型，生成控制指令，并根据控制指令控制第二虚拟内容的显示。

其中，基于操作类型，生成控制指令，并根据控制指令控制第二虚拟内容的显示，可以包括：当操作类型为单指触控操作类型时，生成第一控制指令，并根据第一控制指令，对显示的第二虚拟内容进行二维平面下第一控制指令对应的控制。

在一些实施方式中，对显示的第二虚拟内容进行二维平面下第一控制指令对应的控制，包括：对显示的第二虚拟内容进行二维平面下的选取、滚动、移动、或者页面选取。

上述基于操作类型，生成控制指令，并根据控制指令控制第二虚拟内容的显示，可以包括：当操作类型为多指触控操作类型时，生成第二控制指令，并根据第二控制指令，对显示的第二虚拟内容进行三维空间中第二控制指令对应的控制。

在一些实施方式中，对显示的第二虚拟内容进行三维空间中第二控制指令对应的控制，包括：对显示的第二虚拟内容进行三维空间中的旋转、缩放比例调整、移动、页面选取、切分、或者复制。

上述方式中，对虚拟内容进行的具体控制，可以参照上述内容，在此不再赘述。

在一些实施方式中，手势参数包括手势控制操作的持续时间，在根据手势参数生成控制指令，并根据控制指令控制第二虚拟内容的显示之前，该第二虚拟内容的交互方法还包括：判断持续时间是否大于时间阈值；如果大于时间阈值，则执行根据手势参数生成控制指令，并根据控制指令控制第二虚拟内容的显示的步骤。

在本申请实施例中，可以在接收到上述第二交互设备检测的手势控制操作对应的手势参数之后，根据该手势参数，判断手势控制操作的持续时间是否大于时间阈值，以确定上述第二交互设备检测到的手势控制操作是否为有效的控制操作。其中，时间阈值的具体数值可以在本申请实施例中不作为限定，例如，时间阈值可以为0.5S，1S等。可以理解的是，当判断出上述手势控制操作的持续时间大于上述时间阈值时，则表示上述第二交互设备检测到的手势控制操作为有效的控制操作；当判断出上述手势控制操作的持续时间等于或者小于上述时间阈值时，则表示上述第二交互设备检测到的手势控制操作为无效的控制操作。

在本申请实施例中，当判断出上述手势控制操作的持续时间大于时间阈值时，则上述手势控制操作为有效的控制操作，因此可以根据上述手势参数生成控制指令，并根据控制指令控制第二虚拟内容的显示。根据手势参数生成控制指令，并根据控制指令控制第二虚拟内容的显示，可以参阅上述实施例的内容，在此不再赘述。当判断出上述手势控制操作的持续时间不大于时间阈值时，表示上述手势控制操作为无效的控制操作。在本申请实施例中，该第二虚拟内容的显示方法还可以包括：判断上述手势控制操作的持续时间是否大于指定阈值，其中，指定阈值小于上述时间阈值；如果上述手势控制操作持续时间大于指定阈值，则输出提示用户重新输入手势控制操作的提示信息。其中，指定阈值的具体数值在本申请实施例中可以不作为限定，满足小于时间阈值即可。

可以理解的是，在判断出上述持续时间大于指定阈值时，则表示用户可能为需要通过第二交互设备输入控制操作，以控制第二虚拟内容的显示，因此在第二交互设备检测的手势控制操作的持续时间不大于上述时间阈值，但是大于上述指定阈值时，则可以输出上述提示信息，以提示用户重新输入手势控制操作。当第二交互设备检测的手势控制操作的持续时间不大于上述时间阈值，并且不大于上述指定阈值时，则第二终端可以忽略上述接收的手势控制操作对应的手势参数。从而，可以帮助用户通过第二交互设备输入有效的手势控制操作，以对控制虚拟空间中的第二虚拟内容的显示。

在一些实施方式中，该第二虚拟内容的交互方法还包括：第二交互设备同时检测到多种不同的手势控制操作时，输出提示用户重新输入手势控制操作的提示信息。

可以理解的是，可能存在用户在操作第二交互设备时，双手同时在第二交互设备的触控区域进行了控制操作，或者用户与触控区域单手输入操作，但是被检测视为不能识别的多指触控操作时，则第二终端根据手势参数，可以确定第二交互设备同时检测到多种不同的手势控制操作，因此可以将上述多种不同的手势控制操作，视为无效的手势控制操作，并输出提示用户重新输入手势控制操作的提示信息，以提示用户输入有效的控制操作，控制虚拟空间中的第二虚拟内容的显示。

另外，第二终端可以提供将上述提示功能开启和关闭的功能，以避免用户不小心触控到第二交互设备的触控区域，而产生提示信息。

需要说明的是，在上述实施例中第一终端对第一虚拟内容的控制，也可以参照上述方式进行。

步骤S470：发送操控指令和/或第二虚拟内容对应的内容数据至其他第二终端，操控指令用于指示其他第二终端对显示的内容进行控制，第二虚拟内容对应的内容数据用于指示其他第二终端显示第二虚拟内容。

可以理解的，第二终端还可以与至少一个其他第二终端连接。第二终端也可以发送操控指令至其他第二终端，实现第二终端的用户对其他第二终端的显示的内容的控制。也可以发送其显示的第二虚拟内容的内容数据至其他第二终端，达到分享其显示的第二虚拟内容的目的。

在一种应用场景中，第一终端可以作为会议主讲者的终端，以及第二终端作为其他会议参与者的终端。通过上述方法，可以实现主讲者的第二终端可以根据其他参与者对应的第二交互设备上第二标记物的身份信息，分享不同的第二虚拟内容(分享内容)至其他会议参与者的其他第二终端。另外，其他会议参与者的其他第二终端可以根据对第二虚拟内容的控制权限，对第二虚拟内容进行控制，还可以分享其观看的第二虚拟内容至其他参与者的其他第二终端，以及控制其他参与者的其他第二终端显示的第二虚拟内容。

本申请实施例提供的虚拟内容的交互方法，第二终端发送对应的第二交互设备上第二标记物的身份信息至第一终端，接收第一终端根据身份信息发送的与第一终端显示的第一虚拟内容对应的第二虚拟内容的内容数据，根据内容数据以及第二终端与第二交互设备之间的第二相对空间位置关系，显示第二虚拟内容，实现第一终端分享与其显示的第一虚拟内容对应的第二虚拟内容至第二终端进行显示，实现终端之间显示内容的良好交互。并且，在判断出第二终端的权限包括对第二虚拟内容的控制权限时，第二终端可以根据第二交互设备的控制指令，控制第二虚拟内容的显示，实现了对显示内容的控制，提升了与虚拟内容的交互性。

请参见图19，其示出了本申请提供的一种虚拟内容的交互装置500的结构框图。该虚拟内容的交互装置500应用于第一终端，第一终端与第一交互设备连接；第一终端还连接至少一个第二终端，第二终端对应至少一个第二交互设备。该虚拟内容的交互装置500包括：内容显示模块510、内容获取模块520以及数据发送模块530。其中，内容显示模块510用于根据第一终端与第一交互设备之间的第一相对空间位置关系显示第一虚拟内容；内容获取模块520用于基于第一虚拟内容获取第二虚拟内容；数据发送模块530用于向第二终端发送与第二虚拟内容对应的内容数据，内容数据用于指示第二终端显示第二虚拟内容，并根据对应的第二交互设备发送的控制指令控制第二虚拟内容的显示。

在本申请实施例中，第一交互设备设置有第一标记物。内容显示模块510可以具体用于：获取包含第一标记物的图像；识别图像中的第一标记物，并获取第一终端与第一交互设备之间的第一相对空间位置关系；根据第一相对空间位置关系显示第一虚拟内容。该虚拟内容的交互装置500还可以包括虚拟内容控制模块，虚拟内容控制模块用于当接收到第一交互设备发送的控制指令时，根据第一交互设备发送的控制指令控制第一虚拟内容的显示。

在本申请实施例中，第二交互设备上设置有第二标记物。内容获取模块520可以具体用于：接收第二终端发送的身份信息，身份信息包括第二终端对应的第二交互设备上的第二标记物的身份信息；从第一虚拟内容中获取与身份信息对应的第二虚拟内容。

进一步的，数据发送模块530可以具体用于：向第二终端发送与身份信息对应的第二虚拟内容的内容数据。

请参见图20，其示出了本申请提供的另一种虚拟内容的交互装置600的结构框图。该虚拟内容的交互装置600可以应用于第二终端，第二终端，第二终端与第二交互设备连接；第二终端还连接至少一个第一终端，第一终端对应至少一个第一交互设备。该虚拟内容的交互装置600可以包括：数据接收模块610、位置关系获取模块620、显示模块630以及显示控制模块640。其中，数据接收模块610用于接收第一终端发送的与第二虚拟内容对应的内容数据，第二虚拟内容为第一终端根据显示的第一虚拟内容获取的虚拟内容；位置关系获取模块620用于确定第二终端与第二交互设备之间的第二相对空间位置关系；显示模块630用于根据内容数据以及第二相对空间位置关系显示第二虚拟内容；显示控制模块640用于接收第二交互设备发送的控制指令，根据控制指令控制第二虚拟内容的显示。

在本申请实施例中，该虚拟内容的交互装置600还可以包括：权限判断模块。权限判断模块用于判断第二终端是否具备对显示的第二虚拟内容的控制权限。如果第二终端具备控制权限，则显示控制模块630根据第二交互设备发送的控制指令，控制第二虚拟内容的显示。

在本申请实施例中，该虚拟内容的交互装置600还可以包括：请求发送模块。其中，请求发送模块用于当第二终端不具备控制权限时，发送权限获取请求至第一终端，权限获取请求用于向第一终端获取对显示的虚拟内容的控制权限。

在本申请实施例中，第二终端还与至少一个其他第二终端，该虚拟内容的交互装置600还可以包括：内容发送模块。内容发送模块用于发送操控指令和/或第二虚拟内容对应的内容数据至其他第二终端，操控指令用于指示其他第二终端对显示的内容进行控制，第二虚拟内容对应的内容数据用于指示其他第二终端显示第二虚拟内容。

在本申请实施例中，第二交互设备上设置有第二标记物。该虚拟内容的交互装置600还可以包括：身份发送模块。身份发送模块用于发送身份信息至第一终端，身份信息包括第二终端对应的第二交互设备上的第二标记物的身份信息。数据接收模块用于接收第一终端发送的第二虚拟内容的内容数据，所述第二虚拟内容为第一终端从显示的第一虚拟内容中获取的与身份信息对应的虚拟内容。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本申请所提供的几个实施例中，模块相互之间的耦合可以是电性，机械或其它形式的耦合。另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。

在本申请实施例中，请再次参阅图1，其示出了本申请提供的虚拟内容的交互系统10的示意图，虚拟内容的交互系统10包括：第一终端100、第一交互设备300、第二终端200以及第二交互设备400，第一终端100与至少一个第二终端200连接，第一终端100与至少一个第一交互设备300连接，第二终端200与至少一个第二交互设备400连接。其中，第一终端100用于根据第一终端100与连接的第一交互设备300之间的第一相对空间位置关系显示第一虚拟内容，基于第一虚拟内容获取第二虚拟内容，向连接的第二终端发送与第二虚拟内容对应的内容数据；第二终端200用于接收连接的第一终端100发送的内容数据，根据内容数据以及第二终端200与连接的第二交互设备400之间的第二相对空间位置关系显示第二虚拟内容，根据第二交互设备400发送的控制指令，控制第二虚拟内容的显示。

综上所述，本申请提供的方案，应用于第一终端，第一终端与第一交互设备连接，第一终端还连接至少一个第二终端，第二终端对应至少一个第二交互设备，第一终端根据第一终端与第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，基于第一虚拟内容获取第二虚拟内容，向第二终端发送与第二虚拟内容对应的内容数据，第二终端可显示第二虚拟内容，并根据对应的第二交互设备发送的手势控制操作的手势参数控制第二虚拟内容的显示，从而较好的实现终端之间显示的虚拟内容的交互和控制。

请参考图21，其示出了本申请实施例提供的一种终端设备的结构框图。其中，终端设备可以为上述第一终端以及第二终端。该终端设备100可以是智能手机、平板电脑、电子书、头戴显示装置等能够运行应用程序的终端设备。本申请中的终端设备100可以包括一个或多个如下部件：处理器110、存储器120、图像采集装置130以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器120中并被配置为由一个或多个处理器110执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。

处理器110可以包括一个或者多个处理核。处理器110利用各种接口和线路连接整个终端设备100内的各个部分，通过运行或执行存储在存储器120内的指令、程序、代码集或指令集，以及调用存储在存储器120内的数据，执行终端设备100的各种功能和处理数据。可选地，处理器110可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器110中，单独通过一块通信芯片进行实现。

存储器120可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端100在使用中所创建的数据等。

在本申请实施例中，图像采集装置130用于采集标记物的图像。图像采集装置130可以为红外摄像头，也可以是彩色摄像头，具体的摄像头类型在本申请实施例中并不作为限定。

请参考图22，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质800中存储有程序代码，程序代码可被处理器调用执行上述方法实施例中所描述的方法。

计算机可读存储介质800可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质800包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质800具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码810可以例如以适当形式进行压缩。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种虚拟内容的交互方法，其特征在于，应用于第一终端，所述第一终端与第一交互设备连接；所述第一终端还连接至少一个第二终端，所述第二终端对应至少一个第二交互设备，所述第一交互设备设置有第一标记物，所述第二交互设备上设置有第二标记物，所述方法包括：

根据所述第一终端与所述第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，所述第一相对空间位置关系由识别所述第一标记物得到；

接收所述第二终端发送的身份信息，所述身份信息包括所述第二终端对应的第二交互设备上的第二标记物的身份信息；

从所述第一虚拟内容中获取与所述身份信息对应的第二虚拟内容，所述第二虚拟内容为与所述第一虚拟内容在类型上相关的内容、所述第一虚拟内容的部分内容、或者所述第一虚拟内容的扩展内容；

向所述第二终端发送所述与身份信息对应的第二虚拟内容的内容数据，所述内容数据用于指示所述第二终端显示所述第二虚拟内容，并根据所述对应的第二交互设备发送的控制指令控制所述第二虚拟内容的显示。

2.根据权利要求1所述的方法，其特征在于，所述第一交互设备设置有第一标记物；

所述根据所述第一终端与所述第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，包括：

获取包含所述第一标记物的图像；

识别所述图像中的第一标记物，并获取所述第一终端与第一交互设备之间的第一相对空间位置关系；

根据所述第一相对空间位置关系显示第一虚拟内容；

在所述显示第一虚拟内容之后，所述方法还包括：

当接收到所述第一交互设备发送的控制指令时，根据所述第一交互设备发送的控制指令控制所述第一虚拟内容的显示。

3.一种虚拟内容的交互方法，其特征在于，应用于第二终端，所述第二终端与第二交互设备连接；所述第二终端还连接至少一个第一终端，所述第一终端对应至少一个第一交互设备，所述第一交互设备设置有第一标记物，所述第二交互设备上设置有第二标记物，所述方法包括：

发送身份信息至所述第一终端，所述身份信息包括所述第二终端对应的第二交互设备上的第二标记物的身份信息；

接收所述第一终端发送的第二虚拟内容的内容数据，所述第二虚拟内容为所述第一终端从显示的第一虚拟内容中获取的与所述身份信息对应的虚拟内容，所述第二虚拟内容为与所述第一虚拟内容在类型上相关的内容、所述第一虚拟内容的部分内容、或者所述第一虚拟内容的扩展内容；

确定所述第二终端与第二交互设备之间的第二相对空间位置关系，所述第二相对空间位置关系由识别所述第二标记物得到；

根据所述内容数据以及所述第二相对空间位置关系显示所述第二虚拟内容；

接收所述第二交互设备发送的控制指令，根据所述控制指令控制所述第二虚拟内容的显示。

4.根据权利要求3所述的方法，其特征在于，在所述根据所述第二交互设备发送的控制指令，控制所述第二虚拟内容的显示之前，所述方法还包括：

判断所述第二终端是否具备对显示的所述第二虚拟内容的控制权限；

当具备所述控制权限时，则执行所述根据所述第二交互设备发送的控制指令，控制所述第二虚拟内容的显示的步骤。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

当不具备所述控制权限时，发送权限获取请求至所述第一终端，所述权限获取请求用于向所述第一终端请求获取对显示的虚拟内容的控制权限。

6.根据权利要求3所述的方法，其特征在于，所述第二终端还与至少一个其他第二终端连接；

在所述根据所述第二交互设备发送的控制指令，控制所述第二虚拟内容的显示之后，所述方法还包括：

发送操控指令和/或所述第二虚拟内容对应的内容数据至所述其他第二终端，所述操控指令用于指示所述其他终端对显示的内容进行控制，所述第二虚拟内容对应的内容数据用于指示所述其他终端显示所述第二虚拟内容。

7.一种虚拟内容的交互装置，其特征在于，应用于第一终端，所述第一终端与第一交互设备连接；所述第一终端还连接至少一个第二终端，所述第二终端对应至少一个第二交互设备，所述装置包括：内容显示模块、内容获取模块以及数据发送模块，所述第一交互设备设置有第一标记物，所述第二交互设备上设置有第二标记物，其中，

所述内容显示模块用于根据所述第一终端与所述第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，所述第一相对空间位置关系由识别所述第一标记物得到；

所述内容获取模块用于接收所述第二终端发送的身份信息，所述身份信息包括所述第二终端对应的第二交互设备上的第二标记物的身份信息；从所述第一虚拟内容中获取与所述身份信息对应的第二虚拟内容，所述第二虚拟内容为与所述第一虚拟内容在类型上相关的内容、所述第一虚拟内容的部分内容、或者所述第一虚拟内容的扩展内容；

所述数据发送模块用于向所述第二终端发送所述与身份信息对应的第二虚拟内容的内容数据，所述内容数据用于指示所述第二终端显示所述第二虚拟内容并根据所述对应的第二交互设备发送的控制指令控制所述第二虚拟内容的显示。

8.一种虚拟内容的交互系统，其特征在于，所述虚拟内容的交互系统包括：第一终端、第一交互设备、第二终端及第二交互设备，所述第一终端与至少一个所述第二终端连接，所述第一终端与至少一个所述第一交互设备连接，所述第二终端与至少一个所述第二交互设备连接，所述第一交互设备设置有第一标记物，所述第二交互设备上设置有第二标记物，其中，

所述第一终端用于根据所述第一终端与连接的第一交互设备之间的第一相对空间位置关系显示第一虚拟内容，所述第一相对空间位置关系由识别所述第一标记物得到；

所述第二终端用于发送身份信息至所述第一终端，所述身份信息包括所述第二终端对应的第二交互设备上的第二标记物的身份信息；

所述第一终端还用于接收所述第二终端发送的身份信息，所述身份信息包括所述第二终端对应的第二交互设备上的第二标记物的身份信息；从所述第一虚拟内容中获取与所述身份信息对应的第二虚拟内容；向连接的第二终端发送与所述与身份信息对应的第二虚拟内容对应的内容数据，所述第二虚拟内容为与所述第一虚拟内容在类型上相关的内容、所述第一虚拟内容的部分内容、或者所述第一虚拟内容的扩展内容；

所述第二终端用于接收连接的第一终端发送的所述内容数据，根据所述内容数据以及所述第二终端与连接的第二交互设备之间的第二相对空间位置关系显示所述第二虚拟内容，根据所述第二交互设备发送的控制指令，控制所述第二虚拟内容的显示，所述第二相对空间位置关系由识别所述第二标记物得到。

9.一种终端设备，其特征在于，包括：

一个或多个处理器；

存储器；

一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行如权利要求1-2任一项所述的方法和/或执行如权利要求4-8任一项所述的方法。

10.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1-2任一项所述的方法和/或执行如权利要求3-6任一项所述的方法。

Images