CN111198609A - 交互显示方法、装置、电子设备及存储介质 - Google Patents
交互显示方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN111198609A CN111198609A CN201811369467.8A CN201811369467A CN111198609A CN 111198609 A CN111198609 A CN 111198609A CN 201811369467 A CN201811369467 A CN 201811369467A CN 111198609 A CN111198609 A CN 111198609A
- Authority
- CN
- China
- Prior art keywords
- virtual content
- data
- terminal device
- virtual
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种交互显示方法、装置、电子设备及存储介质,该交互显示方法应用于终端设备,该交互显示方法包括:获取包含目标标记物的标记物图像;根据所述标记物图像,获取所述终端设备相对所述目标标记物的空间位置;从服务器实时获取用于显示虚拟内容的虚拟内容数据,所述虚拟内容数据包括所述服务器根据实时采集至少一个终端设备的操作数据得到的数据;根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。本方法可以实现设备之间的交互,以共同显示虚拟内容。
Description
技术领域
本申请涉及显示技术领域,更具体地,涉及一种交互显示方法、装置、电子设备及存储介质。
背景技术
近年来,随着科技的进步,增强现实(AR,Augmented Reality)等技术已逐渐成为国内外研究的热点,增强现实是通过计算机系统提供的信息增加用户对现实世界感知的技术,其将计算机生成的虚拟对象、场景或系统提示信息等内容对象叠加到真实场景中,来增强或修改对现实世界环境或表示现实世界环境的数据的感知。在传统的增强现实的显示技术中,在利用设备进行显示内容时,设备之间仅能单独显示虚拟内容,使用户间的互动性较差。
发明内容
本申请实施例提出了一种交互显示方法、装置、电子设备及存储介质,能够实现设备之间共同显示虚拟内容。
第一方面,本申请实施例提供了一种交互显示方法,应用于终端设备,所述方法包括:获取包含目标标记物的标记物图像;根据所述标记物图像,获取所述终端设备相对所述目标标记物的空间位置;从服务器实时获取用于显示虚拟内容的虚拟内容数据,所述虚拟内容数据包括所述服务器根据实时采集至少一个终端设备的操作数据得到的数据;根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
第二方面,本申请实施例提供了一种数据传输方法,应用于服务器,所述方法包括:实时采集至少一个终端设备的操作数据;根据所述操作数据,得到显示虚拟内容的虚拟内容数据;向所述终端设备实时发送所述虚拟内容数据,所述虚拟内容数据用于指示所述终端设备根据相对目标标记物的空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
第三方面,本申请实施例提供了一种交互显示装置,应用于终端设备,所述装置包括:图像获取模块、图像识别模块、数据获取模块以及内容显示模块,其中,所述图像获取模块用于获取包含目标标记物的标记物图像;所述图像识别模块用于根据所述标记物图像,获取所述终端设备相对所述目标标记物的空间位置;所述数据获取模块用于从服务器实时获取用于显示虚拟内容的虚拟内容数据,所述虚拟内容数据包括所述服务器根据实时采集至少一个终端设备的操作数据得到的数据;所述内容显示模块用于根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
第四方面,本申请实施例提供了一种交互显示系统,所述系统包括服务器以及与所述服务器通信连接的终端设备,其中,所述服务器用于实时采集至少一个终端设备的操作数据,并根据所述操作数据,得到显示虚拟内容的虚拟内容数据;所述终端设备用于获取相对目标标记物的空间位置,并向所述服务器实时获取所述虚拟内容数据,所述终端设备为所述至少一个终端设备中任一终端设备;所述服务器还用于向所述终端设备实时发送所述虚拟内容数据;所述目标终端设备还用于接收所述虚拟内容数据,并根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
第五方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储器;一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述第一方面提供的交互显示方法。
第六方面,本申请实施例提供了一种存储介质,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行上述第一方面提供的交互显示方法。
第七方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储器;一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述第二方面提供的数据传输方法。
第八方面,本申请实施例提供了一种存储介质,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行上述第二方面提供的数据传输方法。
本申请提供的方案,通过获取包含目标标记物的标记物图像,根据标记物图像,获取终端设备相对目标标记物的空间位置,从服务器获取实时获取用于显示内容的虚拟内容数据,其中,该虚拟内容数据为服务器根据实时采集至少一个终端设备的操作数据得到的数据,根据空间位置以及虚拟内容数据,对虚拟内容进行显示。由于上述虚拟内容数据为根据操作数据生成的数据,从而可以实现设备间共同显示虚拟内容。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了一种适用于本申请实施例的应用场景的一种示意图。
图2示出了一种适用于本申请实施例的应用场景的另一种示意图。
图3示出了根据本申请一个实施例的交互显示方法流程图。
图4示出了根据本申请另一个实施例的交互显示方法一种流程图。
图5示出了根据本申请实施例提供的一种显示效果示意图。
图6示出了根据本申请实施例提供的交互显示方法的另一种流程图。
图7示出了根据本申请实施例提供的另一种显示效果示意图。
图8示出了根据本申请又一个实施例的交互显示方法流程图。
图9示出了根据本申请再一个实施例的交互显示方法流程图。
图10示出了根据本申请一个实施例的交互显示装置的框图。
图11示出了根据本申请一个实施例的交互显示装置中内容显示模块的框图。
图12是本申请实施例的用于执行根据本申请实施例的内容显示方法的终端设备的框图。
图13是本申请实施例的用于保存或者携带实现根据本申请实施例的内容显示方法的程序代码的存储单元。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
下面对本申请实施例提供的交互显示方法的应用场景进行介绍。
请参见图1,示出了本申请实施例提供的交互显示方法的应用场景的示意图,该应用场景包括交互显示系统10。该交互显示系统10包括:多个终端设备100、服务器200以及至少一个标记物300。终端设备100与服务器200之间通信连接,实现数据的交互。
在本申请实施例中,终端设备100可以是头戴显示装置,也可以是手机、平板等移动设备。终端设备100为头戴显示装置时,头戴显示装置可以为一体式头戴显示装置。终端设备100也可以是与外接式头戴显示装置连接的手机等智能终端,即终端设备100可作为头戴显示装置的处理和存储设备,插入或者接入外接式头戴显示装置,在头戴显示装置中对虚拟内容进行显示功能。上述服务器200可以是本地服务器,也可以是云服务器,具体服务器的类型在本申请实施例中可以不作为限定。
在本申请实施例中,上述标记物300的图像存储于终端设备100中。上述标记物300可以包括至少一个具有一个或者多个特征点的子标记物。当上述标记物300处于终端设备100的视野范围内时,终端设备100可将上述处于视野范围内的标记物300作为目标标记物,并采集包含该目标标记物的图像。在采集到包含该目标标记物的图像时,可以识别采集到的目标标记物的图像,得到该目标标记物相对终端设备的位置、朝向等空间位置信息,以及目标标记物的身份信息等识别结果。终端设备可基于目标标记物相对终端设备的空间位置等信息显示相应的虚拟内容。可以理解地,具体的标记物在本申请实施例中并不作为限定,仅需可以被终端设备识别追踪即可。
上述多个终端设备100可以根据标记物300显示虚拟内容,并且各个终端设备100可以实时将对显示的虚拟内容的操作数据上传至服务器200,服务器200可以根据操作数据实时生成虚拟内容数据发送至连接的各个终端设备100,各个终端设备100可以根据实时接收的虚拟内容数据对虚拟内容进行显示。
在一些实施方式中,如图2所示,终端设备100进入应用场景显示虚拟内容时,可以将终端设备100与路由器500连接,路由器500可以与服务器200通信连接,实现终端设备100与服务器200通过路由器500连接,从而可以从服务器200获取虚拟内容数据,以显示应用场景对应的虚拟内容。其中,终端设备100可以通过扫描并识别目标标记物,确定标记物所对应的应用场景,并且可以获取到路由器500的密码等路由器信息,从而根据路由器信息,可以连接路由器500,实现与服务器200的通信。
基于上述显示系统,本申请实施例提供了一种交互显示方法,应用于上述显示系统的终端设备,通过获取终端设备相对目标标记物的空间位置,从服务器实时获取服务器根据实时采集至少一个终端设备的操作数据得到的虚拟内容数据,根据该空间位置以及虚拟内容数据,对虚拟内容进行显示,实现设备间共同显示虚拟内容。
请参阅图3,本申请实施例提供了一种交互显示方法,可应用于终端设备,该终端设备可以为上述显示系统中的任一终端设备,该方法可以包括:
步骤S110:获取包含目标标记物的标记物图像。
在传统的增强现实的显示技术中,大多是设备单独对虚拟内容进行显示。其中,增强现实(AR,Augmented Reality)是通过计算机系统提供的信息增加用户对现实世界感知的技术,其将计算机生成的虚拟对象、场景或系统提示信息等内容对象叠加到真实场景中,来增强或修改对现实世界环境或表示现实世界环境的数据的感知。而很多情况下,需要对显示的虚拟内容进行交互,达到设备之间共同显示虚拟内容的目的。为实现设备间的虚拟内容进行交互,则需要每个设备同步相关数据,以使显示的虚拟内容保持一致。
在一些实施方式中,在显示虚拟内容于虚拟空间时,可以获取包含目标标记物的标记物图像,以确定目标标记物的空间位置,便于虚拟内容显示于虚拟空间。其中,虚拟内容可以为人物模型、动物模型、建筑物模型等,具体的虚拟内容在本申请实施例中可以不作为限定。
在一些实施方式中,目标标记物可以设置于终端设备的视野范围内容的位置。在终端设备需要对虚拟内容显示时,可以对存在于终端设备的视野范围内的目标标记物进行图像采集。其中,终端设备的视野范围指终端设备的图像采集装置的视野范围,图像采集装置的视野范围可以由视场角的大小决定。
在一些实施方式中,上述目标标记物可以包括至少一个子标记物,子标记物可以是具有一定形状的图案。在一个实施例中,每个子标记物可具有一个或多个特征点,其中,特征点的形状不做限定,可以是圆点、圆环,也可以是三角形、其他形状。另外,不同目标标记物内的子标记物的分布规则不同,因此,每个目标标记物可具备不同的身份信息。终端设备通过识别标识物中包含的子标记物,可以获取与目标标记物对应的身份信息,该身份信息可以是编码等可用于唯一标识目标标记物的信息,但不限于此。
作为一种方式,目标标记物的轮廓可以为矩形,当然,目标标记物的形状也可以是其他形状,在此不做限定,矩形的区域以及该区域内的多个子标记物构成一个目标标记物。当然,具体的目标标记物在本申请实施例中并不作为限定,目标标记物仅需要目标标记物能被终端设备识别即可。
步骤S120:根据标记物图像,获取终端设备相对目标标记物的空间位置。
在终端设备得到包含上述目标标记物的标记物图像之后,则可以对该标记物图像进行识别,以得到对目标标记物的识别结果。其中,对目标标记物的识别结果可以包括终端设备相对目标标记物的空间位置,以及目标标记物的身份信息等。其中,终端设备相对目标标记物的空间位置可以包括终端设备相对目标标记物的位置以及姿态信息等,姿态信息为目标标记物相对终端设备的朝向及旋转角度。
从而,可以得到上述终端设备相对目标标记物的空间位置。
步骤S130:从服务器实时获取用于显示虚拟内容的虚拟内容数据,虚拟内容数据包括服务器根据实时采集至少一个终端设备的操作数据得到的数据。
在一些实施方式中,终端设备在对虚拟内容进行显示时,可以从服务器实时获取用于显示虚拟内容的虚拟内容数据。服务器可以实时采集连接的至少一个终端设备的操作数据,并根据采集的操作数据得到虚拟内容数据。其中,操作数据可以为终端设备根据接收的对虚拟内容的操作指令,对虚拟内容进行操作的数据,操作可以是对虚拟内容的任意操作,例如,移动、编辑或是其他交互操作等。上述至少一个终端设备为上述交互显示系统中的任一终端设备,即可以为执行该交互显示方法的终端设备,也可以为显示系统中的其他的终端设备。也就是说,上述实时获取的操作数据,可以是执行该交互显示方法的终端设备所获取到的对显示的虚拟内容的操作数据,也可以是其他终端设备所获取到的对显示的虚拟内容的操作数据。上述虚拟内容数据的具体内容在本申请实施例中可以不作为限定,例如,虚拟内容数据还可以包括虚拟内容的模型数据。
进一步的,上述从服务器获取的虚拟内容数据,可以用于显示虚拟内容,并且可以根据虚拟内容数据显示出上述操作数据对于虚拟内容对应的效果,以达到对虚拟内容的操作的目的。
步骤S140:根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
在一些实施方式中,在获取到终端设备相对目标标记物的空间位置,以及从服务器实时获取的虚拟内容数据后,则可以对虚拟内容进行显示。
进一步的,终端设备可以根据虚拟内容与目标标记物的位置相对关系,以及终端设备相对目标标记物的空间位置,获取虚拟内容的显示位置,以用于后续对虚拟选项内容进行显示。
可以理解的,在将虚拟内容显示于虚拟空间时,可以获取终端设备相对目标标记物的空间位置,即得到目标标记物于现实空间中的空间坐标,该目标空间坐标可以用于表示目标标记物与头戴显示装置上的跟踪摄像头之间的位置关系,也可以用于表示目标标记物与终端设备之间的位置关系。
在获取到目标标记物在现实空间中的空间坐标,将目标标记物在现实空间中的空间坐标转换为虚拟坐标之后,根据需要显示的虚拟内容与目标标记物的位置相对关系,得到需要显示的虚拟内容在虚拟空间中的渲染坐标,以便对虚拟内容。
在获取到虚拟内容在虚拟空间中的渲染坐标之后,则可以根据上述虚拟内容数据,在虚拟空间中渲染虚拟内容于渲染坐标处,实现虚拟内容在虚拟空间中的显示,用户通过佩戴的头戴显示装置等终端设备可以观察到虚拟内容与真实场景叠加的显示效果。由于,虚拟内容数据中包括根据终端设备的操作数据得到的数据,因此,显示的虚拟内容可以表现出上述操作数据所对应的效果。例如,操作数据为使虚拟内容移动的数据,则显示的虚拟内容可以呈现出虚拟内容移动后的效果。
也就是说,通过上述方式,可以使在显示系统中的各个终端设备显示同一虚拟内容时,任何一个终端设备获取到操作数据,即任何一个终端设备的用户对虚拟内容进行操作时,显示系统中的每个终端设备均能将操作数据对应的效果呈现于虚拟内容,可使每个终端设备显示的虚拟内容呈现的效果保持一致。
本申请实施例提供的交互显示方法,根据终端设备相对目标标记物的空间位置,以及从服务器实时获取的用于显示虚拟内容的虚拟内容数据,对虚拟内容进行显示,实现虚拟内容显示于虚拟空间,使用户可以观察到虚拟内容叠加于真实场景的显示效果。由于上述虚拟内容数据包括服务器根据实时采集的显示系统中的终端设备的操作数据得到的数据,因此显示的虚拟内容可以表现出上述操作数据所对应的效果,即实现同步各个终端设备对虚拟内容的操作数据的效果,从而实现设备之间对应虚拟内容的共同显示,增加显示的互动性。
请参见图4,本申请实施例提供了一种交互显示方法,可应用于终端设备,该终端设备可以为上述显示系统中的任一终端设备,该方法可以包括:
步骤S210:获取包含目标标记物的标记物图像。
步骤S220:根据标记物图像,获取终端设备相对目标标记物的空间位置。
其中,步骤S210以及步骤S220可以参阅上述实施例的内容,在此不再赘述。
步骤S230:从服务器实时获取用于显示虚拟内容的虚拟内容数据,虚拟内容数据包括服务器根据实时采集至少一个终端设备的操作数据得到的数据。
在一些实施方式中,从服务器实时获取的用于显示虚拟内容的虚拟内容数据,可以为服务器根据实时采集至少一个终端设备的操作数据得到的数据。
进一步的,上述虚拟内容数据可以包括渲染数据,该渲染数据用于渲染虚拟内容。可以理解的,服务器可以根据实时采集的上述显示系统中终端设备的操作数据,生成相应的渲染数据,该渲染数据可以为操作数据对应的效果施加于虚拟内容后,所得到的虚拟内容的模型数据。也就是说,该渲染数据在终端设备用于显示时,可以显示出施加上述操作数据对应的效果后的虚拟内容,以达到对虚拟内容的操作的目的。其中,上述操作数据对应的效果可以包括:虚拟内容的姿势的变化、位置的变化及模型的颜色、大小等变化效果,但不限于此。例如,操作数据为剪切虚拟内容的某部分内容的操作数据,则渲染数据为被剪切该部分内容后的虚拟内容所对应的模型数据。当然,具体的虚拟内容数据在本申请实施例中可以不作为限定。
步骤S240:获取虚拟内容的渲染数据。
在一些实施方式中,可以从上述从服务器获取的虚拟内容数据中得到虚拟内容的上述渲染数据,以显示施加上述操作数据对应的效果后的虚拟内容。
步骤S250:根据空间位置确定虚拟内容的显示位置。
在一些实施方式中,在对虚拟内容进行显示时,终端设备可以根据终端设备相对目标标记物的空间位置,以及虚拟内容与目标标记物的位置相对关系,获取虚拟内容的显示位置,即虚拟内容在虚拟空间中的渲染坐标,以用于后续对虚拟选项内容进行显示。
步骤S260:基于渲染数据以及显示位置,对虚拟内容进行渲染并显示。
在获取到虚拟内容的显示位置之后,即获取到虚拟内容在虚拟空间中的渲染坐标之后,则可以根据上述渲染数据,在虚拟空间中渲染虚拟内容于渲染坐标处,实现将上述渲染数据对应的虚拟内容在虚拟空间中的显示,用户通过佩戴的头戴显示装置等终端设备可以观察到虚拟内容与真实场景叠加的显示效果。由于渲染虚拟内容的渲染数据为操作数据对应的效果施加于虚拟内容后,所得到的虚拟内容的模型数据,因此,渲染并显示的虚拟内容可以表现出上述操作数据所对应的效果。例如,渲染数据为被剪切某部分内容后的虚拟内容所对应的模型数据,则根据渲染数据渲染并显示的虚拟内容为被剪切该部分内容后的虚拟内容。
也就是说,通过上述方式,可以使在显示系统中的各个终端设备显示同一虚拟内容时,任何一个终端设备获取到操作数据,即任何一个终端设备的用户对虚拟内容进行操作时,显示系统中的每个终端设备均能将操作数据对应的效果呈现于虚拟内容,可使每个终端设备显示的虚拟内容呈现的效果保持一致。
另外,由于根据终端设备相对目标标记物的空间位置,对虚拟内容进行显示,因此显示系统中终端设备相对目标标记物的空间位置不同时,其显示的虚拟内容的角度及位置也不同。例如,虚拟内容为动物模型时,在两个终端设备相对目标标记物的位置为相对的状态时,其中一个终端设备可以显示动物模型的正面角度,则另外一个终端设备可以显示动物模型的背面角度。
在一些应用场景中,请参见图5,虚拟内容可以为游戏中的虚拟游戏对象400,例如游戏中的怪兽,上述显示系统中的各个终端设备(图中仅示出第一终端设备101以及第二终端设备102)共同显示该虚拟游戏对象400,另外,第一终端设备101以及第二终端设备102还可以显示出虚拟游戏对象400的血量条,并且由于第一终端设备101以及第二终端设备102相对目标标记物300的位置不同,各自展示的虚拟内容的角度也将不同。通过本申请实施例提供的交互显示方法,则可以使各个终端设备能实时将所有终端设备的操作数据对应的效果呈现于虚拟游戏对象。其中,任一终端设备获取到的对游戏中怪兽的击打数据,均可以将效果实时呈现于显示系统中每个终端设备显示的虚拟内容,即同步呈现出怪兽被击打后的效果(例如流血、血量值变化等),在任一终端设备获取到对虚拟游戏对象击打的操作数据,则可以在所有终端设备同步呈现出血量条的变化。例如,如图6所示,第一终端设备101获取到对虚拟游戏对象的操作数据后,可以将操作数据发送至服务器200,服务器200接收到第一终端设备101发送的操作数据后,根据操作数据生成虚拟内容数据,再将虚拟内容数据同步发送至各个终端设备(图中仅示出第一终端设备101以及第二终端设备102),各个终端设备在接收到虚拟内容数据后则可以对虚拟游戏对象进行显示,实现虚拟游戏对象显示的同步。请参见图7,当上述操作数据为对虚拟游戏对象400的击打的操作数据时,则经过图6所示流程处理之后,第一终端设备101以及第二终端设备102可以同步显示出血量条变化后的虚拟游戏对象400。从而可以实现多个用户共同参与游戏,提升趣味性。请当然,以上应用场景仅为举例,并不代表本申请实施例提供的交互显示方法的应用场景的限定。
本申请实施例提供的交互显示方法,根据终端设备相对目标标记物的空间位置,以及从服务器实时获取的虚拟内容数据中的渲染数据,对虚拟内容进行显示,实现虚拟内容显示于虚拟空间,使用户可以观察到虚拟内容叠加于真实场景的显示效果。由于上述渲染数据为操作数据对应的效果施加于虚拟内容后,所得到的虚拟内容的模型数据,因此显示的虚拟内容可以表现出上述操作数据所对应的效果,即实现同步各个终端设备对虚拟内容的操作数据的效果,从而实现设备之间对应虚拟内容的共同显示,增加显示的互动性。
请参见图8,本申请实施例提供了一种交互显示方法,可应用于终端设备,该终端设备可以为上述显示系统中的任一终端设备,该方法可以包括:
步骤S310:获取包含目标标记物的标记物图像。
步骤S320:根据标记物图像,获取终端设备相对目标标记物的空间位置。
其中,步骤S310以及步骤S320可以参阅上述实施例的内容,在此不再赘述。
步骤S330:从服务器实时获取用于显示虚拟内容的虚拟内容数据,虚拟内容数据包括服务器根据实时采集至少一个终端设备的操作数据得到的数据。
在一些实施方式中,从服务器实时获取的用于显示虚拟内容的虚拟内容数据,可以为服务器根据实时采集至少一个终端设备的操作数据得到的数据。
进一步的,上述虚拟内容数据可以包括响应数据,响应数据指的是基于上述操作数据产生的对虚拟内容的响应而生成的数据。响应数据可以包括服务器根据执行该交互显示方法的终端设备和/或其他终端设备实时上传的操作数据生成的响应数据,即响应数据可以包括服务器根据实时获取的上述显示系统中各个终端设备的操作数据,所生成的响应数据。可以理解的,服务器可以根据实时采集的上述显示系统中终端设备的操作数据,生成相应的响应数据,该响应数据,该响应数据可以用于渲染上述操作数据对虚拟内容的变化效果。也就是说,该响应数据在终端设备用于显示时,可以利用响应数据对虚拟内容进行渲染,实现对虚拟内容的更新显示,更新显示后的虚拟内容可以呈现上述操作数据对虚拟内容的变化效果,从而达到对虚拟内容的操作的目的。例如,操作数据为调整虚拟内容的颜色的操作数据,则响应数据为使虚拟内容的颜色变化的数据。当然,具体的虚拟内容数据在本申请实施例中可以不作为限定。
步骤S340:根据空间位置以及响应数据对显示的虚拟内容进行更新。
在一些实施方式中,在从服务器获取到上述虚拟内容数据中的响应数据之后,则可以根据终端设备相对目标标记物的空间位置,以及上述响应数据,对显示的虚拟内容进行更新。
可以理解的是,终端设备在显示虚拟内容过程中,终端设备相对目标标记物的空间位置可能发生变化,则虚拟内容的显示位置也应发生改变。另外,由于上述显示系统中的终端设备可能会获取到对虚拟内容的操作数据,因此需要通过从服务器获取的由操作数据生成的响应数据,对虚拟内容进行更新,以使操作数据对应的变化效果施加于虚拟内容。因此,可以根据终端设备相对目标标记物的空间位置以及上述响应数据,对显示的虚拟内容进行更新。即如果终端设备相对目标标记物的空间位置发生变化,则根据当前的目标标记物的空间位置,确定虚拟内容的显示位置,并根据响应数据将上述操作数据对应的变化效果渲染于虚拟内容,使显示的虚拟内容表现出上述操作数据所对应的效果;如果终端设备相对目标标记物的空间位置未发生变化,则根据响应数据将上述操作数据对应的变化效果渲染于虚拟内容,使显示的虚拟内容表现出上述操作数据所对应的效果。由于响应数据由服务器根据实时获取的上述显示系统中的终端设备的操作数据生成,因此可以使上述显示系统中各个终端设备显示的虚拟内容保持一致,实现多个终端设备共同显示虚拟内容。
通过上述方法,可以在多个终端设备同步显示虚拟内容过程中,实时同步根据各个终端设备获取的操作数据所得到的响应数据,并将响应数据对应的效果渲染于虚拟内容,使所有终端设备显示的虚拟内容可以保持同步。也就是说,可以使在显示系统中的各个终端设备显示同一虚拟内容时,任何一个终端设备获取到操作数据,即任何一个终端设备的用户对虚拟内容进行操作时,显示系统中的每个终端设备均能将操作数据对应的效果呈现于虚拟内容,达到每个终端设备显示的虚拟内容保持一致的效果。
在一些实施方式中,该交互显示方法还可以包括:
实时检测对虚拟内容的操作数据;在检测到操作数据时,将检测到的操作数据发送至服务器,操作数据用于指示服务器根据操作数据生成对应的响应数据,根据响应数据更新虚拟内容数据,并将更新的虚拟内容数据实时发送至终端设备以及其他终端设备。
可以理解的是,终端设备可以对操作数据进行实时检测,以将操作数据同步至服务器,以指示服务器将根据操作数据生成的响应数据同步至显示系统中的各个终端设备,使各个终端设备显示的虚拟内容保持同步。其中,检测对虚拟内容的操作数据,可以是检测控制器对虚拟内容的操作,也可以是检测用户对虚拟内容的手势操作,当然,具体检测对虚拟内容的操作数据的方式在本申请实施例中可以不作为限定。
在一些应用场景中,虚拟内容可以为游戏中的虚拟游戏对象,例如游戏中的怪兽,上述显示系统中的各个终端设备共同显示该虚拟游戏对象。每个终端设备均可以获取对该虚拟游戏对象的操作数据,即根据用户对虚拟游戏对象的操作指令,得到对虚拟游戏对象的操作数据,例如,对游戏中的怪兽的击打数据,并将操作数据实时同步于服务器,服务器则可以将操作数据对应的响应数据实时同步于各个终端设备,以便各个终端设备对虚拟游戏对象进行更新。通过本申请实施例提供的交互显示方法,则可以使各个终端设备能实时将所有终端设备的操作数据对应的效果呈现于虚拟游戏对象,例如,任一终端设备获取到的对游戏中怪兽的击打数据,均可以将效果实时呈现于显示系统中每个终端设备显示的虚拟内容,即同步呈现出怪兽被击打后的效果(例如流血、血量值变化等),从而实现多个用户共同参与游戏,提升趣味性。当然,以上应用场景仅为举例,并不代表本申请实施例提供的交互显示方法的应用场景的限定。
本申请实施例提供的交互显示方法,根据终端设备相对目标标记物的空间位置,以及从服务器实时获取的虚拟内容数据中的响应数据,对显示的虚拟内容进行更新。由于上述响应数据为根据上述显示系统中终端设备的操作数据生成的响应数据,因此可以使更新后的虚拟内容可以呈现该响应数据的效果,即实现同步各个终端设备对虚拟内容的操作数据的效果,从而实现设备之间对应虚拟内容的共同显示,增加显示的互动性。
请参见图9,本申请实施例提供了一种交互显示方法,可应用于终端设备,该终端设备可以为上述显示系统中的任一终端设备,该方法可以包括:
步骤S410:获取包含目标标记物的标记物图像。
步骤S420:根据标记物图像,获取终端设备相对目标标记物的空间位置。
其中,步骤S410以及步骤S420可以参阅上述实施例的内容,在此不再赘述。
步骤S430:获取目标标记物的身份信息。
在一些实施方式中,还可以根据上述标记物图像,识别出目标标记物的身份信息,以用于获取特定的虚拟内容数据,显示目标标记物对应的虚拟内容。
步骤S440:根据身份信息向服务器发送虚拟内容数据的获取请求,获取请求用于指示服务器向终端设备发送与身份信息对应的虚拟内容数据。
在一些实施方式中,终端设备在初始对虚拟内容进行显示时,可以根据上述目标标记物的身份信息,生成用于获取该身份信息对应的虚拟内容数据的获取请求,并将该获取请求发送至服务器,以指示服务器返回该身份信息对应的虚拟内容数据,便于后续显示该身份信息所对应的虚拟内容。
可以理解的,不同目标标记物的身份信息可以对应不同的虚拟内容数据,即不同的目标标记物的身份信息可以对应不同的虚拟内容,终端设备可以通过识别不同的目标标记物,而显示不同的虚拟内容。
步骤S450:从服务器实时获取用于显示虚拟内容的虚拟内容数据,虚拟内容数据包括服务器根据实时采集至少一个终端设备的操作数据得到的数据。
在根据目标标记物的身份信息,发送虚拟内容数据的获取请求至服务器后,则可以对应接收服务器返回的与目标标记物的身份信息对应的虚拟内容数据。虚拟内容数据包括服务器根据实时采集至少一个终端设备的操作数据得到的数据。
步骤S460:根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
在本申请实施例中,在从服务器获取到上述虚拟内容数据之后,则可以根据上述空间位置以及虚拟内容数据,对虚拟内容进行显示。
在一些实施方式中,终端设备在初始对虚拟内容进行显示时,获取到的虚拟内容数据可以为初始内容,该初始内容指任何终端设备未进行显示或是未进行交互的虚拟内容,也可以不为初始内容,即已有其他终端设备显示该虚拟内容。
在一些实施方式中,步骤S460可以包括:
判断身份信息对应的虚拟内容数据是否为初始内容;如果为初始内容,则显示用于提示用户是否创建虚拟交互模式的提示信息;在获取到用于指示创建虚拟交互模式的第一指令时,根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
可以理解的是,可以根据从服务器获取到的目标标记物的身份信息所对应的虚拟内容数据,判断该虚拟内容数据是否为初始内容。如果判断出获取到的虚拟内容数据为初始内容,则表示未有终端设备对该虚拟内容进行显示或进行交互,即该终端设备为第一个对该虚拟内容进行交互显示的设备,因此,可以显示相关提示信息,以提示用户是否创建虚拟交互模式,虚拟交互模式可指对与身份信息对应的虚拟内容进行交互显示的模式。在显示提示信息之后,则可以检测用于指示创建虚拟交互模式的第一指令,当检测到第一指令时,则表示终端设备对应的用户需要创建虚拟交互模式,即创建对该虚拟内容的交互显示,因此可以根据终端设备相对目标标记物的空间位置以及获取的虚拟内容数据,对虚拟内容进行显示,且终端设备可以与虚拟内容进行交互操作等。当上述虚拟内容数据为初始内容,则虚拟内容数据可以为虚拟内容的初始模型数据,因此根据初始模型数据则可以渲染出虚拟内容,并显示于上述空间位置所对应虚拟空间中的显示位置。
在该终端设备创建虚拟交互模式之后,则可以等待其他终端设备加入该虚拟交互模式,以实现对虚拟内容的共同显示。
在一些实施方式中,在上述判断身份信息对应的虚拟内容数据是否为初始内容之后,如果不为初始内容,则显示用于提示用户是否加入已创建的虚拟交互模式的提示信息;在获取到用于指示加入已创建的虚拟交互模式的第二指令时,根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
可以理解的是,如果判断出获取到的虚拟内容数据不为初始内容,则表示已有终端设备对与身份信息对应的虚拟内容进行显示,即已有终端设备创建上述虚拟交互模式。因此,可以显示相关提示信息,以提示用户是否加入虚拟交互模式,即是否参与该虚拟内容的共同显示和交互。在显示提示信息之后,则可以检测用于指示加入已创建的该虚拟交互模式的第二指令,当检测到第二指令时,则表示终端设备对应的用户需要加入该虚拟交互模式,即参与该虚拟内容的共同显示和交互。因此可以根据终端设备相对目标标记物的空间位置以及获取的虚拟内容数据,对虚拟内容进行显示。当上述虚拟内容数据不为初始内容,则虚拟内容数据可以为虚拟内容的当前模型数据,因此根据当前模型数据则可以渲染出与当前的虚拟内容,并显示于上述空间位置所对应虚拟空间中的显示位置,实现同步显示当前已在该虚拟交互模式的终端设备所显示的虚拟内容。另外,在终端设备在加入已经创建的虚拟交互模式以后,可以向服务器发送携带有终端设备的终端标识的信息,对应的,服务器根据终端标识,可以建立终端标识与标记物的身份信息的对应关系,或者是建立终端标识与该虚拟交互模式的对应关系。通过建立上述对应关系,可以使实现多个终端设备的数据同步时,服务器可以根据终端标识,同步向各个属于同一虚拟交互模式的终端设备发送虚拟内容数据。
在一些实施方式中,当终端设备根据目标标记物的身份信息以及终端设备相对目标标记物的空间位置,完成初始对虚拟内容显示之后,则可以根据上述实施例中步骤S110至步骤S140的方式、步骤S210至步骤S270的方式、或者步骤S310至步骤S340的方式,从服务器实时获取虚拟内容数据,并根据终端设备相对目标标记物的空间位置,继续对虚拟内容进行显示。
在一些应用场景中,虚拟内容可以为虚拟游戏对象,例如游戏中的怪兽。在终端设备初始对虚拟游戏对象进行显示时,即进入到该游戏时,该虚拟游戏对象,可能为初始内容,即该终端设备进入的游戏为新游戏,也可能不为初始内容,即其他终端设备已进行的游戏。在提示用户是否加载或者是否加入虚拟交互模式,即是否加载或者加入到该游戏,并且在接收到用户输入的相关指令时,根据虚拟内容数据以及终端设备相对标记物的空间位置,对虚拟内容进行初步的显示。后续对虚拟游戏对象显示,则可以实时从服务器获取根据各个参与游戏的终端设备的操作数据生成的虚拟游戏对象数据,例如,根据对游戏中的怪兽的击打操作生成的虚拟游戏对象数据,以便实时根据各个终端设备对虚拟游戏对象的操作,对虚拟操作对象进行更新。从而实现各个终端设备能实时将所有终端设备的操作数据对应的效果呈现于虚拟游戏对象,例如,任一终端设备获取到的对游戏中怪兽的击打数据,均可以将效果实时呈现于显示系统中每个终端设备显示的虚拟内容,即同步呈现出怪兽被击打后的效果(例如流血、血量值变化等),从而实现多个用户共同参与游戏,提升趣味性。当然,以上应用场景仅为举例,并不代表本申请实施例提供的交互显示方法的应用场景的限定。
本申请实施例提供的交互显示方法,通过获取终端设备相对目标标记物的空间位置以及身份信息,并根据身份信息从服务器获取身份信息对应的虚拟内容数据,基于虚拟内容数据以及终端设备相对目标标记物的空间位置,对虚拟内容进行显示,实现虚拟内容显示于虚拟空间,使用户可以观察到虚拟内容叠加于真实场景的显示效果。由于上述虚拟内容数据包括服务器根据实时采集的显示系统中的终端设备的操作数据得到的数据,因此显示的虚拟内容可以表现出上述操作数据所对应的效果,即实现同步各个终端设备对虚拟内容的操作数据的效果,从而实现设备之间对应虚拟内容的共同显示,增加显示的互动性。
请参见图10,示出了本申请实施例提供的一种交互显示装置的结构框图,该交互显示装置500可应用于终端设备,该终端设备可以为上述显示系统中的任一终端设备。该交互显示装置500可以包括:图像获取模块510、图像识别模块520、数据获取模块530以及内容显示模块540。其中,图像获取模块510用于获取包含目标标记物的标记物图像;图像识别模块520用于根据标记物图像,获取终端设备相对目标标记物的空间位置;数据获取模块530用于从服务器实时获取用于显示虚拟内容的虚拟内容数据,虚拟内容数据包括服务器根据实时采集至少一个终端设备的操作数据得到的数据;内容显示模块540用于根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
作为一种方式,虚拟内容数据包括渲染数据,请参见图11,该内容显示模块540可以包括:渲染数据获取单元541、显示位置确定单元542以及渲染显示单元543。其中,渲染数据获取单元541用于获取虚拟内容的渲染数据;显示位置确定单元542用于根据空间位置确定虚拟内容的显示位置;渲染显示单元543用于基于渲染数据以及显示位置,对虚拟内容进行渲染并显示。
作为另一种方式,虚拟内容数据包括响应数据,该内容显示模块可以具体用于:根据空间位置以及响应数据对显示的虚拟内容进行更新,响应数据包括服务器根据终端设备和/或其他终端设备实时上传的操作数据生成的响应数据。
在一些实施方式中,该交互显示装置还可以包括:操作检测模块以及数据发送模块。其中,操作检测模块用于实时检测对虚拟内容的操作数据;数据发送模块用于在检测到操作数据时,将检测到的操作数据发送至服务器,操作数据用于指示服务器根据操作数据生成对应的响应数据,根据响应数据更新虚拟内容数据,并将更新的虚拟内容数据实时发送至终端设备以及其他终端设备。
在一些实施方式中,该交互显示装置还可以包括:身份获取模块以及请求发送模块。其中,身份获取模块用于获取目标标记物的身份信息;请求发送模块用于根据身份信息向服务器发送虚拟内容数据的获取请求,获取请求用于指示服务器向终端设备发送与身份信息对应的虚拟内容数据。
进一步的,该内容显示模块可以具体用于:判断身份信息对应的虚拟内容数据是否为初始内容;如果为初始内容,则显示用于提示用户是否创建虚拟交互模式的提示信息;在获取到用于指示创建虚拟交互模式的第一指令时,根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
在一些实施方式中,该内容显示模块还可以具体用于:如果不为初始内容,则显示用于提示用户是否加入已创建的虚拟交互模式的提示信息;在获取到用于指示加入已创建的虚拟交互模式的第二指令时,根据空间位置以及虚拟内容数据,对虚拟内容进行显示。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本申请所提供的几个实施例中,模块相互之间的耦合可以是电性,机械或其它形式的耦合。另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
综上所述,本申请提供的方案,通过获取包含目标标记物的标记物图像,根据标记物图像,获取终端设备相对目标标记物的空间位置,从服务器获取实时获取用于显示内容的虚拟内容数据,其中,该虚拟内容数据为服务器根据实时采集至少一个终端设备的操作数据得到的数据,根据空间位置以及虚拟内容数据,对虚拟内容进行显示。由于上述虚拟内容数据为根据操作数据生成的数据,从而可以实现设备间共同显示虚拟内容。
本申请实施例提供了一种服务器,包括:一个或多个处理器;存储器;一个或多个应用程序,其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个程序配置用于执行:实时采集至少一个终端设备的操作数据;根据操作数据,得到显示虚拟内容的虚拟内容数据;向终端设备实时发送虚拟内容数据,虚拟内容数据用于指示终端设备根据相对目标标记物的空间位置以及虚拟内容数据,对虚拟内容进行显示。
请参考图12,其示出了本申请实施例提供的一种终端设备的结构框图。该终端设备100可以是智能手机、平板电脑、电子书等能够运行应用程序的终端设备。本申请中的终端设备100可以包括一个或多个如下部件:处理器110、存储器120、图像采集装置130、光源140以及一个或多个应用程序,其中一个或多个应用程序可以被存储在存储器120中并被配置为由一个或多个处理器110执行,一个或多个程序配置用于执行如前述方法实施例所描述的方法。
处理器110可以包括一个或者多个处理核。处理器110利用各种接口和线路连接整个终端设备100内的各个部分,通过运行或执行存储在存储器120内的指令、程序、代码集或指令集,以及调用存储在存储器120内的数据,执行终端设备100的各种功能和处理数据。可选地,处理器110可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable LogicArray,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器110中,单独通过一块通信芯片进行实现。
存储器120可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端100在使用中所创建的数据等。
在本申请实施例中,图像采集装置130用于采集标记物的图像。图像采集装置130可以为红外摄像头,也可以是彩色摄像头,具体的摄像头类型在本申请实施例中并不作为限定。
在本申请实施例中,光源140用于为图像采集装置130采集待拍摄物体的图像时提供光线。具体地,光源140的照明角度以及光源140的数量,可以根据实际使用而设定,以使所发射的照明光线能够覆盖待拍摄物体。其中,光源140采用红外光照明装置,能够发出红外光线,此时图像采集装置为近红外相机,可以接收红外光线。通过主动照明的方式,提高图像采集装置130采集的目标图像的图像质量,具体地,光源140的数量不限,可以是一个,也可以是多个。
请参考图13,其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质800中存储有程序代码,程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质800可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读存储介质800包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质800具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码810可以例如以适当形式进行压缩。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (12)
1.一种交互显示方法,其特征在于,应用于终端设备,所述方法包括:
获取包含目标标记物的标记物图像;
根据所述标记物图像,获取所述终端设备相对所述目标标记物的空间位置;
从服务器实时获取用于显示虚拟内容的虚拟内容数据,所述虚拟内容数据包括所述服务器根据实时采集至少一个终端设备的操作数据得到的数据;
根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
2.根据权利要求1所述的方法,其特征在于,所述虚拟内容数据包括渲染数据,所述根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示,包括:
获取虚拟内容的所述渲染数据;
根据所述空间位置确定所述虚拟内容的显示位置;
基于所述渲染数据以及所述显示位置,对所述虚拟内容进行渲染并显示。
3.根据权利要求1所述的方法,其特征在于,所述虚拟内容数据包括响应数据,所述根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示,包括:
根据所述空间位置以及所述响应数据对显示的虚拟内容进行更新,所述响应数据包括所述服务器根据所述终端设备和/或其他终端设备实时上传的操作数据生成的响应数据。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
实时检测对所述虚拟内容的操作数据;
在检测到操作数据时,将检测到的操作数据发送至所述服务器,所述操作数据用于指示所述服务器根据所述操作数据生成对应的响应数据,根据所述响应数据更新所述虚拟内容数据,并将更新的虚拟内容数据实时发送至所述终端设备以及其他终端设备。
5.根据权利要求1-4任一项所述的方法,其特征在于,在所述从服务器实时获取用于显示虚拟内容的虚拟内容数据之前,所述方法还包括:
获取所述目标标记物的身份信息;
根据所述身份信息向所述服务器发送虚拟内容数据的获取请求,所述获取请求用于指示所述服务器向所述终端设备发送与所述身份信息对应的虚拟内容数据。
6.根据权利要求5所述的方法,其特征在于,所述根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示,包括:
判断所述身份信息对应的虚拟内容数据是否为初始内容;
如果为初始内容,则显示用于提示用户是否创建虚拟交互模式的提示信息;
在获取到用于指示创建虚拟交互模式的第一指令时,根据所述空间位置以及所述虚拟内容数据,对所述虚拟内容进行显示。
7.根据权利要求6所述的方法,其特征在于,在所述判断所述身份信息对应的虚拟内容数据是否为初始内容之后,所述方法还包括:
如果不为初始内容,则显示用于提示用户是否加入已创建的虚拟交互模式的提示信息;
在获取到用于指示加入已创建的虚拟交互模式的第二指令时,根据所述空间位置以及所述虚拟内容数据,对所述虚拟内容进行显示。
8.一种数据传输方法,其特征在于,应用于服务器,所述方法包括:
实时采集至少一个终端设备的操作数据;
根据所述操作数据,得到显示虚拟内容的虚拟内容数据;
向所述终端设备实时发送所述虚拟内容数据,所述虚拟内容数据用于指示所述终端设备根据相对目标标记物的空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
9.一种交互显示装置,其特征在于,应用于终端设备,所述装置包括:图像获取模块、图像识别模块、数据获取模块以及内容显示模块,其中,
所述图像获取模块用于获取包含目标标记物的标记物图像;
所述图像识别模块用于根据所述标记物图像,获取所述终端设备相对所述目标标记物的空间位置;
所述数据获取模块用于从服务器实时获取用于显示虚拟内容的虚拟内容数据,所述虚拟内容数据包括所述服务器根据实时采集至少一个终端设备的操作数据得到的数据;
所述内容显示模块用于根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
10.一种交互显示系统,其特征在于,所述系统包括服务器以及与所述服务器通信连接的终端设备,其中,
所述服务器用于实时采集至少一个终端设备的操作数据,并根据所述操作数据,得到显示虚拟内容的虚拟内容数据;
所述终端设备用于获取相对目标标记物的空间位置,并向所述服务器实时获取所述虚拟内容数据,所述目标终端设备为所述至少一个终端设备中任一终端设备;
所述服务器还用于向所述终端设备实时发送所述虚拟内容数据;
所述终端设备还用于接收所述虚拟内容数据,并根据所述空间位置以及所述虚拟内容数据,对虚拟内容进行显示。
11.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-8任一项所述的方法。
12.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-8任一项所述的方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811369467.8A CN111198609A (zh) | 2018-11-16 | 2018-11-16 | 交互显示方法、装置、电子设备及存储介质 |
PCT/CN2019/096029 WO2020015611A1 (zh) | 2018-07-20 | 2019-07-15 | 虚拟内容的交互显示方法、终端设备及存储介质 |
US16/601,556 US10977869B2 (en) | 2018-07-20 | 2019-10-14 | Interactive method and augmented reality system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811369467.8A CN111198609A (zh) | 2018-11-16 | 2018-11-16 | 交互显示方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111198609A true CN111198609A (zh) | 2020-05-26 |
Family
ID=70746038
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811369467.8A Pending CN111198609A (zh) | 2018-07-20 | 2018-11-16 | 交互显示方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111198609A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111634188A (zh) * | 2020-05-29 | 2020-09-08 | 北京百度网讯科技有限公司 | 用于投屏的方法和装置 |
CN112634773A (zh) * | 2020-12-25 | 2021-04-09 | 北京市商汤科技开发有限公司 | 增强现实的呈现方法、装置、展示设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2426645B1 (en) * | 2010-09-06 | 2013-02-13 | Sony Corporation | Presentation of information in an image of augmented reality |
CN104134229A (zh) * | 2014-08-08 | 2014-11-05 | 李成 | 实时交互的增强现实系统以及方法 |
CN105224086A (zh) * | 2015-10-09 | 2016-01-06 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
US20180165506A1 (en) * | 2016-12-13 | 2018-06-14 | Adobe Systems Incorporated | User identification and identification-based processing for a virtual reality device |
CN108369345A (zh) * | 2015-10-20 | 2018-08-03 | 奇跃公司 | 在三维空间中选择虚拟对象 |
CN108388347A (zh) * | 2018-03-15 | 2018-08-10 | 网易(杭州)网络有限公司 | 虚拟现实中的交互控制方法和装置及存储介质、终端 |
-
2018
- 2018-11-16 CN CN201811369467.8A patent/CN111198609A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2426645B1 (en) * | 2010-09-06 | 2013-02-13 | Sony Corporation | Presentation of information in an image of augmented reality |
CN104134229A (zh) * | 2014-08-08 | 2014-11-05 | 李成 | 实时交互的增强现实系统以及方法 |
CN105224086A (zh) * | 2015-10-09 | 2016-01-06 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN108369345A (zh) * | 2015-10-20 | 2018-08-03 | 奇跃公司 | 在三维空间中选择虚拟对象 |
US20180165506A1 (en) * | 2016-12-13 | 2018-06-14 | Adobe Systems Incorporated | User identification and identification-based processing for a virtual reality device |
CN108388347A (zh) * | 2018-03-15 | 2018-08-10 | 网易(杭州)网络有限公司 | 虚拟现实中的交互控制方法和装置及存储介质、终端 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111634188A (zh) * | 2020-05-29 | 2020-09-08 | 北京百度网讯科技有限公司 | 用于投屏的方法和装置 |
CN112634773A (zh) * | 2020-12-25 | 2021-04-09 | 北京市商汤科技开发有限公司 | 增强现实的呈现方法、装置、展示设备及存储介质 |
CN112634773B (zh) * | 2020-12-25 | 2022-11-22 | 北京市商汤科技开发有限公司 | 增强现实的呈现方法、装置、展示设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111078003B (zh) | 数据处理方法、装置、电子设备及存储介质 | |
US10977869B2 (en) | Interactive method and augmented reality system | |
US11375559B2 (en) | Communication connection method, terminal device and wireless communication system | |
KR101086068B1 (ko) | 3차원 마커 인지 방법 및 이를 이용한 증강현실 및복합현실 제공 방법 및 장치 | |
US11087545B2 (en) | Augmented reality method for displaying virtual object and terminal device therefor | |
CN110737414B (zh) | 交互显示方法、装置、终端设备及存储介质 | |
WO2019109828A1 (zh) | Ar业务处理方法、装置、服务器、移动终端及存储介质 | |
CN109788359B (zh) | 一种视频数据处理方法和相关装置 | |
CN111223187A (zh) | 虚拟内容的显示方法、装置及系统 | |
US20220283631A1 (en) | Data processing method, user equipment and augmented reality system | |
CN111198609A (zh) | 交互显示方法、装置、电子设备及存储介质 | |
CN110737326A (zh) | 虚拟对象的显示方法、装置、终端设备及存储介质 | |
CN110427227B (zh) | 虚拟场景的生成方法、装置、电子设备及存储介质 | |
WO2021196973A1 (zh) | 虚拟内容的显示方法、装置、电子设备及存储介质 | |
CN110688018B (zh) | 虚拟画面的控制方法、装置、终端设备及存储介质 | |
CN111913564B (zh) | 虚拟内容的操控方法、装置、系统、终端设备及存储介质 | |
CN111913639B (zh) | 虚拟内容的交互方法、装置、系统、终端设备及存储介质 | |
CN110826376B (zh) | 标记物识别方法、装置、终端设备及存储介质 | |
CN110545363B (zh) | 实现多终端联网同步的方法、系统和云端服务器 | |
CN110598605B (zh) | 定位方法、装置、终端设备及存储介质 | |
CN114425162A (zh) | 一种视频处理方法和相关装置 | |
CN114610143A (zh) | 一种设备控制的方法、装置、设备及存储介质 | |
CN111913560B (zh) | 虚拟内容的显示方法、装置、系统、终端设备及存储介质 | |
CN112565866B (zh) | 焦点控制方法、系统、设备及存储介质 | |
CN111913562B (zh) | 虚拟内容的显示方法、装置、终端设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200526 |