CN110737414B - 交互显示方法、装置、终端设备及存储介质 - Google Patents

交互显示方法、装置、终端设备及存储介质 Download PDF

Info

Publication number
CN110737414B
CN110737414B CN201810804421.8A CN201810804421A CN110737414B CN 110737414 B CN110737414 B CN 110737414B CN 201810804421 A CN201810804421 A CN 201810804421A CN 110737414 B CN110737414 B CN 110737414B
Authority
CN
China
Prior art keywords
virtual object
terminal device
data
display
marker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810804421.8A
Other languages
English (en)
Other versions
CN110737414A (zh
Inventor
胡永涛
戴景文
贺杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Virtual Reality Technology Co Ltd
Original Assignee
Guangdong Virtual Reality Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Virtual Reality Technology Co Ltd filed Critical Guangdong Virtual Reality Technology Co Ltd
Priority to CN201810804421.8A priority Critical patent/CN110737414B/zh
Priority to PCT/CN2019/096029 priority patent/WO2020015611A1/zh
Priority to US16/601,556 priority patent/US10977869B2/en
Publication of CN110737414A publication Critical patent/CN110737414A/zh
Application granted granted Critical
Publication of CN110737414B publication Critical patent/CN110737414B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例公开了一种交互显示方法、装置、终端设备及存储介质,涉及显示技术领域。应用于第一终端设备,所述方法包括:获取第一终端设备相对标记物的第一空间位置;根据所述第一空间位置确定第一虚拟对象的第一显示位置;接收第二终端设备发送的交互数据,所述交互数据包括第二虚拟对象的数据以及所述第二虚拟对象相对所述标记物的第二空间位置;根据所述第一空间位置以及所述第二空间位置,确定所述第二虚拟对象的第二显示位置;根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象。本方法可以实现用户间利用终端设备及标记物进行显示内容的交互。

Description

交互显示方法、装置、终端设备及存储介质
技术领域
本申请涉及显示技术领域,更具体地,涉及一种交互显示方法、装置、终端设备及存储介质。
背景技术
近年来,随着科技的进步,增强现实(AR,Augmented Reality)等技术已逐渐成为国内外研究的热点,增强现实是通过计算机系统提供的信息增加用户对现实世界感知的技术,其将计算机生成的虚拟对象、场景或系统提示信息等内容对象叠加到真实场景中,来增强或修改对现实世界环境或表示现实世界环境的数据的感知。在传统的增强现实的显示技术中,在利用设备进行显示时仅能单独对虚拟内容进行显示,而不能在多个设备之间共同显示虚拟内容。
发明内容
本申请提出了一种交互显示方法、装置、终端设备及存储介质,以实现设备之间共同显示虚拟内容。
第一方面,本申请实施例提供了一种交互显示方法,应用于第一终端设备,所述方法包括:获取第一终端设备相对标记物的第一空间位置;根据所述第一空间位置确定第一虚拟对象的第一显示位置;接收第二终端设备发送的交互数据,所述交互数据包括第二虚拟对象的数据以及所述第二虚拟对象相对所述标记物的第二空间位置;根据所述第一空间位置以及所述第二空间位置,确定所述第二虚拟对象的第二显示位置;根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象。
第二方面,本申请实施例提供了一种交互显示装置,所述装置包括:位置获取模块、第一坐标确定模块、数据接收模块、第二坐标确定模块以及对象显示模块,其中,所述位置获取模块用于获取第一终端设备相对标记物的第一空间位置;所述第一坐标确定模块用于根据所述第一空间位置确定第一虚拟对象的第一显示位置;所述数据接收模块用于接收第二终端设备发送的交互数据,所述交互数据包括第二虚拟对象的数据以及所述第二虚拟对象相对所述标记物的第二空间位置;所述第二坐标确定模块用于根据所述第一空间位置以及所述第二空间位置,确定所述第二虚拟对象的第二显示位置;所述对象显示模块用于根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象。
第三方面,本申请实施例提供了一种终端设备,包括存储器及处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器实现上述第一方面提供的交互显示方法。
第四方面,本申请实施例提供了一种计算机存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面提供的交互显示方法。
本申请提供的上述交互显示方法、装置、终端设备及存储介质,第一终端设备通过获取其相对标记物的第一空间位置,然后根据第一空间位置确定第一虚拟对象的第一显示位置,再接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置,然后根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置,最后根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。从而,实现设备间共同实现虚拟内容,达到交互显示的目的。
本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的交互显示方法的应用场景的一种示意图;
图2示出了本申请实施例的第一终端设备的结构框图;
图3示出了本申请实施例提供的交互显示方法的应用场景的另一种示意图;
图4示出了本申请一实施例提供的交互显示方法的流程图;
图5示出了本申请实施例提供的一种效果示意图;
图6示出了本申请实施例提供的另一种效果示意图;
图7示出了本申请一实施例提供的交互显示方法的流程图;
图8示出了本申请一实施例提供的交互显示方法的流程图;
图9示出了本申请一实施例提供的交互显示方法的流程图;
图10示出了本申请一实施例提供的交互显示方法的流程图;
图11示出了本申请实施例提供的交互显示装置的一种结构框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
请参阅图1,示出了本申请实施例提供的交互显示方法的应用场景的示意图,该应用场景包括显示系统10。该显示系统10包括:第一终端设备100、第二终端设备200以及标记物300。当然,显示系统10也还可以包括更多的终端设备,具体的终端设备的数量在本申请实施例中并不作为限定。
在本申请实施例中,标记物300可以设置于第一终端设备100以及第二终端设备200的视野范围内,以使第一终端设备100以及第二终端设备200可以采集标记物300的图像,并对标记物300进行识别。
在本申请实施例中,第一终端设备100以及第二终端设备200可以是头戴显示装置,也可以是手机、平板等移动设备。在第一终端设备100以及第二终端设备200为头戴显示装置时,头戴显示装置可以为一体式头戴显示装置。第一终端设备100以及第二终端设备200也可以是与外接式头戴显示装置连接的手机等智能终端,即第一终端设备100以及第二终端设备200可作为头戴显示装置的处理和存储设备,插入或者接入外接式头戴显示装置,在头戴显示装置中对虚拟对象进行显示功能。
以第一终端设备100为例,请参见图2,第一终端设备100可以包括:存储器120、处理器110、显示装置130以及图像采集装置140。存储器120、显示装置130以及图像采集装置140均与处理器110连接。
图像采集装置140用于采集待拍摄物体的图像并发送至处理器110。该图像采集装置140可以为红外摄像头、彩色摄像头等,图像采集装置的具体类型在本申请实施例中并不作为限定。
处理器110可以包括任何适当类型的通用或专用微处理器、数字信号处理器或微控制器。处理器可以被配置为经由例如网络从系统的各种组件接收数据和/或信号。处理器110还可处理数据和/或信号以确定系统中的一个或多个操作条件。例如,处理器110根据预先存储的图像数据生成虚拟世界的图像数据,将其发送至显示装置进行显示;也可以通过有线或无线网络接收智能终端或计算机的发送的图像数据,根据所接收的图像数据生成虚拟世界的图像进行显示;还可以根据图像采集装置采集的图像进行识别定位,并根据定位信息确定在虚拟世界中对应的显示内容,发送至显示装置进行显示。可以理解的是,处理器110并不限定于装设在第一终端设备100内。
存储器120可用于存储软件程序以及模块,处理器110通过运行存储在存储器130内的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器130可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。
当然,以上第一终端设备100所包括的组件仅为举例,并不代表对本申请实施例中的第一终端设备100所包括的组件的限定,第一终端设备100也可以包括更多或更少的组件,例如,第一终端设备100也还可以包括通信模块,通信模块与处理器连接。通信模块用于第一终端设备100与其他设备之间的通信。
可以理解的是,第二终端设备200可以与上述举例的第一终端设备100具有相同的组件以及构造,在此不再赘述。
在本申请实施例中,在第一终端设备100以及第二终端设备200为与外接式头戴显示装置连接的移动终端时,外接式头戴显示装置的显示装置以及摄像头与移动终端连接。可以理解的是,上述举例的实施方式中的处理器执行的处理由移动终端的处理器执行,上述举例的实施方式中的存储器存储的数据由移动终端的存储器进行存储。
在本申请实施例中,标记物300放置于第一终端设备100以及第二终端设备200的图像采集装置的视野范围内,即图像采集装置可以采集到标记物300的图像。该标记物300的图像存储于终端设备中,用于定位终端设备相对标记物300的位置。标记物300中可以包括至少一个子标记物,子标记物可以是具有一定形状的图案。在一个实施例中,每个子标记物可具有一个或多个特征点,其中,特征点的形状不做限定,可以是圆点、圆环,也可以是三角形、其他形状。本申请实施方式中,不同标记物内的子标记物的分布规则不同,因此,每个标记物300可具备不同的身份信息,第一终端设备100以及第二终端设备200通过识别标识物300中包含的子标记物,可以获取与标记物300对应的身份信息,该身份信息可以是编码等可用于唯一标识标记物300的信息,但不限于此。
作为一种实施方式,标记物300的轮廓可以为矩形,当然,标记物300的形状也可以是其他形状,在此不做限定,矩形的区域以及该区域内的多个子标记物构成一个标记物300。在本申请实施例中,标记物300可以为第一终端设备100以及第二终端设备200可以识别追踪的图案。需要说明的是,具体的标记物300在本申请实施例中并不作为限定,仅需要标记物300能被第一终端设备100以及第二终端设备200识别追踪即可。
标记物300在第一终端设备100以及第二终端设备200的视野范围内时,终端设备可以采集到包含有标记物300的标记物图像。第一终端设备100以及第二终端设备200的处理器获取到标记物图像及相关信息,对标记物图像进行识别,获得标记物300的身份信息,并获取到该标记物300与第一终端设备100以及第二终端设备200的摄像头之间的位置、姿势关系,进而得到标记物相对于第一终端设备100以及第二终端设备200的位置、姿势关系。
在本申请实施例中,请参见图3,标记物300也可以包括第一标记物310以及第二标记物320。第一终端设备100与第二终端设备200可以处于不同的地方,也可以处于相同的地方,并且通过网络连接进行数据的交互。其中,第一标记物310以及第二标记物320,与第一终端设备100以及第二终端设备200一一对应,对应关系可以为第一标记物310对应第一终端设备100,第二标记物320对应第二终端设备200。从而第一终端设备100可以采集第一标记物310的图像,以对第一标记物310进行识别;第二终端设备200可以采集第二标记物320的图像,以对第二标记物320进行识别。
针对上述的显示系统,本申请实施例提供了一种交互显示方法,具体地,请参阅以下实施例。在一个实施例中,请参阅图4,示出了一种交互显示方法。如图4所示,该方法包括:
步骤S110:获取第一终端设备相对标记物的第一空间位置。
在传统的增强现实的显示技术中,设备在进行显示时,只能独自对其虚拟内容进行显示。为实现设备间共同显示虚拟内容,则需要每个设备除显示其自身的虚拟内容外,还对其他设备的虚拟内容进行显示,使每个设备显示的虚拟内容相同,从而不同用户可通过不同的设备进行虚拟内容之间的交互。
在第一终端设备需要对其他设备的虚拟内容以及第一终端设备对应的进行显示时,则需要获知其他设备显示的虚拟内容需要显示的位置。
在本申请实施例中,可以以标记物作为参照物,确定虚拟内容的显示位置。首先,对第一终端设备相对第一标记物的第一空间位置进行获取。
在本申请实施例中,第一终端设备可以对其图像采集装置的视野范围内的标记物进行识别,以获得第一终端设备相对标记物的第一空间位置。其中,终端设备相对标记物的空间位置表示标记物的六自由度信息,包括位置信息和姿态信息等,姿态信息为标记物相对终端设备的朝向、旋转角度等。空间位置可以用三维空间坐标系的坐标进行表示。
另外,对标记物进行识别,除可以获得第一终端设备相对标记物的第一空间位置之外,还可以获得标记物的身份信息以及姿态信息。其中,不同的标记物可以具有不同身份信息,标记物与其身份信息的对应关系存储于第一终端设备中。另外,可以将标记物的身份信息与相关数据的对应关系存储于第一终端设备,以用于第一终端设备在识别出标记物的身份信息之后,可以利用标记物的身份信息,读取标记物所对应的数据,例如,读取标记物所对应的虚拟对象的模型数据等。
进一步的,获取第一终端设备相对标记物的第一空间位置,可以包括:采集包含有标记物的图像;识别包含有标记物的图像,得到第一终端设备相对标记物的第一空间位置。
可以理解的是,第一终端设备可以利用图像采集装置对视野范围内的标记物进行图像采集,从而获得包含有标记物的图像。第一终端设备根据包含有标记物的图像中对标记物进行识别追踪,以得到第一终端设备相对于标记物的位置信息。
另外,在对标记物进行识别追踪,还可以得到标记物相对第一终端设备的姿态信息。其中,姿态信息为标记物相对第一终端设备的朝向、旋转角度等。在第一终端设备的位置发生变化时,第一终端设备利用摄像头所获取到的标记物图像也会发生变化,即获取到不同视角的标记物图像,这些不同视角的标记物图像中标记物的内容将会不同。因此,第一终端设备根据于不同位置获取的标记物图像,所识别到的标记物相对第一终端设备的朝向、旋转角度等将会不同。例如,标记物的轮廓为包括多个不同图案的子标记物的矩形贴纸时,第一终端设备处于矩形贴纸得到第一侧的前上方,且图像采集装置朝向矩形贴纸的第一侧时,第一终端设备所获取到的标记物图像为从标记物的第一侧的视角获取的图像,根据该图像则可以识别出标记物的第一侧朝向第一终端设备,以及标记物的朝向与正对方向的角度等。
第一终端设备可以从包含有标记物的图像中任意选取特定数量的特征点作为目标特征点,用于确定第一终端设备(摄像头)与具有目标特征点的标记物之间的真实的位置信息以及姿态信息。其中,第一终端设备可以获取所有目标特征点的像素坐标。然后,根据所有特征点的像素坐标和预先获取的所有特征点的物理坐标,获取第一终端设备与标记物之间的位置信息以及姿态信息,其中,物理坐标为预先获取的特征点在标记物对应的物理坐标系中的坐标,各个特征点的物理坐标可以预先获取并存储于第一终端设备中。
第一终端设备还可以通过识别包含有标记物的图像中的特征点,确定出标记物的身份信息。即在标记物对应有存储的信息时,还可以通过识别标记物而获得标记物对应的存储信息。例如,标记物a1对应有用于显示的虚拟对象b1,则第一终端设备在通过识别标记物a1获得标记物a1的身份信息之后,基于标记物a1与虚拟对象b1的对应关系,获得虚拟对象b1。
当然,具体对包含有标记物的图像进行识别获得第一终端设备相对标记物的位置信息、姿态信息以及身份信息的方式,在本申请实施例中并不作限定。
步骤S120:根据第一空间位置确定第一虚拟对象的第一显示位置。
在获得第一终端设备相对标记物的第一空间位置之后,则可以根据第一空间位置确定第一终端设备对应的第一虚拟对象需要显示的第一显示位置。
可以理解的是,第一终端设备对应的第一虚拟对象可以在标记物附近进行显示,也可以在标记物上叠加显示。在获得第一终端设备相对标记物的第一空间位置之后,则可以根据第一虚拟对象需要显示于相对标记物的位置(即标记物附近或者标记物上),确定第一虚拟对象的第一显示位置。
具体的,第一终端设备可以根据第一虚拟对象需要显示的相对标记物的位置,以及第一终端设备相对标记物的第一空间位置,以标记物为参照物,确定出真实空间中第一虚拟对象相对第一终端设备需要显示的位置坐标,然后将第一虚拟对象相对第一终端设备需要显示的位置坐标转换为第一终端设备的显示空间中的坐标,即获得了第一终端设备对应的第一虚拟对象在第一终端设备的显示空间中的显示坐标。
步骤S130:接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置。
另外,要实现第一终端设备与第二终端设备间的交互显示,除了第一终端设备显示其对应的第一虚拟对象之外,还需对第二终端设备对应的第二虚拟对象进行显示。因此,第二终端设备在进行显示时,可以实时同步的将其对应的第二虚拟对象的交互数据发送至第一终端设备,该交互数据可用于在第一终端设备中实时同步显示与第二终端设备中相同的第二虚拟对象。
进一步的,第二终端设备发送至第一终端设备的交互数据可以包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置,其中,第二虚拟对象的数据可以包括第二虚拟对象的模型数据,模型数据为用于渲染虚拟对象的数据,可以包括用于建立虚拟对象对应的模型的颜色、3D模型中的各顶点坐标等。
对应的,第一终端设备接收上述包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置的交互数据。
可以理解的是,为实现第一终端设备对第二虚拟对象的显示,则需要获得第二虚拟对象的数据。另外,还需要第二虚拟对象需要显示的位置,因此需要获知第二虚拟对象相对标记物的第二空间位置,以确定第二虚拟对象与第一终端设备的位置关系。
在本申请实施例中,第二虚拟对象的数据可以包括第二虚拟对象的模型数据,模型数据为用于构建第二虚拟对象的模型并进行渲染的数据,可以包括用于建立第二虚拟对象对应的模型的颜色、3D模型中的各顶点坐标等。例如,第二虚拟对象为一条带颜色的线段时,则可以将该线段的3D点队列(多个显示空间中的点坐标)、线段的粗度、线段的颜色等数据作为第二虚拟对象的模型数据。
步骤S140:根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置。
在获得第二终端设备对应的第二虚拟对象相对标记物的第二空间位置之后,则可以根据第一终端设备相对标记物的第一空间位置以及上述第二空间位置,以标记物作为参照,确定出真实空间中第二虚拟对象需要显示的区域相对第一终端设备位置坐标,然后再将第二虚拟对象需要显示的区域相对第一终端设备位置坐标转换为第一终端设备的显示空间中的坐标,得到第二虚拟对象的第二显示位置。
步骤S150:根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。
第一终端设备在获得第一虚拟对象需要于显示空间中显示的第一显示位置,第二虚拟对象需要于显示空间中显示的第二显示位置之后,则可以利用上述虚拟对象的数据对虚拟对象进行显示。
在本申请实施例中,第一终端设备可以读取第一虚拟对象的数据,例如,第一虚拟对象的模型数据,并利用第一虚拟对象的数据于显示空间中上述第一显示位置处进行渲染,使第一虚拟对象显示于显示空间中的需要显示的位置处。
并且,第一终端设备利用上述接收的第二终端设备发送的交互数据中的第二虚拟对象的数据,于显示空间中上述获得的第二虚拟对象的第二显示位置处进行渲染,使第二虚拟对象显示于显示空间中的需要显示的位置处。例如,第一终端设备对应的第一虚拟对象为人物A,第二终端设备对应的第二虚拟对象为人物B,则利用上述方法可以实现人物A和人物B的共同显示。
另外,可以通过第一终端设备观察虚拟对象,第一终端设备的用户可以进行位置的移动,虚拟对象也会随用户位置的移动而变化,例如,第一终端设备远离虚拟对象于真实场景中的位置时,则虚拟对象变小,反之,靠近虚拟对象于真实场景中的位置时,虚拟对象变大等。并且也可以进行显示内容的录制,以便于本次观察以后的观察以及分析。
第一终端设备在显示第一虚拟对象及第二虚拟对象的同时,可同时向第二终端设备发送第一虚拟对象对应的交互数据,该第一虚拟对象对应交互数据可包括第一虚拟对象的数据及第一虚拟对象相对标记物的空间位置。上述的第二终端设备也可以同样基于上述方法,根据接收的第一终端发送的第一虚拟对象对应的交互数据,将其对应的第二虚拟对象以及第一终端设备对应的第一虚拟对象进行显示。
从而实现了多个终端设备进行互动显示,即每个终端设备除显示其对应的虚拟对象之外,还可以将其他终端设备对应的虚拟对象进行显示。
例如,请同时参见图5以及图6,图5中示出了现有技术中第一终端设备以及第二终端设备对虚拟内容进行显示的示意图,其中,第一终端设备100的显示内容700中包括第一终端设备100对应的第一虚拟对象701,第二终端设备200的显示内容800中包括第二终端设备200对应的第二虚拟对象801。图6示出了本申请实施例提供的交互显示方法的效果示意图,其中,第一终端设备100的显示内容700中包括第一终端设备100对应的第一虚拟对象701以及第二终端设备200对应的第二虚拟对象801,第二终端设备200的显示内容800中也同样包括第一终端设备100对应的第一虚拟对象701以及第二终端设备200对应的第二虚拟对象801。可以看出现有技术中第一终端设备100以及第二终端设备200仅能单独对其对应的虚拟对象进行显示,而本申请实施例提供的交互显示方法则可以实现第一终端设备100以及第二终端设备200共同对其显示的虚拟对象进行显示,实现两者之间的互动显示。
本申请实施例提供的交互显示方法,终端设备获取相对标记物的第一空间位置,然后根据第一空间位置确定其对应的第一虚拟对象的显示坐标,再根据第一空间位置以及第二终端设备发送的第二终端设备对应的第二虚拟对象相对标记物的第二空间位置,确定出第二虚拟对象的显示坐标,最后根据第一虚拟对象的显示坐标显示第一虚拟对象,且根据第二虚拟对象的数据以及第二显示位置显示第二虚拟对象,从而实现了设备间将虚拟内容共同进行显示,实现了互动显示,增强了AR中用户与用户之间的互动性。
在一个实施例中,请参阅图7,图7示出了本申请实施例提供的交互显示方法的流程示意图。下面将针对图7所示的流程进行详细的阐述,交互显示方法具体可以包括以下步骤:
步骤S210:获取第一终端设备相对第一标记物的第一空间位置。
在本申请实施例中,标记物可以为多个。在两个终端设备(第一终端设备以及第二终端设备)实现互动显示时,标记物可以包括第一标记物以及第二标记物,其中,第一标记物可以与第一终端设备对应,第二标记物可以与第二终端设备对应。在以标记物作为参照,确定虚拟内容的显示位置时,第一终端设备则可以对第一标记物进行识别获得第一标记物的位置,第二终端设备则可以对第二标记物进行识别获得第二标记物的位置。
进一步的,第一标记物与第二标记物可以为相同的标记物,也可以为不同的标记物。
由于第一终端设备以及第二终端设备与不同的标记物对应,因此本申请实施例提供的交互显示方法可以应用于第一终端设备与第二终端设备处于不同地方的场景,仅需要第一终端设备以及第二终端设备各自识别其对应的标记物即可实现交互显示。
因此,第一终端设备可以采集包括有第一标记物的图像,再对包含有第一标记物的图像进行识别,得到第一终端相对第一标记物的第一空间位置。当然,也同样可以获得第一标记物相对第一终端设备的姿态信息,以及第一标记物对应的数据等。
第一终端设备具体识别第一标记物的方式,可以参照上述实施例中的方式进行,在此不再赘述。
步骤S220:根据第一空间位置确定第一虚拟对象的第一显示位置。
本申请实施例中的步骤S220中确定第一虚拟对象的第一显示位置的方式可以参照上述实施例中步骤S120的方式,在此不再一一赘述。
步骤S230:接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对第二标记物的第二空间位置。
在标记物包括第一标记物以及第二标记物时,则第二终端设备可以获取第二虚拟对象相对第二标记物的第二空间位置,并将第二虚拟对象相对第二标记物的第二空间位置以及第二虚拟对象的数据作为交互数据,发送至第一终端设备。
对应的,第一终端设备接收到包括上述第二虚拟对象的数据以及第二虚拟对象相对第二标记物的第二空间位置的交互数据。
步骤S240:将第二虚拟对象相对第二标记物的第二空间位置,转换为第二虚拟对象相对第一标记物的第三空间位置。
在本申请实施例中,由于第二终端设备发送的第二空间位置为第二虚拟对象相对第二标记物的位置,因此在根据第二空间位置及第一空间位置获取第二虚拟对象的显示坐标时,需要将第二空间位置进行转换,使位置信息可以以第一标记物作为参照。
因此,可以将第二虚拟对象相对第二标记物的第二空间位置转换为第二虚拟对象相对第一标记物的第三空间位置。作为一种方式,可以将第二标记物等同于第一标记物,直接将第二空间位置作为第二虚拟对象相对第一标记物的第三空间位置。
步骤S250:根据第一空间位置以及第三空间位置,确定第二虚拟对象的第二显示位置。
在获得终端设备相对第一标记物的第一空间位置,以及第二虚拟对象相对第一标记物的第三空间位置之后,则可以以第一标记物作为参照,得到第二虚拟对象相对第一终端设备的位置,即得到真实空间中第二虚拟对象的坐标,然后第二虚拟对象于真实空间中的坐标转换为第一终端设备的显示空间中的坐标,得到第二虚拟对象的第二显示位置。
步骤S260:根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。
第一终端设备在获得第一虚拟对象需要于显示空间中显示的第一显示位置,第二虚拟对象需要于显示空间中显示的第二显示位置之后,则可以利用上述虚拟对象的数据对虚拟对象进行显示,实现第一虚拟对象以及第二虚拟对象的共同显示。
在本申请实施例中,在第一终端设备以及第二终端设备处于不同的位置时,可能会出现第一终端设备相对第一标记物的空间位置,与第二终端设备相对第二标记物的空间位置相同的情况,在此情况下可以将第二虚拟对象相对第二标记物的空间位置进行校正,以避免显示时出现第一虚拟对象与第二虚拟对象重叠的情况。因此,上述交互数据还可以包括第二终端设备相对第二标记物的第五空间位置,该交互显示方法还可以包括:
判断第一空间位置与第二空间位置是否属于相同的区域,在一个实施例中,可以第一标记物为基准,划分多个不同的区域,不同的区域可对应处于第一标记物的不同方向,例如,以第一标记物为基准,若第一标记物为矩形,则第一标记物的四条边对应的方向可分别对应不同的区域。如果属于相同的区域,则第一终端设备可对转换得到的第二虚拟对象相对第一标记物的第三空间位置进行校正,得到第二虚拟对象相对第一标记物的校正空间位置,使校正空间位置与第一空间位置处于不同的区域。然后再基于校正空间位置以及第一空间位置,确定出第二虚拟对象的第二显示位置。
可以理解的是,在第一空间位置与第二空间位置相同时,则上述将第三空间位置进行校正,校正可以是将第三空间位置镜像,使第二虚拟对象相对第一标记物的位置与此前相反,从而使后续获得的第二显示位置,不会使在将第二虚拟对象进行显示时,出现与第一虚拟对象重合或显示在标记物同一侧的情况,保证远程的互动性。
在本申请实施例中,由于每个终端设备对应一个标记物,因此可以使终端设备间处于距离较远的位置,每个终端设备仅需可以识别到其对应的标记物,即可实现各自对应的虚拟对象的共同显示,达到互动显示的目的。
在一种应用场景中,由于每个终端设备对应一个标记物,且各自对应的标记物可以不同,因此还可以通过将标记物与虚拟对象对应,使终端设备识别其对应的标记物时,可以获取到标记物对应的虚拟对象,并将识别得到的虚拟对象作为其对应的虚拟对象。例如,第一终端设备与第一标记物对应,第二终端设备与第二标记物对应时,第一标记物可以对应第一虚拟对象(武器A),第二标记物可以对应第二虚拟对象(武器B),实现第一终端设备与第二终端设备之间共同显示武器A以及武器B。
本申请实施例提供的交互显示方法,通过将终端设备各自对应一个标记物,在进行互动显示时,第一终端设备识别其对应的第一标记物,得到相对第一标记物的第一空间位置,然后根据第一空间位置确定出第一虚拟对象的显示坐标,接收的第二终端设备发送的第二空间位置则为第二虚拟对象相对第二标记物的位置,再将第二空间位置转换为第二虚拟对象相对第一标记物的第三空间位置,然后根据第二空间位置以及第三空间位置确定出第二虚拟对象的显示坐标,最后再根据第一虚拟对象以及第二虚拟对象各自对应的显示坐标,将第一虚拟对象以及第二虚拟对象进行显示,实现设备间将各自对应的虚拟对象共同进行显示,达到交互显示的目的。另外,可以使得设备间处于相距较远的位置时,也可以实现互动显示的目的。
在一个实施例中,请参阅图8,图8示出了本申请实施例提供的交互显示方法的流程示意图。下面将针对图8所示的流程进行详细的阐述,交互显示方法具体可以包括以下步骤:
步骤S310:获取第一终端设备相对标记物的第一空间位置。
步骤S320:根据第一空间位置确定第一虚拟对象的第一显示位置。
步骤S330:接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置。
步骤S340:根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置。
步骤S350:根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。
步骤S360:当接收的第二虚拟对象的数据中包含操控数据时,根据操控数据获取第一虚拟对象的响应数据。
在本申请实施例中,该交互显示方法可以应用于交互游戏中的显示。第一终端设备所对应的第一虚拟对象可以为第一终端设备控制的虚拟游戏对象,即第一终端设备的用户所操控的游戏对象;第二终端设备所对应的第二虚拟对象可以为第二终端设备控制的游戏对象,即第二终端设备的用户所操控的游戏对象。
因此,在第二终端设备发送其对应的第二虚拟对象的数据时,除了发送第二虚拟对象的模型数据之外,还可以包括对第二虚拟对象的操控数据。其中,第二虚拟对象的操控数据指的是第二终端设备根据用户的操作指令,对第二虚拟对象进行操控的控制数据。操控数据可以包括第二虚拟对象的姿势的变化数据、第二虚拟对象的动作的释放数据等,当然,操控数据的具体内容并不限定于此。
在第二虚拟对象的数据中包括上述操控数据时,则需要将上述操控数据的效果进行显示,而在互动游戏中,当第二虚拟对象根据操控数据进行相应的变化显示时,第一虚拟对象可能与会根据第二虚拟对象的操控数据进行变化显示。因此,需要根据操控数据获取第一虚拟对象的响应数据,响应数据指的是第一虚拟对象基于第二虚拟对象的操控数据产生的响应而生成的数据,该响应可以是姿势的变化、位置的变化及模型的颜色、大小等效果变化,但不限于此。
其中,可以将操作数据与响应数据的对应关系存储于第一终端设备中,第一终端设备在接收到上述操控数据后,则可以根据该对应关系读取出上述操控数据所对应的响应数据。
例如,第一终端设备对应的第一虚拟对象为野猪,第二终端设备对应的第二虚拟对象为猎枪,在第二虚拟对象的操控数据为猎枪朝向野猪姿势数据以及扣动扳机的动作数据时,则第一虚拟对象的响应数据则为野猪受伤流血的渲染数据,使需要展示于第一虚拟对象的效果与第二虚拟对象的操控数据对应。
步骤S370:基于响应数据渲染第一虚拟对象并进行显示。
在获得第一虚拟对象的响应数据之后,则可以将响应数据渲染于第一虚拟对象,使上述操控时间对应的效果显示于第一虚拟对象。
在上述的举例中,获得第一虚拟对象的响应数据为野猪受伤流血的渲染数据后,则将野猪受伤流血的渲染数据渲染于野猪身上的猎枪朝向的位置,使野猪身上猎枪朝向的位置处显示有受伤流血的效果。
当然,在本申请实施例中,第一终端设备在监测到对第一虚拟对象的操控数据时,同样获取对第二虚拟对象的响应数据,对第二虚拟对象进行渲染并进行显示,方法与上述方法相同。
本申请实施例提供的交互显示方法,实现第一终端设备控制的第一虚拟对象与第二终端设备控制的第二虚拟对象共同显示的同时,将第二对象的操控数据体现于第一虚拟对象,使第二虚拟对象的操控数据的效果得到展示,达到互动游戏的显示目的。
在一个实施例中,请参阅图9,图9示出了本申请实施例提供的交互显示方法的流程示意图。下面将针对图9所示的流程进行详细的阐述,交互显示方法具体可以包括以下步骤:
步骤S410:获取第一终端设备相对标记物的第一空间位置。
步骤S420:根据第一空间位置确定第一虚拟对象的第一显示位置。
步骤S430:接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置。
步骤S440:根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置。
步骤S450:根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。
步骤S460:当接收的第二虚拟对象的数据中包含操控数据,则根据操控数据重新确定第二虚拟对象的第二显示位置。
在本申请实施例中,该交互显示方法可以应用于交互游戏中的显示。第一终端设备所对应的第一虚拟对象可以为第一终端设备控制的游戏对象,即第一终端设备的用户所操控的游戏对象;第二终端设备所对应的第二虚拟对象可以为第二终端设备控制的游戏对象,即第二终端设备的用户所操控的游戏对象。
因此,在第二终端设备发送其对应的第二虚拟对象的数据时,除了发送第二虚拟对象的模型数据之外,还可以包括对第二虚拟对象的操控数据。其中,第二虚拟对象的操控数据指第二终端设备根据用户的操作指令,对第二虚拟对象的控制数据。操控数据可以包括第二虚拟对象的姿势的变化数据、第二虚拟对象的动作的释放数据以及第二虚拟对象的位置的移动数据等。当然,操控数据的具体内容并不限定于此。
在第二虚拟对象的数据中包括上述操控数据时,则需要将上述操控数据的效果进行显示。互动游戏中,则需要将这些效果展示于第一虚拟对象以及第二虚拟对象。因此,第一虚拟对象以及第二虚拟对象的显示坐标应进行变化,使显示的第一虚拟对象以及第二虚拟对象具有上述操控数据的效果。
首先,可以基于操控数据重新确定第二虚拟对象的第二显示位置。即根据操控数据中第二虚拟对象的姿势的变化数据、动作释放数据及位置移动数据,确定出第二虚拟对象于显示空间中的显示坐标。
例如,第一虚拟对象为人物1,第二虚拟对象为人物2,操控数据包括人物2的手部朝向人物1的姿势数据、推动动作的释放数据以及往朝向人物1方向移动的位置移动数据时,则人物2的显示坐标由此前的显示坐标往朝向人物1的方向偏移,且人物2的身体各部位的显示坐标与上述姿势数据以及动作的释放数据对应。
步骤S470:根据操控数据重新确定第一虚拟对象的第一显示位置。
然后,可以根据操控数据重新确定第一虚拟对象的第一显示位置,即根据操控数据中第二虚拟对象的姿势的变化数据、动作释放数据及位置移动数据,确定出第二虚拟对象对第一虚拟对象产生的效果,然后根据该效果确定出第一虚拟对象于显示空间中的显示坐标。
在上述举例中,操控数据包括人物2的手部朝向人物1的姿势数据、推动动作的释放数据以及往朝向人物1方向移动的位置移动数据时,则人物1在显示空间中的显示坐标往远离用户2的手部的方向偏移。
步骤S480:根据重新确定的第一显示位置显示第一虚拟对象,并根据本次接收的第二虚拟对象的数据和重新确定的第二显示位置显示第二虚拟对象。
在根据操控数据重新确定出第一虚拟对象的第一显示位置,以及重新确定出第二虚拟对象的第二显示位置之后,则可以根据第一显示位置对第一虚拟对象显示,根据第二显示位置对第二虚拟对象显示,使上述操控数据的效果展现于第一虚拟对象以及第二虚拟对象。
在上述的举例中,在根据重新确定的显示坐标对人物1以及人物2进行显示后,则可以展现出人物1被人物2推动的显示效果。
本申请实施例提供的交互显示方法,实现第一终端设备控制的第一虚拟对象与第二终端设备控制的第二虚拟对象共同显示的同时,根据第二对象的操控数据重新确定第一虚拟对象的第一显示位置以及第二虚拟对象的第二显示位置,并根据第一显示位置对第一虚拟对象进行显示,根据第二显示位置对第二虚拟对象进行显示,使第二虚拟对象的操控数据的效果得到展示,达到互动游戏的显示目的。
在一个实施例中,请参阅图10,图10示出了本申请实施例提供的交互显示方法的流程示意图。下面将针对图10所示的流程进行详细的阐述,交互显示方法具体可以包括以下步骤:
步骤S510:获取第一终端设备相对标记物的第一空间位置。
步骤S520:根据第一空间位置确定第一虚拟对象的第一显示位置。
步骤S530:接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置。
步骤S540:根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置。
步骤S550:根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。
步骤S560:根据第一显示位置以及第二显示位置,判断第一虚拟对象以及第二虚拟对象是否满足预设规则。
在本申请实施例中,该交互显示方法可以应用于交互游戏中的显示。第一终端设备所对应的第一虚拟对象可以为第一终端设备控制的游戏对象,即第一终端设备的用户所操控的游戏对象;第二终端设备所对应的第二虚拟对象可以为第二终端设备控制的游戏对象,即第二终端设备的用户所操控的游戏对象。
在上述将第一虚拟对象以及第二虚拟对象显示之后,则可以根据第一虚拟对象的显示位置以及第二虚拟对象的显示位置,判断出第一虚拟对象与第二虚拟对象之间是否满足预先设定的预设规则。其中,预设规则可以是位置是否重叠、相距的距离是否小于一定距离、相距的距离是否大于一定距离、位置是否相邻等。具体的预设规则在本申请实施例中并不作为限定,可以根据具体的游戏内容而确定。
步骤S570:如果满足预设规则,则将预设规则对应的效果添加于第一虚拟对象以及第二虚拟对象后进行显示。
当步骤S560中判断出满足预设规则时,则可以将该预设规则对应的效果展示于第一虚拟对象以及第二虚拟对象,即将上述效果添加于第一虚拟对象以及第二虚拟对象后进行显示,以达到相应的游戏效果。
上述将预设规则对应的效果添加于第一虚拟对象以及第二虚拟对象,可以是读取预设规则对应的效果的渲染数据,然后将渲染数据渲染于第一虚拟对象以及第二虚拟对象,从而实现上述效果添加于第一虚拟对象以及第二虚拟对象。
例如,在第一虚拟对象为人物1,第二虚拟对象为人物2,预设规则为人物1与人物2的显示位置是否相邻,预设规则对应的效果可以为人物1以及人物2均受伤流血。在根据人物1以及人物2的显示坐标,判断出人物1与人物2的显示位置相邻时,则可以将人物1以及人物2均受伤流血的效果添加于人物1以及人物2,即将受伤流血的渲染数据渲染于人物1以及人物2,达到人物1以及人物2均受伤流血的游戏显示效果。
当然,互动游戏的显示中,还需要将第一终端设备对应的第一虚拟对象于第二终端设备中进行显示,使第二终端设备也将第一虚拟对象以及第二虚拟对象共同进行显示。因此,该交互显示方法还可以包括:
获取第一虚拟对象相对标记物的第四空间位置;将第一虚拟对象的数据以及第四空间位置发送至第二终端设备,第一虚拟对象的数据以及第四空间位置用于指示第二终端设备在显示第二虚拟对象的同时,显示第一虚拟对象。
可以理解的是,在第一终端设备根据第二终端设备发送的交互数据将第二虚拟对象与第一终端设备对应的第一虚拟对象共同显示的同时,可以同步的将其对应的第一虚拟对象的数据发送值第二终端设备,以使第二终端设备可以将第一虚拟对象以及第二虚拟对象共同进行显示。
在本申请实施例中,上述获取第一虚拟对象相对第一标记物的第四空间位置,可以包括:
监测用户输入的对第一虚拟对象的操作信号;基于操作信号确定第一虚拟对象的第一显示位置;基于第一虚拟对象的第一显示位置以及第一空间位置,确定第一虚拟对象相对标记物的第四空间位置。
可以理解的是,在互动游戏中,用户需要对第一虚拟对象的位置进行操控,因此第一终端设备可以监测用户输入的对第一虚拟对象的操作信号,根据操作信号则可以确定出第一虚拟对象显示的位置(即第一显示位置)。根据第一虚拟对象的第一显示位置,则可以转换为第一虚拟对象在现实空间中的坐标,即获得第一虚拟对象相对第一终端设备的位置,然后根据第一虚拟对象相对第一终端设备的位置,以及第一终端设备相对标记物的第一空间位置,以第一终端设备作为参照,可以获取到第一虚拟对象相对标记物的第四空间位置。
本申请实施例提供的交互显示方法,实现第一终端设备控制的第一虚拟对象与第二终端设备控制的第二虚拟对象共同显示的同时,判断第一虚拟对象与第二虚拟对象的位置是否满足一定规则,在满足规则时将规则对应的效果展示于第一虚拟对象以及第二虚拟对象,使相应的游戏效果得到展示,达到互动游戏的显示目的。
当然,上述实施例提供的交互显示方法同样适用于三个及三个以上数量的终端设备进行交互的显示,在三个及三个以上数量的终端设备之间进行交互显示时,则每个终端设备同样需要获取其对应的虚拟对象的显示位置,并接收其他终端设备发送的虚拟对象的交互数据,然后确定出其他终端设备的虚拟对象的显示位置,最后在将自身对应的虚拟对象进行显示的同时,将其他终端设备对应的虚拟对象共同进行显示。
在一个实施例中,请参阅图11,图11示出了本申请实施例提供的交互显示装置400的模块框图。该交互显示装置400应用于终端设备。下面将针对图11所示的框图进行阐述,该交互显示装置包括:位置获取模块410、第一坐标确定模块420、数据接收模块430、第二坐标确定模块440以及对象显示模块450。其中,位置获取模块410用于获取第一终端设备相对标记物的第一空间位置;第一坐标确定模块420用于根据第一空间位置确定第一虚拟对象的第一显示位置;数据接收模块430用于接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置;第二坐标确定模块440用于根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置;对象显示模块450用于根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。
在本申请实施例中,标记物可以包括第一标记物以及第二标记物,第一空间位置可以为第一终端设备相对第一标记物的空间位置,第二空间位置可以为第二虚拟对象相对第二标记物的位置。第二坐标确定模块440可以具体用于:将第二虚拟对象相对第二标记物的第二空间位置,转换为第二虚拟对象相对第一标记物的第三空间位置;根据第一空间位置以及第三空间位置,确定第二虚拟对象的第二显示位置。
在本申请实施例中,该交互显示装置400还可以包括:响应数据获取模块以及响应渲染模块。其中,响应数据获取模块用于当接收的第二虚拟对象的数据中包含操控数据时,根据操控数据获取第一虚拟对象的响应数据;响应渲染模块用于基于响应数据渲染第一虚拟对象并进行显示。
在本申请实施例中,该交互显示装置400还可以包括:第一坐标再确定模块、第二坐标再确定模块以及对象再显示模块。其中,第一坐标再确定模块用于当接收的第二虚拟对象的数据中包含操控数据,则根据操控数据重新确定第二虚拟对象的第二显示位置;第二坐标再确定模块用于根据操控数据重新确定第一虚拟对象的第一显示位置;对象再显示模块用于根据重新确定的第一显示位置显示第一虚拟对象,并根据本次接收的第二虚拟对象的数据和重新确定的第二显示位置显示第二虚拟对象。
在本申请实施例中,该交互显示装置400还可以包括:规则判断模块以及规则执行模块。其中,规则判断模块用于根据第一显示位置以及第二显示位置,判断第一虚拟对象以及第二虚拟对象是否满足预设规则;规则执行模块用于如果满足预设规则,则将预设规则对应的效果添加于第一虚拟对象以及第二虚拟对象后进行显示。
在本申请实施例中,该交互显示装置400还可以包括:空间位置获取模块以及数据发送模块。其中,空间位置获取模块用于获取第一虚拟对象相对标记物的第四空间位置;数据发送模块用于将第一虚拟对象的数据以及第四空间位置发送至第二终端设备,第一虚拟对象的数据以及第四空间位置用于指示第二终端设备在显示第二虚拟对象的同时,显示第一虚拟对象。
进一步的,空间位置获取模块可以具体用于:监测用户输入的对第一虚拟对象的操作信号;基于操作信号确定第一虚拟对象的第一显示位置;基于第一虚拟对象的第一显示位置以及第一空间位置,确定第一虚拟对象相对标记物的第四空间位置。
综上所述,本申请提供的上述交互显示方法、装置、终端设备及存储介质,第一终端设备通过获取其相对标记物的第一空间位置,然后根据第一空间位置确定第一虚拟对象的第一显示位置,再接收第二终端设备发送的交互数据,交互数据包括第二虚拟对象的数据以及第二虚拟对象相对标记物的第二空间位置,然后根据第一空间位置以及第二空间位置,确定第二虚拟对象的第二显示位置,最后根据第一显示位置显示第一虚拟对象,并根据第二虚拟对象的数据和第二显示位置显示第二虚拟对象。从而,实现设备间共同实现虚拟内容,达到交互显示的目的。
需要说明的是,本申请实施例的系统中各设备的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,在此不赘述。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者装置中还存在另外的相同要素。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述,仅是本申请的较佳实施例而已,并非对本申请作任何形式上的限制,虽然本申请已以较佳实施例揭露如上,然而并非用以限定本申请,任何熟悉本专业的技术人员,在不脱离本申请技术方案范围内,当可利用上述揭示的技术内容做出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本申请技术方案内容,依据本申请的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本申请技术方案的范围内。

Claims (9)

1.一种交互显示方法,其特征在于,应用于第一终端设备,所述第一终端设备为头戴显示装置,所述方法包括:
获取第一终端设备相对标记物的第一空间位置;
根据所述第一空间位置确定第一虚拟对象的第一显示位置;
接收第二终端设备发送的交互数据,所述交互数据包括第二虚拟对象的模型数据以及所述第二虚拟对象相对所述标记物的第二空间位置,所述第二终端设备为所述头戴显示装置;
根据所述第一空间位置以及所述第二空间位置,确定所述第二虚拟对象的第二显示位置;
根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象,以使用户透过所述头戴显示装置观察到所述第一虚拟对象和所述第二虚拟对象叠加在现实世界中对应的位置;
当接收的所述第二虚拟对象的数据中包含操控数据时,根据所述操控数据获取所述第一虚拟对象的响应数据;
基于所述响应数据渲染所述第一虚拟对象。
2.根据权利要求1所述的方法,其特征在于,所述标记物包括第一标记物以及第二标记物,所述第一空间位置为所述第一终端设备相对所述第一标记物的空间位置,所述第二空间位置为所述第二虚拟对象相对所述第二标记物的位置;
所述根据所述第一空间位置以及所述第二空间位置,确定所述第二虚拟对象的第二显示位置,包括:
将所述第二虚拟对象相对所述第二标记物的所述第二空间位置,转换为所述第二虚拟对象相对所述第一标记物的第三空间位置;
根据所述第一空间位置以及所述第三空间位置,确定所述第二虚拟对象的第二显示位置。
3.根据权利要求1所述的方法,其特征在于,在所述根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象之后,所述方法还包括:
当接收的所述第二虚拟对象的数据中包含操控数据,则根据所述操控数据重新确定所述第二虚拟对象的第二显示位置;
根据所述操控数据重新确定所述第一虚拟对象的第一显示位置;
根据重新确定的第一显示位置显示所述第一虚拟对象,并根据本次接收的所述第二虚拟对象的数据和重新确定的第二显示位置显示所述第二虚拟对象。
4.根据权利要求1所述的方法,其特征在于,所述根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象之后,所述方法还包括:
根据所述第一显示位置以及所述第二显示位置,判断所述第一虚拟对象以及所述第二虚拟对象是否满足预设规则;
如果满足预设规则,则将所述预设规则对应的效果添加于所述第一虚拟对象以及所述第二虚拟对象后进行显示。
5.根据权利要求1-2任一项所述的方法,其特征在于,所述方法还包括:
获取所述第一虚拟对象相对所述标记物的第四空间位置;
将所述第一虚拟对象的数据以及所述第四空间位置发送至所述第二终端设备,所述第一虚拟对象的数据以及所述第四空间位置用于指示所述第二终端设备在显示所述第二虚拟对象的同时,显示所述第一虚拟对象。
6.根据权利要求5所述的方法,其特征在于,所述获取所述第一虚拟对象相对所述标记物的第四空间位置,包括:
监测用户输入的对所述第一虚拟对象的操作信号;
基于所述操作信号确定所述第一虚拟对象的第一显示位置;
基于所述第一虚拟对象的第一显示位置以及所述第一空间位置,确定所述第一虚拟对象相对所述标记物的第四空间位置。
7.一种交互显示装置,其特征在于, 应用于第一终端设备,所述第一终端设备为头戴显示装置 ,所述装置包括:位置获取模块、第一坐标确定模块、数据接收模块、第二坐标确定模块、对象显示模块、响应数据获取模块以及响应渲染模块,其中,
所述位置获取模块用于获取第一终端设备相对标记物的第一空间位置;
所述第一坐标确定模块用于根据所述第一空间位置确定第一虚拟对象的第一显示位置;
所述数据接收模块用于接收第二终端设备发送的交互数据,所述交互数据包括第二虚拟对象的数据以及所述第二虚拟对象相对所述标记物的第二空间位置,所述第二终端设备为所述头戴显示装置;
所述第二坐标确定模块用于根据所述第一空间位置以及所述第二空间位置,确定所述第二虚拟对象的第二显示位置;
所述对象显示模块用于根据所述第一显示位置显示所述第一虚拟对象,并根据所述第二虚拟对象的数据和所述第二显示位置显示所述第二虚拟对象,以使用户透过所述头戴显示装置观察到所述第一虚拟对象和所述第二虚拟对象叠加在现实世界中对应的位置;
所述响应数据获取模块用于当接收的所述第二虚拟对象的数据中包含操控数据时,根据所述操控数据获取所述第一虚拟对象的响应数据;
所述对象渲染模块用于基于所述响应数据渲染所述第一虚拟对象。
8.一种终端设备,其特征在于,包括存储器及处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器实现如权利要求1至6任一所述的方法。
9.一种计算机存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6任一所述的方法。
CN201810804421.8A 2018-07-20 2018-07-20 交互显示方法、装置、终端设备及存储介质 Active CN110737414B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201810804421.8A CN110737414B (zh) 2018-07-20 2018-07-20 交互显示方法、装置、终端设备及存储介质
PCT/CN2019/096029 WO2020015611A1 (zh) 2018-07-20 2019-07-15 虚拟内容的交互显示方法、终端设备及存储介质
US16/601,556 US10977869B2 (en) 2018-07-20 2019-10-14 Interactive method and augmented reality system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810804421.8A CN110737414B (zh) 2018-07-20 2018-07-20 交互显示方法、装置、终端设备及存储介质

Publications (2)

Publication Number Publication Date
CN110737414A CN110737414A (zh) 2020-01-31
CN110737414B true CN110737414B (zh) 2021-05-11

Family

ID=69234730

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810804421.8A Active CN110737414B (zh) 2018-07-20 2018-07-20 交互显示方法、装置、终端设备及存储介质

Country Status (1)

Country Link
CN (1) CN110737414B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111459432B (zh) * 2020-03-30 2023-01-24 Oppo广东移动通信有限公司 虚拟内容的显示方法、装置、电子设备及存储介质
CN111589113B (zh) * 2020-04-28 2021-12-31 腾讯科技(深圳)有限公司 虚拟标记的显示方法、装置、设备及存储介质
CN111651051B (zh) * 2020-06-10 2023-08-22 浙江商汤科技开发有限公司 一种虚拟沙盘展示方法及装置
CN112675541A (zh) * 2021-03-22 2021-04-20 航天宏图信息技术股份有限公司 Ar信息共享方法、装置、电子设备及存储介质
CN114745515A (zh) * 2022-04-02 2022-07-12 云南腾云信息产业有限公司 互动信息显示方法、装置、移动终端和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103365572A (zh) * 2012-03-26 2013-10-23 联想(北京)有限公司 一种电子设备的远程操控方法及电子设备
CN104076920A (zh) * 2013-03-28 2014-10-01 索尼公司 信息处理设备、信息处理方法及存储介质
WO2017145156A2 (en) * 2016-02-22 2017-08-31 Real View Imaging Ltd. Holographic display

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103365572A (zh) * 2012-03-26 2013-10-23 联想(北京)有限公司 一种电子设备的远程操控方法及电子设备
CN104076920A (zh) * 2013-03-28 2014-10-01 索尼公司 信息处理设备、信息处理方法及存储介质
WO2017145156A2 (en) * 2016-02-22 2017-08-31 Real View Imaging Ltd. Holographic display

Also Published As

Publication number Publication date
CN110737414A (zh) 2020-01-31

Similar Documents

Publication Publication Date Title
CN110737414B (zh) 交互显示方法、装置、终端设备及存储介质
CN111078003B (zh) 数据处理方法、装置、电子设备及存储介质
US20170200314A1 (en) Augmented reality contents generation and play system and method using the same
US10977869B2 (en) Interactive method and augmented reality system
CN111158469A (zh) 视角切换方法、装置、终端设备及存储介质
CN110569006B (zh) 显示方法、装置、终端设备及存储介质
US11087545B2 (en) Augmented reality method for displaying virtual object and terminal device therefor
CN110737326A (zh) 虚拟对象的显示方法、装置、终端设备及存储介质
CN109983424B (zh) 虚拟现实场景中的对象选中方法和装置以及虚拟现实设备
JP5812550B1 (ja) 画像表示装置、画像表示方法及びプログラム
CN111061374A (zh) 一种支持多人模式增强现实应用的方法及装置
JP5350427B2 (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
CN106536004B (zh) 增强的游戏平台
KR101586071B1 (ko) 마커리스 증강현실 서비스 제공 장치 및 이를 위한 촬영 위치 추정 방법
CN112950711B (zh) 一种对象的控制方法、装置、电子设备及存储介质
CN111913674A (zh) 虚拟内容的显示方法、装置、系统、终端设备及存储介质
CN110659587B (zh) 标记物、标记物识别方法、装置、终端设备及存储介质
CN111913560B (zh) 虚拟内容的显示方法、装置、系统、终端设备及存储介质
CN111913564B (zh) 虚拟内容的操控方法、装置、系统、终端设备及存储介质
CN110618751B (zh) 虚拟对象的显示方法、装置、终端设备及存储介质
CN111913639B (zh) 虚拟内容的交互方法、装置、系统、终端设备及存储介质
CN112788443B (zh) 基于光通信装置的交互方法和系统
CN111459432A (zh) 虚拟内容的显示方法、装置、电子设备及存储介质
CN111198609A (zh) 交互显示方法、装置、电子设备及存储介质
CN110598605B (zh) 定位方法、装置、终端设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant