CN106648038A - 在虚拟现实中显示交互对象的方法和装置 - Google Patents

在虚拟现实中显示交互对象的方法和装置 Download PDF

Info

Publication number
CN106648038A
CN106648038A CN201510726806.3A CN201510726806A CN106648038A CN 106648038 A CN106648038 A CN 106648038A CN 201510726806 A CN201510726806 A CN 201510726806A CN 106648038 A CN106648038 A CN 106648038A
Authority
CN
China
Prior art keywords
interactive object
characteristic information
physics
virtual
physics interactive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510726806.3A
Other languages
English (en)
Inventor
罗子雄
耿达维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Hammer Numeral Science And Technology Co Ltd
Original Assignee
Beijing Hammer Numeral Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Hammer Numeral Science And Technology Co Ltd filed Critical Beijing Hammer Numeral Science And Technology Co Ltd
Priority to CN201510726806.3A priority Critical patent/CN106648038A/zh
Publication of CN106648038A publication Critical patent/CN106648038A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例提供一种在虚拟现实中显示交互对象的方法和装置,应用于头戴式可视设备中。该方法包括:获取现实环境中的物理交互对象的特征信息;将获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象;将确定的虚拟交互对象显示到虚拟现实环境中。通过本发明实施例提供的在虚拟现实中显示交互对象的方法和装置,能够使用户在头戴式可视设备的虚拟现实环境中直观地观察到交互对象,有助于提高操作效率和用户体验。

Description

在虚拟现实中显示交互对象的方法和装置
技术领域
本发明涉及虚拟现实技术领域,尤其涉及一种在虚拟现实中显示交互对象的方法和装置。
背景技术
随着软硬件技术的发展,信息处理设备的信息处理能力不断提高,推动了虚拟现实技术的迅速普及。虚拟现实技术通过模拟计算产生出一个与现实场景相同或相似的三维虚拟世界,用户可以在这个虚拟现实世界中进行游戏、活动或执行某些特定的操作,整个过程如同在真实世界中进行一般,给用户提供了视觉、听觉、触觉等全方位的模拟体验。
现有技术中能够实现虚拟现实技术的设备较多,常见的如头戴式可视设备(Head Mounted Display,HMD)。头戴式可视设备是一种佩戴于人体头部的近眼显示装置。通过该装置用户能够看到与真实场景相似的虚拟场景,而且可以在虚拟场景中进行某些操作,实现对虚拟场景的控制。在虚拟场景中进行操作,通常情况下需要借助于交互对象,比如头戴式可视设备的输入装置,该输入装置可以是键盘、鼠标、控制器等。头戴式可视设备的用户通过这些输入装置向头戴式可视设备输入有关指令,头戴式可视设备根据这些指令来改变虚拟现实场景。
然而,在用户佩戴头戴式可视设备后,往往看不到外部的交互对象。如果用户操作交互对象一段时间后离开交互对象,当需要再次使用交互对象进行输入时,不能确定交互对象的位置,这时用户可能需要取下头戴式可视设备才能寻找到交互对象,进而实现输入,这降低了操作效率,影响了用户体验。
发明内容
基于上述技术问题,本发明实施例提供一种在虚拟现实中显示交互对象的方法和装置,以便用户在头戴式可视设备的虚拟现实环境中直观地观察到交互对象,有助于提高操作效率和用户体验。
本发明实施例提供的一种在虚拟现实中显示交互对象的方法,应用于头戴式可视设备中,所述头戴式可视设备存储有预设特征信息和虚拟交互对象,所述预设特征信息和所述虚拟交互对象具有映射关系,所述虚拟交互对象与显示所述虚拟交互对象的虚拟现实环境关联,所述方法包括:
获取现实环境中的物理交互对象的特征信息;
将获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象;
将确定的虚拟交互对象显示到虚拟现实环境中。
优选地,所述物理交互对象上具有特定标记,所述获取现实环境中的物理交互对象的特征信息包括:
获取现实环境中的物理交互对象的图像;分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息;或者,
所述物理交互对象具有信号发射功能,所述获取现实环境中的物理交互对象的特征信息包括:
获取现实环境中的物理交互对象发射的信号,分析所述物理交互对象发射的信号以获得物理交互对象的特征信息。
优选地,所述分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息包括:
识别所述图像中物理交互对象上的一个特定标记,所述特定标记包含标识性含义,将所述标识性含义作为所述物理交互对象的特征信息;或者,
识别所述图像中物理交互对象上的至少三个特定标记,将所述特定标记组成的形状作为所述物理交互对象的特征信息。
优选地,所述分析所述物理交互对象发射的信号以获得物理交互对象的特征信息包括:
分析所述物理交互对象发射的信号的频率、强度和/或方式,根据分析的结果确定物理交互对象的特征信息。
优选地,所述方法还包括:
接收对所述物理交互对象的操作信息,基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,利用所述操作信息改变所述虚拟现实环境。
优选地,所述将确定的虚拟交互对象显示到虚拟现实环境中包括:
将确定的虚拟交互对象通过动态纹理映射方式映射到所述虚拟现实环境中并显示出来。
本发明实施例还提供了一种在虚拟现实中显示交互对象的装置,应用于头戴式可视设备中,所述装置包括特征信息获取模块、存储模块、特征信息匹配模块和显示模块,其中:
所述特征信息获取模块,用于获取现实环境中的物理交互对象的特征信息;
所述存储模块,用于存储预设特征信息,虚拟交互对象,以及,预设特征信息和虚拟交互对象之间的映射关系;
所述特征信息匹配模块,用于将特征信息获取模块获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象;
所述显示模块,用于将确定的虚拟交互对象显示到虚拟现实环境中。
优选地,所述物理交互对象上具有特定标记,所述特征信息获取模块包括图像获取子模块和图像分析子模块,其中:
所述图像获取子模块,用于获取现实环境中的物理交互对象的图像;
所述图像分析子模块,用于分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息;
所述物理交互对象具有信号发射功能,所述特征信息获取模块包括信号获取子模块和信号分析子模块,其中:
所述信号获取子模块,用于获取现实环境中的物理交互对象发射的信号;
所述信号分析子模块,用于分析所述物理交互对象发射的信号以获得物理交互对象的特征信息。
优选地,所述装置还包括操作信息接收模块和虚拟现实改变模块,其中:
所述操作信息接收模块,用于接收对所述物理交互对象的操作信息;
所述虚拟现实改变模块,用于基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,利用所述操作信息改变所述虚拟现实环境。
优选地,所述显示模块,具体用于将所述确定的虚拟显示对象通过动态纹理映射方式映射到所述虚拟现实环境中并显示出来。
采用上述技术方案,本发明至少有以下优点:通过获取物理交互对象的特征信息,基于预设特征信息与虚拟交互对象之间的映射关系,可以在虚拟现实环境中显示与物理交互对象对应的虚拟交互对象,从而在头戴式可视设备的虚拟现实环境中,用户便可以直观地观察到虚拟交互对象,这样就能准确地寻找到物理交互对象的位置,进而更方便地操作物理交互对象与虚拟现实环境进行交互,有助于提高操作效率和用户体验。另外,虚拟交互对象可以在虚拟现实环境中呈现成各种不同的样子,有助于增加用户与虚拟现实环境的显示内容的互动性,增强用户在虚拟现实环境中的操作反馈和真实感。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本发明提供的在虚拟现实中显示交互对象的方法实施例流程图;
图2为图1提供的实施例在虚拟现实中显示交互对象的一个实例图;
图3为本发明提供的在虚拟现实中显示交互对象的装置实施例结构框图;
图4a为图3提供的实施例的特征信息获取模块的一种内部组成示意图;
图4b为图3提供的实施例的特征信息获取模块的另一种内部组成示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
下面结合附图对本申请技术方案进行详细描述。通常而言,可以在头戴式可视设备与虚拟现实之间通过物理交互对象建立连接,提供更加深入的模拟体验。但是,在用户操作物理交互对象过程中,会出现这样的情况:当用户手部短暂离开物理交互对象后又重新回到物理交互对象时(重新操作物理交互对象时),由于用户戴着头戴式可视设备,看不到现实环境中的物理交互对象,可能出现位置错误,进而导致误操作。以用户操作键盘实现对头戴式可视设备的输入为例,人们一般习惯将左右手食指分别放在“F”和“J”上,便于操作整个键盘,但当用户手部离开键盘再重新回到键盘时,有可能不能及时找到这两个键,如果找错位置,就会出现误操作。比如,期望对“J”键发出点击指令,但错对“H”键发出了点击指令。又如,在控制手柄时,放下手柄在抓取手柄时,也会出现握错了手柄位置,导致误操作,这将降低操作物理交互对象的效率,也在一定程度上降低了用户的体验。
为解决上述问题,本发明提供了一种在虚拟现实中显示交互对象的方法,该方法应用于头戴式可视设备中,这里的头戴式可视设备(HMD)上面有外置摄像头以及可视化显示器,当用户佩戴所述头戴式可视设备之后,可以在可视化显示器上给用户提供基于内置摄像头的3D视频实时显示的功能,或者是普通的视频和游戏视频播放的功能,又或者是虚拟现实环境等。头戴式可视设备可以存储有预设特征信息和虚拟交互对象,且预设特征信息和虚拟交互对象具有映射关系,虚拟交互对象与显示所述虚拟交互对象的虚拟现实环境关联。以下参见图1进行详述,该图示出应用于头戴式可视设备中的在虚拟现实中显示交互对象方法的一个实施例的流程图,包括以下几个步骤:
步骤101:获取现实环境中的物理交互对象的特征信息。
如前所述,头戴式可视设备可以显示虚拟现实环境。虚拟现实环境是相对于现实环境而言的,通常情况下,需要实现虚拟现实环境与现实环境的交互,这种交互可以通过与之配套的物理交互对象来实现(这里的物理交互对象可以理解为用于实现虚拟现实环境与现实环境交互的媒介)。比如,一种物理交互对象可以是头戴式可视设备的输入装置。头戴式可视设备的用户通过这些输入装置向头戴式可视设备输入有关指令、传递某些信息,使头戴式可视设备可以根据这些指令来改变虚拟现实场景。上述的物理交互对象可以具体体现为一部手机、一个游戏手柄或者是一套鼠标键盘等。通过这些各式各样的物理交互对象,可以对虚拟现实环境进行改变,例如,用户佩戴头戴式可视设备进行3D视频播放时,用相应的物理交互对象调节视频的亮度、调节视频音量的大小等;用户在玩虚拟现实的游戏时,用相应的物理交互对象可以控制游戏角色的动作等其他信息。
此外,还需要说明的是,在后续步骤中还会提及虚拟交互对象。在本发明实施例中,虚拟交互对象与物理交互对象相对,前者位于虚拟现实环境中,后者处于现实环境中,通过本发明的方法可以实现两者的关联。这样,用户在现实环境中对物理交互对象的操作便可反映到虚拟现实环境中的虚拟交互对象,戴着头戴式可视设备的用户可能看不见现实环境中的物理交互对象,但可以看见虚拟现实环境中的虚拟交互对象。
本步骤还涉及到“特征信息”的概念。这里的特征信息是与头戴式可视设备存储的预设特征信息相对应,而预设特征信息是与虚拟现实中显示的虚拟交互对象具有映射关系的信息,该特征信息(或预设特征信息)可以体现为各种形式的信息,可以是反映物理交互对象自身情况的信息,也可以是在物理交互对象上叠加的某些特定标记而通过标记所体现出来的信息。无论哪些(哪类)预设特征信息,只要能够与虚拟交互对象建立映射关系,通过预设特征信息能够关联到虚拟交互对象即可。在实际应用过程中,一个预设特征信息可以对应一个虚拟交互对象,即一对一的映射关系,也可以对应多个虚拟交互对象,即一对多的映射关系,在对应多个虚拟交互对象的情况下,可以通过虚拟交互对象当前所在的虚拟现实环境的要求确定预设特征信息具体对应哪个(或哪几个)虚拟交互对象,在确定当前虚拟现实环境需要的虚拟交互对象后,可以通过该虚拟交互对象实现信息交互。
在明确虚拟交互对象、特征信息等术语的内涵后,还需要说明的是,本实施例中所述预设特征信息与在虚拟现实中显示的虚拟交互对象之间的映射关系,可以预先存储在头戴式可视设备或特定的存储设备中,存储的具体形式依据预设特征信息的不同表现形式可以存在差别。在预设特征信息本身具有一定特定含义的情况下,存储的数据格式可以如表1所述。
表1预设特征信息与虚拟交互对象映射关系示例表
步骤102:将获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象。
头戴式可视设备在获取到物理交互对象的特征信息后,可以将所述特征信息与预先存储的预设特征信息进行匹配,如果匹配成功,再根据预设特征信息和虚拟交互对象之间的映射关系,结合虚拟交互对象与虚拟现实环境关联,便可确定出在当前虚拟现实环境中将要显示的虚拟交互对象。
步骤103:将确定的虚拟交互对象显示到虚拟现实环境中。
在确定出交互对象之后,即可调出虚拟交互对象融合显示到当前的虚拟交互环境中。具体地,可将所述虚拟交互对象通过动态纹理映射方式映射到所述虚拟现实环境中并显示出来,这样用户在佩戴头戴式可视设备之后,即可在虚拟现实环境中实时看到虚拟交互对象。
为了更清楚地说明上述实施例的技术方案、技术特征,下面结合一些实例来说明本发明的某些方面。
例如,图2显示出了物理交互设备为手机的情形下,在虚拟现实环境中显示虚拟交互对象的情况。在该手机屏幕的左上角、右上角、右下角分别设定了一个特定标记。在头戴式可视设备获取物理交互对象的特征信息过程中,该手机的特征信息便可以依据这三个特定标记组成的几何关系来确定。预设的特征信息也为三个特定标记组成的几何关系,与预设特征信息呈映射关系的虚拟交互对象可以为虚拟手机、游戏光剑、虚拟的赛车方向盘等。这时,可以依据当前虚拟现实环境的情况,选择相应的虚拟交互对象:在用户利用头戴式可视设备体验虚拟赛车游戏场景时,与预设特征信息对应的虚拟交互对象可以为赛车的方向盘;在用户利用物理交互设备将当前的头赛车游戏场景切换为星球大战的游戏场景时,基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,则与预设特征信息对应的虚拟交互对象可以变为游戏光剑。
再例如,假设物理交互对象具体为一部手机,虚拟交互对象为虚拟现实环境里的一部虚拟手机,虚拟现实环境为基于现实环境的虚拟的聊天室场景。这样用户佩戴头戴式可视设备之后,在现实环境中操作手机时,头戴可视设备在获取现实环境中的物理交互对象的特征信息时,同时还可以再获取用户的手的图像信息,然后将用户手的图像与背景图像分离,将分离出来的用户的手的图像通过动态纹理映射的方法实时融入到虚拟现实环境,实现虚拟对象的无缝融合。这样用户在虚拟现实环境中可以看到自己手的操作手机的过程,增加用户的操作反馈和在虚拟现实环境中的真实感。
在本发明上述实施例中,用户佩戴头戴式可视设备的情况下,在头戴式可视设备的虚拟现实环境中实时显示与物理交互对象相对应的虚拟交互对象,使用户可以在现实环境中方便地寻找到物理交互对象的位置,进而使用户更方便地与虚拟现实环境进行交互,提高了用户体验。另外,根据用户切换的不同的虚拟现实场景,相应的显示不同的虚拟交互对象,增加用户与虚拟现实环境的显示内容的互动性,增强用户在虚拟现实环境中的操作反馈和真实感。
在上述实施例的步骤101中提到获取现实环境中的物理交互对象的特征信息的步骤,在实际应用过程中,获取现实环境中的物理交互对象的特征信息可以有多种方式,为便于理解和说明,这里示例性地给出两种:
一种是通过拍摄图像的方式来获取特征信息。比如,头戴式可视设备通过其对外摄像头实时捕获周边环境图像的时间序列帧数据,获取物理交互对象的图像,从所述图像中提取出特征信息;
另一种是通过收发无线信号的方式来获取特征信息。比如,头戴式可视设备通过信号接收装置获取现实环境中的物理交互对象发射的信号,然后分析这些信号的情况来提取出特征信息。下面对这两种获取方式以及获取的特征信息进行详细描述。
在第一种获取方式中,物理交互对象上可以预先设定特定标记,这样,头戴式可视设备在获取现实环境中的物理交互对象的特征信息时,首先获取现实环境中的物理交互对象的图像,然后分析图像中物理交互对象上特定标记以获得物理交互对象的特征信息。依据特定标记的性质不同,具体获取特征信息的方式则可能不同:
①对于特定标记本身具有标识性含义的,在头戴式可视设备识别图像中物理交互对象上的一个特定标记后,将所述特定标记的标识性含义作为所述物理交互对象的特征信息。例如,物理交互对象具体为手机时,那么这个特定标记可以为手机正面贴的一个二维码。需要说明的是,这个二维码的特征已经预先存储在头戴式可视设备中,即预设特征信息。这样,头戴式可视设备只需从图像中提取出的二维码,将二维码的信息作为特征信息。
②对于特定标记本身没有标识性含义的,可以通过根据多个特定标记的组合情况来确定特征信息。比如,在一种实施方式中,头戴式可视设备识别图像中物理交互对象上的至少三个特定标记,将所述特定标记组合成的形状作为所述物理交互对象的特征信息。在这里,这些特定标记可以为内置在物理交互对象里的红外发射点;简单的也可以为物理交互对象表面的物理介质,例如在物理交互对象表面固定的位置点贴纸;同样还可以为物理交互对象上固定位置的按键组合等。这样,头戴式可视设备利用其对外摄像头,在捕获周边现实环境图像的时间序列帧数据之后,利用这些特定标记的几何组成关系,获取到现实环境中的物理交互对象的特征信息。
在第二种获取方式中,物理交互对象上可以预先装配具有信号发射功能的装置、设备、模块等,这样,头戴式可视设备在获取现实环境中的物理交互对象的特征信息时,首先通过其装配的信号接收装置获取现实环境中的物理交互对象发射的信号,然后分析所述物理交互对象发射的信号的频率、发射信号的强度和/或发射信号的方式等,根据分析的结果确定物理交互对象的特征信息。
在上述实施例的步骤103完成后,在虚拟现实环境中便可看到与物理交互对象对应的适应当前虚拟交互环境的虚拟交互对象。通常情况下,在虚拟现实环境中呈现出虚拟交互对象即可解决技术问题,但是,在某些延伸使用环境中,往往还希望通过物理交互对象可视化地与虚拟现实环境进行信息交互。这种情况下,头戴式可视设备获取现实环境中的物理交互对象的特征信息,将虚拟交互对象融合到虚拟现实环境中并显示出来之后,头戴式可视设备还可以接收用户对物理交互对象的操作信息,并基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,利用所述操作信息改变所述虚拟现实环境。
上述介绍的实施例均是本发明的方法的实施例,相应地,本发明还提供了一种在虚拟现实中显示交互对象的装置的实施例。参见附图3,本发明提供的应用于头戴式可视设备中在虚拟现实中显示交互对象的装置可以包括:特征信息获取模块11、存储模块12、特征信息匹配模块13和显示模块14,其中:
特征信息获取模块11,可以用于获取现实环境中的物理交互对象的特征信息;
存储模块12,可以用于存储预设特征信息,虚拟交互对象,以及,预设特征信息和虚拟交互对象之间的映射关系;
特征信息匹配模块13,可以用于将特征信息获取模块11获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象;
显示模块14,可以用于将确定的虚拟交互对象显示到虚拟现实环境中。
本装置实施例的工作过程可以为:首先特征信息获取模块11获取现实环境中的物理交互对象的特征信息,然后特征信息匹配模块13将特征信息获取模块11获取的特征信息与存储模块12存储的预设特征信息进行匹配,根据预设特征信息和虚拟交互对象之间的映射关系确定虚拟交互对象;最后显示模块14将确定的虚拟交互对象显示到虚拟现实环境中。
本装置实施例能够取得与上述方法实施例同样的技术效果,为避免重复,这里不再赘言。
在上述基础装置实施例之外的其他一些装置实施例中,将物理交互对象对应的虚拟交互对象呈现在虚拟现实中已能解决本发明的技术问题,但是,在某些情况下,可以需要利用虚拟交互对象(物理交互对象)来实现对当前虚拟现实环境的控制或改变。这种情况下,在本发明实施例提供的在虚拟现实中显示交互对象的装置基础上,还可以包括操作信息接收模块和虚拟现实改变模块,其中:
操作信息接收模块,可以用于接收用户对所述物理交互对象的操作信息;
虚拟现实改变模块,可以用于基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,利用所述操作信息改变所述虚拟现实环境。
这样,当用户对虚拟现实环境进行改变时,首先,操作信息接收模块接收用户对物理交互对象的操作信息,基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,虚拟现实改变模块利用所述操作信息改变所述虚拟现实环境,进而用户可以操作头戴式可视设备方便地切换不同的虚拟现实环境。
在实际应用中,上述装置实施例中的特征信息获取模块11、存储模块12、特征信息匹配模块13、显示模块14、操作信息接收模块和虚拟现实改变模块可以集成在一起,也可以采取分布式模式部署。集成在一起的几个模块可以同时设置到头戴式可视设备中。集成有这些模块的头戴式可视设备可以方便用户操作,实现现实环境与虚拟现实的交互,提高用户体验。
上述基础的装置实施例除可以基于客观需要增加一些模块,达到扩展基础装置实施例的功能之外,基础装置实施例内的各个模块基于不同的实现方式可以具有不同的内部结构。比如,在上述装置实施例中的特性信息获取模块基于不同的特性信息获取方式可以包含不同的子模块。比如,在物理交互对象上具有特定标记时,所述特征信息获取模块11包括图像获取子模块111和图像分析子模块112,具体见图4a,其中:
图像获取子模块111,用于获取现实环境中的物理交互对象的图像;
图像分析子模块112,用于分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息。
在物理交互对象具有信号发射功能时,所述特征信息获取模块11可以包括信号获取子模块113和信号分析子模块114,具体见图4b,其中:
信号获取子模块113,可以用于获取现实环境中的物理交互对象发射的信号;
信号分析子模块114,可以用于分析所述物理交互对象发射的信号以获得物理交互对象的特征信息。
需要说明的是,上述各流程和各结构图中不是所有的步骤和模块都是必须的,可以根据实际的需要忽略某些步骤或模块。各步骤的执行顺序不是固定的,可以根据需要进行调整。各模块的划分仅仅是为了便于描述采用的功能上的划分,实际实现时,一个模块可以分由多个模块实现,多个模块的功能也可以由同一个模块实现,这些模块可以位于同一个设备中,也可以位于不同的设备中。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种在虚拟现实中显示交互对象的方法,其特征在于,所述方法应用于头戴式可视设备中,所述头戴式可视设备存储有预设特征信息和虚拟交互对象,所述预设特征信息和所述虚拟交互对象具有映射关系,所述虚拟交互对象与显示所述虚拟交互对象的虚拟现实环境关联,所述方法包括:
获取现实环境中的物理交互对象的特征信息;
将获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象;
将确定的虚拟交互对象显示到虚拟现实环境中。
2.根据权利要求1所述的方法,其特征在于,
所述物理交互对象上具有特定标记,所述获取现实环境中的物理交互对象的特征信息包括:
获取现实环境中的物理交互对象的图像;分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息;或者,
所述物理交互对象具有信号发射功能,所述获取现实环境中的物理交互对象的特征信息包括:
获取现实环境中的物理交互对象发射的信号,分析所述物理交互对象发射的信号以获得物理交互对象的特征信息。
3.根据权利要求2所述的方法,其特征在于,所述分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息包括:
识别所述图像中物理交互对象上的一个特定标记,所述特定标记包含标识性含义,将所述标识性含义作为所述物理交互对象的特征信息;或者,
识别所述图像中物理交互对象上的至少三个特定标记,将所述特定标记组成的形状作为所述物理交互对象的特征信息。
4.根据权利要求2所述的方法,其特征在于,所述分析所述物理交互对象发射的信号以获得物理交互对象的特征信息包括:
分析所述物理交互对象发射的信号的频率、强度和/或方式,根据分析的结果确定物理交互对象的特征信息。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收对所述物理交互对象的操作信息,基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,利用所述操作信息改变所述虚拟现实环境。
6.根据权利要求1至5中任何一项所述的方法,其特征在于,所述将确定的虚拟交互对象显示到虚拟现实环境中包括:
将确定的虚拟交互对象通过动态纹理映射方式映射到所述虚拟现实环境中并显示出来。
7.一种在虚拟现实中显示交互对象的装置,其特征在于,所述装置应用于头戴式可视设备中,所述装置包括:特征信息获取模块、存储模块、特征信息匹配模块和显示模块,其中:
所述特征信息获取模块,用于获取现实环境中的物理交互对象的特征信息;
所述存储模块,用于存储预设特征信息,虚拟交互对象,以及,预设特征信息和虚拟交互对象之间的映射关系;
所述特征信息匹配模块,用于将特征信息获取模块获取的特征信息与预设特征信息进行匹配,并根据预设特征信息和虚拟交互对象的映射关系确定虚拟交互对象;
所述显示模块,用于将确定的虚拟交互对象显示到虚拟现实环境中。
8.根据权利要求7所述的装置,其特征在于,
所述物理交互对象上具有特定标记,所述特征信息获取模块包括图像获取子模块和图像分析子模块,其中:
所述图像获取子模块,用于获取现实环境中的物理交互对象的图像;
所述图像分析子模块,用于分析所述图像中物理交互对象上特定标记以获得物理交互对象的特征信息;
所述物理交互对象具有信号发射功能,所述特征信息获取模块包括信号获取子模块和信号分析子模块,其中:
所述信号获取子模块,用于获取现实环境中的物理交互对象发射的信号;
所述信号分析子模块,用于分析所述物理交互对象发射的信号以获得物理交互对象的特征信息。
9.根据权利要求7所述的装置,其特征在于,所述装置还包括操作信息接收模块和虚拟现实改变模块,其中:
所述操作信息接收模块,用于接收对所述物理交互对象的操作信息;
所述虚拟现实改变模块,用于基于虚拟交互对象与显示虚拟交互对象的虚拟现实环境之间的关联,利用所述操作信息改变所述虚拟现实环境。
10.根据权利要求7至9中任何一项所述的装置,其特征在于,所述显示模块,具体用于将所述确定的虚拟显示对象通过动态纹理映射方式映射到所述虚拟现实环境中并显示出来。
CN201510726806.3A 2015-10-30 2015-10-30 在虚拟现实中显示交互对象的方法和装置 Pending CN106648038A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510726806.3A CN106648038A (zh) 2015-10-30 2015-10-30 在虚拟现实中显示交互对象的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510726806.3A CN106648038A (zh) 2015-10-30 2015-10-30 在虚拟现实中显示交互对象的方法和装置

Publications (1)

Publication Number Publication Date
CN106648038A true CN106648038A (zh) 2017-05-10

Family

ID=58809220

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510726806.3A Pending CN106648038A (zh) 2015-10-30 2015-10-30 在虚拟现实中显示交互对象的方法和装置

Country Status (1)

Country Link
CN (1) CN106648038A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106935096A (zh) * 2017-05-18 2017-07-07 重庆电子工程职业学院 一种工业控制虚拟现实教学实训平台及其操作方法
CN107291222A (zh) * 2017-05-16 2017-10-24 阿里巴巴集团控股有限公司 虚拟现实设备的交互处理方法、装置、系统及虚拟现实设备
CN107854288A (zh) * 2017-11-01 2018-03-30 暨南大学 基于数字智能虚拟三维立体影像技术的视觉失调监测及康复训练用眼镜
CN107885331A (zh) * 2017-11-09 2018-04-06 北京易讯理想科技有限公司 一种基于增强现实技术实现音频切换的交互方法
CN108646997A (zh) * 2018-05-14 2018-10-12 刘智勇 一种虚拟及增强现实设备与其他无线设备进行交互的方法
CN108845669A (zh) * 2018-06-17 2018-11-20 刘玲 一种ar/mr交互方法和装置
CN108874123A (zh) * 2018-05-07 2018-11-23 北京理工大学 一种通用的模块化的虚拟现实被动力触觉反馈系统
CN110310372A (zh) * 2018-03-20 2019-10-08 韩国电子通信研究院 动态虚拟对象实现系统及方法
CN110555912A (zh) * 2018-05-30 2019-12-10 韩国电子通信研究院 虚拟现实内容重现方法及装置
CN113262465A (zh) * 2021-04-27 2021-08-17 青岛小鸟看看科技有限公司 一种虚拟现实交互方法、设备及系统
CN114415827A (zh) * 2021-12-20 2022-04-29 北京理工大学 一种为虚拟物体提供实体交互的方法、系统及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101243392A (zh) * 2005-08-15 2008-08-13 皇家飞利浦电子股份有限公司 用于终端用户编程的增强现实眼镜的系统、设备和方法
CN102576253A (zh) * 2009-07-31 2012-07-11 雷蛇装置(亚太)私人有限公司 用于物理输入装置控制件与应用程序动作之间的统一上下文映射的系统和方法
CN104067201A (zh) * 2011-11-23 2014-09-24 英特尔公司 带有多个视图、显示器以及物理学的姿势输入
CN104407518A (zh) * 2008-06-20 2015-03-11 因文西斯系统公司 对用于过程控制的实际和仿真设施进行交互的系统和方法
CN105005145A (zh) * 2015-08-03 2015-10-28 众景视界(北京)科技有限公司 智能眼镜及智能眼镜的外接设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101243392A (zh) * 2005-08-15 2008-08-13 皇家飞利浦电子股份有限公司 用于终端用户编程的增强现实眼镜的系统、设备和方法
CN104407518A (zh) * 2008-06-20 2015-03-11 因文西斯系统公司 对用于过程控制的实际和仿真设施进行交互的系统和方法
CN102576253A (zh) * 2009-07-31 2012-07-11 雷蛇装置(亚太)私人有限公司 用于物理输入装置控制件与应用程序动作之间的统一上下文映射的系统和方法
CN104067201A (zh) * 2011-11-23 2014-09-24 英特尔公司 带有多个视图、显示器以及物理学的姿势输入
CN105005145A (zh) * 2015-08-03 2015-10-28 众景视界(北京)科技有限公司 智能眼镜及智能眼镜的外接设备

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107291222B (zh) * 2017-05-16 2020-08-04 阿里巴巴集团控股有限公司 虚拟现实设备的交互处理方法、装置、系统及虚拟现实设备
CN107291222A (zh) * 2017-05-16 2017-10-24 阿里巴巴集团控股有限公司 虚拟现实设备的交互处理方法、装置、系统及虚拟现实设备
CN106935096A (zh) * 2017-05-18 2017-07-07 重庆电子工程职业学院 一种工业控制虚拟现实教学实训平台及其操作方法
CN107854288A (zh) * 2017-11-01 2018-03-30 暨南大学 基于数字智能虚拟三维立体影像技术的视觉失调监测及康复训练用眼镜
CN107885331A (zh) * 2017-11-09 2018-04-06 北京易讯理想科技有限公司 一种基于增强现实技术实现音频切换的交互方法
CN110310372A (zh) * 2018-03-20 2019-10-08 韩国电子通信研究院 动态虚拟对象实现系统及方法
CN108874123A (zh) * 2018-05-07 2018-11-23 北京理工大学 一种通用的模块化的虚拟现实被动力触觉反馈系统
CN108646997A (zh) * 2018-05-14 2018-10-12 刘智勇 一种虚拟及增强现实设备与其他无线设备进行交互的方法
CN110555912A (zh) * 2018-05-30 2019-12-10 韩国电子通信研究院 虚拟现实内容重现方法及装置
CN110555912B (zh) * 2018-05-30 2023-08-11 韩国电子通信研究院 虚拟现实内容重现方法及装置
CN108845669A (zh) * 2018-06-17 2018-11-20 刘玲 一种ar/mr交互方法和装置
CN108845669B (zh) * 2018-06-17 2021-10-15 刘玲 一种ar/mr交互方法和装置
CN113262465A (zh) * 2021-04-27 2021-08-17 青岛小鸟看看科技有限公司 一种虚拟现实交互方法、设备及系统
US11782272B2 (en) 2021-04-27 2023-10-10 Qingdao Pico Technology Co., Ltd. Virtual reality interaction method, device and system
CN114415827A (zh) * 2021-12-20 2022-04-29 北京理工大学 一种为虚拟物体提供实体交互的方法、系统及装置

Similar Documents

Publication Publication Date Title
CN106648038A (zh) 在虚拟现实中显示交互对象的方法和装置
CN108665553B (zh) 一种实现虚拟场景转换的方法及设备
US20200388070A1 (en) Virtual scene switching method and apparatus, terminal device, and storage medium
CN103246351B (zh) 一种用户交互系统和方法
CN111766937B (zh) 虚拟内容的交互方法、装置、终端设备及存储介质
CN110007750A (zh) 实体对象与虚拟对象的增强现实绑定
US20150301596A1 (en) Method, System, and Computer for Identifying Object in Augmented Reality
CN102779000B (zh) 一种用户交互系统和方法
CN110168618A (zh) 增强现实控制系统和方法
CN111701238A (zh) 虚拟画卷的显示方法、装置、设备及存储介质
CN102681651B (zh) 一种用户交互系统和方法
CN108255304A (zh) 基于增强现实的视频数据处理方法、装置和存储介质
CN110506249A (zh) 信息处理设备、信息处理方法和记录介质
JP2022505998A (ja) 拡張現実データの提示方法、装置、電子機器及び記憶媒体
CN205015835U (zh) 头戴式智能交互系统
JP6189497B1 (ja) 仮想空間を提供する方法、仮想体験を提供する方法、プログラム、および記録媒体
CN105068648A (zh) 头戴式智能交互系统
US11209903B2 (en) Rendering of mediated reality content
CN113398572B (zh) 虚拟道具切换方法、技能切换方法、虚拟对象切换方法
CN109426343A (zh) 基于虚拟现实的协作训练方法及系统
CN103257703A (zh) 一种增强现实装置及方法
CN112755517A (zh) 虚拟对象控制方法、装置、终端及存储介质
CN107122002A (zh) 一种头戴式可视设备
KR101574993B1 (ko) 모션 커맨드 입력 방식의 가상 대전 방법
JP2018014084A (ja) 仮想空間を提供する方法、仮想体験を提供する方法、プログラム、および記録媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170510