CN105912110B - 一种在虚拟现实空间中进行目标选择的方法、装置及系统 - Google Patents

一种在虚拟现实空间中进行目标选择的方法、装置及系统 Download PDF

Info

Publication number
CN105912110B
CN105912110B CN201610210464.4A CN201610210464A CN105912110B CN 105912110 B CN105912110 B CN 105912110B CN 201610210464 A CN201610210464 A CN 201610210464A CN 105912110 B CN105912110 B CN 105912110B
Authority
CN
China
Prior art keywords
virtual
dimensional space
input device
gesture input
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610210464.4A
Other languages
English (en)
Other versions
CN105912110A (zh
Inventor
罗子雄
王木易
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Hammer Numeral Science And Technology Co Ltd
Original Assignee
Beijing Hammer Numeral Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Hammer Numeral Science And Technology Co Ltd filed Critical Beijing Hammer Numeral Science And Technology Co Ltd
Priority to CN201610210464.4A priority Critical patent/CN105912110B/zh
Publication of CN105912110A publication Critical patent/CN105912110A/zh
Application granted granted Critical
Publication of CN105912110B publication Critical patent/CN105912110B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种在虚拟现实空间中进行目标选择的方法,用于在虚拟现实的空间中实现灵活、高效地进行目标选择,该方法包括:接收手势输入设备的空间位置信息以及旋转姿态信息,根据手势输入设备的空间位置信息以及旋转姿态信息将手势输入设备映射到建立的三维虚拟空间中;获取代表手势输入设备的虚拟物在三维虚拟空间中的位置坐标原点以及指向虚拟物正前方的方向向量;在三维虚拟空间中绘制一条以位置坐标原点为起点,沿方向向量方向的射线,射线作为在三维虚拟空间中进行目标选择的提示标识;确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示。本发明还公开了一种在虚拟现实空间中进行目标选择的装置及系统。

Description

一种在虚拟现实空间中进行目标选择的方法、装置及系统
技术领域
本发明涉及虚拟现实技术领域,具体涉及一种在虚拟现实空间中进行目标选择的方法、装置及系统。
背景技术
虚拟现实(Virtual Reality,VR)技术是一种可以创建和体验虚拟世界的计算机仿真系统,利用计算机生成一种模拟环境,用户借助特殊的输入/输出设备,与虚拟世界中的物体进行自然的交互,从而通过视觉、听觉和触觉获得与真实世界相同的感受。
在现有技术中,用户在虚拟现实系统空间中选择目标的方式通常是用户戴上VR头戴显示器后,会在视野中央出现一个光标,用户通过转动头部改变视角,使视野中央的光标移动至目标物或目标项,随后针对目标进行进一步操作。但是,用户需要通过头部不断转动来进行目标选择,操作不便、效率较低,且用户体验较差。
发明内容
有鉴于此,本发明提供一种在虚拟现实空间中进行目标选择的方法、装置及系统,以解决现有技术中在虚拟现实中进行目标选择操作不便、效率较低,且用户体验较差的技术问题。
为解决上述问题,本发明提供的技术方案如下:
一种在虚拟现实空间中进行目标选择的方法,所述方法包括:
接收手势输入设备的空间位置信息以及旋转姿态信息,根据所述手势输入设备的空间位置信息以及旋转姿态信息将所述手势输入设备映射到建立的三维虚拟空间中;
获取代表所述手势输入设备的虚拟物在所述三维虚拟空间中的位置坐标原点以及指向所述虚拟物正前方的方向向量;
在所述三维虚拟空间中绘制一条以所述位置坐标原点为起点,沿所述方向向量方向的射线,所述射线作为在所述三维虚拟空间中进行目标选择的提示标识;
确定用户视野方向的三维虚拟空间图像并发送给所述头戴显示器显示。
可选的,所述方法还包括:
当利用射线投射算法计算得到所述射线与所述三维虚拟空间中的任一虚拟物之间存在交点,则将与所述射线存在交点的虚拟物确定为目标物。
可选的,所述方法还包括:
接收所述手势输入设备和/或所述头戴显示器发送的控制指令,对所述目标物进行与所述控制指令对应的操作。
可选的,所述确定用户视野方向的三维虚拟空间图像并发送给所述头戴显示器显示,包括:
接收头戴显示器的空间位置信息以及旋转姿态信息;
根据所述头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像;
将所述用户视野方向的三维虚拟空间图像发送给头戴显示器显示。
一种在虚拟现实空间中进行目标选择的装置,所述装置包括:
映射单元,用于接收手势输入设备的空间位置信息以及旋转姿态信息,根据所述手势输入设备的空间位置信息以及旋转姿态信息将所述手势输入设备映射到建立的三维虚拟空间中;
获取单元,用于获取代表所述手势输入设备的虚拟物在所述三维虚拟空间中的位置坐标原点以及指向所述虚拟物正前方的方向向量;
绘制单元,用于在所述三维虚拟空间中绘制一条以所述位置坐标原点为起点,沿所述方向向量方向的射线,所述射线作为在所述三维虚拟空间中进行目标选择的提示标识;
图像发送单元,用于确定用户视野方向的三维虚拟空间图像并发送给所述头戴显示器显示。
可选的,所述装置还包括:
确定单元,用于当利用射线投射算法计算得到所述射线与所述三维虚拟空间中的任一虚拟物之间存在交点,则将与所述射线存在交点的虚拟物确定为目标物。
可选的,所述装置还包括:
操作单元,用于接收所述手势输入设备和/或所述头戴显示器发送的控制指令,对所述目标物进行与所述控制指令对应的操作。
可选的,所述图像发送单元包括:
接收子单元,用于接收头戴显示器的空间位置信息以及旋转姿态信息;
确定子单元,用于根据所述头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像;
发送子单元,用于将所述用户视野方向的三维虚拟空间图像发送给头戴显示器显示。
一种在虚拟现实空间中进行目标选择的系统,所述系统包括:
主机设备、手势输入设备以及头戴显示器;
所述主机设备是上述的一种在虚拟现实空间中进行目标选择的装置;
所述手势输入设备,用于在用户的操作下改变空间位置以及旋转姿态,以使所述主机设备根据所述手势输入设备的空间位置信息以及旋转姿态信息在三维虚拟空间中绘制一条述射线作为在所述三维虚拟空间中进行目标选择的提示标识;
所述头戴显示器,用于显示用户视野方向的三维虚拟空间图像。
可选的,所述系统还包括:
追踪设备,所述追踪设备用于获取所述手势输入设备的空间位置信息以及旋转姿态信息,并发送给所述主机设备;获取所述头戴显示器的空间位置信息以及旋转姿态信息,并发送给所述主机设备。
由此可见,本发明实施例具有如下有益效果:
本发明实施例通过手势输入设备的空间位置以及旋转姿态的改变,可以获取代表手势输入设备的虚拟物在建立的三维虚拟空间中的位置坐标原点以及指向正前方的方向向量,由此确定一条类似从手势输入设备位置射出的射线以使用户在头戴显示器中看到射线的方向从而进行目标选择,只需小角度转动手势输入设备即可实现在虚拟现实空间中射线落点的大范围移动,操作灵活度大幅提高,提高了进行目标选择的效率,改善了用户体验。
附图说明
图1为本发明实施例中应用场景的示意图;
图2为本发明实施例中提供的在虚拟现实空间中进行目标选择的方法实施例的流程图;
图3为本发明实施例中提供的在虚拟现实空间中进行目标选择的示意图;
图4为本发明实施例中提供的在虚拟现实空间中进行目标选择的示意图;
图5为本发明实施例中提供的在虚拟现实空间中进行目标选择的装置实施例的示意图;
图6为本发明实施例中提供的在虚拟现实空间中进行目标选择的系统实施例的示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明实施例作进一步详细的说明。
在现有技术中,用户在虚拟现实场景或空间中选择目标的传统交互控制方式是当用户戴上VR头戴显示器后,在视野中央出现一个光标,通过转动头部来改变视角,使视野中央的光标移动至目标物(或目标项),随后可以针对目标进行进一步操作。此种目标选择的方式虽能定位到目标,但是用户通过头部转动来操控的方式显得较为费劲,效率不高,用户体验较差。为此,本发明实施例提出一种在虚拟现实空间中进行目标选择的方法、装置及系统,将手势输入设备与主机设备相连,用户在使用过程中,可以在头戴显示器中看到一束类似从手势输入设备处射出的指向视野远方的激光射线,用户转动手势输入设备,通过获取手势输入设备的空间位置和旋转姿态,实时更新用户在头戴显示器中看到的射线方向,从而帮助用户完成目标的选择,可以极大改善虚拟现实系统中使用者操作过程中的用户体验,提高了进行目标选择、控制的效率,解决了必须转动头部改变视野中心才能进行目标选择的痛点。
首先参见图1所示,示出了本发明的实施方式可以在其中实施的示例性应用场景。其中,在该应用场景中可以至少包括主机设备1、头戴显示器2以及手势输入设备3。头戴显示器和手势输入设备可以和主机设备相连。其中,主机设备可以包括但不限于:现有的、正在研发的或将来研发的智能手机、非智能手机、平板电脑、膝上型个人计算机、桌面型个人计算机、小型计算机、中型计算机、大型计算机、智能电视或其他VR平台设备等由存储器、运算器、控制器、输入设备和输出设备组成的智能终端。头戴显示器,是穿戴式设备的一种,用于提供图像显示功能,用户戴上头戴显示器后相当于在用户两只眼睛前方各放上一台小型显示器,用户视野看到的将是显示器中的内容。手势输入设备则可以是能连接到主机的、具有检测空间数据功能的手持设备,例如手柄、数据手套等。本发明实施例中提供的在虚拟现实空间中进行目标选择的方法将从在虚拟现实空间中进行目标选择的装置角度进行描述,该在虚拟现实空间中进行目标选择的装置具体可以集成在客户端中,该客户端可以装载在上述主机设备中。
需要注意的是,上述应用场景仅是为了便于理解本发明的精神和原理而示出,本发明的实施方式在此方面不受任何限制。相反,本发明的实施方式可以应用于适用的任何场景。
基于上述思想,参见图2所示,本发明实施例中提供的在虚拟现实空间中进行目标选择的方法实施例,可以包括以下步骤:
步骤201:接收手势输入设备的空间位置信息以及旋转姿态信息,根据手势输入设备的空间位置信息以及旋转姿态信息将手势输入设备映射到建立的三维虚拟空间中。
在虚拟现实系统中,每个物体相对于系统的坐标系都有一个空间位置与旋转姿态,空间位置可以由相对于系统坐标系X轴、Y轴、Z轴上的坐标来表示,旋转姿态可以由与系统坐标系X轴、Y轴、Z轴的偏差角度(即倾角、偏角和转角)来表示。在实际应用中,可以由手势输入设备自带的追踪设备例如陀螺仪等检测自身在系统中的空间位置信息以及旋转姿态信息并发送给主机设备,也可以由外部的追踪设备例如红外跟踪器等通过立体视觉计算确定目标位置并通过观测多个参照点来确定目标的表面指向,由此检测得到手势输入设备的空间位置信息以及旋转姿态信息并发送给主机设备。
根据手势输入设备在系统中的空间位置信息以及旋转姿态信息,主机设备利用VR软件可以将手势输入设备映射到预先建立的三维虚拟空间中,进一步获取代表手势输入设备的虚拟物在三维虚拟空间中的空间位置以及旋转姿态。
步骤202:获取代表手势输入设备的虚拟物在三维虚拟空间中的位置坐标原点以及指向虚拟物正前方的方向向量。
在三维虚拟空间中的某一虚拟物相对于三维虚拟空间的系统坐标系可以有一个相对位置以及相对角度,而相对该虚拟物自身也可以建立一个新的坐标系。假设把代表手势输入设备的虚拟物看作是三维虚拟空间中的一个立方体,则可以确定该虚拟物中的某一点为该虚拟物在三维虚拟空间中的位置坐标原点,例如,将重心点作为该虚拟物在三维虚拟空间中的位置坐标原点,进一步可以将沿着代表手势输入设备的虚拟物体正前方作为X轴正方向,将沿着代表手势输入设备的虚拟物体正上方作为Y轴正方向,将沿着代表手势输入设备的虚拟物体右侧方向作为Z轴正方向,建立新的坐标系,从而可以获得指向虚拟物正前方的方向向量,即X轴正方向方向向量。
步骤203:在三维虚拟空间中绘制一条以位置坐标原点为起点,沿方向向量方向的射线,射线作为在三维虚拟空间中进行目标选择的提示标识。
在得到代表手势输入设备的虚拟物的位置坐标原点以及X轴正方向方向向量后,可以绘制一条类似于从手势输入设备处发射出、指向视野远方的激光射线。
在本发明的一些可能的实现方式中,还可以当利用射线投射算法计算得到射线与三维虚拟空间中的任一虚拟物之间存在交点,则将与射线存在交点的虚拟物确定为目标物。
使用射线投射(Ray Casting)相关算法可以计算出射线与三维虚拟空间中的某一虚拟物之间的交点,当射线与某一虚拟物表面存在交点,则该虚拟物即为目标物体。
步骤204:确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示。
在本发明的一些可能的实现方式中,步骤204确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示的具体实现可以包括:
接收头戴显示器的空间位置信息以及旋转姿态信息;
根据头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像;
将用户视野方向的三维虚拟空间图像发送给头戴显示器显示。
由于每个物体相对于系统的坐标系都有一个空间位置与旋转姿态,而用户头戴的头戴显示器也是如此,用户看到的景象是由头戴显示器的位置和头(眼)的方向来确定的。类似的,可以由头戴显示器自带的追踪设备例如陀螺仪等检测自身在系统中的空间位置信息以及旋转姿态信息并发送给主机设备,也可以由外部的追踪设备例如红外跟踪器等通过立体视觉计算确定目标位置并通过观测多个参照点来确定目标的表面指向,由此检测得到头戴显示器的空间位置信息以及旋转姿态信息并发送给主机设备。这样根据头戴显示器的空间位置信息以及旋转姿态信息可以确定头戴显示器携带的摄像机在三维虚拟空间中的拍摄位置姿态,以此确定用户视野方向的三维虚拟空间图像,将渲染完毕后的结果图像画面发送给头戴显示器显示,从而用户可以在头戴显示器中看到一条用于在三维虚拟空间中进行目标选择的提示标识的射线,通过手势输入设备转动完成目标选择。
在本发明的一些可能的实现方式中,还可以包括:
接收手势输入设备和/或头戴显示器发送的控制指令,对目标物进行与控制指令对应的操作。例如,控制指令可以为对目标物体选中、移动等。
参见图3所示,为本发明实施例中用户通过头戴显示器看到的虚拟物理世界的图像内容示意图,即用户视野方向的三维虚拟空间图像。图中,建立的三维虚拟空间中包括球型、圆柱体、圆锥体等虚拟物体,其中,301代表虚拟激光射线、302代表激光射线的落点、303代表被选中的目标物体。
在本实施例中,用户可以通过改变手势输入设备位置、方向,将生成绘制的虚拟射线指向目标物体。在没有障碍物阻挡的情况下,射线的落点可视为在无限远处。当射线指向某虚拟物体后,射线落点即在该虚拟物体上,该虚拟物体即可视为被选中的目标物体,进一步的,可以针对目标物执行进一步操作,例如通过点击手势输入设备和/或头戴显示器上的控制按钮,由主机设备接收控制指令,对目标物进行与控制指令对应的操作,如移动物体、用户视野向目标物移动等。
参见图4所示,为本发明实施例中用户通过头戴显示器看到的VR软件界面示意图,即用户视野方向的三维虚拟空间图像,与上一实施例不同的是,三维虚拟空间中包括的不是虚拟物体,而是VR软件界面选项。其中,401代表虚拟激光射线、402代表激光射线的落点、403代表被选中的目标项。
类似的,在本实施例中,用户可以通过改变手势输入设备位置、方向,将生成绘制的虚拟射线指向目标项。在没有障碍物阻挡的情况下,射线的落点可视为在无限远处。当射线指向某虚拟选项后,射线落点即在该虚拟选项上,该虚拟选项即可视为被选中的目标项,进一步的,可以针对目标项执行进一步操作,例如通过点击手势输入设备和/或头戴显示器上的控制按钮,由主机设备接收控制指令,对目标物进行与控制指令对应的操作,如选中、点击、移动等。
这样,本发明实施例通过手势输入设备的空间位置以及旋转姿态的改变,可以获取代表手势输入设备的虚拟物在建立的三维虚拟空间中的位置坐标原点以及指向正前方的方向向量,由此确定一条类似从手势输入设备位置射出的射线以使用户在头戴显示器中看到射线的方向从而进行目标选择。对于用户来说只需轻微转动腕关节,小角度转动手势输入设备即可实现在虚拟现实场景或空间中射线落点的大范围移动,手腕转动亦可配合手肘转动,相比转动头部而言,操作灵活度大幅提高,提高了进行目标选择的效率,改善了用户体验。
参见图5所示,本发明实施例中提供的在虚拟现实空间中进行目标选择的装置实施例,可以包括:
映射单元501,用于接收手势输入设备的空间位置信息以及旋转姿态信息,根据手势输入设备的空间位置信息以及旋转姿态信息将手势输入设备映射到建立的三维虚拟空间中;
获取单元502,用于获取代表手势输入设备的虚拟物在三维虚拟空间中的位置坐标原点以及指向虚拟物正前方的方向向量。
绘制单元503,用于在三维虚拟空间中绘制一条以位置坐标原点为起点,沿方向向量方向的射线,射线作为在三维虚拟空间中进行目标选择的提示标识。
图像发送单元504,用于确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示。
在本发明的一些可能的实现方式中,图像发送单元504可以包括:
接收子单元,用于接收头戴显示器的空间位置信息以及旋转姿态信息;
确定子单元,用于根据头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像;
发送子单元,用于将用户视野方向的三维虚拟空间图像发送给头戴显示器显示。
在本发明的一些可能的实现方式中,本发明实施例中提供的在虚拟现实空间中进行目标选择的装置实施例还可以包括:
确定单元,用于当利用射线投射算法计算得到射线与三维虚拟空间中的任一虚拟物之间存在交点,则将与射线存在交点的虚拟物确定为目标物。
在本发明的一些可能的实现方式中,本发明实施例中提供的在虚拟现实空间中进行目标选择的装置实施例还可以包括:
操作单元,用于接收手势输入设备和/或头戴显示器发送的控制指令,对目标物进行与控制指令对应的操作。
这样,本发明实施例通过手势输入设备的空间位置以及旋转姿态的改变,可以获取代表手势输入设备的虚拟物在建立的三维虚拟空间中的位置坐标原点以及指向正前方的方向向量,由此确定一条类似从手势输入设备位置射出的射线以使用户在头戴显示器中看到射线的方向从而进行目标选择,只需小角度转动手势输入设备即可实现在虚拟现实空间中射线落点的大范围移动,操作灵活度大幅提高,提高了进行目标选择的效率,改善了用户体验。
参见图6所示,本发明实施例中提供的在虚拟现实空间中进行目标选择的系统实施例,可以包括:
主机设备601、手势输入设备602以及头戴显示器603。
其中,主机设备601可以是上述在虚拟现实空间中进行目标选择的装置实施例。
手势输入设备602,可以用于在用户的操作下改变空间位置以及旋转姿态,以使主机设备根据手势输入设备的空间位置信息以及旋转姿态信息在三维虚拟空间中绘制一条述射线作为在三维虚拟空间中进行目标选择的提示标识。
头戴显示器603,用于显示用户视野方向的三维虚拟空间图像。
在本发明的一些可能的实现方式中,本发明实施例中提供的在虚拟现实空间中进行目标选择的系统实施例还可以包括:
追踪设备,追踪设备用于获取手势输入设备的空间位置信息以及旋转姿态信息,并发送给主机设备;获取头戴显示器的空间位置信息以及旋转姿态信息,并发送给主机设备。
本系统实施例的工作原理可以是:
外部的追踪设备或者手势输入设备自身携带的追踪设备获取手势输入设备的空间位置信息以及旋转姿态信息,并发送给主机设备,主机设备根据手势输入设备的空间位置信息以及旋转姿态信息将手势输入设备映射到建立的三维虚拟空间中;获取代表手势输入设备的虚拟物在三维虚拟空间中的位置坐标原点以及指向虚拟物正前方的方向向量;在三维虚拟空间中绘制一条以位置坐标原点为起点,沿方向向量方向的射线;同时,外部的追踪设备或者头戴显示器自身携带的追踪设备获取头戴显示器的空间位置信息以及旋转姿态信息并发送给主机设备,主机设备根据头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示;用户根据头戴显示器中显示的包括射线的三维虚拟空间图像,改变手势输入设备的空间位置和旋转角度,进行目标选择,主机设备实时更新用户视野方向的三维虚拟空间图像并发送给头戴显示器显示;主机设备当利用射线投射算法计算得到射线与三维虚拟空间中的任一虚拟物之间存在交点,则将与射线存在交点的虚拟物确定为目标物;用户可以通过手势输入设备和/或头戴显示器进一步对该目标物进行操作,即主机设备可以接收手势输入设备和/或头戴显示器发送的控制指令,对目标物进行与控制指令对应的操作。
这样,本发明实施例通过手势输入设备的空间位置以及旋转姿态的改变,可以获取代表手势输入设备的虚拟物在建立的三维虚拟空间中的位置坐标原点以及指向正前方的方向向量,由此确定一条类似从手势输入设备位置射出的射线以使用户在头戴显示器中看到射线的方向从而进行目标选择,只需小角度转动手势输入设备即可实现在虚拟现实空间中射线落点的大范围移动,操作灵活度大幅提高,提高了进行目标选择的效率,改善了用户体验。
需要说明的是,本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统或装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种在虚拟现实空间中进行目标选择的方法,其特征在于,所述方法包括:
接收手势输入设备的空间位置信息以及旋转姿态信息,根据所述手势输入设备的空间位置信息以及旋转姿态信息将所述手势输入设备映射到建立的三维虚拟空间中;
获取代表所述手势输入设备的虚拟物在所述三维虚拟空间中的位置坐标原点以及指向所述虚拟物正前方的方向向量;
在所述三维虚拟空间中绘制一条以所述位置坐标原点为起点,沿所述方向向量方向的射线,所述射线作为在所述三维虚拟空间中进行目标选择的提示标识;
确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当利用射线投射算法计算得到所述射线与所述三维虚拟空间中的任一虚拟物之间存在交点,则将与所述射线存在交点的虚拟物确定为目标物。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
接收所述手势输入设备和/或所述头戴显示器发送的控制指令,对所述目标物进行与所述控制指令对应的操作。
4.根据权利要求1所述的方法,其特征在于,所述确定用户视野方向的三维虚拟空间图像并发送给所述头戴显示器显示,包括:
接收头戴显示器的空间位置信息以及旋转姿态信息;
根据所述头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像;
将所述用户视野方向的三维虚拟空间图像发送给头戴显示器显示。
5.一种在虚拟现实空间中进行目标选择的装置,其特征在于,所述装置包括:
映射单元,用于接收手势输入设备的空间位置信息以及旋转姿态信息,根据所述手势输入设备的空间位置信息以及旋转姿态信息将所述手势输入设备映射到建立的三维虚拟空间中;
获取单元,用于获取代表所述手势输入设备的虚拟物在所述三维虚拟空间中的位置坐标原点以及指向所述虚拟物正前方的方向向量;
绘制单元,用于在所述三维虚拟空间中绘制一条以所述位置坐标原点为起点,沿所述方向向量方向的射线,所述射线作为在所述三维虚拟空间中进行目标选择的提示标识;
图像发送单元,用于确定用户视野方向的三维虚拟空间图像并发送给头戴显示器显示。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:
确定单元,用于当利用射线投射算法计算得到所述射线与所述三维虚拟空间中的任一虚拟物之间存在交点,则将与所述射线存在交点的虚拟物确定为目标物。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
操作单元,用于接收所述手势输入设备和/或所述头戴显示器发送的控制指令,对所述目标物进行与所述控制指令对应的操作。
8.根据权利要求5所述的装置,其特征在于,所述图像发送单元包括:
接收子单元,用于接收头戴显示器的空间位置信息以及旋转姿态信息;
确定子单元,用于根据所述头戴显示器的空间位置信息以及旋转姿态信息确定用户视野方向的三维虚拟空间图像;
发送子单元,用于将所述用户视野方向的三维虚拟空间图像发送给头戴显示器显示。
9.一种在虚拟现实空间中进行目标选择的系统,其特征在于,所述系统包括:
主机设备、手势输入设备以及头戴显示器;
所述主机设备是权利要求5-8所述的一种在虚拟现实空间中进行目标选择的装置;
所述手势输入设备,用于在用户的操作下改变空间位置以及旋转姿态,以使所述主机设备根据所述手势输入设备的空间位置信息以及旋转姿态信息在三维虚拟空间中绘制一条述射线作为在所述三维虚拟空间中进行目标选择的提示标识;
所述头戴显示器,用于显示用户视野方向的三维虚拟空间图像。
10.根据权利要求9所述的系统,其特征在于,所述系统还包括:
追踪设备,所述追踪设备用于获取所述手势输入设备的空间位置信息以及旋转姿态信息,并发送给所述主机设备;获取所述头戴显示器的空间位置信息以及旋转姿态信息,并发送给所述主机设备。
CN201610210464.4A 2016-04-06 2016-04-06 一种在虚拟现实空间中进行目标选择的方法、装置及系统 Active CN105912110B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610210464.4A CN105912110B (zh) 2016-04-06 2016-04-06 一种在虚拟现实空间中进行目标选择的方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610210464.4A CN105912110B (zh) 2016-04-06 2016-04-06 一种在虚拟现实空间中进行目标选择的方法、装置及系统

Publications (2)

Publication Number Publication Date
CN105912110A CN105912110A (zh) 2016-08-31
CN105912110B true CN105912110B (zh) 2019-09-06

Family

ID=56745592

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610210464.4A Active CN105912110B (zh) 2016-04-06 2016-04-06 一种在虚拟现实空间中进行目标选择的方法、装置及系统

Country Status (1)

Country Link
CN (1) CN105912110B (zh)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10303865B2 (en) * 2016-08-31 2019-05-28 Redrock Biometrics, Inc. Blue/violet light touchless palm print identification
CN106980362A (zh) 2016-10-09 2017-07-25 阿里巴巴集团控股有限公司 基于虚拟现实场景的输入方法及装置
CN106997239A (zh) * 2016-10-13 2017-08-01 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务实现方法及装置
CN106502401B (zh) * 2016-10-31 2020-01-10 宇龙计算机通信科技(深圳)有限公司 一种图像控制方法及装置
WO2018084082A1 (ja) * 2016-11-02 2018-05-11 パナソニックIpマネジメント株式会社 ジェスチャ入力システム及びジェスチャ入力方法
CN107066079A (zh) 2016-11-29 2017-08-18 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务实现方法及装置
JP6215441B1 (ja) * 2016-12-27 2017-10-18 株式会社コロプラ 仮想空間を提供するための方法、当該方法をコンピュータに実現させるためのプログラム、および、コンピュータ装置
CN108268126B (zh) * 2016-12-30 2021-05-04 成都理想智美科技有限公司 基于头戴式显示设备的交互方法及装置
CN106843488A (zh) * 2017-01-23 2017-06-13 携程计算机技术(上海)有限公司 Vr控制系统及控制方法
CN106896918A (zh) * 2017-02-22 2017-06-27 亿航智能设备(广州)有限公司 一种虚拟现实设备及其视频播放方法
US10564800B2 (en) 2017-02-23 2020-02-18 Spatialand Inc. Method and apparatus for tool selection and operation in a computer-generated environment
CN106681516B (zh) * 2017-02-27 2024-02-06 盛世光影(北京)科技有限公司 一种基于虚拟现实的自然人机交互系统
CN107122642A (zh) 2017-03-15 2017-09-01 阿里巴巴集团控股有限公司 基于虚拟现实环境的身份认证方法及装置
CN107096223B (zh) * 2017-04-20 2020-09-25 网易(杭州)网络有限公司 虚拟现实场景中的移动控制方法、装置及终端设备
WO2018196552A1 (zh) * 2017-04-25 2018-11-01 腾讯科技(深圳)有限公司 用于虚拟现实场景中的手型显示方法及装置
EP3404620A1 (en) * 2017-05-15 2018-11-21 Ecole Nationale de l'Aviation Civile Selective display in an environment defined by a data set
CN109983424B (zh) * 2017-06-23 2022-06-24 腾讯科技(深圳)有限公司 虚拟现实场景中的对象选中方法和装置以及虚拟现实设备
CN109240484A (zh) * 2017-07-10 2019-01-18 北京行云时空科技有限公司 一种增强现实系统中的交互方法、装置及设备
CN107390878B (zh) * 2017-08-07 2021-02-19 北京凌宇智控科技有限公司 一种空间定位方法、装置、定位器
CN107526441A (zh) * 2017-08-31 2017-12-29 触景无限科技(北京)有限公司 3d虚拟交互方法及系统
CN107992189A (zh) * 2017-09-22 2018-05-04 深圳市魔眼科技有限公司 一种虚拟现实六自由度交互方法、装置、终端及存储介质
CN109697002B (zh) * 2017-10-23 2021-07-16 腾讯科技(深圳)有限公司 一种在虚拟现实中对象编辑的方法、相关设备及系统
CN108310769A (zh) * 2017-11-01 2018-07-24 深圳市创凯智能股份有限公司 虚拟对象调节方法、装置及计算机可读存储介质
CN108052253B (zh) * 2017-12-28 2020-09-25 灵图互动(武汉)科技有限公司 一种虚拟现实展示内容制作方法
CN109993834B (zh) * 2017-12-30 2023-08-29 深圳多哚新技术有限责任公司 目标物体在虚拟空间中的定位方法及装置
US10546426B2 (en) * 2018-01-05 2020-01-28 Microsoft Technology Licensing, Llc Real-world portals for virtual reality displays
CN108614637A (zh) * 2018-03-01 2018-10-02 惠州Tcl移动通信有限公司 智能终端及其感控方法、具有存储功能的装置
CN108388347B (zh) * 2018-03-15 2021-05-25 网易(杭州)网络有限公司 虚拟现实中的交互控制方法和装置及存储介质、终端
CN110543230A (zh) * 2018-05-28 2019-12-06 广州彩熠灯光有限公司 基于虚拟现实的舞台灯光元素的设计方法及设计系统
CN111766959B (zh) * 2019-04-02 2023-05-05 海信视像科技股份有限公司 虚拟现实交互方法和虚拟现实交互装置
CN111381677B (zh) * 2020-03-17 2021-06-22 清华大学 一种目标选择方法、装置、设备及可读存储介质
CN112068757B (zh) * 2020-08-03 2022-04-08 北京理工大学 一种用于虚拟现实的目标选择方法及系统
CN112000224A (zh) * 2020-08-24 2020-11-27 北京华捷艾米科技有限公司 一种手势交互方法及系统
CN112286362B (zh) * 2020-11-16 2023-05-12 Oppo广东移动通信有限公司 真实环境画面中虚拟道具的显示方法、系统及存储介质
US11475642B2 (en) * 2020-12-18 2022-10-18 Huawei Technologies Co., Ltd. Methods and systems for selection of objects
CN113282166A (zh) * 2021-05-08 2021-08-20 青岛小鸟看看科技有限公司 头戴式显示设备的交互方法、装置及头戴式显示设备
CN114115544B (zh) * 2021-11-30 2024-01-05 杭州海康威视数字技术股份有限公司 人机交互方法、三维显示设备及存储介质
CN114167997B (zh) * 2022-02-15 2022-05-17 北京所思信息科技有限责任公司 一种模型显示方法、装置、设备和存储介质
CN114564106B (zh) * 2022-02-25 2023-11-28 北京字跳网络技术有限公司 交互指示线的确定方法、装置、电子设备及存储介质
CN114706489B (zh) * 2022-02-28 2023-04-25 北京所思信息科技有限责任公司 一种输入设备的虚拟方法、装置、设备和存储介质
WO2023227072A1 (zh) * 2022-05-25 2023-11-30 北京字跳网络技术有限公司 在虚拟现实场景中确定虚拟光标方法、装置、设备和介质
CN115826765B (zh) * 2023-01-31 2023-05-05 北京虹宇科技有限公司 一种3d空间中的目标选择方法、装置及设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2506118A1 (en) * 2011-03-29 2012-10-03 Sony Ericsson Mobile Communications AB Virtual pointer
CN102822784A (zh) * 2010-03-31 2012-12-12 诺基亚公司 用于虚拟触笔的装置、方法和计算机程序
CN102945078A (zh) * 2012-11-13 2013-02-27 深圳先进技术研究院 人机交互设备及人机交互方法
CN102981616A (zh) * 2012-11-06 2013-03-20 中兴通讯股份有限公司 增强现实中对象的识别方法及系统和计算机
CN103064514A (zh) * 2012-12-13 2013-04-24 航天科工仿真技术有限责任公司 沉浸式虚拟现实系统中的空间菜单的实现方法
CN103197757A (zh) * 2012-01-09 2013-07-10 癸水动力(北京)网络科技有限公司 一种沉浸式虚拟现实系统及其实现方法
CN104995583A (zh) * 2012-12-13 2015-10-21 微软技术许可有限责任公司 用于混合现实环境的直接交互系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102822784A (zh) * 2010-03-31 2012-12-12 诺基亚公司 用于虚拟触笔的装置、方法和计算机程序
EP2506118A1 (en) * 2011-03-29 2012-10-03 Sony Ericsson Mobile Communications AB Virtual pointer
CN103197757A (zh) * 2012-01-09 2013-07-10 癸水动力(北京)网络科技有限公司 一种沉浸式虚拟现实系统及其实现方法
CN102981616A (zh) * 2012-11-06 2013-03-20 中兴通讯股份有限公司 增强现实中对象的识别方法及系统和计算机
CN102945078A (zh) * 2012-11-13 2013-02-27 深圳先进技术研究院 人机交互设备及人机交互方法
CN103064514A (zh) * 2012-12-13 2013-04-24 航天科工仿真技术有限责任公司 沉浸式虚拟现实系统中的空间菜单的实现方法
CN104995583A (zh) * 2012-12-13 2015-10-21 微软技术许可有限责任公司 用于混合现实环境的直接交互系统

Also Published As

Publication number Publication date
CN105912110A (zh) 2016-08-31

Similar Documents

Publication Publication Date Title
CN105912110B (zh) 一种在虚拟现实空间中进行目标选择的方法、装置及系统
CN110794958B (zh) 在增强/虚拟现实环境中使用的输入设备
Polvi et al. SlidAR: A 3D positioning method for SLAM-based handheld augmented reality
US9864495B2 (en) Indirect 3D scene positioning control
Buchmann et al. FingARtips: gesture based direct manipulation in Augmented Reality
KR101546654B1 (ko) 웨어러블 증강현실 환경에서 증강현실 서비스 제공 방법 및 장치
EP1292877B1 (en) Apparatus and method for indicating a target by image processing without three-dimensional modeling
Henrysson et al. Virtual object manipulation using a mobile phone
Leibe et al. The perceptive workbench: Toward spontaneous and natural interaction in semi-immersive virtual environments
US20190050132A1 (en) Visual cue system
Piekarski et al. Augmented reality working planes: A foundation for action and construction at a distance
CN108388347B (zh) 虚拟现实中的交互控制方法和装置及存储介质、终端
Chakraborty et al. Captive: a cube with augmented physical tools
JP2004265222A (ja) インタフェース方法、装置、およびプログラム
JP2022516029A (ja) アニメーションシーケンスを生成する方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体
CN106681506B (zh) 一种终端设备中非vr应用的交互方法及终端设备
Babic et al. Simo: Interactions with distant displays by smartphones with simultaneous face and world tracking
Lee et al. Tunnelslice: Freehand subspace acquisition using an egocentric tunnel for wearable augmented reality
Messaci et al. 3d interaction techniques using gestures recognition in virtual environment
JP2007506164A (ja) 双方向技術を使用するヴァーチャルリアリティグラフィックシステムを制御するための方法及び装置
CN109102571B (zh) 一种虚拟影像的控制方法、装置、设备及其存储介质
US10250813B2 (en) Methods and systems for sharing views
Goh et al. An inertial device-based user interaction with occlusion-free object handling in a handheld augmented reality
Halim et al. Designing ray-pointing using real hand and touch-based in handheld augmented reality for object selection
GB2539182A (en) Dynamic augmented reality system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PP01 Preservation of patent right

Effective date of registration: 20191128

Granted publication date: 20190906

PP01 Preservation of patent right
PP01 Preservation of patent right

Effective date of registration: 20200924

Granted publication date: 20190906

PP01 Preservation of patent right
PD01 Discharge of preservation of patent

Date of cancellation: 20230924

Granted publication date: 20190906

PD01 Discharge of preservation of patent