CN113934290A - 虚拟内容显示方法、装置及设备 - Google Patents

虚拟内容显示方法、装置及设备 Download PDF

Info

Publication number
CN113934290A
CN113934290A CN202010669929.9A CN202010669929A CN113934290A CN 113934290 A CN113934290 A CN 113934290A CN 202010669929 A CN202010669929 A CN 202010669929A CN 113934290 A CN113934290 A CN 113934290A
Authority
CN
China
Prior art keywords
virtual
controller
physical position
target interface
handheld controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010669929.9A
Other languages
English (en)
Inventor
张旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN202010669929.9A priority Critical patent/CN113934290A/zh
Publication of CN113934290A publication Critical patent/CN113934290A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供一种虚拟内容显示方法、装置及设备,该方法包括:利用虚拟数据显示虚拟画面,虚拟画面包括目标界面和虚拟控制器,虚拟控制器的虚拟位置由手持控制器的物理位置控制;在手持控制器的物理位置移动到与目标界面匹配的初始物理位置时,将虚拟控制器的虚拟位置移动到目标界面内;若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则将虚拟控制器的虚拟位置移动到目标界面外;在手持控制器的物理位置从初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到目标界面内。通过本申请的技术方案,提高使用者的使用体验。

Description

虚拟内容显示方法、装置及设备
技术领域
本申请涉及人工智能领域,尤其是一种虚拟内容显示方法、装置及设备。
背景技术
虚拟现实(Virtual Reality,VR)是一种高新技术,也可以称为虚拟技术,虚拟环境,灵境技术或者人工环境等,通过模拟产生一个三维空间的虚拟空间,提供给使用者关于视觉、听觉、触觉等感官的模拟,让使用者如同身临其境一般,可以即时、没有限制地观察虚拟空间内的事物。在使用者进行位置移动时,可以立即进行复杂运算,将精确的虚拟空间的影像传回产生临场感。
手持控制器是虚拟现实技术的重要组件,使用者通过手持控制器对虚拟空间中的目标界面进行操作。比如说,虚拟空间中存在与手持控制器对应的虚拟控制器,当使用者在真实空间中移动手持控制器时,虚拟空间中的虚拟控制器也随之移动。当需要对虚拟空间中的目标界面进行操作时,通过移动手持控制器的位置,将虚拟控制器的位置移动到目标界面,从而对目标界面进行操作。
但是,若将虚拟控制器的位置移动到目标界面时,手持控制器的位置不好,如手持控制器的位置在头部以上,则需要使用者抬起手持控制器,而使用者长时间抬起手持控制器时,会造成使用者体验的快速下滑,影响使用体验。
发明内容
本申请提供一种虚拟内容显示方法,所述方法包括:
利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
本申请提供一种虚拟内容显示方法,应用于虚拟处理设备,所述虚拟处理设备包括显示器件和手持控制器,所述方法包括:
利用虚拟数据生成虚拟画面,并通过所述显示器件显示所述虚拟画面;其中,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由所述手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
本申请提供一种虚拟内容显示装置,所述装置包括:显示模块,用于利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
第一处理模块,用于在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
第二处理模块,用于若基于手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,将所述虚拟控制器的虚拟位置移动到所述目标界面外;
第三处理模块,用于在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到所述目标界面内。
本申请提供一种虚拟处理设备,包括:
处理器和机器可读存储介质,所述机器可读存储介质上存储有若干计算机指令,所述处理器执行所述计算机指令时进行如下处理:
利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
基于上述技术方案,本申请实施例中,在虚拟现实或增强现实场景中,在手持控制器的物理位置是初始物理位置(即非舒适位置,如头部以上等)时,通过将虚拟控制器的虚拟位置移动到目标界面外,促使使用者将手持控制器的物理位置从初始物理位置移动到目标物理位置(即舒适位置,如腰部位置等),使得使用者可以在舒适位置进行目标界面的操作,能够最小限度的影响使用者体验,也就是说,能够避免使用者体验的快速下滑,提高使用者的使用体验。
附图说明
为了更加清楚地说明本申请实施例或者现有技术中的技术方案,下面将对本申请实施例或者现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据本申请实施例的这些附图获得其它的附图。
图1A-图1C是本申请一种实施方式中的位置关系的示意图;
图2是本申请一种实施方式中的虚拟内容显示方法的流程示意图;
图3是本申请另一种实施方式中的虚拟内容显示方法的流程示意图;
图4是本申请另一种实施方式中的虚拟内容显示方法的流程示意图;
图5是本申请一种实施方式中的虚拟内容显示装置的结构示意图;
图6是本申请一种实施方式中的虚拟处理设备的结构示意图。
具体实施方式
在本申请实施例使用的术语仅仅是出于描述特定实施例的目的,而非限制本申请。本申请和权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其它含义。还应当理解,本文中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,此外,所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在阐述本申请的技术方案之前,先介绍与本申请实施例有关的概念。
虚拟现实(Virtual Reality,VR):虚拟现实也可以称为虚拟技术,虚拟环境,灵境技术或者人工环境等,通过模拟产生一个三维空间的虚拟空间,提供给使用者关于视觉、听觉、触觉等感官的模拟,让使用者可以如同身临其境一般,可以即时、没有限制地观察虚拟空间内的事物。在使用者进行位置移动时,可以立即进行复杂运算,将精确的虚拟空间的影像传回产生临场感。
增强现实(Augmented Reality,AR):一种将虚拟信息与真实世界巧妙融合的技术,广泛运用多媒体、三维建模、实时跟踪及注册、智能交互、传感等技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,实现对真实世界的“增强”。
虚拟数据:虚拟数据包括用于实现虚拟现实或者增强现实的所有数据,且不同场景对应不同的虚拟数据。比如说,与场景A有关的虚拟数据a,与场景B有关的虚拟数据b,与场景C有关的虚拟数据c等。
通过使用虚拟数据a,可以构建关于场景A的虚拟现实世界,即,显示关于场景A的虚拟画面。通过使用虚拟数据b,可以构建关于场景B的虚拟现实世界,即,显示关于场景B的虚拟画面。通过使用虚拟数据c,可以构建关于场景C的增强现实世界,即,显示关于场景B的虚拟画面,以此类推。
虚拟画面:虚拟画面就是使用者在虚拟现实世界或者增强现实世界中能够看到的所有画面,可以想象成使用者在一个真实环境中能够看到的所有画面。
虚拟处理设备:虚拟处理设备可以包括处理器件,显示器件和手持控制器,处理器件是虚拟处理设备中用于实现处理功能的组件,可以由个人计算机、笔记本电脑、移动终端等终端设备实现,也可以由处理芯片实现。
当由终端设备实现时,处理器件可以与显示器件建立连接,如有线连接或者无线连接等,基于该连接实现通信功能。处理器件还可以与手持控制器建立连接,如有线连接或者无线连接等,基于该连接实现通信功能。或者,当由处理芯片实现时,处理器件可以内置在显示器件内,且处理器件可以与手持控制器建立连接,如有线连接或者无线连接等,基于该连接实现通信功能。
显示器件是虚拟处理设备中用于实现显示功能的组件,可以由虚拟现实眼镜、增加现实眼镜、全息眼镜、虚拟现实头盔、增加现实头盔、头戴显示器等实现,以头戴显示器为例进行说明,头戴显示器(HMD)是一个护目镜或者头盔式的设备,使用者通过内置的显示器来从视觉上实现虚拟现实或者增加现实的效果,头戴显示器也可以包括带有追踪头部的传感器。
手持控制器是虚拟处理设备中用于实现控制功能的组件,虚拟画面中存在与手持控制器对应的虚拟控制器,为了区分方便,将虚拟控制器在虚拟画面中的位置称为虚拟位置,将手持控制器在真实世界中的位置称为物理位置,虚拟控制器的虚拟位置由手持控制器的物理位置控制,即,使用者通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置。
比如说,在初始状态下,手持控制器的物理位置为物理位置P1,虚拟控制器的虚拟位置为虚拟位置p1,在物理位置P1的基础上,将手持控制器向右移动距离S1,手持控制器的物理位置为物理位置P2。虚拟控制器向右移动距离s1,虚拟控制器的虚拟位置为虚拟位置p2,S1与s1之间的比例关系根据实际需要设定,如S1与s1之间的比例关系为1,0.5,0.8等,对此不做限制。
在物理位置P2的基础上,将手持控制器向上移动距离S1,手持控制器的物理位置为物理位置P3。虚拟控制器向上移动距离s1,虚拟控制器的虚拟位置为虚拟位置p3。以此类推,手持控制器的物理位置向某个方向移动时,虚拟控制器的虚拟位置也向该方向移动,手持控制器的物理位置的移动距离与虚拟控制器的虚拟位置的移动距离成比例关系,如上述S1与s1之间的比例关系。
当然,上述方式只是一个示例,对此不做限制,比如说,手持控制器的物理位置向上移动时,虚拟控制器的虚拟位置可以向下移动,手持控制器的物理位置向左移动时,虚拟控制器的虚拟位置可以向右移动,以此类推。
六自由度(6DoF,six degree of freedom):六自由度是指刚体在三维空间中运动的自由度,刚体可以在前后、上下、左右三个互相垂直的坐标轴上平移,也可以在三个垂直轴上旋转其方向,三种旋转方向称为俯仰(pitch)、偏摆(yaw)及翻滚(roll)。示例性的,虚拟画面可以为六自由度的虚拟画面。
三自由度(3DoF,three degree of freedom):三自由度是指刚体在三维空间中运动的自由度,与六自由度不同,刚体不能在前后、上下、左右三个互相垂直的坐标轴上平移,但可以在三个垂直轴上旋转其方向,三种旋转方向称为俯仰、偏摆及翻滚。示例性的,虚拟画面可以为三自由度的虚拟画面。
视野(Field of View):在虚拟画面中眼睛可以看到影像的角度。
目标界面:虚拟画面内包括多个界面,将当前待操作的界面称为目标界面。例如,虚拟画面内包括多个商品,每个商品对应一个界面,当需要对某商品的界面进行操作时,将该商品的界面作为目标界面。又例如,虚拟画面内包括多个区域,每个区域对应一个界面,当需要对某区域的界面进行操作时,将该区域的界面作为目标界面,以此类推,对此目标界面不做限制。
在相关技术中,使用者可以通过手持控制器对虚拟画面中的目标界面进行操作。比如说,当需要对虚拟画面中的目标界面进行操作时,使用者移动手持控制器的物理位置,虚拟控制器的虚拟位置也随之移动,一直到虚拟控制器的虚拟位置移动到目标界面内,则使用者停止移动手持控制器的物理位置,在此基础上,使用者可以对虚拟画面中的目标界面进行操作。
在一种可能的实施方式中,目标界面在虚拟画面中最佳视野(FOV)的范围内,如以使用者视点为中心水平和垂直方向的100度左右,在这种情况下,手持控制器的物理位置通常在舒适位置,如腰部位置等。但是,在实际的虚拟画面中,目标界面可能会超出最佳视野的范围,导致手持控制器的物理位置在非舒适位置,如头部以上位置或者脚部位置等。参见图1A所示,为手持控制器的物理位置在非舒适位置的示意图,以位于头部以上位置为例。
显然,参见图1A所示,若手持控制器的物理位置在头部以上位置,则需要使用者抬起手持控制器,造成使用者体验的快速下滑,影响使用体验。
本申请实施例中,当手持控制器的物理位置是非舒适位置时,可以引导使用者将手持控制器的物理位置移动到舒适位置(如腰部位置等),参见图1B所示,为手持控制器的物理位置在舒适位置的示意图,以腰部位置为例。
在手持控制器的物理位置移动到舒适位置时,虚拟控制器的虚拟位置移动到目标界面内,使用者停止移动手持控制器的物理位置,使用者可以对虚拟画面中的目标界面进行操作,参见图1C所示,为手持控制器的物理位置在舒适位置,且虚拟控制器的虚拟位置移动到目标界面内的示意图。示例性的,在图1A-图1C中,三角区域为目标界面,梯形区域和手柄区域为虚拟控制器。
综上所述,使用者可以在舒适位置进行目标界面的操作,能够最小限度的影响使用者体验,能够避免使用者体验的快速下滑,提高使用者的使用体验。
以下结合具体实施例,对本申请实施例的技术方案进行说明。
本申请实施例提出一种虚拟内容显示方法,该方法可以应用于虚拟现实的应用场景中,也可以应用于增强现实的应用场景中,参见图2所示,为虚拟内容显示方法的流程示意图,该方法应用于虚拟处理设备,该方法可以包括:
步骤201,利用虚拟数据显示虚拟画面,该虚拟画面包括目标界面和虚拟控制器,虚拟控制器的虚拟位置由手持控制器的物理位置控制。
示例性的,虚拟处理设备可以获取虚拟数据,该虚拟数据包括用于实现虚拟现实或者增强现实的所有数据,基于此,虚拟处理设备可以利用该虚拟数据显示虚拟画面,该虚拟画面是使用者在虚拟现实世界或增强现实世界中能够看到的所有画面,本文以虚拟画面包括目标界面和虚拟控制器为例进行说明,对于其它元素不再赘述。参见图1A和图1C所示,示出了目标界面和虚拟控制器。
示例性的,虚拟画面可以为六自由度的虚拟画面;或者,虚拟画面可以为三自由度的虚拟画面,对此虚拟画面的类型不做限制。
示例性的,使用者通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置,即虚拟控制器的虚拟位置由手持控制器的物理位置控制。比如说,手持控制器的物理位置为物理位置P1,虚拟控制器的虚拟位置为虚拟位置p1,基于此,将手持控制器向右移动距离S1,手持控制器的物理位置为物理位置P2,虚拟控制器向右移动距离s1,虚拟控制器的虚拟位置为虚拟位置p2。然后,将手持控制器向上移动距离S1,手持控制器的物理位置为物理位置P3,虚拟控制器向上移动距离s1,虚拟控制器的虚拟位置为虚拟位置p3,以此类推,显然,虚拟控制器的虚拟位置由手持控制器的物理位置控制。
步骤202,在手持控制器的物理位置移动到与目标界面匹配的初始物理位置时,将虚拟控制器的虚拟位置移动到目标界面内。
示例性的,由于虚拟控制器的虚拟位置由手持控制器的物理位置控制,因此,使用者通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置。通过不断调整手持控制器的物理位置,使得虚拟控制器的虚拟位置不断靠近虚拟画面中的目标界面。最终,在手持控制器的物理位置移动到初始物理位置时,将虚拟控制器的虚拟位置移动到目标界面内。
比如说,在初始状态下,虚拟控制器的虚拟位置位于目标界面下侧,则将手持控制器的物理位置向上移动,虚拟控制器的虚拟位置也随之向上移动,若虚拟控制器的虚拟位置还未到达目标界面,则继续将手持控制器的物理位置向上移动,虚拟控制器的虚拟位置也随之向上移动,以此类推,一直到虚拟控制器的虚拟位置到达目标界面,将手持控制器此时的物理位置称为初始物理位置,也就是说,在手持控制器的物理位置移动到初始物理位置时,将虚拟控制器的虚拟位置移动到目标界面内,至此,完成手持控制器的物理位置的移动操作。
又例如,在初始状态下,虚拟控制器的虚拟位置位于目标界面左下侧,则将手持控制器的物理位置向上移动,并将手持控制器的物理位置向右移动,虚拟控制器的虚拟位置也随之向上移动且向右移动,以此类推,一直到虚拟控制器的虚拟位置到达目标界面,将手持控制器此时的物理位置称为初始物理位置。
步骤203,若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则将虚拟控制器的虚拟位置移动到目标界面外。
示例性的,在手持控制器的物理位置为初始物理位置时,虚拟控制器的虚拟位置已经位于目标界面内。在此基础上,若基于手持控制器的初始物理位置确定不需要调整手持控制器的物理位置,则保持手持控制器的初始物理位置不变,并对目标界面进行操作。若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则将虚拟控制器的虚拟位置移动到目标界面外。
在一种可能的实施方式中,可以预先配置第一位置集合,该第一位置集合包括需要调整的物理位置,如非舒适位置,如头部以上位置或者脚部位置等,对此第一位置集合中的物理位置不做限制,只要是需要调整的物理位置即可。在此基础上,判断手持控制器的初始物理位置是否属于第一位置集合,若手持控制器的初始物理位置属于第一位置集合,则确定需要调整手持控制器的物理位置,并将虚拟控制器的虚拟位置移动到目标界面外。若手持控制器的初始物理位置不属于第一位置集合,则确定不需要调整手持控制器的物理位置。
在另一种可能的实施方式中,可以预先配置第二位置集合,该第二位置集合包括不需要调整的物理位置,如舒适位置,如腰部位置,胸部位置,腿部位置等,对此第二位置集合中的物理位置不做限制,只要是不需要调整的物理位置即可。在此基础上,判断手持控制器的初始物理位置是否属于第二位置集合,若手持控制器的初始物理位置不属于第二位置集合,则确定需要调整手持控制器的物理位置,并将虚拟控制器的虚拟位置移动到目标界面外。若手持控制器的初始物理位置属于第二位置集合,则确定不需要调整手持控制器的物理位置。
在另一种可能的实施方式中,可以预先配置第一位置集合和第二位置集合,该第一位置集合可以包括需要调整的物理位置,该第二位置集合可以包括不需要调整的物理位置。在此基础上,若手持控制器的初始物理位置属于第一位置集合,则可以确定需要调整手持控制器的物理位置。若手持控制器的初始物理位置属于第二位置集合,则可以确定不需要调整手持控制器的物理位置。
综上所述,可以基于手持控制器的初始物理位置确定是否需要调整手持控制器的物理位置,当然,上述方式只是几个示例,对此不做限制。
示例性的,在需要调整手持控制器的物理位置时,可以将虚拟控制器的虚拟位置移动到目标界面外。或者,可以发送用于表示需要调整手持控制器的物理位置的提示消息。若接收到针对该提示消息的响应消息,且响应消息表示同意调整手持控制器的物理位置,则将虚拟控制器的虚拟位置移动到目标界面外。
比如说,在需要调整手持控制器的物理位置时,可以向使用者发送提示消息,该提示消息用于表示需要调整手持控制器的物理位置。使用者得到提示消息后,若使用者同意调整手持控制器的物理位置,则返回针对该提示消息的响应消息,在此基础上,才将虚拟控制器的虚拟位置移动到目标界面外。
若使用者不同意调整手持控制器的物理位置,则不返回响应消息,或者,返回拒绝消息,该拒绝消息用于表示不同意调整手持控制器的物理位置,在此基础上,不会将虚拟控制器的虚拟位置移动到目标界面外。
示例性的,提示消息可以为用户界面提示消息,且响应消息可以为用户界面响应消息。比如说,在虚拟画面中显示一个用户界面,通过该用户界面显示该提示消息,询问使用者是否同意调整手持控制器的物理位置。使用者通过该用户界面回复响应消息或者拒绝消息,响应消息表示使用者同意调整手持控制器的物理位置,拒绝消息表示使用者不同意调整手持控制器的物理位置。
示例性的,提示消息可以为语音提示消息,且响应消息可以为语音响应消息。比如说,向使用者发送一个语音提示消息,询问使用者是否同意调整手持控制器的物理位置。使用者回复一个语音响应消息或者语音拒绝消息。
示例性的,提示消息可以为动画提示消息,且响应消息可以为动画响应消息。比如说,向使用者发送一个动画提示消息,询问使用者是否同意调整手持控制器的物理位置。使用者回复一个动画响应消息或者动画拒绝消息。
步骤204,在手持控制器的物理位置从初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到目标界面内。
示例性的,可以预先配置目标物理位置,其作用在于,当基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置时,是将手持控制器的物理位置从初始物理位置移动到目标物理位置,该目标物理位置是预先配置的物理位置,如目标物理位置是舒适位置,如腰部位置,胸部位置,腿部位置等,对此不做限制,在此基础上,可以采用如下方式实现步骤203和步骤204:
方式1:若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则可以基于手持控制器的初始物理位置与手持控制器的目标物理位置之间的距离,确定虚拟控制器的虚拟位置的移动距离,并基于手持控制器的初始物理位置与手持控制器的目标物理位置之间的方位关系,确定虚拟控制器的虚拟位置的移动方向。基于该移动距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外。进一步的,在将虚拟控制器的虚拟位置移动到目标界面外之后,可以通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置。最终,在手持控制器的物理位置从初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到目标界面内。
示例性的,手持控制器的物理位置的移动距离与虚拟控制器的虚拟位置的移动距离的关系为已知,如上述示例中的S1与s1之间的比例关系,该比例关系表示手持控制器的物理位置的移动距离为S1时,虚拟控制器的虚拟位置的移动距离为s1。基于此,可以基于手持控制器的初始物理位置与手持控制器的目标物理位置之间的距离,以及该比例关系,确定虚拟控制器的虚拟位置的移动距离。比如说,若该比例关系为1,则虚拟控制器的虚拟位置的移动距离可以为:初始物理位置与目标物理位置之间的距离,即二者的移动距离相同。当然,比例关系为1只是示例,其它比例关系的实现方式类似,在此不再赘述。
示例性的,初始物理位置与目标物理位置之间的方位关系,与虚拟控制器的虚拟位置的移动方向为反向关系,基于所述反向关系以及初始物理位置与目标物理位置之间的方位关系,可以确定虚拟控制器的虚拟位置的移动方向。比如说,目标物理位置在初始物理位置的下方,则初始物理位置与目标物理位置之间的方位关系是向下,因此,确定虚拟控制器的虚拟位置的移动方向为向上。又例如,目标物理位置在初始物理位置的上方,则初始物理位置与目标物理位置之间的方位关系是向上,因此,确定虚拟控制器的虚拟位置的移动方向为向下。当然,上述只是确定移动方向的示例,对此确定方式不做限制。
示例性的,在得到移动距离和移动方向后,基于该移动距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外。例如,若移动距离为s1,移动方向为向上,则将虚拟控制器的虚拟位置向上移动s1,以将虚拟控制器的虚拟位置移动到目标界面外。又例如,若移动距离为s2,移动方向为向下,则将虚拟控制器的虚拟位置向下移动s2,以将虚拟控制器的虚拟位置移动到目标界面外。
示例性的,在将虚拟控制器的虚拟位置移动到目标界面外之后,使用者通过调整手持控制器的物理位置,使得虚拟控制器的虚拟位置不断靠近虚拟画面中的目标界面。最终,在手持控制器的物理位置从初始物理位置移动到目标物理位置时,能够将虚拟控制器的虚拟位置移动到目标界面内。
显然,由于虚拟控制器的虚拟位置的移动距离是基于初始物理位置与目标物理位置之间的距离确定,虚拟控制器的虚拟位置的移动方向是基于初始物理位置与目标物理位置之间的方位关系确定,且基于该移动距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外,因此,手持控制器从初始物理位置移动到目标物理位置时,能够将虚拟控制器的虚拟位置移动到目标界面内。
方式2:若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则基于手持控制器的初始物理位置与手持控制器的目标物理位置之间的方位关系,确定虚拟控制器的虚拟位置的移动方向。基于预设距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外,该预设距离表示预先配置的需要移动的距离。进一步的,在将虚拟控制器的虚拟位置移动到目标界面外之后,可以通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置。比如说,在手持控制器的物理位置从初始物理位置移动与预设距离匹配的物理距离后,将虚拟控制器的虚拟位置重新移动到目标界面内。
然后,判断手持控制器的移动后的物理位置是否为目标物理位置。
若否,则将移动后的物理位置作为初始物理位置,返回执行基于预设距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外的操作。
若是,则停止将虚拟控制器的虚拟位置移动到目标界面外的操作,且停止手持控制器的物理位置的移动操作,至此,手持控制器的物理位置从初始物理位置移动到目标物理位置,且虚拟控制器的虚拟位置为目标界面内。
以下结合具体应用场景,对上述方式2的实现方式进行说明。
步骤a1、基于手持控制器的初始物理位置与手持控制器的目标物理位置之间的方位关系,确定虚拟控制器的虚拟位置的移动方向,确定方式参见方式1,在此不再赘述,以虚拟控制器的虚拟位置的移动方向为向上为例。
步骤a2、基于预设距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外,比如说,该预设距离表示虚拟控制器的虚拟位置需要移动的距离,假设预设距离为s1,则将虚拟控制器的虚拟位置向上移动s1。
步骤a3、在手持控制器的物理位置从初始物理位置移动到物理距离P1后,将虚拟控制器的虚拟位置重新移动到目标界面内。
示例性的,在将虚拟控制器的虚拟位置移动到目标界面外之后,使用者通过调整手持控制器的物理位置,使得虚拟控制器的虚拟位置不断靠近虚拟画面中的目标界面。最终,在手持控制器的物理位置从初始物理位置移动到物理距离P1时,能够将虚拟控制器的虚拟位置移动到目标界面内。
示例性的,手持控制器的物理位置的移动距离与虚拟控制器的虚拟位置的移动距离的关系为已知,如上述示例中的S1与s1之间的比例关系,因此,物理距离P1与初始物理位置之间的距离,以及,虚拟控制器的虚拟位置的移动距离(即预设距离)之间满足该比例关系,对此不做限制。
步骤a4、判断手持控制器的移动后的物理位置P1是否为目标物理位置。
示例性的,目标物理位置是预先配置的物理位置,即目标物理位置为已知,因此,在手持控制器的物理位置移动到物理距离P1后,判断物理位置P1是否为目标物理位置。如果是,则执行步骤a5,如果否,则执行步骤a6。
步骤a5、结束虚拟控制器的虚拟位置的移动操作,至此,手持控制器的移动后的物理位置是目标物理位置,且虚拟控制器的虚拟位置移动到目标界面内。
步骤a6、基于预设距离和移动方向(步骤a1中确定)将虚拟控制器的虚拟位置移动到目标界面外,在手持控制器的物理位置从物理距离P1移动到物理距离P2后,将虚拟控制器的虚拟位置重新移动到目标界面内。
步骤a7、判断手持控制器的移动后的物理位置P2是否为目标物理位置。
如果是,则执行步骤a5,如果否,则执行步骤a8。
步骤a8、基于预设距离和移动方向将虚拟控制器的虚拟位置移动到目标界面外,在手持控制器的物理位置从物理距离P2移动到物理距离P3后,将虚拟控制器的虚拟位置重新移动到目标界面内,以此类推,一直到手持控制器的移动后的物理位置为目标物理位置,结束虚拟控制器的虚拟位置的移动操作。
在一种可能的实施方式中,可以向使用者发送询问消息,该询问消息用于询问采用快速调整策略还是采用缓慢调整策略。若接收到针对该询问消息的响应消息,且该响应消息表示使用者采用快速调整策略,即,采用快速调整策略对手持控制器的物理位置进行移动,则可以采用上述方式1进行处理;若该响应消息表示使用者采用缓慢调整策略,即,采用缓慢调整策略对手持控制器的物理位置进行移动,则可以采用上述方式2进行处理。
该询问消息可以为用户界面提示消息,该响应消息可以为用户界面响应消息。或者,该询问消息可以为语音提示消息,该响应消息可以为语音响应消息。或者,该询问消息可以为动画提示消息,该响应消息可以为动画响应消息。
在一种可能的实施方式中,步骤204之后,可以对目标界面进行操作,在完成针对目标界面的操作之后,可以重新将虚拟控制器的虚拟位置移动到目标界面外。在手持控制器的物理位置重新移动到与该目标界面匹配的初始物理位置时,则将虚拟控制器的虚拟位置重新移动到目标界面内。
示例性的,在完成针对目标界面的操作之后,可以直接将虚拟控制器的虚拟位置移动到目标界面外。或者,可以发送用于对手持控制器的物理位置进行复位的提示消息。若接收到同意对手持控制器的物理位置进行复位的响应消息,则重新将虚拟控制器的虚拟位置移动到目标界面外。
比如说,可以向使用者发送提示消息,使用者得到提示消息后,若使用者同意对手持控制器的物理位置进行复位,则返回针对该提示消息的响应消息。
若使用者不同意对手持控制器的物理位置进行复位,则不返回响应消息,或者,返回拒绝消息,该拒绝消息用于表示不同意对手持控制器的物理位置进行复位,在此基础上,不会将虚拟控制器的虚拟位置移动到目标界面外。
提示消息可以为用户界面提示消息,且响应消息可以为用户界面响应消息。或者,提示消息可以为语音提示消息,且响应消息可以为语音响应消息。或者,提示消息可以为动画提示消息,且响应消息可以为动画响应消息。
示例性的,重新将虚拟控制器的虚拟位置移动到目标界面外,在手持控制器的物理位置重新移动到初始物理位置(从目标物理位置移动到初始物理位置)时,将虚拟控制器的虚拟位置重新移动到目标界面内,可以包括如下方式:
方式一:基于手持控制器的目标物理位置与手持控制器的初始物理位置之间的距离,确定虚拟控制器的虚拟位置的移动距离,并基于手持控制器的目标物理位置与手持控制器的初始物理位置之间的方位关系,确定虚拟控制器的虚拟位置的移动方向。基于该移动距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外。进一步的,在将虚拟控制器的虚拟位置移动到目标界面外之后,可以通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置。最终,在手持控制器的物理位置从目标物理位置移动到初始物理位置时,将虚拟控制器的虚拟位置重新移动到目标界面内。
方式一的实现过程与上述方式1类似,在此不再赘述。不同之处在于,方式1中,从初始物理位置移动到目标物理位置,而方式一中,从目标物理位置移动到初始物理位置,如方式1的移动方向为向上,方式一的移动方向为向下。
方式二:基于手持控制器的目标物理位置与手持控制器的初始物理位置之间的方位关系,确定虚拟控制器的虚拟位置的移动方向。基于预设距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外,该预设距离表示预先配置的需要移动的距离。进一步的,在将虚拟控制器的虚拟位置移动到目标界面外之后,可以通过控制手持控制器的物理位置,来控制虚拟控制器在虚拟画面中的虚拟位置。比如说,在手持控制器的物理位置从目标物理位置移动与预设距离匹配的物理距离后,将虚拟控制器的虚拟位置重新移动到目标界面内。
然后,判断手持控制器的移动后的物理位置是否为初始物理位置。若否,则将移动后的物理位置作为目标物理位置,返回执行基于预设距离和该移动方向将虚拟控制器的虚拟位置移动到目标界面外的操作。若是,则停止将虚拟控制器的虚拟位置移动到目标界面外的操作,且停止手持控制器的物理位置的移动操作,至此,手持控制器的物理位置从目标物理位置移动到初始物理位置。
方式二的实现过程与上述方式2类似,在此不再赘述。不同之处在于,方式2中,从初始物理位置移动到目标物理位置,而方式二中,从目标物理位置移动到初始物理位置,如方式2的移动方向为向上,方式二的移动方向为向下。
在一个例子中,上述执行顺序只是为了方便描述给出的一个示例,在实际应用中,还可以改变步骤之间的执行顺序,对此执行顺序不做限制。而且,在其它实施例中,并不一定按照本说明书示出和描述的顺序来执行相应方法的步骤,其方法所包括的步骤可以比本说明书所描述的更多或更少。此外,本说明书中所描述的单个步骤,在其它实施例中可能被分解为多个步骤进行描述;本说明书中所描述的多个步骤,在其它实施例也可能被合并为单个步骤进行描述。
基于上述技术方案,本申请实施例中,在虚拟现实或增强现实场景中,在手持控制器的物理位置是初始物理位置(即非舒适位置,如头部以上等)时,通过将虚拟控制器的虚拟位置移动到目标界面外,促使使用者将手持控制器的物理位置从初始物理位置移动到目标物理位置(即舒适位置,如腰部位置等),使得使用者可以在舒适位置进行目标界面的操作,能够最小限度的影响使用者体验,也就是说,能够避免使用者体验的快速下滑,提高使用者的使用体验。
基于与上述方法同样的申请构思,本申请实施例提出了另一种虚拟内容显示方法,参见图3所示,为该方法的流程示意图,应用于虚拟处理设备,该虚拟处理设备可以包括处理器件,显示器件和手持控制器,该显示器件可以包括虚拟现实眼镜、增加现实眼镜、全息眼镜、虚拟现实头盔、增加现实头盔、头戴显示器等。该方法可以应用于虚拟处理设备中的处理器件,该方法可以包括:
步骤301,利用虚拟数据生成虚拟画面,并通过虚拟处理设备中的显示器件显示该虚拟画面;其中,该虚拟画面包括目标界面和虚拟控制器,该虚拟控制器的虚拟位置由手持控制器的物理位置控制。
步骤302,在手持控制器的物理位置移动到与目标界面匹配的初始物理位置时,将虚拟控制器的虚拟位置移动到该目标界面内。
步骤303,若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则将虚拟控制器的虚拟位置移动到目标界面外。
步骤304,在手持控制器的物理位置从初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到目标界面内。
示例性的,步骤301-步骤304可以参见步骤201-步骤204,在此不再赘述。
基于与上述方法同样的申请构思,本申请实施例提出另一种虚拟内容显示方法,参见图4所示,为虚拟内容显示方法的流程示意图,该方法应用于虚拟处理设备,如虚拟处理设备中的处理器件,该方法可以包括:
步骤401,判断是否调整手持控制器的物理位置。如果是,则执行步骤402,如果否,则使用初始默认交互形式,对此实现方式本文不做限制。
在手持控制器的物理位置移动到初始物理位置时,将虚拟控制器的虚拟位置移动到目标界面内,在此基础上,若基于手持控制器的初始物理位置确定需要调整手持控制器的物理位置,则直接确定调整手持控制器的物理位置。或者,发送用于表示需要调整手持控制器的物理位置的提示消息,若接收到针对该提示消息的响应消息,且响应消息表示同意调整手持控制器的物理位置,则确定调整手持控制器的物理位置,否则,确定不调整手持控制器的物理位置。
步骤402,判断对手持控制器的物理位置进行移动的调整策略,该调整策略可以为快速调整策略或者缓慢调整策略。若该调整策略为快速调整策略,则执行步骤403,若该调整策略为缓慢调整策略,则执行步骤404。
示例性的,可以向使用者发送询问消息,该询问消息用于询问采用快速调整策略还是采用缓慢调整策略。若接收到针对该询问消息的响应消息,且响应消息表示使用者采用快速调整策略,则确定该调整策略为快速调整策略。若响应消息表示使用者采用缓慢调整策略,则确定该调整策略为缓慢调整策略。
示例性的,快速调整策略,用于表示快速对手持控制器的物理位置进行移动,即快速将手持控制器的物理位置调整至腰部位置附近较为舒适的位置。
缓慢调整策略,用于表示缓慢流畅地对手持控制器的物理位置进行移动,即缓慢流畅地将手持控制器的物理位置调整至腰部位置附近较为舒适的位置。
步骤403,将虚拟控制器的虚拟位置迅速移动到目标界面外,引导使用者立刻调整手持控制器的物理位置,手持控制器的物理位置移动到目标物理位置。
示例性的,步骤403的实现方式可以参见上述方式1,在此不再赘述。
步骤404,将虚拟控制器的虚拟位置缓慢移动到目标界面外,引导使用者缓慢调整手持控制器的物理位置,手持控制器的物理位置移动到目标物理位置。
示例性的,步骤404的实现方式可以参见上述方式2,在此不再赘述。
示例性的,使用者立刻调整手持控制器的物理位置,是指使用者通过一次调整过程,可以将手持控制器的物理位置调整到目标物理位置。
示例性的,使用者缓慢调整手持控制器的物理位置,是指使用者通过多次调整过程,可以将手持控制器的物理位置调整到目标物理位置。
步骤405,在完成针对目标界面的操作之后,判断是否对手持控制器的物理位置进行复位。若是,则将手持控制器的物理位置重新移动到初始物理位置,使用初始默认交互形式。若否,则保持手持控制器的物理位置不变。
在完成针对目标界面的操作后,可以发送用于对手持控制器的物理位置进行复位的提示消息。若接收到同意对手持控制器的物理位置进行复位的响应消息,则表示对手持控制器的物理位置进行复位。若未接收到同意对手持控制器的物理位置进行复位的响应消息,则表示不对手持控制器的物理位置进行复位。
在上述实施例中,虚拟处理设备与使用者之间的交互过程,可以通过UI(用户界面)实现,也可以通过语音实现,或通过小动画实现,对此不做限制。
基于上述技术方案,本申请实施例中,给予使用者充分的自由度选择是否调整手持控制器的物理位置(或称为姿态),对于虚拟现实的内容分发平台而言,可以满足不同的虚拟现实内容的需求,使用者可以根据内容的具体情况选择是否调整手持控制器的物理位置。对于轻量级的虚拟现实的游戏而言,以虚拟现实作画等应用为例,使用者在引导下根据虚拟空间中的位置自动调整现实空间中的手持控制器至舒适的位置,为长时间的沉浸式体验提供更加优化的体验。使用者进入虚拟现实环境中后,在遇到需要较为极端的手持控制器交互姿态时,能够以很大的自由度,根据引导调整手持控制器至较为舒适的腰部等位置,保证使用者在虚拟现实内容或者虚拟现实游戏中都可以有舒适地体验。
基于与上述方法同样的申请构思,本申请实施例还提供一种虚拟内容显示装置,如图5所示,为所述装置的结构图,所述装置包括:显示模块51,用于利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;第一处理模块52,用于在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;第二处理模块53,用于若基于手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,将所述虚拟控制器的虚拟位置移动到所述目标界面外;第三处理模块54,用于在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到所述目标界面内。
在一种可能的实施方式中,所述第二处理模块53基于手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置时具体用于:
若所述手持控制器的初始物理位置属于第一位置集合,则确定需要调整所述手持控制器的物理位置,所述第一位置集合包括需要调整的物理位置;或,
若所述手持控制器的初始物理位置不属于第二位置集合,则确定需要调整所述手持控制器的物理位置,所述第二位置集合包括不需要调整的物理位置。
所述第二处理模块53将所述虚拟控制器的虚拟位置移动到所述目标界面外时具体用于:发送用于表示需要调整所述手持控制器的物理位置的提示消息;
若接收到针对所述提示消息的响应消息,且响应消息表示同意调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外。
所述第二处理模块53将所述虚拟控制器的虚拟位置移动到所述目标界面外时具体用于:基于所述手持控制器的初始物理位置与所述手持控制器的目标物理位置之间的距离,确定所述虚拟控制器的虚拟位置的移动距离;基于所述手持控制器的初始物理位置与所述手持控制器的目标物理位置之间的方位关系,确定所述虚拟控制器的虚拟位置的移动方向;基于所述移动距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外。
所述第二处理模块53将所述虚拟控制器的虚拟位置移动到所述目标界面外时具体用于:基于所述手持控制器的初始物理位置与所述手持控制器的目标物理位置之间的方位关系,确定所述虚拟控制器的虚拟位置的移动方向;
基于预设距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外,所述预设距离表示预先配置的需要移动的距离。
所述第二处理模块53还用于:在基于预设距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外之后,在手持控制器的物理位置从初始物理位置移动与所述预设距离匹配的物理距离后,将虚拟控制器的虚拟位置重新移动到所述目标界面内;判断手持控制器的移动后的物理位置是否为目标物理位置;若否,将移动后的物理位置作为初始物理位置,返回执行基于预设距离和所述移动方向将虚拟控制器的虚拟位置移动到所述目标界面外的操作。
基于与上述方法同样的申请构思,本申请实施例还提供一种虚拟处理设备,包括:处理器和机器可读存储介质,所述机器可读存储介质上存储有若干计算机指令,所述处理器执行所述计算机指令时进行如下处理:
利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
本申请实施例还提供一种机器可读存储介质,所述机器可读存储介质上存储有若干计算机指令;所述计算机指令被执行时进行如下处理:
利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
参见图6所示,为本申请实施例中提出的虚拟处理设备的结构图,所述虚拟处理设备60可以包括:处理器61,网络接口62,总线63,存储器64。存储器64可以是任何电子、磁性、光学或其它物理存储装置,可以包含或存储信息,如可执行指令、数据等等。例如,存储器64可以是:RAM(Radom Access Memory,随机存取存储器)、易失存储器、非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、dvd等)。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可以由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其它可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其它可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
而且,这些计算机程序指令也可以存储在能引导计算机或其它可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或者多个流程和/或方框图一个方框或者多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其它可编程数据处理设备上,使得在计算机或者其它可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其它可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (14)

1.一种虚拟内容显示方法,所述方法包括:
利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
2.根据权利要求1所述的方法,所述基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,包括:
若所述手持控制器的初始物理位置属于第一位置集合,则确定需要调整所述手持控制器的物理位置,所述第一位置集合包括需要调整的物理位置;或,
若所述手持控制器的初始物理位置不属于第二位置集合,则确定需要调整所述手持控制器的物理位置,所述第二位置集合包括不需要调整的物理位置。
3.根据权利要求1所述的方法,
所述将所述虚拟控制器的虚拟位置移动到所述目标界面外,包括:
发送用于表示需要调整所述手持控制器的物理位置的提示消息;
若接收到针对所述提示消息的响应消息,且响应消息表示同意调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外。
4.根据权利要求1或3所述的方法,
所述将所述虚拟控制器的虚拟位置移动到所述目标界面外,包括:
基于所述手持控制器的初始物理位置与所述手持控制器的目标物理位置之间的距离,确定所述虚拟控制器的虚拟位置的移动距离;
基于所述手持控制器的初始物理位置与所述手持控制器的目标物理位置之间的方位关系,确定所述虚拟控制器的虚拟位置的移动方向;
基于所述移动距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外。
5.根据权利要求1或3所述的方法,
所述将所述虚拟控制器的虚拟位置移动到所述目标界面外,包括:
基于所述手持控制器的初始物理位置与所述手持控制器的目标物理位置之间的方位关系,确定所述虚拟控制器的虚拟位置的移动方向;
基于预设距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外,所述预设距离表示预先配置的需要移动的距离。
6.根据权利要求5所述的方法,所述基于预设距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外之后,还包括:
在所述手持控制器的物理位置从初始物理位置移动与所述预设距离匹配的物理距离后,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内;
判断所述手持控制器的移动后的物理位置是否为目标物理位置;
若否,将移动后的物理位置作为初始物理位置,返回执行基于预设距离和所述移动方向将所述虚拟控制器的虚拟位置移动到所述目标界面外的操作。
7.根据权利要求1所述的方法,所述将所述虚拟控制器的虚拟位置重新移动到所述目标界面内之后,所述方法还包括:
对所述目标界面进行操作,并在完成针对所述目标界面的操作之后,重新将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置重新移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
8.根据权利要求7所述的方法,
所述重新将所述虚拟控制器的虚拟位置移动到所述目标界面外,包括:
发送用于对所述手持控制器的物理位置进行复位的提示消息;
若接收到同意对所述手持控制器的物理位置进行复位的响应消息,则重新将所述虚拟控制器的虚拟位置移动到所述目标界面外。
9.根据权利要求3或8所述的方法,
所述提示消息为用户界面提示消息;或者,
所述提示消息为语音提示消息;或者,
所述提示消息为动画提示消息。
10.根据权利要求1所述的方法,
所述虚拟画面为六自由度的虚拟画面;或,
所述虚拟画面为三自由度的虚拟画面。
11.一种虚拟内容显示方法,应用于虚拟处理设备,所述虚拟处理设备包括显示器件和手持控制器,所述方法包括:
利用虚拟数据生成虚拟画面,并通过所述显示器件显示所述虚拟画面;其中,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由所述手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
12.根据权利要求11所述的方法,所述显示器件包括:虚拟现实眼镜、增加现实眼镜、全息眼镜、虚拟现实头盔、增加现实头盔、头戴显示器。
13.一种虚拟内容显示装置,所述装置包括:
显示模块,用于利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
第一处理模块,用于在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
第二处理模块,用于若基于手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,将所述虚拟控制器的虚拟位置移动到所述目标界面外;
第三处理模块,用于在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将虚拟控制器的虚拟位置重新移动到所述目标界面内。
14.一种虚拟处理设备,包括:
处理器和机器可读存储介质,所述机器可读存储介质上存储有若干计算机指令,所述处理器执行所述计算机指令时进行如下处理:
利用虚拟数据显示虚拟画面,所述虚拟画面包括目标界面和虚拟控制器,所述虚拟控制器的虚拟位置由手持控制器的物理位置控制;
在所述手持控制器的物理位置移动到与所述目标界面匹配的初始物理位置时,将所述虚拟控制器的虚拟位置移动到所述目标界面内;
若基于所述手持控制器的初始物理位置确定需要调整所述手持控制器的物理位置,则将所述虚拟控制器的虚拟位置移动到所述目标界面外;
在所述手持控制器的物理位置从所述初始物理位置移动到目标物理位置时,将所述虚拟控制器的虚拟位置重新移动到所述目标界面内。
CN202010669929.9A 2020-07-13 2020-07-13 虚拟内容显示方法、装置及设备 Pending CN113934290A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010669929.9A CN113934290A (zh) 2020-07-13 2020-07-13 虚拟内容显示方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010669929.9A CN113934290A (zh) 2020-07-13 2020-07-13 虚拟内容显示方法、装置及设备

Publications (1)

Publication Number Publication Date
CN113934290A true CN113934290A (zh) 2022-01-14

Family

ID=79273373

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010669929.9A Pending CN113934290A (zh) 2020-07-13 2020-07-13 虚拟内容显示方法、装置及设备

Country Status (1)

Country Link
CN (1) CN113934290A (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004318399A (ja) * 2003-04-15 2004-11-11 Seiko Epson Corp 画像処理装置及び触覚・力覚提示方法
CN102193624A (zh) * 2010-02-09 2011-09-21 微软公司 用于基于姿势的用户界面的物理交互区
KR20120136719A (ko) * 2011-06-09 2012-12-20 안지윤 손과 눈의 3차원 위치정보를 이용한 원거리 스크린 상의 물체지목 및 제어방법
CN104246682A (zh) * 2012-03-26 2014-12-24 苹果公司 增强的虚拟触摸板和触摸屏
US20150100926A1 (en) * 2009-11-19 2015-04-09 Microsoft Corporation Distance scalable no touch computing
CN106527722A (zh) * 2016-11-08 2017-03-22 网易(杭州)网络有限公司 虚拟现实中的交互方法、系统及终端设备
CN108475117A (zh) * 2016-04-13 2018-08-31 谷歌有限责任公司 在虚拟现实环境内导航的方法和装置
CN109478101A (zh) * 2016-07-22 2019-03-15 谷歌有限责任公司 为虚拟现实用户界面检测用户运动范围
US10380850B1 (en) * 2018-02-09 2019-08-13 Adam A. Zuber Virtual cane
CN110366746A (zh) * 2017-02-24 2019-10-22 维拉达公司 基于虚拟现实的影像诊断练习装置和方法
US20190324558A1 (en) * 2018-04-20 2019-10-24 Cadwalk Global Pty Ltd Arrangement for the relocating of virtual object images within a real non-electronic space

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004318399A (ja) * 2003-04-15 2004-11-11 Seiko Epson Corp 画像処理装置及び触覚・力覚提示方法
US20150100926A1 (en) * 2009-11-19 2015-04-09 Microsoft Corporation Distance scalable no touch computing
CN102193624A (zh) * 2010-02-09 2011-09-21 微软公司 用于基于姿势的用户界面的物理交互区
KR20120136719A (ko) * 2011-06-09 2012-12-20 안지윤 손과 눈의 3차원 위치정보를 이용한 원거리 스크린 상의 물체지목 및 제어방법
CN104246682A (zh) * 2012-03-26 2014-12-24 苹果公司 增强的虚拟触摸板和触摸屏
CN108475117A (zh) * 2016-04-13 2018-08-31 谷歌有限责任公司 在虚拟现实环境内导航的方法和装置
CN109478101A (zh) * 2016-07-22 2019-03-15 谷歌有限责任公司 为虚拟现实用户界面检测用户运动范围
CN106527722A (zh) * 2016-11-08 2017-03-22 网易(杭州)网络有限公司 虚拟现实中的交互方法、系统及终端设备
CN110366746A (zh) * 2017-02-24 2019-10-22 维拉达公司 基于虚拟现实的影像诊断练习装置和方法
US10380850B1 (en) * 2018-02-09 2019-08-13 Adam A. Zuber Virtual cane
US20190324558A1 (en) * 2018-04-20 2019-10-24 Cadwalk Global Pty Ltd Arrangement for the relocating of virtual object images within a real non-electronic space

Similar Documents

Publication Publication Date Title
JP5961736B1 (ja) ヘッドマウントディスプレイシステムを制御する方法、および、プログラム
CN114766038A (zh) 共享空间中的个体视图
JP6002286B1 (ja) ヘッドマウントディスプレイ制御方法、および、ヘッドマウントディスプレイ制御プログラム
US10394319B2 (en) Method of displaying an image, and system therefor
US20210303107A1 (en) Devices, methods, and graphical user interfaces for gaze-based navigation
US20180143693A1 (en) Virtual object manipulation
CN110362193A (zh) 用手或眼睛跟踪辅助的目标跟踪方法及系统
CN107209565A (zh) 固定大小的增强现实对象
CN115335894A (zh) 用于虚拟和增强现实的系统和方法
CN116848495A (zh) 用于选择虚拟对象以进行扩展现实交互的设备、方法、系统和介质
JP2017021824A (ja) ヘッドマウントディスプレイ制御方法、および、ヘッドマウントディスプレイ制御プログラム
US20240283669A1 (en) Avatar Spatial Modes
US11430198B1 (en) Method and device for orientation-based view switching
JP2017121082A (ja) プログラム及びコンピュータ
US20240103680A1 (en) Devices, Methods, and Graphical User Interfaces For Interacting with Three-Dimensional Environments
JP6223614B1 (ja) 情報処理方法、情報処理プログラム、情報処理システム及び情報処理装置
US20220405996A1 (en) Program, information processing apparatus, and information processing method
US12079395B2 (en) Scissor hand gesture for a collaborative object
US20240248532A1 (en) Method and device for visualizing multi-modal inputs
CN113934290A (zh) 虚拟内容显示方法、装置及设备
CN118215903A (zh) 用于在虚拟环境中呈现虚拟对象的设备、方法和图形用户界面
JP6598575B2 (ja) ヘッドマウントディスプレイシステムを制御する方法、および、プログラム
KR20230116765A (ko) 다중 카메라 홀 충전을 위한 방법 및 디바이스
JP2018163637A (ja) 情報処理方法、情報処理プログラム、情報処理システム及び情報処理装置
US11776192B2 (en) Method and device for generating a blended animation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40065672

Country of ref document: HK