CN113220118A - 虚拟界面展示方法、头戴式显示设备和计算机可读介质 - Google Patents

Abstract

本公开的实施例公开了虚拟界面展示方法、头戴式显示设备和计算机可读介质。该方法的一具体实施方式包括：响应于检测到头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在头戴式显示设备的显示屏幕中展示虚拟界面，其中，虚拟界面中显示了至少一个窗口；响应于检测到用户对于至少一个窗口中的窗口的选择操作信息记录，以及检测到用户的位姿信息满足预定窗口隐藏条件，以预设动效隐藏至少一个窗口，以及控制目标设备执行将与窗口对应的界面唤起到前台的操作。该实施方式使得用户浏览目标设备中的界面时，无需摘下头戴式显示设备，简化了操作步骤。

Description

虚拟界面展示方法、头戴式显示设备和计算机可读介质

技术领域

本公开的实施例涉及计算机技术领域，具体涉及虚拟界面展示方法、头戴式显示设备和计算机可读介质。

背景技术

头戴式显示设备，例如，AR(Augmented Reality，增强现实技术)眼镜或MR(MixedReality，混合现实技术)，为用户提供了一种在现实场景中观看虚拟景象的途径。同时，头戴式显示设备还可以与计算设备通信连接。目前，在计算设备与头戴式显示设备通信连接时，通常采用的交互方式为：将计算设备作为触控设备，根据用户在计算设备上的触控操作控制头戴式显示设备；或者仅将计算设备作为处理单元和/或供电单元。

然而，当采用上述方式进行交互时，经常会存在如下技术问题：当佩戴头戴式显示设备的用户需要直接观看或操作计算设备中显示的界面时，由于部分光学方案的头戴式显示设备的透光率较低和/或头戴式显示设备中的界面影响用户对计算设备中显示的界面的观感，需摘下头戴式显示设备；而之后需观看头戴式显示设备中的界面时，需重新佩戴头戴式显示设备，导致操作步骤较为繁琐。

发明内容

本公开的内容部分用于以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。

本公开的一些实施例提出了虚拟界面展示方法、头戴式显示设备和计算机可读介质，来解决以上背景技术部分提到的技术问题中的一项或多项。

第一方面，本公开的一些实施例提供了一种虚拟界面展示方法，该方法包括：响应于检测到上述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备的显示屏幕中展示虚拟界面，其中，上述虚拟界面中显示了至少一个窗口，上述至少一个窗口对应在上述目标设备中运行的界面；响应于检测到上述用户对于上述至少一个窗口中的窗口的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口，以及控制上述目标设备执行将与上述窗口对应的界面唤起到前台的操作，使得上述用户可以通过上述头戴式显示设备的显示屏幕在现实场景中浏览上述窗口对应的在上述目标设备中运行的界面。

第二方面，本公开的一些实施例提供了一种头戴式显示设备，包括：一个或多个处理器；存储装置，其上存储有一个或多个程序；显示屏幕，用于显示虚拟界面；当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法。

第三方面，本公开的一些实施例提供了一种计算机可读介质，其上存储有计算机程序，其中，程序被处理器执行时实现上述第一方面任一实现方式所描述的方法。

本公开的上述各个实施例具有如下有益效果：通过本公开的一些实施例的虚拟界面展示方法，简化了操作步骤。具体来说，造成操作步骤较为繁琐的原因在于：当佩戴头戴式显示设备的用户需要直接观看或操作计算设备中显示的界面时，由于部分光学方案的头戴式显示设备的透光率较低和/或头戴式显示设备中的界面影响用户对计算设备中显示的界面的观感，需摘下头戴式显示设备；而之后需观看头戴式显示设备中的界面时，需重新佩戴头戴式显示设备，导致操作步骤较为繁琐。基于此，本公开的一些实施例的虚拟界面展示方法首先，响应于检测到上述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备的显示屏幕中展示虚拟界面。其中，上述虚拟界面中显示了至少一个窗口，上述至少一个窗口对应在上述目标设备中运行的界面。由此，可以在头戴式显示设备与目标设备的连接状态以及用户的位姿信息满足条件时，使得用户通过头戴式显示设备观看虚拟界面。然后，响应于检测到上述用户对于上述至少一个窗口中的窗口的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口，以及控制上述目标设备执行将与上述窗口对应的界面唤起到前台的操作，使得上述用户可以通过上述头戴式显示设备的显示屏幕在现实场景中浏览上述窗口对应的在上述目标设备中运行的界面。由此，通过设定预设窗口隐藏条件，可以检测用户是否具有观看目标设备的需求，用户的位姿信息满足预定窗口隐藏条件时，可以隐藏头戴式显示设备中显示的各个窗口，使得用户可以在有观看目标设备的需求时，直接浏览目标设备的前台运行的界面。也因为用户浏览目标设备中运行的界面时，头戴式显示设备中隐藏了各个窗口，使得用户可以无需摘下头戴式显示设备。从而，简化了操作步骤。

附图说明

结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，元件和元素不一定按照比例绘制。

图1是本公开的一些实施例可以应用于其中的示例性系统的架构图；

图2-3是根据本公开的一些实施例的虚拟界面展示方法的一个应用场景的示意图；

图4是根据本公开的虚拟界面展示方法的一些实施例的流程图；

图5是根据本公开的虚拟界面展示方法的另一些实施例的流程图；

图6是适于用来实现本公开的一些实施例的头戴式显示设备的硬件结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例。相反，提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。

另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。

需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。

需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。

本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。

下面将参考附图并结合实施例来详细说明本公开。

图1示出了可以应用于本公开的应用于头戴式显示设备的虚拟界面展示方法的实施例的示例性系统架构100。

如图1所示，示例性系统架构100可以包括头戴式显示设备11和目标设备12。

头戴式显示设备11可以包括一个或两个显示屏幕111。上述显示屏幕用于显示虚拟界面。此外，头戴式显示设备11还包括镜架112。在一些实施例中，可以将头戴式显示设备11的传感器、处理单元、存储器和电池放到镜架112内部。在一些实施的一些可选的实现方式中，也可以将传感器、处理单元、存储器和电池的一个或多个部件集成在另一个独立的配件(未示出)，通过数据线和镜架112进行连接。在一些实施的一些可选的实现方式中，头戴式显示设备11可以仅具有显示功能和部分传感器，而通过目标设备12提供数据处理、数据存储、供电能力等能力。

目标设备12可以包括显示屏幕121，在一些实施例中，头戴式显示设备11和目标设备12可以通过无线连接方式进行通信。在一些实施例的一些可选的实现方式中，头戴式显示设备11和目标设备12也可以通过数据线(未示出)进行连接。

应该理解，图1中的头戴式显示设备和目标设备数目仅仅是示意性的。根据实现需要，可以具有任意合适数目的头戴式显示设备和目标设备。

图2-3是根据本公开一些实施例的虚拟界面展示方法的一个应用场景的示意图。

如图2所示，头戴式显示设备201可以响应于检测到上述头戴式显示设备201与目标设备202的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备201的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备201的显示屏幕中展示虚拟界面203。其中，上述虚拟界面203中显示了至少一个窗口204(包括窗口2041、窗口2042和窗口2043)。上述至少一个窗口204对应在上述目标设备202中后台运行的界面(例如，窗口2041对应界面205，窗口2042对应界面206，窗口2043对应界面207)。在一些实施方式中，当头戴式显示设备201与目标设备202连接时，目标设备202中运行的界面，可以在目标设备202中进行显示或不显示；即当用户正常使用头戴式显示设备的时候，这些界面以后台运行的方式进行。在一个或多个实施方式中，界面可以为应用程序(例如拍照、图片浏览、聊天软件等)、桌面(例如安卓操作系统下的Launcher)、消息弹窗、快捷按钮、状态栏等形式。

如图3所示，头戴式显示设备201可以响应于检测到上述用户对于上述至少一个窗口204中的窗口2042的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备201的显示屏幕隐藏上述至少一个窗口204，以及控制上述目标设备202执行将与上述窗口2042对应的界面206唤起到前台的操作，使得上述用户可以通过上述头戴式显示设备的显示屏幕在现实场景中浏览上述窗口2042对应的在上述目标设备202中运行的界面206。在一个或多个实施方式中，由于用户正常使用头戴式显示设备201的时候，界面206可能在后台运行，因此，目标设备202可以响应于检测到上述用户对于上述至少一个窗口204中的窗口2042的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，将界面206在前台显示，使得用户在看到上述目标设备202的同时，上述界面206显示到目标设备202的前台，从而方便用户后续在界面206上的交互操作。

应该理解，图2-3中的头戴式显示设备和目标设备的数目仅仅是示意性的。根据实现需要，可以具有任意数目的头戴式显示设备和目标设备。

继续参考图4，示出了根据本公开的虚拟界面展示方法的一些实施例的流程400。该虚拟界面展示方法，包括以下步骤：

步骤401，响应于检测到头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在头戴式显示设备的显示屏幕中展示虚拟界面。

在一些实施例中，虚拟界面展示方法的执行主体(例如图2所示的头戴式显示设备201)可以响应于检测到上述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备的显示屏幕中展示虚拟界面。其中，上述头戴式显示设备可以为用于辅助用户观看虚拟景象的头戴式设备，可以包括但不限于以下中的一项：头戴式增强显示设备，头戴式混合显示设备。例如，上述头戴式增强显示设备可以为AR眼镜。上述头戴式混合显示设备可以为MR眼镜。上述目标设备可以为具有显示屏幕的计算设备。例如，上述目标设备可以为但不限于以下中的一项：手机，平板电脑。上述头戴式显示设备与上述目标设备的连接方式可以为有线连接方式，还可以为无线连接方式。上述位姿信息可以为用户的动作或身体部位的姿势相关信息。上述位姿信息可以包括但不限于以下至少一项：头部位姿信息，口部位姿信息。上述头部位姿信息可以为用户的头部姿势相关信息。上述头部位姿信息可以包括用户的头部转动方向和头部转动角度。上述头部位姿信息可以由上述执行主体通过有线连接方式或无线连接方式从内置的IMU(Inertial Measurement Unit，惯性测量单元)传感器获取。上述头部转动方向可以为“上”或“下”或“左”或“右”。上述预定虚拟界面展示条件可以为预定的用于判断是否显示虚拟界面的条件。例如，上述预定虚拟界面展示条件可以为“位姿信息包括的头部转动方向为上，以及位姿信息包括的头部转动角度大于等于第一预设角度”。例如，上述第一预设角度可以为45度。这里，对于第一预设角度的具体设定，不作限定。上述虚拟界面可以为用于向用户展示虚拟场景的界面。上述虚拟界面中显示了至少一个窗口。上述至少一个窗口对应在上述目标设备中运行的界面。上述至少一个窗口和上述目标设备中运行的界面间的对应关系可以为至少一个窗口中的每个窗口与上述目标设备中运行的界面中的一个界面完全相同。上述至少一个窗口和上述目标设备中运行的界面间的对应关系还可以为至少一个窗口中的每个窗口是通过对上述目标设备中运行的界面中的一个界面进行界面尺寸变换得到的。可以理解的是，上述用户可以在上述头戴式显示设备中同时观看现实场景和虚拟界面中的虚拟景象。上述至少一个窗口可以包括上述目标设备的桌面界面。由此，可以在头戴式显示设备与目标设备的连接状态以及用户的位姿信息满足条件时，使得用户通过头戴式显示设备观看虚拟界面。

在一些实施例的一些可选的实现方式中，上述执行主体可以控制上述目标设备执行降低屏幕亮度的操作。实践中，上述执行主体可以将第一标识发送至上述目标设备，使得上述目标设备接收到上述第一标识后执行降低屏幕亮度的操作。其中，上述第一标识可以为表征降低目标设备屏幕亮度的标识。由此，可以在用户通过头戴式显示设备观看虚拟界面时，降低目标设备的屏幕的显示亮度，从而可以减少目标设备的电量消耗。

在一些实施例的一些可选的实现方式中，上述执行主体可以控制上述目标设备执行息屏操作。实践中，上述执行主体可以将第二标识发送至上述目标设备，使得上述目标设备接收到上述第二标识后执行息屏的操作。其中，上述第二标识可以为表征使得目标设备息屏的标识。由此，可以在用户通过头戴式显示设备观看虚拟界面时，使得目标设备息屏，从而可以进一步减少目标设备的电量消耗。

步骤402，响应于检测到用户对于至少一个窗口中的窗口的选择操作信息记录，以及检测到用户的位姿信息满足预定窗口隐藏条件，以预设动效在头戴式显示设备的显示屏幕隐藏至少一个窗口，以及控制目标设备执行将与窗口对应的界面唤起到前台的操作。

在一些实施例中，上述执行主体可以响应于检测到上述用户对于上述至少一个窗口中的窗口的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口，以及控制上述目标设备执行将与上述窗口对应的界面唤起到前台的操作，使得上述用户可以通过上述头戴式显示设备的显示屏幕在现实场景中浏览上述窗口对应的在上述目标设备中运行的界面。上述选择操作信息记录可以为上述用户作用于上述窗口的选择操作，由上述执行主体所产生的信息记录，可以表征上述用户选择上述窗口。上述选择操作可以由上述用户通过与上述执行主体通信连接的触控设备进行操作。上述选择操作可以为包括但不限于以下至少一项：拨动，滑动，悬停，点击。上述预定窗口隐藏条件可以为预设的用于判断是否隐藏上述至少一个窗口的条件。例如，上述预定窗口隐藏条件可以为“位姿信息包括的头部转动方向为下，以及位姿信息包括的头部转动角度大于等于第二预设角度”。例如，上述第二预设角度可以为40度。这里，对于第二预设角度的具体设定，不作限定。上述预设动效可以为预设的隐藏上述至少一个窗口时的动画样式。例如，上述预设动效可以为使得上述至少一个窗口呈现向外飞出的动效。上述预设动效还可以为使得用户所选择的窗口逐渐缩小至消失，以及用户未选择的各个窗口向外飞出的动效。上述执行主体可以通过向上述目标设备发送目标标识，以控制上述目标设备执行将与上述窗口对应的界面唤起到前台的操作。其中，上述目标标识可以表征需将与上述窗口对应的界面唤起到前台。由此，通过设定预设窗口隐藏条件，可以检测用户是否具有观看目标设备的需求，用户的位姿信息满足预定窗口隐藏条件时，可以隐藏头戴式显示设备中显示的各个窗口，使得用户可以在有观看目标设备的需求时，直接浏览目标设备的前台运行的界面。

在一些实施例的一些可选的实现方式中，上述执行主体可以控制上述目标设备执行增加屏幕亮度的操作。实践中，上述执行主体可以将第三标识发送至上述目标设备，使得上述目标设备接收到上述第三标识后执行增加屏幕亮度的操作。其中，上述第三标识可以为表征使得目标设备执行增加屏幕亮度的标识。由此，可以在用户佩戴头戴式显示设备观看目标设备中运行的界面时，使得目标设备自动增加屏幕亮度，无需用户进行手动调节，提升了用户体验。

在一些实施例的一些可选的实现方式中，上述执行主体可以降低上述显示屏幕的亮度。实践中，上述执行主体可以将上述显示屏幕的亮度调整至预设亮度指数。其中，上述预设亮度指数可以为预设的用于表征上述显示屏幕亮度的指数。上述预设亮度指数越大，上述显示屏幕越亮。上述预设亮度指数小于上述显示屏幕正常显示时的亮度指数。由此，可以在用户佩戴头戴式显示设备观看目标设备中运行的界面时，降低头戴式显示设备的显示屏幕的亮度，从而可以减少头戴式显示设备的电量消耗。

在一些实施例的一些可选的实现方式中，上述执行主体可以关闭上述显示屏幕。实践中，上述执行主体可以关闭上述显示屏幕，使得上述显示屏幕关闭显示。由此，可以在用户佩戴头戴式显示设备观看目标设备中运行的界面时，使得上述显示屏幕关闭显示，从而可以进一步减少头戴式显示设备的电量消耗。

可选地，上述位姿信息还可以包括面部位姿信息。上述面部位姿信息可以表征上述用户是否看向上述目标设备。上述面部位姿信息可以通过以下步骤生成：获取用户的面部信息；基于所获取的面部信息，生成面部位姿信息，其中，上述面部位姿信息可以表征上述用户是否看向上述目标设备。实践中，上述面部信息可以由上述目标设备通过TOF(Timeof flight，飞行时间法)或多普勒雷达技术获取得到。上述面部位姿信息可以通过人脸识别技术生成得到。上述执行主体可以响应于上述面部位姿信息表征上述用户看向上述目标设备，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口。由此，可以根据用户的面部动作，确定是否隐藏头戴式显示设备中的各个窗口。

可选地，上述执行主体可以响应于上述头戴式显示设备与上述目标设备的连接状态为已连接状态和/或检测到上述用户的佩戴操作信息记录，控制上述目标设备执行触控启动操作。其中，上述佩戴操作信息记录可以为上述用户佩戴上述头戴式显示设备后，所产生的表征上述用户已佩戴上述头戴式显示设备的信息记录。上述佩戴操作信息记录可以由内置在上述头戴式显示设备中的压力传感器产生。上述触控启动操作可以为上述目标设备执行的使得上述目标设备的屏幕执行触控模式的操作。上述目标设备执行触控启动操作后，上述目标设备的屏幕可以作为触控板供用户使用。由此，可以使得上述目标设备的屏幕作为触控板供用户使用，无需再额外配置触控板。

本公开的上述各个实施例具有如下有益效果：通过本公开的一些实施例的虚拟界面展示方法，简化了操作步骤。具体来说，造成操作步骤较为繁琐的原因在于：当佩戴头戴式显示设备的用户需要直接观看或操作计算设备中显示的界面时，由于部分光学方案的头戴式显示设备的透光率较低和/或头戴式显示设备中的界面影响用户对计算设备中显示的界面的观感，需摘下头戴式显示设备；而之后需观看头戴式显示设备中的界面时，需重新佩戴头戴式显示设备，导致操作步骤较为繁琐。基于此，本公开的一些实施例的虚拟界面展示方法首先，响应于检测到上述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备的显示屏幕中展示虚拟界面。其中，上述虚拟界面中显示了至少一个窗口，上述至少一个窗口对应在上述目标设备中运行的界面。由此，可以在头戴式显示设备与目标设备的连接状态以及用户的位姿信息满足条件时，使得用户通过头戴式显示设备观看虚拟界面。然后，响应于检测到上述用户对于上述至少一个窗口中的窗口的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口，以及控制上述目标设备执行将与上述窗口对应的界面唤起到前台的操作，使得上述用户可以通过上述头戴式显示设备的显示屏幕在现实场景中浏览上述窗口对应的在上述目标设备中运行的界面。由此，通过设定预设窗口隐藏条件，可以检测用户是否具有观看目标设备的需求，用户的位姿信息满足预定窗口隐藏条件时，可以隐藏头戴式显示设备中显示的各个窗口，使得用户可以在有观看目标设备的需求时，直接浏览目标设备的前台运行的界面。也因为用户浏览目标设备中运行的界面时，头戴式显示设备中隐藏了各个窗口，使得用户可以无需摘下头戴式显示设备。从而，简化了操作步骤。

进一步参考图5，其示出了虚拟界面展示方法的另一些实施例的流程500。该虚拟界面展示方法的流程500，包括以下步骤：

步骤501，响应于检测到头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在头戴式显示设备的显示屏幕中展示虚拟界面。

在一些实施例中，虚拟界面展示方法的执行主体(例如图2所示的头戴式显示设备201)可以响应于检测到上述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备的显示屏幕中展示虚拟界面。其中，上述虚拟界面中显示了至少一个窗口。上述至少一个窗口对应在上述目标设备中运行的界面。上述位姿信息还可以包括手部位姿信息。上述手部位姿信息可以表征上述用户拿起或放下上述目标设备。上述手部位姿信息可以通过以下步骤生成：获取用户手持上述目标设备的加速度；基于上述加速度，生成手部位姿信息，其中，上述手部位姿信息可以表征上述用户拿起或放下上述目标设备。上述加速度可以通过上述目标设备中内置的重力传感器检测得到。

步骤502，响应于检测到用户对于至少一个窗口中的窗口的选择操作信息记录，以及检测到用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备的显示屏幕隐藏至少一个窗口，以及控制目标设备执行将与窗口对应的界面唤起到前台的操作。

在一些实施例中，步骤502的具体实现及所带来的技术效果可以参考图4对应的那些实施例中的步骤402，在此不再赘述。

步骤503，响应于手部位姿信息表征用户放下目标设备，以及头戴式显示设备与目标设备的连接状态为已连接状态，在头戴式显示设备的显示屏幕中展示虚拟界面。

在一些实施例中，上述执行主体可以响应于上述手部位姿信息表征上述用户放下上述目标设备，以及上述头戴式显示设备与上述目标设备的连接状态为已连接状态，在上述头戴式显示设备的显示屏幕中展示上述虚拟界面。实践中，上述执行主体可以以预设显示动效，在上述头戴式显示设备的显示屏幕中展示上述虚拟界面。其中，上述预设显示动效可以为预设的显示虚拟界面中至少一个窗口时的动画样式。例如，上述预设显示动效可以为使得上述至少一个窗口以从下至上的方向飞入的动效。可以理解的是，上述用户放下上述目标设备时的姿势可以为站，还可以为坐，还可以为躺。由此，可以在用户的多种位姿场景下，根据用户手持目标设备的动作，确定是否在上述头戴式显示设备的显示屏幕中展示虚拟界面。

步骤504，响应于手部位姿信息表征用户拿起目标设备和/或检测到用户作用于目标设备中的目标界面中显示的信息输入控件的输入操作信息记录，以预设动效在头戴式显示设备的显示屏幕隐藏至少一个窗口。

在一些实施例中，上述执行主体可以响应于上述手部位姿信息表征上述用户拿起上述目标设备和/或检测到上述用户作用于上述目标设备中的目标界面中显示的信息输入控件的输入操作信息记录，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口。其中，上述目标界面可以为上述用户在上述头戴式显示设备的显示屏幕中所选择的窗口对应的界面。用户未选择窗口时，上述目标界面还可以为上述目标设备的桌面界面。上述信息输入控件可以为用于接收用户的输入操作以显示用户所输入的信息的控件。上述输入操作可以包括但不限于：键入，粘贴。上述输入操作信息记录可以为用户点击上述信息输入控件以进行输入操作的信息记录。上述输入操作信息记录可以表征用户需进行输入操作。实践中，上述执行主体可以响应于上述手部位姿信息表征上述用户拿起上述目标设备，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口。实践中，上述执行主体还可以响应于上述手部位姿信息表征上述用户拿起上述目标设备，以及检测到上述用户作用于上述目标设备中的目标界面中显示的信息输入控件的输入操作信息记录，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口。由此，可以在用户的多种位姿场景下，根据用户手持目标设备的动作，确定是否隐藏上述头戴式显示设备的显示屏幕中显示的各个窗口。

从图5中可以看出，与图4对应的一些实施例的描述相比，图5对应的一些实施例中的虚拟界面展示方法的流程500体现了根据手部位姿信息显示虚拟界面以及隐藏虚拟界面中的各个窗口的扩展步骤。由此，这些实施例描述的方案可以在用户的多种位姿场景下，根据用户手持目标设备的动作，确定是否在上述头戴式显示设备的显示屏幕中展示虚拟界面，以及确定是否隐藏上述头戴式显示设备的显示屏幕中显示的各个窗口。从而，拓宽了头戴式显示设备的应用场景。

下面参考图6，其示出了适于用来实现本公开的一些实施例的头戴式显示设备(例如图2中的头戴式显示设备201)600的硬件结构示意图。图6示出的头戴式显示设备仅仅是一个示例，不应对本公开的实施例的功能和使用范围带来任何限制。

如图6所示，头戴式显示设备600可以包括处理装置(例如中央处理器、图形处理器等)601、存储器602、输入单元603、输出单元604。其中，处理装置601、存储器602、输入单元603和输出单元604通过总线605彼此相连。在此，根据本公开的实施例的方法可以被实现为计算机程序，并且存储在存储器602中。例如，本公开的一些实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。头戴式显示设备中的处理装置601通过调用存储器602中存储的上述计算机程序，来具体实现本公开的方法中限定的虚拟界面显示和窗口隐藏功能。在一些实现方式中，输入单元603可以包括传感器。由此，处理装置601在调用上述计算机程序执行虚拟界面显示或窗口隐藏功能时，可以控制输入单元603中的传感器感测佩戴头戴式显示设备600的用户的位姿信息，以及判断位姿信息是否满足预定虚拟界面展示条件或预定窗口隐藏条件，进而显示虚拟界面或隐藏窗口。输出单元604可以包括显示屏幕，用于显示虚拟界面。

需要说明的是，本公开的一些实施例中记载的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。

在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。

上述计算机可读介质可以是上述头戴式显示设备中所包含的；也可以是单独存在，而未装配入该头戴式显示设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该头戴式显示设备执行时，使得该头戴式显示设备：响应于检测到上述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴上述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在上述头戴式显示设备的显示屏幕中展示虚拟界面，其中，上述虚拟界面中显示了至少一个窗口，上述至少一个窗口对应在上述目标设备中运行的界面；响应于检测到上述用户对于上述至少一个窗口中的窗口的选择操作信息记录，以及检测到上述用户的位姿信息满足预定窗口隐藏条件，以预设动效在上述头戴式显示设备的显示屏幕隐藏上述至少一个窗口，以及控制上述目标设备执行将与上述窗口对应的界面唤起到前台的操作，使得上述用户可以通过上述头戴式显示设备的显示屏幕在现实场景中浏览上述窗口对应的在上述目标设备中运行的界面。

可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。

以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开的实施例中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (12)

1.一种虚拟界面展示方法，应用于头戴式显示设备，包括：

响应于检测到所述头戴式显示设备与目标设备的连接状态为已连接状态，以及检测到佩戴所述头戴式显示设备的用户的位姿信息满足预定虚拟界面展示条件，在所述头戴式显示设备的显示屏幕中展示虚拟界面，其中，所述虚拟界面中显示了至少一个窗口，所述至少一个窗口对应在所述目标设备中运行的界面；

响应于检测到所述用户对于所述至少一个窗口中的窗口的选择操作信息记录，以及检测到所述用户的位姿信息满足预定窗口隐藏条件，以预设动效在所述头戴式显示设备的显示屏幕隐藏所述至少一个窗口，以及控制所述目标设备执行将与所述窗口对应的界面唤起到前台的操作，使得所述用户可以通过所述头戴式显示设备的显示屏幕在现实场景中浏览所述窗口对应的在所述目标设备中运行的界面。

2.根据权利要求1所述的方法，其中，所述在所述头戴式显示设备的显示屏幕中展示虚拟界面，包括：

控制所述目标设备执行降低屏幕亮度的操作。

3.根据权利要求2所述的方法，其中，所述以预设动效在所述头戴式显示设备的显示屏幕隐藏所述至少一个窗口，包括：

控制所述目标设备执行增加屏幕亮度的操作。

4.根据权利要求1所述的方法，其中，所述在所述头戴式显示设备的显示屏幕中展示虚拟界面，还包括：

控制所述目标设备执行息屏操作。

5.根据权利要求1所述的方法，其中，所述以预设动效在所述头戴式显示设备的显示屏幕隐藏所述至少一个窗口，还包括：

降低所述显示屏幕的亮度。

6.根据权利要求1所述的方法，其中，所述以预设动效在所述头戴式显示设备的显示屏幕隐藏所述至少一个窗口，还包括：

关闭所述显示屏幕。

7.根据权利要求1所述的方法，其中，所述位姿信息包括面部位姿信息，所述面部位姿信息表征所述用户是否看向所述目标设备；以及

所述方法还包括：

响应于所述面部位姿信息表征所述用户看向所述目标设备，以预设动效在所述头戴式显示设备的显示屏幕隐藏所述至少一个窗口。

8.根据权利要求1所述的方法，其中，所述位姿信息包括手部位姿信息，所述手部位姿信息表征所述用户拿起或放下所述目标设备；以及

所述方法还包括：

响应于所述手部位姿信息表征所述用户放下所述目标设备，以及所述头戴式显示设备与所述目标设备的连接状态为已连接状态，在所述头戴式显示设备的显示屏幕中展示所述虚拟界面。

9.根据权利要求8所述的方法，其中，所述方法还包括：

响应于所述手部位姿信息表征所述用户拿起所述目标设备和/或检测到所述用户作用于所述目标设备中的目标界面中显示的信息输入控件的输入操作信息记录，以预设动效在所述头戴式显示设备的显示屏幕隐藏所述至少一个窗口。

10.根据权利要求1-9之一所述的方法，其中，所述方法还包括：

响应于所述头戴式显示设备与所述目标设备的连接状态为已连接状态和/或检测到所述用户的佩戴操作信息记录，控制所述目标设备执行触控启动操作。

11.一种头戴式显示设备，包括：

一个或多个处理器；

存储装置，其上存储有一个或多个程序；

显示屏幕，用于显示虚拟界面；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-10中任一所述的方法。

12.一种计算机可读介质，其上存储有计算机程序，其中，所述程序被处理器执行时实现如权利要求1-10中任一所述的方法。

Images