CN109426419B - 界面显示方法及相关设备 - Google Patents

界面显示方法及相关设备 Download PDF

Info

Publication number
CN109426419B
CN109426419B CN201710792320.9A CN201710792320A CN109426419B CN 109426419 B CN109426419 B CN 109426419B CN 201710792320 A CN201710792320 A CN 201710792320A CN 109426419 B CN109426419 B CN 109426419B
Authority
CN
China
Prior art keywords
user
area
interface display
display area
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710792320.9A
Other languages
English (en)
Other versions
CN109426419A (zh
Inventor
冯梦远
张华强
陈晓华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cainiao Smart Logistics Holding Ltd
Original Assignee
Cainiao Smart Logistics Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cainiao Smart Logistics Holding Ltd filed Critical Cainiao Smart Logistics Holding Ltd
Priority to CN201710792320.9A priority Critical patent/CN109426419B/zh
Publication of CN109426419A publication Critical patent/CN109426419A/zh
Application granted granted Critical
Publication of CN109426419B publication Critical patent/CN109426419B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor

Abstract

本申请提供了一种可以应用在AR设备上的界面显示方法,该方法可以提供一个围绕用户且可随用户移动的界面显示区域,在生成待显示的信息界面后,检测用户视线的方向,进而在界面显示区域中且用户视线方向之外的区域中,确定出能够容纳信息界面的区域作为目标区域,进而在目标区域中显示信息界面。由于所选择的目标区域并没有位于用户视线中心,因此并不会阻碍用户查看其它物体对象,并且由于界面显示区域可以跟随用户移动,目标区域中显示的信息界面也可以跟随用户移动,从而使得用户能够在移动过程查看到信息界面。

Description

界面显示方法及相关设备
技术领域
本申请涉及虚拟现实技术领域,更具体地,是界面显示方法及相关设备。
背景技术
增强现实技术(Augmented Reality,简称AR)是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术。应用这种技术的设备可以实时采集周围环境的图像等信息,并根据周围环境的信息生成虚拟物体信息,并将虚拟物体信息与现实世界信息叠加在一起显示。
例如,AR设备的摄像装置采集到一个实际存在的桌子的三维图像,根据该桌子的三维图像模拟出一个合适大小、合适位置的水杯的影像,并将该水杯的影像与该桌子的影像集成在一起显示,使用户感觉桌子上真实摆放有一个水杯。
目前应用增强现实技术的电子设备,设置有类似眼镜片形式的透明显示屏,用户佩戴该电子设备后,可以通过显示屏观看到显示屏投射在视线正前方的虚拟图像。但是,用户可能需要查看周围环境的情况,界面的显示位置会阻碍用户视线,用户体验欠佳。
发明内容
有鉴于此,本申请提供了一种界面显示方法,用于将信息界面显示在不会阻碍用户视线的区域,从而扩宽用户的视野范围。
为实现所述目的,本申请提供的技术方案如下:
第一方面,本申请提供了一种界面显示方法,包括:
生成信息界面;所述信息界面位于界面显示区域;
在所述界面显示区域中,确定与用户对应的第一区域;
在所述界面显示区域中且所述第一区域之外,确定目标区域;
在所述目标区域中显示所述信息界面。
第二方面,本申请提供了一种界面显示设备,包括:处理器和存储器,所述处理器通过运行存储在所述存储器内的软件程序、调用存储在所述存储器内的数据,至少执行如下步骤:
处理器,用于生成信息界面,其中所述信息界面位于界面显示区域;在所述界面显示区域中,确定与用户对应的第一区域;在所述界面显示区域中且所述第一区域之外,确定目标区域;以及在所述目标区域中显示所述信息界面。
由以上技术方案可知,该方法可以提供一个与用户对应的界面显示区域,生成待显示的信息界面后,在界面显示区域中,确定与用户对应的第一区域,第一区域与用户对应体现为第一区域可以遮挡用户的中心视线,因此在界面显示区域中且第一区域之外的区域确定目标区域,并在目标区域中显示信息界面。目标区域并没有位于用户视线中心,因此本申请显示的信息界面并不会阻碍用户查看其它物体对象。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1A及1B为现有技术中显示信息界面的示意图;
图2为本申请提供的界面显示方法的一种流程图;
图3为本申请提供的界面显示区域随用户移动的一种示意图;
图4A为本申请提供的用户视线方向与界面显示区域相交的一个示意图;
图4B为本申请提供的在目标区域中显示信息界面的一个示意图;
图5A为本申请提供的头部转动范围的一种示意图;
图5B为本申请提供的球形区域的角度范围一种示意图;
图5C为本申请提供的在球形区域中确定界面显示区域的一个示意图;
图6为本申请提供的人类眼睛的可视角范围的一种示意图;
图7为本申请提供的界面显示区域展开后的一种示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
增强现实技术简称AR技术,可以把现实世界的一定时间空间范围内很难体验到的实体信息,如视觉、声音、味道、触觉等,模拟仿真后生成虚拟信息叠加到现实世界中,被人类感官所感知,从而达到超越现实的感官体验。
为了实现将真实信息和虚拟信息叠加在同一个画面或空间的效果,AR技术可以生成显示界面,并将生成的虚拟信息包含在显示界面中显示。用户不仅可以看到现实世界的信息,还可以看到显示在界面中的虚拟信息,这两种信息融合在一起,便可以体会到一种真实与虚拟结合的感觉。其中为了便于描述,这种包含虚拟信息的显示界面可以称为信息界面。
应用AR技术的设备可以称为AR设备。目前的AR设备显示所生成的界面的方式一般包括两种,一种是将界面直接显示在AR设备的显示屏上,一种是将界面显示在外部空间的一个位置处。
如图1A所示,采用第一种方式的一种AR设备为谷歌眼镜,其将眼镜的镜片作为显示屏,直接在镜片上显示信息界面。由于镜片尺寸的局限,显示在信息界面中的内容量很少,而且佩戴该眼镜的用户需要将视线焦点放在镜片上才能看清显示内容,容易造成人体感官不适。
如图1B所示,采用第二种方式的一种AR设备为Oculus(欧酷来)眼镜,其可以将信息界面固定显示在空间的一个具体物理位置处,但是,这种信息界面的显示位置在空间内是固定的,并不能跟随用户的移动而变化空间位置。
为了使用户可以在运动过程中看得见信息界面,并且信息界面也不阻碍视线,本申请提供了一种界面显示方法。该界面显示方法可以应用在AR设备上,AR设备可以是包括头盔、摄像头、陀螺仪、全息光学镜片等硬件单元的系统,并可以包含能够执行相关控制程序的处理器;其中控制程序包括但不限定于如下的界面显示方法。
如图2所示,本申请提供的界面显示方法可以具体包括以下步骤S201~S204。
S201:生成信息界面;所述信息界面位于界面显示区域。
其中,AR设备可以根据实际的应用场景,生成包含相应数据信息的信息界面。例如,在货仓拣货场景中,生成的信息界面中包含有待拣选的包裹的信息。又如,在物流包裹派件场景中,生成的信息界面中包含有物流包裹、收件人等相关信息。再如,在仓库员工课程培训场景中,生成的信息界面中包含有培训的课程内容。当然,本申请并不局限于应用于物流领域,还可以是其他任何领域。
需要说明的是,本申请并不关注生成的是包含什么数据内容的信息界面,而是关心在什么样区域显示这个信息界面。因此,只要是根据实际应用场景生成待显示界面后,不论这个信息界面中包含什么样的数据内容,便可以按照下述方式为这个信息界面确定用来显示这个信息界面的目标区域。
需要说明的是,本申请可以预先提供一个界面显示区域,该界面显示区域是与用户对应的一个区域,其可以根据用户的位置生成。信息界面需要显示在界面显示区域中,以供用户查看。界面显示区域与用户的对应关系可以体现在,界面显示区域可以跟随用户移动,或者围绕用户,或者既可以围绕用户又可以跟随用户移动。其中,围绕并不局限于360度全封闭围绕,也可以是非封闭式围绕,只要以用户为中心且具有一定弧度的界面显示区域均可以。
以下说明如何提供一个围绕且可跟随用户移动的界面显示区域。
其中,本申请可以预先根据用户的位置,在用户所在的空间区域中,预先确定一个围绕用户的区域,该区域用于显示界面,因此可以称为界面显示区域。另外,界面显示区域是围绕且跟随用户的,也可以称为跟随环绕层。界面显示区域是可以根据用户移动的,也就是说,用户移动到哪个位置,该界面显示区域跟随用户移动到相应位置。
如图3所示,以用户为中心设置有球面形式的界面显示区域,信息界面可以显示在这个界面显示区域中,用户从图3中的A点移动到B点,界面显示区域可以跟随用户移动到相应位置。
需要说明的是,界面显示区域可以并非真实存在于实际空间中,而是虚拟出的一个空间区域。界面显示区域与用户存在一定的空间距离,这个空间距离可以是预设的或者是根据用户所处空间区域的大小实时计算出来的。界面显示区域与用户之间的空间距离可以是固定的,也就是说,界面显示区域与用户之间保持有固定的相对位置;或者界面显示区域与用户之间的空间距离是变化的,具体是根据用户所处空间区域的范围大小的变化而变化。例如,用户所处空间区域范围变大,则可以增大界面显示区域与用户之间的空间距离,反之用户所处空间区域范围变小,则可以减小界面显示区域与用户之间的空间距离。
可以理解的是,通常情况下,在人眼可以接受的距离范围内,界面显示区域距离用户越近,用户越能够清楚地看见在界面显示区域中包含的信息界面,反之界面显示区域距离用户越远,用户越不能看清界面显示区域中包含的信息界面。因此,在人眼可以接受的距离范围内,将界面显示区域设置在位于人较近的位置。
在实际应用中,界面显示区域的实现可以使用同步定位与建图(simultaneouslocalization and mapping,SLAM)算法,该算法也可以称为即时定位与地图构建(Concurrent Mapping and Localization,CML)。SLAM算法能够明确静止或者运动中的用户与用户所处空间区域的相对位置,并采集惯性测量单元如陀螺仪等的检测数据,以明确用户头部转动位置及角度,测算出界面显示区域需要相对用户的位置,从而实现不管用户如何运动,界面显示区域的位置始终与用户保持相对距离不变,且可以随用户头部转动而固定在某个区域。当然,还可以使用其他算法,来提供与用户保持相对固定位置且可以随用户移动的界面显示区域,本申请并不一一说明。
S202:在界面显示区域中,确定与用户对应的第一区域。
其中,界面显示区域中,有一部分区域与用户对应,也有一部分区域未与用户对应。为了便于描述,可以将与用户对应的区域称为第一区域。第一区域可以位于用户前方,或者进一步地,第一区域位于用户视线范围内,或者更进一步地,第一区域位于用户视线的正前方。第一区域与用户的对应可以体现在,第一区域遮挡用户的中心视线,换句话说,第一区域包括用户的视线方向与界面显示区域的交点。
一种具体的实现方式为,确定用户的视线方向,以视线方向与界面显示区域的交点为中心确定第一区域。
其中,AR设备上可以设置有检测硬件,用于检测用户的视线方向。如图4A所示,用户的视线方向是以人头部具体是眼部为起点,朝向某个方向的直线,用户的视线方向也可以称为用户的中心视线。在一种实现方式中,AR设备上设置有可以追踪眼球的硬件单元,该硬件单元可以直接确定用户的视线方向。在另一种实现方式中,AR上设置有检测头部朝向的硬件单元,该硬件单元可以检测头部朝向的方向,将头部朝向作为视线方向;其中头部朝向具体为面部朝向,硬件单元可以是但不限定于陀螺仪。
前已述及,本申请可以提供一个围绕用户且可以随用户移动的界面显示区域,如图4A所示,从用户的视线方向看,视线方向能够与界面显示区域(图示中的圆圈表示球形界面显示区域的切面)产生一个交点,这个交点即用户正面能看到的中心点。在一种实现方式中,可以以该交点为中心确定第一区域。或者,该交点也可以并非作为第一区域的中心点,只要是包含该交点的区域均可以称为第一区域。
S203:在界面显示区域中且第一区域之外,确定目标区域。
其中,第一区域是与用户对应的区域,本步骤确定的目标区域是并非与用户对应的区域。根据上述说明可知,第一区域位于用户前方,是可以遮挡用户中心视线的区域,若在第一区域显示信息界面,则必然遮挡用户视线,阻碍用户看到空间区域中的其他物品。因此,本步骤在第一区域之外确定目标区域,该区域并不会遮挡用户中心视线。
可以理解的是,这个区域是以信息界面的大小为标准选择的,也就是说,选择的目标区域为能够容纳信息界面的区域,一种具体实现方式是,将信息界面的大小直接确定为目标区域的大小。
S204:在目标区域中显示信息界面。
其中,确定出不会遮挡用户中心视线的目标区域后,在目标区域中显示信息界面。在实际应用中,显示信息界面的方式可以是渲染,例如基于SLAM算法输出的与信息界面相关的物理性质参数信息,AR设备中的3D渲染引擎(如T3D或Unity3D)根据这些物理性质参数信息在目标区域中渲染出信息界面。
信息界面的一种显示形式见图4B。如图4B所示,信息界面显示在灰色区域表示的目标区域中。可以看出,目标区域并没有在用户视线正中心,并不会遮挡用户中心视线,这样用户能够查看到信息界面之外的物体对象。例如,用户在进行某项行为操作时,能够看到操作对象,从而可以执行正常的操作行为。
由以上技术方案可知,本申请提供了一种可以应用在AR设备上的界面显示方法,该方法可以提供一个与用户对应的界面显示区域,生成待显示的信息界面后,在界面显示区域中,确定与用户对应的第一区域,第一区域与用户对应体现为第一区域可以遮挡用户的中心视线,因此在界面显示区域中且第一区域之外的区域确定目标区域,并在目标区域中显示信息界面。目标区域并没有位于用户视线中心,因此本申请显示的信息界面并不会阻碍用户查看其它物体对象。
进一步地,界面显示区域可以跟随用户移动,则目标区域中显示的信息界面也可以跟随用户移动,从而使得用户能够在移动过程查看到信息界面。
以下对如何确定界面显示区域进行详细说明。
前已述及,界面显示区域用来显示信息界面,其围绕用户且能够跟随用户移动,因此界面显示区域可以看作是一个围绕用户的球面透明屏幕。通常情况下,用户在查看身体后面的物体对象时,头部需要转动较大角度,也就是说用户不能方便地查看身体后面的物体对象,如果将信息界面显示在这个区域,用户查看信息界面较为费力,因此可以限定界面显示区域的形状如界面显示区域为半球面,或者可以限定界面显示区域的区域范围。
在一个示例中,可以根据用户头部转动范围来确定界面显示区域。具体地,确定用户头部的转动范围;在围绕用户且距离用户预设长度的空间区域中,以所述转动范围为依据确定界面显示区域。
其中,可以针对不同的用户确定该用户自身的头部转动范围,或者也可以将统计的大多数人的头部转动范围作为该用户的头部转动范围,例如根据生物学统计的人体体征参数可知,人类头部转动范围如图5A所示为向上70度、向下85度、向左80度及向右83度(向左和向右并未画出)。当然针对不同的统计方法或统计对象,头部转动范围可以是其他数值,对此本申请并不做具体限定。在这种实现方式中,头部转动范围是固定值,除非特殊用户大多数用户均使用该固定值。
在距离用户预设长度的空间区域中,确定出一个围绕用户的球形区域。这个球形区域的中心可以是用户的身体中心,也可以是用户头部中心,或者也可以是以用户眼球。在实际应用中,也可以是以用户身体的其他部分为中心的一个球形区域。需要说明的是,以下按照用户头部的转动范围在球形区域中确定界面显示区域时,是在这个球形区域中确定出一部分来作为界面显示区域,但并未改变球形区域的中心,因此球形区域的中心也可以作为界面显示区域的中心。
如图5B所示,从中心来看,可以认为球形区域在向上、向下、向左及向右(向左和向右并未标出)四个的角度均为180度。但人类头部转动范围如图5A所示仅是向上70度、向下85度、向左80度及向下83度,这个角度范围相对球形区域的角度范围来说是一个小的范围,因此按照这个小的角度范围,在球形区域的球面上,确定出一个区域,这个区域即界面显示区域。按照上述人类头部转动范围的数值确定出的界面显示区域可以如图5C所示。
可见,界面显示区域是按照用户的头部转动范围确定出来的,这个头部转动范围是用户在正常情况下并不需要耗费力气或者扭动身体就能达到的一个角度范围,因此将待显示的信息界面显示在这个区域中,用户只需在正常范围内转动头部便可以看到信息界面,并不需要费劲转动头部导致身体不适,避免了用户的查看不方便问题。
以下具体说明如何在界面显示区域中确定第一区域及目标区域。
一种实现方式是,在所述界面显示区域中,确定第一区域以外且能够容纳所述信息界面的一个任意区域为目标区域。这种随机方式虽然实现方式简单,但存在一定的问题:可能会使目标区域阻碍用户的一部分视线,虽然这个视线并非中心视线,但用户通过眼睛余光能够看到,也就相当于用户视野被阻隔。
另一种实现方式是,确定所述用户的视线方向;以所述视线方向与所述界面显示区域的交点为中心确定第一区域;以及在所述界面显示区域中且所述正显示区域之外,确定能够容纳所述信息界面的区域为目标区域。
具体地,用户的视线方向可以看作一条直线,界面显示区域是一个弧形球面,视线方向与界面显示区域存在交点,那么以这个交点为中心的区域便是用户的正视区域,也可以称为正显示区域。正显示区域为第一区域的一种具体实现方式。
目标区域可以是预设大小及形状,例如预设形状为长方形预设大小为20×15。或者目标区域可以按照用户的视线角度范围确定,即确定用户的视线角度范围,以及以所述视线方向与所述界面显示区域的交点为中心,在界面显示区域中确定所述视线角度范围大小的区域为正显示区域。
视线角度范围也可以称为可视角范围。视线角度范围可以是用户自身的,即确定用户各自的可视角范围;或者使用生物学统计的大多数用户的生物特征值,例如图6所示,生物学统计的人类眼睛的可视角范围是上方50度、下方70度、左方100度及右方100度。与上述按照头部转动范围在弧形球面中确定界面显示区域的方式相同,将眼睛的可视角范围看作一个锥形体,这个锥形体与弧形的界面显示区域交叉后,会选中界面显示区域的一部分区域,这部分区域即正显示区域。需要说明的是,锥形体的顶点表示眼睛,也表示视线方向的起点,因此视线方向与界面显示区域的交点也是锥形体与界面显示区域的相交后所确定出的目标区域的中心。
根据正显示区域的上述确定方式可知,正显示区域是用户的视野范围区域。为了防止信息界面阻碍用户视线,可以将信息界面显示在这个正显示区域之外的其他区域,当然其他区域是界面显示区域中的一部分。界面显示区域若是根据用户头部转动范围确定出来的,且正显示区域是根据用户视线角度范围确定出来的,那么在这个界面显示区域的正显示区域之外确定一个目标区域,将信息界面显示在这个目标区域内,那么信息界面既不会出现在用户视线之内,而且用户只需要正常转动头部便可以看到这个信息界面,对于用户体验来说效果较好。
为了便于理解,可以使用图7进行说明。如图7所示,界面显示区域可以划分为正视显示区、俯视显示区、仰视显示区、左视显示区及右视显示区。正视显示区即上述确定出的正显示区域,本申请是在除正显示区域之外的其他显示区域如俯视显示区、仰视显示区、左视显示区及右视显示区内显示信息界面。
由以上可知,信息界面显示在用户视野外但转动头部即可以看到的区域,这种显示信息界面的方法,在具体的应用场景中,可以为用户带来较好的体验效果。例如,在物流领域中,快递员在行车派件或操作包裹的过程中,可以将包含包裹信息及收件人信息的信息界面显示在头部右上方位置,这个位置并不在快递员视线范围内,因此不会阻碍快递员查看周围环境或操作包裹,但用户想要查看信息界面时,只要向右上方稍微抬头便可以查看到,既方便了用户在实际环境中进行物流操作,也方便了用户随时随地查看相关物流信息。
另外,本申请还提供了一种界面显示设备,包括:处理器和存储器,所述处理器通过运行存储在所述存储器内的软件程序、调用存储在所述存储器内的数据,至少执行如下步骤:
处理器,用于生成信息界面,其中所述信息界面位于界面显示区域;在所述界面显示区域中,确定与用户对应的第一区域;在所述界面显示区域中且所述第一区域之外,确定目标区域;以及在所述目标区域中显示所述信息界面。
在实施中,界面显示设备可以是AR设备,处理器即集成在AR设备内部的处理器。
在一个示例中,所述界面显示区域围绕所述用户且可随所述用户移动。
在一个示例中,所述处理器,还用于确定用户头部的转动范围;以及在围绕用户且距离用户预设长度的空间区域中,根据所述转动范围确定界面显示区域。
在一个示例中,所述处理器在所述界面显示区域中,确定与用户对应的第一区域,包括:所述处理器,具体用于确定所述用户的视线方向;以及以所述视线方向与所述界面显示区域的交点为中心确定第一区域。具体地,界面显示设备可以包括眼球跟随器,用于跟踪眼球的转动方向;则处理器可以根据眼球的转动方向确定视线方向。
在一个示例中,所述处理器在所述界面显示区域中,确定与用户对应的第一区域,包括:所述处理器,具体用于确定用户的视线角度范围;以及以所述视线方向与所述界面显示区域的交点为中心,确定所述视线角度范围大小的区域为第一区域。
在一个示例中,所述处理器在所述界面显示区域中,确定与用户对应的第一区域,包括:所述处理器,具体用于以所述视线方向与所述界面显示区域的交点为中心,确定预设大小及形状的第一区域。
在一个示例中,界面显示设备还可以包括检测单元,所述检测单元用于确定所述用户的面部朝向方向。其中,检测单元可以具体是陀螺仪,陀螺仪可以检测用户的面部朝向方向。则所述处理器确定所述用户的视线方向包括:所述处理器,具体用于将所述面部朝向方向作为所述用户的视线方向。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括上述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种界面显示方法,其特征在于,包括:
生成信息界面;所述信息界面位于界面显示区域,所述界面显示区域位于外部空间中并且所述界面显示区域围绕用户且可跟随所述用户移动;
在所述界面显示区域中,确定与用户对应的第一区域;
在所述界面显示区域中且所述第一区域之外,确定目标区域;
在所述目标区域中显示所述信息界面,
所述界面显示区域的生成方式包括:
确定用户头部的转动范围;
在围绕用户且距离用户预设长度的空间区域中,根据所述转动范围确定界面显示区域。
2.根据权利要求1所述的界面显示方法,其特征在于,所述在所述界面显示区域中,确定与用户对应的第一区域,包括:
确定所述用户的视线方向;
以所述视线方向与所述界面显示区域的交点为中心确定第一区域。
3.根据权利要求2所述的界面显示方法,其特征在于,所述以所述视线方向与所述界面显示区域的交点为中心确定第一区域,包括:
确定用户的视线角度范围;
以所述视线方向与所述界面显示区域的交点为中心,确定所述视线角度范围大小的区域为第一区域。
4.根据权利要求2所述的界面显示方法,其特征在于,所述以所述视线方向与所述界面显示区域的交点为中心确定第一区域,包括:
以所述视线方向与所述界面显示区域的交点为中心,确定预设大小及形状的第一区域。
5.根据权利要求2所述的界面显示方法,其特征在于,所述确定所述用户的视线方向,包括:
确定所述用户的面部朝向方向,并将所述面部朝向方向作为所述用户的视线方向。
6.一种界面显示设备,其特征在于,包括:处理器和存储器,所述处理器通过运行存储在所述存储器内的软件程序、调用存储在所述存储器内的数据,至少执行如下步骤:
处理器,用于生成信息界面,其中所述信息界面位于界面显示区域,所述界面显示区域位于外部空间中并且所述界面显示区域围绕用户且可随所述用户移动;在所述界面显示区域中,确定与用户对应的第一区域;在所述界面显示区域中且所述第一区域之外,确定目标区域;以及在所述目标区域中显示所述信息界面,
其中,所述处理器还用于确定用户头部的转动范围;以及在围绕用户且距离用户预设长度的空间区域中,根据所述转动范围确定界面显示区域。
7.根据权利要求6所述的界面显示设备,其特征在于,所述处理器在所述界面显示区域中,确定与用户对应的第一区域,包括:
所述处理器,具体用于确定所述用户的视线方向;以及以所述视线方向与所述界面显示区域的交点为中心确定第一区域。
8.根据权利要求7所述的界面显示设备,其特征在于,所述处理器在所述界面显示区域中,确定与用户对应的第一区域,包括:
所述处理器,具体用于确定用户的视线角度范围;以及以所述视线方向与所述界面显示区域的交点为中心,确定所述视线角度范围大小的区域为第一区域。
9.根据权利要求7所述的界面显示设备,其特征在于,所述处理器在所述界面显示区域中,确定与用户对应的第一区域,包括:
所述处理器,具体用于以所述视线方向与所述界面显示区域的交点为中心,确定预设大小及形状的第一区域。
10.根据权利要求7所述的界面显示设备,其特征在于,还包括检测单元;
所述检测单元,用于确定所述用户的面部朝向方向;
则所述处理器确定所述用户的视线方向,包括:
所述处理器,具体用于将所述面部朝向方向作为所述用户的视线方向。
CN201710792320.9A 2017-09-05 2017-09-05 界面显示方法及相关设备 Active CN109426419B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710792320.9A CN109426419B (zh) 2017-09-05 2017-09-05 界面显示方法及相关设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710792320.9A CN109426419B (zh) 2017-09-05 2017-09-05 界面显示方法及相关设备

Publications (2)

Publication Number Publication Date
CN109426419A CN109426419A (zh) 2019-03-05
CN109426419B true CN109426419B (zh) 2022-06-03

Family

ID=65514162

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710792320.9A Active CN109426419B (zh) 2017-09-05 2017-09-05 界面显示方法及相关设备

Country Status (1)

Country Link
CN (1) CN109426419B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111459436B (zh) * 2020-03-31 2021-11-16 联想(北京)有限公司 输出控制方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101080691A (zh) * 2004-12-14 2007-11-28 松下电器产业株式会社 信息提示装置及信息提示方法
JP2008029694A (ja) * 2006-07-31 2008-02-14 Toshiba Corp 画像処理装置及び該画像処理装置を備える医用診断装置
CN102859470A (zh) * 2011-03-15 2013-01-02 松下电器产业株式会社 对象控制装置、对象控制方法、对象控制程序以及集成电路
CN105453011A (zh) * 2013-06-18 2016-03-30 微软技术许可有限责任公司 虚拟对象朝向和可视化
CN106662925A (zh) * 2014-07-25 2017-05-10 微软技术许可有限责任公司 使用头戴式显示器设备的多用户注视投影

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101080691A (zh) * 2004-12-14 2007-11-28 松下电器产业株式会社 信息提示装置及信息提示方法
JP2008029694A (ja) * 2006-07-31 2008-02-14 Toshiba Corp 画像処理装置及び該画像処理装置を備える医用診断装置
CN102859470A (zh) * 2011-03-15 2013-01-02 松下电器产业株式会社 对象控制装置、对象控制方法、对象控制程序以及集成电路
CN105453011A (zh) * 2013-06-18 2016-03-30 微软技术许可有限责任公司 虚拟对象朝向和可视化
CN106662925A (zh) * 2014-07-25 2017-05-10 微软技术许可有限责任公司 使用头戴式显示器设备的多用户注视投影

Also Published As

Publication number Publication date
CN109426419A (zh) 2019-03-05

Similar Documents

Publication Publication Date Title
JP6393367B2 (ja) 追従表示システム、追従表示プログラム、および追従表示方法、ならびにそれらを用いたウェアラブル機器、ウェアラブル機器用の追従表示プログラム、およびウェアラブル機器の操作方法
US9829989B2 (en) Three-dimensional user input
CN116438505A (zh) 用于操纵环境中的对象的方法
WO2014128752A1 (ja) 表示制御装置、表示制御プログラム、および表示制御方法
US20220253136A1 (en) Methods for presenting and sharing content in an environment
CN106959759A (zh) 一种数据处理方法及装置
WO2014128747A1 (ja) 入出力装置、入出力プログラム、および入出力方法
US9703400B2 (en) Virtual plane in a stylus based stereoscopic display system
CN110673718B (zh) 用于显示系统的基于聚焦的调试和检查
WO2014128748A1 (ja) キャリブレーション装置、キャリブレーションプログラム、およびキャリブレーション方法
WO2014128751A1 (ja) ヘッドマウントディスプレイ装置、ヘッドマウントディスプレイ用プログラム、およびヘッドマウントディスプレイ方法
JP6250025B2 (ja) 入出力装置、入出力プログラム、および入出力方法
US20230343022A1 (en) Mediated Reality
CN109426419B (zh) 界面显示方法及相关设备
US20220301264A1 (en) Devices, methods, and graphical user interfaces for maps
US20230396750A1 (en) Dynamic resolution of depth conflicts in telepresence
JP6479835B2 (ja) 入出力装置、入出力プログラム、および入出力方法
US20240103636A1 (en) Methods for manipulating a virtual object
US20240103684A1 (en) Methods for displaying objects relative to virtual surfaces
US20240104843A1 (en) Methods for depth conflict mitigation in a three-dimensional environment
JP6479836B2 (ja) 入出力装置、入出力プログラム、および入出力方法
CN112562088A (zh) 基于用户移动来呈现环境

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant