CN112579029A - Vr眼镜的显示控制方法和系统 - Google Patents
Vr眼镜的显示控制方法和系统 Download PDFInfo
- Publication number
- CN112579029A CN112579029A CN202011453265.9A CN202011453265A CN112579029A CN 112579029 A CN112579029 A CN 112579029A CN 202011453265 A CN202011453265 A CN 202011453265A CN 112579029 A CN112579029 A CN 112579029A
- Authority
- CN
- China
- Prior art keywords
- virtual
- glasses
- real
- wearer
- environment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000011521 glass Substances 0.000 title claims abstract description 199
- 238000000034 method Methods 0.000 title claims abstract description 24
- 230000000007 visual effect Effects 0.000 claims description 12
- 230000008859 change Effects 0.000 description 26
- 238000001514 detection method Methods 0.000 description 12
- 230000035807 sensation Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 239000003550 marker Substances 0.000 description 8
- 238000007654 immersion Methods 0.000 description 6
- 238000003331 infrared imaging Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 4
- 210000004247 hand Anatomy 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000004424 eye movement Effects 0.000 description 3
- 239000002775 capsule Substances 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000010422 painting Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种VR眼镜的显示控制方法和系统,包括:获取VR眼镜佩戴者的注视点;判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。本发明提供了一种新的虚拟环境与现实环境图像的切换方式。
Description
技术领域
本发明涉及VR头部显示设备领域,具体地,涉及VR眼镜的显示控制方法和系统。
背景技术
专利文献CN106371597A公开了一种虚拟现实互换的轻质VR一体机,包括:机壳、佩戴部、处理器单元和供电模块;机壳的前端设有摄像装置,摄像装置包括基座和安装于所述基座上的可转动的摄像头,摄像头与处理器单元信号连接,处理器单元将摄像头采集的图像信息经过分析、转换并传输至所述机壳内的显示器上显示,实现虚拟现实互换;机壳上设有控制实现虚拟和现实相互切换的控制开关,控制开关分别与所述摄像装置和处理器单元连接;机壳、佩戴部均为轻质高强材质。
现有技术的不足之处是,不能通过眼部动作实现切换。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种VR眼镜的显示控制方法和系统。
根据本发明提供的一种VR眼镜的显示控制方法,包括:
注视点获取步骤:获取VR眼镜佩戴者的注视点;
注视点远近判断步骤:判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。
优选地,在虚拟环境中具有第一虚拟物体,第一虚拟物体由近及远延伸;第一虚拟物体的近端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第一虚拟物体由远及近运动时,预启动VR眼镜的摄像头获取实时的现实环境的图像进行预加载。
优选地,在现实环境的图像上叠加第二虚拟物体,第二虚拟物体由远及近延伸;第二虚拟物体的远端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第二虚拟物体由近及远运动时,预加载虚拟环境的图像。
优选地,所述第一虚拟物体在虚拟环境中始终位于视野范围内;所述第二虚拟物体在视野范围内始终叠加在现实环境的图像上。
优选地,第一虚拟物体的近端与第二虚拟物体的远端由VR眼镜显示屏的同一区域的像素显示。
根据本发明提供的一种VR眼镜的显示控制系统,包括:
注视点获取模块:获取VR眼镜佩戴者的注视点;
注视点远近判断模块:判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。
优选地,在虚拟环境中具有第一虚拟物体,第一虚拟物体由近及远延伸;第一虚拟物体的近端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第一虚拟物体由远及近运动时,预启动VR眼镜的摄像头获取实时的现实环境的图像进行预加载。
优选地,在现实环境的图像上叠加第二虚拟物体,第二虚拟物体由远及近延伸;第二虚拟物体的远端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第二虚拟物体由近及远运动时,预加载虚拟环境的图像。
优选地,所述第一虚拟物体在虚拟环境中始终位于视野范围内;所述第二虚拟物体在视野范围内始终叠加在现实环境的图像上。
优选地,第一虚拟物体的近端与第二虚拟物体的远端由VR眼镜显示屏的同一区域的像素显示。
与现有技术相比,本发明具有如下的有益效果:
本发明能够通过眼部动作方便地进行虚拟环境与现实环境图像的切换。
切换前可预加载切换后环境的图像,使得画面切换流畅。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明的步骤流程图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变化和改进。这些都属于本发明的保护范围。
根据本发明提供的一种VR眼镜的显示控制方法,包括:
注视点获取步骤:获取VR眼镜佩戴者的注视点;具体地,通过捕捉VR眼镜佩戴者的眼部动作,进行眼球跟踪,可获得VR眼镜佩戴者的注视点;
注视点远近判断步骤:判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。切换阈值可以设置为5米,该5米为现实环境中的距离。
在虚拟环境中具有第一虚拟物体,第一虚拟物体由近及远延伸;第一虚拟物体的近端距离VR眼镜佩戴者的距离等于切换阈值;当VR眼镜佩戴者的注视点沿第一虚拟物体由远及近运动时,预启动VR眼镜的摄像头获取实时的现实环境的图像进行预加载,尤其是,待预加载完成后再进行切换至现实环境的图像。
在现实环境的图像上叠加第二虚拟物体,第二虚拟物体由远及近延伸;第二虚拟物体的远端距离VR眼镜佩戴者的距离等于切换阈值;当VR眼镜佩戴者的注视点沿第二虚拟物体由近及远运动时,预加载虚拟环境的图像,尤其是,待预加载完成后再进行切换至虚拟环境的图像。
所述第一虚拟物体在虚拟环境中始终位于视野范围内;所述第二虚拟物体在视野范围内始终叠加在现实环境的图像上。第一虚拟物体的近端与第二虚拟物体的远端由VR眼镜显示屏的同一区域的像素显示。这样,VR眼镜佩戴者可以随时对画面进行切换,而不受头部转动的影响。
所述VR眼镜的显示控制方法,还包括:
真实边界获取步骤:VR眼镜被佩戴者佩戴启动后获取佩戴者所处真实环境的真实边界对象;具体地,VR眼镜的外表面设置图像采集装置或者距离探测装置,例如图像采集装置为摄像头,距离探测装置为雷达或者激光测距仪,从而VR眼镜能够获取佩戴者所处真实环境的真实边界对象,本领域技术人员可以参照智能手机具有AR功能的APP中通过智能手机摄像头采集平坦桌面,从而依照平坦桌面生成与平坦桌面一致的虚拟平面并在该虚拟平面上构建虚拟人物、物品、甚至场景的技术,实现对真实边界对象的获取。尤其是,真实边界对象为VR眼镜获取时佩戴者尚未到达的边界。例如,佩戴者所处真实环境是房间,佩戴者站在房间的中央,则所述真实边界对象为真实房间的真实墙壁、真实门板、真实窗户、真实天花板。真实地板由于是佩戴者站立的平面,即已到达,因此不作为真实边界对象。
虚拟边界生成步骤:VR眼镜生成并展示与真实边界对象匹配的虚拟边界对象;具体地,VR眼镜生成虚拟边界对象,并展示虚拟边界对象,从而佩戴者能够看到虚拟边界对象。其中,虚拟边界对象与真实边界对象在尺寸、方位、形状等视觉效果上匹配,例如,作为虚拟环境的虚拟房间与真实环境的真实房间匹配,进一步地,虚拟房间中的虚拟墙壁、虚拟门板、虚拟窗户、虚拟天花板等虚拟边界对象分别匹配于真实房间中的真实墙壁、真实门板、真实窗户、真实天花板。即,虚拟边界对象是佩戴者在虚拟环境中能够观看到的用来表征真实环境中的真实边界对象的对象,例如虚拟环境中的前方有一面虚拟墙壁,则佩戴者能够预见到在真实环境中的前方相应有一面真实墙壁,因此,佩戴者在虚拟环境中只要不碰撞虚拟墙壁,就可以实现在真实环境中不碰撞真实墙壁,避免发生碰撞真实墙壁的危险,虽然在虚拟环境中由于是沉浸式的画面VR眼镜佩戴者无法观看到真实环境中的真实墙壁。
虚拟测距标志生成步骤:针对每个虚拟边界对象,在虚拟边界对象能够被佩戴者观察到的一侧表面设置虚拟测距标志;具体地,例如,虚拟环境为一个真实房间对应的虚拟房间,虚拟边界对象是这个真实房间的真实墙壁对应的虚拟墙壁,则虚拟墙壁对于站在房间中央的佩戴者能够看到的一侧表面设置有虚拟测距标志。
虚拟摄像测距步骤:在虚拟环境中,在VR眼镜佩戴者的头部位置处设置随动的虚拟摄像头,该虚拟摄像头持续采集各个虚拟边界对象上的虚拟测距标志,根据采集到的虚拟测距标志的图像判断虚拟摄像头与虚拟边界对象之间的距离,并在虚拟摄像头与虚拟边界对象之间的距离小于安全距离时向VR眼镜佩戴者告警。具体地,将VR眼镜的空间位置定义为VR眼镜佩戴者头部的空间位置,VR眼镜依靠加速度传感器以及室内无线定位等装置能够获知自身的姿态和定位信息,从而定义为VR眼镜佩戴者头部的姿态和定位信息,从而根据VR眼镜佩戴者头部的姿态和定位信息,虚拟摄像头在虚拟环境中能够随着VR眼镜佩戴者头部跟随运动。进一步地,由于虚拟摄像头是虚拟的,因此其拍摄角度可以设置为全方位的,其拍摄角度可以是沿球面的每一个半径方向向外,因此可以同时拍摄到虚拟环境中的全部虚拟测距标志,解决了真实摄像头在拍摄一面墙壁时无法拍摄另一面对面的墙壁。虚拟摄像头与虚拟边界对象之间的距离是指最小距离,即虚拟摄像头作为一个点沿作为一个面的虚拟边界对象的法向上的距离,即最小距离。
在一个优选例中,所述虚拟摄像头具有虚拟测距标志在各个距离与角度之下的样本图像,查找到与采集到的虚拟测距标志的图像最为匹配的样本图像,将样本图像对应的距离与角度作为虚拟摄像头相对于虚拟测距标志的空间关系,由于虚拟测距标志在虚拟边界对象上的位置是预先已知的,因此根据虚拟摄像头相对于虚拟测距标志的空间关系得到虚拟摄像头相对于虚拟边界对象的距离,作为VR眼镜佩戴者与真实边界对象之间的距离。
在另一个优选例中,所述虚拟测距标志是具有立体形状的凸多面体,该凸多面体的每一个面上记载有角度标识号,所述角度标识号用于指示所在面的朝向角度;凸多面体上只有正对所述虚拟摄像头的面上的角度标识号才能被虚拟摄像头采集读取到;凸多面体的面的数量大于一百个、一千个或者一万个,各个凸多面体的各个面之间的形状、面积相同;所述虚拟摄像头根据采集读取到的角度标识号得到相对于虚拟测距标志的角度,所述虚拟摄像头根据角度标识号所在的凸多面体的面的尺寸大小得到相对于虚拟测距标志的距离;所述虚拟摄像头根据所述相对于虚拟测距标志的角度、相对于虚拟测距标志的距离,得到相对于虚拟测距标志所在的虚拟边界对象的距离。
在还有一个优选例中,所述虚拟测距标志是具有立体形状的凸多面体,该凸多面体的每一个面上记载有角度标识号,所述角度标识号用于指示所在面的朝向角度;凸多面体上只有正对所述虚拟摄像头的面上的角度标识号才能被虚拟摄像头采集读取到;凸多面体的面的数量大于一百个、一千个或者一万个,各个凸多面体的各个面之间的形状、面积相同;所述虚拟摄像头根据在同一个空间位置下同时采集读取到的分别来自不同凸多面体上的角度标识号,将这些角度标识号朝向方向交叉点处的空间位置作为所述虚拟摄像头的空间位置,进而根据虚拟边界对象的空间位置得到所述虚拟摄像头相对于虚拟边界对象的距离。尤其是,凸多面体的面的数量足够多,总有一个面是正对虚拟摄像头的。
所述VR眼镜的显示控制方法还包括:
真实位置检测步骤:根据佩戴者与虚拟边界对象空间关系获取佩戴者与真实边界对象空间关系;具体地,如果虚拟边界对象、真实边界对象与佩戴者的关系是一致的,例如真实墙壁和虚拟墙壁均在佩戴者前方1米处,则佩戴者过于靠近虚拟墙壁意味着获取到佩戴者过于靠近真实墙壁的危险。为了安全,虚拟边界对象相对于真实边界对象更加靠近佩戴者,进而即使佩戴者未按照安全要求而在虚拟环境中刚碰撞到虚拟墙壁,此时由于虚拟墙壁相对于真实墙壁靠近佩戴者,因此佩戴者此时并没有碰撞到真实墙壁,但也足以引起安全警惕,一旦虚拟墙壁被碰撞到则提示佩戴者不能继续越过虚拟墙壁而向真实墙壁继续靠近。所以,尤其是,佩戴者与虚拟边界对象空间关系、佩戴者与真实边界对象空间关系两者是一致的,或者佩戴者与虚拟边界对象空间关系指示佩戴者与真实边界对象发生碰撞的空间关系的可能性。
外部展示步骤:根据佩戴者与虚拟边界对象之间距离的变化,令VR眼镜外表面的显示设备或光源设备展示的信息动态变化;具体地,由于VR眼镜的双目显示屏只向佩戴者展示,而对于非佩戴者无法被观看到,当佩戴者为儿童时,需要有监护人作为非佩戴者在旁进行观察保护,虽然安全主要靠儿童自己避免碰撞到虚拟墙壁等虚拟边界对象,但监护人需要知道虚拟边界对象是否真的成功生成并展示给了儿童。所以,在VR眼镜的外表面设置显示设备,例如显示器,或者设置光源设备,例如LED光源,当佩戴者与虚拟边界对象之间的距离变化得越来越近时,显示器的红色区域的面积越大,或者LED光源的亮度越高,以此来表征佩戴者在虚拟环境中与虚拟边界对象之间距离的变化。若儿童已经过于接近真实墙壁,而红色区域的面积没有变大,或者LED光源的亮度没有提高,则存在虚拟墙壁并没有生成并展示的可能性,有必要由监护人自己佩戴VR眼镜进行安全检查。
虚拟触感产生步骤:令VR眼镜在虚拟边界对象处展示虚拟触摸对象;VR眼镜虽然能够提高视觉上的沉浸感,但是在触觉上一直欠缺实体感,现有技术是让VR眼镜的佩戴者穿戴传感手套,通过传感手套上的振动器来替代触觉,但是其真实感仍然是欠缺的,例如佩戴者在虚拟环境中抚摸虚拟房间的虚拟墙壁,如果仅仅传感手套进行振动,显然并不能模拟出真实抚摸墙壁的触感,仅仅是不同体感之间的替代,而非模拟。为解决这一问题,本发明令VR眼镜在虚拟边界对象处展示虚拟触摸对象,例如在虚拟墙壁处展示壁画、海报等虚拟触摸对象,佩戴者在虚拟环境中触摸虚拟海报时,由于虚拟海报所处的虚拟墙壁与真实墙壁的位置是一致的,因此佩戴者在真实环境中的动作是触摸真实墙壁,从而模拟出抚摸海报的触感,而非用振动等另一种明显不同的体感来替代。
下面通过更多的优选例对本发明进行更为具体的说明。
所述真实边界获取步骤包括:
初始提示步骤:VR眼镜提示佩戴者保持当前的初始位置不变的前提下转动头部朝向以覆盖扫描佩戴者所处于的真实环境,并从真实环境中获得真实边界对象;具体地,佩戴者在空旷的真实房间中央佩戴上VR眼镜,VR眼镜语音提示佩戴者保持当前站立的初始位置不动,仅仅是扭转腰部与转动头部,环视整个真实房间,从而获取整个真实房间的全景图像作为真实环境,并从中获得真实房间的墙壁、天花板作为真实边界对象;其中,空旷的真实房间可以是指墙壁没有受到物品等遮挡的真实房间。
移动提示步骤:VR眼镜提示佩戴者向距离最远的真实边界对象进行位置移动,直到佩戴者移动到距离最远的真实边界对象的预设安全距离位置处,然后依据提示佩戴者保持当前的初始位置不变的前提下转动头部朝向以覆盖扫描所得的佩戴者所处于的真实环境,修正所述真实边界对象;例如,佩戴者初始时站在真实房间的一侧,环视时发现天花板安装有吊灯,吊灯的一侧的天花板可见,但是吊灯遮挡住了另一侧的天花板,VR眼镜提示佩戴者向真实房间的另一侧进行位置移动,直到佩戴者移动到距离最远的真实边界对象的预设安全距离位置处,其中,VR眼镜可以通过摄像机采集佩戴者头部前方的真实环境的影像并实时播放展示给佩戴者,因此佩戴者相当于是直接观看到前方的真实环境,也就能看到真实房间的另一侧的真实墙壁而不会碰撞到真实墙壁上,但是VR眼镜仍然可以通过数字图像处理识别测距或者激光测距等现有技术中的方式得到佩戴者与真实墙壁之间的距离,预设安全距离可以设置为1米,即VR眼镜指示佩戴者移动到距离另一侧真实墙壁1米处停下,然后依据提示佩戴者保持当前的初始位置不变的前提下转动头部朝向以覆盖扫描所得的佩戴者所处于的真实环境,来修正所述真实边界对象,即当佩戴者移动到吊灯的另一侧时,能够获得吊灯的另一侧的天花板的信息,来修正所述真实边界对象,得到完整的真实的天花板。
所述虚拟边界生成步骤包括:
虚拟边界对象设定步骤:在虚拟环境中按照真实边界对象与佩戴者的真实距离位置生成与佩戴者距离位置一致的虚拟边界对象,例如令虚拟墙壁与真实墙壁重合;或者,在虚拟环境中的位于真实边界对象与佩戴者之间真实空间对应的虚拟空间中一致的朝向上生成虚拟边界对象,例如在真实墙壁面向佩戴者的一面上离开距离生成虚拟墙壁,使得虚拟墙壁与真实墙壁之间存在间隙;
虚拟环境生成展示步骤:生成虚拟环境,在虚拟环境中展示虚拟边界对象;或者,以虚拟边界对象的包络空间的边界为边界,生成虚拟环境,并在虚拟环境中展示虚拟边界对象;具体地,例如,各个虚拟边界对象构成一个宇宙空间站的太空舱体的四周墙壁与天花板,太空舱体的墙壁与天花板可以是半透明的虚拟的玻璃,而虚拟环境为宇宙空间,从而令佩戴者置身于宇宙的沉浸感,但与此同时又可以观察到虚拟的玻璃的存在,避免过于靠近玻璃而碰撞到真实墙壁。又例如,以虚拟边界对象的包络空间的边界为边界,生成虚拟环境,比如生成一个不透明的太空舱体,由于佩戴者收到真实墙壁等真实边界对象的限制阻挡而无法移动到与真实边界对象重合的虚拟边界对象的外部,因此虚拟环境在虚拟边界对象的外部的图像不必生成,以节省数字图像处理的计算资源,即按照真实边界对象确定需生成图像的范围,从而不对与真实边界对象重合的虚拟边界对象的外部的图像进行生成。
所述真实检测获得步骤包括:
最小距离获取步骤:获取VR眼镜或者佩戴者身体部位随动设备中与虚拟边界对象的最小距离;具体地,佩戴者身体部位随动设备可以是附着在佩戴者手腕上的智能手环或智能手表,或者VR控制手柄,甚至是佩戴者手持的智能手机等设备,佩戴者身体部位随动设备可以具有陀螺仪传感器、加速度传感器等传感器,还可以具有无线定位尤其是室内无线定位功能的器件,从而能够感知自身的空间位置与自身的姿态。VR眼镜也可以具有室内无线定位功能的器件,从而VR眼镜与随动设备之间的相对位置关系是可以得到的,VR眼镜与虚拟边界对象之间的相对位置关系也是可以得到的,进而能够得到随动设备与虚拟边界对象之间的相关位置关系,继而得到随动设备与虚拟边界对象之间的距离,当只有一个随动设备时,该距离记为最小距离,当有多个随动设备时,所述最小距离为最接近虚拟边界对象的随动设备与虚拟边界对象之间的距离。
距离判断步骤:判断最小距离是否大于安全距离阈值;若是,则继续获取实时的最小距离;若否,则VR眼镜停止展示虚拟边界对象,停止展示虚拟环境,并展示实时的真实环境和真实边界对象;以此来向佩戴者提示佩戴者与真实边界对象空间关系是否安全。当最小距离小于等于安全距离阈值时,例如安全距离阈值为1米,最小距离小于等于1米时,VR眼镜停止展示虚拟边界对象,停止展示虚拟环境,使得佩戴者脱离沉浸感,并且向佩戴者播放实时获取的前方的真实环境的影像,从而告警佩戴者存在碰撞到真实墙壁等真实边界对象的安全风险。
所述外部展示步骤包括:
距离动态获取步骤:获取佩戴者与虚拟边界对象的最近距离,根据最近距离得到对应的安全等级,其中,最近距离越大则安全等级越高;最近距离越小则安全等级越低;
外部距离展示步骤:根据安全等级变化VR眼镜外表面的显示设备或光源设备展示的信息,以反映安全等级的变化。例如安全等级较高时,显示设备显示绿色,或者光源设备出射绿色光线,安全等级较低时意味着佩戴者过于接近真实墙壁可能发生碰撞的危险,则显示设备显示红色,或者光源设备出射红色光线,使得作为旁观者的非佩戴者可以作为安全员知道虚拟边界对象是否已生成并展示给佩戴者。
所述虚拟触感产生步骤包括:
温度图像变化检测步骤:令VR眼镜采集佩戴者朝向方向处或视觉焦点处虚拟边界对象对应的真实边界对象的红外成像的图像中的温度变化区域;当佩戴者的手部温度较高,真实墙壁的温度较低时,真实墙壁被手部碰触受热后的区域在红外成像图像中发生变化;但是温度发生变化的区域不一定是佩戴者的手部的碰触,还可能是中央空调输出的空气引起的温度变化。
手部距离判断步骤:获取佩戴者手部随动设备与佩戴者朝向方向处或视觉焦点处的该虚拟边界对象之间的距离,若小于触感距离阈值,则认为佩戴者在触摸该真实边界对象,触发触感匹配步骤执行;例如,触感距离阈值为3cm、2cm、1cm,也可以是0cm,也可以是-3cm、-2cm、-1cm,即手部随动设备穿过了虚拟边界对象。
触感匹配步骤:若佩戴者手部随动设备与红外成像的图像中的温度变化区域之间的距离小于匹配阈值,则认为温度变化区域的温度变化是由于佩戴者手部接触该真实边界对象导致的,将该虚拟边界对象在虚拟环境中按照真实边界对象的位置保持一致地展示,使得佩戴者在虚拟环境中的虚拟对手碰触到或脱离于虚拟边界对象时,佩戴者在真实环境中的真实手部分别相应地碰触到或脱离于真实边界对象。具体地,佩戴者手部随动设备与红外成像的图像中的温度变化区域之间的距离可以是指随动设备与温度变化区域之间的最小距离,也可以是指随动设备与温度变化区域几何中心之间的距离,所述将该虚拟边界对象在虚拟环境中按照真实边界对象的位置保持一致地展示,即虚拟边界对象与真实边界对象重合,使得佩戴者触摸真实边界对象的触感能够模拟为触摸虚拟边界对象的触感。
在一个优选例中,尤其是,在所述真实检测获得步骤中VR眼镜停止展示虚拟边界对象,停止展示虚拟环境,并展示实时的真实环境和真实边界对象,以此来向佩戴者提示佩戴者与真实边界对象空间关系是否安全的过程中,虚拟边界对象虽然向佩戴者停止展示,即不可见,但是虚拟边界对象仍然保持生成状态,只是不可见而已,从而触感匹配步骤能够被触发执行,进而虚拟边界对象重新被展示为佩戴者可见。
与VR眼镜的显示控制方法相应地,本发明提供一种VR眼镜的显示控制系统。本领域技术人员可以将所述VR眼镜的显示控制方法作为所述VR眼镜的显示控制系统的实施例,即通过执行所述VR眼镜的显示控制方法的步骤流程实现所述VR眼镜的显示控制系统。
根据本发明提供的一种VR眼镜的显示控制系统,包括:
注视点获取模块:获取VR眼镜佩戴者的注视点;具体地,通过捕捉VR眼镜佩戴者的眼部动作,进行眼球跟踪,可获得VR眼镜佩戴者的注视点;
注视点远近判断模块:判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。切换阈值可以设置为5米,该5米为现实环境中的距离。
在虚拟环境中具有第一虚拟物体,第一虚拟物体由近及远延伸;第一虚拟物体的近端距离VR眼镜佩戴者的距离等于切换阈值;当VR眼镜佩戴者的注视点沿第一虚拟物体由远及近运动时,预启动VR眼镜的摄像头获取实时的现实环境的图像进行预加载,尤其是,待预加载完成后再进行切换至现实环境的图像。
在现实环境的图像上叠加第二虚拟物体,第二虚拟物体由远及近延伸;第二虚拟物体的远端距离VR眼镜佩戴者的距离等于切换阈值;当VR眼镜佩戴者的注视点沿第二虚拟物体由近及远运动时,预加载虚拟环境的图像,尤其是,待预加载完成后再进行切换至虚拟环境的图像。
所述第一虚拟物体在虚拟环境中始终位于视野范围内;所述第二虚拟物体在视野范围内始终叠加在现实环境的图像上。第一虚拟物体的近端与第二虚拟物体的远端由VR眼镜显示屏的同一区域的像素显示。这样,VR眼镜佩戴者可以随时对画面进行切换,而不受头部转动的影响。
根据本发明提供的一种VR眼镜的显示控制系统,还包括:
真实边界获取模块:VR眼镜被佩戴者佩戴启动后获取佩戴者所处真实环境的真实边界对象;具体地,VR眼镜的外表面设置图像采集装置或者距离探测装置,例如图像采集装置为摄像头,距离探测装置为雷达或者激光测距仪,从而VR眼镜能够获取佩戴者所处真实环境的真实边界对象,本领域技术人员可以参照智能手机具有AR功能的APP中通过智能手机摄像头采集平坦桌面,从而依照平坦桌面生成与平坦桌面一致的虚拟平面并在该虚拟平面上构建虚拟人物、物品、甚至场景的技术,实现对真实边界对象的获取。尤其是,真实边界对象为VR眼镜获取时佩戴者尚未到达的边界。例如,佩戴者所处真实环境是房间,佩戴者站在房间的中央,则所述真实边界对象为真实房间的真实墙壁、真实门板、真实窗户、真实天花板。真实地板由于是佩戴者站立的平面,即已到达,因此不作为真实边界对象。
虚拟边界生成模块:VR眼镜生成并展示与真实边界对象匹配的虚拟边界对象;具体地,VR眼镜生成虚拟边界对象,并展示虚拟边界对象,从而佩戴者能够看到虚拟边界对象。其中,虚拟边界对象与真实边界对象在尺寸、方位、形状等视觉效果上匹配,例如,作为虚拟环境的虚拟房间与真实环境的真实房间匹配,进一步地,虚拟房间中的虚拟墙壁、虚拟门板、虚拟窗户、虚拟天花板等虚拟边界对象分别匹配于真实房间中的真实墙壁、真实门板、真实窗户、真实天花板。即,虚拟边界对象是佩戴者在虚拟环境中能够观看到的用来表征真实环境中的真实边界对象的对象,例如虚拟环境中的前方有一面虚拟墙壁,则佩戴者能够预见到在真实环境中的前方相应有一面真实墙壁,因此,佩戴者在虚拟环境中只要不碰撞虚拟墙壁,就可以实现在真实环境中不碰撞真实墙壁,避免发生碰撞真实墙壁的危险,虽然在虚拟环境中由于是沉浸式的画面VR眼镜佩戴者无法观看到真实环境中的真实墙壁。
虚拟测距标志生成模块:针对每个虚拟边界对象,在虚拟边界对象能够被佩戴者观察到的一侧表面设置虚拟测距标志;具体地,例如,虚拟环境为一个真实房间对应的虚拟房间,虚拟边界对象是这个真实房间的真实墙壁对应的虚拟墙壁,则虚拟墙壁对于站在房间中央的佩戴者能够看到的一侧表面设置有虚拟测距标志。
虚拟摄像测距模块:在虚拟环境中,在VR眼镜佩戴者的头部位置处设置随动的虚拟摄像头,该虚拟摄像头持续采集各个虚拟边界对象上的虚拟测距标志,根据采集到的虚拟测距标志的图像判断虚拟摄像头与虚拟边界对象之间的距离,并在虚拟摄像头与虚拟边界对象之间的距离小于安全距离时向VR眼镜佩戴者告警。具体地,将VR眼镜的空间位置定义为VR眼镜佩戴者头部的空间位置,VR眼镜依靠加速度传感器以及室内无线定位等装置能够获知自身的姿态和定位信息,从而定义为VR眼镜佩戴者头部的姿态和定位信息,从而根据VR眼镜佩戴者头部的姿态和定位信息,虚拟摄像头在虚拟环境中能够随着VR眼镜佩戴者头部跟随运动。进一步地,由于虚拟摄像头是虚拟的,因此其拍摄角度可以设置为全方位的,其拍摄角度可以是沿球面的每一个半径方向向外,因此可以同时拍摄到虚拟环境中的全部虚拟测距标志,解决了真实摄像头在拍摄一面墙壁时无法拍摄另一面对面的墙壁。虚拟摄像头与虚拟边界对象之间的距离是指最小距离,即虚拟摄像头作为一个点沿作为一个面的虚拟边界对象的法向上的距离,即最小距离。
在一个优选例中,所述虚拟摄像头具有虚拟测距标志在各个距离与角度之下的样本图像,查找到与采集到的虚拟测距标志的图像最为匹配的样本图像,将样本图像对应的距离与角度作为虚拟摄像头相对于虚拟测距标志的空间关系,由于虚拟测距标志在虚拟边界对象上的位置是预先已知的,因此根据虚拟摄像头相对于虚拟测距标志的空间关系得到虚拟摄像头相对于虚拟边界对象的距离,作为VR眼镜佩戴者与真实边界对象之间的距离。
在另一个优选例中,所述虚拟测距标志是具有立体形状的凸多面体,该凸多面体的每一个面上记载有角度标识号,所述角度标识号用于指示所在面的朝向角度;凸多面体上只有正对所述虚拟摄像头的面上的角度标识号才能被虚拟摄像头采集读取到;凸多面体的面的数量大于一百个、一千个或者一万个,各个凸多面体的各个面之间的形状、面积相同;所述虚拟摄像头根据采集读取到的角度标识号得到相对于虚拟测距标志的角度,所述虚拟摄像头根据角度标识号所在的凸多面体的面的尺寸大小得到相对于虚拟测距标志的距离;所述虚拟摄像头根据所述相对于虚拟测距标志的角度、相对于虚拟测距标志的距离,得到相对于虚拟测距标志所在的虚拟边界对象的距离。
在还有一个优选例中,所述虚拟测距标志是具有立体形状的凸多面体,该凸多面体的每一个面上记载有角度标识号,所述角度标识号用于指示所在面的朝向角度;凸多面体上只有正对所述虚拟摄像头的面上的角度标识号才能被虚拟摄像头采集读取到;凸多面体的面的数量大于一百个、一千个或者一万个,各个凸多面体的各个面之间的形状、面积相同;所述虚拟摄像头根据在同一个空间位置下同时采集读取到的分别来自不同凸多面体上的角度标识号,将这些角度标识号朝向方向交叉点处的空间位置作为所述虚拟摄像头的空间位置,进而根据虚拟边界对象的空间位置得到所述虚拟摄像头相对于虚拟边界对象的距离。尤其是,凸多面体的面的数量足够多,总有一个面是正对虚拟摄像头的。
所述VR眼镜的显示控制系统还包括:
真实位置检测模块:根据佩戴者与虚拟边界对象空间关系获取佩戴者与真实边界对象空间关系;具体地,如果虚拟边界对象、真实边界对象与佩戴者的关系是一致的,例如真实墙壁和虚拟墙壁均在佩戴者前方1米处,则佩戴者过于靠近虚拟墙壁意味着获取到佩戴者过于靠近真实墙壁的危险。为了安全,虚拟边界对象相对于真实边界对象更加靠近佩戴者,进而即使佩戴者未按照安全要求而在虚拟环境中刚碰撞到虚拟墙壁,此时由于虚拟墙壁相对于真实墙壁靠近佩戴者,因此佩戴者此时并没有碰撞到真实墙壁,但也足以引起安全警惕,一旦虚拟墙壁被碰撞到则提示佩戴者不能继续越过虚拟墙壁而向真实墙壁继续靠近。所以,尤其是,佩戴者与虚拟边界对象空间关系、佩戴者与真实边界对象空间关系两者是一致的,或者佩戴者与虚拟边界对象空间关系指示佩戴者与真实边界对象发生碰撞的空间关系的可能性。
外部展示模块:根据佩戴者与虚拟边界对象之间距离的变化,令VR眼镜外表面的显示设备或光源设备展示的信息动态变化;具体地,由于VR眼镜的双目显示屏只向佩戴者展示,而对于非佩戴者无法被观看到,当佩戴者为儿童时,需要有监护人作为非佩戴者在旁进行观察保护,虽然安全主要靠儿童自己避免碰撞到虚拟墙壁等虚拟边界对象,但监护人需要知道虚拟边界对象是否真的成功生成并展示给了儿童。所以,在VR眼镜的外表面设置显示设备,例如显示器,或者设置光源设备,例如LED光源,当佩戴者与虚拟边界对象之间的距离变化得越来越近时,显示器的红色区域的面积越大,或者LED光源的亮度越高,以此来表征佩戴者在虚拟环境中与虚拟边界对象之间距离的变化。若儿童已经过于接近真实墙壁,而红色区域的面积没有变大,或者LED光源的亮度没有提高,则存在虚拟墙壁并没有生成并展示的可能性,有必要由监护人自己佩戴VR眼镜进行安全检查。
虚拟触感产生模块:令VR眼镜在虚拟边界对象处展示虚拟触摸对象;VR眼镜虽然能够提高视觉上的沉浸感,但是在触觉上一直欠缺实体感,现有技术是让VR眼镜的佩戴者穿戴传感手套,通过传感手套上的振动器来替代触觉,但是其真实感仍然是欠缺的,例如佩戴者在虚拟环境中抚摸虚拟房间的虚拟墙壁,如果仅仅传感手套进行振动,显然并不能模拟出真实抚摸墙壁的触感,仅仅是不同体感之间的替代,而非模拟。为解决这一问题,本发明令VR眼镜在虚拟边界对象处展示虚拟触摸对象,例如在虚拟墙壁处展示壁画、海报等虚拟触摸对象,佩戴者在虚拟环境中触摸虚拟海报时,由于虚拟海报所处的虚拟墙壁与真实墙壁的位置是一致的,因此佩戴者在真实环境中的动作是触摸真实墙壁,从而模拟出抚摸海报的触感,而非用振动等另一种明显不同的体感来替代。
下面通过更多的优选例对本发明进行更为具体的说明。
所述真实边界获取模块包括:
初始提示模块:VR眼镜提示佩戴者保持当前的初始位置不变的前提下转动头部朝向以覆盖扫描佩戴者所处于的真实环境,并从真实环境中获得真实边界对象;具体地,佩戴者在空旷的真实房间中央佩戴上VR眼镜,VR眼镜语音提示佩戴者保持当前站立的初始位置不动,仅仅是扭转腰部与转动头部,环视整个真实房间,从而获取整个真实房间的全景图像作为真实环境,并从中获得真实房间的墙壁、天花板作为真实边界对象;其中,空旷的真实房间可以是指墙壁没有受到物品等遮挡的真实房间。
移动提示模块:VR眼镜提示佩戴者向距离最远的真实边界对象进行位置移动,直到佩戴者移动到距离最远的真实边界对象的预设安全距离位置处,然后依据提示佩戴者保持当前的初始位置不变的前提下转动头部朝向以覆盖扫描所得的佩戴者所处于的真实环境,修正所述真实边界对象;例如,佩戴者初始时站在真实房间的一侧,环视时发现天花板安装有吊灯,吊灯的一侧的天花板可见,但是吊灯遮挡住了另一侧的天花板,VR眼镜提示佩戴者向真实房间的另一侧进行位置移动,直到佩戴者移动到距离最远的真实边界对象的预设安全距离位置处,其中,VR眼镜可以通过摄像机采集佩戴者头部前方的真实环境的影像并实时播放展示给佩戴者,因此佩戴者相当于是直接观看到前方的真实环境,也就能看到真实房间的另一侧的真实墙壁而不会碰撞到真实墙壁上,但是VR眼镜仍然可以通过数字图像处理识别测距或者激光测距等现有技术中的方式得到佩戴者与真实墙壁之间的距离,预设安全距离可以设置为1米,即VR眼镜指示佩戴者移动到距离另一侧真实墙壁1米处停下,然后依据提示佩戴者保持当前的初始位置不变的前提下转动头部朝向以覆盖扫描所得的佩戴者所处于的真实环境,来修正所述真实边界对象,即当佩戴者移动到吊灯的另一侧时,能够获得吊灯的另一侧的天花板的信息,来修正所述真实边界对象,得到完整的真实的天花板。
所述虚拟边界生成模块包括:
虚拟边界对象设定模块:在虚拟环境中按照真实边界对象与佩戴者的真实距离位置生成与佩戴者距离位置一致的虚拟边界对象,例如令虚拟墙壁与真实墙壁重合;或者,在虚拟环境中的位于真实边界对象与佩戴者之间真实空间对应的虚拟空间中一致的朝向上生成虚拟边界对象,例如在真实墙壁面向佩戴者的一面上离开距离生成虚拟墙壁,使得虚拟墙壁与真实墙壁之间存在间隙;
虚拟环境生成展示模块:生成虚拟环境,在虚拟环境中展示虚拟边界对象;或者,以虚拟边界对象的包络空间的边界为边界,生成虚拟环境,并在虚拟环境中展示虚拟边界对象;具体地,例如,各个虚拟边界对象构成一个宇宙空间站的太空舱体的四周墙壁与天花板,太空舱体的墙壁与天花板可以是半透明的虚拟的玻璃,而虚拟环境为宇宙空间,从而令佩戴者置身于宇宙的沉浸感,但与此同时又可以观察到虚拟的玻璃的存在,避免过于靠近玻璃而碰撞到真实墙壁。又例如,以虚拟边界对象的包络空间的边界为边界,生成虚拟环境,比如生成一个不透明的太空舱体,由于佩戴者收到真实墙壁等真实边界对象的限制阻挡而无法移动到与真实边界对象重合的虚拟边界对象的外部,因此虚拟环境在虚拟边界对象的外部的图像不必生成,以节省数字图像处理的计算资源,即按照真实边界对象确定需生成图像的范围,从而不对与真实边界对象重合的虚拟边界对象的外部的图像进行生成。
所述真实检测获得模块包括:
最小距离获取模块:获取VR眼镜或者佩戴者身体部位随动设备中与虚拟边界对象的最小距离;具体地,佩戴者身体部位随动设备可以是附着在佩戴者手腕上的智能手环或智能手表,或者VR控制手柄,甚至是佩戴者手持的智能手机等设备,佩戴者身体部位随动设备可以具有陀螺仪传感器、加速度传感器等传感器,还可以具有无线定位尤其是室内无线定位功能的器件,从而能够感知自身的空间位置与自身的姿态。VR眼镜也可以具有室内无线定位功能的器件,从而VR眼镜与随动设备之间的相对位置关系是可以得到的,VR眼镜与虚拟边界对象之间的相对位置关系也是可以得到的,进而能够得到随动设备与虚拟边界对象之间的相关位置关系,继而得到随动设备与虚拟边界对象之间的距离,当只有一个随动设备时,该距离记为最小距离,当有多个随动设备时,所述最小距离为最接近虚拟边界对象的随动设备与虚拟边界对象之间的距离。
距离判断模块:判断最小距离是否大于安全距离阈值;若是,则继续获取实时的最小距离;若否,则VR眼镜停止展示虚拟边界对象,停止展示虚拟环境,并展示实时的真实环境和真实边界对象;以此来向佩戴者提示佩戴者与真实边界对象空间关系是否安全。当最小距离小于等于安全距离阈值时,例如安全距离阈值为1米,最小距离小于等于1米时,VR眼镜停止展示虚拟边界对象,停止展示虚拟环境,使得佩戴者脱离沉浸感,并且向佩戴者播放实时获取的前方的真实环境的影像,从而告警佩戴者存在碰撞到真实墙壁等真实边界对象的安全风险。
所述外部展示模块包括:
距离动态获取模块:获取佩戴者与虚拟边界对象的最近距离,根据最近距离得到对应的安全等级,其中,最近距离越大则安全等级越高;最近距离越小则安全等级越低;
外部距离展示模块:根据安全等级变化VR眼镜外表面的显示设备或光源设备展示的信息,以反映安全等级的变化。例如安全等级较高时,显示设备显示绿色,或者光源设备出射绿色光线,安全等级较低时意味着佩戴者过于接近真实墙壁可能发生碰撞的危险,则显示设备显示红色,或者光源设备出射红色光线,使得作为旁观者的非佩戴者可以作为安全员知道虚拟边界对象是否已生成并展示给佩戴者。
所述虚拟触感产生模块包括:
温度图像变化检测模块:令VR眼镜采集佩戴者朝向方向处或视觉焦点处虚拟边界对象对应的真实边界对象的红外成像的图像中的温度变化区域;当佩戴者的手部温度较高,真实墙壁的温度较低时,真实墙壁被手部碰触受热后的区域在红外成像图像中发生变化;但是温度发生变化的区域不一定是佩戴者的手部的碰触,还可能是中央空调输出的空气引起的温度变化。
手部距离判断模块:获取佩戴者手部随动设备与佩戴者朝向方向处或视觉焦点处的该虚拟边界对象之间的距离,若小于触感距离阈值,则认为佩戴者在触摸该真实边界对象,触发触感匹配模块执行;例如,触感距离阈值为3cm、2cm、1cm,也可以是0cm,也可以是-3cm、-2cm、-1cm,即手部随动设备穿过了虚拟边界对象。
触感匹配模块:若佩戴者手部随动设备与红外成像的图像中的温度变化区域之间的距离小于匹配阈值,则认为温度变化区域的温度变化是由于佩戴者手部接触该真实边界对象导致的,将该虚拟边界对象在虚拟环境中按照真实边界对象的位置保持一致地展示,使得佩戴者在虚拟环境中的虚拟对手碰触到或脱离于虚拟边界对象时,佩戴者在真实环境中的真实手部分别相应地碰触到或脱离于真实边界对象。具体地,佩戴者手部随动设备与红外成像的图像中的温度变化区域之间的距离可以是指随动设备与温度变化区域之间的最小距离,也可以是指随动设备与温度变化区域几何中心之间的距离,所述将该虚拟边界对象在虚拟环境中按照真实边界对象的位置保持一致地展示,即虚拟边界对象与真实边界对象重合,使得佩戴者触摸真实边界对象的触感能够模拟为触摸虚拟边界对象的触感。
在一个优选例中,尤其是,在所述真实检测获得模块中VR眼镜停止展示虚拟边界对象,停止展示虚拟环境,并展示实时的真实环境和真实边界对象,以此来向佩戴者提示佩戴者与真实边界对象空间关系是否安全的过程中,虚拟边界对象虽然向佩戴者停止展示,即不可见,但是虚拟边界对象仍然保持生成状态,只是不可见而已,从而触感匹配模块能够被触发执行,进而虚拟边界对象重新被展示为佩戴者可见。
根据本发明提供的一种存储有计算机程序的计算机可读存储介质,所述计算机程序被处理器执行时实现所述的VR眼镜的显示控制方法的步骤。
根据本发明提供的一种VR眼镜,包括所述的VR眼镜的显示控制系统,或者包括存储有计算机程序的计算机可读存储介质。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变化或修改,这并不影响本发明的实质内容。在不冲突的情况下,本申请的实施例和实施例中的特征可以任意相互组合。
Claims (10)
1.一种VR眼镜的显示控制方法,其特征在于,包括:
注视点获取步骤:获取VR眼镜佩戴者的注视点;
注视点远近判断步骤:判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。
2.根据权利要求1所述的虚拟环境与现实环境图像切换的控制方法,其特征在于,在虚拟环境中具有第一虚拟物体,第一虚拟物体由近及远延伸;第一虚拟物体的近端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第一虚拟物体由远及近运动时,预启动VR眼镜的摄像头获取实时的现实环境的图像进行预加载。
3.根据权利要求2所述的虚拟环境与现实环境图像切换的控制方法,其特征在于,在现实环境的图像上叠加第二虚拟物体,第二虚拟物体由远及近延伸;第二虚拟物体的远端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第二虚拟物体由近及远运动时,预加载虚拟环境的图像。
4.根据权利要求3所述的虚拟环境与现实环境图像切换的控制方法,其特征在于,所述第一虚拟物体在虚拟环境中始终位于视野范围内;所述第二虚拟物体在视野范围内始终叠加在现实环境的图像上。
5.根据权利要求4所述的虚拟环境与现实环境图像切换的控制方法,其特征在于,第一虚拟物体的近端与第二虚拟物体的远端由VR眼镜显示屏的同一区域的像素显示。
6.一种VR眼镜的显示控制系统,其特征在于,包括:
注视点获取模块:获取VR眼镜佩戴者的注视点;
注视点远近判断模块:判断注视点相对于VR眼镜佩戴者的距离是否大于等于切换阈值,其中,所述切换阈值为距离值;若是,则令VR眼镜向VR眼镜佩戴者显示虚拟环境;若否,则令VR眼镜向VR眼镜佩戴者显示实时的现实环境,其中,所述现实环境的图像通过VR眼镜具有的摄像头实时拍摄获得。
7.根据权利要求6所述的虚拟环境与现实环境图像切换的控制系统,其特征在于,在虚拟环境中具有第一虚拟物体,第一虚拟物体由近及远延伸;第一虚拟物体的近端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第一虚拟物体由远及近运动时,预启动VR眼镜的摄像头获取实时的现实环境的图像进行预加载。
8.根据权利要求7所述的虚拟环境与现实环境图像切换的控制系统,其特征在于,在现实环境的图像上叠加第二虚拟物体,第二虚拟物体由远及近延伸;第二虚拟物体的远端距离VR眼镜佩戴者的距离等于切换阈值;
当VR眼镜佩戴者的注视点沿第二虚拟物体由近及远运动时,预加载虚拟环境的图像。
9.根据权利要求8所述的虚拟环境与现实环境图像切换的控制系统,其特征在于,所述第一虚拟物体在虚拟环境中始终位于视野范围内;所述第二虚拟物体在视野范围内始终叠加在现实环境的图像上。
10.根据权利要求9所述的虚拟环境与现实环境图像切换的控制系统,其特征在于,第一虚拟物体的近端与第二虚拟物体的远端由VR眼镜显示屏的同一区域的像素显示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011453265.9A CN112579029A (zh) | 2020-12-11 | 2020-12-11 | Vr眼镜的显示控制方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011453265.9A CN112579029A (zh) | 2020-12-11 | 2020-12-11 | Vr眼镜的显示控制方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112579029A true CN112579029A (zh) | 2021-03-30 |
Family
ID=75131307
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011453265.9A Pending CN112579029A (zh) | 2020-12-11 | 2020-12-11 | Vr眼镜的显示控制方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112579029A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115166975A (zh) * | 2022-06-30 | 2022-10-11 | 上海摩勤智能技术有限公司 | 亮度动态调节方法、装置、终端及存储介质 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014110469A1 (en) * | 2013-01-12 | 2014-07-17 | Microsoft Corporation | Wearable behavior-based vision system |
US20160042567A1 (en) * | 2014-08-05 | 2016-02-11 | Utherverse Digital Inc. | Immersive displays |
CN105378596A (zh) * | 2013-06-08 | 2016-03-02 | 索尼电脑娱乐公司 | 用于头戴式显示器中在透明模式与非透明模式之间转变的系统和方法 |
WO2016087033A1 (de) * | 2014-12-05 | 2016-06-09 | Audi Ag | Verfahren zum betreiben einer virtual-reality-brille und anzeigevorrichtung |
CN106527682A (zh) * | 2016-09-27 | 2017-03-22 | 北京小米移动软件有限公司 | 切换环境画面的方法及装置 |
CN106575155A (zh) * | 2014-07-25 | 2017-04-19 | 微软技术许可有限责任公司 | 沉浸在虚拟现实环境中时的防绊倒 |
CN106843790A (zh) * | 2017-01-25 | 2017-06-13 | 触景无限科技(北京)有限公司 | 一种信息展示系统和方法 |
CN106951316A (zh) * | 2017-03-20 | 2017-07-14 | 北京奇虎科技有限公司 | 虚拟模式与现实模式的切换方法、装置及虚拟现实设备 |
CN107251100A (zh) * | 2015-02-27 | 2017-10-13 | 微软技术许可有限责任公司 | 将物理受限的虚拟环境模制和锚定到现实环境 |
CN107402632A (zh) * | 2017-07-12 | 2017-11-28 | 青岛海信移动通信技术股份有限公司 | 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 |
US20170358141A1 (en) * | 2016-06-13 | 2017-12-14 | Sony Interactive Entertainment Inc. | HMD Transitions for Focusing on Specific Content in Virtual-Reality Environments |
CN107590859A (zh) * | 2017-09-01 | 2018-01-16 | 广州励丰文化科技股份有限公司 | 一种混合现实画面处理方法及服务设备 |
US20180136716A1 (en) * | 2015-12-22 | 2018-05-17 | Audi Ag | Method for operating a virtual reality system, and virtual reality system |
CN108427595A (zh) * | 2018-03-13 | 2018-08-21 | 网易(杭州)网络有限公司 | 虚拟现实中用户界面控件显示位置的确定方法及装置 |
CN108919958A (zh) * | 2018-07-16 | 2018-11-30 | 北京七鑫易维信息技术有限公司 | 一种图像传输方法、装置、终端设备及存储介质 |
EP3441847A1 (en) * | 2017-08-08 | 2019-02-13 | Vestel Elektronik Sanayi ve Ticaret A.S. | Controller for use in a display device |
CN109561333A (zh) * | 2017-09-27 | 2019-04-02 | 腾讯科技(深圳)有限公司 | 视频播放方法、装置、存储介质和计算机设备 |
CN110187855A (zh) * | 2019-05-28 | 2019-08-30 | 武汉市天蝎科技有限公司 | 近眼显示设备的避免全息影像阻挡视线的智能调节方法 |
CN210691256U (zh) * | 2018-07-15 | 2020-06-05 | 广东联大智能科技有限公司 | 一种显示方式切换的穿戴设备 |
-
2020
- 2020-12-11 CN CN202011453265.9A patent/CN112579029A/zh active Pending
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014110469A1 (en) * | 2013-01-12 | 2014-07-17 | Microsoft Corporation | Wearable behavior-based vision system |
CN105378596A (zh) * | 2013-06-08 | 2016-03-02 | 索尼电脑娱乐公司 | 用于头戴式显示器中在透明模式与非透明模式之间转变的系统和方法 |
CN106575155A (zh) * | 2014-07-25 | 2017-04-19 | 微软技术许可有限责任公司 | 沉浸在虚拟现实环境中时的防绊倒 |
US20160042567A1 (en) * | 2014-08-05 | 2016-02-11 | Utherverse Digital Inc. | Immersive displays |
WO2016087033A1 (de) * | 2014-12-05 | 2016-06-09 | Audi Ag | Verfahren zum betreiben einer virtual-reality-brille und anzeigevorrichtung |
CN107251100A (zh) * | 2015-02-27 | 2017-10-13 | 微软技术许可有限责任公司 | 将物理受限的虚拟环境模制和锚定到现实环境 |
US20180136716A1 (en) * | 2015-12-22 | 2018-05-17 | Audi Ag | Method for operating a virtual reality system, and virtual reality system |
US20170358141A1 (en) * | 2016-06-13 | 2017-12-14 | Sony Interactive Entertainment Inc. | HMD Transitions for Focusing on Specific Content in Virtual-Reality Environments |
CN106527682A (zh) * | 2016-09-27 | 2017-03-22 | 北京小米移动软件有限公司 | 切换环境画面的方法及装置 |
CN106843790A (zh) * | 2017-01-25 | 2017-06-13 | 触景无限科技(北京)有限公司 | 一种信息展示系统和方法 |
CN106951316A (zh) * | 2017-03-20 | 2017-07-14 | 北京奇虎科技有限公司 | 虚拟模式与现实模式的切换方法、装置及虚拟现实设备 |
CN107402632A (zh) * | 2017-07-12 | 2017-11-28 | 青岛海信移动通信技术股份有限公司 | 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 |
EP3441847A1 (en) * | 2017-08-08 | 2019-02-13 | Vestel Elektronik Sanayi ve Ticaret A.S. | Controller for use in a display device |
CN107590859A (zh) * | 2017-09-01 | 2018-01-16 | 广州励丰文化科技股份有限公司 | 一种混合现实画面处理方法及服务设备 |
CN109561333A (zh) * | 2017-09-27 | 2019-04-02 | 腾讯科技(深圳)有限公司 | 视频播放方法、装置、存储介质和计算机设备 |
CN108427595A (zh) * | 2018-03-13 | 2018-08-21 | 网易(杭州)网络有限公司 | 虚拟现实中用户界面控件显示位置的确定方法及装置 |
CN210691256U (zh) * | 2018-07-15 | 2020-06-05 | 广东联大智能科技有限公司 | 一种显示方式切换的穿戴设备 |
CN108919958A (zh) * | 2018-07-16 | 2018-11-30 | 北京七鑫易维信息技术有限公司 | 一种图像传输方法、装置、终端设备及存储介质 |
CN110187855A (zh) * | 2019-05-28 | 2019-08-30 | 武汉市天蝎科技有限公司 | 近眼显示设备的避免全息影像阻挡视线的智能调节方法 |
Non-Patent Citations (4)
Title |
---|
LYNCH, SD等: "Effect of Virtual Human Gaze Behaviour During an Orthogonal Collision Avoidance Walking Task", 《25TH 2018 IEEE CONFERENCE ON VIRTUAL REALITY AND 3D USER INTERFACES (VR)》, 1 January 2018 (2018-01-01), pages 136 - 142 * |
刘世彬;: "HLA技术在火炮虚拟现实仿真系统中的应用与实现", 网络与信息, no. 09, 9 September 2012 (2012-09-09) * |
徐利德;: "虚拟现实技术对人眼视觉认知的影响研究", 中国传媒科技, no. 05, 15 May 2017 (2017-05-15) * |
邵艳梅;: "VR眼镜的视觉交互分析", 自然辩证法研究, no. 05, 18 May 2020 (2020-05-18) * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115166975A (zh) * | 2022-06-30 | 2022-10-11 | 上海摩勤智能技术有限公司 | 亮度动态调节方法、装置、终端及存储介质 |
CN115166975B (zh) * | 2022-06-30 | 2023-12-22 | 上海摩勤智能技术有限公司 | 亮度动态调节方法、装置、终端及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220088476A1 (en) | Tracking hand gestures for interactive game control in augmented reality | |
US20180046874A1 (en) | System and method for marker based tracking | |
US11520399B2 (en) | Interactive augmented reality experiences using positional tracking | |
KR20230164185A (ko) | 가상 및 그래픽 요소들을 제어하기 위한 매핑된 손 영역들 사이의 양손 상호 작용들 | |
US9851786B2 (en) | System and method for assisting a user in remaining in a selected area while the user is in a virtual reality environment | |
US20180275755A1 (en) | Method of interaction by gaze and associated device | |
CN111108462B (zh) | 用于头戴式显示系统的测距和附件跟踪 | |
US20160189426A1 (en) | Virtual representations of real-world objects | |
ES2746448T3 (es) | Realidad mediada | |
WO2015200419A1 (en) | Detecting a primary user of a device | |
EP2965265A2 (en) | Inconspicuous tag for generating augmented reality experiences | |
CN109358754B (zh) | 一种混合现实头戴显示系统 | |
EP3101629B1 (en) | Mediated reality | |
EP3163407A1 (en) | Method and apparatus for alerting to head mounted display user | |
JP2024054137A (ja) | 画像表示システム | |
WO2019187862A1 (ja) | 情報処理装置、情報処理方法、および記録媒体 | |
EP4172740A1 (en) | Augmented reality eyewear with speech bubbles and translation | |
KR20230026503A (ko) | 사회적 거리두기를 사용한 증강 현실 경험들 | |
CN112269472A (zh) | 构建虚拟边界对象的方法和系统及其vr眼镜 | |
JPH10198506A (ja) | 座標検出システム | |
CN117337426A (zh) | 音频加强的增强现实 | |
CN112579029A (zh) | Vr眼镜的显示控制方法和系统 | |
CN110716685B (zh) | 图像显示方法,图像显示装置、系统及其实体对象 | |
CN112468798A (zh) | 虚拟测距标志的处理方法和系统及其vr眼镜 | |
CN117581147A (zh) | 具有x射线效应的增强现实眼镜 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |