CN107402632A - 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 - Google Patents
切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 Download PDFInfo
- Publication number
- CN107402632A CN107402632A CN201710565103.6A CN201710565103A CN107402632A CN 107402632 A CN107402632 A CN 107402632A CN 201710565103 A CN201710565103 A CN 201710565103A CN 107402632 A CN107402632 A CN 107402632A
- Authority
- CN
- China
- Prior art keywords
- intelligent glasses
- wearer
- reality image
- augmented reality
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000011521 glass Substances 0.000 title claims abstract description 130
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 64
- 238000000034 method Methods 0.000 title claims abstract description 43
- 210000001747 pupil Anatomy 0.000 claims abstract description 97
- 210000001508 eye Anatomy 0.000 claims description 48
- 238000004590 computer program Methods 0.000 claims description 4
- 210000000554 iris Anatomy 0.000 description 27
- 230000003287 optical effect Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000006978 adaptation Effects 0.000 description 7
- 239000008280 blood Substances 0.000 description 5
- 210000004369 blood Anatomy 0.000 description 5
- 230000007613 environmental effect Effects 0.000 description 5
- 239000011800 void material Substances 0.000 description 5
- 230000003321 amplification Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000003199 nucleic acid amplification method Methods 0.000 description 4
- 210000003786 sclera Anatomy 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 108010001267 Protein Subunits Proteins 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002911 mydriatic effect Effects 0.000 description 1
- 239000000049 pigment Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Multimedia (AREA)
- Optics & Photonics (AREA)
- Eye Examination Apparatus (AREA)
Abstract
本发明是关于切换显示增强现实图像和虚拟现实图像的方法和智能眼镜,上述方法包括:每隔一预设时间段采集智能眼镜佩戴者的瞳孔尺寸;若后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像;若前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像。根据本发明的实施例,根据瞳孔尺寸的变化,相对于相关技术,可以更加准确地判定佩戴者需要观看虚拟现实图像还是增强现实图像,避免误判导致错误地将智能眼镜切换显示。
Description
技术领域
本发明涉及智能眼镜技术领域,尤其涉及在智能眼镜上切换显示增强现实图像和虚拟现实图像方法和智能眼镜。
背景技术
目前的AR(Augmented Reality,增强现实)和VR(Virtual Reality,虚拟现实)在智能眼镜中可以相互转换。
具体地,可以将设置有透镜的眼罩(如图1A所示)设置在用于显示AR图像的智能眼镜(如图1B所示)上,在智能眼镜上形成一个半封闭空间(如图1C所示)。设置在智能眼镜上的光传感器可以感应环境光强度,当眼罩设置在智能眼镜上,光传感器感应到环境光的强度降低,判定佩戴者需要观看VR图像,进而控制智能眼镜显示VR图像,以为佩戴者提供沉浸式观看效果,实现从AR到VR的切换,反之,则可以实现从VR到AR的切换。
但是以这种方式来判断佩戴者是否需要观看VR图像的方式,容易出现误判的情况。例如佩戴者在观看AR图像时,做出动作引起智能眼镜中光传感器被遮挡(例如挠头),会使得光传感器的环境光强度降低,导致判定佩戴者需要观看VR图像,然而这种情况并非佩戴者观看VR图像。
发明内容
本发明提供在智能眼镜上切换显示增强现实图像和虚拟现实图像方法和智能眼镜,以解决相关技术中的不足。
根据本发明实施例的第一方面,提供在智能眼镜上切换显示增强现实图像和虚拟现实图像的方法,包括:
每隔一预设时间段采集智能眼镜佩戴者的瞳孔尺寸;
若后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像;
若前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像。
根据本发明实施例的第二方面,提供一种智能眼镜,包括:
存储器,用于存储计算机程序;
处理器,用于执行如上述实施例所述的方法。
根据上述实施例可知,在佩戴者将眼罩设置在智能眼镜上时,会导致整个智能眼镜的环境光亮度降低,从而引起瞳孔尺寸产生较大变化,进而触发智能眼镜切换显示增强现实图像至虚拟现实图像。而在相关技术中,即使佩戴者做出动作并没有遮挡整个智能眼镜,而只是引起光传感器的环境光强度降低,就会触发智能眼镜切换显示增强现实图像至虚拟现实图像。
经过比较可知,本实施例相对于相关技术触发智能眼镜切换显示增强现实图像至虚拟现实图像的条件更为严格,因此不易错误地触发智能眼镜切换显示增强现实图像至虚拟现实图像,有利于保证控制正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像的操作的准确性。
进一步地,根据上述实施例,当用户从智能眼镜上移除眼罩时,能够实现智能眼镜的自动切换显示增强现实图像和虚拟现实图像,无需用户手动切换。具体地,可以在确定瞳孔尺寸放大的情况下,自动将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像;以及在确定瞳孔尺寸缩小的情况下,自动正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1A示出了相关技术中眼罩的示意结构图。
图1B示出了相关技术中智能眼镜的示意结构图。
图1C示出了相关技术中图1A所述的眼罩和图1B所示的智能眼镜相结合的示意结构图。
图2是示出了根据本发明一个实施例的一种在智能眼镜上切换显示增强现实图像和虚拟现实图像方法的示意流程图。
图3是示出了根据本发明一个实施例的采集智能眼镜佩戴者的瞳孔尺寸的方法示意流程图。
图4A示出了根据本发明一个实施例的智能眼镜的示意结构图。
图4B示出了根据本发明一个实施例的智能眼镜的连接带的示意结构图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
在可选的一种实施方式中,图2是示出了根据本发明一个实施例的一种在智能眼镜上切换显示增强现实图像和虚拟现实图像的方法的示意流程图,该方法可以应用于既能够显示增强现实图像,又能够显示虚拟现实图像,并且能够在两者之间切换显示的智能眼镜。如图2所示,该方法包括:
步骤S11,每隔一预设时间段采集智能眼镜佩戴者的瞳孔尺寸。
可以首先确定佩戴者眼睛中的瞳孔,进而可以记录瞳孔的尺寸,例如直径、半径、面积等。预设时间可以根据需要进行设置,例如可以设置为一个较短的时长,例如2秒。
步骤S12,若后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像。
在后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值的情况下,可以确定瞳孔放大。
而在佩戴者需要从观看增强现实图像转变为观看虚拟现实图像时,需要将眼罩设置在智能眼镜上,以形成封闭空间观看虚拟现实图像,瞳孔则由于环境光亮度降低而放大。
根据本实施例,在佩戴者将眼罩设置在智能眼镜上时,会导致整个智能眼镜的环境光亮度降低,从而引起瞳孔尺寸产生较大变化,进而触发智能眼镜切换显示增强现实图像至虚拟现实图像。
在相关技术中,即使佩戴者做出动作并没有遮挡整个智能眼镜,而只是引起光传感器的环境光强度降低,就会触发智能眼镜切换显示增强现实图像至虚拟现实图像。
经过比较可知,本实施例相对于相关技术触发智能眼镜切换显示增强现实图像至虚拟现实图像的条件更为严格,因此不易错误地触发智能眼镜切换显示增强现实图像至虚拟现实图像,有利于保证控制正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像的操作的准确性。
步骤S13,若前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像。
在前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值的情况下,可以确定瞳孔缩小。
而在佩戴者需要从观看虚拟现实图像转变为观看增强现实图像时,需要将眼罩从智能眼镜上移除,以形成开放空间观看增强现实图像,瞳孔则由于环境光亮度提高而缩小。
与步骤S12相对应地,可以在前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值,也即在确定瞳孔放大的情况下,可以确定佩戴者将眼罩从智能眼镜上移除,需要观看增强现实图像,从而可以将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像,无需用户手动切换智能眼镜从显示虚拟现实图像至显示增强现实图像,实现了智能眼镜自动切换显示虚拟现实图像至显示增强现实图像。
进一步地,在智能眼镜上还可以设置有光传感器,本实施例则可以与该光传感器相配合。
例如在后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值的情况下,可以确定用户将眼罩设置在了智能眼镜上,进一步可以确定光传感器检测到的环境光的亮度是否小于第一预设亮度,若小于第一预设亮度,则可以核实用户的确将眼罩设置在了智能眼镜上,进而才将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像,保证将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像的操作是准确的。
例如在前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值的情况下,可以确定用户将眼罩从智能眼镜上移除,进一步可以确定光传感器检测到的环境光的亮度是否大于第二预设亮度,若大于第二预设亮度,则可以核实用户的确将眼罩从智能眼睛上移除,进而才将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像,保证将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像的操作是准确的。
在可选的一种实施方式中,图3是示出了根据本发明一个实施例的采集智能眼镜佩戴者的瞳孔尺寸的方法示意流程图。如图3所示,所述采集智能眼镜佩戴者的瞳孔尺寸,包括:
步骤S111,检测所述佩戴者的眼睛的灰阶值;
步骤S112,确定眼睛中灰阶值大于第一预设值的区域为虹膜区域;
步骤S113,确定所述虹膜区域内部灰阶值大于第二预设值的区域为瞳孔区域,其中,所述第二预设值大于所述第一预设值;
步骤S114,根据所述瞳孔区域的尺寸确定所述瞳孔尺寸。
在一个实施例中,人眼主要包括巩膜、虹膜和瞳孔三个区域,其中巩膜为白色,瞳孔为黑色,虹膜则根据人种的不同,可以包括绿色、蓝色、棕色等,而这三个区域颜色不同也导致灰阶值不同,其中瞳孔被虹膜所包围,一般情况下瞳孔灰阶值大于虹膜的灰阶值,虹膜的灰阶值大于巩膜的灰阶值,因此可以将眼睛中灰阶值大于第一预设值的区域确定为虹膜。
而在巩膜中,由于可能因为色素沉问题而存在黑色、棕色或灰色色块,还有可能因用眼疲劳而存在红血丝,这些区域的灰阶值也可能大于第一预设值,乃至于大于第二预设值,因此在步骤S112中,优选地,可以将确定眼睛中灰阶值大于第一预设值,且面积占眼睛面积的比例大于预设比例的区域为虹膜区域,以排除上述色块、红血丝区域。
并且由于眼睛中可能存在上述色块、红血丝区域,若直接确定眼睛中灰阶值大于第二预设值的区域为瞳孔区域,那么将有可能在色块、红血丝区域中确定出瞳孔区域,从而产生错误判定。而在确定虹膜区域后,再确定虹膜区域内部灰阶值大于第二预设值的区域为瞳孔区域,则可以避免确定在色块、红血丝区域中确定出瞳孔区域,从而保证准确地确定瞳孔区域,进而准确地确定瞳孔尺寸的变化。
在可选的一种实施方式中,在所述佩戴者佩戴了隐形眼镜时的所述第一预设阈值,与在所述佩戴者未佩戴隐形眼镜时的所述第一预设阈值不同;和/或
在所述佩戴者佩戴了隐形眼镜时的所述第一预设值,与在所述佩戴者未佩戴隐形眼镜时的所述第一预设值不同;和/或
在所述佩戴者佩戴了隐形眼镜时的所述第二预设值,与在所述佩戴者未佩戴隐形眼镜时的所述第二预设值不同。
在佩戴者佩戴了隐形眼镜的情况下,由于隐形眼镜对于光线存在反射和折射,相对于未佩戴隐形眼镜的情况,获取到的眼睛的灰阶值,以及瞳孔尺寸的变化情况都会有差异,因此针对佩戴者佩戴了隐形眼镜的情况和未佩戴隐形眼镜的情况,可以分别设置不同的第一预设阈值、第一预设值和第二预设值。
进而在检测到佩戴者佩戴隐形眼镜的情况下,可以选取一组第一预设阈值、第一预设值和第二预设值,在检测到佩戴者未佩戴隐形眼镜的情况下,则可以选取另一组第一预设阈值、第一预设值和第二预设值。从而保证在佩戴者佩戴隐形眼镜和未佩戴隐形眼镜的情况下,都能准确地确定瞳孔,以及准确地确定瞳孔放大、收缩。
在可选的一种实施方式中,在所述采集智能眼镜佩戴者的瞳孔尺寸的步骤之前,上述方法还包括:
步骤S14,根据所述佩戴者的身份信息查询所述佩戴者的虹膜的颜色,根据所述虹膜的颜色查询所述第一预设值。
佩戴者的身份信息可以是预先存储在智能眼镜中,或存储在可与智能眼镜进行通信的服务器中,也可以由佩戴者在佩戴智能眼镜时输入至智能眼镜。
佩戴者的身份信息可以包括佩戴者的国籍、种族、性别、年龄等,根据佩戴者的身份信息可以确定佩戴者所属的人种,进而确定其虹膜的颜色,例如亚洲人虹膜为棕色,欧洲人虹膜为绿色或蓝色。而由于不同颜色的虹膜的灰阶值有所不同,因此据虹膜的颜色来确定第一预设值,可以根据第一预设值更加准确地确定佩戴者眼睛中的虹膜区域,进而更加准确地确定瞳孔区域。
其中,虹膜的颜色、第一预设值以及第二预设值三者可以是一一对应的,以便能够根据身份信息准确地查询到对应的虹膜的颜色,以及根据虹膜的颜色准确地查询到第一预设值。
在可选的一种实施方式中,在所述采集智能眼镜佩戴者的瞳孔尺寸的步骤之前,上述方法还包括:
步骤S15,根据所述佩戴者的身份信息确定适应所述佩戴者的景深。
所述将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像包括:
步骤S121,根据所述景深设置所述虚拟现实图像的景深。
由于不同人种、不同年龄、不同性别等不同情况的佩戴者,所适应的观看图像的景深(包括水平视野和垂直视野)不同,而针对不同身份信息的佩戴者,可以通过大数据预先统计其适应的景深,进而可以基于获取到的佩戴者的身份信息,查询其适应的景深,从而在控制智能眼镜显示虚拟现实图像时,可以根据查询到的景深调整虚拟现实图像的景深,以保证调整后的虚拟现实图像适应该佩戴者观看,以为佩戴者提供良好的观看效果。
其中,佩戴者的身份信息和景深可以是一一对应的,以便能够根据身份信息准确地查询到对应的景深。
在可选的一种实施方式中,在所述采集智能眼镜佩戴者的瞳孔尺寸的步骤之前,上述方法还包括:
根据所述佩戴者的身份信息查询适应所述佩戴者的视野范围;
所述将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像包括:
步骤S122,根据所述视野范围设置所述虚拟现实图像的视野范围。
由于不同人种、不同年龄、不同性别等不同情况的佩戴者,所适应的观看图像的视野范围(包括水平视野和垂直视野)不同,而针对不同身份信息的佩戴者,可以通过大数据预先统计其适应的视野范围,进而可以基于获取到的佩戴者的身份信息,查询其适应的视野范围,从而在控制智能眼镜显示虚拟现实图像时,可以根据查询到的视野范围调整虚拟现实图像的视野范围,以保证调整后的虚拟现实图像适应该佩戴者观看,以为佩戴者提供良好的观看效果。
其中,佩戴者的身份信息和视野范围可以是一一对应的,以便能够根据身份信息准确地查询到对应的视野范围。
在可选的一种实施方式中,所述身份信息包括以下至少之一:
国籍、种族、性别、年龄。
其中,根据佩戴者的身份信息可以确定佩戴者所属的人种,进而确定其虹膜的颜色。从而据虹膜的颜色来确定第一预设值,可以根据第一预设值更加准确地确定佩戴者眼睛中的虹膜区域,进而更加准确地确定瞳孔区域。
并且,根据佩戴者的身份信息可以查询其适应的景深和视野范围,从而在控制智能眼镜显示虚拟现实图像时,可以根据查询到的景深和视野范围调整虚拟现实图像的景深和视野范围,以保证调整后的虚拟现实图像适应该佩戴者观看,以为佩戴者提供良好的观看效果。
在可选的一种实施方式中,在将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像之前,上述方法还包括:
步骤S16,根据所述佩戴者的瞳距调节所述智能眼镜中左眼透镜和右眼透镜之间的距离。
在相关技术中,当智能眼镜转变显示模式时,需要佩戴者手动调整左眼透镜和右眼透镜之间的距离,由于人工调节的准确度不高,并且需要反复调整才可能调整到合适的位置,导致耗时较长。
而通过获取佩戴者的瞳距,也即左眼瞳孔和右眼瞳孔之间距离,根据佩戴者的瞳距调节左眼透镜和右眼透镜之间的距离,在佩戴者将眼罩设置在智能眼镜上之后,无需佩戴者手动调节左眼透镜和右眼透镜之间的距离,便于用户快速观看到合适的VR图像。
其中,具体可以先确定的左眼瞳孔和右眼瞳孔的中心,然后根据两个中心计算瞳距,也可以根据上述身份信息确定与该身份信息相关联的瞳距。
左眼透镜和右眼透镜可以设置在套设于智能眼镜上的眼罩中,在智能眼镜中可以设置有电动马达,在根据左眼瞳孔和右眼瞳孔之间距离确定左眼透镜和右眼透镜之间的距离后,可以将左眼透镜和右眼透镜之间的距离传输至电动马达,由电动马达进行自动调节。
在可选的一种实施方式中,在将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像之后,所述方法还包括:
步骤S17,若所述瞳孔尺寸缩小,且缩小的值大于第二预设阈值,继续显示所述虚拟现实图像;
步骤S18,否则,控制所述智能眼镜显示增强现实图像。
由于VR图像相对于AR图像景深较小,因此在从观看AR图像转换为观看VR图像的时,佩戴者观看的图像会从远视野范围变为近视野范围,瞳孔在放大后,还会缩小。
因此可以通过记录智能眼镜显示虚拟现实图像之后佩戴者的瞳孔尺寸与刚切换到显示虚拟现实图像时佩戴者的瞳孔尺寸,确定佩戴者的瞳孔尺寸是否缩小,以及缩小的值。在瞳孔尺寸缩小,且缩小的值较大(例如大于第二预设阈值)的情况下,可以确定瞳孔在放大后又缩小,满足从观看AR图像转换为观看VR图像的情况,因此可以确定本次控制智能眼镜从显示AR图像切换为显示VR图像的判断是准确的,从而可以继续显示VR图像。
相应地,如果瞳孔尺寸并未缩小,或者虽然缩小了,但是缩小的值较小,那么可以确定本次控制智能眼镜从显示AR图像切换为显示VR图像的判断是错误的,重新切换为AR模式,显示原AR图像。
在可选的一种实施方式中,在将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像之后,所述方法还包括:
步骤S19,若所述瞳孔尺寸扩大,且扩大的值大于第三预设阈值,继续显示所述虚拟现实图像;
步骤S20,否则,控制所述智能眼镜显示虚拟现实图像。
由于在从观看VR图像转换为观看AR图像的时,需要将套设在智能眼镜上的眼罩摘下,导致智能眼镜的环境光亮度提高。并且VR图像的景深比AR图像的景深小,当从显示VR图像转变为显示AR图像,佩戴者观看的图像会从近视野范围变为远视野范围。
上述两种因素都会导致佩戴者的瞳孔收缩,但是其中环境光亮度提高,对瞳孔收缩的影响更大,一般会导致瞳孔过度收缩,而不适于观看显示的AR图像,需要瞳孔在适应环境光的亮度后,再放大,才能适于观看显示的AR图像。
因此可以通过记录智能眼镜显示增强现实图像之后佩戴者的瞳孔尺寸与刚切换到显示增强现实图像时佩戴者的瞳孔尺寸,确定佩戴者的瞳孔尺寸是否扩大,以及扩大的值。在瞳孔尺寸扩大,且缩小的值较大(例如大于第三预设阈值,其中,第三预设阈值可以小于上述第二预设阈值)的情况下,可以确定瞳孔在收缩后又放大,满足从观看VR图像转换为观看AR图像的情况,因此可以确定本次控制智能眼镜从显示VR图像切换为显示AR图像的判断是准确的,从而可以继续显示AR图像。
相应地,如果瞳孔尺寸并未扩大,或者虽然扩大了,但是扩大的值较小,那么可以确定本次控制智能眼镜从显示VR图像切换为显示AR图像的判断是错误的,重新切换为VR模式,显示原VR图像。
在可选的一种实施方式中,图4A和图4B示出了根据本发明一个实施例的智能眼镜的示意结构图。
如图4A所示,智能眼镜可以包括镜片、第一连接带41、第二连接带42和镜架。其中,镜片可以显示AR图像,也可以显示VR图像。
如图4B所示,在第一连接带41远离镜架的一端可以设置有多个凸起411,在第二连接带42远离镜架的一端可以设置有多个通孔421,凸起411和通孔421可以相互配合,以将第一连接带41和第二连接带42连接,以便佩戴者将智能眼镜佩戴于头上。
与上述在智能眼镜上切换显示增强现实图像和虚拟现实图像的方法相对应地,本发明还提出了一种在智能眼镜上切换显示增强现实图像和虚拟现实图像的装置。
在可选的一种实施方式中,在智能眼镜上切换显示增强现实图像和虚拟现实图像的装置包括:
尺寸确定单元,用于每隔一预设时间段采集智能眼镜佩戴者的瞳孔尺寸;
显示控制单元,用于在后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值的情况下,将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像;或
在前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值的情况下,将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像。
在可选的一种实施方式中,所述尺寸确定单元包括:
灰阶检测子单元,用于检测所述佩戴者的眼睛的灰阶值;
区域确定子单元,用于确定眼睛中灰阶值大于第一预设值的区域为虹膜区域;以及确定所述虹膜区域内部灰阶值大于第二预设值的区域为瞳孔区域,其中,所述第二预设值大于所述第一预设值;
尺寸确定子单元,用于根据所述瞳孔区域的尺寸确定所述瞳孔尺寸。
在可选的一种实施方式中,在所述佩戴者佩戴了隐形眼镜时的所述第一预设阈值,与在所述佩戴者未佩戴隐形眼镜时的所述第一预设阈值不同;和/或
在所述佩戴者佩戴了隐形眼镜时的所述第一预设值,与在所述佩戴者未佩戴隐形眼镜时的所述第一预设值不同;和/或
在所述佩戴者佩戴了隐形眼镜时的所述第二预设值,与在所述佩戴者未佩戴隐形眼镜时的所述第二预设值不同。
在可选的一种实施方式中,上述装置还包括:
颜色查询单元,用于根据所述佩戴者的身份信息查询所述佩戴者的虹膜的颜色,根据所述虹膜的颜色查询所述第一预设值和所述第二预设值。
在可选的一种实施方式中,上述装置还包括:
景深查询单元,用于根据所述佩戴者的身份信息查询适应所述佩戴者的景深和视野范围;
其中,所述显示控制单元用于根据所述景深设置所述虚拟现实图像的景深,和/或根据所述视野范围设置所述虚拟现实图像的视野范围。
在可选的一种实施方式中,所述身份信息包括以下至少之一:
国籍、种族、性别、年龄。
在可选的一种实施方式中,上述装置还包括:
透镜调节单元,用于根据所述佩戴者的瞳距调节所述智能眼镜中左眼透镜和右眼透镜之间的距离。
在可选的一种实施方式中,所述显示控制单元,还用于在将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像之后,在所述瞳孔尺寸缩小,且缩小的值大于第二预设阈值的情况下,继续显示所述虚拟现实图像;在瞳孔尺寸扩大,或缩小的值不大于第二预设值的情况下,控制所述智能眼镜显示增强现实图像。
在可选的一种实施方式中,所述显示控制单元,还用于在将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像之后,在所述瞳孔尺寸扩大,且扩大的值大于第三预设阈值,继续显示所述虚拟现实图像;在瞳孔尺寸缩小,或扩大的值不大于第三预设值的情况下,控制所述智能眼镜显示虚拟现实图像。
关于上述实施例中的装置,其中各个单元执行操作的具体方式已经在有关该装置的方法实施例中进行了详细描述,此处将不做详细阐述说明。
本发明的实施例还提出了一种在智能眼镜,包括:
存储器,用于存储计算机程序;
处理器,用于执行上述任一实施例所述的方法。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。
Claims (10)
1.一种在智能眼镜上切换显示增强现实图像和虚拟现实图像的方法,其特征在于,包括:
每隔一预设时间段采集智能眼镜佩戴者的瞳孔尺寸;
若后一次与前一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像;
若前一次与后一次采集的瞳孔尺寸的差值大于第一预设阈值,则将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像。
2.根据权利要求1所述的方法,其特征在于,所述采集智能眼镜佩戴者的瞳孔尺寸,包括:
检测所述佩戴者的眼睛的灰阶值;
确定眼睛中灰阶值大于第一预设值的区域为虹膜区域;
确定所述虹膜区域内部灰阶值大于第二预设值的区域为瞳孔区域,其中,所述第二预设值大于所述第一预设值;
根据所述瞳孔区域的尺寸确定所述瞳孔的尺寸。
3.根据权利要求2所述的方法,其特征在于,在所述采集智能眼镜佩戴者的瞳孔尺寸的步骤之前,还包括:
根据所述佩戴者的身份信息查询所述佩戴者的虹膜的颜色,根据所述虹膜的颜色查询所述第一预设值和所述第二预设值。
4.根据权利要求1所述的方法,其特征在于,在所述采集智能眼镜佩戴者的瞳孔尺寸的步骤之前,还包括:
根据所述佩戴者的身份信息查询适应所述佩戴者的景深;
所述将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像包括:
根据所述景深设置所述虚拟现实图像的景深。
5.根据权利要求1所述的方法,其特征在于,在所述采集智能眼镜佩戴者的瞳孔尺寸的步骤之前,还包括:
根据所述佩戴者的身份信息查询适应所述佩戴者的视野范围;
所述将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像包括:
根据所述视野范围设置所述虚拟现实图像的视野范围。
6.根据权利要求3-5中任一项所述的方法,其特征在于,所述身份信息包括以下至少之一:
国籍、种族、性别、年龄。
7.根据权利要求1所述的方法,其特征在于,在将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像之前,和/或在将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像之前,还包括:
根据所述佩戴者的瞳距调节所述智能眼镜中左眼透镜和右眼透镜之间的距离。
8.根据权利要求1所述的方法,其特征在于,还包括:
在将正在显示增强现实图像的智能眼镜切换为显示虚拟现实图像之后,若所述瞳孔尺寸缩小,且缩小的值大于第二预设阈值,继续显示所述虚拟现实图像;
否则,控制所述智能眼镜显示增强现实图像。
9.根据权利要求1所述的方法,其特征在于,还包括:
在将正在显示虚拟现实图像的智能眼镜切换为显示增强现实图像之后,若所述瞳孔尺寸扩大,且扩大的值大于第三预设阈值,继续显示所述虚拟现实图像;
否则,控制所述智能眼镜显示虚拟现实图像。
10.一种智能眼镜,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序,以实现权利要求1-9中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710565103.6A CN107402632A (zh) | 2017-07-12 | 2017-07-12 | 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710565103.6A CN107402632A (zh) | 2017-07-12 | 2017-07-12 | 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107402632A true CN107402632A (zh) | 2017-11-28 |
Family
ID=60405392
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710565103.6A Pending CN107402632A (zh) | 2017-07-12 | 2017-07-12 | 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107402632A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109189222A (zh) * | 2018-08-28 | 2019-01-11 | 广东工业大学 | 一种基于检测瞳孔直径变化的人机交互方法及装置 |
CN111274870A (zh) * | 2020-01-07 | 2020-06-12 | 北京小米移动软件有限公司 | 智能眼镜控制方法、智能眼镜控制装置及存储介质 |
CN112565252A (zh) * | 2020-12-04 | 2021-03-26 | 上海影创信息科技有限公司 | 基于非接触热特征的vr设备安全防护方法和系统及其vr眼镜 |
CN112579029A (zh) * | 2020-12-11 | 2021-03-30 | 上海影创信息科技有限公司 | Vr眼镜的显示控制方法和系统 |
CN112882220A (zh) * | 2021-02-10 | 2021-06-01 | 光速视觉(北京)科技有限公司 | 信息化天文望远镜系统 |
CN114236848A (zh) * | 2021-12-29 | 2022-03-25 | Oppo广东移动通信有限公司 | 挂载模组、外挂装置以及头戴式设备 |
CN115166975A (zh) * | 2022-06-30 | 2022-10-11 | 上海摩勤智能技术有限公司 | 亮度动态调节方法、装置、终端及存储介质 |
CN115981467A (zh) * | 2022-12-27 | 2023-04-18 | 北京字跳网络技术有限公司 | 一种图像合成参数确定方法、图像合成方法及装置 |
CN117636701A (zh) * | 2023-10-19 | 2024-03-01 | 广州市信息技术职业学校 | 一种基于虚拟现实技术的胶囊填充机辅助培训系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105955456A (zh) * | 2016-04-15 | 2016-09-21 | 深圳超多维光电子有限公司 | 虚拟现实与增强现实融合的方法、装置及智能穿戴设备 |
CN106873778A (zh) * | 2017-01-23 | 2017-06-20 | 深圳超多维科技有限公司 | 一种应用的运行控制方法、装置和虚拟现实设备 |
CN106886276A (zh) * | 2015-12-15 | 2017-06-23 | 北京奇虎科技有限公司 | 基于智能眼镜的观看处理方法和智能眼镜 |
-
2017
- 2017-07-12 CN CN201710565103.6A patent/CN107402632A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106886276A (zh) * | 2015-12-15 | 2017-06-23 | 北京奇虎科技有限公司 | 基于智能眼镜的观看处理方法和智能眼镜 |
CN105955456A (zh) * | 2016-04-15 | 2016-09-21 | 深圳超多维光电子有限公司 | 虚拟现实与增强现实融合的方法、装置及智能穿戴设备 |
CN106873778A (zh) * | 2017-01-23 | 2017-06-20 | 深圳超多维科技有限公司 | 一种应用的运行控制方法、装置和虚拟现实设备 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109189222A (zh) * | 2018-08-28 | 2019-01-11 | 广东工业大学 | 一种基于检测瞳孔直径变化的人机交互方法及装置 |
CN111274870A (zh) * | 2020-01-07 | 2020-06-12 | 北京小米移动软件有限公司 | 智能眼镜控制方法、智能眼镜控制装置及存储介质 |
CN112565252A (zh) * | 2020-12-04 | 2021-03-26 | 上海影创信息科技有限公司 | 基于非接触热特征的vr设备安全防护方法和系统及其vr眼镜 |
CN112579029A (zh) * | 2020-12-11 | 2021-03-30 | 上海影创信息科技有限公司 | Vr眼镜的显示控制方法和系统 |
CN112882220A (zh) * | 2021-02-10 | 2021-06-01 | 光速视觉(北京)科技有限公司 | 信息化天文望远镜系统 |
CN114236848A (zh) * | 2021-12-29 | 2022-03-25 | Oppo广东移动通信有限公司 | 挂载模组、外挂装置以及头戴式设备 |
CN114236848B (zh) * | 2021-12-29 | 2024-02-27 | Oppo广东移动通信有限公司 | 挂载模组、外挂装置以及头戴式设备 |
CN115166975A (zh) * | 2022-06-30 | 2022-10-11 | 上海摩勤智能技术有限公司 | 亮度动态调节方法、装置、终端及存储介质 |
CN115166975B (zh) * | 2022-06-30 | 2023-12-22 | 上海摩勤智能技术有限公司 | 亮度动态调节方法、装置、终端及存储介质 |
CN115981467A (zh) * | 2022-12-27 | 2023-04-18 | 北京字跳网络技术有限公司 | 一种图像合成参数确定方法、图像合成方法及装置 |
CN115981467B (zh) * | 2022-12-27 | 2023-09-01 | 北京字跳网络技术有限公司 | 一种图像合成参数确定方法、图像合成方法及装置 |
CN117636701A (zh) * | 2023-10-19 | 2024-03-01 | 广州市信息技术职业学校 | 一种基于虚拟现实技术的胶囊填充机辅助培训系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107402632A (zh) | 切换显示增强现实图像和虚拟现实图像的方法和智能眼镜 | |
EP3294113B1 (en) | Eye tracking device and method for operating an eye tracking device | |
EP1131663B1 (en) | Eye tracking system | |
CN105164576B (zh) | 对适配于佩戴者的头戴式电光设备进行控制的方法 | |
US10048750B2 (en) | Content projection system and content projection method | |
CN105579884B (zh) | 用于确定人的两个眼睛的瞳孔中间点的方法和眼镜 | |
US10002293B2 (en) | Image collection with increased accuracy | |
CN107890336B (zh) | 基于智能手持设备的屈光度检测系统 | |
JP6461425B2 (ja) | 映像投影機能付き眼鏡 | |
JP5289962B2 (ja) | 視力矯正支援システム | |
CN107111360A (zh) | 可安装在眼镜上的眼睛跟踪设备 | |
JP6481084B2 (ja) | 映像表示機能付き眼鏡 | |
CA2915166A1 (en) | Focal length adjustment | |
JP4811683B2 (ja) | 視野検出装置 | |
JPH07229714A (ja) | 車両用視線方向計測装置 | |
CN111417893B (zh) | 用于检验眼科镜片在镜架中的安装的方法和组件 | |
JP7053833B2 (ja) | 被検者の参照頭位を特定する方法及び装置 | |
KR20170121477A (ko) | 자동 초점 조절 안경 및 조정 데이터 산출 장치의 구동 방법 | |
JPH06323832A (ja) | 車両用インターフェイス | |
CN113064278A (zh) | 视觉增强方法、系统、计算机存储介质及智能眼镜 | |
JPH09276226A (ja) | 眼光学装置及び視線入力装置 | |
CN112149453A (zh) | 眼球追踪的校准方法、装置及系统 | |
JPH1099274A (ja) | 視線検出装置及び光学機器 | |
JPH08184748A (ja) | 視線検出機能付き合焦判別装置及びカメラ | |
JPH09145990A (ja) | 視線検出装置を有するカメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171128 |
|
RJ01 | Rejection of invention patent application after publication |