CN109766820A - 一种眼球追踪装置、头戴式设备和眼部图像获取方法 - Google Patents

一种眼球追踪装置、头戴式设备和眼部图像获取方法 Download PDF

Info

Publication number
CN109766820A
CN109766820A CN201910009144.6A CN201910009144A CN109766820A CN 109766820 A CN109766820 A CN 109766820A CN 201910009144 A CN201910009144 A CN 201910009144A CN 109766820 A CN109766820 A CN 109766820A
Authority
CN
China
Prior art keywords
light source
unit
source unit
eyeball tracking
tracking device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910009144.6A
Other languages
English (en)
Inventor
李俊生
王云飞
黄通兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing 7Invensun Technology Co Ltd
Beijing Qixin Yiwei Information Technology Co Ltd
Original Assignee
Beijing Qixin Yiwei Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qixin Yiwei Information Technology Co Ltd filed Critical Beijing Qixin Yiwei Information Technology Co Ltd
Priority to CN201910009144.6A priority Critical patent/CN109766820A/zh
Publication of CN109766820A publication Critical patent/CN109766820A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Eye Examination Apparatus (AREA)

Abstract

本发明公开了一种眼球追踪装置、头戴式设备和眼部图像获取方法。所述眼球追踪装置包括:光源单元,所述光源单元被配置为发射光束射向用户眼部;分束器单元,所述分束器单元被配置为能透过至少第一波段的光并反射第二波段的光,所述光源单元发射的光束经过所述用户眼部反射至所述分束器单元;图像采集单元,所述图像采集单元用于采集眼部图像。利用该眼球追踪装置能够在不遮挡用户视线的基础上,提高获取的眼部图像的质量。

Description

一种眼球追踪装置、头戴式设备和眼部图像获取方法
技术领域
本发明实施例涉及眼球追踪技术领域,尤其涉及一种眼球追踪装置、头戴式设备和眼部图像获取方法。
背景技术
随着人工智能、机器视觉等领域的快速发展,眼球追踪技术得到了广泛的应用,眼球追踪,也称为视线追踪,是通过测量眼睛运动情况来估计眼睛的视线和/或注视点的技术。现有眼球追踪装置主要包括照明单元和采集单元,照明单元发出的光源经过人眼反射最终成像在采集单元上。
然而,现有眼球追踪装置通过采集单元获取眼部图像时,无法保证不遮挡用户视线的前提下,获取质量好的眼部图像,严重影响了用户使用眼球追踪装置的体验。
发明内容
本发明实施例提供了一种眼球追踪装置、头戴式设备和眼部图像获取方法,以在不遮挡用户视线的基础上,提高获取的眼部图像的质量。
第一方面,本发明实施例提供了一种眼球追踪装置,包括:
光源单元,所述光源单元被配置为发射光束射向用户眼部;
分束器单元,所述分束器单元被配置为能透过至少第一波段的光并反射第二波段的光,所述光源单元发射的光束经过所述用户眼部反射至所述分束器单元;
图像采集单元,所述图像采集单元用于采集眼部图像。
可选的,眼球追踪装置,还包括壳体,
所述分束器单元布置在所述壳体的通孔内;
所述光源单元和所述图像采集单元分别布置在所述壳体上。
可选的,所述壳体上开设有安装槽;
所述安装槽包括底座和侧壁,所述底座用于固定所述光源单元,所述侧壁与所述底座的夹角在预设范围内,以限定所述光源单元的照射范围。
可选的,眼球追踪装置,还包括透镜;
所述透镜布置在所述分束器单元的远离所述用户眼部的侧面上。
可选的,所述分束器单元贴合设置于所述透镜表面。
可选的,所述光源单元的出光侧朝向所述用户眼部布置,所述光源单元发射的光束直接经过所述用户眼部反射至所述分束器单元。
可选的,所述光源单元的出光侧朝向所述分束器单元布置,所述光源单元发射的光束经过所述分束器单元反射后再由所述用户眼部反射至所述分束器单元。
可选的,所述光源单元的个数为至少一个;
所述光源单元包括至少两种波长的光源。
可选的,眼球追踪装置,还包括:主控单元,
所述主控单元分别与所述光源单元和所述图像采集单元连接,所述主控单元用于向所述光源单元发送光源控制信号,以控制所述光源单元的亮度和/或开启状态。
可选的,所述分束器单元包括:二向色镜。
第二方面,本发明实施例还提供了一种头戴式设备,包括:如本发明实施例提供的眼球追踪装置。
可选的,头戴式设备,还包括显示屏,所述显示屏为多维度显示屏,用于显示多维度图像。
第三方面,本发明实施例还提供了一种眼部图像获取方法,该眼部图像获取方法应用本发明实施例提供的眼球追踪装置,包括:
启动追踪操作;
控制光源单元发射光束,所述光源单元发射的光束经过所述用户眼部反射至分束器单元;
控制图像采集单元采集眼部图像。
可选的,一种眼部图像获取方法,还包括:
获取眼部图像,并基于所述眼部图像确定注视信息。
本发明实施例提供了一种眼球追踪装置、头戴式设备和眼部图像获取方法,该眼球追踪装置包括光源单元,所述光源单元被配置为发射光束射向用户眼部;分束器单元,所述分束器单元被配置为能透过至少第一波段的光并反射第二波段的光,所述光源单元发射的光束经过所述用户眼部反射至所述分束器单元;图像采集单元,所述图像采集单元用于采集眼部图像。该眼球追踪装置中的图像采集单元能够在靠近人眼视场中心的位置拍摄人眼,在不阻挡视线的情况下,图像采集单元能够获取质量更好的眼部图像,更有利于后期的图像处理和提高软件准确度。此外,因为图像采集单元能够通过反射拍摄眼部图像,使得眼球追踪装置佩戴时的瞳距相对于图像采集装置直接获取眼部图像而言缩短一半左右,拍摄同样区域的人眼图像,眼部追踪装置可以距离用户眼部更近,用户视野更加开阔。
附图说明
图1为本发明实施例提供的一种眼球追踪装置的结构示意图;
图2为本发明实施例提供的又一种眼球追踪装置的结构示意图;
图3为本发明实施例提供的又一种眼球追踪装置的结构示意图;
图4为本发明实施例提供的又一种眼球追踪装置的结构示意图;
图5为本发明实施例提供的又一种眼球追踪装置的结构示意图;
图6为本发明实施例提供的再一种眼球追踪装置的结构示意图;
图7为本发明实施例提供的另一种眼球追踪装置的结构示意图;
图8为本发明实施例提供的一种眼部图像获取方法的流程示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
此外,在本发明的描述中,当元件被称为“布置在”另一元件时,其可以直接设置在另一元件上或间接设置在另一元件上。当一个元件被称为“连接”另一元件时,其可以直接连接另一元件,也可以间接连接另一元件。如,可以是固定连接、可拆卸连接、机械连接或电连接等。
图1为本发明实施例提供的一种眼球追踪装置的结构示意图,本实施例可适用于对用户眼部进行追踪的情况。如用户佩戴头戴式设备时,对用户进行视线追踪的情况。其中,头戴式设备可以包括虚拟现实(Virtual Reality,VR)设备、增强现实(AugmentedReality,AR)设备或眼镜等设备。
本实施例提供的眼球追踪装置可以为单眼眼球追踪装置,也可以为双眼眼球追踪装置,双眼眼球追踪装置可以认为是将两个单眼眼球追踪装置整合在一起形成的产品,与单眼眼球追踪装置的实现原理基本相同。为方便说明,以下以单眼眼球追踪装置为例进行说明。
如图1所示,本发明实施例一提供的一种眼球追踪装置,包括:光源单元11,光源单元11被配置为发射光束射向用户眼部12;
分束器单元13,分束器单元13被配置为能透过至少第一波段的光并反射第二波段的光,光源单元11发射的光束经过用户眼部12反射至分束器单元13;
图像采集单元14,图像采集单元14用于采集眼部图像。
在本实施例中,该眼球追踪装置的工作原理是:光源单元11发射的光束射向用户眼部12后反射至分束器单元13,其中,光源单元11发射的光束可以直接射向用户眼部12,也可以经过分束器单元13反射后射向用户眼部12。分束器单元13能够透过至少第一波段的波长的光并反射第二波段的光,如本实施例中分束器单元13可以透过可见光,反射近红外光。经分束器单元13反射的光射向图像采集单元14形成眼部图像,以用于眼球追踪使用。
在本实施例中,眼球追踪装置可以理解为对用户的眼球进行追踪,以确定用户视线的装置。光源单元11所发射的光束不作限定,如光源单元11发射出的光束可以为红外光。光源单元11可以用于为用户眼部12照明,以使图像采集单元14获取更加清晰的眼部图像;光源单元11也可以用于在用户眼部12形成反射点,以使图像采集单元14得到带有光斑的眼部图像。
需要注意的是,光源单元11的个数此处不作限定,本实施例中可以包括至少一个光源单元11。相应的,光源单元11的位置可以根据光源单元11的个数确定。
分束器单元13可以理解为能够透过至少第一波段的光并反射第二波段的光的调制单元。此处不限定第一波段和第二波段的具体数值,本领域技术人员可以根据实际情况进行选取。如,第一波段为可见光波段,第二波段为红外光波段。分束器单元13能够透过至少第一波段的光,除第一波段的光外的波段可以根据眼球追踪装置实际的光源单元所发射的光束确定。
分束器单元13包括但不限于二向色镜。二向色镜的特点为对一定波长的光几乎完全透光,而对另一些波长的光几乎完全反射。
图像采集单元14可以理解为获取用户眼部图像的采集装置。图像采集单元14可以用于采集经过分束器单元13反射形成的眼部图像。图像采集单元14包括但不限于:摄像设备、图像传感器、照相机或摄像机等。图像采集单元14可以设置在用户眼部12和分束器单元13之间,图像采集单元14在用户眼部12和分束器单元13间的具体位置不作限定,只要图像采集单元14设置在分束器单元13的反射光路上即可,该反射光路为光源单元11发射的光束经过用户眼部12反射至分束器单元13后,再由分束器单元13反射所形成的光路。可选的,图像采集单元14可以设置在用户眼部12下方的分束器单元13的反射光路上。
现有眼球追踪装置大体分为两种,一种眼球追踪装置在AR设备上,相机在眼睛前下方直接拍摄人眼图像;一种眼球追踪装置设置在VR设备上,在透镜与屏幕之间设置二向色镜,眼睛经过透镜、二向色镜后,光路发生偏转进入相机。
然而,以上两种眼球追踪装置存在以下缺点:眼球追踪装置在AR设备上时,相机拍摄人眼图像的同时阻挡了视野,影响观看。相机太靠视场中心会拍摄到更好的瞳孔图像,但会明显阻挡视线,相机设置的太靠视场边缘,由于镜头和眼睛的夹角太大,导致瞳孔图像会出现严重变形,给图像处理带来很大难度,同时影响眼球追踪精度;眼球追踪装置设置在VR设备上,在透镜与屏幕之间设置二向色镜,眼睛经过透镜、二向色镜后,光路发生偏转进入相机。相机和二向色镜设置在透镜外侧(即远离人眼侧),相机通过透镜拍摄人眼,透镜的存在使得瞳孔成像引入一定的像差,而VR设备为了追求更大的图像放大倍率,大多采用菲涅尔透镜,相机通过菲涅尔透镜拍摄人眼时,像差以及透镜的纹理会对图像产生影响。
本实施例中用户眼部12反射的光再次经过分束器单元13反射后,由图像采集单元14采集形成眼部图像。图像采集单元14可以在靠近视场中心位置拍摄更加清晰的眼部图像,而不阻挡视线。
本发明实施例提供了一种眼球追踪装置,该眼球追踪装置中的图像采集单元能够在靠近人眼视场中心的位置拍摄人眼,在不阻挡视线的情况下,图像采集单元能够获取质量更好的眼部图像,更有利于后期的图像处理和提高软件准确度。此外,因为图像采集单元能够通过分束器单元反射拍摄眼部图像,使得眼球追踪装置佩戴时的瞳距相对于图像采集装置直接获取眼部图像而言缩短一半左右,拍摄同样区域的人眼图像,眼部追踪装置可以距离用户眼部12更近,用户视野更加开阔。
图2为本发明实施例提供的又一种眼球追踪装置的结构示意图。进一步地,眼球追踪装置,还包括壳体15,
分束器单元13布置在壳体15的通孔内;
光源单元11和图像采集单元14分别布置在壳体15上。
其中,壳体15可以理解为眼球追踪装置中的固定元件。壳体15可以设置有通孔,用于固定分束器单元13。光源单元11可以设置在壳体15上,用于向用户眼部12发射光束。图像采集单元14可以布置在壳体15上,用于采集光束经过分束器单元13反射形成的眼部图像。此处不限定壳体15的具体形状,本领域技术人员可以根据实际情况进行设定,只要能够将光源单元11、分束器单元13和图像采集单元14固定在对应位置处即可。
此外,图像采集单元14朝向分束器单元13侧,即镜头上可以设置有滤光片16,以使光束经过分束器单元13反射后更好地成像于图像采集单元14。如当光源单元11发射的为红外光时,滤光片16可以为红外滤光片16。
如图2所示,进一步地,壳体15上开设有安装槽17;
安装槽17包括底座和侧壁,所述底座用于固定光源单元11,所述侧壁与所述底座的夹角在预设范围内,以限定光源单元11的照射范围。
其中,预设范围不作限定,本领域技术人员可以根据实际情况进行设定,如根据眼球追踪装置与用户眼部12的距离或光源单元11的尺寸确定。侧壁与底座的夹角能够限制光源单元11发射光束的照射范围,使得光束照射至用户眼部12,且不会照射到图像采集单元14内。图2中示出了在安装槽17的限制下,光源单元11的照射边缘A,照射边缘A间的范围为光源单元11的照射范围。
此外,图2中示出了用户透过分束器单元13后的视场边缘B。
图3为本发明实施例提供的又一种眼球追踪装置的结构示意图。如图3所示,进一步地,眼球追踪装置,还包括透镜18;
透镜18布置在分束器单元13的远离用户眼部12的侧面上。
其中,透镜18可以用于消除畸变和/或补偿还原图像。透镜18包括但不限于:凹透镜、凸透镜或者弯月透镜。透镜18可以设置在分束器单元13的远离用户眼部12的侧面上,即分束器单元13设置在用户眼部12和透镜18之间。故经过眼球反射的光束直接经过分束器单元13反射后,不通过透镜18,直接成像至图像采集单元14。
可以理解的是,透镜18可以直接设置在分束器单元13上,也可以间接设置在分束器单元13上,此处不限定具体的设置方式。如可以将透镜18和分束器单元13贴合设置,也可以使透镜18和分束器单元13存在一定的间隙。图3中示出了透镜18与分束器单元13间存在一定间隙的情况。
图4为本发明实施例提供的又一种眼球追踪装置的结构示意图。如图4所示,进一步地,眼球追踪装置中分束器单元13贴合设置于透镜18表面。如在透镜18靠近用户眼部12一侧镀红外二向色镜膜系(即分束器单元13),可以使眼球追踪装置做的更加小巧,轻便,提升用户体验。
图5为本发明实施例提供的又一种眼球追踪装置的结构示意图。如图5所示,该眼球追踪装置包括了光源单元11、分束器单元13、图像采集单元14、壳体15和透镜18。透镜18与分束器单元13间隔设置。
图6为本发明实施例提供的再一种眼球追踪装置的结构示意图。如图6所示,该眼球追踪装置包括了光源单元11、分束器单元13、图像采集单元14、壳体15和透镜18。透镜18与分束器单元13贴合设置。
进一步地,如图2所示,光源单元11的出光侧朝向用户眼部12布置,光源单元11发射的光束直接经过用户眼部12反射至分束器单元13。
本实施例中,光源单元11可以设置在分束器单元13周围,当光源单元11的出光侧朝向用户眼部12布置时,光源单元11的位置不作限定,只要光源单元11能够直接照射用户眼部12即可。如光源单元11可以设置在用户眼部12和分束器单元13间(如图2所示);也可以设置在与分束器单元13处于同一平面的分束器单元13的外侧(即分束器单元13处于同一平面的壳体15上);还可以设置在分束器单元13外侧。其中,用户眼部12方向可以认为是分束器单元130的内侧。
图7为本发明实施例提供的另一种眼球追踪装置的结构示意图。如图7所示,进一步地,光源单元11的出光侧朝向分束器单元13布置,光源单元11发射的光束经过分束器单元13反射后再由用户眼部12反射至分束器单元13。
当光源单元11的出光侧朝向分束器单元13布置时,光源单元11与分束器单元13的间距不作限定,本领域技术人员可以根据实际情况进行设定。可以理解的是,光源单元11与分束器单元13的间距可以决定光源单元11的照射范围。
本实施例中,光源单元11可以经过分束器单元13反射照射用户眼部12。由于光源单元11发射的光束经过反射后可以在靠近人眼视场中心的位置照射人眼,人眼眼部的照明会更加均匀。有利于在眼球表面获得更完整的光斑,且不阻挡视线。
进一步地,光源单元11的个数为至少一个;
光源单元11包括至少两种波长的光源。
其中,光源单元11的个数可以为至少一个,光源单元11的位置可以根据光源单元11的个数确定。本领域技术人员可以根据实际情况设置光源单元11的位置。可以理解的是,当光源单元11的个数为一个时,光源单元11可以作为照明使用。该光源单元11可以设置在壳体15上方区域。
当光源单元11个数为六个时,可以在壳体15上方设置两个光源单元11,下方设置两个单元,在壳体15靠近鼻梁侧设置两个光源单元11;当光源单元11个数为八个时,可以在壳体15上方、下方、左方和右方分别设置两个光源单元11。需要注意的是,此处“上方”、“下方”、“左方”和“右方”可以认为以图7中用户眼部12视角确定的方向。
此外,光源单元11能够包括至少两种波长的光源,如可见光和红外光的光源。
进一步地,眼球追踪装置,还包括:主控单元,
所述主控单元分别与光源单元11和图像采集单元14连接,所述主控单元用于向光源单元11发送光源控制信号,以控制光源单元11的亮度和/或开启状态。
所述主控单元还可以用于与图像采集单元14进行采集控制信号和眼部图像的传输,以控制图像采集单元14的开启状态并基于眼部图像进行眼球追踪。
主控单元在眼球追踪装置中的位置不作限定,只要保证主控单元能够与光源单元11和图像采集单元14进行通信连接即可。
主控单元可以理解为眼球追踪装置中的控制单元。主控单元可以控制光源单元11和图像采集单元14的工作状态。
光源控制信号可以理解为对光源单元11进行控制的信号。光源控制信号可以包括亮度控制信号和开启控制信号。光源单元11基于主控单元发送的亮度控制信号能够进行亮度调节,以适应不同的环境或用于不同的识别场景,如虹膜识别和眼球追踪;基于主控单元发送的开启控制信号能够进行开启和关闭的切换。开启状态可以包括开启和关闭。
采集控制信号可以理解为控制图像采集单元14进行采集的信号。主控单元与图像采集单元14连接后,可以向图像采集单元14发送采集控制信号,以通过控制图像采集单元14的开启状态实现眼部图像的采集。主控模块还可以获取图像采集单元14采集的眼部图像进行眼球追踪。此处不限定基于眼部图像进行眼球追踪的具体手段。
进一步地,分束器单元13包括:二向色镜。本实施例可以进一步将分束器单元13优化为二向色镜。二向色镜的特点为对一定波长的光几乎完全透光,而对另一些波长的光几乎完全反射。此处不限定二向色镜反射的波段和透过的波段。如,二向色镜可以透过可见光,反射近红外光。
本发明实施例还提供了一种头戴式设备,包括如本发明实施例提供的眼球追踪装置。
本实施例中可以将眼球追踪装置集成在头戴式设备上,以用于对用户进行眼球追踪。头戴式设备包括但不限于AR设备、VR设备、眼镜等设备。此处不限定头戴式设备所包括的其余元件,本领域技术人员可以根据实际情况进行设定。
本实施例提供的头戴式设备,通过集成眼球追踪装置能够在不遮挡用户视线的基础上,获取质量更好地眼部图像,以便于对用户进行眼球追踪。
进一步地,头戴式设备,还包括显示屏,所述显示屏为多维度显示屏,用于显示多维度图像。
此外,本实施例可以在头戴式设备上集成显示屏,该显示屏可以为多维度显示屏。多维度显示屏可以用于防止头戴式设备显示的画面引起视觉辐辏调节冲突(即VAC现象)。多维度显示屏可展现的画面可以有深度信息,也就是光从空间立体中的点发射出来,让人眼的视觉辐辏和焦点匹配,光不仅要有强度还要有方向,即,光场显示技术。
头戴式设备中显示屏和眼球追踪装置的关系此处不作限定,头戴式设备可以基于眼球追踪装置确定的数据控制显示屏所显示的内容,也可以基于显示屏所显示的内容和眼球追踪装置确定的数据确定用户注视的内容。
图8为本发明实施例提供的一种眼部图像获取方法的流程示意图。本发明实施例还提供了一种眼部图像获取方法,应用于本发明实施例提供的眼球追踪装置,如图8所示,该方法包括:
S101、启动追踪操作。
追踪操作可以理解为眼球追踪装置启动眼球追踪的操作。此处不对启动追踪操作的具体手段进行限定,本领域技术人员可以根据实际情况进行设置。
S102、控制光源单元发射光束,所述光源单元发射的光束经过所述用户眼部反射至分束器单元。
启动追踪操作后,本步骤可以控制光源单元发射光束,此处不对控制光源单元发射光束的具体手段进行限定,如可以通过为光源单元供给不同的电压以控制光源单元所发射的光束的亮度。
S103、控制图像采集单元采集眼部图像。
启动追踪操作后,本步骤可以控制图像采集单元采集眼部图像,如控制图像采集单元采集经过分束器单元反射形成的眼部图像。此处不对控制图像采集单元控制方式进行限定,如可以通过改变图像采集单元电源的供给情况控制图像采集单元的工作状态。
可以理解的是S103和S102的执行顺序不作限定,可以同时执行,也可以先执行S102,再执行S103。
需要注意的是,眼部图像的获取方法中涉及的元件,如光源单元、图像采集单元和分束器单元的相关内容可以参见眼球追踪装置中相应内容,此处不作赘述。
本实施例提供了一种眼部图像的获取方法,能够有效控制眼球追踪装置获取眼部图像,便于对用户进行眼球追踪。
此外,眼部图像的获取方法还可以包括:获取眼部图像,并基于所述眼部图像确定注视信息。本实施例中的眼部图像的获取操作可以由眼球追踪装置中的主控单元执行。
注视信息可以理解为反映用户注视情况的信息。注视信息包括但不限于:注视点坐标、注视时长、注视次数、首次注视时间和/或注视深度。其中,注视点坐标可以为二维坐标,也可以为三维坐标。注视深度能够反映用户注视的深度信息。如,本实施例可以确定用户注视多维度图像的注视深度。
此处不限定如何基于眼部图像确定注视信息。如基于眼部图像中的眼部特征确定注视信息。眼部特征可以包括瞳孔位置、瞳孔形状、瞳孔直径、虹膜位置、虹膜形状、眼皮位置、眼角位置、光斑(也称为普尔钦斑)特征和/或眼睑特征等。此外,眼部特征还可以包括眼动特征,如眼跳信息(眼跳峰值、速度、个数和/或平均幅度)和/或眼震信息(眼震频率和/或时长)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (14)

1.一种眼球追踪装置,其特征在于,包括:
光源单元,所述光源单元被配置为发射光束射向用户眼部;
分束器单元,所述分束器单元被配置为能透过至少第一波段的光并反射第二波段的光,所述光源单元发射的光束经过所述用户眼部反射至所述分束器单元;
图像采集单元,所述图像采集单元用于采集眼部图像。
2.根据权利要求1所述的眼球追踪装置,其特征在于,还包括壳体,
所述分束器单元布置在所述壳体的通孔内;
所述光源单元和所述图像采集单元分别布置在所述壳体上。
3.根据权利要求2所述的眼球追踪装置,其特征在于,所述壳体上开设有安装槽;
所述安装槽包括底座和侧壁,所述底座用于固定所述光源单元,所述侧壁与所述底座的夹角在预设范围内,以限定所述光源单元的照射范围。
4.根据权利要求1所述的眼球追踪装置,其特征在于,还包括透镜;
所述透镜布置在所述分束器单元的远离所述用户眼部的侧面上。
5.根据权利要求4所述的眼球追踪装置,其特征在于,所述分束器单元贴合设置于所述透镜表面。
6.根据权利要求1所述的眼球追踪装置,其特征在于,所述光源单元的出光侧朝向所述用户眼部布置,所述光源单元发射的光束直接经过所述用户眼部反射至所述分束器单元。
7.根据权利要求1所述的眼球追踪装置,其特征在于,所述光源单元的出光侧朝向所述分束器单元布置,所述光源单元发射的光束经过所述分束器单元反射后再由所述用户眼部反射至所述分束器单元。
8.根据权利要求1所述的眼球追踪装置,其特征在于,所述光源单元的个数为至少一个;
所述光源单元包括至少两种波长的光源。
9.根据权利要求1所述的眼球追踪装置,其特征在于,还包括:主控单元,
所述主控单元分别与所述光源单元和所述图像采集单元连接,所述主控单元用于向所述光源单元发送光源控制信号,以控制所述光源单元的亮度和/或开启状态。
10.根据权利要求1所述的眼球追踪装置,其特征在于,所述分束器单元包括:二向色镜。
11.一种头戴式设备,其特征在于,包括如权利要求1-10任一所述的眼球追踪装置。
12.根据权利要求11所述的头戴式设备,其特征在于,还包括显示屏,所述显示屏为多维度显示屏,用于显示多维度图像。
13.一种眼部图像获取方法,其特征在于,应用如权利要求1-10任一所述的眼球追踪装置,包括:
启动追踪操作;
控制光源单元发射光束,所述光源单元发射的光束经过所述用户眼部反射至分束器单元;
控制图像采集单元采集眼部图像。
14.根据权利要求13所述的方法,其特征在于,还包括:
获取眼部图像,并基于所述眼部图像确定注视信息。
CN201910009144.6A 2019-01-04 2019-01-04 一种眼球追踪装置、头戴式设备和眼部图像获取方法 Pending CN109766820A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910009144.6A CN109766820A (zh) 2019-01-04 2019-01-04 一种眼球追踪装置、头戴式设备和眼部图像获取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910009144.6A CN109766820A (zh) 2019-01-04 2019-01-04 一种眼球追踪装置、头戴式设备和眼部图像获取方法

Publications (1)

Publication Number Publication Date
CN109766820A true CN109766820A (zh) 2019-05-17

Family

ID=66452513

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910009144.6A Pending CN109766820A (zh) 2019-01-04 2019-01-04 一种眼球追踪装置、头戴式设备和眼部图像获取方法

Country Status (1)

Country Link
CN (1) CN109766820A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110543023A (zh) * 2019-09-05 2019-12-06 大连交通大学 一种用于动画媒体的虚拟现实眼镜
CN111752386A (zh) * 2020-06-05 2020-10-09 深圳市欢创科技有限公司 一种空间定位方法、系统及头戴式设备
CN111783660A (zh) * 2020-07-01 2020-10-16 业成科技(成都)有限公司 眼动追踪装置及应用其的电子装置
WO2021077980A1 (zh) * 2019-10-23 2021-04-29 深圳惠牛科技有限公司 一种头戴显示光学系统及头戴显示设备
CN113138664A (zh) * 2021-03-30 2021-07-20 青岛小鸟看看科技有限公司 基于光场感知的眼球追踪系统、方法
CN113933999A (zh) * 2021-10-22 2022-01-14 小派科技(上海)有限责任公司 眼球追踪光学装置、光学系统、显示装置和显示系统
CN114660806A (zh) * 2022-04-19 2022-06-24 塔普翊海(上海)智能科技有限公司 眼动追踪光学装置、头戴显示设备及眼动追踪方法
CN114967128A (zh) * 2022-06-20 2022-08-30 深圳市新联优品科技有限公司 一种应用于vr眼镜的视线追踪系统及方法
CN115128805A (zh) * 2021-03-26 2022-09-30 宏达国际电子股份有限公司 头戴式显示设备
EP4180860A1 (en) * 2021-11-10 2023-05-17 ams International AG Light scanning eye tracking
WO2023155814A1 (zh) * 2022-02-18 2023-08-24 北京七鑫易维信息技术有限公司 一种眼动追踪智能眼镜
WO2023246812A1 (zh) * 2022-06-21 2023-12-28 北京七鑫易维信息技术有限公司 一种眼球追踪光学装置、系统和虚拟现实设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106199966A (zh) * 2016-07-24 2016-12-07 吴考寅 一种头戴式曲面显示系统
CN206584118U (zh) * 2017-02-27 2017-10-24 阿里巴巴集团控股有限公司 虚拟现实头戴设备
CN107515466A (zh) * 2017-08-14 2017-12-26 华为技术有限公司 一种眼球追踪系统和眼球追踪方法
CN107850937A (zh) * 2015-04-01 2018-03-27 Fove股份有限公司 视线检测系统、头戴式显示器、视线检测方法
CN108205374A (zh) * 2018-01-02 2018-06-26 京东方科技集团股份有限公司 一种视频眼镜的眼球追踪模组及其方法、视频眼镜
CN108519824A (zh) * 2018-04-13 2018-09-11 京东方科技集团股份有限公司 一种虚拟现实显示装置、设备及视线角度计算方法
CN207924261U (zh) * 2018-03-29 2018-09-28 北京京东方光电科技有限公司 显示装置和虚拟现实设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107850937A (zh) * 2015-04-01 2018-03-27 Fove股份有限公司 视线检测系统、头戴式显示器、视线检测方法
CN106199966A (zh) * 2016-07-24 2016-12-07 吴考寅 一种头戴式曲面显示系统
CN206584118U (zh) * 2017-02-27 2017-10-24 阿里巴巴集团控股有限公司 虚拟现实头戴设备
CN107515466A (zh) * 2017-08-14 2017-12-26 华为技术有限公司 一种眼球追踪系统和眼球追踪方法
CN108205374A (zh) * 2018-01-02 2018-06-26 京东方科技集团股份有限公司 一种视频眼镜的眼球追踪模组及其方法、视频眼镜
CN207924261U (zh) * 2018-03-29 2018-09-28 北京京东方光电科技有限公司 显示装置和虚拟现实设备
CN108519824A (zh) * 2018-04-13 2018-09-11 京东方科技集团股份有限公司 一种虚拟现实显示装置、设备及视线角度计算方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110543023A (zh) * 2019-09-05 2019-12-06 大连交通大学 一种用于动画媒体的虚拟现实眼镜
WO2021077980A1 (zh) * 2019-10-23 2021-04-29 深圳惠牛科技有限公司 一种头戴显示光学系统及头戴显示设备
CN111752386A (zh) * 2020-06-05 2020-10-09 深圳市欢创科技有限公司 一种空间定位方法、系统及头戴式设备
CN111783660A (zh) * 2020-07-01 2020-10-16 业成科技(成都)有限公司 眼动追踪装置及应用其的电子装置
CN111783660B (zh) * 2020-07-01 2023-11-10 业成科技(成都)有限公司 眼动追踪装置及应用其的电子装置
CN115128805A (zh) * 2021-03-26 2022-09-30 宏达国际电子股份有限公司 头戴式显示设备
CN113138664A (zh) * 2021-03-30 2021-07-20 青岛小鸟看看科技有限公司 基于光场感知的眼球追踪系统、方法
WO2022205770A1 (zh) * 2021-03-30 2022-10-06 青岛小鸟看看科技有限公司 基于光场感知的眼球追踪系统、方法
CN113933999B (zh) * 2021-10-22 2023-09-19 小派科技(上海)有限责任公司 眼球追踪光学装置、光学系统、显示装置和显示系统
CN113933999A (zh) * 2021-10-22 2022-01-14 小派科技(上海)有限责任公司 眼球追踪光学装置、光学系统、显示装置和显示系统
EP4180860A1 (en) * 2021-11-10 2023-05-17 ams International AG Light scanning eye tracking
WO2023083569A1 (en) * 2021-11-10 2023-05-19 Ams International Ag Light scanning eye tracking
WO2023155814A1 (zh) * 2022-02-18 2023-08-24 北京七鑫易维信息技术有限公司 一种眼动追踪智能眼镜
CN114660806A (zh) * 2022-04-19 2022-06-24 塔普翊海(上海)智能科技有限公司 眼动追踪光学装置、头戴显示设备及眼动追踪方法
CN114967128A (zh) * 2022-06-20 2022-08-30 深圳市新联优品科技有限公司 一种应用于vr眼镜的视线追踪系统及方法
CN114967128B (zh) * 2022-06-20 2023-06-06 深圳市新联优品科技有限公司 一种应用于vr眼镜的视线追踪系统及方法
WO2023246812A1 (zh) * 2022-06-21 2023-12-28 北京七鑫易维信息技术有限公司 一种眼球追踪光学装置、系统和虚拟现实设备

Similar Documents

Publication Publication Date Title
CN109766820A (zh) 一种眼球追踪装置、头戴式设备和眼部图像获取方法
US11006102B2 (en) Method of utilizing defocus in virtual reality and augmented reality
CA3084546C (en) Enhancing the performance of near-to-eye vision systems
CN104094197B (zh) 利用投影仪的注视追踪
CN107533362B (zh) 眼睛跟踪设备和用于操作眼睛跟踪设备的方法
US7338167B2 (en) Retinal imaging system
US10314486B2 (en) Head-mounted indirect opthalmoscope camera
JP3309615B2 (ja) 画像観察装置及びこれを用いた両眼画像観察装置
JP2003521950A (ja) 視標追跡システム
US10488917B2 (en) Gaze-tracking system and method of tracking user's gaze using reflective element
JP2003521950A6 (ja) 視標追跡システム
CN110914786A (zh) 用于在外部场景与虚拟图像之间配准的方法和系统
US10452911B2 (en) Gaze-tracking system using curved photo-sensitive chip
CN110023815A (zh) 显示装置和使用图像渲染器和光学组合器进行显示的方法
KR20220073756A (ko) 동공의 움직임을 추적하기 위한 소형 망막 스캐닝 장치 및 이에 따른 애플리케이션
CN216485801U (zh) 一种光学成像系统、图像显示装置及增强现实显示设备
CN115956876A (zh) 具有光阑的眼底相机光学系统及眼底相机
US20160242643A1 (en) Transparent Camera for Imaging the Eye
US20040145539A1 (en) Image display for projecting image directly onto retina of wearer
CN110727112A (zh) 一种可变焦视网膜扫描成像三维显示装置
CN216748293U (zh) 一种ar眼镜
CN211094011U (zh) 一种带导航自动跟踪目标手持式眼底照相机
JP7089823B1 (ja) 画像投影装置、視覚検査装置、および眼底撮影装置
CN111281337B (zh) 图像采集设备及基于图像采集设备的眼底视网膜成像方法
TWI740083B (zh) 低光源環境顯示結構

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190517

RJ01 Rejection of invention patent application after publication