CN113325953A - 显示设备及注视点的定位方法 - Google Patents
显示设备及注视点的定位方法 Download PDFInfo
- Publication number
- CN113325953A CN113325953A CN202110585849.XA CN202110585849A CN113325953A CN 113325953 A CN113325953 A CN 113325953A CN 202110585849 A CN202110585849 A CN 202110585849A CN 113325953 A CN113325953 A CN 113325953A
- Authority
- CN
- China
- Prior art keywords
- photoelectric sensing
- circuit
- target
- coupled
- gating switch
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000000712 assembly Effects 0.000 claims abstract description 118
- 238000000429 assembly Methods 0.000 claims abstract description 118
- 230000003287 optical effect Effects 0.000 claims abstract description 22
- 238000001514 detection method Methods 0.000 claims description 76
- 230000002093 peripheral effect Effects 0.000 claims description 16
- 230000008569 process Effects 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 21
- 210000001747 pupil Anatomy 0.000 description 8
- 238000004590 computer program Methods 0.000 description 4
- 230000005693 optoelectronics Effects 0.000 description 4
- 238000002310 reflectometry Methods 0.000 description 4
- 210000003786 sclera Anatomy 0.000 description 3
- 230000004807 localization Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Position Input By Displaying (AREA)
Abstract
本公开实施例提供了一种显示设备及注视点的定位方法,属于虚拟现实技术领域。该显示设备中,多个第一光电传感组件和多个第二光电传感组件用于将采集到的用户眼睛反射的光信号转换为电信号后,传输至定位电路。定位电路用于将所传输的电信号的信号值较小的一个或多个第一光电传感组件确定为目标第一光电传感组件,并将所传输的电信号的信号值较小的一个或多个第二光电传感组件确定为目标第二光电传感组件,并基于目标第一光电传感组件和目标第二光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置。因确定注视点的位置的整个过程不涉及图像处理,故该确定方式较为简单,进而确定用户眼睛注视点的效率较高。
Description
技术领域
本公开涉及电子技术领域,特别涉及一种显示设备及注视点的定位方法。
背景技术
虚拟现实(virtual reality,VR)设备是一种能够通过显示的图像创建虚拟环境,使用户沉浸到该虚拟环境中的显示设备。
相关技术中,VR设备包括显示面板,摄像头,处理器以及驱动电路。摄像头用于拍摄用户的眼睛图像。处理器根据眼睛图像确定用户在显示面板上的注视点的位置,并根据注视点的位置对所需显示的显示图像进行局部渲染。驱动电路基于接收到处理器传输的局部渲染的显示图像驱动显示面板显示。由于处理器可以仅对显示图像中注视点的位置所在区域进行局部渲染,无需对显示图像进行全局渲染,因此不仅能够降低处理器的负荷,而且能够保证显示面板的显示效果。
但是,相关技术中处理器根据摄像头拍摄的眼睛图像确定注视点的位置的效率较低,进而导致显示面板的显示效率较低。
发明内容
本公开提供了一种显示设备及注视点的定位方法,可以解决相关技术中确定注视点的位置的效率较低的问题。所述技术方案如下:
一方面,提供了一种显示设备,所述显示设备包括:显示面板,多个第一光电传感组件,多个第二光电传感组件和定位电路;所述显示面板包括显示区和围绕所述显示区的周边区,所述多个第一光电传感组件位于所述周边区且沿第一方向排布,所述多个第二光电传感组件位于所述周边区且沿第二方向排布,所述第一方向与所述第二方向相交;
所述多个第一光电传感组件和所述多个第二光电传感组件均与所述定位电路耦接,所述多个第一光电传感组件和所述多个第二光电传感组件用于采集用户眼睛反射的光信号,并将所述光信号转换为电信号后,传输至所述定位电路;
所述定位电路用于基于接收到的电信号,从所述多个第一光电传感组件中确定至少一个目标第一光电传感组件,从所述多个第二光电传感组件中确定至少一个目标第二光电传感组件,并基于所述至少一个目标第一光电传感组件的位置和所述至少一个目标第二光电传感组件的位置,确定用户眼睛在所述显示面板上的注视点的位置;
其中,所述目标第一光电传感组件传输的电信号的信号值小于等于第一阈值,所述目标第二光电传感组件传输的电信号的信号值小于等于第二阈值。
可选地,所述定位电路用于基于接收到的电信号确定一个目标第一光电传感组件和一个目标第二光电传感组件;
其中,所述目标第一光电传感组件传输的电信号的信号值小于其他任一第一光电传感组件传输的电信号的信号值,所述目标第二光电传感组件传输的电信号的信号值小于其他任一第二光电传感组件传输的电信号的信号值。
可选地,所述第一方向与所述第二方向垂直;所述周边区包括:两个沿所述第一方向延伸的第一条状区域,以及两个沿所述第二方向延伸的第二条状区域;
两个所述第一条状区域分别位于所述显示区的两侧,且每个所述第一条状区域内均设置有多个所述第一光电传感组件;
两个所述第二条状区域分别位于所述显示区的两侧,且每个所述第二条状区域内均设置有多个所述第二光电传感组件。
可选地,所述定位电路包括:检测子电路和定位子电路;
所述多个第一光电传感组件和所述多个第二光电传感组件均与所述检测子电路耦接,所述多个第一光电传感组件和所述多个第二光电传感组件用于将采集到的光信号转换为电信号后,传输至所述检测子电路;
所述检测子电路还与所述定位子电路耦接,所述检测子电路用于基于接收到的电信号确定至少一个目标第一光电传感组件和至少一个目标第二光电传感组件,并向所述定位子电路传输用于指示所述至少一个目标第一光电传感组件的第一信息,以及用于指示所述至少一个目标第二光电传感组件的第二信息;
所述定位子电路用于基于接收到的第一信息确定各个所述目标第一光电传感组件在所述第二方向上的第一坐标,基于接收到的第二信息确定各个所述目标第二光电传感组件在所述第一方向上的第二坐标,并基于所述第一坐标和所述第二坐标,确定用户眼睛在所述显示面板上的注视点的位置。
可选地,所述检测子电路包括与所述多个第一光电传感组件耦接的第一检测子电路,以及与所述多个第二光电传感组件耦接的第二检测子电路;所述第一检测子电路和所述第二检测子电路均包括至少一个第一比较单元,所述第一比较单元包括:四个放大器,两个第一比较器,两个第一选通开关,一个第二比较器,以及一个第二选通开关;
每个所述放大器的输入端与对应的一个光电传感组件耦接;
每个所述第一比较器的两个输入端分别与两个所述放大器的输出端耦接,每个所述第一比较器的输出端分别与一个所述第一选通开关的控制端和所述第二选通开关的一个输入端耦接;
每个所述第一选通开关的两个输入端分别与两个所述放大器的输出端耦接,每个所述第一选通开关的输出端与所述第二比较器的一个输入端耦接,所述第一选通开关用于输出其两个输入端接收到的电信号中信号值较小的电信号;
所述第二比较器的输出端与所述第二选通开关的控制端和所述定位子电路耦接,所述第二选通开关的输出端与所述定位子电路耦接,所述第二选通开关用于输出目标第一选通开关所耦接的第一比较器的输出端的结果,所述目标第一选通开关为所述两个第一选通开关中,输出端所输出的电信号的信号值较小的第一选通开关。
可选地,所述第一检测子电路和所述第二检测子电路均包括多个所述第一比较单元,且所述第一检测子电路和所述第二检测子电路还均包括至少一个第二比较单元,每个所述第二比较单元包括:两个第三选通开关,一个第三比较器、一个第四选通开关以及一个第五选通开关;
每个所述第二比较器的输出端还与一个所述第三选通开关的控制端耦接;
每个所述第三选通开关的两个输入端分别与两个所述第一选通开关的输出端耦接,每个所述第三选通开关的输出端与所述第三比较器的一个输入端耦接,所述第三选通开关用于输出两个所述第一选通开关的输出端所输出的电信号中,信号值较小的电信号;
每个所述第三比较器的输出端分别与所述第四选通开关的控制端、所述第五选通开关的控制端和所述定位子电路耦接;
所述第四选通开关的两个输入端分别与两个所述第二比较器的输出端耦接,所述第四选通开关的输出端与所述定位子电路耦接,所述第四选通开关用于输出目标第三通开关所耦接的第二比较器的输出端的结果,所述目标第三选通开关为所述两个第三选通开关中,输出端所输出的电信号的信号值较小的第三选通开关;
所述第五选通开关的两个输入端分别与两个所述第二选通开关的输出端耦接,所述第五选通开关的输出端与所述定位子电路耦接,所述第五选通开关用于输出目标第一比较器的输出端的结果,所述目标第一比较器为多个所述第一比较器中,目标第一选通开关耦接的第一比较器,所述目标第一选通开关为多个所述第一选通开关中,输出端所输出的电信号的信号值最小的第一选通开关。
可选地,所述第一检测子电路包括的放大器的数量与所耦接的多个第一光电传感组件的数量相同;
且,所述第二检测子电路包括的放大器的数量与所耦接的多个第二光电传感组件的数量相同。
可选地,所述第一信息和所述第二信息均为二进制数。
可选地,所述周边区包括的每个第一条状区域中的多个第一光电传感组件的数量,以及所述周边区包括的每个二条状区域中的多个第二光电传感组件的数量均为2的n次方;
其中,n为所述二进制数的位数,且n大于1。
可选地,所述n为3。
可选地,所述定位子电路为现场可编程逻辑门阵列FPGA芯片。
可选地,所述显示设备还包括:位于所述显示面板显示侧的透镜和位于所述透镜周边的多个发光元件;
其中,所述用户眼睛反射的光信号为用户眼睛反射所述多个发光元件发出的光线后的光信号。
可选地,所述发光元件为红外发光二极管。
可选地,所述显示设备为可穿戴显示设备。
另一方面,提供了一种注视点的定位方法,应用于如上述方面所述的显示设备包括的定位电路中,所述方法包括:
接收多个第一光电传感组件和多个第二光电传感组件传输的电信号,所述电信号为所述多个第一光电传感组件和所述多个第二光电传感组件对采集到的用户眼睛反射的光信号转换得到的;
基于所述电信号,从所述多个第一光电传感组件中确定至少一个目标第一光电传感组件,所述目标第一光电传感组件传输的电信号的信号值小于等于第一阈值;
基于所述电信号,从所述多个第二光电传感组件中确定至少一个目标第二光电传感组件,所述目标第二光电传感组件传输的电信号的信号值小于等于第二阈值;
基于所述至少一个目标第一光电传感组件的位置和所述至少一个目标第二光电传感组件的位置,确定用户眼睛在所述显示面板上的注视点的位置。
又一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,所述指令由显示设备中的定位电路执行以实现如上述方面所述的注视点的定位方法。
又一方面,提供了一种显示设备中的定位电路,所述定位电路包括处理子电路,存储器,以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述方面所述的注视点的定位方法。
本公开提供的技术方案带来的有益效果至少可以包括:
提供了一种显示设备及注视点的定位方法。该显示设备包括显示面板,多个第一光电传感组件,多个第二光电传感组件和定位电路。多个第一光电传感组件和多个第二光电传感组件用于将采集到的用户眼睛反射的光信号转换为电信号后,传输至定位电路。定位电路用于将所传输的电信号的信号值较小的一个或多个第一光电传感组件确定为目标第一光电传感组件,并将所传输的电信号的信号值较小的一个或多个第二光电传感组件确定为目标第二光电传感组件,并基于目标第一光电传感组件和目标第二光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置。因确定注视点的位置的整个过程不涉及图像处理,故该确定方式较为简单,进而确定用户眼睛注视点的效率较高。
附图说明
为了更清楚地说明本公开实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本公开实施例提供的一种显示设备的结构示意图;
图2是本公开实施例提供的一种多个第一光电传感组件接收的用户眼睛不同区域反射的光信号的信号值;
图3是本公开实施例提供的一种多个第二光电传感组件接收的用户眼睛不同区域反射的光信号的信号值;
图4是本公开实施例提供的另一种显示设备的结构示意图;
图5是本公开实施例提供的又一种显示设备的结构示意图;
图6是本公开实施例提供的再一种显示设备的结构示意图;
图7是本公开实施例提供的再一种显示设备的结构示意图;
图8是本公开实施例提供的再一种显示设备的结构示意图;
图9是本公开实施例提供的一种检测子电路的结构示意图;
图10是本公开实施例提供的一种检测子电路的局部结构示意图;
图11是本公开实施例提供的另一种检测子电路的结构示意图;
图12是本公开实施例提供的又一种检测子电路的结构示意图;
图13是本公开实施例提供的再一种显示设备的结构示意图;
图14是本公开实施例提供的一种注视点的定位方法的流程图;
图15是本公开实施例提供的一种注视点的定位电路的结构框图;
图16是本公开实施例提供的一种显示设备中的定位电路的结构示意图。
具体实施方式
为使本公开的目的、技术方案和优点更加清楚,下面将结合附图对本公开实施方式作进一步地详细描述。
本公开的实施方式部分使用的术语仅用于对本公开的实施例进行解释,而非旨在限定本公开。除非另作定义,本公开的实施方式使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开专利公开说明书以及权利要求书中使用的“第一”、“第二”、“第三”以及类似的词语并不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。同样,“一个”或者“一”等类似词语也不表示数量限制,而是表示存在至少一个。“包括”或者“包含”等类似的词语意指出现在“包括”或者“包含”前面的元件或者物件涵盖出现在“包括”或者“包含”后面列举的元件或者物件及其等同,并不排除其他元件或者物件。“连接”或者“耦接”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系,当被描述对象的绝对位置改变后,则所述相对位置关系也可能相应地改变。
图1是本公开实施例提供的一种显示设备的结构示意图。参考图1可以看出,该显示设备00包括:显示面板01,多个第一光电传感组件02,多个第二光电传感组件03和定位电路04。
其中,该显示面板01包括显示区A0和围绕该显示区A0的周边区B0。多个第一光电传感组件02位于周边区B0且沿第一方向X排布,多个第二光电传感组件03位于周边区B0且沿第二方向Y排布。第一方向X与第二方向Y相交。可选地,上述实施例记载的“排布”可以是指图1所示的间隔且依次排布。
多个第一光电传感组件02和多个第二光电传感组件03均与定位电路04耦接(即,电连接)。多个第一光电传感组件02和多个第二光电传感组件03用于采集用户眼睛反射的光信号,并将光信号转换为电信号后,传输至定位电路04。需要说明的是,图1中仅示出了定位电路04与一个第一光电传感组件02和一个第二光电传感组件03耦接。实际上定位电路04与每个第一光电传感组件02和每个第二光电传感组件03均耦接,以确保能够接收到每个第一光电传感组件02和每个第二光电传感组件03传输的电信号。
定位电路04用于基于接收到的电信号从多个第一光电传感组件02中确定至少一个目标第一光电传感组件,从多个第二光电传感组件03中确定至少一个目标第二光电传感组件,并基于至少一个目标第一光电传感组件的位置和至少一个目标第二光电传感组件的位置,确定用户眼睛在该显示面板01上的注视点的位置,即确定用户眼睛的瞳孔位置。
其中,目标第一光电传感组件传输的电信号的信号值可以小于等于第一阈值,目标第二光电传感组件传输的电信号的信号值可以小于等于第二阈值。该第一阈值与第二阈值可以相等,也可以不相等,本公开实施例对此不做限定。
可选地,定位电路04中可以预先存储有各个第一光电传感组件02和各个第二光电传感组件03的位置。对于第一光电传感组件02和第二光电传感组件03中的任一光电传感组件而言,定位电路04存储的该光电传感组件的位置可以是指该光电传感组件在二维坐标系中的坐标。该二维坐标系可以是指以显示面板01所在平面为基准的坐标系。
需要说明的是,用户眼睛一般包括瞳孔,巩膜以及虹膜。由于用户眼睛的不同区域对光线(如,红外光)的反射率不同,因此不同位置处的第一光电传感组件02和不同位置处的第二光电传感组件03采集到的光信号不同。
示例的,结合图1,图2示出了各个第一光电传感组件02采集的用户眼睛不同区域反射的光信号的信号值。图3示出了各个第二光电传感组件03采集的用户眼睛不同区域反射的光信号的信号值。图2和图3中的横坐标x0均是指各个第二光电传感组件03的设置位置,纵坐标y0均是指采集到的光信号的信号值。结合图2和图3可以看出,因瞳孔的颜色一般最深,故瞳孔反射的光信号一般最小。相应的,由该瞳孔反射的光信号转换得到的电信号的信号值最小。故,在本公开实施例中,定位电路04基于所传输的电信号的信号值较小的目标第一光电传感组件的位置,以及所传输的电信号的信号值较小的目标第二光电传感组件的位置,可以可靠确定出用户眼睛在显示面板01上的注视点的位置。
通常情况下,电信号的数据量较少,而图像的数据量较多,故本公开实施例提供的定位电路04能够基于电信号快速确定出用户眼睛在显示面板01上的注视点的位置。进而,能够提高显示面板01显示图像的效率。
综上所述,本公开实施例提供了一种显示设备。该显示设备中,多个第一光电传感组件和多个第二光电传感组件用于将采集到的用户眼睛反射的光信号转换为电信号后,传输至定位电路。定位电路用于将所传输的电信号的信号值较小的一个或多个第一光电传感组件确定为目标第一光电传感组件,并将所传输的电信号的信号值较小的一个或多个第二光电传感组件确定为目标第二光电传感组件,并基于目标第一光电传感组件和目标第二光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置。因确定注视点的位置的整个过程不涉及图像处理,故该确定方式较为简单,进而确定用户眼睛注视点的效率较高。
可选地,第一阈值和第二阈值可以是定位电路04中预先存储的固定值。
或者,该第一阈值可以是定位电路04根据接收到的多个第一光电传感组件03传输的电信号的信号值确定的。第二阈值可以是定位电路04根据接收到的多个第二光电传感组件04传输的电信号的信号值确定的。
例如,定位电路04可以对N个第一光电传感组件02传输的N个电信号的信号值按照由小到大的顺序排列,并可以将位于第n位的信号值确定为第一阈值。其中,N为大于1的整数,n为大于1且小于N/2的整数。定位电路04可以对M个第二光电传感组件04传输的M个电信号的信号值按照由小到大的顺序排列,并可以将位于第m位的信号值确定为第二阈值。其中,M为大于1的整数,m为大于1且小于M/2的整数。
又或者,定位电路04可以将接收到的各个第一光电传感组件02传输的电信号中,信号值最小的电信号的信号值确定为第一阈值,将接收到的各个第二光电传感组件03传输的电信号中,信号值最小的电信号的信号值确定为第二阈值。在此基础上,定位电路04可以用于:基于接收到的电信号确定一个目标第一光电传感组件和一个目标第二光电传感组件。
其中,该目标第一光电传感组件传输的电信号的信号值小于其他任一第一光电传感组件02传输的电信号的信号值,该目标第二光电传感组件传输的电信号的信号值小于其他任一第二光电传感组件03传输的电信号的信号值。
可选地,本公开实施例记载的每个第一光电传感组件02可以包括一个或多个光敏传感器(sensor)。且,在每个第一光电传感组件02包括多个光敏传感器(sensor)时,该多个光敏传感器可以沿同一方向依次间隔排布。每个第二光电传感组件03同理,在此不再赘述。
可选地,参考图4,第一方向X与第二方向Y可以垂直。该第一方向X可以为显示面板01的像素行方向,该第二方向Y可以为显示面板01的像素列方向。周边区B0可以包括:两个沿第一方向X延伸的第一条状区域B01以及两个沿第二方向Y延伸的第二条状区域B02。再结合图5可以看出,两个第一条状区域B01可以分别位于显示区A0的两侧,且每个第一条状区域B01内均设置有多个第一光电传感组件02。两个第二条状区域B02可以分别位于显示区A0的两侧,且每个第二条状区域B02内均设置有多个第二光电传感组件03。需要说明的是,每个第一条状区域B01内的各个第一光电传感组件02,以及每个第二条状区域B02内的各个第二光电传感组件03均与定位电路04耦接。
因用户眼睛的瞳孔会不规律的上下左右转动,故在显示区A0的四个侧边均设置光电传感组件,可以确保定位电路04对用户眼睛反射的各个方向的光信号的可靠采集,进而进一步确保定位电路04确定用户眼睛注视点的位置的精度。
图6是本公开实施例提供的另一种显示设备的结构示意图。如图6所示,该显示设备中的定位电路04可以包括:检测子电路041和定位子电路042。
多个第一光电传感组件02和多个第二光电传感组件03可以均与该检测子电路041耦接。多个第一光电传感组件02和多个第二光电传感组件03可以用于将采集到的光信号转换为电信号后,传输至该检测子电路041。
检测子电路041还可以与定位子电路042耦接。该检测子电路041可以用于基于接收到的电信号确定至少一个目标第一光电传感组件和至少一个目标第二光电传感组件,并向定位子电路042传输用于指示至少一个目标第一光电传感组件的第一信息,以及用于指示至少一个目标第二光电传感组件的第二信息。
可选地,在本公开实施例中,每个第一光电传感组件02可以唯一对应有一个第一信息,即每个第一光电传感组件02的第一信息可以用于唯一指示该第一光电传感组件02的设置位置。同理,每个第二光电传感组件03可以唯一对应有一个第二信息,即每个第二光电传感组件03的第二信息可以用于唯一指示该第二光电传感组件03的设置位置。如此,可以便于定位子电路042后续确定目标第一光电传感组件的位置和目标第二光电传感组件的位置。
例如,该第一信息和第二信息可以均为二进制数,二进制数是指用0和1两个数码来所表示的数。如此,可以确定每个第一条状区域B01所包括的第一光电传感组件02的数量和每个第二条状区域B02所包括的第二光电传感组件03的数量均为2的n次方,n为二进制数的位数,且n大于1。如,假设每个第一区域B01均包括图6所示的8个第一光电传感组件02,则可以设置第一信息为三位二进制数,从而区分不同的第一光电传感组件02。第二光电传感组件03同理,在此不再赘述。
定位子电路042可以用于基于接收到的第一信息,确定各个目标第一光电传感组件在第二方向Y上的第一坐标。以及,定位子电路042可以用于基于接收到的第二信息,确定各个目标第二光电传感组件在第一方向X上的第二坐标,并基于第一坐标和第二坐标,确定用户眼睛在显示面板01上的注视点的位置。
可选地,定位子电路042中可以预先存储有各个第一光电传感组件02的第一信息,以及各个第二光电传感组件03的第二信息。假设仅确定一个目标第一光电传感组件和一个目标第二光电传感组件,则定位子电路042在接收到第一信息后,可以先将预先存储的各个第一光电传感组件02的第一信息中,与接收到的第一信息相同的第一信息对应的第一光电传感组件02确定为目标第一光电传感组件,以及可以将预先存储的各个第二光电传感组件03的第二信息中,与接收到的第二信息相同的第二信息对应的第二光电传感组件03确定为目标第二光电传感组件。然后将该目标第一光电传感组件在第二方向Y上的第一坐标y1,以及该目标第二光电传感组件在第一方向X上的第二坐标x1对应的一点确定为用户眼睛在显示面板01上的注视点。即,注视点的位置为(x1,y1)。
例如,结合图6,假设第二信息为三位二进制数,位于显示区A0上方且沿第一方向X依次排布的八个第一光电传感组件02的第一信息由左至右分别为:000、001、010、011、100、101、110和111。位于显示区A0右侧且沿第二方向Y依次排布的八个第二光电传感组件03的第二信息由上至下分别为:000、001、010、011、100、101、110和111。检测子电路041向定位子电路042传输的第一信息为100,第二信息为010。则定位子电路042可以基于预先存储的各个第一光电传感组件02的第一信息,可靠确定出目标第一光电传感组件为由左至右排布的第五个第一光电传感组件02。以及,定位子电路042可以基于预先存储的各个第二光电传感组件03的第二信息,可靠确定出目标第二光电传感组件为由上至下排布的第三个第二光电传感组件03。然后,定位子电路042可以进一步确定第五个第一光电传感组件02的第一坐标和第三个第二光电传感组件03的第二坐标,并基于确定出的第一坐标和第二坐标得到注视点的位置。
可选地,图7是本公开实施例提供的又一种显示设备的结构示意图。如图7所示,检测子电路041可以包括第一检测子电路0411和第二检测子电路0412。
其中,第一检测子电路0411可以与多个第一光电传感组件02耦接。第一检测子电路0411可以用于向定位子电路042传输用于指示至少一个目标第一光电传感组件的第一信息。第二检测子电路0412可以与多个第二光电传感组件03耦接。第二检测子电路0412可以用于向定位子电路042传输用于指示至少一个目标第二光电传感组件的第二信息。
需要说明的是,每个第一条状区域B01可以对应有一个第一检测子电路0411,每个第二条状区域B02可以对应有一个第二检测子电路0412。即,对于图5所示结构,结合图8可以看出,检测子电路041可以包括与两个第一条状区域B01一一对应的两个第一检测子电路0411,以及与两个第二条状区域B02一一对应的两个第二检测子电路0412。
以各个第一检测子电路0411与各个第二检测子电路0412的结构相同为例,第一检测子电路0411和第二检测子电路0412均可以包括至少一个第一比较单元U1。图9示出了一种第一检测子电路的结构示意图,如图9所示,每个第一比较单元U1可以包括:四个放大器A1、A2、A3和A4,两个第一比较器V11和V12,两个第一选通开关K11和K12,一个第二比较器V21,以及一个第二选通开关K21。
其中,每个放大器的输入端与对应的一个光电传感组件耦接。如此,能够确定每个第一检测子电路0411包括的第一比较单元U1的数量可以为:所耦接的多个第一光电传感组件02的数量的1/2。且,每个第一检测子电路0411包括的放大器的数量与所耦接的多个第一光电传感组件02的数量相同。
例如,假设如图8所示,每个第一条状区域B01共包括四个第一光电传感组件02,则结合图9,每个第一检测子电路0411可以包括一个第一比较单元U1。该第一比较单元U1中的第一个放大器A1的输入端可以与由左至右延伸的第一个第一光电传感组件02耦接,第二个放大器A2的输入端可以与由左至右延伸的第二个第一光电传感组件02耦接,第三个放大器A3的输入端可以与由左至右延伸的第三个第一光电传感组件02耦接,第四个放大器A4的输入端可以与由左至右延伸的第四个第一光电传感组件02耦接。
每个第一比较器的两个输入端(即,正相输入端+和负相输入端-)可以分别与两个放大器的输出端耦接,每个第一比较器的输出端可以分别与一个第一选通开关的控制端和第二选通开关K21的一个输入端耦接。每个第一选通开关的两个输入端可以分别与该两个放大器的输出端耦接,每个第一选通开关的输出端可以与第二比较器V21的一个输入端耦接。其中,该第一选通开关K11和K12用于输出其两个输入端接收到的电信号中信号值较小的电信号。
例如,继续参考图9,其示出的第一个第一比较器V11的两个输入端分别与第一个放大器A1的输出端和第二个放大器A2的输出端耦接,第一个第一比较器V11的输出端分别与第一个第一选通开关K11的控制端和第二选通开关K21的一个输入端I1耦接。第一个第一选通开关K11的两个输入端I1和I2分别与第一个放大器A1的输出端和第二个放大器A2的输出端耦接。第一个第一选通开关K11的输出端a1与第二比较器V21的正相输入端+耦接。第二个第一比较器V12的两个输入端分别与第三个放大器A3的输出端和第二个放大器A4的输出端耦接,第二个第一比较器V12的输出端分别与第二个第一选通开关K12的控制端和第二选通开关K21的另一个输入端I2耦接。第二个第一选通开关K12的两个输入端I1和I2分别与第三个放大器A3的输出端和第四个放大器A4的输出端耦接。第二个第一选通开关K12的输出端b1与第二比较器V21的负相输入端-耦接。
第二比较器V21的输出端O1分别与第二选通开关K21的控制端和定位子电路042耦接,第二选通开关K21的输出端O2与定位子电路042耦接。该第二选通开关K21用于输出目标第一选通开关所耦接的第一比较器的输出端的结果。其中,该目标第一选通开关为两个第一选通开关中,输出端所输出的电信号的信号值较小的第一选通开关。需要说明的是,O1为第一信息的二进制数的第一位,O2为第一信息的二进制数的第二位,即第一信息为“O1-O2”。
以图9所示结构的最小单元为例,对每个比较器的比较原理说明如下。
示例的,图10是本公开实施例提供的一种第一检测子电路0411包括的一个第一比较器V11以及其所直接耦接的部分结构示意图。其中,与第一个放大器A1耦接的第一光电传感组件02传输的电信号可以经放大器A1放大后,分别传输至第一比较器V11的正相输入端+和第一个第一选通开关K11的输入端I1。与第二个放大器A2耦接的第一光电传感组件02传输的电信号可以经放大器A2放大后,分别传输至第一比较器V11的负相输入端-和第一个第一选通开关K11的输入端I2。基于比较器的比较原理可知,若第一比较器V11的正相输入端+接收到的信号值大于负相输入端-接收到的信号值,则其输出端的输出结果为“1”。此时,在第一比较器V11的输出端的输出结果控制下,第一选通开关K11的输出端a2可以与输入端I2导通。换言之,经放大器A2传输至第一比较器V11的负相输入端-,且信号值较小的电信号可以进一步经第一选通开关K11传输至图9所示的第二比较器V21的正相输入端+。若第一比较器V11的正相输入端+接收到的信号值小于负相输入端-接收到的信号值,则其输出端的输出结果为“0”。此时,在第一比较器V11的输出端的输出结果控制下,第一选通开关K11的输出端a1可以与输入端I1导通。换言之,经放大器A1传输至第一比较器V11的正相输入端+,且信号值较小的电信号可以进一步经第一选通开关K11传输至图9所示的第二比较器V21的正相输入端+。
需要说明的是,在一些实施例中,可以不设置放大器。即,对于图10所示结构的第一比较器V11而言,其正相输入端+和负相输入端-可以分别与两个第一光电传感组件02直接耦接。
对于图9所示结构而言,第一信息和第二信息可以均为二位二进制数。假设如图9所示,第一个放大器A1所耦接的第一个第一光电传感组件02的第一信息为00,第二个放大器A2所耦接的第二个第一光电传感组件02的第一信息为01,第三个放大器A3所耦接的第三个第一光电传感组件02的第一信息为10和第四个放大器A4所耦接的第一光电传感组件02的第一信息为11。且,该四个第一光电传感组件02所传输的电信号的信号值满足下述大小关系:信号值_10<信号值_01<信号值_00<信号值_11。信号值_10是指第一信息为10的第一光电传感组件02传输的电信号的信号值,信号值_01是指第一信息为01的第一光电传感组件02传输的电信号的信号值,信号值_00是指第一信息为00的第一光电传感组件02传输的电信号的信号值,信号值_11是指第一信息为11的第一光电传感组件02传输的电信号的信号值。结合上述条件以及针对图10所示一个最小单元的原理介绍可知:
因信号值_01<信号值_00,故第一个第一比较器V11的输出端的输出结果为“1”,且第一个第一选通开关K11的输出端a1与输入端I2导通。相应的,第一信息为01的第一光电传感组件02传输的电信号可以经放大器A2放大,再经第一选通开关K11传输至第二比较器V21的正相输入端+。
因信号值_10<信号值_11,故第二个第一比较器V12的输出端的输出结果为“0”,且第二个第一选通开关K12的输出端b1与输入端I1导通。相应的,第一信息为10的第一光电传感组件02传输的电信号可以经放大器A3放大,再经该第一选通开关K12传输至第二比较器V21的负相输入端-。
因信号值_10<信号值_01,故第二比较器V21的输出端O1的输出结果为“1”。且第二选通开关K21的输出端O1与输入端I2导通,输出结果为“0”。
由此,定位子电路042接收到的第一信息即为10。相应的,定位子电路042可以将与放大器A3耦接的第三个第一光电传感组件02确定为目标第一光电传感组件。换言之,经该第一比较单元U1处理后,所传输电信号的信号值最小的第一光电传感组件02的第一信息,可以被传输至定位子电路042。
可选地,若每个第一条状区域B01中的第一光电传感组件02的数量大于4,则第一检测子电路0411和第二检测子电路0412可以均包括多个第一比较单元U1,且该第一检测子电路0411和第二检测子电路0412还均可以包括至少一个第二比较单元U2。示例的,依然以各个第一检测子电路0411与各个第二检测子电路0412的结构相同,且每个第一条状区域B01中包括8个第一光电传感组件02为例,图11示出了本公开实施例提供的另一种第一检测子电路0411的结构示意图。参考图11可以看出,每个第一检测子电路0411可以包括两个第一比较单元U1以及一个第二比较单元U2。
其中,每个第二比较单元U2可以包括:两个第三选通开关K31和K32,一个第三比较器V31、一个第四选通开关K41和一个第五选通开关K51。
其中,每个第二比较器的输出端还可以与一个第三选通开关的控制端耦接。
例如,参考图11,第一个第一比较单元U1中的第二比较器V21的输出端可以与第一个第三选通开关K31的控制端耦接。第二个第一比较单元U1中的第二比较器V22的输出端可以与第二个第三选通开关K32的控制端耦接。
每个第三选通开关的两个输入端可以分别与两个第一选通开关的输出端耦接,每个第三选通开关的输出端可以与第三比较器V31的一个输入端耦接。该第三选通开关可以用于输出两个该第一选通开关的输出端所输出的电信号中,信号值较小的电信号。
例如,参考图11,第一个第三选通开关K31的两个输入端I1和I2分别与第一个第一比较单元U1中的第一个第一选通开关K11的输出端a1和第二个第一选通开关K12的输出端b1耦接。第一个第三选通开关K31的输出端a2与第三比较器V31的正相输入端+耦接。第二个第三选通开关K32的两个输入端I1和I2分别与第三个第一选通开关K13的输出端a1和第四个第一选通开关K14的输出端b1耦接。第二个第三选通开关K32的输出端b2与第三比较器V31的负相输入端-耦接。
每个第三比较器V31的输出端O1可以分别与第四选通开关K41的控制端、第五选通开关K51的控制端和定位子电路042耦接。
第四选通开关K41的两个输入端I1和I2可以分别与两个第二比较器V21和V22的输出端耦接,第四选通开关K41的输出端O2可以与定位子电路042耦接。该第四选通开关K41可以用于输出目标第三通开关所耦接的第二比较器的输出端的结果。该目标第三选通开关为两个第三选通开关K31和K32中,输出端所输出的电信号的信号值较小的第三选通开关。
第五选通开关K51的两个输入端I1和I2可以分别与两个第二选通开关K21和K22的输出端耦接,该第五选通开关K51的输出端O3可以与定位子电路042耦接。该第五选通开关K51可以用于输出目标第一比较器的输出端的结果。其中,该目标第一比较器为多个该第一比较器中,目标第一选通开关耦接的第一比较器。该目标第一选通开关为多个该第一选通开关中,输出端所输出的电信号的信号值最小的第一选通开关。需要说明的是,O1为第一信息的二进制数的第一位,O2为第一信息的二进制数的第二位,O3为第一信息的二进制数的第三位,即第一信息为“O1-O2-O3”。
对于图11所示结构而言,第一信息和第二信息可以均为三位二进制数。假设第一个放大器A1所耦接的第一个第一光电传感组件02的第一信息为000,第二个放大器A2所耦接的第二个第一光电传感组件02的第一信息为001、第三个放大器A3所耦接的第三个第一光电传感组件02的第一信息为010、第四个放大器A4所耦接的第四个第一光电传感组件02的第一信息为011、第五个放大器A5所耦接的第五个第一光电传感组件02的第一信息为100、第六个放大器A6所耦接的第六个第一光电传感组件02的第一信息为101、第七个放大器A7所耦接的第七个第一光电传感组件02的第一信息为110和第八个放大器A8所耦接的第八个第一光电传感组件02的第一信息为111。
且,该八个第一光电传感组件02所传输的电信号的信号值满足下述大小关系:信号值_111<信号值_110<信号值_010<信号值_101<信号值_001<信号值_000<信号值_100<信号值_011。信号值_111是指第一信息为111的第一光电传感组件02传输的电信号的信号值,信号值_110是指第一信息为110的第一光电传感组件02传输的电信号的信号值,信号值_010是指第一信息为010的第一光电传感组件02传输的电信号的信号值,信号值_101是指第一信息为101的第一光电传感组件02传输的电信号的信号值,信号值_001是指第一信息为001的第一光电传感组件02传输的电信号的信号值,信号值_000是指第一信息为000的第一光电传感组件02传输的电信号的信号值,信号值_100是指第一信息为100的第一光电传感组件02传输的电信号的信号值,信号值_011是指第一信息为011的第一光电传感组件02传输的电信号的信号值。则结合上述条件以及针对图10所示一个最小单元的原理介绍可知:
因信号值_000>信号值_001,故第一个第一比较器V11的输出端的输出结果为“1”,且第一选通开关K11的输出端a1与输入端I2导通。相应的,第一信息为001的第一光电传感组件02传输的电信号可以经放大器A2放大,再经该第一选通开关K11传输至第一个第二比较器V21的正相输入端+。
因信号值_010<信号值_011,第二个第一比较器V12的输出端的输出结果“0”,且第一选通开关K12的输出端b1与输入端I1导通。相应的,第一信息为010的第一光电传感组件02传输的电信号可以经放大器A3放大,再经该第一选通开关K12传输至第一个第二比较器V21的负相输入端-。
因信号值_100>信号值_101,第三个第一比较器V13的输出端的输出结果为“1”,且第一选通开关K13的输出端a1与输入端I2导通。相应的,第一信息为101的第一光电传感组件02传输的电信号可以经放大器A6放大,再经该第一选通开关K13传输至第二个第二比较器V22的正相输入端+。
因信号值_110>信号值_111,第四个第一比较器V14的输出端的输出结果为“1”,且第一选通开关K14的输出端b1与输入端I2导通。相应的,第一信息为111的第一光电传感组件02传输的电信号可以经放大器A8放大,再经该第一选通开关K14传输至第二个第二比较器V22的负相输入端-。
因信号值_001>信号值_010,第一个第二比较器V21的输出端的输出结果为“1”。且第一个第二选通开关K21的输出端与输入端I2导通。相应的,第二个第一比较器V12的输出结果“0”可以经第二选通开关K21传输至第五选通开关K51的输入端I1。第一个第三选通开关K31的输出端a2与输入端I1导通。相应的,第一信息为010的第一光电传感组件02传输的电信号可以经放大器A3放大,再经第一选通开关K12和该第三选通开关K31传输至第三比较器V31的正相输入端+。
因信号值_101>信号值_111,第二个第二比较器V22的输出端的输出结果为“1”。且第二个第二选通开关K22的输出端与输入端I2导通。相应的,第四个第一比较器V14的输出结果“1”可以经第二选通开关K22传输至第五选通开关K51的输入端I2。第二个第三选通开关K32的输出端b2与输入端I1导通,相应的,第一信息为111的第一光电传感组件02传输的电信号可以经放大器A8放大,再经第一选通开关K14和该第三选通开关K32传输至第三比较器V31的负相输入端-。
因信号值_010>信号值_111,第三比较器V31的输出端O1的输出结果为“1”。第四选通开关K41的输出端O2与输入端I2导通,输出结果为“1”。第五选通开关K51的输出端O3与输入端I2导通,输出结果为“1”。
由此,定位子电路042接收到的第一信息即为111。相应的,定位子电路042可以将与放大器A8耦接的第八个第一光电传感组件02确定为目标第一光电传感组件。换言之,经该两个第一比较单元U1和一个第二比较单元U2处理后,所传输电信号的信号值最小的第一光电传感组件02的第一信息,可以被传输至定位子电路042。
换言之,因第三比较器V31的输出端O1的输出结果,即第一信息的第一位为“1”,故可以确定八个第一光电传感组件02所传输的电信号中,传输的信号值最小的第一光电传感组件02为下述四个第一光电传感组件02中的一个。该四个第一光电传感组件02分别为:第一信息为100的第一光电传感组件02、第一信息为101的第一光电传感组件02、第一信息为110的第一光电传感组件02和第一信息为111的第一光电传感组件02。
因第四选通开关K41的输出端O2的输出结果,即第一信息的第二位为“1”,故可以进一步确定第一信息为100的第一光电传感组件02、第一信息为101的第一光电传感组件02、第一信息为110的第一光电传感组件02和第一信息为111的第一光电传感组件02所传输的电信号中,传输的信号值最小的第一光电传感组件02为下述两个第一光电传感组件02中的一个。该两个第一光电传感组件02分别为:第一信息为110的第一光电传感组件02和第一信息为111的第一光电传感组件02。
因第五选通开关K51的输出端O3的输出结果,即第一信息的第三位为“1”,故可以确定第一信息为110的第一光电传感组件02和第一信息为111的第一光电传感组件02中,传输的信号值最小的第一光电传感组件02的第一信息为111。
当然,在一些实施例中,每个第一条状区域B01内可以包括更多数量的第一光电传感组件02,如多个第一光电传感组件的数量可以为32个,此时第一信息的二进制位数可以为5。由图9和图11可以确定,参考图12,检测子电路0411包括八个第一比较单元U1,四个第二比较单元U2,还包括三个比较器V41、V51和V61,以及十六个选通开关K61至K211。第二检测子电路0412同理,在此不再赘述。
可选地,第一检测子电路0411和第二检测子电路0412可以并行工作,即可以同时确定至少一个目标第一光电传感组件和至少一个目标第二光电传感组件,并向定位子电路042传输用于指示至少一个目标第一光电传感组件的第一信息,以及用于指示至少一个目标第二光电传感组件的第二信息。如此,可以进一步提高定位子电路042确定用户眼睛的注视点位置的效率,且实时性较高。
可选地,检测子电路041和定位子电路042可以集成设置,即包括检测子电路041和定位子电路042的定位电路04可以被设计为一个集成电路(integrated circuit,IC)芯片。该IC芯片能够被配置于不同的显示设备中,以通过上述实施例记载的方式确定用户眼睛在显示面板01上的注视点的位置。
可选地,定位子电路042可以为现场可编程逻辑门阵列(field programmablegate array,FPGA)芯片。
图13是本公开实施例提供的另一种显示设备的示意图,如图13所示,该显示设备00还可以包括:位于该显示面板显示侧的透镜05和位于该透镜05周边的多个发光元件06。其中,用户眼睛反射的光信号为用户眼睛反射多个发光元件06发出的光线后的光信号。
可选地,发光元件06可以为红外发光二极管。由于用户眼睛的瞳孔,巩膜以及虹膜对红外光的反射率的差异较大,因此将发光元件06设计为红外发光二极管,可以使得光电传感组件接收到的瞳孔反射的红外光的光信号,巩膜反射的红外光的光信号以及虹膜反射的红外光的光信号的差异较大,便于定位电路04确定用户眼睛在显示面板01上的注视点的位置。
可选地,本公开实施例记载的显示设备00可以为可穿戴显示设备。例如,该可穿戴设备可以为头戴式显示设备,如此可以实现对用户眼睛反射的光信号的可靠且有效采集。
可选地,该可穿戴显示设备可以为VR显示设备,或,增强现实(augmentedreality,AR)显示设备。
综上所述,本公开实施例提供了一种显示设备。该显示设备中,多个第一光电传感组件和多个第二光电传感组件用于将采集到的用户眼睛反射的光信号转换为电信号后,传输至定位电路。定位电路用于将所传输的电信号的信号值较小的一个或多个第一光电传感组件确定为目标第一光电传感组件,并将所传输的电信号的信号值较小的一个或多个第二光电传感组件确定为目标第二光电传感组件,并基于目标第一光电传感组件和目标第二光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置。因确定注视点的位置的整个过程不涉及图像处理,故该确定方式较为简单,进而确定用户眼睛注视点的效率较高。
图14是本公开实施例提供的一种注视点的定位方法的流程图,应用于如图1、图4至图8和图13任一所示的显示设备包括的定位电路中。如图14所示,该方法包括:
步骤1401、接收多个第一光电传感组件和多个第二光电传感组件传输的电信号。
其中,该电信号为该多个第一光电传感组件和该多个第二光电传感组件对采集到的用户眼睛反射的光信号转换得到的。
步骤1402、基于电信号,从该多个第一光电传感组件中确定至少一个目标第一光电传感组件。
其中,该目标第一光电传感组件传输的电信号的信号值小于第一阈值。
步骤1403、基于电信号,从该多个第二光电传感组件中确定至少一个目标第二光电传感组件。
其中,该目标第二光电传感组件传输的电信号的信号值小于第二阈值。
步骤1404、基于至少一个目标第一光电传感组件的位置和至少一个目标第二光电传感组件的位置,确定用户眼睛在该显示面板上的注视点的位置。
需要说明的是,各个步骤的可选实现方式可以参考上述装置侧实施例的描述,在此不再赘述。
综上所述,本公开实施例提供了一种注视点的定位方法。该方法中,定位电路可以接收多个第一光电传感组件和多个第二光电传感组件传输的电信号,该电信号为多个第一光电传感组件和多个第二光电传感组件将采集到的用户眼睛反射的光信号转换得到的。以及,该定位电路可以将所传输的电信号的信号值较小的一个或多个第一光电传感组件确定为目标第一光电传感组件,并将所传输的电信号的信号值较小的一个或多个第二光电传感组件确定为目标第二光电传感组件,并基于目标第一光电传感组件和目标第二光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置。因确定注视点的位置的整个过程不涉及图像处理,故该确定方式较为简单,进而确定用户眼睛注视点的效率较高。
图15是本公开实施例提供的一种注视点的定位电路的框图。如图15所示,该定位电路包括:
接收模块1501,用于接收多个第一光电传感组件和多个第二光电传感组件传输的电信号。
其中,该电信号为该多个第一光电传感组件和该多个第二光电传感组件对采集到的用户眼睛反射的光信号转换得到的。
第一确定模块1502,用于基于电信号,从该多个第一光电传感组件中确定至少一个目标第一光电传感组件。
其中,该目标第一光电传感组件传输的电信号的信号值小于第一阈值。
第二确定模块1503,用于基于电信号,从该多个第二光电传感组件中确定至少一个目标第二光电传感组件。
其中,该目标第二光电传感组件传输的电信号的信号值小于第二阈值。
第三确定模块1504,用于基于至少一个目标第一光电传感组件的位置和至少一个目标第二光电传感组件的位置,确定用户眼睛在该显示面板上的注视点的位置。
综上所述,本公开实施例提供了一种注视点的定位电路。该装置可以接收多个第一光电传感组件和多个第二光电传感组件传输的电信号,该电信号为多个第一光电传感组件和多个第二光电传感组件将采集到的用户眼睛反射的光信号转换得到的。以及,可以将所传输的电信号的信号值较小的一个或多个第一光电传感组件确定为目标第一光电传感组件,并将所传输的电信号的信号值较小的一个或多个第二光电传感组件确定为目标第二光电传感组件,并基于目标第一光电传感组件和目标第二光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置。因确定注视点的位置的整个过程不涉及图像处理,故该装置确定用户眼睛注视点的方式较为简单,进而确定用户眼睛注视点的效率较高。
本公开实施例提供了一种计算机可读存储介质。该计算机可读存储介质中存储有指令,该指令由显示设备执行如上述方法实施例所示的注视点定位方法。
图16是本公开实施例提供的一种显示设备中的定位电路的结构示意图。如图16所示,该定位电路包括处理子电路,存储器,以及存储在存储器上并可在处理器上运行的计算机程序。该处理器执行该计算机程序时实现如上述方法实施例所示的注视点定位方法。
以上所述仅为本公开的可选实施例,并不用以限制本公开,凡在本公开的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本公开的保护范围之内。
Claims (16)
1.一种显示设备,其特征在于,所述显示设备包括:显示面板,多个第一光电传感组件,多个第二光电传感组件和定位电路;所述显示面板包括显示区和围绕所述显示区的周边区,所述多个第一光电传感组件位于所述周边区且沿第一方向排布,所述多个第二光电传感组件位于所述周边区且沿第二方向排布,所述第一方向与所述第二方向相交;
所述多个第一光电传感组件和所述多个第二光电传感组件均与所述定位电路耦接,所述多个第一光电传感组件和所述多个第二光电传感组件用于采集用户眼睛反射的光信号,并将所述光信号转换为电信号后,传输至所述定位电路;
所述定位电路用于基于接收到的电信号,从所述多个第一光电传感组件中确定至少一个目标第一光电传感组件,从所述多个第二光电传感组件中确定至少一个目标第二光电传感组件,并基于所述至少一个目标第一光电传感组件的位置和所述至少一个目标第二光电传感组件的位置,确定用户眼睛在所述显示面板上的注视点的位置;
其中,所述目标第一光电传感组件传输的电信号的信号值小于等于第一阈值,所述目标第二光电传感组件传输的电信号的信号值小于等于第二阈值。
2.根据权利要求1所述的显示设备,其特征在于,所述定位电路用于基于接收到的电信号确定一个目标第一光电传感组件和一个目标第二光电传感组件;
其中,所述目标第一光电传感组件传输的电信号的信号值小于其他任一第一光电传感组件传输的电信号的信号值,所述目标第二光电传感组件传输的电信号的信号值小于其他任一第二光电传感组件传输的电信号的信号值。
3.根据权利要求1所述的显示设备,其特征在于,所述第一方向与所述第二方向垂直;所述周边区包括:两个沿所述第一方向延伸的第一条状区域,以及两个沿所述第二方向延伸的第二条状区域;
两个所述第一条状区域分别位于所述显示区的两侧,且每个所述第一条状区域内均设置有多个所述第一光电传感组件;
两个所述第二条状区域分别位于所述显示区的两侧,且每个所述第二条状区域内均设置有多个所述第二光电传感组件。
4.根据权利要求1至3任一所述的显示设备,其特征在于,所述定位电路包括:检测子电路和定位子电路;
所述多个第一光电传感组件和所述多个第二光电传感组件均与所述检测子电路耦接,所述多个第一光电传感组件和所述多个第二光电传感组件用于将采集到的光信号转换为电信号后,传输至所述检测子电路;
所述检测子电路还与所述定位子电路耦接,所述检测子电路用于基于接收到的电信号确定至少一个目标第一光电传感组件和至少一个目标第二光电传感组件,并向所述定位子电路传输用于指示所述至少一个目标第一光电传感组件的第一信息,以及用于指示所述至少一个目标第二光电传感组件的第二信息;
所述定位子电路用于基于接收到的第一信息确定各个所述目标第一光电传感组件在所述第二方向上的第一坐标,基于接收到的第二信息确定各个所述目标第二光电传感组件在所述第一方向上的第二坐标,并基于所述第一坐标和所述第二坐标,确定用户眼睛在所述显示面板上的注视点的位置。
5.根据权利要求4所述的显示设备,其特征在于,所述检测子电路包括与所述多个第一光电传感组件耦接的第一检测子电路,以及与所述多个第二光电传感组件耦接的第二检测子电路;所述第一检测子电路和所述第二检测子电路均包括至少一个第一比较单元,所述第一比较单元包括:四个放大器,两个第一比较器,两个第一选通开关,一个第二比较器,以及一个第二选通开关;
每个所述放大器的输入端与对应的一个光电传感组件耦接;
每个所述第一比较器的两个输入端分别与两个所述放大器的输出端耦接,每个所述第一比较器的输出端分别与一个所述第一选通开关的控制端和所述第二选通开关的一个输入端耦接;
每个所述第一选通开关的两个输入端分别与两个所述放大器的输出端耦接,每个所述第一选通开关的输出端与所述第二比较器的一个输入端耦接,所述第一选通开关用于输出其两个输入端接收到的电信号中信号值较小的电信号;
所述第二比较器的输出端与所述第二选通开关的控制端和所述定位子电路耦接,所述第二选通开关的输出端与所述定位子电路耦接,所述第二选通开关用于输出目标第一选通开关所耦接的第一比较器的输出端的结果,所述目标第一选通开关为所述两个第一选通开关中,输出端所输出的电信号的信号值较小的第一选通开关。
6.根据权利要求5所述的显示设备,其特征在于,所述第一检测子电路和所述第二检测子电路均包括多个所述第一比较单元,且所述第一检测子电路和所述第二检测子电路还均包括至少一个第二比较单元,每个所述第二比较单元包括:两个第三选通开关,一个第三比较器、一个第四选通开关以及一个第五选通开关;
每个所述第二比较器的输出端还与一个所述第三选通开关的控制端耦接;
每个所述第三选通开关的两个输入端分别与两个所述第一选通开关的输出端耦接,每个所述第三选通开关的输出端与所述第三比较器的一个输入端耦接,所述第三选通开关用于输出两个所述第一选通开关的输出端所输出的电信号中,信号值较小的电信号;
每个所述第三比较器的输出端分别与所述第四选通开关的控制端、所述第五选通开关的控制端和所述定位子电路耦接;
所述第四选通开关的两个输入端分别与两个所述第二比较器的输出端耦接,所述第四选通开关的输出端与所述定位子电路耦接,所述第四选通开关用于输出目标第三通开关所耦接的第二比较器的输出端的结果,所述目标第三选通开关为所述两个第三选通开关中,输出端所输出的电信号的信号值较小的第三选通开关;
所述第五选通开关的两个输入端分别与两个所述第二选通开关的输出端耦接,所述第五选通开关的输出端与所述定位子电路耦接,所述第五选通开关用于输出目标第一比较器的输出端的结果,所述目标第一比较器为多个所述第一比较器中,目标第一选通开关耦接的第一比较器,所述目标第一选通开关为多个所述第一选通开关中,输出端所输出的电信号的信号值最小的第一选通开关。
7.根据权利要求5所述的显示设备,其特征在于,所述第一检测子电路包括的放大器的数量与所耦接的多个第一光电传感组件的数量相同;
且,所述第二检测子电路包括的放大器的数量与所耦接的多个第二光电传感组件的数量相同。
8.根据权利要求4所述的显示设备,其特征在于,所述第一信息和所述第二信息均为二进制数。
9.根据权利要求8所述的显示设备,其特征在于,所述周边区包括的每个第一条状区域中的多个第一光电传感组件的数量,以及所述周边区包括的每个二条状区域中的多个第二光电传感组件的数量均为2的n次方;
其中,n为所述二进制数的位数,且n大于1。
10.根据权利要求9所述的显示设备,其特征在于,所述n为3。
11.根据权利要求4所述的显示设备,其特征在于,所述定位子电路为现场可编程逻辑门阵列FPGA芯片。
12.根据权利要求1至3任一所述的显示设备,其特征在于,所述显示设备还包括:位于所述显示面板显示侧的透镜和位于所述透镜周边的多个发光元件;
其中,所述用户眼睛反射的光信号为用户眼睛反射所述多个发光元件发出的光线后的光信号。
13.根据权利要求12所述的显示设备,其特征在于,所述发光元件为红外发光二极管。
14.根据权利要求1至3任一所述的显示设备,其特征在于,所述显示设备为可穿戴显示设备。
15.一种注视点的定位方法,其特征在于,应用于如权利要求1至14任一所述的显示设备包括的定位电路中,所述方法包括:
接收多个第一光电传感组件和多个第二光电传感组件传输的电信号,所述电信号为所述多个第一光电传感组件和所述多个第二光电传感组件对采集到的用户眼睛反射的光信号转换得到的;
基于所述电信号,从所述多个第一光电传感组件中确定至少一个目标第一光电传感组件,所述目标第一光电传感组件传输的电信号的信号值小于等于第一阈值;
基于所述电信号,从所述多个第二光电传感组件中确定至少一个目标第二光电传感组件,所述目标第二光电传感组件传输的电信号的信号值小于等于第二阈值;
基于所述至少一个目标第一光电传感组件的位置和所述至少一个目标第二光电传感组件的位置,确定用户眼睛在所述显示面板上的注视点的位置。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,所述指令由显示设备中的定位电路执行以实现如权利要求15所述的注视点的定位方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110585849.XA CN113325953B (zh) | 2021-05-27 | 2021-05-27 | 显示设备及注视点的定位方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110585849.XA CN113325953B (zh) | 2021-05-27 | 2021-05-27 | 显示设备及注视点的定位方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113325953A true CN113325953A (zh) | 2021-08-31 |
CN113325953B CN113325953B (zh) | 2024-02-02 |
Family
ID=77421730
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110585849.XA Active CN113325953B (zh) | 2021-05-27 | 2021-05-27 | 显示设备及注视点的定位方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113325953B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114280784A (zh) * | 2021-12-22 | 2022-04-05 | 歌尔光学科技有限公司 | Vr头显镜片调整装置及方法 |
WO2022246740A1 (zh) * | 2021-05-27 | 2022-12-01 | 京东方科技集团股份有限公司 | 显示装置、可穿戴显示设备及注视点的位置的确定方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104238923A (zh) * | 2014-07-29 | 2014-12-24 | 京东方科技集团股份有限公司 | 一种显示设备及其工作方法 |
KR20150057151A (ko) * | 2013-11-18 | 2015-05-28 | 삼성전자주식회사 | 디스플레이 장치 및 구동 방법 |
CN107248519A (zh) * | 2017-05-22 | 2017-10-13 | 茆胜 | 一种集成微型显示器和图像传感器的芯片 |
CN108363522A (zh) * | 2018-04-24 | 2018-08-03 | 石家庄科达文教用品有限公司 | 同步书写系统及其方法 |
CN108604116A (zh) * | 2015-09-24 | 2018-09-28 | 托比股份公司 | 能够进行眼睛追踪的可穿戴设备 |
CN109656421A (zh) * | 2019-03-05 | 2019-04-19 | 京东方科技集团股份有限公司 | 显示装置 |
US20190250707A1 (en) * | 2018-02-09 | 2019-08-15 | Ricoh Company, Ltd. | Eye-gaze tracker, eye-gaze tracking method, and recording medium |
CN110850628A (zh) * | 2019-10-24 | 2020-02-28 | 武汉华星光电技术有限公司 | 一种液晶显示面板和液晶显示装置 |
US20200110271A1 (en) * | 2018-10-04 | 2020-04-09 | Board Of Trustees Of Michigan State University | Photosensor Oculography Eye Tracking For Virtual Reality Systems |
-
2021
- 2021-05-27 CN CN202110585849.XA patent/CN113325953B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150057151A (ko) * | 2013-11-18 | 2015-05-28 | 삼성전자주식회사 | 디스플레이 장치 및 구동 방법 |
CN104238923A (zh) * | 2014-07-29 | 2014-12-24 | 京东方科技集团股份有限公司 | 一种显示设备及其工作方法 |
CN108604116A (zh) * | 2015-09-24 | 2018-09-28 | 托比股份公司 | 能够进行眼睛追踪的可穿戴设备 |
CN107248519A (zh) * | 2017-05-22 | 2017-10-13 | 茆胜 | 一种集成微型显示器和图像传感器的芯片 |
US20190250707A1 (en) * | 2018-02-09 | 2019-08-15 | Ricoh Company, Ltd. | Eye-gaze tracker, eye-gaze tracking method, and recording medium |
CN108363522A (zh) * | 2018-04-24 | 2018-08-03 | 石家庄科达文教用品有限公司 | 同步书写系统及其方法 |
US20200110271A1 (en) * | 2018-10-04 | 2020-04-09 | Board Of Trustees Of Michigan State University | Photosensor Oculography Eye Tracking For Virtual Reality Systems |
CN109656421A (zh) * | 2019-03-05 | 2019-04-19 | 京东方科技集团股份有限公司 | 显示装置 |
CN110850628A (zh) * | 2019-10-24 | 2020-02-28 | 武汉华星光电技术有限公司 | 一种液晶显示面板和液晶显示装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022246740A1 (zh) * | 2021-05-27 | 2022-12-01 | 京东方科技集团股份有限公司 | 显示装置、可穿戴显示设备及注视点的位置的确定方法 |
CN114280784A (zh) * | 2021-12-22 | 2022-04-05 | 歌尔光学科技有限公司 | Vr头显镜片调整装置及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113325953B (zh) | 2024-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11488366B2 (en) | Augmented reality lighting effects | |
US10924729B2 (en) | Method and device for calibration | |
CN107346152B (zh) | 显示装置、显示屏以及终端 | |
KR102561172B1 (ko) | 디스플레이 내에 카메라 모듈이 포함된 전자 장치 및 상기 카메라 모듈 주변의 이미지를 보정하는 방법 | |
CN113325953A (zh) | 显示设备及注视点的定位方法 | |
JP2007129709A (ja) | イメージングデバイスをキャリブレートするための方法、イメージングデバイスの配列を含むイメージングシステムをキャリブレートするための方法およびイメージングシステム | |
US20200412930A1 (en) | Event detecting device including an event signal generator and an output signal generator | |
US20110122099A1 (en) | Multiple-input touch panel and method for gesture recognition | |
US20140321700A1 (en) | Light sensing module and system | |
JP2008250949A (ja) | 画像処理装置、制御プログラム、コンピュータ読み取り可能な記録媒体、電子機器及び画像処理装置の制御方法 | |
US9286669B2 (en) | Image processing apparatus, image processing method and program | |
KR102378086B1 (ko) | 이벤트 감지 장치 | |
Chen et al. | Feature extraction using a portable vision system | |
US20220172505A1 (en) | Biometrics authentication device and biometrics authentication method for authenticating a person with reduced computational complexity | |
US9606639B2 (en) | Pointing system and display having improved operable range | |
CN113515143A (zh) | 机器人导航方法、机器人及计算机可读存储介质 | |
CN111242084B (zh) | 机器人控制方法、装置、机器人及计算机可读存储介质 | |
CN109584278B (zh) | 一种目标识别装置及方法 | |
US20200050841A1 (en) | Method, Module and System of Gesture Recognition | |
US10223626B2 (en) | High ambient light electronic screen communication method | |
CN211883760U (zh) | 体温监测装置 | |
US9389731B2 (en) | Optical touch system having an image sensing module for generating a two-dimensional image and converting to a one-dimensional feature | |
WO2021199225A1 (ja) | 情報処理システム、センサシステム、情報処理方法、及びプログラム | |
WO2020207947A1 (en) | Biometrics imaging device and biometrics imaging method for capturing image data of a body part of a person which enable improved image data quality | |
KR20200074050A (ko) | 식별 장치 및 전자기기 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |