CN107223276B - 眼球遥控系统及电子装置 - Google Patents
眼球遥控系统及电子装置 Download PDFInfo
- Publication number
- CN107223276B CN107223276B CN201780000327.0A CN201780000327A CN107223276B CN 107223276 B CN107223276 B CN 107223276B CN 201780000327 A CN201780000327 A CN 201780000327A CN 107223276 B CN107223276 B CN 107223276B
- Authority
- CN
- China
- Prior art keywords
- light emitting
- display screen
- signal
- light signal
- pixel units
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 210000005252 bulbus oculi Anatomy 0.000 title claims abstract description 40
- 210000001508 eye Anatomy 0.000 claims description 34
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 5
- 230000003287 optical effect Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 15
- 102100032919 Chromobox protein homolog 1 Human genes 0.000 description 5
- 101000797584 Homo sapiens Chromobox protein homolog 1 Proteins 0.000 description 5
- 238000012545 processing Methods 0.000 description 3
- 239000012141 concentrate Substances 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000000034 method Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
- G08C23/04—Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/30—User interface
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种眼球遥控系统，包括一显示屏，包含多个像素单元，每一像素单元包括一不可见光发光元件，所述多个像素单元按照一时间顺序发射一入射光信号；一光线撷取模块，设置于所述显示屏周围，用来接收对应于所述入射光信号的一反射光信号，其中所述反射光信号反射自一用户的一眼球；一判断模块，用来根据所述反射光信号，判断所述用户的目光集中于所述显示屏的一特定区域；以及一运算模块，执行相关于所述特定区域的一操作。
Description
技术领域
本申请涉及一种眼球遥控系统及电子装置，尤其涉及一种可判断用户目光集中区域的眼球遥控系统及电子装置。
背景技术
随着网络化、数字化和信息化技术的发展，人们对于电器备有了越来越高以及越来越智能化的要求，特别是对于远程遥控操作。远程遥控操作的使用便利程度决定了对该电器设备的使用便利程度。传统按键式遥控器需要透过人的手指来操作，这对于双手被占用的人或者残疾人士来讲是个很大的困难。
发明内容
因此，本申请的主要目的即在于提供一种可判断用户目光集中区域的眼球遥控系统及电子装置。
为了解决上述技术问题，本申请提供了一种眼球遥控系统，包括一显示屏，包含多个像素单元，所述多个像素单元包括多个不可见光发光元件，所述多个像素单元中的所述多个不可见光发光元件按照一时间顺序发射一入射光信号；多个感光元件，用来接收对应于所述入射光信号的一反射光信号，其中所述反射光信号反射自一用户的一眼球；一判断模块，用来根据收到所述反射光信号的一时间，判断对应所述反射光信号的一不可见光发光元件于所述显示屏的位置，并据以判断所述用户的目光集中于所述显示屏的一特定区域；以及一运算模块，执行相关于所述特定区域的一操作。
例如，所述入射光信号为不可见光信号，所述不可见光发光元件为一不可见光发光二极管或一不可见光发光晶体管。
例如，所述入射光信号为红外线信号，所述不可见光发光元件为一红外线发光二极管或一红外线发光晶体管。
例如，当多个像素单元中至少一像素单元发射所述入射光信号以及多个感光元件接收对应于所述入射光信号的所述反射光信号后，所述判断模块根据所述至少一像素单元于所述显示屏的位置，判断所述用户的目光集中于所述显示屏的所述特定区域。
例如，所述眼球遥控系统还包括一调制信号产生模块，耦接于所述显示屏，用来产生一调制信号；其中，所述多个像素单元根据所述调制信号产生所述入射光信号，所述眼球遥控系统撷取相关于所述调制信号的所述反射光信号。
例如，所述调制信号由多个方波所构成。
例如，所述多个像素单元按照所述时间顺序，在一第一时间由所述多个像素单元中一第一像素单元发射所述入射光信号，以及在一第二时间由所述多个像素单元中一第二像素单元发射所述入射光信号。
例如，所述多个像素单元排列成一数组，所述多个像素单元按照所述时间顺序，在一第一时间由位于所述数组中一第一行的像素单元发射所述入射光信号，在一第二时间由位于所述数组中一第二行的像素单元发射所述入射光信号，在一第三时间由位于所述数组中一第一列的像素单元发射所述入射光信号，以及在一第四时间由位于所述数组中一第二列的像素单元发射所述入射光信号。
例如，所述眼球遥控系统还包括一调制信号产生模块，耦接于所述显示屏，用来产生一第一调制信号及一第二调制信号；其中，所述第一调制信号与所述第二调制信号之间具有180°的相位差。
例如，在一特定时间，所述多个像素单元中一第一像素单元根据所述第一调制信号产生并发射一第一入射光信号，同时所述多个像素单元中一第二像素单元根据所述第二调制信号产生并发射一第二入射光信号。
例如，对应于所述第一像素单元于所述显示屏的一第一位置与对应于所述第二像素单元于所述显示屏的一第二位置之间具有一距离，所述距离大于一特定值，所述特定值为所述显示屏所显示的一画面宽度的二分之一或一画面高度的二分之一。
例如，所述多个像素单元排列成一数组，在一特定时间，于所述数组中一第一行的像素单元根据所述第一调制信号产生并发射一第一入射光信号，同时于所述数组中一第二行的像素单元根据所述第二调制信号产生并发射一第二入射光信号，所述第一调制信号与所述第二调制信号之间具有180°的相位差。
例如，对应于所述第一行于所述显示屏的一第一水平位置与对应于所述第二行于所述显示屏的一第二水平位置之间具有一垂直距离，所述垂直距离大于所述显示屏的一画面高度的二分之一。
例如，所述多个像素单元排列成一数组，在一特定时间，于所述数组中一第一列的像素单元根据所述第一调制信号产生并发射一第一入射光信号，同时于所述数组中一第二列的像素单元根据所述第二调制信号产生并发射一第二入射光信号，所述第一调制信号与所述第二调制信号之间具有180°的相位差。
例如，对应于所述第一列于所述显示屏的一第一垂直位置与对应于所述第二列于所述显示屏的一第二垂直位置之间具有一水平距离，所述水平距离大于所述显示屏的一宽度的二分之一。
例如，所述多个感光元件设置于一光线撷取模块中，所述光线撷取模块设置于所述显示屏周围。
例如，所述多个感光元件分别设置于所述显示屏的所述多个像素单元中。
本申请另提供了一种电子装置，包括一眼球遥控系统，所述眼球遥控系统包括一显示屏，包含多个像素单元，所述多个像素单元包括多个不可见光发光元件，所述多个像素单元中的所述多个不可见光发光元件按照一时间顺序发射一入射光信号；多个感光元件，用来接收对应于所述入射光信号的一反射光信号，其中所述反射光信号反射自一用户的一眼球；一判断模块，用来根据收到所述反射光信号的一时间，判断对应所述反射光信号的一不可见光发光元件于所述显示屏的位置，并据以判断所述用户的目光集中于所述显示屏的一特定区域；以及一运算模块，执行相关于所述特定区域的一操作。
本申请利用多个像素单元扫描用户的目光是否集中在显示屏的特定区域，利用光线撷取模块接收对应于入射光信号且反射自用户眼球的反射光信号，判断模块可根据当时发射入射光信号的像素单元所在的位置判断用户的目光集中于显示屏的区域。
附图说明
图1为本申请实施例一眼球遥控系统的外观示意图。
图2为图1的眼球遥控系统的功能方块示意图。
图3为本申请实施例一眼球遥控系统的功能方块示意图。
图4为一调制信号的波形图。
图5为本申请实施例一眼球遥控系统的功能方块示意图。
图6为图5的眼球遥控系统的外观示意图。
图7为多个调制信号的波形图。
图8为图5的眼球遥控系统的外观示意图。
图9为图5的眼球遥控系统的外观示意图。
图10为本申请实施例一像素单元的示意图。
图11为本申请实施例一像素单元的示意图。
图12为本申请实施例一眼球遥控系统的外观示意图。
图13为图12的眼球遥控系统的功能方块示意图。
图14为本申请实施例一电子装置的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
请参考图1及图2，图1及图2分别为本申请实施例一眼球遥控系统10的外观示意图及功能方块示意图。如图1及图2所示，眼球遥控系统10包括一显示屏12、一光线撷取模块14、一判断模块16以及一运算模块18。显示屏12包含多个像素单元DPX，每一像素单元DPX包括一发光元件IVC，发光元件IVC可为发光二极管(Light Emitting Diode，LED)或是发光晶体管(Light Emitting Transistor)。多个像素单元DPX在显示屏12上排列成一像素数组，多个像素单元DPX可按照一时间顺序分别发射一入射光信号LE。光线撷取模块14设置于显示屏12周围，其可包括光学镜头(Lens)以及多个如感光耦合元件(Charge-coupledDevice，CCD)或互补式金氧半图像传感器(CMOS Image Sensor，CIS)等光感测元件或感光元件，于一实施例中，光线撷取模块14可设置于安装于显示屏12周围的一摄像头之中。光线撷取模块14用来接收一反射光信号LR，其中反射光信号LR为对应于入射光信号LE且反射自一使用者的一眼球EB。当光线撷取模块14接收到对应于入射光信号LE的反射光信号LR时，判断模块16可根据收到反射光信号LR的一时间，判断对应该反射光信号LR是由眼球EB反射显示屏12中一特定像素单元DPX’中的不可见光发光组件IVC’所发出的入射光信号LE，并进一步判断特定像素单元DPX’于显示屏12的位置，并据以判断用户的目光集中于显示屏12的一特定区域，而运算模块18即可执行相关于所述特定区域的一操作，运算模块18可为单片机(Microcontroller，MCU)或中央处理单元(Central Processing Unit，CPU)。
简单来说，本申请利用多个像素单元DPX中的多个发光元件IVC依序地(按照一特定时间顺序)发射入射光信号LE，其等效于利用多个像素单元DPX扫描用户的目光是否集中在显示屏12的某个区域，若用户的目光确实集中在显示屏12的某个区域，光线撷取模块14可接收到对应于入射光信号LE的反射光信号LR，此时判断模块16可判断用户的目光集中于显示屏12的区域。详细来说，当用户的目光集中于显示屏12的一区域ZN时(即于一第一时间t1用户的目光集中于显示屏12的区域ZN)，且此时轮到区域ZN中的像素单元DPX’中的发光元件IVC’发射出入射光信号LE(即按照该特定时间顺序，于第一时间t1轮到像素单元DPX’的发光组件IVC发射出入射光信号LE，也就是说像素单元DPX’中的发光组件IVC’于第一时间t1发射入射光信号LE)，因于第一时间t1用户的目光集中于显示屏12的区域ZN，入射光信号LE于第一时间t1会经眼球EB反射回来而成为反射光信号LR，即对应于入射光信号LE的反射光信号LR自眼球EB往显示屏12的方向反射，如图2所示，光线撷取模块14即可于第一时间t1接收对应于像素单元DPX’所发射入射光信号LE的反射光信号LR。相反地，当使用者的目光并非集中于区域ZN时，即使此时区域ZN中的像素单元DPX’发射出入射光信号LE，而对应于入射光信号LE的反射光将会反射到使用者所在的其他空间，而光线撷取模块14将无法接收到对应于入射光信号LE的反射光。另外，当光线撷取模块14于第一时间t1接收到对应于入射光信号LE的反射光信号LR时，判断模块16可根据第一时间t1，判断于第一时间t1发射出入射光信号LE的像素单元DPX’在显示屏12的位置，以判断用户的目光集中于显示屏12的区域ZN，而运算模块18可执行相关于区域ZN的操作。其中，运算模块18所执行且相关于区域ZN的操作并未有所限，举例来说，运算模块18可指示显示屏12将位于区域ZN的图像(Icon)以特别明亮的方式显示，或是运算模块18可指示显示屏12将位于区域ZN(或于区域ZN附近)的图像放大显示，或是运算模块18可指示显示屏12显示一光标图像指向区域ZN，皆属于本申请的范畴。其中，像素单元DPX或像素单元DPX’发出入射光信号LE皆代表像素单元DPX或像素单元DPX’利用其中的发光元件IVC来发出入射光信号LE。
换句话说，在区域ZN中的像素单元DPX’于第一时间t1发射入射光信号LE的前提下，唯有使用者的目光于第一时间t1集中于区域ZN时，入射光信号LE才能经由眼球EB反射至光线撷取模块14，光线撷取模块14才会接收到反射光信号LR。当使用者的目光于第一时间t1并未集中于区域ZN时，入射光信号LE会经眼球EB反射至(光线撷取模块14以外)的其他地方，而光线撷取模块14不会接收到对应于入射光信号LE的反射光。
另外，为了避免入射光信号LE影响显示屏12所欲显示的画面，例如，入射光信号LE为不可见光信号，而每一像素单元DPX中所包括的发光元件IVC为不可见光发光元件(如不可见光发光二极管(Invisible LED)或不可见光发光晶体管(Invisible Light EmittingTransistor))。具体来说，于一实施例中，入射光信号LE为红外线信号而每一像素单元DPX中所包括的发光元件IVC为一红外线发光二极管(Infrared Light Emitting Diode，IRLED)或一红外线发光晶体管(Infrared Emitting Transistor)。
换句话说，于一实施例中，每一像素单元DPX可包含一发光元件VBC以及发光元件IVC，如图10所示，其中发光元件VBC为可见光发光元件，其可为有机发光二极管(OrganicLight Emitting Diode，OLED)，发光元件IVC为不可见光发光元件。显示屏12利用位于多个像素单元DPX中的多个可见光发光元件VBC来显示画面，并利用位于多个像素单元DPX中的多个不可见光发光元件IVC来扫描用户目光注视的位置。
另外，眼球遥控系统10利用多个像素单元DPX扫描用户的目光(即利用多个像素单元DPX按照时间顺序分别发射入射光信号LE)的方式并未有所限。于一实施例中，多个像素单元DPX可按照一时间顺序一次仅由单一个像素单元DPX中的发光元件IVC逐次地发射入射光信号LE，即于一时间tn仅由单一个像素单元DPX中的发光元件IVC发射入射光信号LE，而于另一时间tk也仅由另一个像素单元DPX中的发光元件IVC发射入射光信号LE。其中多个像素单元DPX一次由单一个像素单元DPX中的发光元件IVC逐次地发射入射光信号LE的顺序并未有所限，举例来说，多个像素单元DPX可先由左而右后由上而下逐一地一次由单一个像素单元DPX中的发光元件IVC发射入射光信号LE，或是先由下而上后由右而左逐一地一次由单一个像素单元DPX中的发光元件IVC发射入射光信号LE。
于另一实施例中，多个像素单元DPX可按照一时间顺序一次由多个像素单元DPX中的发光元件IVC发射入射光信号LE，举例来说，多个像素单元DPX可按照一时间顺序，于一时间tx1，由位于像素数组的一行X1的像素单元DPX中的发光元件IVC发射入射光信号LE，于一时间tx2，由位于像素数组的另一行X2的像素单元DPX中的发光元件IVC发射入射光信号LE，于一时间ty1，由位于像素数组的一列Y1的像素单元DPX中的发光元件IVC发射入射光信号LE，并于一时间ty2，由位于像素数组的另一列Y2的像素单元DPX中的发光元件IVC发射入射光信号LE。
简言之，本申请利用多个像素单元DPX扫描用户的目光是否集中在显示屏12的某个区域，若用户的目光确实集中在显示屏12的某个区域时，利用光线撷取模块14接收对应于入射光信号LE的反射光信号LR，此时判断模块16可根据当时发射入射光信号LE的像素单元DPX所在的位置，判断用户的目光集中于显示屏12的区域。
另外，为了区分反射光信号LR与来自环境的光线，显示屏12可根据一调制信号产生入射光信号LE，光线撷取模块14及判断模块16可撷取与调制信号具有相似特性的光信号并将之进行进一步信号处理(如滤波、放大等信号处理)，以准确地以判断用户目光集中的位置。
具体来说，请参考图3，图3为本申请实施例一眼球遥控系统30的功能方块示意图。眼球遥控系统30与眼球遥控系统10类似，故相同元件沿用相同符号。与眼球遥控系统10不同的是，眼球遥控系统30还包括一调制信号产生模块32，调制信号产生模块32耦接于显示屏12，用来产生一调制信号MOD至显示屏12的多个像素单元DPX，多个像素单元DPX中的发光元件IVC可根据调制信号MOD产生并发射入射光信号LE。其中，调制信号MOD可为一交流(Alternating Current，AC)信号，其波形并未有所限，举例来说，请参考图4，图4为本申请实施例调制信号MOD的波形图，如图4所示，调制信号MOD可由多个方波所构成。如此一来，光线撷取模块14可撷取相关于调制信号MOD的反射光信号LR，而判断模块16可对与调制信号MOD具有相似特性(如方波特性)的光信号进行进一步信号处理(如滤波、放大运算)，使得判断模块16可精准地判断反射光信号LR为对应于入射光信号LE(其具有调制信号MOD的特性)的反射光信号，并据以判断用户目光集中于显示屏12中发射入射光信号LE的像素单元DPX所在的位置。
除此之外，为了更精准地判断光线撷取模块14所接收到的反射光信号LR确实为反射自使用者眼球EB，请参考图5，图5为本申请实施例一眼球遥控系统50的功能方块示意图。眼球遥控系统50与眼球遥控系统30类似，故相同元件沿用相同符号。与眼球遥控系统30不同的是，眼球遥控系统50还包括一调制信号产生模块52，调制信号产生模块52耦接于显示屏12，用来产生一调制信号MOD1以及一调制信号MOD2。如图6所示，当多个像素单元DPX按照时间顺序轮到一像素单元DPX1中的一发光元件IVC1根据调制信号MOD1产生并发射一入射光信号LE1时(假设于一时间ta)，眼球遥控系统可同时(于时间ta)利用另一像素单元DPX2中的一发光元件IVC2根据调制信号MOD2产生并发射与入射光信号LE1相位相反的另一入射光信号LE2，即入射光信号LE1与LE2之间具有180°的相位差。如此一来，当用户注视于像素单元DPX1于显示屏12所在的位置时，光线撷取模块14所接收反射自使用者眼球EB的反射光会与入射光信号LE1具有相同的信号特性，而反射自其他物件(如用户脸部或环境中的物件)的反射光为入射光信号LE1以及入射光信号LE2的总和而趋近于或等于一直流(DirectCurrent，DC)信号，如此一来，光线撷取模块14及判断模块16可精准地取得反射自使用者眼球EB的反射光，并据以判断用户目光集中于显示屏12中像素单元DPX1所在的位置。其中，调制信号MOD1与调制信号MOD2之间具有180°的相位差，如图7所示。另外，例如，像素单元DPX1与像素单元DPX2之间需相隔足够的距离，于一实施例中，像素单元DPX1于显示屏12的一第一位置与像素单元DPX2于显示屏12的一第二位置之间的距离大于显示屏12所显示的一画面宽度W的二分之一，或大于显示屏12所显示的一画面高度H的二分之一。
同理，如图8所示，眼球遥控系统30可于一时间tb利用位于像素数组的一行X1’的复数个像素单元中的复数个发光元件IVC产生并发射入射光信号LE1，并同时于时间tb利用位于像素数组的一行X2’的复数个像素单元中的复数个发光元件IVC产生并发射入射光信号LE2，其中，对应于像素数组的行X1’于显示屏12的水平位置与对应于像素数组的行X2’于显示屏12的水平位置之间具有一垂直距离ΔH，例如，垂直距离ΔH大于显示屏12所显示的画面高度H的二分之一。同理，如图9所示，眼球遥控系统30可于一时间tc利用位于像素数组的一列Y1’的复数个像素单元中的复数个发光元件IVC产生并发射入射光信号LE1，并同时于时间tc利用位于像素数组的一列Y2’的复数个像素单元中的复数个发光元件IVC产生并发射入射光信号LE2，其中，对应于像素数组的列Y1’于显示屏12的垂直位置与对应于像素数组的列Y2’于显示屏12的垂直位置之间具有一水平距离ΔW，例如，水平距离ΔW大于显示屏12所显示的画面宽度W的二分之一。其中，入射光信号LE1为根据调制信号MOD1所产生，入射光信号LE2为根据调制信号MOD2所产生，调制信号MOD1与调制信号MOD2之间具有180°的相位差。
另外，本申请的眼球遥控系统不限于利用摄像头来捕捉反射光信号LR，换句话说，本申请的感光元件(如CCD或CIS元件)不限于设置于摄像头的光线撷取模块之中，本申请的多个感光元件可分别设置于显示屏中多个像素单元中。请参考图11至图13，图11为本申请实施例一像素单元PX的示意图，图12及图13分别为本申请实施例一眼球遥控系统C0的外观示意图及功能方块示意图。眼球遥控系统C0与眼球遥控系统10、30、50相似，故相同元件沿用相同符号。与眼球遥控系统10、30、50同的是，眼球遥控系统C0包含一显示屏C2，显示屏C2包含多个像素单元PX，每一像素单元PX可包含可见光发光元件VBC、不可见光发光元件IVC以及一感光元件LSC，感光元件LSC用来感测对应于入射光信号LE的反射光信号LR。
当用户的目光集中于显示屏C2的区域ZN时，且此时轮到区域ZN中的一像素单元PX’中的发光元件IVC发射出入射光信号LE，因用户的目光集中于显示屏12的区域ZN，入射光信号LE会经眼球EB反射回来而成为反射光信号LR，即对应于入射光信号LE的反射光信号LR自眼球EB往显示屏C2中像素单元PX’的方向反射，如图13所示，像素单元PX’中的感光元件LSC即可接收对应入射光信号LE的反射光信号LR。相反地，当使用者的目光并非集中于区域ZN时，即使此时区域ZN中的像素单元PX’发射出入射光信号LE，而对应于入射光信号LE的反射光将会反射到使用者所在的其他空间，而像素单元PX’中的感光元件LSC将无法接收到对应于入射光信号LE的反射光。另外，当像素单元PX’中的感光元件LSC接收到对应于入射光信号LE的反射光信号LR时，判断模块16可根据像素单元PX’在显示屏C2的位置，判断用户的目光集中于显示屏C2的区域ZN，而运算模块18可执行相关于区域ZN的操作。
同样地，眼球遥控系统C0可搭配调制信号产生模块32或调制信号产生模块52进行操作，以扫描用户目光注视之所在，其操作细节可参考前述相关段落，于此不再赘述。
需注意的是，前述实施例用以说明本申请的概念，本领域具通常知识者当可据以做不同之修饰，而不限于此。举例来说，调制信号不限于由方波所构成，调制信号亦可由三角波或弦波所构成，另外，调制信号可根据一数字码调制而成，该数字码可为一阿达马码(Hadamard Code)或是符合其他编码格式，亦属于本申请的范畴。另外，判断模块、运算模块或调制信号产生模块可利用专用集成电路(Application-Specific Integrated Circuit，ASIC)、数字电路(如寄存器传输级(RTL)电路)或处理器(Process)来实现。另外，发光元件IVC不限于为不可见光发光元件，亦可为可见光发光元件，亦满足本申请的要求而属于本申请的范畴。
另外，于前述实施例中，眼球遥控系统及其中的显示屏均设置于一台式桌上型屏幕中，而不限于此。本申请的眼球遥控系统以及显示屏可应用/设置于任何具有显示屏幕的电子装置，如手机、平板计算机、笔记本电脑、一体机计算机(All-in-One PersonalComputer，AIO)、大型电视、互动式电子显示装置(如车站内的自动售票机或餐厅内的自动点餐机)等。举例来说，请参考图14，图14为本申请实施例一电子装置D0的外观示意图，电子装置D0可为一平板计算机，就外观而言，电子装置D0可包括一机壳D1、一显示屏D2以及一光线撷取模块模块D4，其中显示屏D2可以用显示屏12或显示屏C2来实现，光线撷取模块模块D4可以用光线撷取模块14来实现，就功能而言，电子装置D0中可设置有眼球遥控系统10或眼球遥控系统C0，亦属于本申请的范畴。
简言之，本申请利用多个像素单元扫描用户的目光是否集中在显示屏的特定区域，若用户的目光集中在显示屏的特定区域时，利用光线撷取模块接收对应于入射光信号且反射自用户眼球的反射光信号，判断模块可根据当时发射入射光信号的像素单元所在的位置，判断用户的目光集中于显示屏的区域。
以上所述仅为本申请的部分实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本申请的保护范围之内。
Claims (18)
1.一种眼球遥控系统，其中，包括：
一显示屏，包含多个像素单元，每一像素单元包括一不可见光发光元件而所述多个像素单元包括多个不可见光发光元件，所述多个像素单元中的所述多个不可见光发光元件按照一时间顺序分别发射一入射光信号；
多个感光元件，用来接收对应于所述入射光信号的一反射光信号，其中所述反射光信号反射自一用户的一眼球；
一判断模块，用来根据收到所述反射光信号的一时间，判断对应所述反射光信号的一不可见光发光元件于所述显示屏的位置，并据以判断所述用户的目光集中于所述显示屏的一特定区域；以及
一运算模块，执行相关于所述特定区域的一操作；
其中，当所述多个不可见光发光元件中对应于多个像素单元中至少一像素单元的至少一不可见光发光元件发射所述入射光信号以及所述多个感光元件接收对应于所述入射光信号的所述反射光信号后，所述判断模块根据所述至少一像素单元于所述显示屏的位置，判断所述用户的目光集中于所述显示屏的所述特定区域。
2.如权利要求1所述的眼球遥控系统，其中，所述入射光信号为不可见光信号，所述多个不可见光发光元件为不可见光发光二极管或不可见光发光晶体管。
3.如权利要求1所述的眼球遥控系统，其中，所述入射光信号为红外线信号，所述多个不可见光发光元件为红外线发光二极管或红外线发光晶体管。
4.如权利要求1所述的眼球遥控系统，其中，还包括；
一调制信号产生模块，耦接于所述显示屏，用来产生一调制信号；
其中，所述多个像素单元中的所述多个不可见光发光元件根据所述调制信号产生所述入射光信号，所述眼球遥控系统撷取相关于所述调制信号的所述反射光信号。
5.如权利要求4所述的眼球遥控系统，其中，所述调制信号由多个方波所构成。
6.如权利要求1所述的眼球遥控系统，其中，所述多个像素单元按照所述时间顺序，在一第一时间由所述多个不可见光发光元件中对应于所述多个像素单元中一第一像素单元的一第一不可见光发光元件发射所述入射光信号，以及在一第二时间由所述多个不可见光发光元件中对应于所述多个像素单元中一第二像素单元的一第二不可见光发光元件发射所述入射光信号。
7.如权利要求1所述的眼球遥控系统，其中，所述多个像素单元排列成一数组，所述多个像素单元按照所述时间顺序，在一第一时间由所述多个不可见光发光元件中对应于位于所述数组中一第一行的像素单元的多个不可见光发光元件发射所述入射光信号，在一第二时间由所述多个不可见光发光元件中对应于位于所述数组中一第二行的像素单元的多个不可见光发光元件发射所述入射光信号，在一第三时间由所述多个不可见光发光元件中对应于位于所述数组中一第一列的像素单的多个不可见光发光元件元发射所述入射光信号，以及在一第四时间由所述多个不可见光发光元件中对应于位于所述数组中一第二列的像素单元的多个不可见光发光元件发射所述入射光信号。
8.如权利要求1所述的眼球遥控系统，其中，还包括；
一调制信号产生模块，耦接于所述显示屏，用来产生一第一调制信号及一第二调制信号；
其中，所述第一调制信号与所述第二调制信号之间具有180°的相位差。
9.如权利要求8所述的眼球遥控系统，其中，在一特定时间，所述多个不可见光发光元件中对应于所述多个像素单元中一第一像素单元的一第一不可见光发光元件根据所述第一调制信号产生并发射一第一入射光信号，同时所述多个不可见光发光元件中对应于所述多个像素中一第二像素单元的一第二不可见光发光元件根据所述第二调制信号产生并发射一第二入射光信号。
10.如权利要求9所述的眼球遥控系统，其中，对应于所述第一像素单元于所述显示屏的一第一位置与对应于所述第二像素单元于所述显示屏的一第二位置之间具有一距离，所述距离大于一特定值，所述特定值为所述显示屏所显示的一画面宽度的二分之一或一画面高度的二分之一。
11.如权利要求8所述的眼球遥控系统，其中，所述多个像素单元排列成一数组，在一特定时间，所述多个不可见光发光元件中对应于所述数组中一第一行的像素单元的多个不可见光发光元件根据所述第一调制信号产生并发射一第一入射光信号，同时所述多个不可见光发光元件中对应于所述数组中一第二行的像素单元的多个不可见光发光元件根据所述第二调制信号产生并发射一第二入射光信号，所述第一调制信号与所述第二调制信号之间具有180°的相位差。
12.如权利要求11所述的眼球遥控系统，其中，对应于所述第一行于所述显示屏的一第一水平位置与对应于所述第二行于所述显示屏的一第二水平位置之间具有一垂直距离，所述垂直距离大于所述显示屏的一画面高度的二分之一。
13.如权利要求8所述的眼球遥控系统，其中，所述多个像素单元排列成一数组，在一特定时间，所述多个不可见光发光元件中对应于所述数组中一第一列的像素单元的多个不可见光发光元件根据所述第一调制信号产生并发射一第一入射光信号，同时所述多个不可见光发光元件中对应于所述数组中一第二列的像素单元的多个不可见光发光元件根据所述第二调制信号产生并发射一第二入射光信号，所述第一调制信号与所述第二调制信号之间具有180°的相位差。
14.如权利要求13所述的眼球遥控系统，其中，对应于所述第一列于所述显示屏的一第一垂直位置与对应于所述第二列于所述显示屏的一第二垂直位置之间具有一水平距离，所述水平距离大于所述显示屏的一宽度的二分之一。
15.如权利要求1所述的眼球遥控系统，其中，所述多个感光元件设置于一光线撷取模块中，所述光线撷取模块设置于所述显示屏周围。
16.如权利要求1所述的眼球遥控系统，其中，所述多个感光元件分别设置于所述显示屏的所述多个像素单元中。
17.如权利要求16所述的眼球遥控系统，其中，当所述多个不可见光发光元件中对应于多个像素单元中至少一像素单元的至少一不可见光发光元件发射所述入射光信号，以及所述多个感光元件中对应于所述至少一像素单元的至少一感光元件接收对应于所述入射光信号的所述反射光信号后，所述判断模块根据所述至少一像素单元于所述显示屏的位置，判断所述用户的目光集中于所述显示屏的所述特定区域。
18.一种电子装置，其中，进一步包括：
一眼球遥控系统，所述眼球遥控系统为权利要求1-17中任意一项所述的眼球遥控系统。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2017/082054 WO2018195828A1 (zh) | 2017-04-26 | 2017-04-26 | 眼球遥控系统及电子装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107223276A CN107223276A (zh) | 2017-09-29 |
| CN107223276B true CN107223276B (zh) | 2020-03-20 |
Family
ID=59955203
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201780000327.0A Active CN107223276B (zh) | 2017-04-26 | 2017-04-26 | 眼球遥控系统及电子装置 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN107223276B (zh) |
| WO (1) | WO2018195828A1 (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110612430B (zh) * | 2018-04-16 | 2021-11-19 | 深圳市汇顶科技股份有限公司 | 影像传感系统及电子装置 |
| CN110517470B (zh) * | 2019-07-12 | 2020-11-17 | 华为技术有限公司 | 一种远程控制方法、设备和系统 |
| CN115698902A (zh) * | 2021-05-27 | 2023-02-03 | 京东方科技集团股份有限公司 | 可穿戴显示设备及注视点的位置的确定方法 |
| US20240160281A1 (en) * | 2021-05-27 | 2024-05-16 | Boe Technology Group Co., Ltd. | Wearable display device |
| WO2022246743A1 (zh) * | 2021-05-27 | 2022-12-01 | 京东方科技集团股份有限公司 | 显示装置、可穿戴显示设备及注视点的位置的确定方法 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH089222A (ja) * | 1994-06-17 | 1996-01-12 | Canon Inc | 視線検出機能付き撮像装置 |
| JP5754976B2 (ja) * | 2010-03-31 | 2015-07-29 | キヤノン株式会社 | 画像処理装置、及び、制御方法 |
| US9087471B2 (en) * | 2011-11-04 | 2015-07-21 | Google Inc. | Adaptive brightness control of head mounted display |
| CN102447858A (zh) * | 2011-12-28 | 2012-05-09 | 彩虹集团公司 | 一种基于红外眼球跟踪技术的led背光控制方法 |
| CN102830797B (zh) * | 2012-07-26 | 2015-11-25 | 深圳先进技术研究院 | 一种基于视线判断的人机交互方法及系统 |
| US9652034B2 (en) * | 2013-09-11 | 2017-05-16 | Shenzhen Huiding Technology Co., Ltd. | User interface based on optical sensing and tracking of user's eye movement and position |
| CN106132284B (zh) * | 2013-11-09 | 2019-03-22 | 深圳市汇顶科技股份有限公司 | 光学眼动追踪 |
| CN103777759A (zh) * | 2014-02-18 | 2014-05-07 | 马根昌 | 电子眼镜动作识别系统 |
| CN105223692A (zh) * | 2014-05-26 | 2016-01-06 | 联想(北京)有限公司 | 显示装置和电子设备 |
| CN105068646B (zh) * | 2015-08-05 | 2017-11-10 | 广东欧珀移动通信有限公司 | 终端的控制方法和系统 |
| CN106125931A (zh) * | 2016-06-30 | 2016-11-16 | 刘兴丹 | 一种眼球追踪操作的方法及装置 |
-
2017
- 2017-04-26 CN CN201780000327.0A patent/CN107223276B/zh active Active
- 2017-04-26 WO PCT/CN2017/082054 patent/WO2018195828A1/zh active Application Filing
Also Published As
| Publication number | Publication date |
|---|---|
| WO2018195828A1 (zh) | 2018-11-01 |
| CN107223276A (zh) | 2017-09-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107223276B (zh) | 眼球遥控系统及电子装置 | |
| TWI657368B (zh) | 一種顯示屏的控制方法及裝置、顯示屏和移動終端 | |
| US20200319716A1 (en) | Motion detection system having two motion detecting sub-system | |
| CN109979336B (zh) | 电致发光显示设备及其驱动方法 | |
| US9063613B2 (en) | Image pickup device, display-and-image-pickup device, electronic apparatus and method of detecting an object | |
| JP6219017B2 (ja) | 光検出機能を備えるｏｌｅｄディスプレイ装置 | |
| US9256089B2 (en) | Object-detecting backlight unit | |
| US8593442B2 (en) | Sensor device, method of driving sensor element, display device with input function and electronic apparatus | |
| US20110084934A1 (en) | Information input device, information input method, information input/output device, computer readable non-transitory recording medium and electronic unit | |
| WO2017076005A1 (zh) | 数据发送方法、数据接收方法及相关设备、系统 | |
| JP2007334313A (ja) | 表示装置および電子機器 | |
| US11677900B2 (en) | Personal authentication device | |
| US20150253971A1 (en) | Electronic apparatus and display control method | |
| JP2011044479A (ja) | センサ素子およびその駆動方法、センサ装置、ならびに入力機能付き表示装置および電子機器 | |
| US20200211500A1 (en) | Fade-in user interface display based on finger distance or hand proximity | |
| JP2013054542A (ja) | 画像表示装置、画像表示システム、及びプログラム | |
| US20220367541A1 (en) | Image sensor, mobile terminal, and image capturing method | |
| US9402030B2 (en) | Information processing apparatus and storage medium for displaying image on a display region | |
| KR20080037315A (ko) | 포인터 이동 제어 장치를 포함하는 전자기기 | |
| US20170011713A1 (en) | Image outputting device | |
| US20210176420A1 (en) | Active pixel sensor array, display panel and electronic device | |
| US11928892B2 (en) | Motion recognition apparatus using ToF sensor and method for operating the same | |
| CN111062969B (zh) | 目标跟踪方法及相关产品 | |
| KR100799766B1 (ko) | 포인터 이동 제어 장치 | |
| KR102257766B1 (ko) | 터치스크린과 액추에이터를 이용한 지문인식시스템 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |