CN106355135B - 眼睛状态侦测方法以及眼睛状态侦测系统 - Google Patents
眼睛状态侦测方法以及眼睛状态侦测系统 Download PDFInfo
- Publication number
- CN106355135B CN106355135B CN201610421188.6A CN201610421188A CN106355135B CN 106355135 B CN106355135 B CN 106355135B CN 201610421188 A CN201610421188 A CN 201610421188A CN 106355135 B CN106355135 B CN 106355135B
- Authority
- CN
- China
- Prior art keywords
- image
- detecting
- brightness
- row
- eye state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/197—Matching; Classification
Abstract
本发明是公开一种眼睛状态侦测方法，施行在包含一影像感测器的电子装置上，包含：(a)以使用者眼睛的可能所在位置为基准，决定出一侦测范围，其中该侦测范围小于该电子装置所能侦测的最大可侦测范围；(b)以该侦测范围撷取一侦测影像；以及(c)根据该侦测影像的亮度判断该使用者眼睛为开眼状态或是闭眼状态。本发明亦揭露了以较小判断范围来判断使用者眼睛为开眼状态或是闭眼状态的方法。
Description
技术领域
本发明有关于眼睛状态侦测方法以及眼睛状态侦测系统，特别有关于可利用低分辨率影像以及较小的判断范围来判断眼睛状态的侦测方法以及侦测系统。
背景技术
越来越多电子装置具有侦测开眼和闭眼的功能(例如智能型手机或智能型穿戴装置)，此功能除了提醒使用者其呈现闭眼状态，以避免使用者在不适当的时间点(例如拍照时)闭眼，亦可以让使用者以开眼和闭眼的动作来控制行动装置。此类电子装置需要以一侦测装置来侦测使用者是开眼或闭眼，常见的侦测方法为利用一影像感测器来撷取影像，并根据整张影像的特征来判断使用者是开眼或闭眼。
然而，若要正确判断影像的特征，则需要较高分辨率的影像感测器或者较大的判断范围，电子装置的成本因而增加或是需要较多的运算量而有较大的耗电量。但若使用低分辨率的影像感测器，则其撷取的影像特征不明显，难以判断使用者是开眼或闭眼。
发明内容
本发明一目的为提供一种可利用低分辨率影像来判断眼睛状态的侦测方法。
本发明另一目的为提供一种可利用低分辨率影像来判断眼睛状态的侦测系统。
本发明一实施例揭露了一种眼睛状态侦测方法，施行在包含一影像感测器的电子装置上，包含：(a)以使用者眼睛的可能所在位置为基准，决定出一侦测范围，其中该侦测范围小于该电子装置所能侦测的最大可侦测范围；(b)以该侦测范围撷取一侦测影像；以及(c)根据该侦测影像的亮度判断该使用者眼睛为开眼状态或是闭眼状态。
本发明一实施例揭露了施行前述方法的眼睛状态侦测系统，包含：一控制单元：一影像感测器，其中该控制单元控制该影像感测器以一侦测范围撷取一侦测影像，其中该侦测范围以使用者眼睛的可能所在位置为基准来决定，且小于该眼睛状态侦测系统所能侦测的最大可侦测范围；以及一计算单元，计算该侦测影像的亮度，并根据该侦测影像的亮度判断该使用者眼睛为开眼状态或是闭眼状态。
本发明另一实施例揭露了一种眼睛状态侦测方法，包含：(a)撷取一侦测影像；(b)计算该侦测影像最暗处周边的亮度变化趋势；以及(c)根据该亮度变化趋势判断该使用者眼睛为开眼状态或是闭眼状态。
本发明另一实施例揭露了施行前述方法的眼睛状态侦测系统，包含：一控制单元：一影像感测器，其中该控制单元控制该影像感测器以一侦测范围撷取一侦测影像；以及一计算单元，用以计算该侦测影像最暗处周边的亮度变化趋势，并根据该亮度变化趋势判断该使用者眼睛为开眼状态或是闭眼状态。
本发明另一实施例揭露了一种眼睛状态侦测方法，施行在包含一影像感测器的电子装置上，包含：(a)以该影像感测器撷取一侦测影像；(b)在该侦测影像中定义出一脸部范围；(c)在该脸部范围中定义出一判断范围；以及(d)判断该判断范围中是否包含开眼影像或闭眼影像。
本发明另一实施例揭露了施行前述方法的眼睛状态侦测系统，包含：一控制单元：一影像感测器，其中该控制单元控制该影像感测器撷取一侦测影像；以及一计算单元，用以在该侦测影像中定义出一脸部范围，在该脸部范围中定义出一判断范围，以及判断该判断范围中是否包含开眼影像或闭眼影像。
根据前述实施例，不须影像的详细特征以及大范围的影像便可判断使用者的眼睛状态，因此可改善习知技术中须利用高分辨率影像才能判断使用者眼睛状态的问题以及运算量大导致耗电的问题。
附图说明
图1绘示了根据本发明一实施例的眼睛状态侦测方法的示意图。
图2绘示了智能型眼镜施行图1中所示的眼睛状态侦测方法的示意图。
图3绘示了施行图1中所示的眼睛状态侦测方法之亮度变化与习知技术的亮度变化之示意图。
图4绘示了图1所示实施例的眼睛状态侦测方法的流程图。
图5绘示了根据本发明另一实施例的眼睛状态侦测方法的示意图。
图6绘示了图5所示实施例的眼睛状态侦测方法的流程图。
图7绘示了根据本发明一实施例的影像侦测装置的方块图。
图8绘示了根据本发明另一实施例的眼睛状态侦测方法的示意图。
图9绘示了图8所示的实施例之详细步骤的示意图。
图10绘示了简示本发明所提供的眼睛状态侦测方法之流程图。
附图标号说明：
DR 侦测范围
MDR 最大侦测范围
401-407 步骤
601-611 步骤
701 控制单元
703 影像感测器
705 计算单元
SI 侦测影像
CL 判断器
Fr 脸部范围
CR 判断范围
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
以下将以不同实施例来说明本发明的内容。请留意，以下实施例中所提及的元件，例如单元、模组、系统等，均可以硬体(例如电路)或是硬体加轫体(例如微处理器中写入程序)来实现。
图1绘示了根据本发明一实施例的眼睛状态侦测方法的示意图。如图1所示，本发明所提供的眼睛状态侦测方法会以一侦测范围DR来撷取一侦测影像，并根据此侦测影像的亮度判断使用者眼睛为开眼状态或是闭眼状态。在一实施例中，是以平均亮度来判断使用者眼睛为开眼状态或是闭眼状态。当使用者开眼时，侦测影像中包含了眼球的影像，其平均亮度会较暗。而当使用者闭眼时，侦测影像中大多是皮肤的影像，其平均亮度会较亮。因此可藉由平均亮度来判断使用者眼睛为开眼状态或是闭眼状态。
在此实施例中，侦测范围DR小于最大可侦测范围MDR且其位置是预先设定的。在一实施例中，是预先设定使用者眼睛的可能所在位置，并以此可能所在位置为基准，决定出侦测范围DR。图2绘示了智能型眼镜施行图1中所示的眼睛状态侦测方法的示意图。以图2为例，最大可侦测范围MDR是镜片所涵盖的位置。而当使用者戴上智能型眼镜时，眼睛大多数都在中央位置，因此可以中央位置为基准来决定出侦测范围DR。然请留意，图1中所示的实施例不限制于施行在图2所示的智能型眼镜，其亦可施行在其他装置上，例如头戴式的穿戴式装置，或是包含了摄影机的显示装置或是行动装置等。
在图1实施例中，如果不是以侦测范围DR而是以最大可侦测范围MDR来撷取侦测影像，则不仅运算量会较大，且使用者开眼时，其眼球的影像只占整体侦测影像的一小部份，其平均亮度跟使用者闭眼时差异不大，因此会有难以判断的问题。如图3所示，若使用最大侦测范围MDR来撷取侦测影像，则侦测影像的平均亮度在使用者开眼和闭眼时其差异并不明显，而若使用缩小后的侦测范围DR，则开眼和闭眼的侦测影像的平均亮度会有较大的差异。
图4绘示了图1所示实施例的眼睛状态侦测方法的流程图，其包含下列步骤：
步骤401
以使用者眼睛的可能所在位置为基准，决定出一侦测范围。以图2为例，使用者眼睛可能在智能型眼镜的中央位置，因此会以智能型眼镜的中央位置为基准决定出一侦测范围。
步骤403
以步骤401中的侦测范围撷取一侦测影像。
步骤405
根据侦测影像的亮度判断使用者眼睛为开眼状态或是闭眼状态。
以下将说明本发明所提供的另一实施例，此实施例是以侦测影像的亮度趋势来判断使用者眼睛为开眼状态或是闭眼状态。其判断的主要依据是，当使用者开眼时，侦测影像最暗处通常是眼球其中一处，而最暗处影像周边通常亦是眼球，亦呈现较暗的影像，因此使用者开眼时，侦测影像最暗处周边的影像亮度变化趋势较平缓。相反的，当使用者闭眼时，侦测影像最暗处通常是非皮肤的部份(例如睫毛)，而最暗处影像周边通常是皮肤，会呈现较亮的影像，因此使用者闭眼时，侦测影像最暗处周边的影像亮度变化趋势会较急剧。然请留意，以下实施例可与前述图1至图4的实施例一同实施，也就是利用缩减过的侦测范围来撷取侦测影像。但亦可利用最大可侦测范围来撷取侦测影像，或者利用其他方式所产生的侦测范围来撷取侦测影像。
图5绘示了根据本发明另一实施例的眼睛状态侦测方法的示意图。在此实施例中，是将侦测影像中每一影像列(row)的亮度加总，然后找出侦测影像中最暗的一影像列。以图5为例，当使用者开眼时，亮度最暗的一列是第7列，而当使用者闭眼时，亮度最暗的一列是第12列，由图5可看出，使用者开眼时每一影像列亮度总和的变化会较平缓，而闭眼时每一影像列亮度总和的变化会较急剧。许多种方式可用以找出亮度变化趋势，在一实施例中，会将最暗的影像列做为基准影像列，并计算出基准影像列的亮度总和与至少二影像列的亮度总和的亮度总和差异值，并根据这些亮度总和差异值计算出亮度变化趋势。
在一实施例中，基准影像列是侦测影像中第N列影像，此状况下会计算基准影像排的亮度总和与侦测影像中第N+1列影像至第N+K列中每一影像列的亮度总和的亮度总和差异值，并计算基准影像列的亮度总和与侦测影像中第N-1列影像至第N-K列中每一影像列的亮度总和的亮度总和差异值。其中K为大于或等于1的正整数。
以下将以例子来说明此实施例。
| 开眼 | 闭眼 | |
| a9 | 4035 | 4188 |
| a10 | 3514 | 4258 |
| a11 | 2813 | 4311 |
| a12 | 2542 | 4035 |
| a13 | 2669 | 3772 |
| a14 | 2645 | 3226 |
| a15 | 2835 | 2703 |
| a16 | 3154 | 2643 |
| a17 | 3564 | 2878 |
| a18 | 3888 | 3365 |
| a19 | 4142 | 3745 |
列表1
前述列表1绘示了开眼和闭眼时不同像素列的亮度总和，ax表示其为第x列像素列的亮度总和，举例来说，a9表示第9列像素列的亮度总和，a15表示第15列像素列的亮度总和。在此例中，开眼时最暗的像素列为第12列，其亮度总和为2542(a12)，若前述的K值取为3，则第12列像素列的亮度总和会跟第9列至第11列每一像素列的像素列亮度总和以及第13列至第15列的每一像素列亮度总和做相减，如公式(1)所示。
公式(1)：开眼状态
亮度总和差异值＝(a9-a12)+(a10-a12)+(a11-a12)+(a13-a12)+(a14-a12)+(a15-a12)
同样的，闭眼时最暗的像素列为第16列，其亮度总和为2643(a16)，若前述的K值取为3，则第16列像素列的亮度总和是跟第13列至第15列每一像素列的像素列亮度总和以及第17列至第19列的每一像素列亮度总和做相减，如公式(2)所示。
公式(2)：闭眼状态
亮度总和差异值＝(a13-a16)+(a14-a16)+(a15-a16)+(a17-a16)+(a18-a16)+(a19-a16)
依据公式(1)可得开眼时的亮度总和差异值为
(4035-2542)+(3514-2542)+(2813-2542)+(2669-2542)+(2645-2542)+(2835-2542)＝3259
而依据公式(2)可得闭眼时的亮度总和差异值为
(3772-2643)+(3226-2643)+(2703-2643)+(2878-2643)+(3365-2643)+(3745-2643)＝3831
前述公式(1)和公式(2)可视为成本函数(cost function)。前述公式(1)和公式(2)亦可加上绝对值的概念衍伸出新的成本函数，而分别形成公式(3)和公式(4)
公式(3)：开眼状态
亮度总和差异值＝|a9-a10|+|a10-a11|+|a11-a12|+|a13-a12|+|a14-a13|+|a15-a14|
公式(4)：闭眼状态
亮度总和差异值＝|a13-a14|+|a14-a15|+|a15-a16|+|a17-a16|+|a18-a17|+|a19-a18|
依据公式(3)可得开眼时的亮度总和差异值为
|4035-3514|+|3514-2813|+|2813-2542|+|2669-2542|+|2669-2645|+|2835-2645|＝1834
依据公式(4)可得闭眼时的亮度总和差异值为
|3772-3226|+|3226-2703|+|2703-2643|+|2878-2643|+|3365-2878|+|3745-3365|＝2231
由前述例子可知，无论采用何种的成本函数，闭眼状态时的亮度总和差异值均大于开眼状态时的亮度总和差异值，也就是闭眼状态时，侦测影像的最暗处影像周边的亮度变化要比开眼状态时的最暗处影像周边的亮度变化急剧，因此可藉由侦测影像的最暗处影像周边的亮度变化来判断使用者是开眼状态还是闭眼状态。
请留意图5的实施例虽然是以像素列来说明，但因应不同需求亦可以像素行(column)来计算亮度变化趋势。因此，根据图5的实施例，可得到一眼睛状态侦测方法，其包含图6中所示的步骤：
步骤601
撷取一侦测影像。此步骤可套用图1所示的侦测范围来撷取影像，但不限定。
步骤603
计算该侦测影像于一特定方向上的复数影像排的亮度总和。例如像素列或像素行。
步骤605
以影像排中具有最低亮度总和的影像排作为一基准影像排。
步骤607
计算基准影像排与至少二影像排的亮度总和差异值。
步骤609
根据亮度总和差异值决定一亮度变化趋势。
步骤611
以该亮度变化趋势判断使用者眼睛为开眼状态或是闭眼状态。
其中步骤603-609可视为“计算侦测影像最暗处周边的亮度变化趋势”，然请留意，此计算侦测影像最暗处周边的亮度变化趋势不限于步骤603-609，其亦可包含其他步骤。
图7绘示了根据本发明一实施例的眼睛状态侦测系统的方块图。如图7所示，眼睛状态侦测系统700包含控制单元701、影像感测器703以及计算单元705。控制单元701以及计算单元705可整合成同一元件。若眼睛状态侦测系统700施行图1所示的实施例，控制单元701控制影像感测器703以一侦测范围撷取一侦测影像SI，其中侦测范围是以使用者眼睛的可能所在位置为基准来决定，且小于眼睛状态侦测系统所能侦测的最大可侦测范围。计算单元705计算侦测影像SI的亮度，并根据侦测影像SI的亮度判断使用者眼睛为开眼状态或是闭眼状态。
若眼睛状态侦测系统700施行图5所示的实施例，控制单元701控制影像感测器703以一侦测范围撷取一侦测影像SI。计算单元705用以计算侦测影像SI最暗处周边的亮度变化趋势，并根据亮度变化趋势判断使用者眼睛为开眼状态或是闭眼状态。
眼睛状态侦测系统700的其他动作均已描述在前述实施例中，故在此不再赘述。
前述实施例是先以使用者眼睛的可能所在位置决定出侦测范围后，再以影像的亮度变化趋势来判断使用者眼睛为开眼状态或是闭眼状态。而在以下实施例中，会先判断出脸部范围后，再于脸部范围内决定出一判断范围，然后再以判断范围内的影像判断使用者是开眼状态还是闭眼状态。详细内容将于底下详述。
请参阅图8，其绘示了根据本发明另一实施例的眼睛状态侦测方法的示意图。如图8所示，会以一判断器CL(或称为分类器)来处理影像感测器所撷取的侦测影像SI。此判断器CL会以预先建立好的脸部影像特征模组来判断侦测影像SI中是否具有脸部影像，若有的话会在侦测影像SI中定义出一脸部范围Fr。然后会在脸部范围Fr中定义出一判断范围CR。于一实施例中，此判断范围CR小于脸部范围Fr(但亦可等于脸部范围Fr)。接着，再以判断器CL根据开眼影像特征模组或是闭眼影像特征模组来计算判断范围CR中是否包含开眼影像或闭眼影像。
前述实施例中因为使用了较小的判断范围CR，不须整张影像都进行运算，因此可降低运算量。于一实施例中，若判断出侦测影像SI中不具有脸部影像时，便不进行后续定义出判断范围CR以及计算判断范围CR中是否包含开眼影像或闭眼影像的步骤，如此可以更为减少运算量。许多方法可用以定义出判断范围CR，于一实施例中，可先根据影像判断出眼睛可能的所在位置后，以此位置定义出判断范围CR，但不限定于此方法。
图9绘示了图8所示的实施例之详细步骤的示意图。在步骤901中，会藉由模组建立资料来产生判断模组。举例来说，可输入至少一包含脸部影像的影像来建立脸部影像特征模组做为判断模组。或者，可输入至少一包含开眼影像的影像来建立开眼影像特征模组做为判断模组。同样的，可输入至少一包含闭眼影像的影像来建立闭眼影像特征模组做为判断模组。步骤903会对模组建立资料进行预处理，例如调整其亮度、对比度等让后续的步骤更容易进行，但不一定需要此步骤。
步骤905会对模组建立资料进行萃取特征的动作，而步骤907会对应步骤905萃取的特征来建立模组。举例来说，步骤901中输入至少一包含脸部影像的影像。步骤905会萃取到脸部影像的特征，步骤907会对应步骤905萃取到的脸部影像特征来建立脸部影像特征模组。如此便可知道当一影像具有脸部影像时，会具有那些特征。而在步骤907中，会输入欲判断的侦测影像。步骤911是与步骤903类似的预处理。步骤913中会对输入影像进行萃取特征的动作。步骤915会判断侦测影像的特征吻合那些判断模组，然后便可得知输入影像是否包含脸部影像、开眼影像或闭眼影像。
多种习知的算法可用以执行步骤905或913来萃取影像的特征。举例来说，gabor或harr算法。同样的，多种习知的算法可用以判断输入影像吻合那一判断模组(即对输入影像进行分类)，例如adaboost算法。然请留意，本发明并不限定以前述算法来实施。
图8和图9的实施例可以图7所示的眼睛状态侦测系统700来施行。如前所述，眼睛状态侦测系统700包含控制单元701、影像感测器703以及计算单元705。控制单元701以及计算单元705可整合成同一元件。若眼睛状态侦测系统700施行图8、图9所示的实施例，控制单元701控制影像感测器703撷取一侦测影像SI。计算单元705以图8或图9的实施例来决定侦测影像SI中的判断范围(例如图8的CR)，并以判断范围CR中的影像来判断侦测影像SI是否包含开眼影像或闭眼影像，进而判断使用者是处于开眼状态或是闭眼状态。
根据前述图8和图9实施例，本发明所提供的眼睛状态侦测方法之流程图可简示如图10，其包含下列步骤：
步骤1001
以影像感测器撷取一侦测影像(如图8中的SI)。
步骤1003
在侦测影像中定义出一脸部范围(如图8中的Fr)。
步骤1005
在脸部范围中定义出一判断范围(如图8中的CR)。
步骤1007
判断范围中是否包含开眼影像或闭眼影像。
于一实施例中，图8至图10所示的方法是使用在非穿载式的电子装置上，例如手持式的行动装置(如手机、平板计算机)或是可放置于平面上的电子装置(例如笔记型计算机)，但不限定。
根据前述实施例，不须影像的详细特征以及大范围影像便可判断使用者的眼睛状态，因此可改善习知技术中须利用高分辨率影像才能判断使用者眼睛状态的问题以及运算量大导致耗电的问题。
以上所述仅为本发明之较佳实施例，凡依本发明申请专利范围所做之均等变化与修饰，皆应属本发明之涵盖范围。
Claims (10)
1.一种眼睛状态侦测方法，其特征在于，施行在包含一影像感测器的电子装置上，包含：
(a)以使用者眼睛的可能所在位置为基准，决定出一侦测范围，其中该侦测范围小于该电子装置所能侦测的最大可侦测范围；
(b)以该侦测范围撷取一侦测影像；以及
(c)根据该侦测影像的亮度判断该使用者眼睛为开眼状态或是闭眼状态；
其中，该步骤(c)更包含：
(c1)计算该侦测影像最暗处周边的亮度变化趋势；以及
(c2)根据该亮度变化趋势判断该使用者眼睛为开眼状态或是闭眼状态；
其中，该步骤(c1)更包含：
(c11)计算该侦测影像于一特定方向上的多个影像排的亮度总和；
(c12)以多个影像排中具有最低亮度总和的影像排作为一基准影像排；
(c13)计算该基准影像排的亮度总和与多个影像排中的至少两个影像排的亮度总和的亮度总和差异值；以及
(c14)根据该亮度总和差异值决定该亮度变化趋势。
2.如权利要求1所述的眼睛状态侦测方法，其特征在于，是使用在一穿戴式装置上，其中该步骤(a)是在该穿戴式装置上预先设定该可能所在位置。
3.如权利要求2所述的眼睛状态侦测方法，其特征在于，其中该穿戴式装置是为一智能型眼镜。
4.如权利要求1所述的眼睛状态侦测方法，其特征在于，其中该些影像排为影像列。
5.如权利要求1所述的眼睛状态侦测方法，其特征在于，
其中该基准影像排是该侦测影像中第N排影像；
其中该步骤(c13)计算该基准影像排与该侦测影像中第N+1排影像至第N+K排中每一该影像排的该些亮度总和差异值，并计算该基准影像排与该侦测影像中第N-1排影像至第N-K排中每一该影像排的该些亮度总和差异值；
其中该K的值为大于或等于1的正整数。
6.一种眼睛状态侦测系统，其特征在于，包含：
一控制单元：
一影像感测器，其中该控制单元控制该影像感测器以一侦测范围撷取一侦测影像，其中该侦测范围以使用者眼睛的可能所在位置为基准来决定，且小于该眼睛状态侦测系统所能侦测的最大可侦测范围；以及
一计算单元，计算该侦测影像的亮度，并根据该侦测影像的亮度判断该使用者眼睛为开眼状态或是闭眼状态；
其中，该计算单元更执行下列步骤来判断该使用者眼睛为开眼状态或是闭眼状态：
计算该侦测影像最暗处周边的亮度变化趋势；以及
根据该亮度变化趋势判断该使用者眼睛为开眼状态或是闭眼状态；
其中，该计算单元更执行下列步骤来决定该亮度变化趋势：
计算该侦测影像于一特定方向上的多个影像排的亮度总和；
以多个影像排中具有最低亮度总和的影像排作为一基准影像排；
计算该基准影像排的该亮度总和与多个影像排中的至少两个影像排的亮度总和的亮度总和差异值；以及
根据该亮度总和差异值决定该亮度变化趋势。
7.如权利要求6所述的眼睛状态侦测系统，其特征在于，是使用在一穿戴式装置上，其中该侦测范围是在该穿戴式装置上所预先设定的该可能所在位置而决定。
8.如权利要求7所述的眼睛状态侦测系统，其特征在于，其中该穿戴式装置是为一智能型眼镜。
9.如权利要求6所述的眼睛状态侦测系统，其特征在于，其中该些影像排为影像列。
10.如权利要求6所述的眼睛状态侦测系统，其特征在于，
其中该基准影像排是该侦测影像中第N排影像；
其中该计算单元计算该基准影像排与该侦测影像中第N+1排影像至第N+K排中每一该影像排的该些亮度总和差异值，并计算该基准影像排与该侦测影像中第N-1排影像至第N-K排中每一该影像排的该些亮度总和差异值；
其中该K的值为大于或等于1的正整数。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910564039.9A CN110222674B (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
| CN201910564253.4A CN110263749A (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2015104119866 | 2015-07-14 | ||
| CN201510411986 | 2015-07-14 |
Related Child Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910564039.9A Division CN110222674B (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
| CN201910564253.4A Division CN110263749A (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106355135A CN106355135A (zh) | 2017-01-25 |
| CN106355135B true CN106355135B (zh) | 2019-07-26 |
Family
ID=57843152
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910564039.9A Active CN110222674B (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
| CN201910564253.4A Pending CN110263749A (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
| CN201610421188.6A Active CN106355135B (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
Family Applications Before (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910564039.9A Active CN110222674B (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
| CN201910564253.4A Pending CN110263749A (zh) | 2015-07-14 | 2016-06-14 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (3) | CN110222674B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107292261B (zh) * | 2017-06-16 | 2021-07-13 | 深圳天珑无线科技有限公司 | 一种拍照方法及其移动终端 |
| CN108259768B (zh) * | 2018-03-30 | 2020-08-04 | Oppo广东移动通信有限公司 | 图像的选取方法、装置、存储介质及电子设备 |
Family Cites Families (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0918708A (ja) * | 1995-06-30 | 1997-01-17 | Omron Corp | 画像処理方法およびその方法を用いた画像入力装置，制御装置，画像出力装置，ならびに画像処理システム |
| JP3967863B2 (ja) * | 2000-02-15 | 2007-08-29 | ナイルス株式会社 | 眼の状態検出装置 |
| JP4162503B2 (ja) * | 2003-01-31 | 2008-10-08 | 富士通株式会社 | 眼の状態判定装置、眼の状態判定方法及びコンピュータプログラム |
| WO2007092512A2 (en) * | 2006-02-07 | 2007-08-16 | Attention Technologies, Inc. | Driver drowsiness and distraction monitor |
| JP4845698B2 (ja) * | 2006-12-06 | 2011-12-28 | アイシン精機株式会社 | 眼部検出装置、眼部検出方法及びプログラム |
| JP5055166B2 (ja) * | 2008-02-29 | 2012-10-24 | キヤノン株式会社 | 眼の開閉度判定装置、方法及びプログラム、撮像装置 |
| JP4775599B2 (ja) * | 2008-07-04 | 2011-09-21 | 花王株式会社 | 目の位置の検出方法 |
| JP5208711B2 (ja) * | 2008-12-17 | 2013-06-12 | アイシン精機株式会社 | 眼開閉判別装置及びプログラム |
| TWI401963B (zh) * | 2009-06-25 | 2013-07-11 | Pixart Imaging Inc | Dynamic image compression method for face detection |
| CN102006407B (zh) * | 2009-09-03 | 2012-11-28 | 华晶科技股份有限公司 | 防眨眼拍摄系统及方法 |
| KR101594298B1 (ko) * | 2009-11-17 | 2016-02-16 | 삼성전자주식회사 | 디지털 영상 처리기에서 포커스 조정 장치 및 방법 |
| TW201140511A (en) * | 2010-05-11 | 2011-11-16 | Chunghwa Telecom Co Ltd | Drowsiness detection method |
| TWI432012B (zh) * | 2010-11-02 | 2014-03-21 | Acer Inc | 調整立體眼鏡所接收之周遭環境亮度的方法、立體眼鏡與裝置 |
| JP5761074B2 (ja) * | 2012-02-24 | 2015-08-12 | 株式会社デンソー | 撮像制御装置及びプログラム |
| TWI498857B (zh) * | 2012-09-14 | 2015-09-01 | Utechzone Co Ltd | 瞌睡提醒裝置 |
| CN103680064B (zh) * | 2012-09-24 | 2016-08-03 | 由田新技股份有限公司 | 瞌睡提醒系统 |
| US9207760B1 (en) * | 2012-09-28 | 2015-12-08 | Google Inc. | Input detection |
| CN104463081A (zh) * | 2013-09-16 | 2015-03-25 | 展讯通信(天津)有限公司 | 人眼状态的检测方法 |
| JP6234762B2 (ja) * | 2013-10-09 | 2017-11-22 | アイシン精機株式会社 | 眼部検出装置、方法、およびプログラム |
| CN103729646B (zh) * | 2013-12-20 | 2017-02-08 | 华南理工大学 | 一种眼睛图像有效性检测方法 |
-
2016
- 2016-06-14 CN CN201910564039.9A patent/CN110222674B/zh active Active
- 2016-06-14 CN CN201910564253.4A patent/CN110263749A/zh active Pending
- 2016-06-14 CN CN201610421188.6A patent/CN106355135B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN110222674B (zh) | 2023-04-28 |
| CN106355135A (zh) | 2017-01-25 |
| CN110222674A (zh) | 2019-09-10 |
| CN110263749A (zh) | 2019-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10165194B1 (en) | Multi-sensor camera system | |
| JP7092177B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| US9750420B1 (en) | Facial feature selection for heart rate detection | |
| US20200265239A1 (en) | Method and apparatus for processing video stream | |
| CN105184246B (zh) | 活体检测方法和活体检测系统 | |
| CN110032271B (zh) | 对比度调节装置及其方法、虚拟现实设备及存储介质 | |
| EP2336949B1 (en) | Apparatus and method for registering plurality of facial images for face recognition | |
| US20120114198A1 (en) | Facial image gender identification system and method thereof | |
| JP2014157452A (ja) | 画像処理装置、画像処理方法、および画像処理プログラム | |
| US20140044342A1 (en) | Method for generating 3d coordinates and mobile terminal for generating 3d coordinates | |
| US20200085296A1 (en) | Eye state detection system and method of operating the same for utilizing a deep learning model to detect an eye state | |
| CN105609086A (zh) | 显示界面的亮度调整方法及装置 | |
| CN106355135B (zh) | 眼睛状态侦测方法以及眼睛状态侦测系统 | |
| WO2022137603A1 (ja) | 判定方法、判定装置、及び判定プログラム | |
| CN108292359A (zh) | 眼睛特征识别 | |
| Emery et al. | OpenNEEDS: A dataset of gaze, head, hand, and scene signals during exploration in open-ended VR environments | |
| WO2024021742A1 (zh) | 一种注视点估计方法及相关设备 | |
| US10860852B2 (en) | Eye state detecting method and eye state detecting system | |
| CN105957020A (zh) | 图像生成装置以及图像生成方法 | |
| CN109145861B (zh) | 情绪识别装置及方法、头戴式显示设备、存储介质 | |
| CN113435353A (zh) | 基于多模态的活体检测方法、装置、电子设备及存储介质 | |
| CN102783174A (zh) | 图像处理设备、内容传递系统、图像处理方法和程序 | |
| KR102071410B1 (ko) | 스마트 미러 | |
| CN115984973A (zh) | 一种用于防偷窥屏幕的人体异常行为监测方法 | |
| CN110073406A (zh) | 面部检测装置及其控制方法、以及程序 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |