CN105022981B - 一种检测人眼健康状态的方法、装置及移动终端 - Google Patents
一种检测人眼健康状态的方法、装置及移动终端 Download PDFInfo
- Publication number
- CN105022981B CN105022981B CN201410158930.XA CN201410158930A CN105022981B CN 105022981 B CN105022981 B CN 105022981B CN 201410158930 A CN201410158930 A CN 201410158930A CN 105022981 B CN105022981 B CN 105022981B
- Authority
- CN
- China
- Prior art keywords
- eyes
- winks
- user
- eye
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000036541 health Effects 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 title claims abstract description 26
- 210000001508 eye Anatomy 0.000 claims abstract description 220
- 230000003862 health status Effects 0.000 claims abstract description 26
- 238000001514 detection method Methods 0.000 claims description 21
- 230000008859 change Effects 0.000 claims description 3
- 230000004438 eyesight Effects 0.000 abstract description 11
- 206010047571 Visual impairment Diseases 0.000 abstract description 7
- 208000029257 vision disease Diseases 0.000 abstract description 7
- 230000004393 visual impairment Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 6
- 210000005252 bulbus oculi Anatomy 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 3
- 239000012141 concentrate Substances 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 206010003694 Atrophy Diseases 0.000 description 1
- 230000037444 atrophy Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 206010016256 fatigue Diseases 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 210000004561 lacrimal apparatus Anatomy 0.000 description 1
- 210000003097 mucus Anatomy 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000003248 secreting effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 208000005494 xerophthalmia Diseases 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
Abstract
本发明公开了一种检测人眼健康状态的方法、装置及移动终端,其中,该方法包括:通过摄像头获取预定时间段内眼睛的眨眼次数;将眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据健康状态发出对应的用眼提示。本发明通过摄像头采集眼睛的眨眼次数,并将该数据与预设的眨眼次数阈值进行比较,来确定眼睛所处的健康状态,以呈现不同的用眼提示,这样,在用户使用终端时,能够通过终端对应的摄像头来监督用户用眼,保护了用户视力,解决现有技术中,用户在使用终端时,由于眨眼次数较少,容易引发眼部问题,现有的终端虽然都较为智能,但却无法督促用户保护视力,导致用户视力下降的问题。
Description
技术领域
本发明涉及通讯领域,特别是涉及一种检测人眼健康状态的方法、装置及移动终端。
背景技术
随着智能手机近几年的飞速发展和普及,已融入到人们日常生活的各个方面。越来越多的使用者喜欢在手机上看电子小说、书籍、新闻、电影等。由于用户在手机上进行娱乐、阅读时,多发生在移动场景中,本身光线就不太好,再加上手机屏幕对眼睛的辐射和伤害,所以,当用户长时间看手机屏幕时,通常会有一定的依赖性且全神贯注,眼睛眨眼频率会在不知不觉中下降。
根据相关资料表明,人类正常眨眼频率是每5秒中眨眼一次。眨眼作为人类的一种本能行为,是为了增加眼睛湿润度,促进眼睛分泌粘液滋润眼膜。当用户长时间全神贯注看屏幕时,眨眼频率会下降到约10秒甚至更长时间才一次。如果用户长期保持这种不良习惯会造成视力下降、眼睛干涩等问题,甚至诱发干眼症,泪腺萎缩等眼睛器质性病变。
现有技术中,用户在使用终端时,由于眨眼次数较少,容易引发眼部问题,现有的终端虽然都较为智能,但却无法督促用户保护视力,导致用户视力下降。
发明内容
本发明提供了一种检测人眼健康状态的方法、装置及移动终端,用以解决现有技术中,用户在使用终端时,由于眨眼次数较少,容易引发眼部问题,现有的终端虽然都较为智能,但却无法督促用户保护视力,导致用户视力下降的 问题。
为解决上述技术问题,一方面,本发明提供一种检测人眼健康状态的方法,包括:通过摄像头获取预定时间段内眼睛的眨眼次数;将所述眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据所述健康状态发出对应的用眼提示。
进一步,通过摄像头获取预定时间段内眼睛的眨眼次数包括:将用户处于睁眼状态下的眼睛置于摄像头前,保持第一预定时长,通过摄像头获取睁眼状态下预定区域的灰度信息,其中,所述预定区域是以每只眼睛为中心向外截取的预设图形;在所述第一预定时长之后,按照第一预设时间间隔采集所述预设区域内的灰度信息,并根据采集到的灰度信息的变化值判断用户当前眼睛所处的睁闭状态,其中,当所述灰度信息的变化值在预设变化范围内的情况下,确定眼睛处于睁眼状态,当所述灰度信息的变化值超过所述预设变化范围的情况下,确定眼睛处于闭眼状态;根据所述预定时间段内统计的眼睛的睁闭状态确定所述眨眼次数。
进一步,通过摄像头获取预定时间段内眼睛的眨眼次数包括:将用户处于睁眼状态下的眼睛置于摄像头前,保持第二预定时长,获取当前图像以记录睁眼状态下预定区域的灰度信息,其中,所述预定区域是以每只眼睛为中心向外截取的预设图形;在所述第二预定时长之后,按照第二预设时间间隔采集所述预设区域对应的图像,并对采集到的所有图像所对应的灰度信息求平均值,对所述平均值求极值点,以确定所述极值点预设范围内灰度变化率的最大值;根据所述灰度变化率的最大值判断用户当前眼睛所处的睁闭状态,其中,确定灰度变化率的变化范围超过所述灰度变化率的最大值预定倍数的极值点所对应的图像为闭眼状态,确定灰度变化率的变化范围等于或小于所述灰度变化率的最大值预定倍数的极值点所对应的图像为睁眼状态;根据所述预定时间段内统计的眼睛的睁闭状态确定所述眨眼次数。
进一步,将所述眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确 定用户的眼睛所处的健康状态包括:在所述眨眼次数大于或等于所述预设眨眼次数阈值的情况下,确定所述眼睛处于健康状态;在所述眨眼次数小于所述预设眨眼次数阈值的情况下,确定所述眼睛处于疲惫状态。
进一步,根据所述健康状态发出对应的用眼提示包括:在用户的眼睛处于疲惫状态的情况下,发出告警音和/或提示框以提示用户眼睛需要休息。
进一步,在通过摄像头获取预定时间段内眼睛的眨眼次数之前,还包括:检测所述摄像头内是否出现人脸信息;在出现人脸信息的情况下,检测所述摄像头是否检测到眼睛信息;在检测到眼睛信息的情况下,通过摄像头获取预定时间段内眼睛的眨眼次数。
另一方面,本发明还提供一种检测人眼健康状态的装置,包括:获取模块,用于通过摄像头获取预定时间段内眼睛的眨眼次数;确定模块,用于将所述眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据所述健康状态发出对应的用眼提示。
进一步,所述获取模块包括:第一获取单元,用于将用户处于睁眼状态下的眼睛置于摄像头前,保持第一预定时长,通过摄像头获取睁眼状态下预定区域的灰度信息,其中,所述预定区域是以每只眼睛为中心向外截取的预设图形;第一确定单元,用于在所述第一预定时长之后,按照第一预设时间间隔采集所述预设区域内的灰度信息,并根据采集到的灰度信息的变化值判断用户当前眼睛所处的睁闭状态,其中,当所述灰度信息的变化值在预设变化范围内的情况下,确定眼睛处于睁眼状态,当所述灰度信息的变化值超过所述预设变化范围的情况下,确定眼睛处于闭眼状态;第一统计单元,用于根据所述预定时间段内统计的眼睛的睁闭状态确定所述眨眼次数。
进一步,所述获取模块包括:第二获取单元,用于将用户处于睁眼状态下的眼睛置于摄像头前,保持第二预定时长,获取当前图像以记录睁眼状态下预定区域的灰度信息,其中,所述预定区域是以每只眼睛为中心向外截取的预设图形;第二确定单元,用于在所述第二预定时长之后,按照第二预设时间间隔 采集所述预设区域对应的图像,并对采集到的所有图像所对应的灰度信息求平均值,对所述平均值求极值点,以确定所述极值点预设范围内灰度变化率的最大值;根据所述灰度变化率的最大值判断用户当前眼睛所处的睁闭状态,其中,确定灰度变化率的变化范围超过所述灰度变化率的最大值预定倍数的极值点所对应的图像为闭眼状态,确定灰度变化率的变化范围等于或小于所述灰度变化率的最大值预定倍数的极值点所对应的图像为睁眼状态;第二统计单元,用于根据所述预定时间段内统计的眼睛的睁闭状态确定所述眨眼次数。
进一步,所述确定模块,还用于在用户的眼睛处于疲惫状态的情况下,发出告警音和/或提示框以提示用户眼睛需要休息。
又一方面,本发明还提供了一种移动终端,包括:上述任一项所述的检测人眼健康状态的装置。
本发明通过摄像头采集眼睛的眨眼次数,并将该数据与预设的眨眼次数阈值进行比较,来确定眼睛所处的健康状态,以呈现不同的用眼提示,这样,在用户使用终端时,能够通过终端对应的摄像头来监督用户用眼,保护了用户视力,解决现有技术中,用户在使用终端时,由于眨眼次数较少,容易引发眼部问题,现有的终端虽然都较为智能,但却无法督促用户保护视力,导致用户视力下降的问题。
附图说明
图1是本发明实施例中检测人眼健康状态的方法的流程图;
图2是本发明实施例中检测人眼健康状态的装置的结构示意图;
图3是本发明实施例中检测人眼健康状态的装置获取模块的一种结构示意图;
图4是本发明实施例中检测人眼健康状态的装置获取模块的又一种结构示意图;
图5是本发明实施例中检测人眼健康状态的装置的优选结构示意图;
图6是本发明优选实施例中检测人眼健康状态的方法的流程图;
图7是本发明优选实施例中提取眼睛ROI过程中人眼检测的示意图;
图8是本发明优选实施例中提取眼睛ROI过程中人眼ROI切割的示意图;
图9是本发明优选实施例中提取眼睛ROI过程中确定人眼ROI的示意图;
图10是本发明优选实施例中眼睛处于半开半闭状态的示意图;
图11是本发明优选实施例中闭眼状态下只检测到一只眼睛的示意图;
图12是本发明优选实施例中闭眼状态下检测到两只眼睛的示意图;
图13是本发明优选实施例中检测人眼ROI状态下L=12.4的仿真示意图;
图14是本发明优选实施例中检测人眼ROI状态下L=2.4的仿真示意图;
图15是本发明优选实施例中检测人眼ROI状态下L=3的仿真示意图。
具体实施方式
为了解决现有技术中,用户在使用终端时,由于眨眼次数较少,容易引发眼部问题,现有的终端虽然都较为智能,但却无法督促用户保护视力,导致用户视力下降的问题,本发明提供了一种检测人眼健康状态的方法、装置及移动终端,以下结合附图以及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不限定本发明。
本发明实施例提供了一种检测人眼健康状态的方法,如图1所示,包括步骤S102至S104:
S102,通过摄像头获取预定时间段内眼睛的眨眼次数。
在实现的过程中,眼睛的眨眼次数还可以通过多种形式呈现,例如,将次数以频率形式进行呈现。
S104,将眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据健康状态发出对应的用眼提示。
本发明实施例通过摄像头采集眼睛的眨眼次数,并将该数据与预设的眨眼次数阈值进行比较,来确定眼睛所处的健康状态,以呈现不同的用眼提示,这 样,在用户使用终端时,能够通过终端对应的摄像头来监督用户用眼,保护了用户视力,解决现有技术中,用户在使用终端时,由于眨眼次数较少,容易引发眼部问题,现有的终端虽然都较为智能,但却无法督促用户保护视力,导致用户视力下降的问题。
实施过程中,通过摄像头获取预定时间段内眼睛的眨眼次数可以包括多种方式:
例如,可以先将用户处于睁眼状态下的眼睛置于摄像头前,保持第一预定时长(比如1秒),以获取睁眼状态下预定区域的灰度信息,其中,预定区域是以每只眼睛为中心向外截取的预设图形,可以是矩形或圆形等;在第一预定时长之后,按照第一预设时间间隔采集预设区域内的灰度信息,并根据采集到的灰度信息的变化值判断用户当前眼睛所处的睁闭状态,其中,当灰度信息的变化值在预设变化范围内的情况下,确定眼睛处于睁眼状态,当灰度信息的变化值超过预设变化范围的情况下,确定眼睛处于闭眼状态;再根据预定时间段内统计的眼睛的睁闭状态确定眨眼次数。
通过摄像头获取预定时间段内眼睛的眨眼次数还可以是将用户处于睁眼状态下的眼睛置于摄像头前,保持第二预定时长(该第二预定时长可以与第一预定时长相同),获取当前图像以记录睁眼状态下预定区域的灰度信息,其中,预定区域是以每只眼睛为中心向外截取的预设图形;在第二预定时长之后,按照第二预设时间间隔采集预设区域对应的图像,并对采集到的所有图像所对应的灰度信息求平均值,对平均值求极值点,以确定极值点预设范围内灰度变化率的最大值;再根据灰度变化率的最大值判断用户当前眼睛所处的睁闭状态,其中,确定灰度变化率的变化范围超过灰度变化率的最大值预定倍数的极值点所对应的图像为闭眼状态,确定灰度变化率的变化范围等于或小于灰度变化率的最大值预定倍数的极值点所对应的图像为睁眼状态;最后,根据预定时间段内统计的眼睛的睁闭状态确定眨眼次数。
上述两种实现方式都可以确定眨眼次数,本领域技术人员还可以基于上述 方案来采取其他方式进行采集,此处不进行赘述。
将眨眼次数与预设眨眼次数阈值进行比较时,当眨眼次数大于或等于预设眨眼次数阈值时,则可以确定眼睛处于健康状态;当眨眼次数小于预设眨眼次数阈值时,则可以确定眼睛处于疲惫状态。按照需求,还可以将眼睛的健康状态分为多种形式,例如,健康状态、亚健康状态、疲惫状态等,可以根据需求和经验设置不同的区分等级。
实施过程中,为了进一步加强监测的准确性,可以在通过摄像头获取预定时间段内眼睛的眨眼次数之前,先检测摄像头内是否出现人脸信息;在出现人脸信息的情况下,检测摄像头是否检测到眼睛信息,如果未出现人脸信息,则不执行下一操作;在检测到眼睛信息的情况下,通过摄像头获取预定时间段内眼睛的眨眼次数,如果未检测到眼睛信息,则不执行下一步采集操作,此时,可以提醒用户睁眼等操作。
当监测到用户的眼睛处于疲惫状态时,可以向用户发出告警音和/或提示框,来提示用户眼睛需要休息,以进一步保护眼睛视力。
本发明实施例还提供了一种检测人眼健康状态的装置,其结构示意如图2所示,包括:获取模块10,用于通过摄像头获取预定时间段内眼睛的眨眼次数;确定模块20,与获取模块10耦合,用于将眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据健康状态发出对应的用眼提示。
图3示出了获取模块10的第一种结构示意图,其包括:
第一获取单元101,用于将用户处于睁眼状态下的眼睛置于摄像头前,保持第一预定时长,通过摄像头获取睁眼状态下预定区域的灰度信息,其中,预定区域是以每只眼睛为中心向外截取的预设图形;第一确定单元102,与第一获取单元101耦合,用于在第一预定时长之后,按照第一预设时间间隔采集预设区域内的灰度信息,并根据采集到的灰度信息的变化值判断用户当前眼睛所处的睁闭状态,其中,当灰度信息的变化值在预设变化范围内的情况下,确定 眼睛处于睁眼状态,当灰度信息的变化值超过预设变化范围的情况下,确定眼睛处于闭眼状态;第一统计单元103,与第一确定单元102耦合,用于根据预定时间段内统计的眼睛的睁闭状态确定眨眼次数。
图4示出了获取模块10的又一种结构示意图,其包括:
第二获取单元104,用于将用户处于睁眼状态下的眼睛置于摄像头前,保持第二预定时长,获取当前图像以记录睁眼状态下预定区域的灰度信息,其中,预定区域是以每只眼睛为中心向外截取的预设图形;第二确定单元105,与第二获取单元104耦合,用于在第二预定时长之后,按照第二预设时间间隔采集预设区域对应的图像,并对采集到的所有图像所对应的灰度信息求平均值,对平均值求极值点,以确定极值点预设范围内灰度变化率的最大值;根据灰度变化率的最大值判断用户当前眼睛所处的睁闭状态,其中,确定灰度变化率的变化范围超过灰度变化率的最大值预定倍数的极值点所对应的图像为闭眼状态,确定灰度变化率的变化范围等于或小于灰度变化率的最大值预定倍数的极值点所对应的图像为睁眼状态;第二统计单元106,与第二确定单元105耦合,用于根据预定时间段内统计的眼睛的睁闭状态确定眨眼次数。
本领域技术人员可以将图3和图4中的两种获取模块的内部结构都设置在获取模块中,则在不同情况下,可以开启不同的方式来获取眨眼次数。
图5示出了检测人眼健康状态的装置的优选结构示意图,在图2的基础上,上述装置还可以包括检测模块30,用于检测所述摄像头内是否出现人脸信息,在出现人脸信息的情况下,检测所述摄像头是否检测到眼睛信息,在检测到眼睛信息的情况下,通过摄像头获取预定时间段内眼睛的眨眼次数。
上述装置中,获取模块还可以用于在用户的眼睛处于疲惫状态的情况下,发出告警音和/或提示框以提示用户眼睛需要休息。
本发明实施例还提供了一种移动终端,该移动终端可以是本身具备摄像头,也可以是通过外接设备连接了摄像头。该移动终端设置了上述检测人眼健康状态的装置能够实现的功能,或者将上述检测人眼健康状态的装置集成在手机中, 因此,该移动终端包含上述检测人眼健康状态的装置的各个模块,本领域技术人员知晓如何根据本发明实施例公开的内容进行设置,此处不再进行赘述。
优选实施例
摄像头是当今智能手机最显著的模块之一,通常带有前后摄像头。其前置摄像头在一般手机上也能够达到每秒30帧,获得130万像素左右的照片。这使得可以在前置摄像头获取的图像上进行人脸识别,进一步定位眼睛,判断眼睛的动作成为可能。
本发明实施例提供了一种利用前置摄像头检测眼睛的眨眼频率,以检测人眼健康状态的方法,本领域技术人员可以将该方法应用到只能终端(例如手机)中,或单独将其设置成为一个独立的软件应用(即APP)。即可以以一个独立的APP呈现,或集成到手机管理软件如“掌心管家”中。
用户可以通过手机自带的前置摄像头检测眨眼频率,对用户使用手机的用眼习惯作出建议,当用户希望检测自己的眨眼频率时,可以利用本实施例提供的APP,对着前置摄像头看一段时间,系统在后台自动检测眼睛的开和闭动作,并统计次数计算出眨眼频率,可以辅助保护用户的眼睛健康。本实施例能够很好的解决当今人们在使用智能手机,视力容易下降的问题。能够及时反馈给用户,当前阅读或使用手机习惯下的眨眼频率,为用户的眼睛健康保驾护航。
下面对本发明实施例的具体方案进行说明。
在本实施例提供的检测人眼健康状态的方法中,用户首先需要开启检测模式,例如打开手机中的该功能对应的APP,或者在集成了该功能的手机中,可以开启手机中的该功能;然后用户以睁眼状态对着前置摄像头一段时间(约0.5秒坐浴),然后按照正常频率眨眼;系统在后台抓取图像进行人脸、人眼检测,最终定位人眼,以人眼为中心截取一个矩形。通过计算眼睛矩形灰度值的变化判断眼睛的开和闭。这些计算是在后台进行,在这一段时间内,用户按照平时的习惯使用手机,如阅读电子书,进行聊天、看新闻、购物等,以确保系统检测的真实;最后,当检测时间到一定时间后,显示计算的眨眼频率,并根据系 统中存储的用户以前的眨眼频率进行比较,给出眨眼频率健康值。
如图6所示,本发明具体实施方式可以包括步骤S601至S609:
S601,在开启检测模式后,系统自动打开前置Camera,摄像头开始检测。
S602,判断是否能够检测到人脸信息。如果是,则执行步骤S603,否则执行S608。
S603,如果检测到人脸,则进一步进行人眼检测,判断人眼的个数是否小于1。如果是,则执行步骤S605,否则执行S604。
S604,进行ROI纵向灰度平均值检测,以判断眼睛是否处于眨眼状态。如果是,则执行步骤S605,否则执行S607。
S605,将眨眼次数增加1次。
S606,判断检测时间是否到时。如果是,则执行步骤S608,否则继续执行S601。
S607,忽略此次检测。
S608,如果检测不到人脸,本次测试过程结束。
S609,对获取到的眨眼数据进行计算,以确定眼睛的健康状态。
在实现上述过程中,用户睁开双眼,系统录入眼睛睁开时的眼睛ROI(Region OfInteresting)信息,之后按照正常频率眨眼进行测试。系统每200毫秒抓取预览帧,整个算法耗时在20毫秒以内。由于人眨一次眼睛需要0.2秒至0.4秒,所以在一次眨眼过程中,系统最多只能抓取到一帧眨眼图片。
由于眼睛在闭合状态下,分类器未必能完全检测到,而在睁眼状态下系统可以接近百分百检测到。所以如果检测到人眼数小于等于1则判定为眨眼动作。
如果检测到两只人眼,则按照图7至图9所示流程提取人眼ROI矩阵。对人眼的两个ROI矩阵,分别求每一列的灰度平均值,得到纵向灰度平均值矩阵M(M为行向量)。对M求极值点,并计算极值点附近灰度变化率的最大值,记这个指标为L。
实施过程中,Camera获取预览帧后首先利用Adabost+Haar分类器对人脸检测,如果检测到人脸则提取出人脸区域。然后对人脸区域进行灰度化、亮度归一化等预处理操作,基于Adabost+Haar分类器再进行人眼检测,如果检测到人眼则提取出人眼所在的正方形区域(图7所示),将其缩放到64×64的标准大小。以此正方形中心为坐标原点,切割出宽度为W=50,高度H=10的矩形ROI区域(如图8所示),最终得到人眼ROI图片(如图9所示)。
如图10及图12所示,当眼睛处于半开半闭状态或完全闭合状态,由于ROI中眼白相较睁开状态下会大幅度减少,也即灰度值过度比较平缓,因此睁眼状态下的L会比半开半闭和闭合状态下的L大很多。根据这个条件,如果ROI计算的L小于系统录入的睁眼状态的L一定倍数,则视为该帧图片处在眨眼状态,眨眼次数加1。否则,视为没有眨眼。
当检测计时到一定时间后系统停止工作,计算从第一帧检测到人脸到最后一次检测到人脸的时间间隔T,利用统计到眨眼次数N算出用户的眨眼频率。根据用户的眨眼频率及正常眨眼频率值,对用户给出一定建议。
实施过程中,如图3所示,眼睛处于半开半闭状态(如图10所示)时,眼白相较睁开状态下(如图9所示)少很多。当眼睛完全处理闭合状态时(如图11、图12所示),提取出的人眼ROI图片灰度值接近肤色,跟睁眼状态下的人眼ROI差别很大,进一步证明了本发明的实用性。
如图13至15所示,对人眼ROI纵向灰度平均值仿真可得,睁眼状态下L=12.4,半睁半闭状态下L=2.4,闭眼状态下L=3。当眼睛处于眨眼状态时,指标L相较睁眼状态下的L小很多,一般情况下处于眨眼状态的指标L小于睁眼状态下L的0.5倍,说明本发明提出的人眼状态检测精确度高。
尽管为示例目的,已经公开了本发明的优选实施例,本领域的技术人员将意识到各种改进、增加和取代也是可能的,因此,本发明的范围应当不限于上述实施例。
Claims (7)
1.一种检测人眼健康状态的方法,其特征在于,包括:
通过摄像头获取预定时间段内眼睛的眨眼次数;
将所述眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据所述健康状态发出对应的用眼提示;
其中,通过摄像头获取预定时间段内眼睛的眨眼次数包括:
将用户处于睁眼状态下的眼睛置于摄像头前,保持第二预定时长,获取当前图像以记录睁眼状态下预定区域的灰度信息,其中,所述预定区域是以每只眼睛为中心向外截取的预设图形;
在所述第二预定时长之后,按照第二预设时间间隔采集所述预定区域对应的图像,并对采集到的所有图像所对应的灰度信息求平均值,对所述平均值求极值点,以确定所述极值点预设范围内灰度变化率的最大值;
根据所述灰度变化率的最大值判断用户当前眼睛所处的睁闭状态,其中,确定灰度变化率的变化范围超过所述灰度变化率的最大值预定倍数的极值点所对应的图像为闭眼状态,确定灰度变化率的变化范围等于或小于所述灰度变化率的最大值预定倍数的极值点所对应的图像为睁眼状态;
根据所述预定时间段内统计的眼睛的睁闭状态确定所述眨眼次数。
2.如权利要求1所述的方法,其特征在于,将所述眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态包括:
在所述眨眼次数大于或等于所述预设眨眼次数阈值的情况下,确定所述眼睛处于健康状态;
在所述眨眼次数小于所述预设眨眼次数阈值的情况下,确定所述眼睛处于疲惫状态。
3.如权利要求2所述的方法,其特征在于,根据所述健康状态发出对应的用眼提示包括:
在用户的眼睛处于疲惫状态的情况下,发出告警音和/或提示框以提示用户眼睛需要休息。
4.如权利要求1所述的方法,其特征在于,在通过摄像头获取预定时间段内眼睛的眨眼次数之前,还包括:
检测所述摄像头内是否出现人脸信息;
在出现人脸信息的情况下,检测所述摄像头是否检测到眼睛信息;
在检测到眼睛信息的情况下,通过摄像头获取预定时间段内眼睛的眨眼次数。
5.一种检测人眼健康状态的装置,其特征在于,包括:
获取模块,用于通过摄像头获取预定时间段内眼睛的眨眼次数;
确定模块,用于将所述眨眼次数与预设眨眼次数阈值进行比较,根据比较结果确定用户的眼睛所处的健康状态,并根据所述健康状态发出对应的用眼提示;
其中,所述获取模块包括:
第二获取单元,用于将用户处于睁眼状态下的眼睛置于摄像头前,保持第二预定时长,获取当前图像以记录睁眼状态下预定区域的灰度信息,其中,所述预定区域是以每只眼睛为中心向外截取的预设图形;
第二确定单元,用于在所述第二预定时长之后,按照第二预设时间间隔采集所述预定区域对应的图像,并对采集到的所有图像所对应的灰度信息求平均值,对所述平均值求极值点,以确定所述极值点预设范围内灰度变化率的最大值;根据所述灰度变化率的最大值判断用户当前眼睛所处的睁闭状态,其中,确定灰度变化率的变化范围超过所述灰度变化率的最大值预定倍数的极值点所对应的图像为闭眼状态,确定灰度变化率的变化范围等于或小于所述灰度变化率的最大值预定倍数的极值点所对应的图像为睁眼状态;
第二统计单元,用于根据所述预定时间段内统计的眼睛的睁闭状态确定所述眨眼次数。
6.如权利要求5所述的装置,其特征在于,
所述确定模块,还用于在用户的眼睛处于疲惫状态的情况下,发出告警音和/或提示框以提示用户眼睛需要休息。
7.一种移动终端,其特征在于,包括:权利要求5或6所述的检测人眼健康状态的装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410158930.XA CN105022981B (zh) | 2014-04-18 | 2014-04-18 | 一种检测人眼健康状态的方法、装置及移动终端 |
PCT/CN2014/084844 WO2015158087A1 (zh) | 2014-04-18 | 2014-08-20 | 一种检测人眼健康状态的方法、装置及移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410158930.XA CN105022981B (zh) | 2014-04-18 | 2014-04-18 | 一种检测人眼健康状态的方法、装置及移动终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105022981A CN105022981A (zh) | 2015-11-04 |
CN105022981B true CN105022981B (zh) | 2019-08-16 |
Family
ID=54323445
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410158930.XA Active CN105022981B (zh) | 2014-04-18 | 2014-04-18 | 一种检测人眼健康状态的方法、装置及移动终端 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105022981B (zh) |
WO (1) | WO2015158087A1 (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106897725A (zh) * | 2015-12-18 | 2017-06-27 | 西安中兴新软件有限责任公司 | 一种判断用户视力疲劳的方法及装置 |
CN105677174A (zh) * | 2015-12-30 | 2016-06-15 | 宇龙计算机通信科技(深圳)有限公司 | 一种终端阅读模式控制方法、装置及终端 |
CN106155319A (zh) * | 2016-06-28 | 2016-11-23 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106199970A (zh) * | 2016-08-30 | 2016-12-07 | 北京乐动卓越科技有限公司 | 一种头戴设备的防疲劳方法和系统 |
CN106446831B (zh) * | 2016-09-24 | 2021-06-25 | 江西欧迈斯微电子有限公司 | 一种人脸识别方法及装置 |
CN106405838A (zh) * | 2016-09-30 | 2017-02-15 | 珠海市魅族科技有限公司 | 一种视距调节方法以及装置 |
CN106570461A (zh) * | 2016-10-21 | 2017-04-19 | 哈尔滨工业大学深圳研究生院 | 基于唇动认证的视频帧图片提取方法及系统 |
CN106569928A (zh) * | 2016-11-01 | 2017-04-19 | 佛山科学技术学院 | 一种用眼保护方法及其系统 |
CN106921806A (zh) * | 2017-04-27 | 2017-07-04 | 广东艾檬电子科技有限公司 | 一种应用于移动终端的护眼提醒方法及移动终端 |
CN107115669A (zh) * | 2017-05-26 | 2017-09-01 | 合肥充盈信息科技有限公司 | 一种护眼游戏系统及其实现方法 |
CN107301008A (zh) * | 2017-05-31 | 2017-10-27 | 广东欧珀移动通信有限公司 | 提示信息的输出方法及相关产品 |
KR101889463B1 (ko) * | 2017-08-03 | 2018-08-17 | 연세대학교 산학협력단 | 사용자 단말의 화면 표시 제어 방법 및 이를 이용한 사용자 단말 |
CN108196767A (zh) * | 2017-12-28 | 2018-06-22 | 广东小天才科技有限公司 | 一种电子设备的使用控制方法及电子设备 |
CN108459806A (zh) * | 2018-03-30 | 2018-08-28 | 努比亚技术有限公司 | 终端控制方法、终端及计算机可读存储介质 |
CN109044375A (zh) * | 2018-07-30 | 2018-12-21 | 珠海格力电器股份有限公司 | 一种实时跟踪检测眼球疲劳度的控制系统及其方法 |
CN110245574A (zh) * | 2019-05-21 | 2019-09-17 | 平安科技(深圳)有限公司 | 一种用户疲劳状态识别方法、装置及终端设备 |
CN111079679A (zh) * | 2019-12-23 | 2020-04-28 | 广东小天才科技有限公司 | 一种眼睛疲惫值判断方法、装置、设备及存储介质 |
CN114765642A (zh) * | 2021-01-12 | 2022-07-19 | 广州迪克医疗器械有限公司 | 带使用者状态测试功能的手机 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101339603A (zh) * | 2008-08-07 | 2009-01-07 | 电子科技大学中山学院 | 一种从视频流中选取到了质量合格的虹膜图像的方法 |
CN101344919A (zh) * | 2008-08-05 | 2009-01-14 | 华南理工大学 | 视线跟踪方法及应用该方法的残疾人辅助系统 |
CN102109903A (zh) * | 2010-12-28 | 2011-06-29 | 中兴通讯股份有限公司 | 保护视力的方法及装置 |
CN103530595A (zh) * | 2012-07-04 | 2014-01-22 | 富士通株式会社 | 检测眼睛状态的方法和设备 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101032726B1 (ko) * | 2009-09-01 | 2011-05-06 | 엘지이노텍 주식회사 | 눈 상태 검출방법 |
JP2012139562A (ja) * | 2012-04-26 | 2012-07-26 | Hamamatsu Photonics Kk | 瞬目計測装置 |
CN103426275B (zh) * | 2013-08-01 | 2016-01-06 | 步步高教育电子有限公司 | 检测用眼疲劳度的装置、台灯及方法 |
CN103617421A (zh) * | 2013-12-17 | 2014-03-05 | 上海电机学院 | 基于综合视频特征分析的疲劳检测方法及系统 |
-
2014
- 2014-04-18 CN CN201410158930.XA patent/CN105022981B/zh active Active
- 2014-08-20 WO PCT/CN2014/084844 patent/WO2015158087A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101344919A (zh) * | 2008-08-05 | 2009-01-14 | 华南理工大学 | 视线跟踪方法及应用该方法的残疾人辅助系统 |
CN101339603A (zh) * | 2008-08-07 | 2009-01-07 | 电子科技大学中山学院 | 一种从视频流中选取到了质量合格的虹膜图像的方法 |
CN102109903A (zh) * | 2010-12-28 | 2011-06-29 | 中兴通讯股份有限公司 | 保护视力的方法及装置 |
CN103530595A (zh) * | 2012-07-04 | 2014-01-22 | 富士通株式会社 | 检测眼睛状态的方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2015158087A1 (zh) | 2015-10-22 |
CN105022981A (zh) | 2015-11-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105022981B (zh) | 一种检测人眼健康状态的方法、装置及移动终端 | |
WO2020034902A1 (zh) | 具有状态监控功能的智能桌、监控系统服务器及监控方法 | |
CN109558053A (zh) | 一种调节屏幕显示的方法、移动终端及计算机可读存储介质 | |
CN103295370B (zh) | 监视人眼离屏幕距离防近视的方法和系统 | |
CN104754216B (zh) | 一种拍照方法及装置 | |
CN110119672A (zh) | 一种嵌入式疲劳状态检测系统及方法 | |
CN105049709B (zh) | 一种大视角摄像头控制方法及用户终端 | |
CN104820495B (zh) | 一种异常微表情识别与提醒方法及装置 | |
CN108062400A (zh) | 基于智能镜的试妆方法、智能镜及存储介质 | |
CN107231529A (zh) | 图像处理方法、移动终端及存储介质 | |
CN103093124A (zh) | 一种实现限制使用电子设备的方法和一种电子设备 | |
CN105072327A (zh) | 一种防闭眼的人像拍摄处理的方法和装置 | |
CN108898079A (zh) | 一种监控方法及装置、存储介质、拍摄终端 | |
CN107918726A (zh) | 距离感应方法、设备及存储介质 | |
CN110007758A (zh) | 一种终端的控制方法及终端 | |
CN109683703A (zh) | 一种显示控制方法、终端及计算机可读存储介质 | |
CN107273071A (zh) | 电子装置、屏幕调节系统及方法 | |
CN109948435A (zh) | 坐姿提醒方法及装置 | |
CN109461124A (zh) | 一种图像处理方法及终端设备 | |
CN109493294A (zh) | 一种图像处理方法及移动终端 | |
CN105183170A (zh) | 头戴式可穿戴设备及其信息处理方法、装置 | |
CN104571881B (zh) | 一种解锁屏幕的控制方法及装置 | |
CN105095885B (zh) | 一种人眼状态的检测方法和检测装置 | |
CN110148092A (zh) | 基于机器视觉的青少年坐姿及情绪状态的分析方法 | |
CN109685007A (zh) | 用眼习惯的预警方法、用户设备、存储介质及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |