CN109044375A - 一种实时跟踪检测眼球疲劳度的控制系统及其方法 - Google Patents

一种实时跟踪检测眼球疲劳度的控制系统及其方法 Download PDF

Info

Publication number
CN109044375A
CN109044375A CN201810851941.4A CN201810851941A CN109044375A CN 109044375 A CN109044375 A CN 109044375A CN 201810851941 A CN201810851941 A CN 201810851941A CN 109044375 A CN109044375 A CN 109044375A
Authority
CN
China
Prior art keywords
real
facial characteristics
user
fatigue strength
face feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810851941.4A
Other languages
English (en)
Inventor
许超
李瑞敏
冯科
郑亚东
谢明
龙世才
叶启璐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201810851941.4A priority Critical patent/CN109044375A/zh
Publication of CN109044375A publication Critical patent/CN109044375A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103—Detecting eye twinkling

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Ophthalmology & Optometry (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明属于视觉疲劳度检测技术领域，具体涉及一种实时跟踪检测眼球疲劳度的控制系统及其方法，所述控制系统包括获取模块、判断模块、输出模块，通过比较获取模块获得的面部特征信息，判断眼睛是否处于疲劳状态，当判定眼睛处于疲劳状态时，系统会自动发出消息通知使用者或者系统设定的第三人，由第三人强制用户休息，防止使用者过度沉迷，避免长期不健康的使用习惯导致眼疾。

Description

一种实时跟踪检测眼球疲劳度的控制系统及其方法
技术领域
本发明属于视觉疲劳度检测技术领域，具体涉及一种实时跟踪检测眼球疲劳度的控制系统及其方法。
背景技术
随着智能手机的普及，人们的生活越来越便捷，同时也越来越依赖手机。随着人们每天使用手机玩游戏和看视频时间越来越多，很多人的眼睛越来越疲劳，类似的使用习惯将加大发生眼部疾病的风险。
如专利号CN201310544179.2一种检测用户疲劳状态的方法，该方法包括：通过人脸检测获取用户的面部特征；从所获取的面部特征中提取用户的眼睛的位置信息；实时记录所述用户的眼睛的闭合次数以及闭合时间；每隔预定时间对所记录的用户的眼睛的闭合次数以及闭合时间进行计算，获取单位时间内的闭合次数和闭合时间；当单位时间内的闭合次数或闭合时间大于或等于预设的阀值时，向所述用户发送报警信息。应用上述的方法，从而可以有效地检测用户的疲劳状态，提高用户的体验度，但是所述检测用户疲劳状态的方式仅通过单一的眼部信息作为判断依据，数据的可靠性有待斟酌，且人的疲劳度除了眼睛的反应外，还会伴随着多种其他多种面部表情，如打哈欠。
发明内容
为了解决检测眼睛疲劳度仅通过单一的眼部信息作为判断依据，无法对多种面部特征信息进行检测，且无法通过第三人限制使用者等问题，本发明提供一种实时跟踪检测眼球疲劳度的控制系统及其方法。
为实现上述目的，本发明所采用的技术方案是：一种实时跟踪检测眼球疲劳度的控制系统，包括获取模块、判断模块、输出单元；
所述获取模块，用于获取面部特征信息；
所述判断模块，将获取的面部特征信息进行比较，判断眼睛是否处于疲劳状态；
所述输出模块，用于当判断眼睛处于疲劳状态时，输出护眼信息。
进一步的，获取模块包括面部捕捉单元，所述面部捕捉单元用于捕捉使用者的面部特征。
进一步的，面部特征包括眼球的充血量、眨眼次数、揉眼次数和打哈次数中的至少两种。
进一步的，获取模块还包括统计单元，所述统计单元用于统计设定时间内符合条件的面部特征并生成面部特征信息。
进一步的，获取模块还包括比对单元，所述比对单元用于将捕捉的面部特征与标准图像进行比对并生成面部特征信息。
一种实时跟踪检测眼球疲劳度的控制方法，所述方法包括以下步骤：
S1：获取使用者的面部特征信息，面部特征信息包括超过两种面部特征的数据信息；
S2：根据获得面部特征信息判断眼睛是否处于疲劳状态；
S3：当判定眼睛处于疲劳状态时，输出护眼信息。
进一步的，步骤S1中所述面部特征为眨眼次数、揉眼次数或打哈次数中的一种或多种时，面部捕捉单元捕捉到使用者面部特征时，将数据反馈至统计单元，统计单元统计设定时间内的面部特征出现的次数并生成面部特征信息。
进一步的，步骤S1中的面部特征为眼球充血量时，面部捕捉单元捕捉使用者眼部的面部特征，比对单元将捕捉的面部特征与标准图像进行重合比对并生成面部特征信息。
进一步的，步骤S2中获得的多个面部特征信息中超过两个满足判断条件时，判断模块判断眼睛处于疲劳状态。
进一步的，步骤S3还包括：当输出单元输出信息提醒使用者后，若使用者继续使用，则输出单元输出信息至第三人，所述第三人决定通知使用者休息。
本发明提供一种实时跟踪检测眼球疲劳度的控制系统及其方法，所述控制系统包括获取模块、判断模块、输出模块，通过比较获取模块获得的面部特征信息，判断眼睛是否处于疲劳状态，当判定眼睛处于疲劳状态时，系统会自动发出消息通知使用者或者系统设定的第三人，由第三人强制使用者休息，防止使用者过度沉迷，避免长期不健康的使用习惯导致眼疾。
附图说明
图1为实时跟踪检测眼球疲劳度的控制系统；
图2为实时跟踪检测眼球疲劳度的控制方法流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明的一部分实施例，而不是全部的实施例。
一种实时跟踪检测眼球疲劳度的控制系统为手机控制系统，下面以手机控制系统为例进行说明。
如图1所示，一种实时跟踪检测眼球疲劳度的控制系统1，包括获取模块2、判断模块3、输出模块4；
获取模块2包括面部捕捉单元、统计单元、比对单元，所述面部捕捉单元用于捕捉使用者的面部特征，所述面部特征包括眼球的充血量、眨眼次数、揉眼次数和打哈次数；所述统计单元用于统计设定时间内符合条件的面部特征并生成面部特征信息；所述比对单元用于将捕捉的面部特征与标准图像进行比对并生成面部特征信息；
所述判断模块3，将获取的面部特征信息进行比较，判断眼睛是否处于疲劳状态；
所述输出模块4，用于当判断眼睛处于疲劳状态时，输出护眼信息。
如图2所示，一种实时跟踪检测眼球疲劳度的控制方法，所述方法包括以下步骤：
S1：获取使用者的面部特征信息，面部特征信息包括眼球充血量、眨眼次数、揉眼次数和打哈欠中的数据信息；
当面部特征为眨眼次数、揉眼次、打哈次数时，面部捕捉单元捕捉到使用者面部特征时，将数据反馈至统计单元，统计单元统计设定时间内的面部特征出现的次数并生成面部特征信息；
如：当半小时内眨眼次数大于预设阀值A时，则达到疲劳程度，获得数值1；反之，则获得数值0；
当半小时内揉眼次数大于预设阀值B时，则达到疲劳程度，获得数值1；反之，则获得数值0；
当半小时内打哈次数大于预设阀值C时，则达到疲劳程度，获得数值1，反之，则获得数值0；
当面部特征为眼球充血量时，面部捕捉单元捕捉使用者眼部的面部特征，比对单元将捕捉的面部特征与标准图像进行重合比对并生成面部特征信息，标准图像为使用者平时拍照的图像中；
如：当使用者使用手机时，摄像头会在每隔3分钟抓拍使用者眼部的面部图像信息，当非重合部分(即眼球的充血面积)达到预设值20％时，判定为眼部冲血量大于预定阀值D，达到疲劳程度，获得数值1；反之，则获得数值0。
S2：当获得的四个面部特征信息(眨眼次数、揉眼次、打哈次数、眼球充血量)中超过两个满足判断条件，即获得数值大于2时，判断模块判断眼睛处于疲劳状态；
S3：当判定眼睛处于疲劳状态时，输出护眼信息，即系统发出消息通知使用者，请休息；
当输出单元输出信息提醒使用者后，系统会继续监测手机，若使用者离开手机进行休息，则系统回到初始时监测面部特征；若使用者继续使用手机30min，则输出单元输出信息至系统设定的第三人，所述第三人强制使用者休息，防止使用者过度沉迷，避免长期不健康的使用习惯导致眼疾。
上述仅为本发明的优选具体实施方式，但本发明的设计构思并不局限于此，凡利用此构思对本发明进行非实质性的改动，均应属于侵犯本发明保护范围的行为。

Claims (10)

1.一种实时跟踪检测眼球疲劳度的控制系统，其特征在于：包括获取模块、判断模块、输出单元；
所述获取模块，用于获取面部特征信息；
所述判断模块，将获取的面部特征信息进行比较，判断眼睛是否处于疲劳状态；
所述输出模块，用于当判断眼睛处于疲劳状态时，输出护眼信息。
2.根据权利要求1所述的实时跟踪检测眼球疲劳度的控制系统，其特征在于：所述获取模块包括面部捕捉单元，所述面部捕捉单元用于捕捉使用者的面部特征。
3.根据权利要求2所述的实时跟踪检测眼球疲劳度的控制系统，其特征在于：所述面部特征包括眼球的充血量、眨眼次数、揉眼次数和打哈次数中的至少两种。
4.根据权利要求2所述的实时跟踪检测眼球疲劳度的控制系统，其特征在于：所述获取模块还包括统计单元，所述统计单元用于统计设定时间内符合条件的面部特征并生成面部特征信息。
5.根据权利要求2所述的实时跟踪检测眼球疲劳度的控制系统，其特征在于：所述获取模块还包括比对单元，所述比对单元用于将捕捉的面部特征与标准图像进行比对并生成面部特征信息。
6.一种实时跟踪检测眼球疲劳度的控制方法，其特征在于：所述方法包括以下步骤：
S1：获取使用者的面部特征信息，面部特征信息包括超过两种面部特征的数据信息；
S2：根据获得面部特征信息判断眼睛是否处于疲劳状态；
S3：当判定眼睛处于疲劳状态时，输出护眼信息。
7.根据权利要求6所述的实时跟踪检测眼球疲劳度的控制方法，其特征在于：所述步骤S1中所述面部特征为眨眼次数、揉眼次数或打哈次数中的一种或多种时，面部捕捉单元捕捉到使用者面部特征时，将数据反馈至统计单元，统计单元统计设定时间内的面部特征出现的次数并生成面部特征信息。
8.根据权利要求6所述的实时跟踪检测眼球疲劳度的控制方法，其特征在于：所述步骤S1中的面部特征为眼球充血量时，面部捕捉单元捕捉使用者眼部的面部特征，比对单元将捕捉的面部特征与标准图像进行重合比对并生成面部特征信息。
9.根据权利要求6所述的实时跟踪检测眼球疲劳度的控制方法，其特征在于：所述步骤S2中获得的多个面部特征信息中超过两个满足判断条件时，判断模块判断眼睛处于疲劳状态。
10.根据权利要求6所述的实时跟踪检测眼球疲劳度的控制方法，其特征在于：所述步骤S3还包括：当输出单元输出信息提醒使用者后，若使用者继续使用，则输出单元输出信息至第三人，所述第三人决定通知使用者休息。
CN201810851941.4A 2018-07-30 2018-07-30 一种实时跟踪检测眼球疲劳度的控制系统及其方法 Pending CN109044375A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810851941.4A CN109044375A (zh) 2018-07-30 2018-07-30 一种实时跟踪检测眼球疲劳度的控制系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810851941.4A CN109044375A (zh) 2018-07-30 2018-07-30 一种实时跟踪检测眼球疲劳度的控制系统及其方法

Publications (1)

Publication Number Publication Date
CN109044375A true CN109044375A (zh) 2018-12-21

Family

ID=64831494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810851941.4A Pending CN109044375A (zh) 2018-07-30 2018-07-30 一种实时跟踪检测眼球疲劳度的控制系统及其方法

Country Status (1)

Country Link
CN (1) CN109044375A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111026262A (zh) * 2019-10-17 2020-04-17 珠海格力电器股份有限公司 魔方控制器的控制方法、魔方控制器、设备和存储介质
CN113486802A (zh) * 2021-07-07 2021-10-08 北京百度网讯科技有限公司 用于提供护眼模式的方法、装置、存储介质及移动设备
CN115886816A (zh) * 2022-11-15 2023-04-04 立讯精密科技(南京)有限公司 基于vr/ar设备的疲劳检测方法及vr/ar设备
WO2023224803A1 (en) * 2022-05-18 2023-11-23 Apple Inc. Eye characteristic determination

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102028577A (zh) * 2010-10-27 2011-04-27 冠捷显示科技（厦门）有限公司 眼睛视力智能保护系统
CN103426275A (zh) * 2013-08-01 2013-12-04 步步高教育电子有限公司 检测用眼疲劳度的装置、台灯及方法
CN105022981A (zh) * 2014-04-18 2015-11-04 中兴通讯股份有限公司 一种检测人眼健康状态的方法、装置及移动终端
CN105468147A (zh) * 2015-11-19 2016-04-06 宁波力芯科信息科技有限公司 一种预防近视的智能设备、系统及方法
CN105718033A (zh) * 2014-12-04 2016-06-29 富泰华工业（深圳）有限公司 疲劳检测系统及方法
CN106406533A (zh) * 2016-09-26 2017-02-15 珠海格力电器股份有限公司 电子设备的护眼方法、装置及电子设备
CN106445092A (zh) * 2015-08-13 2017-02-22 中兴通讯股份有限公司 终端保护视力的处理方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102028577A (zh) * 2010-10-27 2011-04-27 冠捷显示科技（厦门）有限公司 眼睛视力智能保护系统
CN103426275A (zh) * 2013-08-01 2013-12-04 步步高教育电子有限公司 检测用眼疲劳度的装置、台灯及方法
CN105022981A (zh) * 2014-04-18 2015-11-04 中兴通讯股份有限公司 一种检测人眼健康状态的方法、装置及移动终端
CN105718033A (zh) * 2014-12-04 2016-06-29 富泰华工业（深圳）有限公司 疲劳检测系统及方法
CN106445092A (zh) * 2015-08-13 2017-02-22 中兴通讯股份有限公司 终端保护视力的处理方法及装置
CN105468147A (zh) * 2015-11-19 2016-04-06 宁波力芯科信息科技有限公司 一种预防近视的智能设备、系统及方法
CN106406533A (zh) * 2016-09-26 2017-02-15 珠海格力电器股份有限公司 电子设备的护眼方法、装置及电子设备

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111026262A (zh) * 2019-10-17 2020-04-17 珠海格力电器股份有限公司 魔方控制器的控制方法、魔方控制器、设备和存储介质
CN113486802A (zh) * 2021-07-07 2021-10-08 北京百度网讯科技有限公司 用于提供护眼模式的方法、装置、存储介质及移动设备
WO2023279777A1 (zh) * 2021-07-07 2023-01-12 北京百度网讯科技有限公司 用于提供护眼模式的方法、装置、存储介质及移动设备
WO2023224803A1 (en) * 2022-05-18 2023-11-23 Apple Inc. Eye characteristic determination
CN115886816A (zh) * 2022-11-15 2023-04-04 立讯精密科技(南京)有限公司 基于vr/ar设备的疲劳检测方法及vr/ar设备
CN115886816B (zh) * 2022-11-15 2024-05-10 立讯精密科技(南京)有限公司 基于vr/ar设备的疲劳检测方法及vr/ar设备

Similar Documents

Publication Publication Date Title
CN109044375A (zh) 一种实时跟踪检测眼球疲劳度的控制系统及其方法
Soukupova et al. Eye blink detection using facial landmarks
CN105022981B (zh) 一种检测人眼健康状态的方法、装置及移动终端
CN105184246B (zh) 活体检测方法和活体检测系统
JP2023171650A (ja) プライバシーの保護を伴う人物の識別しおよび／または痛み、疲労、気分、および意図の識別および定量化のためのシステムおよび方法
CN105559802B (zh) 基于注意和情感信息融合的抑郁诊断系统及数据处理方法
Zhou et al. Tackling mental health by integrating unobtrusive multimodal sensing
US7319780B2 (en) Imaging method and system for health monitoring and personal security
EP2573696B1 (en) Apparatus and method for assisting user to maintain correct posture
Kurylyak et al. Detection of the eye blinks for human's fatigue monitoring
CN113297938B (zh) 坐姿监控的方法、装置、电子设备及存储介质
CN110263691A (zh) 基于安卓系统的头部运动检测方法
CN107273071A (zh) 电子装置、屏幕调节系统及方法
JPH10207615A (ja) ネットワークシステム
CN106814838A (zh) 终端自动休眠的方法和装置
WO2023071190A1 (zh) 一种活体检测方法、装置、计算机设备及存储介质
Healy et al. Detecting demeanor for healthcare with machine learning
CN107066089A (zh) 一种基于计算机视觉技术的手机用眼姿势保护方法
US11935140B2 (en) Initiating communication between first and second users
CN117373092A (zh) 基于分布式摄像的考试监控方法、设备及存储介质
JP2016146978A (ja) 眠気検知装置
CN110148234A (zh) 校园刷脸接送交互方法、存储介质及系统
CN110633012A (zh) 一种防沉迷电脑
JP6604266B2 (ja) 眠気検知装置
US20220370009A1 (en) Stress estimation device, stress estimation method, and recording media

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181221