CN102819725A - 疲劳状态检测系统及方法 - Google Patents

疲劳状态检测系统及方法 Download PDF

Info

Publication number
CN102819725A
CN102819725A CN2011101509621A CN201110150962A CN102819725A CN 102819725 A CN102819725 A CN 102819725A CN 2011101509621 A CN2011101509621 A CN 2011101509621A CN 201110150962 A CN201110150962 A CN 201110150962A CN 102819725 A CN102819725 A CN 102819725A
Authority
CN
China
Prior art keywords
user
fatigue state
computer
facial
facial parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011101509621A
Other languages
English (en)
Inventor
庄严
付小军
赵衿蓉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hongfujin Precision Industry Shenzhen Co Ltd, Hon Hai Precision Industry Co Ltd filed Critical Hongfujin Precision Industry Shenzhen Co Ltd
Priority to CN2011101509621A priority Critical patent/CN102819725A/zh
Priority to TW100120679A priority patent/TW201249402A/zh
Priority to US13/457,425 priority patent/US20120314046A1/en
Publication of CN102819725A publication Critical patent/CN102819725A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G06V40/175—Static expression
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

一种疲劳状态检测方法，该方法包括如下步骤：控制摄像头拍摄使用者处于不疲劳状态时的图片，分析得出该使用者处于不疲劳状态时的脸部参数；每隔固定的时间控制摄像头拍摄使用者在使用计算机时的图片，并分析得出该使用者在使用计算机时的脸部参数；当使用者在使用计算机时的脸部参数不在使用者处于不疲劳状态时的脸部参数范围之内时，提醒使用者注意休息。另外，本发明还提供一种疲劳状态检测系统。利用本发明可以侦测使用者在使用计算机时是否疲劳，及当使用者疲劳时及时提醒使用者注意休息。

Description

疲劳状态检测系统及方法
技术领域
本发明涉及一种疲劳状态检测系统及方法。
背景技术
随着信息时代的来临，PC电脑的普及，PC的重要性越来越明显。日常生活中，长时间使用PC，容易造成使用者的疲劳，影响使用者的健康，同时也降低了使用者的工作效率。
发明内容
鉴于以上内容，有必要提供一种疲劳状态检测系统，可以侦测使用者在使用计算机时是否疲劳，及当使用者疲劳时及时提醒使用者注意休息。
鉴于以上内容，还有必要提供一种疲劳状态检测方法，可以侦测使用者在使用计算机时是否疲劳，及当使用者疲劳时及时提醒使用者注意休息。
一种疲劳状态检测系统，所述系统包括：拍摄模块，用于控制摄像头拍摄使用者处于不疲劳状态时的图片，分析得出该使用者处于不疲劳状态时的脸部参数；所述拍摄模块，还用于每隔固定的时间控制摄像头拍摄使用者使用计算机时的图片，并分析得出该使用者在使用计算机时的脸部参数；判断模块，用于判断所述使用者在使用计算机时的脸部参数是否在使用者处于不疲劳状态时的脸部参数范围之内；提醒模块，用于当使用者在使用计算机时的脸部参数不在使用者处于不疲劳状态时的脸部参数范围之内时，提醒使用者注意休息。
一种疲劳状态检测方法，该方法包括如下步骤：控制摄像头拍摄使用者处于不疲劳状态时的图片，分析得出该使用者处于不疲劳状态时的脸部参数；每隔固定的时间控制摄像头拍摄使用者在使用计算机时的图片，并分析得出该使用者在使用计算机时的脸部参数；当使用者在使用计算机时的脸部参数不在使用者处于不疲劳状态时的脸部参数范围之内时，提醒使用者注意休息。
相较于现有技术，所述的疲劳状态检测系统及疲劳状态检测方法，可以侦测使用者在使用计算机时是否疲劳，及当使用者疲劳时及时提醒使用者注意休息。
附图说明
图1是本发明疲劳状态检测系统较佳实施例的应用环境图。
图2是图1中计算机较佳实施例的结构示意图。
图3是本发明疲劳状态检测方法较佳实施例的流程图。
主要元件符号说明
  显示器   10
  摄像头   100
  计算机   20
  键盘   30
  鼠标   40
  疲劳状态检测系统   200
  拍摄模块   210
  判断模块   220
  提醒模块   230
  存储器   240
  处理器   250
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
如图1所示，是本发明疲劳状态检测系统200较佳实施例的应用环境图。该系统200运行于计算机20中。所述计算机20连接有显示器10、键盘30及鼠标40，所述的显示器10、键盘30及鼠标40用作检测使用者是否处于疲劳的输入、输出设备。其中，所述显示器10上安装有一摄像头100，该摄像头100用于拍摄使用者在使用计算机20即面对显示器10时的图片，通过拍摄的图片进行像素分析，从而得出使用者是否处于疲劳状态。所述摄像头100可以内嵌在显示器10上，也可以通过外接的方式将摄像头100固定在显示器10上。
如图2所示，是本发明计算机20较佳实施例的结构示意图。该计算机20还包括存储器240和处理器250。所述疲劳状态检测系统200包括拍摄模块210、判断模块220及提醒模块230。模块210至230的程序化代码存储于存储器240中，处理器250执行这些程序化代码，实现疲劳状态检测系统200提供的上述功能。
所述拍摄模块210用于控制摄像头100拍摄使用者处于不疲劳状态时的图片，以获取该使用者处于不疲劳状态时的脸部参数。所述使用者处于不疲劳状态时的脸部参数包括图片中眼睛区域的黑色像素及白色像素的比例范围、脸部皮肤区域(即图片中除眼睛区域之外的区域)中固定颜色像素的比例范围。
具体而言，在该使用者处于不疲劳状态时，所述拍摄模块210可控制摄像头100拍摄该使用者的多张图片，例如，摄像头100每秒钟可拍摄多帧图片，如24帧图片，因此，拍摄模块210在一定时间之内(例如，5分钟之内)就可以控制摄像头100拍摄7200张图片，对每张图片进行像素分析，找到每张图片中该使用者的眼睛区域，得到该眼睛区域中黑色像素所占的比例，及得到该眼睛区域中白色像素所占的比例，之后，对所拍摄的7200张图片进行统计分析，统计得到黑色像素所占的比例范围及白色像素所占的比例范围，一般而言，当使用者处于不疲劳状态时，黑色像素(主要指眼睛瞳孔)所占的比例范围大概在70％到75％之间，白色像素所占的比例范围大概在25％到30％之间。此外，拍摄模块210还通过像素分析找到每张图片中该使用者脸部皮肤区域，并得到该使用者处于不疲劳状态时脸部皮肤区域中固定颜色像素所占的比例，例如，对黄种人来说，脸部皮肤的颜色一般为黄色，通过像素分析可得到黄色像素在该使用者的脸部皮肤区域中所占的比例，一般而言，对7200张图片的统计分析，可得出所述黄色像素在该使用者的脸部皮肤区域中所占的比例范围为90％到95％之间。
所述拍摄模块210还用于每隔固定的时间，拍摄使用者在使用计算机20时的图片，以获取该使用者在使用计算机20时的脸部参数。具体而言，拍摄模块210每隔5分钟，通过摄像头100拍摄使用者操作计算机20而面对显示器10的图片，如7200张图片，并对该7200张图片进行像素分析，之后进行统计分析，以得到该使用者在所拍摄的各图片中的脸部参数。此处，所述使用者的脸部参数包括眼睛区域中黑色像素及白色像素的比例、脸部皮肤区域中固定颜色像素的比例。
所述判断模块220用于判断所述使用者在使用计算机20时的脸部参数是否在使用者处于不疲劳状态时的脸部参数范围之内。
所述提醒模块230用于当使用者在使用计算机20时的脸部参数不在使用者处于不疲劳状态时的脸部参数范围之内时，提醒使用者注意休息。提示的方式是通过弹出一个对话框的形式，该对话框有文字及图片说明，以提示使用者注意休息。具体而言，提醒模块230弹出一个对话框，该对话框上有一行文字，例如，“亲爱的使用者，您现在已经处于疲劳状态，请起身到外面走走，看看阳光，抖擞精神”，此外，为了愉悦使用者，本实施例中的提醒模块230还可以在该对话框中加入一个笑脸图片，让使用者看到该笑脸图片时，精神愉悦。
如图3所示，是本发明疲劳状态检测方法较佳实施例的流程图。
步骤S10，拍摄模块210控制摄像头100拍摄使用者处于不疲劳状态时的图片，并分析得出该使用者处于不疲劳状态时的脸部参数。所述使用者处于不疲劳状态时的脸部参数包括图片中眼睛区域的黑色像素及白色像素的比例范围、脸部皮肤区域(即图片中除眼睛区域之外的区域)中固定颜色像素的比例范围。
具体而言，在该使用者处于不疲劳状态时，所述拍摄模块210可控制摄像头100拍摄该使用者的多张图片，例如，摄像头100每秒钟可拍摄多帧图片，如24帧图片，因此，拍摄模块210在一定时间之内(例如，5分钟之内)就可以控制摄像头100拍摄7200张图片，对每张图片进行像素分析，找到每张图片中该使用者的眼睛区域，得到该眼睛区域中黑色像素所占的比例，及白色像素所占的比例，之后，对所拍摄的7200张图片进行统计分析，统计得到黑色像素所占的比例范围及白色像素所占的比例范围，一般而言，当使用者处于不疲劳状态时，黑色像素(主要指眼睛瞳孔)所占的比例范围大概在70％到75％之间，白色像素所占的比例范围大概在25％到30％之间。此外，拍摄模块210还通过像素分析找到每张图片中该使用者的脸部皮肤区域，并得到该使用者处于不疲劳状态时脸部皮肤区域中固定颜色像素所占的比例，例如，对黄种人来说，脸部皮肤的颜色一般为黄色，通过像素分析可得到黄色像素在该使用者的脸部皮肤区域中所占的比例，一般而言，对7200张图片的统计分析，可得出所述黄色像素在该使用者的脸部皮肤区域中所占的比例范围为90％到95％之间。
步骤S20，拍摄模块210每隔固定的时间，拍摄使用者在使用计算机20时的图片，并分析得出该使用者在使用计算机20时的脸部参数。具体而言，拍摄模块210每隔5分钟，通过摄像头100拍摄使用者操作计算机20而面对显示器10的图片，如7200张图片，并对该7200张图片进行像素分析，之后进行统计分析，以得到该使用者在所拍摄的各图片中的脸部参数。所述使用者在使用计算机20时的脸部参数包括眼睛区域中黑色像素及白色像素的比例、脸部皮肤区域中固定颜色像素的比例。
步骤S30，判断模块220判断所述使用者在使用计算机20时的脸部参数是否在使用者处于不疲劳状态时的脸部参数范围之内。具体而言，当使用者在使用计算机20时黑色像素于眼睛区域中所占的比例在70％到75％之间，使用者在使用计算机20时白色像素于眼睛区域中所占的比例在25％到30％之间，且使用者在使用计算机20时黄色像素于脸部皮肤区域中所占的比例在90％到95％之间时，流程返回步骤S20。
当使用者在使用计算机20时黑色像素于眼睛区域中所占的比例不在70％到75％之间，或使用者在使用计算机20时白色像素于眼睛区域中所占的比例不在25％到30％之间，或使用者在使用计算机20时黄色像素于脸部皮肤区域中所占的比例不在90％到95％之间时，流程进入步骤S40。
步骤S40，提醒模块230提醒使用者注意休息。提示的方式是通过弹出一个对话框的形式，该对话框有文字及图片说明，以提示使用者注意休息。具体而言，提醒模块230弹出一个对话框，该对话框上有一行文字，例如，“亲爱的使用者，您现在已经处于疲劳状态，请起身到外面走走，看看阳光，抖擞精神”，此外，为了愉悦使用者，本实施例中的提醒模块230还可以在该对话框中加入一个笑脸图片，让使用者看到该笑脸图片时，精神愉悦。
最后所应说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管参照以上较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或等同替换，而不脱离本发明技术方案的精神和范围。

Claims (8)

1.一种疲劳状态检测系统，其特征在于，所述系统包括：
拍摄模块，用于控制摄像头拍摄使用者处于不疲劳状态时的图片，分析得出该使用者处于不疲劳状态时的脸部参数；
所述拍摄模块，还用于每隔固定的时间控制摄像头拍摄使用者使用计算机时的图片，并分析得出该使用者在使用计算机时的脸部参数；
判断模块，用于判断所述使用者在使用计算机时的脸部参数是否在使用者处于不疲劳状态时的脸部参数范围之内；及
提醒模块，用于当使用者在使用计算机时的脸部参数不在使用者处于不疲劳状态时的脸部参数范围之内时，提醒使用者注意休息。
2.如权利要求1所述的疲劳状态检测系统，其特征在于，所述使用者处于不疲劳状态时的脸部参数及在使用计算机时的脸部参数都是通过像素分析及统计分析得到。
3.如权利要求1所述的疲劳状态检测系统，其特征在于，所述使用者处于不疲劳状态时的脸部参数及所述使用者在使用计算机时的脸部参数都包括眼睛区域中黑色像素及白色像素所占的比例、脸部皮肤区域中固定颜色像素所占的比例。
4.如权利要求3所述的疲劳状态检测系统，其特征在于，所述使用者处于不疲劳状态时，眼睛区域中黑色像素的比例范围在70％到75％之间，眼睛区域中白色像素的比例范围在25％到30％之间，脸部皮肤区域中固定颜色像素的比例范围在90％到95％之间。
5.一种疲劳状态检测方法，特征在于，该方法包括如下步骤：
控制摄像头拍摄使用者处于不疲劳状态时的图片，分析得出该使用者处于不疲劳状态时的脸部参数；
每隔固定的时间控制摄像头拍摄使用者在使用计算机时的图片，并分析得出该使用者在使用计算机时的脸部参数；及
当使用者在使用计算机时的脸部参数不在使用者处于不疲劳状态时的脸部参数范围之内时，提醒使用者注意休息。
6.如权利要求5所述的疲劳状态检测方法，其特征在于，所述使用者处于不疲劳状态时的脸部参数及在使用计算机时的脸部参数都是通过像素分析及统计分析得到。
7.如权利要求5所述的疲劳状态检测方法，其特征在于，所述使用者处于不疲劳状态时的脸部参数及所述使用者在使用计算机时的脸部参数都包括眼睛区域中黑色像素及白色像素所占的比例、脸部皮肤区域中固定颜色像素所占的比例。
8.如权利要求7所述的疲劳状态检测方法，其特征在于，所述使用者处于不疲劳状态时，眼睛区域中黑色像素的比例范围在70％到75％之间，眼睛区域中白色像素的比例范围在25％到30％之间，脸部皮肤区域中固定颜色像素的比例范围在90％到95％之间。
CN2011101509621A 2011-06-07 2011-06-07 疲劳状态检测系统及方法 Pending CN102819725A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN2011101509621A CN102819725A (zh) 2011-06-07 2011-06-07 疲劳状态检测系统及方法
TW100120679A TW201249402A (en) 2011-06-07 2011-06-14 System and method for monitoring a tiresome state of user
US13/457,425 US20120314046A1 (en) 2011-06-07 2012-04-26 Tiredness state detecting system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011101509621A CN102819725A (zh) 2011-06-07 2011-06-07 疲劳状态检测系统及方法

Publications (1)

Publication Number Publication Date
CN102819725A true CN102819725A (zh) 2012-12-12

Family

ID=47292852

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011101509621A Pending CN102819725A (zh) 2011-06-07 2011-06-07 疲劳状态检测系统及方法

Country Status (3)

Country Link
US (1) US20120314046A1 (zh)
CN (1) CN102819725A (zh)
TW (1) TW201249402A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102988051A (zh) * 2012-12-13 2013-03-27 中国人民解放军第四军医大学 用于计算机操作者健康的监测装置及方法
CN105573494A (zh) * 2015-12-11 2016-05-11 李金秀 一种用于监视坐姿的系统
WO2017101226A1 (zh) * 2015-12-18 2017-06-22 中兴通讯股份有限公司 一种判断用户视力疲劳的方法及装置
CN108537138A (zh) * 2018-03-20 2018-09-14 浙江工业大学 一种基于机器视觉的眼睛闭合度计算方法
CN108670260A (zh) * 2018-03-09 2018-10-19 广东小天才科技有限公司 一种基于移动终端的用户疲劳检测方法及移动终端
CN109712103A (zh) * 2018-11-26 2019-05-03 深圳艺达文化传媒有限公司 自拍视频雷神图片的眼睛处理方法及相关产品

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI601031B (zh) 2013-05-13 2017-10-01 國立成功大學 適用於電子裝置之提醒閱讀疲勞方法及其系統
CN104361332B (zh) * 2014-12-08 2017-06-16 重庆市科学技术研究院 一种用于疲劳驾驶检测的人脸眼睛区域定位方法
JP7083809B2 (ja) 2016-08-02 2022-06-13 アトラス５ディー， インコーポレイテッド プライバシーの保護を伴う人物の識別しおよび／または痛み、疲労、気分、および意図の識別および定量化のためのシステムおよび方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002032212A (ja) * 2000-07-14 2002-01-31 Toshiba Corp コンピュータシステムおよびヘッドセット型表示装置
US7202792B2 (en) * 2002-11-11 2007-04-10 Delphi Technologies, Inc. Drowsiness detection system and method
US7301465B2 (en) * 2005-03-24 2007-11-27 Tengshe Vishwas V Drowsy driving alarm system
JP4508257B2 (ja) * 2008-03-19 2010-07-21 ソニー株式会社 構図判定装置、構図判定方法、プログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102988051A (zh) * 2012-12-13 2013-03-27 中国人民解放军第四军医大学 用于计算机操作者健康的监测装置及方法
CN105573494A (zh) * 2015-12-11 2016-05-11 李金秀 一种用于监视坐姿的系统
WO2017101226A1 (zh) * 2015-12-18 2017-06-22 中兴通讯股份有限公司 一种判断用户视力疲劳的方法及装置
CN108670260A (zh) * 2018-03-09 2018-10-19 广东小天才科技有限公司 一种基于移动终端的用户疲劳检测方法及移动终端
CN108537138A (zh) * 2018-03-20 2018-09-14 浙江工业大学 一种基于机器视觉的眼睛闭合度计算方法
CN109712103A (zh) * 2018-11-26 2019-05-03 深圳艺达文化传媒有限公司 自拍视频雷神图片的眼睛处理方法及相关产品

Also Published As

Publication number Publication date
TW201249402A (en) 2012-12-16
US20120314046A1 (en) 2012-12-13

Similar Documents

Publication Publication Date Title
CN102819725A (zh) 疲劳状态检测系统及方法
CN104951432B (zh) 一种对信息进行处理的方法及装置
US10013048B2 (en) Reconfigurable event driven hardware using reservoir computing for monitoring an electronic sensor and waking a processor
US20160062456A1 (en) Method and apparatus for live user recognition
EP2386984A3 (en) Method and apparatus for inputting characters traced on top of each other
US20130293467A1 (en) User input processing with eye tracking
CN103309432B (zh) 具有脉冲操作模式的图像传感器
CN110070034A (zh) 模型训练方法、节识别方法、装置、设备及介质
US20160210839A1 (en) Multimodal monitoring systems for physical activity
US11610388B2 (en) Method and apparatus for detecting wearing of safety helmet, device and storage medium
CN104699237A (zh) 辨识使用者操作的方法及相关互动装置与计算机可读介质
US20120328167A1 (en) Merging face clusters
CN111275110B (zh) 图像描述的方法、装置、电子设备及存储介质
US20180199876A1 (en) User Health Monitoring Method, Monitoring Device, and Monitoring Terminal
US20210224522A1 (en) Electronic device and control method therefor
CN112270303A (zh) 图像识别方法、装置以及电子设备
CN106815264A (zh) 一种信息处理方法及系统
CN104850819B (zh) 信息处理方法及电子设备
CN112580543B (zh) 行为识别方法、系统及装置
CN101140577A (zh) 字汇查询系统及方法
US9189075B2 (en) Portable computer having pointing functions and pointing system
US12086325B2 (en) Wearable device and screen wake-up method thereof, and readable storage medium
US11620806B2 (en) Optical character detection using a low-power sensor
CN114241420A (zh) 一种动火作业检测方法及装置
CN103970251A (zh) 电子装置及其节能方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20121212