CN113631211A - 专注度测量装置、专注度测量方法以及程序 - Google Patents
专注度测量装置、专注度测量方法以及程序 Download PDFInfo
- Publication number
- CN113631211A CN113631211A CN202080024486.6A CN202080024486A CN113631211A CN 113631211 A CN113631211 A CN 113631211A CN 202080024486 A CN202080024486 A CN 202080024486A CN 113631211 A CN113631211 A CN 113631211A
- Authority
- CN
- China
- Prior art keywords
- concentration
- degree
- person
- user
- drowsiness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 34
- 206010041349 Somnolence Diseases 0.000 claims abstract description 215
- 238000012937 correction Methods 0.000 claims abstract description 116
- 239000012141 concentrate Substances 0.000 claims abstract description 28
- 238000005259 measurement Methods 0.000 claims description 47
- 238000003384 imaging method Methods 0.000 claims description 42
- 238000000691 measurement method Methods 0.000 claims description 15
- 230000002441 reversible effect Effects 0.000 claims description 8
- 208000032140 Sleepiness Diseases 0.000 claims description 6
- 230000037321 sleepiness Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 description 18
- 230000004397 blinking Effects 0.000 description 17
- 238000004891 communication Methods 0.000 description 17
- 230000007613 environmental effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 13
- 230000007423 decrease Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 9
- 230000010365 information processing Effects 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 7
- 210000000744 eyelid Anatomy 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000001052 transient effect Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000037007 arousal Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002040 relaxant effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/168—Evaluating attention deficit, hyperactivity
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M21/02—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
- A61B2560/02—Operational features
- A61B2560/0242—Operational features adapted to measure environmental factors, e.g. temperature, pollution
- A61B2560/0247—Operational features adapted to measure environmental factors, e.g. temperature, pollution for compensation or correction of the measured physiological value
- A61B2560/0252—Operational features adapted to measure environmental factors, e.g. temperature, pollution for compensation or correction of the measured physiological value using ambient temperature
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0204—Acoustic sensors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/029—Humidity sensors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1103—Detecting eye twinkling
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
- A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0066—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus with heating or cooling
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0083—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus especially for waking up
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Psychology (AREA)
- Theoretical Computer Science (AREA)
- Developmental Disabilities (AREA)
- Multimedia (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Medical Informatics (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Anesthesiology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Educational Technology (AREA)
- Acoustics & Sound (AREA)
- Child & Adolescent Psychology (AREA)
- Hematology (AREA)
- Human Computer Interaction (AREA)
- Hospice & Palliative Care (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Ophthalmology & Optometry (AREA)
- Pain & Pain Management (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Traffic Control Systems (AREA)
Abstract
专注度测量装置(100)具备:专注度获取部(110),其获取用户的专注度;睡意程度获取部(120),其获取该用户的睡意程度;校正部(130),其基于睡意程度来对该用户的专注度进行校正;输出部(140),其输出表示由校正部(130)进行校正后的该用户的专注度的校正后专注度;判定部(170),其基于该睡意程度和该用户的校正后专注度,来判定该用户的校正后专注度的原因;以及控制部(180),其基于判定部(170)的判定结果,来控制用于促使该用户清醒或专注的电子设备(230)。
Description
技术领域
本公开涉及一种专注度测量装置、专注度测量方法以及程序。
背景技术
以往,已知一种计算人的专注度的信息处理装置。例如,在专利文献1所记载的信息处理装置中,基于人的面部的朝向的变化来计算该人的专注度。
现有技术文献
专利文献
专利文献1:日本特开2014-120137号公报
发明内容
发明要解决的问题
在上述以往的信息处理装置中,越是专注地观看1个对象物,则计算出的专注度为越高的值。然而,并不是一直观看1个对象物的人的专注度就必定高。例如,在进行学习或者办公作业等智力作业的人的睡意程度高的状态的情况下,尽管不能说是正在专注的状况,但是面部的朝向的变化等却少,因此在上述以往的信息处理装置中被计算为高专注度。这样,在上述以往的信息处理装置中,存在计算出的专注度的精度低这一问题。
因此,本公开提供一种能够高精度地测量专注度的专注度测量装置等。
用于解决问题的方案
为了解决上述问题,本公开的一个方式所涉及的专注度测量装置具备:专注度获取部,其获取人的专注度;睡意程度获取部,其获取所述人的睡意程度;校正部,其基于所述睡意程度来对所述人的专注度进行校正;输出部,其输出表示由所述校正部进行校正后的所述人的专注度的校正后专注度;判定部,其基于所述人的睡意程度和所述人的校正后专注度,来判定所述人的校正后专注度的原因;以及控制部,其基于所述判定部的判定结果,来控制用于促使所述人清醒或专注的电子设备。
另外,本公开的一个方式所涉及的专注度测量方法包括以下步骤:专注度获取步骤,获取人的专注度;睡意程度获取步骤,获取所述人的睡意程度;校正步骤,基于所述睡意程度来对所述专注度进行校正;输出步骤,输出表示通过所述校正步骤进行校正后的所述专注度的校正后专注度;判定步骤,基于所述人的睡意程度和所述人的校正后专注度,来判定所述人的校正后专注度的原因;以及控制步骤,基于所述判定部的判定结果,来控制用于促使所述人清醒或专注的电子设备。
另外,本公开的一个方式能够实现为用于使计算机执行上述专注度测量方法的程序。或者,还能够实现为保存有该程序的计算机可读取的记录介质。
发明的效果
根据本公开的一个方式所涉及的专注度测量装置等,能够高精度地测量专注度。
附图说明
图1是示出作为实施方式1所涉及的专注度的测量对象的用户的状况的示意图。
图2A是示意性地示出用户的视线的图。
图2B是示意性地示出用户的视线的图。
图2C是示意性地示出用户的视线的图。
图3是示出实施方式1所涉及的专注度测量装置的结构的框图。
图4是示出实施方式1所涉及的专注度测量装置所执行的处理的流程图。
图5是示出实施方式2所涉及的专注度测量装置的结构的框图。
图6是示出实施方式2所涉及的专注度测量装置所执行的处理的流程图。
具体实施方式
(本公开的概要)
为了解决上述问题,本公开的一个方式所涉及的专注度测量装置具备:专注度获取部,其获取人的专注度;睡意程度获取部,其获取所述人的睡意程度;校正部,其基于所述睡意程度来对所述人的专注度进行校正;以及输出部,其输出表示由所述校正部进行校正后的所述人的专注度的校正后专注度。
根据这种结构,专注度测量装置能够基于人的睡意程度来对该人的专注度进行校正。因此,能够抑制以下情况:尽管处于人的睡意程度高且该人的专注度低的状态,却将该人的专注度计算得高。这样,根据本公开所涉及的专注度测量装置,能够高精度地测量专注度。
另外,例如,所述人的睡意程度越高,则所述校正部将所述人的专注度校正得越低。
所谓的处于人的睡意程度高的状态,能够认为是处于该人的专注度低的状态。因此,通过人的睡意程度越高则将该人的专注度校正得越低,能够高精度地测量该人的专注度。
另外,例如,所述校正部基于所述人的睡意程度来进行校正,使得所述人的校正后专注度示出比所述人的专注度低的专注度。
能够认为,人的睡意程度越提高,则该人的专注度越降低。因此,通过基于人的睡意程度来对该人的专注度以降低的方式进行校正,能够简便且高精度地测量该人的专注度。
另外,例如,所述专注度测量装置还具备控制部,该控制部基于所述人的睡意程度和所述人的校正后专注度,来控制用于促使所述人清醒或专注的电子设备。
根据这种结构,能够高精度地测量人的专注度和该人的睡意程度,因此控制部能够在适当的时机促使人清醒、或者促使人专注。
另外,例如,所述专注度测量装置还具备判定部,该判定部判定所述人的校正后专注度是否示出比第一阈值低的专注度,在判定为示出比所述第一阈值低的专注度的情况下,基于所述人的睡意程度和所述人的校正后专注度,来判定使所述人的校正后专注度变为比所述第一阈值低的专注度的原因,所述控制部基于所述判定部的判定结果来控制所述电子设备。
根据这种结构,能够计算在使人的专注度降低的原因中该人的睡意程度参与了多少。因此,控制部能够在更适当的时机促使人清醒、或者促使人专注。
另外,例如,在所述判定部判定为在所述原因中睡意的原因所占的比例比第二阈值高的情况下,所述控制部通过控制所述电子设备来促使所述人清醒,在所述判定部未判定为所述比例比所述第二阈值高的情况下,所述控制部通过控制所述电子设备来促使所述人专注。
根据这种结构,由于能够通过判定部适当地判定是应促使人清醒还是应促使人专注,因此控制部能够更适当地促使人清醒、或者促使人专注。
另外,例如,所述控制部在促使所述人清醒的情况下与在促使所述人专注的情况下,对所述电子设备进行相反的控制。
例如,能够通过提高环境温度来促使人专注。另一方面,能够通过降低环境温度来促使人清醒。另外,例如,能够通过提高环境噪音来促使人清醒。另一方面,能够通过降低环境噪音来促使人专注。这样,能够利用空调设备、音响设备等1个电子设备通过变更控制方式,来促使人清醒和促使人专注。因此,通过由控制部在促使人清醒的情况下与在促使人专注的情况下对电子设备进行相反的控制,能够通过简便的结构来促使人清醒、或者促使人专注。
另外,例如,所述校正部基于表示所述人的环境状态的环境信息,来变更对所述人的专注度进行校正的方法。
例如,具有在环境温度比较高的情况下人的专注度和睡意程度容易变高之类的、人的专注度和睡意程度根据该人的环境条件而变化的倾向。因此,通过基于人的环境状态对该人的专注度进行校正,本公开所涉及的专注度测量装置能够更高精度地测量专注度。
另外,例如,所述专注度获取部基于从摄像部得到的图像中包含的所述人的视线和面部朝向中的至少一方来计算所述人的专注度,由此获取该专注度,所述睡意程度获取部基于所述图像中包含的所述人的眨眼来计算所述人的睡意程度,由此获取该睡意程度。
根据这种结构,能够根据同一图像来获取人的睡意程度和专注度。因此,能够通过简便的结构来计算人的专注度和人的睡意程度。
另外,例如,所述专注度获取部根据从所述摄像部得到的包含所述人和规定的对象物的多个图像,来计算所述人针对所述规定的对象物的视线和面部朝向中的至少一方的相对于时间的变化量,由此获取所述专注度。
例如,在人一边观看显示装置中显示的学习等任务一边执行该任务的情况下,人观看作为规定的对象物的显示装置的时间越长,则能够判定为该人的专注度越高。因此,根据这种结构,能够更高精度地测量人的专注度。
另外,例如,所述校正部基于所述规定的对象物的位置,来变更对所述专注度进行校正时使用的基于所述睡意程度的校正值。
例如,能够基于人的一次眨眼所花的时间来计算该人的睡意程度。因此,例如,在人一边观看显示装置中显示的学习等任务一边执行该任务的情况下,由摄像部拍摄的眼睑的开闭度会根据作为规定的对象物的显示装置、摄像部以及人之间的位置关系而变化。因此,根据这种结构,能够抑制因规定的对象物、摄像部以及人之间的位置关系而导致的专注度的测量精度的下降。
另外,本公开的一个方式所涉及的专注度测量方法包括以下步骤:专注度获取步骤,获取人的专注度;睡意程度获取步骤,获取所述人的睡意程度;校正步骤,基于所述睡意程度来对所述专注度进行校正;以及输出步骤,输出表示通过所述校正步骤进行校正后的所述专注度的校正后专注度。
根据这种方法,能够基于人的睡意程度来对该人的专注度进行校正。因此,能够抑制以下情况:尽管处于人的睡意程度高且该人的专注度低的状态,却将该人的专注度计算得高。这样,根据本公开所涉及的专注度测量方法,能够高精度地测量专注度。
另外,本公开的一个方式能够实现为用于使计算机执行上述专注度测量方法的程序。或者,还能够实现为保存有该程序的计算机可读取的记录介质。
下面,参照附图来具体地说明实施方式。
此外,以下说明的实施方式均用于示出总括性的或具体的例子。以下的实施方式中示出的数值、形状、材料、构成要素、构成要素的配置位置及连接方式、步骤、步骤的顺序等是一例,其主旨并非限定本公开。另外,关于以下的实施方式中的构成要素中的、未记载在独立权利要求中的构成要素,设为任意的构成要素来进行说明。
另外,各图是示意图,未必严格地进行了图示。因而,例如,在各图中比例尺等未必一致。另外,在各图中,对实质上相同的结构标注相同的标记,并省略或简化重复的说明。
另外,在以下的说明中,有时记载为“阈值以上”、“阈值以下”等,但并不是以严格的含义记载的。例如,在记载为“阈值以上”的情况下,也可以表示比基准值大的含义。另外,在对比地记载为“阈值以上”、“小于阈值”的情况下,也可以表示以该基准值为界来划分的含义,分别也可以表示“比阈值大”、“阈值以下”的含义。
(实施方式1)
[概要]
首先,使用图1~图3来说明实施方式1所涉及的专注度测量装置的结构。
图1是示出作为实施方式1所涉及的专注度的测量对象的用户10的状况的示意图。
实施方式1所涉及的专注度测量装置100对用户10的专注度进行测量。专注度是表示用户10专注于作业的程度的指标。专注度例如以0~1、0~10或者0~100等规定范围的数值来表示。例如,专注度越高(例如,作为专注度表示的数值越大),则表示用户10越专注于作业,专注度越低(例如,作为专注度表示的数值越小),则表示用户10越没有专注于作业。
此外,专注度的数值范围没有特别限定。
作业(任务)例如是研究、学习、读书或者办公等用脑的智力作业,但是不限于此。作业也可以是驾车、操作机械、制作物品等使用手脚进行的作业。或者,作业也可以是电影、音乐、美术品或体育等的鉴赏、游戏、或者体育等与娱乐有关的作业。
在图1所示的例子中,用户10使用显示装置300中显示的学习内容、即任务21来进行学习。任务21例如是显示装置300所具有的显示器中显示的教材内容。另外,用户10例如还使用教科书、参考书或笔记等用于学习的书籍310中记载的任务22来进行学习。在处于用户10专注于学习的状态(即,专注度高的状态)的情况下,用户10的视线和面部朝向是朝向显示或记载有任务21或任务22的规定的对象物(在本实施方式中,为显示装置300或者书籍310)。
图2A~图2C是示意性地示出用户10的视线的图。具体地说,图2A是示意性地示出用户10的专注度高的状态的图。另外,图2B是示意性地示出用户10的专注度低的状态、且睡意程度低的状态的图。另外,图2C是示意性地示出用户10的专注度低的状态、且睡意程度高的状态的图。
如图2A中用箭头13示出的那样,在用户10的专注度高的状态下,用户10的视线朝向显示有任务的专注对象物320,并且,用户10的视线在规定时间内的晃动量(换言之,是视线的运动量)小。
另一方面,如图2B中用箭头14示出的那样,在用户10的专注度低的状态下,用户10的视线朝向专注对象物320以外的对象物。另外,与用户10的专注度低的状态相比,在用户10的专注度低的状态下,用户10的视线的晃动量较大。
这样,能够基于用户10的视线朝向专注对象物320的时间的长度和/或用户10的视线14的晃动量来判定用户10的专注度。
在此,如图2C所示,设为处于用户10犯困的状态(即,睡意程度高的状态)。此时,有时如用箭头15示出的那样,用户10的视线保持着朝向专注对象物320的状态,并且视线的晃动量小。
在该情况下,尽管因为用户10犯困而处于未专注于任务的状态,但是根据以往的信息处理装置,却计算出高的值来作为用户10的专注度。也就是说,根据以往的信息处理装置,尽管未能专注于学习,却判定为专注度高。
与此相对地,本实施方式所涉及的专注度测量装置100例如使用用户10的睡意程度来对由以往的信息处理装置计算出的专注度(伪专注度)进行校正,由此能够将未能专注于学习这一情况反映到专注度中。具体地说,专注度测量装置100在用户10的睡意程度高的情况下,将专注度校正为小的值。由此,根据专注度测量装置100,能够高精度地测量专注度。
[结构]
接着,使用图1和图3来说明专注度测量装置100的具体的结构。
图3是示出实施方式1所涉及的专注度测量装置100的特征性的功能结构的框图。此外,在图3中,还将专注度测量装置100的周边结构也包括在内地示出专注度测量系统200的特征性的功能结构。
专注度测量系统200是使用由摄像部210拍摄到的图像来利用专注度测量装置100测量人(例如,用户10)的专注度并将该专注度通知给该人的系统。专注度测量系统200具备摄像部210、专注度测量装置100以及通知部220。
专注度测量装置100是测量用户10的专注度的装置。专注度测量装置100具备专注度获取部110、睡意程度获取部120、校正部130、输出部140以及存储部160。
另外,专注度获取部110获取用户10的专注度(伪专注度)。专注度获取部110例如使用从摄像部210得到的图像(摄影图像)来进行运算,由此获取用户10的伪专注度。专注度获取部110使用以往已知的专注度的运算方法来计算伪专注度即可。例如,专注度获取部110基于用户10在规定时间内的运动量来计算伪专注度。更具体地说,用户10在规定时间内的运动越少,则视为用户10越专注,从而专注度获取部110计算出越高的值的伪专注度。用户10在规定时间内的运动越激烈,则视为用户10越不专注,从而专注度获取部110计算出越低的值的伪专注度。
在本实施方式中,专注度获取部110基于从摄像部210得到的图像中包含的用户10的视线和面部朝向中的至少一方,来计算用户10的专注度,由此获取该专注度。更具体地说,专注度获取部110根据从摄像部210得到的包含用户10和规定的对象物(例如,正在显示任务21的显示装置300、记载有任务22的书籍310)的多个图像,来计算用户10针对规定的对象物的视线和面部朝向中的至少一方的相对于时间的变化量(也就是说,规定时间内的视线和面部朝向的运动量),由此获取专注度。
这样,专注度获取部110基于从摄像部210得到的图像,来测定(计算)用户10的视线和面部朝向中的至少一方。具体地说,专注度获取部110通过对图像进行轮廓提取等图像处理,来测定视线和面部朝向中的至少一方。
视线是用户10正在观看的方向。具体地说,例如,视线通过图1所示的箭头11、12来表示。例如,专注度获取部110对图像进行虹膜区域的提取处理,并基于提取出的虹膜的形状和中心位置来测定视线。
面部朝向是用户10的面部的朝向。具体地说,面部朝向通过用户10的面部的正面方向来表示。例如,专注度获取部110对图像进行面部检测处理,并提取眼睛和嘴等的特征点,由此测定面部朝向。
此外,关于专注度获取部110测定视线和面部朝向的测定方法,可以使用任何方法。例如,专注度获取部110也可以包括用于检测用户10的眼电位的传感器,也可以基于检测出的眼电位来检测视线和面部朝向中的至少一方。
睡意程度获取部120检测表示用户10的睡意的程度的睡意程度。例如,睡意程度获取部120根据与睡意程度获取部120连接的摄像部210所拍摄到的包含用户10的动态图像,来获取用户10的睡意程度。在本实施方式中,睡意程度获取部120基于从摄像部210得到的图像中包含的用户10的眨眼来计算用户10的睡意程度,由此获取该睡意程度。
在此,睡意程度获取部120计算睡意程度时使用的眨眼例如是一次眨眼所花的时间、规定时间内的眨眼次数、眨眼的睁开程度(眼睛的睁开程度)等。
例如,在用户10的眨眼的周期稳定的情况下,设为睡意程度低、也就是说处于用户10不困的状态,例如判定为1。另外,例如,在用户10的眨眼慢、或者眨眼的周期短且频繁地进行眨眼的情况下,设为睡意程度高、也就是说处于用户10犯困的状态,例如判定为10。也就是说,在用户10的眨眼的周期稳定的情况下判定为用户10不困,在用户10的眨眼慢且频繁地进行眨眼的情况下判定为用户10犯困。或者,也可以是,在用户10的眨眼的时间长的情况下,也就是说在用户10昏昏欲睡那样的情况下,睡意程度获取部120判定为睡意程度高,在眨眼的时间短的情况下,睡意程度获取部120判定为睡意程度低。另外,也可以是,在眨眼的睁开程度(眼睛的睁开程度)变小的情况下,睡意程度获取部120判定为睡意程度高。并且,也可以是,睡意程度获取部120将眨眼所花的时间、眨眼的频度、眼睛的睁开程度等与眨眼有关的指标组合起来,来判定用户10的睡意程度。
这样,睡意程度获取部120通过对从摄像部210得到的包含用户10的动态图像进行分析,来检测用户10的睡意程度。睡意程度获取部120判定用户10的睡意程度时使用的眨眼的周期的基准值等可以预先任意地决定。
此外,睡意程度是表示用户10的睡意的程度的指标。睡意程度例如通过0~1、0~10或者0~100等规定范围的数值来表示。例如,睡意程度越高,则表示处于用户10非常困的状态,睡意程度越低,则表示处于用户10越不困的状态、也就是说处于越清醒的状态。
此外,睡意程度的数值范围没有特别限定。
校正部130基于由专注度获取部110获取到的专注度、以及由睡意程度获取部120获取到的睡意程度,来对用户10的专注度进行校正,计算表示校正后的专注度的校正后专注度。在本实施方式中,校正部130基于睡意程度来将专注度校正为预先决定的值。预先决定的值例如是睡意程度的值。
例如,用户10的睡意程度越高,则校正部130将用户10的专注度校正得越低。例如,睡意程度为越大的值、即处于用户10越困的状态,则校正部130将专注度校正为越小的值。
另外,校正部130例如基于用户10的睡意程度进行校正,使得用户10的校正后专注度示出比用户10的专注度低的专注度。换言之,校正部130将基于睡意程度获取部120所获取到的睡意程度计算的校正后专注度校正为比专注度获取部110所获取到的专注度小的值。
另外,例如,校正部130也可以基于任务21、22等规定的对象物的位置来变更对专注度进行校正的方法。例如,能够根据用户10的眨眼的情形来计算睡意程度。因此,例如,根据用户10的位置、摄像部210的位置以及任务21、22的位置之间的位置关系不同,由摄像部210拍摄到的眼睑的运动方式会有所不同。因此,校正部130根据用户10的位置、摄像部210的位置以及任务21、22的位置等规定的对象物的位置,来变更校正的方法。例如,校正部130基于规定的对象物的位置,来变更计算校正后专注度时使用的校正值。
例如,存储部160预先存储任务的位置。例如,设为在存储部160中预先存储有任务21的位置和任务22的位置。如图1所示,在摄像部210配置于显示装置300的情况下,相比于观看任务21时而言,在观看任务22时用户10会朝向更下方,因此即使在进行了相同的眨眼的情况下,相比于观看任务21时而言,在观看任务22时眨眼的开闭度的变化量(也就是说,闭上眼睑的状态与睁开眼睑的状态的变化量)也会较少,因此被测量为缓慢地进行着眨眼,因此校正部130容易将睡意程度计算得低。因此,校正部130将观看任务22时的睡意程度计算得比观看任务21时的睡意程度低,由此抑制因任务的位置导致的计算结果的偏差。校正部130例如基于正在示出任务的规定的对象物的位置来变更后述的式(1)和式(2)的k和/或c的值。
这样,例如,校正部130基于规定的对象物的位置,来变更对专注度进行校正时使用的基于睡意程度的校正值。
此外,在如任务22那样任务不位于与摄像机的摄像方向平行的方向的情况下,为了测定(计算)视线方向,也可以通过声音等来指定显示(或者记载)有任务的规定的对象物的位置。通过这样做,不用根据任务的位置来变更校正的方法,就能够抑制因任务的位置导致的睡意程度的制度的下降。此外,在该情况下,专注度测量系统200也可以具备放大器、扬声器等声音发生器,该声音发生器与输出部140连接。
另外,在任务22的位置相对于任务21而言处于进一步靠近用户10的跟前侧的情况下,用户10会进一步朝向下方,从而还有时摄像部210无法探测(拍摄)到眨眼。也就是说,在从摄像部210侧看用户10的情况下,有可能看起来是用户10闭着眼睛那样的状态。在这种情况下,例如,校正部130也可以将以下信息输出到输出部140:该信息用于使通知部220通知用于促使将任务22配置到靠近任务21侧等、将摄像部210配置到易于探测用户10的眨眼的位置的信息。
另外,也可以是,通过由摄像部210对规定的对象物进行拍摄,校正部130掌握规定的对象物(也就是说,任务)的位置。
另外,也可以设为,根据对象物来掌握任务21的区域,并进行专注度的校正。例如,在任务21是文本用纸的情况下,在用户10观看该文本用纸内的文章或计算式等来执行任务21的情况下有可能是专注的,另一方面,在用户10的视线位于该文本用纸外的情况下有可能是不专注的。另外,即使用户10的视线位于下方,根据文本用纸的大小,用户10的视线的移动区域也会不同,因此用户10专注的情况和不专注的情况都有可能存在。因此,校正部130例如也可以通过使摄像部210拍摄文本用纸来计算文本用纸的大小,并根据计算出的文本用纸的大小来控制对专注度的校正。
此外,在本实施方式中,将任务22设为书籍来进行了说明,但是不限于此。例如,在桌子的前方有老师在讲课的同时、进行桌子上的任务21的状况的情况下,在看老师时视线朝向任务21的上方。在该情况下,视线会朝向与摄像方向不同的位置,因此即使是进行了相同的眨眼的情况下也有时眨眼的变化量变少。因此,也可以设为通过相符的校正来对专注度进行校正。
输出部140输出通过由校正部对专注度进行校正所计算出的校正后专注度。输出部140例如是与通知部220以能够进行通信的方式连接的通信适配器等通信接口。输出部140例如将表示校正后专注度的专注度信息发送到通知部220。输出部140例如在校正后专注度高于或低于规定的阈值的情况下发送专注度信息。所发送的专注度信息也可以是用于控制通知部220的控制信号。
或者,输出部140也可以输出用于向用户10或用户10的监督者等呈现的声音数据或图像数据,来作为专注度信息。
存储部160是存储有专注度获取部110、睡意程度获取部120以及校正部130所执行的各控制程序的存储装置。另外,存储部160中存储有表示专注度和睡意程度的各程度的指标、阈值等信息。存储部160例如能够通过HDD(Hard Disk Drive:硬盘驱动器)、快闪存储器等来实现。
具有以上结构的专注度测量装置100例如通过计算机设备等来实现。具体地说,专注度测量装置100通过保存有程序的非易失性存储器、作为用于执行程序的暂态的存储区域的易失性存储器、输入输出端口、执行程序的处理器等来实现。专注度测量装置100所具有的各功能既可以通过由处理器执行的软件来实现,也可以通过包含1个以上的电子部件的电路等硬件来实现。例如,专注度获取部110、睡意程度获取部120以及校正部130既可以通过由处理器执行的软件来实现,也可以通过硬件来实现。
此外,专注度测量装置100也可以不是从摄像部210获取图像,而是获取由其它设备计算出的专注度和睡意程度。关于视线和面部朝向也是同样的。
摄像部210通过对用户10进行拍摄,来生成包含用户10的面部的图像。摄像部210是在可见光频带具有灵敏度的图像传感器,但是也可以是红外线图像传感器或者热图像传感器。图像例如是动态图像,但是也可以是静态图像。
在本实施方式中,摄像部210配置于显示任务21的显示装置300。另外,在本实施方式中,摄像部210的摄像方向与观看任务21的用户10的视线方向(箭头11)为大致平行的方向。
通知部220是获取输出部140所输出的专注度信息、并基于获取到的专注度信息来通知用户10的专注度的设备。通知部220通过图像、声音等来向用户10通知校正后专注度。通知部220例如是扬声器、显示装置300等显示器。
摄像部210具有摄像功能即可,例如也可以是附属于PC(个人计算机)的Web摄像机、附属于平板终端的摄像机、附属于智能手机的摄像机、附属于电视机的摄像机等。
摄像部210通过对用户10的面部进行拍摄来获取用户10的面部朝向、视线、身体的朝向、眨眼、表情等。
此外,在本实施方式中,用户10所执行的任务21被显示于显示装置300,且任务22被记载于书籍310。显示装置300例如是PC、平板终端、智能手机、电视机等。书籍310例如是教科书、笔记等。
[专注度测量方法]
接着,使用图4来说明实施方式1所涉及的专注度测量装置100所执行的专注度测量方法。
图4是示出实施方式1所涉及的专注度测量装置100所执行的处理过程的流程图。此外,在图4所示的流程图中,示出摄像部210的动作等、专注度测量系统200所包括的处理过程。
首先,摄像部210对用户10的面部进行拍摄(步骤S101)。摄像部210对用户10的面部进行拍摄的时机、周期等没有特别限定。例如,摄像部210在由用户10启动专注度测量装置100的时刻开始进行拍摄。
接着,专注度获取部110获取用户10的专注度(步骤S102)。在本实施方式中,专注度获取部110首先从摄像部210获取在步骤S101中由摄像部210在不同的时间拍摄到的表示用户10的面部的多个图像。接着,专注度获取部110根据获取到的多个图像来计算用户10的视线和面部朝向的变化量。接着,专注度获取部110基于计算出的变化量、以及预先决定的表示该变化量与专注度的对应关系的专注度信息表,来计算用户10的专注度,由此获取用户10的专注度。
接着,睡意程度获取部120获取用户10的睡意程度(步骤S103)。在本实施方式中,睡意程度获取部120首先从摄像部210获取在步骤S101中由摄像部210在不同的时间拍摄到的表示用户10的面部的多个图像。接着,睡意程度获取部120根据获取到的多个图像来计算用户10在规定时间内的眨眼次数、每一次眨眼所花的时间等睡意特征量。接着,睡意程度获取部120基于计算出的睡意特征量、以及预先决定的表示该睡意得光量与睡意程度的对应关系的睡意程度信息表,来计算用户10的睡意程度,由此获取用户10的睡意程度。
接着,校正部130基于睡意程度获取部120所获取到的用户10的睡意程度来计算校正值(步骤S104)。
接着,校正部130利用校正值来对专注度获取部110所获取到的用户10的专注度进行校正(步骤S105)。在步骤S104和步骤S105中,例如,校正部130将睡意程度乘以预先决定的系数来计算校正值,并计算该校正值与专注度之差,由此计算对专注度进行校正所得到的值即校正后专注度。例如,设为专注度为“5”,睡意程度为“2”,系数为0.5。在该情况下,校正部130将校正后专注度计算为5-2×0.5=4。当然,系数可以任意地决定,也可以不是常数,例如可以使其值根据睡意程度而变化。
例如,专注度也可以作为数字值(整数)而被操作为任意数量的等级。例如,专注度也可以被操作为1~10这10级。
另外,例如,睡意程度也可以作为数字值而被操作为任意数量的等级。例如,睡意程度也可以被操作为1~10这10级。
在将专注度的等级设为A、将睡意程度的等级设为B的情况下,也可以如下面的式(1)、式(2)或式(3)所示那样计算表示校正后专注度的等级的A’。
A'=round[A-k×(B-c)]if B>c 式(1)
A'=round[A-k×B]if B≤c 式(2)
A'=0 if A′<0 式(3)
此外,k和c是预先任意地决定的正的整数。另外,round是用于输出为数字值的函数。
例如,在k为1、c为4、A为7、B为5时,A’为6。在该情况下,例如,k×(B-c)=1是基于睡意程度的校正值,能够基于专注度与校正值之差来计算校正后专注度。
此外,也可以是,在睡意程度超过了规定的值的情况下,通过计算预先决定的校正值与专注度之差,来计算校正后专注度。
另外,专注度、校正后专注度以及睡意程度也可以作为模拟值(实数)而被操作为规定范围内的实数值(例如,0~1)。
另外,也可以基于用户10所执行的任务的内容、用户10所处的温湿度等环境、用户10的性别、年龄等属性来变更校正后专注度的计算方法。例如,睡意程度对校正后专注度的影响越大,则将k的值设定得越大。
另外,例如,也可以是,根据用户10的环境、时刻、作业时间来预先获取表示过去专注度如何变化的用户信息,基于该用户信息来决定校正后专注度的计算方法。
另外,例如,在当前的环境对用户10而言是容易犯困的环境的情况下,变更k和/或c的值,使得校正值变大。
另外,例如,也可以根据还包括使用专注度测量装置100的用户10以外的用户在内的用户的环境、时刻、作业时间,来预先获取表示过去专注度如何变化的所有用户信息,并基于该所有用户信息来决定校正后专注度的计算方法。
另外,例如,校正部130也可以基于规定的对象物(例如,显示任务21的显示装置、记载有任务22的书籍310)的位置,来变更对专注度进行校正时使用的基于睡意程度的校正值。例如,校正部130也可以基于规定的对象物的位置来决定k和c中的至少一方的值。
接着,输出部140输出校正后专注度(步骤S106)。在步骤S106中,例如,输出部140向通知部220输出表示校正后专注度的数值的图像信息、声音信息等。输出部140输出符合通知部220的结构的信息即可。例如,在通知部220是显示器等显示装置的情况下,输出部140输出图像信息。另外,例如,在通知部220是音响设备的情况下,输出部140输出声音信息。此外,在通知部220仅利用校正后专注度的数值就能够生成图像、声音等的情况下,输出部140也可以输出包含校正后专注度的数值的信息。
接着,通知部220向用户通知所获取到的校正后专注度(步骤S107)。在步骤S107中,例如,在通知部220是显示器等显示装置的情况下,输出表示校正后专注度的图像。另外,例如,在通知部220是音响设备的情况下,输出部140输出表示校正后专注度的声音。
例如,输出部140也可以在专注度比规定的阈值高的情况下输出表示校正后专注度的信息。或者,输出部140也可以在专注度比规定的阈值低的情况下输出表示校正后专注度的信息。另外,在像这样存在输出部140输出校正后专注度的条件的情况下,例如,也可以是,能够由用户10任意地设定输出部140是在专注度比规定的阈值高的情况下输出表示校正后专注度的信息、还是在专注度比规定的阈值低的情况下输出表示校正后专注度的信息。在该情况下,专注度测量系统200例如也可以具有用于从用户10获取指示的触摸面板等操作部。
例如,在输出部140在专注度比规定的阈值高的情况下输出表示校正后专注度的信息的情况下,校正部130也可以使输出部140输出用于使通知部220显示“处于专注度高的状态”或者“正在维持高专注度”等消息的信息等、用于提供有助于用户10维持干劲的消息的信息。通过这样做,能够促使用户10专注于任务。另外,通过由输出部140在专注度比规定的阈值低的情况下输出表示校正后专注度的信息,在用户10的专注度高的情况下不会妨碍其专注,且在专注度低的情况下能够通过进行告知(通知)来促使用户10专注。例如,通过向用户告知“专注度有所下降”等消息或专注度的数值,能够促使用户10提高专注度。另外,校正部130也可以在用户10的专注度(校正后专注度)高的情况下与在专注度低的情况下,变更使输出部140输出的信息(也就是说,使通知部220通知的信息)。例如,也可以是,在专注度比预先任意地决定的规定的阈值高的情况下,校正部130使输出部140仅输出专注度的数值,在专注度变得比规定的阈值低的情况下,校正部130使输出部140输出同时包括数值和激励的消息的信息,由此使通知部220促使用户10提高专注度。
此外,关于规定的阈值,预先任意地决定即可,没有特别限定。
[效果等]
如以上说明的那样,实施方式1所涉及的专注度测量装置100具备:专注度获取部110,其获取用户10的专注度;睡意程度获取部120,其获取用户10的睡意程度;校正部130,其基于睡意程度来对用户10的专注度进行校正;以及输出部140,其输出表示由校正部130进行校正后的用户10的专注度的校正后专注度。
根据这种结构,校正部130能够基于用户10的睡意程度,来对用户10的专注度进行校正。因此,能够抑制以下情况:尽管处于用户10的睡意程度高且专注度低的状态,却将专注度计算得高。这样,根据本公开的专注度测量装置100,能够高精度地测量专注度。
另外,例如,用户10的睡意程度越高,则校正部130将用户10的专注度校正得越低。
所谓的处于用户10的睡意程度高的状态,能够认为是处于用户10的专注度低的状态。因此,通过用户10的睡意程度越高则将用户10的专注度校正得越低,能够高精度地测量用户10的专注度。
另外,例如,校正部130基于用户10的睡意程度来进行校正,使得用户10的校正后专注度示出比用户10的专注度低的专注度。
能够认为,用户10的睡意程度越提高,则用户10的专注度越降低。因此,通过基于用户10的睡意程度来对用户10的专注度以降低的方式进行校正,能够简便且高精度地测量用户10的专注度。
另外,例如,专注度获取部110基于从摄像部210得到的图像中包含的用户10的视线和面部朝向中的至少一方来计算用户10的专注度,由此获取该专注度。另外,例如,睡意程度获取部120基于该图像中包含的用户10的眨眼来计算用户10的睡意程度,由此获取该睡意程度。
根据这种结构,能够根据同一图像来获取用户10的睡意程度和专注度。因此,能够通过简便的结构来计算用户10的专注度和睡意程度。
另外,例如,专注度获取部110根据从摄像部210得到的包含用户10和规定的对象物(例如,显示任务21的显示装置300、记载有任务22的书籍310)的多个图像,来计算用户10针对规定的对象物的视线和面部朝向中的至少一方的相对于时间的变化量,由此获取专注度。
例如,在用户10一边观看显示装置300一边执行学习等任务21的情况下,用户10观看作为规定的对象物的显示装置300的时间越长,则能够判定为用户10的专注度越高。因此,根据这种结构,能够更高精度地测量用户10的专注度。
另外,例如,校正部130基于规定的对象物(例如,显示任务21的显示装置300、记载有任务22的书籍310等)的位置,来变更对专注度进行校正时使用的基于睡意程度的校正值。
例如,能够基于用户10的一次眨眼所花的时间来计算用户10的睡意程度。因此,例如,在用户10一边观看显示装置300一边执行学习等任务21的情况下,由摄像部210拍摄的眼睑的开闭度会根据作为规定的对象物的显示装置300、摄像部210以及用户10之间的位置关系而变化。因此,根据这种结构,能够抑制因规定的对象物、摄像部210以及用户10之间的位置关系而导致的专注度的测量精度的下降。
另外,实施方式1所涉及的专注度测量方法包括以下步骤:专注度获取步骤,获取用户10的专注度;睡意程度获取步骤,获取用户10的睡意程度;校正步骤,基于睡意程度来对专注度进行校正;以及输出步骤,输出表示通过校正步骤进行校正后的专注度的校正后专注度。
根据这种方法,能够基于用户10的睡意程度来对用户10的专注度进行校正。因此,能够抑制以下情况:尽管处于用户10的睡意程度高且用户10的专注度低的状态,却将用户10的专注度计算得高。这样,根据本公开所涉及的专注度测量方法,能够高精度地测量专注度。
另外,本公开的一个方式能够实现为用于使计算机执行上述专注度测量方法的程序。或者,还能够实现为保存有该程序的计算机可读取的记录介质。
此外,本公开也可以实现为使计算机执行上述专注度测量方法中包括的步骤的程序。另外,本公开也可以实现为记录有该程序的计算机可读取的CD-ROM等记录介质。另外,本公开也可以实现为表示该程序的信息、数据或者信号。而且,这些程序、信息、数据以及信号也可以经由因特网等通信网络来发布。
(实施方式2)
接着,说明实施方式2所涉及的专注度测量装置。此外,在实施方式2所涉及的专注度测量装置的说明中,以与实施方式1所涉及的专注度测量装置的不同点为中心进行说明,对实质上相同的构成要素标注相同的标记,有时简化或省略一部分说明。
[结构]
使用图5来说明实施方式2所涉及的专注度测量装置的具体的结构。
图5是示出实施方式2所涉及的专注度测量装置101的特征性的功能结构的框图。此外,在图5中,将专注度测量装置101的周边结构也包括在内地示出专注度测量系统201的特征性的功能结构。
专注度测量系统201是使用由摄像部210拍摄到的图像来利用专注度测量装置101测量人(例如,图1所示的用户10)的专注度并将该专注度通知给该人的系统。专注度测量系统200具备摄像部210、专注度测量装置101、通知部220、电子设备230以及环境检测部240。
专注度测量装置101是测量用户10的专注度的装置。专注度测量装置101具备专注度获取部110、睡意程度获取部120、校正部131、输出部140、存储部160、判定部170以及控制部180。
校正部131基于由专注度获取部110获取到的专注度、以及由睡意程度获取部120获取到的睡意程度,来对用户10的专注度(伪专注度)进行校正,计算表示校正后的专注度的校正后专注度。在本实施方式中,校正部131基于睡意程度来将伪专注度校正为预先决定的值。预先决定的值例如是睡意程度的值。
另外,校正部131基于表示用户10的环境状态的环境信息,来变更对用户10的专注度进行校正的方法。校正部131例如从用于检测用户10所处的环境的温度、湿度、明亮度、环境音等信息作为环境信息的环境检测部240获取这些环境信息。
根据环境的不同,产生容易成为用户10易于专注的状态、用户10容易犯困等的不同。因此,例如,在是对用户10而言非常难以犯困的环境的情况下,用户10的睡意程度不易变高,因此睡意程度容易被计算得低,精度变低。因此,校正部131根据环境来变更校正的方法。
判定部170基于用户10的睡意程度和用户10的校正后专注度,来判定用户10的校正后专注度的原因。例如,判定部170判定用户10的校正后专注度是否示出比第一阈值低的专注度,在判定为示出比第一阈值低的专注度的情况下,基于用户10的睡意程度和用户10的校正后专注度,来判定使用户10的校正后专注度变为比第一阈值低的专注度的原因。
例如,作为用户10的专注度低的原因,能够想到因电视机等外部原因所导致的情况、以及因睡意等内部原因所导致的情况。判定部170在用户10的专注度低的情况下,判定使专注度变低的原因中睡意的原因产生多大程度的影响。
判定部170例如判定在使用户10的校正后专注度变为比第一阈值低的专注度的原因中睡意的原因所占的比例是否比第二阈值高。
此外,第一阈值和第二阈值可以预先任意地决定,其值没有特别限定。第一阈值和第二阈值例如被存储于存储部160。
判定部170将判定结果输出到控制部180。
控制部180基于用户10的睡意程度和用户10的校正后专注度,来控制用于促使用户10清醒或专注的电子设备230。具体地说,控制部180基于从判定部170获取到的判定结果来控制电子设备230。
例如在判定部170判定为在使用户10的校正后专注度变为比第一阈值低的专注度的原因中睡意的原因所占的比例比第二阈值高的情况下,控制部180通过控制电子设备230来促使用户10清醒。另一方面,例如,在判定部170未判定为使在用户10的校正后专注度变为比第一阈值低的专注度的原因中睡意的原因所占的比例比第二阈值高的情况下,控制部180通过控制电子设备230来促使用户10专注。这样,在使用户10的专注度低的原因是睡意的原因的情况下,控制部180控制电子设备230,以抑制用户10的睡意、也就是说使用户10清醒。
另一方面,在使用户10的专注度低的原因不是睡意的原因的情况下,控制部180控制电子设备230,以使用户10专注。例如,在并非因睡意而使专注度低的情况下,如图2B所示,有时处于意识不在任务21、22上而是分散于各处的状态。在这种情况下,通过将环境设为易于使用户10冷静的环境,来使用户10的专注度变高。
例如,有时在促使用户10清醒的情况下与在促使用户10专注的情况下,环境最好以相反的方式变化。通过提高环境温度能够促使用户10专注,通过降低环境温度能够促使用户10清醒。这样,通过相反地控制用户10的环境条件,能够区别地促使用户10清醒与专注。因此,例如,控制部180在促使用户10清醒的情况下与在促使用户10专注的情况下,对电子设备230进行相反的控制。由此,能够适当地促使用户10清醒或专注。
此外,电子设备230也可以进行产生相反效果的音乐的输出、显示装置300的画面的背景颜色的设定、声音指示等,以促使专注或清醒。例如,电子设备230也可以输出刺激性的音乐以促使用户10清醒,输出放松的音乐以促使用户10专注。另外,例如,电子设备230也可以将显示装置300的画面的背景颜色设为暖色系(红色系)以促使用户10清醒,将背景颜色设为冷色系(蓝色系)以促使用户10专注。另外,例如,电子设备230也可以将环境设为舒适的温度以促使用户10清醒,将环境设为不舒适的温度(例如,过高或过低的温度)以促使用户10专注。另外,例如,电子设备230也可以降低任务21的难易度以促使用户10清醒,提高任务21的难易度以促使用户10专注。
另外,也可以在存储部160中预先存储有表示用户10对音乐、气温等的喜好的属性信息。例如,控制部180也可以基于属性信息来驱动电子设备230,以促使用户10清醒或专注。
此外,例如通过下面的式(4)来计算表示判定部170计算的睡意的原因的比例的R。
R=B/A′ 式(4)
此外,R也可以是与校正值的大小成比例的值。例如,也可以通过下面的式(5)来计算R。
R=B/(A-A′) 式(5)
具有以上结构的专注度测量装置101例如通过计算机设备等来实现。具体地说,专注度测量装置101通过保存有程序的非易失性存储器、作为用于执行程序的暂态的存储区域的易失性存储器、输入输出端口、执行程序的处理器等来实现。专注度测量装置101所具有的各功能既可以通过由处理器执行的软件来实现,也可以通过包含1个以上的电子部件的电路等硬件来实现。例如,专注度获取部110、睡意程度获取部120、校正部131、判定部170以及控制部180既可以通过由处理器执行的软件来实现,也可以通过硬件来实现。
电子设备230是用于促使用户10清醒或专注的设备。电子设备230例如是控制温度、湿度等的空调设备、音响设备、照明设备等。专注度测量系统201中采用的电子设备230的数量既可以是1个也可以是多个。
另外,例如,电子设备230也可以是能够通过进行相反的控制来变更是促使用户10清醒还是促使用户10专注的电子设备。例如,在电子设备230是空调设备的情况下,电子设备230通过提高用户10的环境温度来促使用户10专注,通过降低用户10的环境温度来促使用户10清醒。
环境检测部240是用于检测用户10的环境的传感器。环境检测部240例如是检测温度的温度传感器、检测湿度的湿度传感器、检测音量的声音检测器、检测明亮度的光传感器等。
[专注度测量方法]
接着,使用图6来说明实施方式2所涉及的专注度测量装置101所执行的专注度测量方法。
图6是示出实施方式2所涉及的专注度测量装置101所执行的处理过程的流程图。此外,在图6所示的流程图中,示出了摄像部210的动作等、专注度测量系统201所包括的处理过程。
首先,摄像部210对用户10的面部进行拍摄(步骤S201)。
接着,专注度获取部110获取用户10的专注度(步骤S202)。
接着,睡意程度获取部120获取用户10的睡意程度(步骤S203)。
步骤S201~步骤S203是与图4所示的步骤S101~步骤S103相同的处理。
接着,校正部131从环境检测部240获取环境信息(步骤S204)。
接着,校正部131基于睡意程度获取部120所获取到的用户10的睡意程度和从环境检测部240获取到的环境信息,来计算校正值(步骤S205)。
接着,校正部131利用校正值来对专注度获取部110所获取到的用户10的专注度进行校正(步骤S206)。
在步骤S205和步骤S206中,例如,校正部131将睡意程度乘以预先决定的系数来计算校正值,并计算该校正值与专注度之差,由此计算对专注度进行校正所得到的值即校正后专注度。在此,例如,基于环境信息来变更该系数。例如,在环境检测部240检测出的作为环境信息检测出的温度为规定范围内的温度的情况下,将系数(例如,式(1)所示的k)设为“2”,在除此以外的情况下将系数设为“1”。这样,例如,校正部131基于环境信息来变更校正值。
接着,输出部140输出校正后专注度(步骤S207)。在步骤S207中,例如,输出部140向通知部220输出表示校正后专注度的数值的图像信息、声音信息等。
此外,虽未图示,但是在步骤S207之后,通知部220例如向用户10通知所获取到的校正后专注度。
接着,判定部170获取校正部131计算出的用户10的校正后专注度,并判定所获取到的校正后专注度是否示出比第一阈值低的专注度(步骤S208)。
判定部170在判定为校正后专注度未示出比第一阈值低的专注度的情况下(步骤S208中为“否”),设为处于用户10的专注度高的状态,例如结束处理。专注度测量系统201也可以从步骤S201起再次开始处理。也可以由输出部140向通知部220输出表示处于用户10的专注度高的状态的意思的信息。
另一方面,判定部170在判定为校正后专注度示出比第一阈值低的专注度的情况下(步骤S208中为“是”),基于用户10的睡意程度和校正后专注度,来判定使校正后专注度变为比第一阈值低的专注度的原因(步骤S209)。具体地说,首先,在步骤S209中,判定部170例如从睡意程度获取部120获取用户10的睡意程度,基于获取到的用户10的睡意程度、以及在步骤S208中获取到的用户10的校正后专注度,来计算使用户10的专注度变低的全部原因中睡意的原因所占的比例。判定部170例如使用上述的式(4)或者上述的式(5),来计算睡意的原因的比例。
接着,判定部170判定在步骤S209中计算出的睡意的原因的比例是否比第二阈值高(步骤S210)。
在判定部170判定为睡意的原因的比例比第二阈值高的情况下(步骤S210中为“是”),控制部180进行通过控制电子设备230来促使用户10清醒的控制(步骤S211)。
另一方面,在判定部170未判定为睡意的原因的比例比第二阈值高的情况下(步骤S210中为“否”),控制部180进行通过控制电子设备230来促使用户10专注的控制(步骤S212)。
[效果等]
如以上说明的那样,实施方式2所涉及的专注度测量装置101具备:专注度获取部110,其获取用户10的专注度;睡意程度获取部120,其获取用户10的睡意程度;校正部131,其基于睡意程度来对专注度进行校正;以及输出部140,其输出表示由校正部131进行校正后的用户10的专注度的校正后专注度。专注度测量装置101还具备控制部180,该控制部180基于用户10的睡意程度和用户10的校正后专注度,来控制用于促使用户10清醒或专注的电子设备230。
根据这种结构,控制部180基于被校正部131校正为适当的值后的用户10的专注度(校正后专注度)来控制电子设备230,因此能够在适当的时机促使用户10清醒、或者促使用户10专注。
另外,例如,专注度测量装置101还具备判定部170,该判定部170判定用户10的校正后专注度是否示出比第一阈值低的专注度,在判定为示出比第一阈值低的专注度的情况下,基于用户10的睡意程度和用户10的校正后专注度,来判定使用户10的校正后专注度变为比第一阈值低的专注度的原因。在该情况下,控制部180基于判定部170的判定结果来控制电子设备230。
根据这种结构,控制部180基于判定部170的判定结果来控制电子设备230,因此能够抑制不必要地促使用户10清醒或专注。
另外,例如,在判定部170判定为在使用户10的校正后专注度变为比第一阈值低的专注度的原因中睡意的原因所占的比例比第二阈值高的情况下,控制部180通过控制电子设备230来促使用户10清醒,在判定部170未判定为该比例比第二阈值高的情况下,控制部180通过控制电子设备230来促使用户10专注。
根据这种结构,能够由判定部170适当地判定是应促使用户10清醒还是应促使用户10专注,因此控制部180能够更适当地促使用户10清醒、或者促使用户10专注。
另外,例如,控制部180在促使用户10清醒的情况下与在促使用户10专注的情况下,对电子设备230进行相反的控制。
例如,能够通过提高环境温度来促使用户10专注。另一方面,能够通过降低环境温度来促使用户10清醒。另外,例如,能够通过提高环境噪音(环境的音量)来促使用户10清醒。另一方面,能够通过降低环境噪音来促使用户10专注。这样,能够利用空调设备、音响设备等1个电子设备230通过变更控制方式,来促使用户10清醒和促使用户10专注。因此,通过由控制部180在促使用户10清醒的情况下与在促使用户10专注的情况下对电子设备230进行相反的控制,能够通过简便的结构来促使用户10清醒、或者促使用户10专注。
另外,例如,校正部131基于表示用户10的环境状态的环境信息,来变更对用户10的专注度进行校正的方法。
例如,具有在环境温度比较高的情况下用户10的专注度和睡意程度容易变高之类的、用户10的专注度和睡意程度根据用户10的环境条件而变化的倾向。因此,通过基于用户10的环境状态对用户10的专注度进行校正,本公开所涉及的专注度测量装置101能够更高精度地测量专注度。
(其它实施方式)
以上基于实施方式说明了1个或多个方式所涉及的专注度测量装置等,但是本公开不限定于这些实施方式。只要不脱离本公开的主旨,对本实施方式施加本领域技术人员所能想到的各种变形而得到的方式、以及将不同的实施方式中的构成要素组合而构建的方式也包含于本公开的范围内。
例如,图4所示的步骤S102和步骤S103也可以以相反的顺序执行,还可以同时执行。这样,本公开所涉及的流程图只不过是一例,在权利要求书内可以任意地变更步骤。
另外,上述实施方式中说明的装置之间的通信方法没有特别限定。在装置之间进行无线通信的情况下,无线通信的方式(通信标准)例如是ZigBee(注册商标)、Bluetooth(注册商标)、或者无线LAN(Local Area Network:局域网)等近距离无线通信。或者,无线通信的方式(通信标准)也可以是经由因特网等广域通信网络进行的通信。另外,在装置之间,也可以进行有线通信来代替无线通信。有线通信具体地说是电力线传输通信(PLC:PowerLine Communication:电力线通信)或者使用有线LAN进行的通信等。
另外,例如,专注度测量装置100、101也可以向提供任务的管理者所使用的服务器发送将利用了因特网的学习方式即所谓的网络化学习(e-learning)等任务、用户10的回答状况、睡意程度以及专注度(校正后专注度)进行关联所得到的信息。通过这样做,管理者能够基于服务器所接收到的信息,来将当前的任务改良为用户10不易犯困且专注度提高那样的任务的内容(content)。另外,管理者能够基于服务器所接收到的信息,来进行用户10能够将任务完成到何种程度的评价。
另外,例如,也可以向用户10的监督者(例如,用户10是学生的情况下的监护人等)所使用的PC等装置发送将任务、用户10的回答状况、睡意程度以及专注度进行关联所得到的信息。由此,该监督者能够浏览该信息,因此能够判断用户10是否正在执行与用户10的能力相适应的任务。
另外,例如,专注度测量装置100、101也可以使将任务、用户10的回答状况、睡意程度以及专注度进行关联所得到的信息以用户10能够实时浏览的方式显示于显示装置300等。由此,专注度测量装置100、101能够通过向用户10提供客观的指标,来促使用户10进行专注度的自我控制。
另外,例如,在上述实施方式中,专注度获取部120获取规定时间内的视线和面部朝向的运动量。如该规定时间那样预先决定的时间可以任意地决定。
另外,在上述实施方式中,也可以由其它处理部来执行特定的处理部所执行的处理。另外,也可以变更多个处理的顺序,或者,多个处理也可以并行执行。另外,专注度测量装置100、101所具备的构成要素也可以分配到多个装置中。例如,也可以由其它装置具备一个装置所具备的构成要素。
例如,关于上述实施方式中说明的处理,既可以通过使用单个装置(系统)进行集中式处理来实现,或者也可以通过使用多个装置进行分布式处理来实现。另外,执行上述程序的处理器既可以是单个,也可以是多个。即,既可以进行集中式处理,或者也可以进行分布式处理。
另外,在上述实施方式中,专注度测量装置100所具备的校正部130等处理部的构成要素的全部或者一部分既可以由专用的硬件构成,或者也可以通过执行适于各构成要素的软件程序来实现。各构成要素也可以通过由CPU(Central Processing Unit:中央处理单元)或者处理器等程序执行部读出HDD(Hard Disk Drive:硬盘驱动器)或半导体存储器等记录介质中记录的软件程序并执行该软件程序来实现。
另外,专注度测量装置100所具备的校正部130等处理部的构成要素也可以由1个或多个电子电路构成。1个或多个电子电路分别既可以是通用电路,也可以是专用电路。
1个或多个电子电路中例如也可以包括半导体装置、IC(Integrated Circuit:集成电路)或者LSI(Large Scale Integration:大规模集成电路)等。IC或LSI既可以集成于1个芯片,也可以集成于多个芯片。在此称为IC或者LSI,但是其称呼方式根据集成的程度不同而改变,也可能称为系统LSI、VLSI(Very Large Scale Integration:超大规模集成电路)、或者ULSI(Ultra Large Scale Integration:甚大规模集成电路)。另外,还能够为了相同的目的而使用能够在制造LSI后被进行编程的FPGA(Field Programmable GateArray:现场可编程门阵列)。
另外,本公开的整体的或具体的方式也可以通过系统、装置、方法、集成电路或者计算机程序来实现。或者,也可以通过存储有该计算机程序的光盘、HDD或半导体存储器等计算机可读取的非暂态记录介质来实现。另外,也可以通过系统、装置、方法、集成电路、计算机程序以及记录介质的任意的组合来实现。
另外,上述的各实施方式能够在权利要求书或其等同的范围内进行各种变更、置换、附加、省略等。
产业上的可利用性
本公开能够作为能够高精度地测量专注度的专注度测量装置来利用,例如能够在对学习或驾驶等各种作业进行辅助的装置或方法等中利用本公开。
附图标记说明
10:用户;11、12、13、14、15:箭头;21、22:任务;100、101:专注度测量装置;110:专注度获取部;120:睡意程度获取部;130、131:校正部;140:输出部;160:存储部;170:判定部;180:控制部;200、201:专注度测量系统;210:摄像部;220:通知部;230:电子设备;240:环境检测部;300:显示装置;310:书籍;320:专注对象物。
Claims (12)
1.一种专注度测量装置,具备:
专注度获取部,其获取人的专注度;
睡意程度获取部,其获取所述人的睡意程度;
校正部,其基于所述睡意程度来对所述人的专注度进行校正;
输出部,其输出表示由所述校正部进行校正后的所述人的专注度的校正后专注度;
判定部,其基于所述人的睡意程度和所述人的校正后专注度,来判定所述人的校正后专注度的原因;以及
控制部,其基于所述判定部的判定结果,来控制用于促使所述人清醒或专注的电子设备。
2.根据权利要求1所述的专注度测量装置,其中,
所述人的睡意程度越高,则所述校正部将所述人的专注度校正得越低。
3.根据权利要求1或2所述的专注度测量装置,其中,
所述校正部基于所述人的睡意程度来进行校正,使得所述人的校正后专注度示出比所述人的专注度低的专注度。
4.根据权利要求1~3中的任一项所述的专注度测量装置,其中,
所述判定部判定所述人的校正后专注度是否示出比第一阈值低的专注度,在判定为示出比所述第一阈值低的专注度的情况下,基于所述人的睡意程度和所述人的校正后专注度,来判定使所述人的校正后专注度变为比所述第一阈值低的专注度的原因。
5.根据权利要求1~4中的任一项所述的专注度测量装置,其中,
在所述判定部判定为在所述原因中睡意的原因所占的比例比第二阈值高的情况下,所述控制部通过控制所述电子设备来促使所述人清醒,
在所述判定部未判定为所述比例比所述第二阈值高的情况下,所述控制部通过控制所述电子设备来促使所述人专注。
6.根据权利要求1~5中的任一项所述的专注度测量装置,其中,
所述控制部在促使所述人清醒的情况下与在促使所述人专注的情况下,对所述电子设备进行相反的控制。
7.根据权利要求1~6中的任一项所述的专注度测量装置,其中,
所述校正部基于表示所述人的环境状态的环境信息,来变更对所述人的专注度进行校正的方法。
8.根据权利要求1~7中的任一项所述的专注度测量装置,其中,
所述专注度获取部基于从摄像部得到的图像中包含的所述人的视线和面部朝向中的至少一方来计算所述人的专注度,由此获取该专注度,
所述睡意程度获取部基于所述图像中包含的所述人的眨眼来计算所述人的睡意程度,由此获取该睡意程度。
9.根据权利要求8所述的专注度测量装置,其中,
所述专注度获取部根据从所述摄像部得到的包含所述人和规定的对象物的多个图像,来计算所述人针对所述规定的对象物的视线和面部朝向中的至少一方的相对于时间的变化量,由此获取所述专注度。
10.根据权利要求9所述的专注度测量装置,其中,
所述校正部基于所述规定的对象物的位置,来变更对所述专注度进行校正时使用的基于所述睡意程度的校正值。
11.一种专注度测量方法,包括以下步骤:
专注度获取步骤,获取人的专注度;
睡意程度获取步骤,获取所述人的睡意程度;
校正步骤,基于所述睡意程度来对所述专注度进行校正;
输出步骤,输出表示通过所述校正步骤进行校正后的所述专注度的校正后专注度;
判定步骤,基于所述人的睡意程度和所述人的校正后专注度,来判定所述人的校正后专注度的原因;以及
控制步骤,基于所述判定部的判定结果,来控制用于促使所述人清醒或专注的电子设备。
12.一种程序,用于使计算机执行根据权利要求11所述的专注度测量方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310373559.8A CN116370792A (zh) | 2019-03-29 | 2020-03-19 | 专注度测量装置 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019065297 | 2019-03-29 | ||
JP2019-065297 | 2019-03-29 | ||
PCT/JP2020/012292 WO2020203350A1 (ja) | 2019-03-29 | 2020-03-19 | 集中度計測装置、集中度計測方法、及び、プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310373559.8A Division CN116370792A (zh) | 2019-03-29 | 2020-03-19 | 专注度测量装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113631211A true CN113631211A (zh) | 2021-11-09 |
Family
ID=72667986
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080024486.6A Pending CN113631211A (zh) | 2019-03-29 | 2020-03-19 | 专注度测量装置、专注度测量方法以及程序 |
CN202310373559.8A Pending CN116370792A (zh) | 2019-03-29 | 2020-03-19 | 专注度测量装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310373559.8A Pending CN116370792A (zh) | 2019-03-29 | 2020-03-19 | 专注度测量装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220160276A1 (zh) |
JP (1) | JP7503762B2 (zh) |
CN (2) | CN113631211A (zh) |
WO (1) | WO2020203350A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114267072A (zh) * | 2021-12-27 | 2022-04-01 | 海信集团控股股份有限公司 | 电子设备及专注度确定方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022158160A1 (ja) * | 2021-01-19 | 2022-07-28 | パナソニックIpマネジメント株式会社 | 支援システム、支援方法、及びプログラム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010032491A1 (ja) * | 2008-09-19 | 2010-03-25 | パナソニック株式会社 | 注意散漫検出装置、注意散漫検出方法およびコンピュータプログラム |
JP2011048531A (ja) * | 2009-08-26 | 2011-03-10 | Aisin Seiki Co Ltd | 眠気検出装置、眠気検出方法、及びプログラム |
CN107209995A (zh) * | 2015-01-19 | 2017-09-26 | 爱信精机株式会社 | 驾驶辅助装置、方法及程序 |
JP2018005343A (ja) * | 2016-06-28 | 2018-01-11 | パナソニックIpマネジメント株式会社 | 運転支援装置及び運転支援方法 |
CN108290477A (zh) * | 2015-11-12 | 2018-07-17 | 株式会社电装 | 车辆用疲劳消除装置 |
JP2018130342A (ja) * | 2017-02-15 | 2018-08-23 | 富士通株式会社 | 覚醒度推定装置、覚醒度推定方法及び覚醒度推定システム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014100227A (ja) * | 2012-11-19 | 2014-06-05 | Toyota Motor Corp | 集中度推定装置、集中度推定方法、運転支援装置及び運転支援方法 |
JP6395087B2 (ja) | 2014-01-14 | 2018-09-26 | パナソニックIpマネジメント株式会社 | 環境制御システム、制御装置、プログラム |
JP6614547B2 (ja) | 2015-08-17 | 2019-12-04 | パナソニックIpマネジメント株式会社 | 視聴状態検出装置、視聴状態検出システムおよび視聴状態検出方法 |
WO2018074224A1 (ja) | 2016-10-21 | 2018-04-26 | 株式会社デイジー | 雰囲気醸成システム、雰囲気醸成方法、雰囲気醸成プログラム、及び雰囲気推定システム |
-
2020
- 2020-03-19 CN CN202080024486.6A patent/CN113631211A/zh active Pending
- 2020-03-19 WO PCT/JP2020/012292 patent/WO2020203350A1/ja active Application Filing
- 2020-03-19 CN CN202310373559.8A patent/CN116370792A/zh active Pending
- 2020-03-19 JP JP2021511444A patent/JP7503762B2/ja active Active
- 2020-03-19 US US17/441,449 patent/US20220160276A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010032491A1 (ja) * | 2008-09-19 | 2010-03-25 | パナソニック株式会社 | 注意散漫検出装置、注意散漫検出方法およびコンピュータプログラム |
JP2011048531A (ja) * | 2009-08-26 | 2011-03-10 | Aisin Seiki Co Ltd | 眠気検出装置、眠気検出方法、及びプログラム |
CN107209995A (zh) * | 2015-01-19 | 2017-09-26 | 爱信精机株式会社 | 驾驶辅助装置、方法及程序 |
CN108290477A (zh) * | 2015-11-12 | 2018-07-17 | 株式会社电装 | 车辆用疲劳消除装置 |
JP2018005343A (ja) * | 2016-06-28 | 2018-01-11 | パナソニックIpマネジメント株式会社 | 運転支援装置及び運転支援方法 |
JP2018130342A (ja) * | 2017-02-15 | 2018-08-23 | 富士通株式会社 | 覚醒度推定装置、覚醒度推定方法及び覚醒度推定システム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114267072A (zh) * | 2021-12-27 | 2022-04-01 | 海信集团控股股份有限公司 | 电子设备及专注度确定方法 |
Also Published As
Publication number | Publication date |
---|---|
US20220160276A1 (en) | 2022-05-26 |
WO2020203350A1 (ja) | 2020-10-08 |
JPWO2020203350A1 (zh) | 2020-10-08 |
JP7503762B2 (ja) | 2024-06-21 |
CN116370792A (zh) | 2023-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112118784B (zh) | 用于检测神经生理状态的社交交互应用 | |
RU2648593C2 (ru) | Способ и аппарат управления отображением, электронное устройство | |
US20120194648A1 (en) | Video/ audio controller | |
CN113631211A (zh) | 专注度测量装置、专注度测量方法以及程序 | |
JP2017522104A (ja) | 目状態決定システム | |
CN113693552A (zh) | 视觉疲劳监测方法、装置、电子设备及可读存储介质 | |
JP2019096116A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20170116952A1 (en) | Automatic parameter adjustment system and method for display device, and display device | |
Bai et al. | Recognition of direction of fall by smartphone | |
CN108492855A (zh) | 一种用于训练老年人注意力的装置与方法 | |
KR102100418B1 (ko) | 감정 상태를 개선시키는 방법 및 그 장치 | |
TWI384383B (zh) | 視線察覺裝置及其方法 | |
JPWO2018100879A1 (ja) | 出力制御装置、出力制御方法およびプログラム | |
CN103830822A (zh) | 通过具有反馈调节机制的运动系统进行心理引导的方法 | |
KR101647883B1 (ko) | 액션 트레머 진단을 위한 손 떨림 측정 장치 및 방법 | |
JP2017176580A (ja) | 感情制御装置、感情制御方法、およびプログラム | |
KR20190143742A (ko) | 학습 집중도 향상 장치 | |
US10643636B2 (en) | Information processing apparatus, information processing method, and program | |
KR20200000680U (ko) | 학습 집중도 향상 장치 | |
JP7347414B2 (ja) | 情報処理システム、情報処理方法、および記録媒体 | |
JP6996379B2 (ja) | 学習システム、及び、学習システム用プログラム | |
CN109844797B (zh) | 选择系统、选择方法以及选择程序 | |
US20240164672A1 (en) | Stress detection | |
CN207666574U (zh) | 自动视力检查装置 | |
JP2019036151A (ja) | 評価装置、評価方法および評価プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20211109 |
|
WD01 | Invention patent application deemed withdrawn after publication |