JP6973928B2 - 瞼開閉判定装置および眠気検知装置 - Google Patents

瞼開閉判定装置および眠気検知装置 Download PDF

Info

Publication number
JP6973928B2
JP6973928B2 JP2017216842A JP2017216842A JP6973928B2 JP 6973928 B2 JP6973928 B2 JP 6973928B2 JP 2017216842 A JP2017216842 A JP 2017216842A JP 2017216842 A JP2017216842 A JP 2017216842A JP 6973928 B2 JP6973928 B2 JP 6973928B2
Authority
JP
Japan
Prior art keywords
eyelid
face
closing
opening
open
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017216842A
Other languages
English (en)
Other versions
JP2019087170A (ja
Inventor
修平 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2017216842A priority Critical patent/JP6973928B2/ja
Priority to US16/152,073 priority patent/US10664712B2/en
Publication of JP2019087170A publication Critical patent/JP2019087170A/ja
Application granted granted Critical
Publication of JP6973928B2 publication Critical patent/JP6973928B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Emergency Alarm Devices (AREA)
  • Image Processing (AREA)

Description

本発明は、車両に搭載されたカメラによって運転者の瞼の開閉状態を検出するようにした瞼開閉判定装置および眠気検知装置に関する。
従来から、車両を運転中の運転者の目の領域をカメラで撮像し、目の開度に基く瞬き検出を行うことにより、運転者の覚醒度を算出して眠気度を推定するようにした眠気検知装置が知られている（例えば、特許文献１参照。）。この装置では、運転者が下方のメータ等を見る下方視に伴って運転者の覚醒度が実際よりも低下することを、下方視判定を行うことにより補正して相殺している。
特開２００８−１７１０６５号公報
ところで、特許文献１に開示された眠気検知装置では、カメラで上瞼の最高点と下瞼の最下点との距離を瞼の開度として算出しているが、下方視等によって運転者が下方を向いている場合には、瞼を開いているときと閉じているときの開度の差が少なくなって、瞼が開いているか閉じているかの判断が難しく、瞼の開閉状態の誤判定が生じやすいという問題があった。この誤判定は、その後の運転者の覚醒度の算出や眠気の推定にも影響を与えることになる。また、上述した特許文献１では、下方視が考慮されて覚醒度が補正されているが、瞼の開閉状態の誤判定による影響までを補正することはできないため、開閉状態の判定精度を上げる工夫が望まれる。
本発明は、このような点に鑑みて創作されたものであり、その目的は、利用者（運転者）の瞼の開閉状態の判定精度を上げることができる瞼開閉判定装置および眠気検知装置を提供することにある。
上述した課題を解決するために、本発明の瞼開閉判定装置は、利用者の顔を撮像する撮像手段と、撮像手段による撮像によって得られた顔画像に基づいて瞼開閉度を算出する開閉度算出手段と、顔画像に基づいて顔の角度を検出する顔角度検出手段と、顔画像に基づいて瞼と眉毛との距離を算出する距離算出手段と、瞼開閉度を所定のしきい値と比較することにより瞼開閉の有無を判定する瞼開閉判定手段と、顔角度検出手段によって検出された顔の角度と距離算出手段によって算出された距離とに基づいて瞼開閉度を補正する開閉度補正手段とを備えている。
顔が下向きになると瞼の開閉状態が確認しにくくなるが、反対に瞼の開閉に伴って瞼と眉毛との間の距離の変化が大きくなるため、瞼開閉度をこの距離に基づいて補正することにより、瞼の開閉状態の判定精度を上げることができる。
また、上述した開閉度補正手段は、顔の角度に基づいて判定した顔の向きが第１の基準よりも下方を向いているときであって、距離算出手段によって算出された距離が第２の基準よりも短いときに、瞼開閉度を大きな値に補正することが望ましい。これにより、顔が下向きのときに瞼が開いた状態を確実に判定することが可能となる。
また、上述した開閉度補正手段は、第２の基準を、顔の角度に基づいて変更することが望ましい。顔の角度に応じて瞼と眉毛の間の長さが変化することを考慮することにより、瞼の開閉状態の判定精度をさらに上げることができる。
また、上述した開閉度算出手段は、顔画像に含まれる上瞼と下瞼の幅の値を瞼開閉度として算出することが望ましい。上瞼と下瞼の幅の値を瞼開閉度とすることにより、瞼の開閉状態を判定することが容易となる。
また、本発明の眠気検知装置は、上述した瞼開閉判定手段による判定結果に基づいて利用者の眠気を判定する眠気判定手段を備えている。瞼の開閉状態の判定精度を上げることにより、その判定結果を用いた利用者の眠気判定の精度も向上させることが可能となる。
一実施形態の眠気検知装置の構成を示す図である。 瞼の開閉度算出の説明図である。 顔画像を撮像して運転者の瞼の開閉状態に基づいて眠気判定を行う動作手順を示す流れ図である。
以下、本発明を適用した一実施形態の眠気検知装置について、図面を参照しながら説明する。
図１は、一実施形態の眠気検知装置の構成を示す図である。図１に示すように、本実施形態の眠気検知装置１は、瞼開閉判定装置１０、眠気判定部６０、警報部７０を備えている。この眠気検知装置１は、例えば車両に搭載されており、利用者としての運転者の眠気を検知したときに運転者に対して覚醒を促す所定の警報動作を行う。
瞼開閉判定装置１０は、運転者の瞼の開閉状態（瞼が開いているか閉じているか）を判定する。このために、カメラ２０、画像メモリ２２、開閉度算出部３０、顔角度検出部３２、距離算出部３４、開閉度補正部４０、瞼開閉判定部５０を含んで構成されている。
カメラ２０は、運転者前方の所定位置に取り付けられており、運転者の顔、特に目と眉毛を含む所定範囲を撮像する。カメラ２０は、例えば、ステアリングシャフト近傍、速度計の近傍、ダッシュボード上などに取り付けらており、走行中の車両の運転者の目と眉毛を少なくとも撮像する。画像メモリ２２は、カメラ２０の撮像によって得られた顔画像を所定のフレームレート（例えば、３０フレーム／秒）で格納する。
開閉度算出部３０は、カメラ２０によって撮像されて画像メモリ２２に格納された顔画像に基づいて瞼開閉度を算出する。例えば、開閉度算出部３０は、顔画像に含まれる目の部分を抽出し、上瞼と下瞼の幅（上瞼の輪郭形状の最上位点と下瞼の輪郭形状の最下位点との上下方向の間隔）の値を瞼開閉度として算出する。
図２は、瞼の開閉度算出の説明図である。図２に示すように、目の上瞼の輪郭線の最上位点と下瞼の最下位点との間隔Ａが瞼開閉度Ａとして算出される。なお、図２に示す例では、左目について説明したが、同様にして右目についても瞼開閉度Ａが算出される。
顔角度検出部３２は、カメラ２０によって撮像されて画像メモリ２２に格納された顔画像に基づいて顔の角度を検出する。例えば、顔画像に含まれる顔のパーツ（目や口など）の輪郭線の形状（凹凸形状など）に基づいて顔の角度Ｂが検出される。
距離算出部３４は、カメラ２０によって撮像されて画像メモリ２２に格納された顔画像に基づいて、瞼と眉毛との間の距離を算出する。例えば、距離算出部３４は、顔画像に含まれる上瞼の輪郭形状の最上位点と、この最上位点から上下方向に沿った眉毛下部までの間隔Ｃが、瞼と眉毛との間の距離Ｃとして算出される（図２参照）。
開閉度補正部４０は、顔角度検出部３２によって検出された顔の角度と距離算出部３４によって算出された瞼と眉毛との距離Ｃとに基づいて、開閉度算出部３０によって算出された瞼開閉度Ａの値を補正する。具体的には、開閉度補正部４０は、顔の角度Ｂに基づいて判定した顔の向きが第１の基準よりも下方を向いているときであって、距離算出部３４によって算出した距離Ｃが第２の基準よりも短いときに、開閉度算出部３０によって算出した瞼開閉度Ａを大きな値に補正する。例えば、瞼開閉度Ａに所定値ａを加算した結果を新たな瞼開閉度Ａとする補正処理が行われる。
瞼開閉判定部５０は、開閉度補正部４０による補正がなされた後の瞼開閉度Ａを所定のしきい値Ａ０と比較することにより、瞼開閉の有無を判定する。
また、眠気判定部６０は、瞼開閉判定装置１０内の瞼開閉判定部５０の判定結果に基づいて、利用者の眠気を判定する。例えば、瞼が閉状態から開状態に移行するまでの瞬き時間が長い場合などには、運転者が眠気を感じているものして判定される。
警報部７０は、眠気判定部６０によって運転者が眠気を感じている旨の判定が行われたときに、運転者に対して所定の警報動作を行う。例えば、覚醒を促すための警報音が出力される。
上述したカメラ２０が撮像手段に、開閉度算出部３０が開閉度算出手段に、顔角度検出部３２が顔角度検出手段に、距離算出部３４が距離算出手段に、瞼開閉判定部５０が瞼開閉判定手段に、開閉度補正部４０が開閉度補正手段に、眠気判定部６０が眠気判定手段にそれぞれ対応する。
本実施形態の眠気検知装置１はこのような構成を有しており、次にその動作を説明する。
図３は、顔画像を撮像して運転者の瞼の開閉状態に基づいて眠気判定を行う動作手順を示す流れ図である。
カメラ２０によって運転者の顔が撮像されて顔画像が画像メモリ２２に格納されると（ステップ１００）、開閉度算出部３０は、運転者の目の瞼開閉度Ａ（図２）を算出する（ステップ１０２）。例えば、左右の目について瞼開閉度が算出されてその平均値が瞼開閉度Ａとして採用される。
次に、顔角度検出部３２は、画像メモリ２２に格納された顔画像に基づいて、運転者の顔の角度Ｂを算出する（ステップ１０４）。また、距離算出部３４は、画像メモリ２２に格納された顔画像に基づいて、運転者の顔の瞼と眉毛との間の距離Ｃ（図２）を算出する（ステップ１０６）。なお、上述した瞼開閉度Ａ、顔の角度Ｂ、瞼と眉毛の距離Ｃの算出は、順番を入れ替えたり、並行して行ってもよい。
次に、開閉度補正部４０は、顔の角度Ｂが基準値Ｂ０より大きいか否かを判定する（ステップ１０８）。この判定は、顔の角度Ｂに基づいて判定した顔の向き（角度Ｂを有する顔の向き）が第１の基準よりも下方を向いているか否かを判定するためのものであり、角度の取り方や基準値Ｂ０の設定の仕方によっては、Ｂ＞Ｂ０の判定式の代わりにＢ＜Ｂ０の判定式を用いる場合もある。Ｂ＞Ｂ０であって運転者の顔の向きが第１の基準よりも下方を向いている場合（想定している向きよりも下向きの場合）には肯定判断が行われる。
次に、開閉度補正部４０は、瞼と眉毛の距離Ｃが基準値Ｃ０より小さいか否かを判定する（ステップ１１０）。この判定は、瞼を開けることに伴って瞼と眉毛との間隔が第２の基準よりも短くなっているか否かを判定するためのものである。Ｃ＜Ｃ０の場合であって瞼と眉毛との間隔が短くなっている場合には肯定判断が行われる。
次に、開閉度補正部４０は、瞼開閉度Ａに所定値ａを加算した結果を新たな瞼開閉度Ａとする補正処理を行う（ステップ１１２）。なお、ステップ１０８において否定判断が行われた場合（運転者の顔が下向きでない場合）やステップ１１０において否定判断が行われた場合（瞼と眉毛との間隔が短くなっていない場合）には瞼開閉度Ａに対する所定値ａの加算処理は行われない。
次に、瞼開閉判定部５０は、開閉度補正部４０による補正がなされた後の瞼開閉度Ａを所定のしきい値Ａ０と比較することにより、瞼開閉の有無（瞼が開いているか閉じているか）を判定する（ステップ１１４）。
例えば、運転者の顔が下向きでない場合に瞼を閉じている場合の瞼開閉度Ａの平均値が２０、瞼が開いている場合の瞼開閉度Ａの平均値が８０とする。一方、運転者の顔が下向きの場合に瞼を閉じている場合の瞼開閉度Ａの平均値が２０、瞼が開いている場合の瞼開閉度Ａの平均値が４０とする。しきい値Ａ０が５０に設定されているものとすると、顔が下向きでない場合には、このしきい値Ａ０を用いることにより瞼の開閉状態を正確に判定することができる。しかし、顔が下向きの場合には、補正前の瞼開閉度Ａは瞼が開いた状態でも４０にしかならないため、このしきい値Ａ０を用いると瞼の開閉状態を判定することができなくなる。本実施形態では、顔が下向きの場合であって瞼と眉毛との間隔が短い場合（瞼が開いているであろう場合）には瞼開閉度Ａに所定値ａ（例えばａ＝２０）が加算されて、補正後の瞼開閉度Ａは瞼が開いた状態で６０になるため、上述したしきい値Ａ０を用いて正確に瞼の開閉状態を判定することが可能となる。
このようにして瞼の開閉状態が判定された後、眠気判定部６０は、この判定結果に基づいて、利用者の眠気を判定する（ステップ１１６）。そして、必要に応じて警報部７０によって、眠気を感じている利用者に対して警報動作が行われる。
このように、本実施形態の眠気検知装置１では、運転者の顔が下向きになると瞼の開閉状態が確認しにくくなるが、反対に瞼の開閉に伴って瞼と眉毛との間の距離の変化が大きくなるため、瞼開閉度をこの距離に基づいて補正することにより、瞼の開閉状態の判定精度を上げることができる。
特に、顔の向きが第１の基準よりも下方を向いているときであって、瞼と眉毛の距離が第２の基準よりも短いときに、瞼開閉度を大きな値に補正することにより、顔が下向きのときに瞼が開いた状態を確実に判定することが可能となる。また、顔画像に含まれる上瞼と下瞼の幅の値を瞼開閉度として算出することにより、瞼の開閉状態を判定することが容易となる。瞼の開閉状態の判定精度の向上に伴って、その判定結果を用いた利用者の眠気判定の精度も向上させることが可能となる。
なお、本発明は上記実施形態に限定されるものではなく、本発明の要旨の範囲内において種々の変形実施が可能である。例えば、上述した実施形態では、開閉度補正部４０は、瞼と眉毛の距離Ｃが第２の基準よりも短いとき（Ｃ＜Ｃ０であって図３のステップ１１０の判定において肯定判断されたとき）に瞼開閉値Ａを補正するようにしたが、この第２の基準としての基準値Ｃ０を、顔角度検出部３２によって検出された顔角度Ｂに応じて変更するようにしてもよい。顔の下向きの程度が大きくなるほど、瞼を閉じた状態での瞼と眉毛の距離Ｃが短くなる場合には、基準値Ｃ０をその分小さな値に変更することが望ましい。このように、顔の角度に応じて瞼と眉毛の間の長さが変化することを考慮することにより、瞼の開閉状態の判定精度をさらに上げることができる。
また、上述した実施形態では、車両の運転者について瞼の開閉状態や眠気を判定したが、車両運転中以外の利用者についてこれらの判定を行うようにしてもよい。
上述したように、本発明によれば、顔が下向きになると瞼の開閉状態が確認しにくくなるが、反対に瞼の開閉に伴って瞼と眉毛との間の距離の変化が大きくなるため、瞼開閉度をこの距離に基づいて補正することにより、瞼の開閉状態の判定精度を上げることができる。
１ 眠気検知装置
１０ 瞼開閉判定装置
２０ カメラ
２２ 画像メモリ
３０ 開閉度算出部
３２ 顔角度検出部
３４ 距離算出部
４０ 開閉度補正部
５０ 瞼開閉判定部
６０ 眠気判定部
７０ 警報部

Claims (5)

  1. 利用者の顔を撮像する撮像手段と、
    前記撮像手段による撮像によって得られた顔画像に基づいて瞼開閉度を算出する開閉度算出手段と、
    前記顔画像に基づいて顔の角度を検出する顔角度検出手段と、
    前記顔画像に基づいて瞼と眉毛との距離を算出する距離算出手段と、
    前記瞼開閉度を所定のしきい値と比較することにより瞼開閉の有無を判定する瞼開閉判定手段と、
    前記顔角度検出手段によって検出された顔の角度と前記距離算出手段によって算出された距離とに基づいて前記瞼開閉度を補正する開閉度補正手段と、
    を備えることを特徴とする瞼開閉判定装置。
  2. 前記開閉度補正手段は、前記顔の角度に基づいて判定した顔の向きが第１の基準よりも下方を向いているときであって、前記距離算出手段によって算出された距離が第２の基準よりも短いときに、前記瞼開閉度を大きな値に補正することを特徴とする請求項１に記載の瞼開閉判定装置。
  3. 前記開閉度補正手段は、前記第２の基準を、前記顔の角度に基づいて変更することを特徴とする請求項２に記載の瞼開閉判定装置。
  4. 前記開閉度算出手段は、前記顔画像に含まれる上瞼と下瞼の幅の値を前記瞼開閉度として算出することを特徴とする請求項１〜３のいずれか一項に記載の瞼開閉判定装置。
  5. 請求項１〜４のいずれか一項に記載された前記瞼開閉判定手段による判定結果に基づいて利用者の眠気を判定する眠気判定手段を備えることを特徴とする眠気検知装置。
JP2017216842A 2017-11-10 2017-11-10 瞼開閉判定装置および眠気検知装置 Active JP6973928B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017216842A JP6973928B2 (ja) 2017-11-10 2017-11-10 瞼開閉判定装置および眠気検知装置
US16/152,073 US10664712B2 (en) 2017-11-10 2018-10-04 Eyelid opening/closing determination apparatus and drowsiness detection apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017216842A JP6973928B2 (ja) 2017-11-10 2017-11-10 瞼開閉判定装置および眠気検知装置

Publications (2)

Publication Number Publication Date
JP2019087170A JP2019087170A (ja) 2019-06-06
JP6973928B2 true JP6973928B2 (ja) 2021-12-01

Family

ID=66431245

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017216842A Active JP6973928B2 (ja) 2017-11-10 2017-11-10 瞼開閉判定装置および眠気検知装置

Country Status (2)

Country Link
US (1) US10664712B2 (ja)
JP (1) JP6973928B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10762786B1 (en) * 2018-01-09 2020-09-01 State Farm Mutual Automobile Insurance Company Vehicle collision alert system and method for detecting driving hazards
JP7127661B2 (ja) 2020-03-24 2022-08-30 トヨタ自動車株式会社 開眼度算出装置
WO2022009303A1 (ja) * 2020-07-07 2022-01-13 三菱電機株式会社 運転支援装置および運転支援方法
JP2022138279A (ja) * 2021-03-10 2022-09-26 株式会社Ｊｖｃケンウッド 目開閉判定装置および目開閉判定方法
WO2024047856A1 (ja) * 2022-09-02 2024-03-07 三菱電機株式会社 眠気推定装置および眠気推定方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3395344B2 (ja) * 1994-04-20 2003-04-14 日産自動車株式会社 画像処理装置およびそれを用いた居眠り警報装置
JP4840146B2 (ja) * 2007-01-09 2011-12-21 株式会社デンソー 眠気検知装置
JP4458146B2 (ja) * 2007-02-16 2010-04-28 株式会社デンソー 眠気判定装置およびプログラム
JP4259585B2 (ja) * 2007-03-08 2009-04-30 株式会社デンソー 眠気判定装置，プログラムおよび眠気判定方法
JP4307496B2 (ja) * 2007-03-19 2009-08-05 株式会社豊田中央研究所 顔部位検出装置及びプログラム
JP2009219555A (ja) * 2008-03-13 2009-10-01 Toyota Motor Corp 眠気検知装置、運転支援装置、眠気検知方法
JP5262243B2 (ja) * 2008-03-31 2013-08-14 アイシン精機株式会社 眼開閉判別装置、及びプログラム
JP4957711B2 (ja) * 2008-12-02 2012-06-20 オムロン株式会社 検出装置および方法、並びに、プログラム
JP4915413B2 (ja) * 2008-12-03 2012-04-11 オムロン株式会社 検出装置および方法、並びに、プログラム
JP5493593B2 (ja) * 2009-08-26 2014-05-14 アイシン精機株式会社 眠気検出装置、眠気検出方法、及びプログラム
JP5349350B2 (ja) * 2010-01-26 2013-11-20 トヨタ自動車株式会社 開眼度判定装置及び開眼度判定方法
JP5999013B2 (ja) * 2013-04-12 2016-09-28 株式会社デンソー 開眼状態判定装置
JP2016115117A (ja) * 2014-12-15 2016-06-23 アイシン精機株式会社 判定装置および判定方法
WO2018016837A1 (en) * 2016-07-18 2018-01-25 Samsung Electronics Co., Ltd. Method and apparatus for iris recognition

Also Published As

Publication number Publication date
US20190147268A1 (en) 2019-05-16
JP2019087170A (ja) 2019-06-06
US10664712B2 (en) 2020-05-26

Similar Documents

Publication Publication Date Title
JP6973928B2 (ja) 瞼開閉判定装置および眠気検知装置
US20160272217A1 (en) Two-step sleepy driving prevention apparatus through recognizing operation, front face, eye, and mouth shape
JP5207249B2 (ja) 運転者状態監視システム
US9526448B2 (en) State estimation device and state estimation program
CN108621794B (zh) 车辆的显示系统及车辆的显示系统的控制方法
JP5493593B2 (ja) 眠気検出装置、眠気検出方法、及びプログラム
JP5790762B2 (ja) 瞼検出装置
JP5177011B2 (ja) 開眼度特定装置
JP2017536589A (ja) 瞬間的な眠りを検出するデバイス、方法およびコンピュータプログラム
JP6090129B2 (ja) 視認領域推定装置
JP5304944B2 (ja) 画像処理装置及び眠気判定装置
JP2009219555A (ja) 眠気検知装置、運転支援装置、眠気検知方法
JP5349350B2 (ja) 開眼度判定装置及び開眼度判定方法
JP6747493B2 (ja) ドライバ状態判定装置
JP2013257691A (ja) 居眠り状態判定装置及び居眠り状態判定方法
US11161470B2 (en) Occupant observation device
JP2011125620A (ja) 生体状態検出装置
JP7046748B2 (ja) 運転者状態判定装置および運転者状態判定方法
JP5050794B2 (ja) 眠気検知装置、眠気検知方法
WO2022113275A1 (ja) 睡眠検出装置及び睡眠検出システム
US10945651B2 (en) Arousal level determination device
JP2017076180A (ja) 状態判定装置
US11077814B2 (en) Occupant eye(s) observation device
JP2019079285A (ja) 安全運転促進装置及び安全運転促進方法
US20240122513A1 (en) Awakening effort motion estimation device and awakening effort motion estimation method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211102

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211102

R150 Certificate of patent or registration of utility model

Ref document number: 6973928

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150