JP6769077B2 - 顔向き特定装置及び顔向き特定方法 - Google Patents
顔向き特定装置及び顔向き特定方法 Download PDFInfo
- Publication number
- JP6769077B2 JP6769077B2 JP2016078054A JP2016078054A JP6769077B2 JP 6769077 B2 JP6769077 B2 JP 6769077B2 JP 2016078054 A JP2016078054 A JP 2016078054A JP 2016078054 A JP2016078054 A JP 2016078054A JP 6769077 B2 JP6769077 B2 JP 6769077B2
- Authority
- JP
- Japan
- Prior art keywords
- orientation
- face
- light emitting
- driver
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
[顔向き特定装置1の概要]
図1は、本実施形態に係る顔向き特定装置1の概要について説明するための図である。顔向き特定装置1は、車両の運転席に設置されたカメラ2が撮影した撮像画像に基づいて、運転者の顔の向きを特定する。運転者の頭部には、発光素子または光を反射するミラー等から構成される発光部3が設けられた装着部材Aが装着されている。発光素子は、例えば、電源とつながれたLED(Light Emitting Diode)素子である。装着部材Aは、例えば、つば付き帽子又はつば付き帽子型サンバイザであるが、つばがない帽子や鉢巻状の部材であってもよい。
以下に、実施形態に係る顔向き特定装置1の構成を具体的に説明する。図2は、実施形態に係る顔向き特定装置1の構成を示す図である。図2に示すように、顔向き特定装置1は、制御部11と記憶部12とを有する。記憶部12は、ROM(Read Only Memory)、RAM(Random Access Memory)及びハードディスク等の記憶媒体である。記憶部12は、制御部11が実行するプログラム、及び発光部3の向きと運転者の顔の向きとの関係を示す関係情報等のデータを記憶する。
続いて、図4および図5を参照しながら、特徴特定部112が顔の特徴を特定した結果の精度が所定のレベルより低い場合に、顔向き特定部114が関係情報に基づいて運転者の顔の向きを特定する方法を具体的に説明する。図4及び図5は、顔向き特定部114が顔の向きを特定する方法について説明するための図である。ここでは、顔向き特定部114が顔の向きを特定するために参照する関係情報を基準情報と称する。基準情報とは、顔向き特定部114が顔の向きを特定する時刻に最も近い時刻の関係情報である。
図6は、顔向き特定装置1が行う信号処理の流れを示すフローチャートである。先ず、画像取得部111はカメラ2から撮像画像を取得する(S1)。続いて、特徴特定部112は、顔向き特定装置1は取得した撮像画像に基づいて、運転者の顔の特徴を精度よく特定できるか否かを判定する(S2)。
顔向き特定装置1において、顔向き特定部114は、特徴特定部112が顔の特徴を特定できた場合に、顔の特徴から特定する顔の向きと発光部3の位置から特定する顔の向きとを重み付けして顔の向きを特定してもよい。顔向き特定部114は、例えば、特徴特定部112が顔の特徴を特定した精度に基づいて重み付けを行う。
上記の説明において、顔向き特定部114は、特徴特定部112が顔の特徴を特定できた場合に関係情報を記憶部12に記録するものとした。この際、顔向き特定部114は、特徴特定部112が顔の特徴を特定できた時の発光部3の向きが、特徴特定部112が特定した顔の向きに対して所定の範囲内にあることを条件として、関係情報を記憶部12に記録してもよい。また、発光部3の向きが、顔の向きに対して所定の範囲内に入っていない場合、顔向き特定部114は、装着部材Aを正しく装着することを促す警告情報を運転者に通知してもよい。このようにすることで、運転者が装着部材Aを適切に装着していなかったり、装着部材Aを取り外していたりする状態が長く継続しないようにすることができる。
上述した顔向き特定装置1によれば、運転者の顔の特徴と発光部3の位置との双方に基づいて顔の向きを特定できる。例えば、顔向き特定部114は、特徴特定部112が顔の特徴を特定した結果の精度が所定のレベルより低い場合に、位置特定部113が特定した発光部3の向きに関連付けて記憶部12に記憶された顔の向きを参照することにより、顔の向きを特定する。従って、特徴特定部112が運転者の顔の特徴を特定できない状態であっても、発光部3の向きに基づいて運転者の顔の特徴を特定できるので、顔向き特定装置1は、顔の特徴と発光部3の位置のどちらか一方のみに基づいて顔の向きを特定するよりも精度よく顔の向きを特定できる。
2 カメラ
3 発光部
11 制御部
111 画像取得部
112 特徴特定部
113 位置特定部
114 顔向き特定部
12 記憶部
A 装着部材
Claims (7)
- 運転者の顔と、運転者が頭部に装着している装着部材に設けられた発光素子とを撮影することにより生成された撮像画像を取得する画像取得部と、
前記撮像画像に基づいて前記運転者の顔の特徴を特定する特徴特定部と、
前記撮像画像に基づいて前記発光素子の位置を特定する位置特定部と、
前記位置特定部が特定した前記発光素子の位置に基づいて前記発光素子の向きを特定し、前記特徴特定部が特定した前記運転者の顔の特徴と前記発光素子の向きとに基づいて前記運転者の顔の向きを特定する顔向き特定部と、
を有し、
前記顔向き特定部は、前記特徴特定部が前記顔の特徴を特定した精度が所定の値よりも高い場合に、前記顔の特徴が示す前記顔の向きと前記発光素子の向きとの関係を示す関係情報を記憶部に記憶させることによりキャリブレーションを実行し、前記キャリブレーションを実行した後に前記関係情報を用いることにより、前記発光素子の位置に基づいて特定した前記発光素子の向きに対応する前記顔の向きを特定することを特徴とする顔向き特定装置。 - 前記顔向き特定部は、前記特徴特定部が前記顔の特徴を特定した結果の精度が所定のレベルより低い場合に、前記発光素子の向きに関連付けて前記記憶部に記憶された前記顔の向きを参照することにより、前記顔の向きを特定する、
請求項1に記載の顔向き特定装置。 - 前記顔向き特定部は、所定のタイミングにおいて、前記特徴特定部が特定した前記顔の特徴に基づく前記顔の向きと前記発光素子の向きとの関係を示す関係情報を前記記憶部に記憶させるか否か判定する、
請求項2に記載の顔向き特定装置。 - 前記顔向き特定部は、前記特徴特定部が前記顔の特徴を特定した精度が所定の条件を満たす場合に、前記関係情報を前記記憶部に記憶させることを特徴とする、
請求項3に記載の顔向き特定装置。 - 前記顔向き特定部は、前記特徴特定部が特定した前記顔の特徴に基づく前記顔の向きと前記発光素子の向きとの関係が変化してから所定の時間が経過した後に、前記関係情報を記憶させることを特徴とする、
請求項3又は4に記載の顔向き特定装置。 - 前記顔向き特定部は、前記特徴特定部が前記顔の特徴を特定した精度に基づいて、前記顔の向きの特定に用いる前記顔の特徴の重み及び前記発光素子の向きの重みを決定することを特徴とする、
請求項1から5のいずれか1項に記載の顔向き特定装置。 - コンピュータが実行する、
運転者の顔と、運転者が頭部に装着している装着部材に設けられた発光素子とを撮影することにより生成された撮像画像を取得するステップと、
前記撮像画像に基づいて前記運転者の顔の特徴を特定するステップと、
前記撮像画像に基づいて前記発光素子の位置を特定するステップと、
前記発光素子の位置に基づいて前記発光素子の向きを特定するステップと、
前記顔の特徴を特定した精度が所定の値よりも高い場合に、前記顔の特徴が示す前記顔の向きと前記発光素子の向きとの関係を示す関係情報を記憶部に記憶させることによりキャリブレーションを実行するステップと、
前記キャリブレーションを実行するステップの後に前記関係情報を用いることにより、前記運転者の顔の特徴を特定した結果と、特定した前記発光素子の向きとに基づいて、前記運転者の顔の向きを特定するステップと、
を有することを特徴とする顔向き特定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016078054A JP6769077B2 (ja) | 2016-04-08 | 2016-04-08 | 顔向き特定装置及び顔向き特定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016078054A JP6769077B2 (ja) | 2016-04-08 | 2016-04-08 | 顔向き特定装置及び顔向き特定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017188017A JP2017188017A (ja) | 2017-10-12 |
JP6769077B2 true JP6769077B2 (ja) | 2020-10-14 |
Family
ID=60044947
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016078054A Active JP6769077B2 (ja) | 2016-04-08 | 2016-04-08 | 顔向き特定装置及び顔向き特定方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6769077B2 (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10307026A (ja) * | 1997-05-08 | 1998-11-17 | Matsushita Electric Ind Co Ltd | 位置検出装置 |
JP2001347881A (ja) * | 2000-06-08 | 2001-12-18 | Stanley Electric Co Ltd | 運転者の顔方向検出装置 |
JP3952870B2 (ja) * | 2002-06-12 | 2007-08-01 | 株式会社東芝 | 音声伝送装置、音声伝送方法及びプログラム |
JP4151341B2 (ja) * | 2002-08-02 | 2008-09-17 | 日産自動車株式会社 | 顔状態検出装置 |
WO2012046276A1 (ja) * | 2010-10-06 | 2012-04-12 | 三菱電機株式会社 | Avシステム |
-
2016
- 2016-04-08 JP JP2016078054A patent/JP6769077B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017188017A (ja) | 2017-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6695503B2 (ja) | 車両の運転者の状態を監視するための方法及びシステム | |
US9694680B2 (en) | System and method for determining drowsy state of driver | |
US9714037B2 (en) | Detection of driver behaviors using in-vehicle systems and methods | |
CN106687037B (zh) | 用于检测瞬时睡眠的设备、方法和计算机程序 | |
US7889244B2 (en) | Image processing apparatus | |
US9390337B2 (en) | Alertness level detection apparatus and alertness level detection method | |
García et al. | Driver monitoring based on low-cost 3-D sensors | |
JP2008146356A (ja) | 視線方向推定装置及び視線方向推定方法 | |
US10809800B2 (en) | Robust convergence signal | |
US10091466B2 (en) | Visual perception determination system and method | |
CN105554439A (zh) | 视频处理所使用的至少一个参数的修改 | |
WO2013008302A1 (ja) | 赤目判定装置 | |
JP2008242725A (ja) | 画像データ記録システム、及び、集積回路装置 | |
CN110063734B (zh) | 疲劳检测方法、装置、系统及疲劳检测头盔 | |
US20200372677A1 (en) | Staring distance determination method and device | |
US20200234161A1 (en) | Abnormality detection device and abnormality detection method | |
JP6544394B2 (ja) | 画像記録装置、画像記録方法および画像記録プログラム | |
JP6769077B2 (ja) | 顔向き特定装置及び顔向き特定方法 | |
JP2008128867A (ja) | タイヤ向き特定装置 | |
WO2023108364A1 (zh) | 驾驶员状态检测方法、装置及存储介质 | |
JP6989025B2 (ja) | 生体認証装置、偽造判別プログラム及び偽造判別方法 | |
CN107273789B (zh) | 用于提供警告信号以识别将面临的微睡的方法 | |
JP2010026657A (ja) | 運転者状態検出装置 | |
JP2009169740A (ja) | 顔画像処理装置 | |
JP2014123815A (ja) | 画像処理装置、画像処理方法及び記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190327 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200204 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200131 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200825 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200907 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6769077 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |