JP2016115118A - 下方視判定装置および下方視判定方法 - Google Patents
下方視判定装置および下方視判定方法 Download PDFInfo
- Publication number
- JP2016115118A JP2016115118A JP2014252941A JP2014252941A JP2016115118A JP 2016115118 A JP2016115118 A JP 2016115118A JP 2014252941 A JP2014252941 A JP 2014252941A JP 2014252941 A JP2014252941 A JP 2014252941A JP 2016115118 A JP2016115118 A JP 2016115118A
- Authority
- JP
- Japan
- Prior art keywords
- downward
- driver
- change
- eye
- shape
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
本実施形態では、車両1は、例えば、内燃機関(エンジン、図示されず)を駆動源とする自動車(内燃機関自動車)であってもよいし、電動機(モータ、図示されず)を駆動源とする自動車(電気自動車、燃料電池自動車等)であってもよいし、それらの双方を駆動源とする自動車(ハイブリッド自動車)であってもよい。また、車両1は、種々の変速装置を搭載することができるし、内燃機関や電動機を駆動するのに必要な種々の装置(システム、部品等)を搭載することができる。また、車両1における車輪3の駆動に関わる装置の方式や、数、レイアウト等は、種々に設定することができる。
ここで、bsは主成分得点ベクトルであり、これを形状パラメータと呼ぶ。すなわち、顔データ計測部402は、(1)式から形状パラメータbsを求める。
14 ECU
201 撮像装置
401 入力部
402 顔データ計測部
403 モデル生成部
404 照合部
405 形状パラメータ判定部
406 開眼度算出部
407 下方視判定部
408 処理部
410 三次元顔モデル
Claims (6)
- 被験者の三次元顔形状と、被験者の目の位置とが登録された三次元顔モデルを記憶する記憶部と、
撮像装置で運転者を撮像するごとに、撮像された前記運転者の撮像画像を、逐次、前記三次元顔形状と照合して、顔の向きを特定する照合部と、
前記顔の向きの下方への変化と、前記運転者の視線方向の下方への変化とが同期しているか否かを判断し、同期している場合に、前記運転者は下方視状態であると判定する下方視判定部と、
を備えた下方視判定装置。 - 前記運転者を撮像するごとに、前記撮像画像における前記目の開眼の状態を示す開眼度を算出する開眼度算出部を更に備え、
前記下方視判定部は、前記顔の向きの下方への変化と、前記運転者の前記視線方向としての前記開眼度の減少の変化とが同期しているか否かを判断し、同期している場合に、前記運転者は下方視状態であると判定する、
請求項1に記載の下方視判定装置。 - 前記三次元顔モデルは、さらに、前記目の形状の変化の状態と形状パラメータとが対応付けられた変化情報とが登録され、
前記三次元顔モデルにおける前記目の形状の変化の状態は、前記目の標準の状態から前記被験者の下方視の状態までの変化を示し、
前記下方視判定装置は、
前記形状パラメータを変化させて、前記撮像画像における前記目の状態に対応する形状パラメータを特定する形状パラメータ判定部、をさらに備え、
前記下方視判定部は、前記顔の向きの下方への変化と前記開眼度の減少の変化とが同期している場合に、特定された前記形状パラメータが下方視を示す範囲内であるか否かまたは特定された前記形状パラメータの時系列変化が下方視側へ所定量を超える変化であるか否かを判定し、前記形状パラメータが下方視を示す範囲内である場合または前記形状パラメータの時系列変化が下方視側へ所定量を超える変化である場合に、前記運転者は下方視状態であると判定する、
請求項2に記載の下方視判定装置。 - 前記運転者が下方視状態であると判定された場合には、警報を出力する処理部、
をさらに備えた請求項1〜3のいずれか一つに記載の下方視判定装置。 - 前記被験者の撮像画像に基づいて、前記三次元顔形状と前記目の位置とを含む三次元顔構造データと、前記目の形状の変化の状態と前記形状パラメータとが対応付けられた前記変化情報と、を求める計測部と、
計測された前記三次元顔構造データと前記変化情報とを、前記三次元顔モデルとして前記記憶部に登録するモデル生成部と、
をさらに備えた請求項3または4に記載の下方視判定装置。 - 下方視判定装置で実行される下方視判定方法であって、
前記下方視判定装置は、被験者の三次元顔形状と、被験者の目の位置とが登録された三次元顔モデルを記憶する記憶部、を備え、
運転者を撮像するごとに、撮像された前記運転者の撮像画像を、逐次、前記三次元顔形状と照合して、顔の向きを特定し、
前記顔の向きの下方への変化と、前記運転者の視線方向の下方への変化とが同期しているか否かを判断し、同期している場合に、前記運転者は下方視状態であると判定する、
ことを含む下方視判定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014252941A JP6572538B2 (ja) | 2014-12-15 | 2014-12-15 | 下方視判定装置および下方視判定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014252941A JP6572538B2 (ja) | 2014-12-15 | 2014-12-15 | 下方視判定装置および下方視判定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016115118A true JP2016115118A (ja) | 2016-06-23 |
JP6572538B2 JP6572538B2 (ja) | 2019-09-11 |
Family
ID=56141890
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014252941A Active JP6572538B2 (ja) | 2014-12-15 | 2014-12-15 | 下方視判定装置および下方視判定方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6572538B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018526045A (ja) * | 2015-06-22 | 2018-09-13 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 目開幅を利用してまばたき事象と計器視線とを区別する方法および装置 |
DE102018123114A1 (de) | 2017-11-20 | 2019-05-23 | Toyota Jidosha Kabushiki Kaisha | Bediengerät |
JP2021535499A (ja) * | 2018-08-27 | 2021-12-16 | アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited | 顔姿勢推定/3次元顔再構築方法、装置、及び電子デバイス |
WO2023017595A1 (ja) * | 2021-08-12 | 2023-02-16 | 三菱電機株式会社 | 乗員状態判定装置、乗員状態判定方法、および、乗員状態判定システム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003233803A (ja) * | 2002-02-12 | 2003-08-22 | Nissan Motor Co Ltd | 運転者の状態検出装置 |
JP2008171065A (ja) * | 2007-01-09 | 2008-07-24 | Denso Corp | 眠気検知装置 |
JP2008167806A (ja) * | 2007-01-09 | 2008-07-24 | Denso Corp | 眠気検知装置 |
JP2009015549A (ja) * | 2007-07-04 | 2009-01-22 | Omron Corp | 脇見検出装置および方法、並びに、プログラム |
JP2011048531A (ja) * | 2009-08-26 | 2011-03-10 | Aisin Seiki Co Ltd | 眠気検出装置、眠気検出方法、及びプログラム |
-
2014
- 2014-12-15 JP JP2014252941A patent/JP6572538B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003233803A (ja) * | 2002-02-12 | 2003-08-22 | Nissan Motor Co Ltd | 運転者の状態検出装置 |
JP2008171065A (ja) * | 2007-01-09 | 2008-07-24 | Denso Corp | 眠気検知装置 |
JP2008167806A (ja) * | 2007-01-09 | 2008-07-24 | Denso Corp | 眠気検知装置 |
JP2009015549A (ja) * | 2007-07-04 | 2009-01-22 | Omron Corp | 脇見検出装置および方法、並びに、プログラム |
JP2011048531A (ja) * | 2009-08-26 | 2011-03-10 | Aisin Seiki Co Ltd | 眠気検出装置、眠気検出方法、及びプログラム |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018526045A (ja) * | 2015-06-22 | 2018-09-13 | ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 目開幅を利用してまばたき事象と計器視線とを区別する方法および装置 |
DE102018123114A1 (de) | 2017-11-20 | 2019-05-23 | Toyota Jidosha Kabushiki Kaisha | Bediengerät |
US10890980B2 (en) | 2017-11-20 | 2021-01-12 | Toyota Jidosha Kabushiki Kaisha | Operating apparatus for estimating an operation intention intended by a face direction |
JP2021535499A (ja) * | 2018-08-27 | 2021-12-16 | アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited | 顔姿勢推定/3次元顔再構築方法、装置、及び電子デバイス |
JP7203954B2 (ja) | 2018-08-27 | 2023-01-13 | アリババ・グループ・ホールディング・リミテッド | 顔姿勢推定/3次元顔再構築方法、装置、及び電子デバイス |
US11941753B2 (en) | 2018-08-27 | 2024-03-26 | Alibaba Group Holding Limited | Face pose estimation/three-dimensional face reconstruction method, apparatus, and electronic device |
WO2023017595A1 (ja) * | 2021-08-12 | 2023-02-16 | 三菱電機株式会社 | 乗員状態判定装置、乗員状態判定方法、および、乗員状態判定システム |
JPWO2023017595A1 (ja) * | 2021-08-12 | 2023-02-16 | ||
JP7378681B2 (ja) | 2021-08-12 | 2023-11-13 | 三菱電機株式会社 | 乗員状態判定装置、乗員状態判定方法、および、乗員状態判定システム |
Also Published As
Publication number | Publication date |
---|---|
JP6572538B2 (ja) | 2019-09-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3033999B1 (en) | Apparatus and method for determining the state of a driver | |
EP3488382B1 (en) | Method and system for monitoring the status of the driver of a vehicle | |
JP2016115117A (ja) | 判定装置および判定方法 | |
CN112590794A (zh) | 确定车辆驾驶员接管车辆控制的能力估计值的方法和装置 | |
US9928404B2 (en) | Determination device, determination method, and non-transitory storage medium | |
US9606623B2 (en) | Gaze detecting apparatus and method | |
CN111665513B (zh) | 面部特征部检测装置、面部特征部检测方法 | |
CN110765807A (zh) | 驾驶行为分析、处理方法、装置、设备和存储介质 | |
JP7290930B2 (ja) | 乗員モデリング装置、乗員モデリング方法および乗員モデリングプログラム | |
JP6572538B2 (ja) | 下方視判定装置および下方視判定方法 | |
JP2020126638A (ja) | 運転者の状態に応じて特化型のキャリブレーションのために運転者補助装置を自動で調整する方法及び装置 | |
JP2016115120A (ja) | 開閉眼判定装置および開閉眼判定方法 | |
JP6479272B1 (ja) | 視線方向較正装置、視線方向較正方法および視線方向較正プログラム | |
JP2017199302A (ja) | 判定装置、判定方法、判定プログラム及び記録媒体 | |
JPWO2019163124A1 (ja) | 三次元位置推定装置及び三次元位置推定方法 | |
US7599546B2 (en) | Image information processing system, image information processing method, image information processing program, and automobile | |
JP2016192177A (ja) | 車両検出システム、車両検出装置、車両検出方法、及び車両検出プログラム | |
WO2017173480A1 (en) | Method and system of distinguishing between a glance event and an eye closure event | |
CN113906442A (zh) | 活动识别方法和设备 | |
JP6459856B2 (ja) | 車両運転支援装置、車両運転支援方法、およびプログラム | |
WO2017217044A1 (ja) | 視認方向推定装置 | |
JPWO2019123582A1 (ja) | 物体情報生成装置及び物体情報生成プログラム | |
JP2019175210A (ja) | 口形状検出装置 | |
KR102486161B1 (ko) | 차량, 차량의 제어 방법 및 영상 탐색 장치 | |
JP7348005B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171110 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181119 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190716 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190729 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6572538 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |