JP6627787B2 - ドライバ状態検出装置 - Google Patents
ドライバ状態検出装置 Download PDFInfo
- Publication number
- JP6627787B2 JP6627787B2 JP2017006120A JP2017006120A JP6627787B2 JP 6627787 B2 JP6627787 B2 JP 6627787B2 JP 2017006120 A JP2017006120 A JP 2017006120A JP 2017006120 A JP2017006120 A JP 2017006120A JP 6627787 B2 JP6627787 B2 JP 6627787B2
- Authority
- JP
- Japan
- Prior art keywords
- driver
- image
- vehicle
- steering
- determination unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 54
- 230000005856 abnormality Effects 0.000 description 16
- 238000000034 method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 7
- 238000013459 approach Methods 0.000 description 3
- 210000004556 brain Anatomy 0.000 description 3
- 230000029058 respiratory gaseous exchange Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W40/09—Driving style or behaviour
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
- B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
- B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0818—Inactivity or incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Description
以下、図1〜図5を参照して、本発明の第一実施形態について説明する。図1は、本発明の第一実施形態に係るドライバ状態検出装置の構成を示すブロック図である。ドライバ状態検出装置1は、車両に搭載され、車両のドライバの状態を検出する。ドライバ状態検出装置1はドライバモニタカメラ10と電子制御ユニット(ECU)20とを備える。
第二実施形態に係るドライバ状態検出装置の構成及び制御は、以下に説明する点を除いて、基本的に第一実施形態に係るドライバ状態検出装置の構成及び制御と同様である。このため、以下、本発明の第二実施形態について、第一実施形態と異なる部分を中心に説明する。
第三実施形態に係るドライバ状態検出装置の構成及び制御は、以下に説明する点を除いて、基本的に第一実施形態に係るドライバ状態検出装置の構成及び制御と同様である。このため、以下、本発明の第三実施形態について、第一実施形態と異なる部分を中心に説明する。
第四実施形態に係るドライバ状態検出装置の構成及び制御は、以下に説明する点を除いて、基本的に第一実施形態に係るドライバ状態検出装置の構成及び制御と同様である。このため、以下、本発明の第四実施形態について、第一実施形態と異なる部分を中心に説明する。
10 ドライバモニタカメラ
20 電子制御ユニット(ECU)
21 ドライバ状態判定部
22 車両制御部
30 ステアリングタッチセンサ
80 車両
Claims (6)
- 車内に設けられると共に、車両のドライバを撮影してドライバ画像を生成するドライバモニタカメラと、
前記ドライバ画像に基づいて前記ドライバの状態を判定するドライバ状態判定部と
を備え、
前記ドライバ状態判定部は、前記ドライバ画像に基づいて前記ドライバのステアリングへの倒れ込みを検出した場合に前記ドライバが運転不能状態にあると判定し、
前記ドライバ状態判定部は、前記ドライバ画像のコントラストが、前記ドライバが前記ドライバモニタカメラの前方にいないときに前記ドライバモニタカメラによって生成される車内画像のコントラストよりも低い場合に前記ステアリングへの倒れ込みを検出する、ドライバ状態検出装置。 - 車内に設けられると共に、車両のドライバを撮影してドライバ画像を生成するドライバモニタカメラと、
前記ドライバ画像に基づいて前記ドライバの状態を判定するドライバ状態判定部と
を備え、
前記ドライバ状態判定部は、前記ドライバ画像に基づいて前記ドライバのステアリングへの倒れ込みを検出した場合に前記ドライバが運転不能状態にあると判定し、
前記ドライバ状態判定部は、前記ドライバ画像において前記ドライバの顔を検出できず且つ前記ステアリングのホーンボタンが押圧されていることを検出した場合に前記ステアリングへの倒れ込みを検出する、ドライバ状態検出装置。 - 前記ドライバ状態判定部は、前記ドライバ画像のコントラストが、前記ドライバが前記ドライバモニタカメラの前方にいないときに前記ドライバモニタカメラによって生成される車内画像のコントラストよりも低い場合に前記ステアリングへの倒れ込みを検出する、請求項2に記載のドライバ状態検出装置。
- 前記ドライバ状態判定部は、前記倒れ込みの検出を開始する前に、前記ドライバモニタカメラによる撮影によって前記車内画像のコントラストを更新する、請求項1又は3に記載のドライバ状態検出装置。
- 前記ドライバ状態判定部は、輝度差が所定値以下の領域の面積の割合が前記車内画像よりも前記ドライバ画像において高い場合に前記ドライバ画像のコントラストが前記車内画像のコントラストよりも低いと判定する、請求項1、3又は4に記載のドライバ状態検出装置。
- 前記ドライバの前記ステアリングへの接触を検出するステアリングタッチセンサを更に備え、
前記ドライバ状態判定部は、前記ドライバ画像において前記ドライバの顔を検出できず且つ前記ステアリングタッチセンサによって前記ステアリングへの接触が検出された場合に前記ステアリングへの倒れ込みを検出する、請求項1から5のいずれか1項に記載のドライバ状態検出装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017006120A JP6627787B2 (ja) | 2017-01-17 | 2017-01-17 | ドライバ状態検出装置 |
US15/870,485 US10525981B2 (en) | 2017-01-17 | 2018-01-12 | Driver condition detection system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017006120A JP6627787B2 (ja) | 2017-01-17 | 2017-01-17 | ドライバ状態検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018116426A JP2018116426A (ja) | 2018-07-26 |
JP6627787B2 true JP6627787B2 (ja) | 2020-01-08 |
Family
ID=62838692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017006120A Active JP6627787B2 (ja) | 2017-01-17 | 2017-01-17 | ドライバ状態検出装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10525981B2 (ja) |
JP (1) | JP6627787B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102017201405B4 (de) * | 2017-01-30 | 2018-12-13 | Audi Ag | Verfahren zum Betreiben eines Kraftfahrzeugs |
US20190272755A1 (en) * | 2018-03-02 | 2019-09-05 | Resilience Magnum IP, LLC | Intelligent vehicle and method for using intelligent vehicle |
JP6973298B2 (ja) * | 2018-05-31 | 2021-11-24 | トヨタ自動車株式会社 | 物体監視装置 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3452685B2 (ja) * | 1995-05-10 | 2003-09-29 | 三菱電機株式会社 | 顔画像の処理装置 |
JP2003308533A (ja) | 2002-04-17 | 2003-10-31 | Mitsubishi Electric Corp | ドライバの顔画像処理装置 |
JP3093959U (ja) * | 2002-11-11 | 2003-05-23 | 宣夫 芦立 | 非常事態伝達システムを内蔵した箱体 |
JP4509042B2 (ja) | 2006-02-13 | 2010-07-21 | 株式会社デンソー | 自動車用もてなし情報提供システム |
JP2008037218A (ja) * | 2006-08-03 | 2008-02-21 | Aisin Aw Co Ltd | 車両制御装置 |
US20080166052A1 (en) | 2007-01-10 | 2008-07-10 | Toshinobu Hatano | Face condition determining device and imaging device |
JP2009176112A (ja) | 2008-01-25 | 2009-08-06 | Mazda Motor Corp | 乗員の視線検出装置 |
JP2009294753A (ja) | 2008-06-03 | 2009-12-17 | Toyota Motor Corp | 画像処理装置および画像処理方法 |
US9460601B2 (en) | 2009-09-20 | 2016-10-04 | Tibet MIMAR | Driver distraction and drowsiness warning and sleepiness reduction for accident avoidance |
JP5184596B2 (ja) | 2010-09-03 | 2013-04-17 | 本田技研工業株式会社 | 脇見判定装置 |
JP5288045B2 (ja) * | 2011-07-11 | 2013-09-11 | トヨタ自動車株式会社 | 車両の緊急退避装置 |
JP5335038B2 (ja) | 2011-07-15 | 2013-11-06 | 日立オムロンターミナルソリューションズ株式会社 | 自動処理装置 |
JP2014019301A (ja) | 2012-07-18 | 2014-02-03 | Toyota Motor Corp | 緊急退避装置 |
US9751534B2 (en) * | 2013-03-15 | 2017-09-05 | Honda Motor Co., Ltd. | System and method for responding to driver state |
JP6056746B2 (ja) | 2013-12-18 | 2017-01-11 | 株式会社デンソー | 顔画像撮影装置、および運転者状態判定装置 |
JP6497158B2 (ja) | 2014-05-16 | 2019-04-10 | 株式会社リコー | 表示装置、移動体 |
DE112015002948B4 (de) | 2014-06-23 | 2024-07-11 | Denso Corporation | Vorrichtung zum erfassen eines fahrunvermögenzustands eines fahrers |
JP6350145B2 (ja) | 2014-09-09 | 2018-07-04 | 株式会社デンソーアイティーラボラトリ | 顔向き検出装置及び車両用警告システム |
JP6693427B2 (ja) * | 2017-01-18 | 2020-05-13 | トヨタ自動車株式会社 | ドライバ状態検出装置 |
JP6915502B2 (ja) * | 2017-11-09 | 2021-08-04 | トヨタ自動車株式会社 | ドライバ状態検出装置 |
-
2017
- 2017-01-17 JP JP2017006120A patent/JP6627787B2/ja active Active
-
2018
- 2018-01-12 US US15/870,485 patent/US10525981B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018116426A (ja) | 2018-07-26 |
US20180201274A1 (en) | 2018-07-19 |
US10525981B2 (en) | 2020-01-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6341055B2 (ja) | 車載制御装置 | |
JP6331875B2 (ja) | 車載制御装置 | |
KR101646401B1 (ko) | 운전자의 졸음상태 판단 시스템 및 그 판단 방법 | |
US10604160B2 (en) | Driver condition detection system | |
JP4788624B2 (ja) | 不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラム | |
JP6627787B2 (ja) | ドライバ状態検出装置 | |
JP2008199515A (ja) | 同乗者着座姿勢検出・判定装置及び方法 | |
US9758098B2 (en) | Vehicle periphery monitoring device | |
JP6730096B2 (ja) | 乗員状態監視装置 | |
JP2009244959A (ja) | 運転支援装置、運転支援方法 | |
JP2020024532A (ja) | 脇見運転検出装置 | |
JP2018128834A (ja) | ドライバ状態検出装置 | |
US20180232588A1 (en) | Driver state monitoring device | |
EP3348453B1 (en) | Control system of vehicle | |
JP6775134B2 (ja) | ドライバ状態検出装置 | |
JP2008305190A (ja) | 居眠り警告装置及び自動車 | |
US11685372B2 (en) | Processing unit and processing method for collision warning system, collision warning system, and motorcycle | |
JP2019087018A (ja) | ドライバモニタシステム | |
JP2021196941A (ja) | ドライバ監視システム | |
JP6962141B2 (ja) | ドライバ状態検出装置 | |
KR102518576B1 (ko) | 차간 거리 경고 시스템을 위한 처리 유닛 및 처리 방법, 차간 거리 경고 시스템, 및 모터사이클 | |
JP6579496B2 (ja) | 運転者状態推定装置 | |
JP6852407B2 (ja) | ドライバ状態検出装置 | |
WO2020179656A1 (ja) | 運転者監視装置 | |
JP2016020211A (ja) | 荷室監視装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180724 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190611 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190612 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190806 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191118 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6627787 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |