JP2022077282A - 警報システム - Google Patents
警報システム Download PDFInfo
- Publication number
- JP2022077282A JP2022077282A JP2020188062A JP2020188062A JP2022077282A JP 2022077282 A JP2022077282 A JP 2022077282A JP 2020188062 A JP2020188062 A JP 2020188062A JP 2020188062 A JP2020188062 A JP 2020188062A JP 2022077282 A JP2022077282 A JP 2022077282A
- Authority
- JP
- Japan
- Prior art keywords
- alarm
- driver
- face
- state
- threshold value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 claims abstract description 43
- 238000000034 method Methods 0.000 claims description 70
- 230000004913 activation Effects 0.000 claims description 5
- 230000000391 smoking effect Effects 0.000 description 13
- 230000001133 acceleration Effects 0.000 description 5
- 230000005484 gravity Effects 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 206010048232 Yawning Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
Images
Landscapes
- Alarm Systems (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Emergency Alarm Devices (AREA)
Abstract
Description
[1.第1実施形態]
[1-1.構成]
図1A及び図1Bに示す警報システム1は、車両内に配置される車載器の一種である。警報システム1は、撮影部2と、処理部3とを備える。
撮影部2は、車両内を撮影するように構成されている。撮影部2は、公知のカメラで構成される。撮影部2は、少なくとも運転中の運転手の顔を含む画像を取得可能な位置及び姿勢で車両内に配置される。
処理部3は、撮影部2が撮影した撮影画像に基づいて運転手の状態判定等の処理を行うように構成されている。
検出部31は、撮影部2が撮影した撮影画像から人物の顔を検出するように構成されている。
記憶部32は、検出部31が検出した運転手の顔を基準顔として記憶するように構成されている。
運転手判定部33は、基準顔に基づいて、撮影部2が撮影した撮影画像から検出部31が検出した判定対象人物の顔が、運転手の顔であるかどうかを判定する。
警報判定部34は、撮影画像に基づいて運転手への警報の必要を判定するように構成されている。なお、警報判定部34は、運転手判定部33が判定対象人物を運転手と判定しなかった場合には、以下の危険状態の判定は行わない。
事前処理では、警報判定部34は、顔の検出が一定時間成功し、かつ顔の検出精度が一定値以上である場合に、危険状態の判定(つまり第1処理、第2処理及び第3処理)が実行可能な状態であると判定する。
警報判定部34が第1処理で判定する危険状態には、閉眼状態と、疲れ状態とが含まれる。
「車両の速度」は、閉眼条件で使用されるパラメータと同じである。第10閾値は、閉眼条件の第5閾値と同じであり、例えば30km/hである。
第2処理は、運転手が目を細めている(又は閉じている)笑顔状態が、閉眼状態又は疲れ状態と誤判定されることを回避するために実行される。
警報判定部34が第3処理で判定する危険状態には、脇見状態と、携帯端末利用状態と、喫煙状態とが含まれる。これらの危険状態の判定は、第2処理によってキャンセルされない。
「車両の速度」は、閉眼条件で使用されるパラメータと同じである。第23閾値は、閉眼条件の第5閾値と同じであり、例えば30km/hである。
警報出力部35は、運転手判定部33により判定対象人物が運転手と判定され、かつ、警報判定部34により警報が必要と判定された場合(つまり危険状態が判定された場合)に警報信号を出力するように構成されている。
以下、図6のフロー図を参照しつつ、警報システム1が実行する処理の一例について説明する。
図7に示すキャリブレーション処理では、警報システム1は、まず車両内の画像を撮影する(ステップS210)。
図8に示す運転手判定処理では、警報システム1は、まず撮影部2の撮影画像から顔を検出する(ステップS310)。
図9に示す警報判定処理では、警報システム1は、まず撮影部2の撮影画像から顔を検出する(ステップS410)。
状態判定処理は、閉眼状態を判定するイベント(図10)と、疲れ状態を判定するイベント(図11)と、脇見状態を判定するイベント(図12)と、携帯端末利用状態を判定するイベント(図13)と、喫煙状態を判定するイベント(図14)とを含む。これらのイベントは並列して行われる。
以上詳述した実施形態によれば、以下の効果が得られる。
(1a)運転手の目の状態に基づいて危険状態を判定する第1処理に加えて、口の変形量が大きいときに非危険状態であると判定する第2処理を行うことで、運転手が笑顔状態の場合に警報をキャンセルすることができる。また、非危険状態と判定された場合に第1処理を一定時間キャンセルすることで、笑顔状態に対して警報が発せられることが抑制される。そのため、危険状態に対する警報の精度が高められる。
(1c)疲労状態の判定により、運転手が疲労している状態に対して的確に警報を通知できる。
以上、本開示の実施形態について説明したが、本開示は、上記実施形態に限定されることなく、種々の形態を採り得ることは言うまでもない。
20…警報装置、30…外部記憶装置、31…検出部、32…記憶部、
33…運転手判定部、34…警報判定部、35…警報出力部。
Claims (5)
- 車両内を撮影するように構成された撮影部と、
前記撮影部が撮影した撮影画像から人物の顔を検出するように構成された検出部と、
前記検出部が検出した運転手の顔を基準顔として記憶するように構成された記憶部と、
前記撮影画像に基づいて前記運転手への警報の必要を判定するように構成された警報判定部と、
前記警報判定部により前記警報が必要と判定された場合に警報信号を出力するように構成された警報出力部と、
を備え、
前記警報判定部は、
前記撮影画像における少なくとも前記運転手の目の状態に基づいて前記警報が必要な危険状態を判定する第1処理と、
前記撮影画像における前記運転手の口の変形量が閾値以上の場合に前記警報が不要な非危険状態であると判定し、かつ、前記非危険状態であると判定した場合に前記第1処理を一定時間キャンセルする第2処理と、
を実行する、警報システム。 - 請求項1に記載の警報システムであって、
前記警報判定部は、前記第1処理において、前記撮影画像における前記運転手の目の高さが閾値以下である状態が一定時間継続し、前記撮影画像における前記運転手の顔の角度が閾値以下であり、かつ、前記車両の速度が閾値以上である場合に、前記危険状態であると判定する、警報システム。 - 請求項1又は請求項2に記載の警報システムであって、
前記警報判定部は、前記第1処理において、前記撮影画像における前記運転手の目の高さが閾値以下である状態が一定時間継続し、前記撮影画像における前記運転手の口の大きさが閾値以上であり、前記撮影画像における前記運転手の顔の角度が閾値以下であり、かつ、前記車両の速度が閾値以上であると共に前記警報判定部の起動から一定時間が経過している場合に、前記危険状態であると判定する、警報システム。 - 請求項1から請求項3のいずれか1項に記載の警報システムであって、
前記警報出力部は、前記警報信号を出力した後、一定時間経過するまでは新たな前記警報信号を出力しない、警報システム。 - 請求項1から請求項4のいずれか1項に記載の警報システムであって、
前記基準顔の大きさに対する前記検出部が検出した判定対象人物の顔の大きさの比が閾値以上であり、かつ、前記判定対象人物の顔の中心座標と前記基準顔の中心座標との距離が前記基準顔の幅以内のときに、前記判定対象人物を前記運転手と判定するように構成された運転手判定部をさらに備え、
前記警報出力部は、前記運転手判定部により前記判定対象人物が前記運転手と判定され、かつ、前記警報判定部により前記警報が必要と判定された場合に前記警報信号を出力する、警報システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020188062A JP2022077282A (ja) | 2020-11-11 | 2020-11-11 | 警報システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020188062A JP2022077282A (ja) | 2020-11-11 | 2020-11-11 | 警報システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022077282A true JP2022077282A (ja) | 2022-05-23 |
Family
ID=81653966
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020188062A Pending JP2022077282A (ja) | 2020-11-11 | 2020-11-11 | 警報システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022077282A (ja) |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1040481A (ja) * | 1996-07-23 | 1998-02-13 | Mitsubishi Electric Corp | 覚醒低下警報装置 |
JPH11189066A (ja) * | 1997-12-25 | 1999-07-13 | Nippon Soken Inc | 車両用警報装置 |
JP2003123196A (ja) * | 2001-10-10 | 2003-04-25 | Denso Corp | 車両の周辺監視装置及びプログラム |
JP2005108033A (ja) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | 運転者状況判定装置および運転者状況判定方法 |
JP2008204107A (ja) * | 2007-02-19 | 2008-09-04 | Toyota Motor Corp | 不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラム |
JP2008226163A (ja) * | 2007-03-15 | 2008-09-25 | Honda Motor Co Ltd | 車両の安全装置 |
JP2008242602A (ja) * | 2007-03-26 | 2008-10-09 | Denso Corp | 眠気警報装置、及びプログラム |
JP2010009093A (ja) * | 2008-06-24 | 2010-01-14 | Toyota Motor Corp | 人物状態判定装置 |
US20120161954A1 (en) * | 2010-12-28 | 2012-06-28 | Automotive Research & Testing Center | Method and system for detecting a driving state of a driver in a vehicle |
JP2013079977A (ja) * | 2013-01-04 | 2013-05-02 | Yupiteru Corp | 駐車禁止エリア報知装置及びプログラム |
JP2019137175A (ja) * | 2018-02-08 | 2019-08-22 | 株式会社Subaru | 車両の制御装置及び車両の制御方法 |
JP2019185557A (ja) * | 2018-04-13 | 2019-10-24 | オムロン株式会社 | 画像解析装置、方法およびプログラム |
WO2020173213A1 (zh) * | 2017-08-10 | 2020-09-03 | 北京市商汤科技开发有限公司 | 车内人员危险动作识别方法和装置、电子设备、存储介质 |
JP2020157938A (ja) * | 2019-03-27 | 2020-10-01 | 三菱電機株式会社 | 車載監視制御装置 |
JP2020162873A (ja) * | 2019-03-29 | 2020-10-08 | 株式会社エクォス・リサーチ | 脈波検出装置、及び脈波検出プログラム |
-
2020
- 2020-11-11 JP JP2020188062A patent/JP2022077282A/ja active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1040481A (ja) * | 1996-07-23 | 1998-02-13 | Mitsubishi Electric Corp | 覚醒低下警報装置 |
JPH11189066A (ja) * | 1997-12-25 | 1999-07-13 | Nippon Soken Inc | 車両用警報装置 |
JP2003123196A (ja) * | 2001-10-10 | 2003-04-25 | Denso Corp | 車両の周辺監視装置及びプログラム |
JP2005108033A (ja) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | 運転者状況判定装置および運転者状況判定方法 |
JP2008204107A (ja) * | 2007-02-19 | 2008-09-04 | Toyota Motor Corp | 不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラム |
JP2008226163A (ja) * | 2007-03-15 | 2008-09-25 | Honda Motor Co Ltd | 車両の安全装置 |
JP2008242602A (ja) * | 2007-03-26 | 2008-10-09 | Denso Corp | 眠気警報装置、及びプログラム |
JP2010009093A (ja) * | 2008-06-24 | 2010-01-14 | Toyota Motor Corp | 人物状態判定装置 |
US20120161954A1 (en) * | 2010-12-28 | 2012-06-28 | Automotive Research & Testing Center | Method and system for detecting a driving state of a driver in a vehicle |
JP2013079977A (ja) * | 2013-01-04 | 2013-05-02 | Yupiteru Corp | 駐車禁止エリア報知装置及びプログラム |
WO2020173213A1 (zh) * | 2017-08-10 | 2020-09-03 | 北京市商汤科技开发有限公司 | 车内人员危险动作识别方法和装置、电子设备、存储介质 |
JP2019137175A (ja) * | 2018-02-08 | 2019-08-22 | 株式会社Subaru | 車両の制御装置及び車両の制御方法 |
JP2019185557A (ja) * | 2018-04-13 | 2019-10-24 | オムロン株式会社 | 画像解析装置、方法およびプログラム |
JP2020157938A (ja) * | 2019-03-27 | 2020-10-01 | 三菱電機株式会社 | 車載監視制御装置 |
JP2020162873A (ja) * | 2019-03-29 | 2020-10-08 | 株式会社エクォス・リサーチ | 脈波検出装置、及び脈波検出プログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102446686B1 (ko) | 승객 상태 분석 방법 및 장치, 차량, 전자 기기, 저장 매체 | |
US8063786B2 (en) | Method of detecting drowsiness of a vehicle operator | |
US20180032825A1 (en) | System and method for detecting distraction and a downward vertical head pose in a vehicle | |
JP4702100B2 (ja) | 居眠り判定装置および居眠り運転警告装置 | |
US10899356B2 (en) | Drowsiness prevention device, drowsiness prevention method, and recording medium | |
US20160262682A1 (en) | Driver monitoring apparatus | |
WO2015060868A1 (en) | Responding to in-vehicle environmental conditions | |
JP7047821B2 (ja) | 運転支援装置 | |
JP7290930B2 (ja) | 乗員モデリング装置、乗員モデリング方法および乗員モデリングプログラム | |
JP2019195377A (ja) | データ処理装置、モニタリングシステム、覚醒システム、データ処理方法、及びデータ処理プログラム | |
US11866060B1 (en) | Routing or driving systems and methods based on sleep pattern information | |
JP2008305190A (ja) | 居眠り警告装置及び自動車 | |
JP2007207274A (ja) | 発進報知装置 | |
KR20160112213A (ko) | 차량, 및 차량의 제어방법 | |
JP7081844B2 (ja) | 検出システム | |
JP4173083B2 (ja) | 覚醒状態判定装置及び覚醒状態判定方法 | |
JP2017146788A (ja) | 異常判定装置および異常判定方法 | |
JP2004133749A (ja) | 顔の向き検知装置 | |
JP2022077282A (ja) | 警報システム | |
JP2010100088A (ja) | 運転支援システム | |
JP2004041485A (ja) | 開閉眼モニタ装置 | |
US10945651B2 (en) | Arousal level determination device | |
JP7046748B2 (ja) | 運転者状態判定装置および運転者状態判定方法 | |
JP2020194227A (ja) | 顔遮蔽判定装置、顔遮蔽判定方法、顔遮蔽判定プログラム及び乗員監視システム | |
WO2022185736A1 (ja) | 検知機能制御装置、検知機能制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201111 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20201111 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20201116 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20201215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210316 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210706 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210827 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220118 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220419 |