JP7234614B2 - 異常検出装置、異常検出システム及び異常検出プログラム - Google Patents
異常検出装置、異常検出システム及び異常検出プログラム Download PDFInfo
- Publication number
- JP7234614B2 JP7234614B2 JP2018231198A JP2018231198A JP7234614B2 JP 7234614 B2 JP7234614 B2 JP 7234614B2 JP 2018231198 A JP2018231198 A JP 2018231198A JP 2018231198 A JP2018231198 A JP 2018231198A JP 7234614 B2 JP7234614 B2 JP 7234614B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- driver
- image
- detection device
- abnormality detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/176—Dynamic expression
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Social Psychology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Psychiatry (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Signal Processing (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
少なくとも2台の第1車両のそれぞれの車載カメラによって前記第1車両とは異なる第2車両が撮影されている第1画像を取得し、
前記第1画像に含まれる前記第2車両の運転者の画像に基づいて、前記第2車両の運転者の異常状態を検出し、
前記第2車両の運転者の異常状態の検出結果を、前記第2車両の影響を受け得る歩行者又は車両の搭乗者に報知し、
前記第1車両及び前記第2車両のいずれにも設置されていない。
少なくとも2台の第1車両と、異常検出装置とを備える異常検出システムであって、
前記異常検出装置は、
前記少なくとも2台の第1車両のそれぞれの車載カメラによって前記第1車両とは異なる第2車両が撮影されている第1画像を取得し、
前記第1画像に含まれる前記第2車両の運転者の画像に基づいて、前記第2車両の運転者の異常状態を検出し、
前記第2車両の運転者の異常状態の検出結果を、前記第2車両の影響を受け得る歩行者又は車両の搭乗者に報知し、
前記第1車両及び前記第2車両のいずれにも設置されていない。
少なくとも2台の第1車両のそれぞれの車載カメラによって前記第1車両とは異なる第2車両が撮影されている第1画像を取得するステップと、
前記第1画像に含まれる前記第2車両の運転者の画像に基づいて、前記第2車両の運転者の異常状態を検出するステップと、
前記第2車両の運転者の異常状態の検出結果を、前記第2車両の影響を受け得る歩行者又は車両の搭乗者に報知するステップと
を、前記第1車両及び前記第2車両のいずれにも設置されていない異常検出装置のプロセッサに実行させる。
2 第2車両(被監視車両)
10 異常検出装置
11 車両情報演算部
12 危険度解析部
13 危険情報抽出部
14 車両報知部
20 車載カメラ
21 前方カメラ
22 側方カメラ
23 後方カメラ
24 車内カメラ
30 通信装置
31 送信部
32 受信部
33 送信用データ処理部
34 受信データ解析部
40 画像解析部
41 前方画像解析部
42 側方画像解析部
43 後方画像解析部
50 サーバ
51 サーバ制御部
52 サーバ通信部
521 送信部
522 受信部
53 サーバ記憶部
531 車両情報データベース
532 危険度情報データベース
60 ネットワーク
70 端末
72 端末制御部
74 端末報知部
100 異常検出システム
Claims (9)
- 少なくとも2台の第1車両のそれぞれの車載カメラによって前記第1車両とは異なる第2車両が撮影されている第1画像を取得し、
前記第1画像に含まれる前記第2車両の運転者の画像に基づいて、前記第2車両の運転者の異常状態を検出し、
前記第2車両の運転者の異常状態の検出結果を、前記第2車両の影響を受け得る歩行者又は車両の搭乗者に報知し、
前記第1車両及び前記第2車両のいずれにも設置されていない、異常検出装置。 - 前記第2車両の運転者の異常状態の検出結果を、検出に用いられた画像を提供した車両以外の車両の搭乗者に報知する、請求項1に記載の異常検出装置。
- 請求項1又は2に記載の異常検出装置であって、
前記第2車両の運転者の画像に基づいて、前記第2車両の危険度を算出する、異常検出装置。 - 請求項3に記載の異常検出装置であって、
前記第2車両の危険度を出力する、異常検出装置。 - 請求項1から4のいずれか一項に記載の異常検出装置であって、
少なくとも2つの時刻に撮影された前記第1画像に基づいて、前記第2車両の運転者の異常状態を検出する、異常検出装置。 - 請求項1から5のいずれか一項に記載の異常検出装置であって、
前記第2車両の運転者の顔、姿勢及び行動のうちの少なくとも1つに関する情報に基づいて、前記第2車両の運転者の異常状態を検出する、異常検出装置。 - 請求項1から6のいずれか一項に記載の異常検出装置であって、
前記車載カメラは、前方カメラ、側方カメラ、後方カメラ及び車内カメラの少なくとも1つのカメラを含む、異常検出装置。 - 少なくとも2台の第1車両と、異常検出装置とを備える異常検出システムであって、
前記異常検出装置は、
前記少なくとも2台の第1車両のそれぞれの車載カメラによって前記第1車両とは異なる第2車両が撮影されている第1画像を取得し、
前記第1画像に含まれる前記第2車両の運転者の画像に基づいて、前記第2車両の運転者の異常状態を検出し、
前記第2車両の運転者の異常状態の検出結果を、前記第2車両の影響を受け得る歩行者又は車両の搭乗者に報知し、
前記第1車両及び前記第2車両のいずれにも設置されていない、異常検出システム。 - 少なくとも2台の第1車両のそれぞれの車載カメラによって前記第1車両とは異なる第2車両が撮影されている第1画像を取得するステップと、
前記第1画像に含まれる前記第2車両の運転者の画像に基づいて、前記第2車両の運転者の異常状態を検出するステップと、
前記第2車両の運転者の異常状態の検出結果を、前記第2車両の影響を受け得る歩行者又は車両の搭乗者に報知するステップと
を、前記第1車両及び前記第2車両のいずれにも設置されていない異常検出装置のプロセッサに実行させる、異常検出プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018231198A JP7234614B2 (ja) | 2018-12-10 | 2018-12-10 | 異常検出装置、異常検出システム及び異常検出プログラム |
US16/597,045 US11232313B2 (en) | 2018-12-10 | 2019-10-09 | Abnormality detection device, abnormality detection system, and abnormality detection program |
CN201911173820.XA CN111292509A (zh) | 2018-12-10 | 2019-11-26 | 异常检测装置、异常检测系统以及记录介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018231198A JP7234614B2 (ja) | 2018-12-10 | 2018-12-10 | 異常検出装置、異常検出システム及び異常検出プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020095356A JP2020095356A (ja) | 2020-06-18 |
JP7234614B2 true JP7234614B2 (ja) | 2023-03-08 |
Family
ID=70971935
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018231198A Active JP7234614B2 (ja) | 2018-12-10 | 2018-12-10 | 異常検出装置、異常検出システム及び異常検出プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11232313B2 (ja) |
JP (1) | JP7234614B2 (ja) |
CN (1) | CN111292509A (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7232094B2 (ja) * | 2019-03-25 | 2023-03-02 | 株式会社Subaru | 車両の制御装置、車両の制御方法及びプログラム |
CN115179957A (zh) * | 2021-04-01 | 2022-10-14 | 华为技术有限公司 | 一种驾驶提醒方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150091740A1 (en) | 2013-08-02 | 2015-04-02 | Honda Motor Co., Ltd. | System and method for detection and utilization of driver distraction level |
WO2017056401A1 (ja) | 2015-09-30 | 2017-04-06 | ソニー株式会社 | 制御装置、制御方法及びプログラム |
JP2017084157A (ja) | 2015-10-29 | 2017-05-18 | 三菱電機株式会社 | 警報装置 |
Family Cites Families (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101159847B1 (ko) * | 2005-01-20 | 2012-06-25 | 삼성전자주식회사 | 졸음운전 감지용 얼굴 검출 정규화 장치 및 방법 |
JP4815943B2 (ja) * | 2005-08-19 | 2011-11-16 | 株式会社デンソー | 危険箇所情報表示装置 |
JP4980076B2 (ja) * | 2007-01-11 | 2012-07-18 | 富士重工業株式会社 | 車両の運転支援装置 |
JP4492702B2 (ja) * | 2008-01-11 | 2010-06-30 | トヨタ自動車株式会社 | 異常検出装置 |
US20110273527A1 (en) * | 2010-05-06 | 2011-11-10 | Tzu-Chuan Liu | Electronic Infrared Wide-Angle and Safety-Promotion External Vehicular Back Mirror |
JP2012128561A (ja) * | 2010-12-14 | 2012-07-05 | Toshiba Corp | 異常車両検出装置 |
KR101405679B1 (ko) * | 2011-10-11 | 2014-06-13 | 현대자동차주식회사 | 차량 위치 정보 기반 비정상 운전 판정 및 경보 시스템 |
DE112012006975T5 (de) | 2012-10-04 | 2015-08-06 | Mitsubishi Electric Corporation | Fahrzeugbordinformations -Verarbeitungsvorrichtung |
US20150353014A1 (en) * | 2012-10-25 | 2015-12-10 | Po Yiu Pauline Li | Devices, systems and methods for identifying potentially dangerous oncoming cars |
US9351019B2 (en) * | 2012-12-27 | 2016-05-24 | Automotive Research & Testing Center | System for detecting vehicle driving state |
US9751534B2 (en) * | 2013-03-15 | 2017-09-05 | Honda Motor Co., Ltd. | System and method for responding to driver state |
CN103714660B (zh) | 2013-12-26 | 2017-02-08 | 苏州清研微视电子科技有限公司 | 基于图像处理融合心率特征与表情特征实现疲劳驾驶判别的系统 |
CN103770733B (zh) * | 2014-01-15 | 2017-01-11 | 中国人民解放军国防科学技术大学 | 一种驾驶员安全驾驶状态检测方法及装置 |
JP6252304B2 (ja) | 2014-03-28 | 2017-12-27 | 株式会社デンソー | 車両用認知通知装置、車両用認知通知システム |
JP2016045714A (ja) * | 2014-08-22 | 2016-04-04 | 株式会社デンソー | 車載制御装置 |
CN105590410A (zh) * | 2014-10-22 | 2016-05-18 | 鸿富锦精密工业(武汉)有限公司 | 安全驾驶监控系统及安全驾驶监控方法 |
US9472098B2 (en) * | 2015-01-15 | 2016-10-18 | International Business Machines Corporation | Vehicle-based abnormal travel event detecting and reporting |
CN107408338A (zh) * | 2015-03-26 | 2017-11-28 | 三菱电机株式会社 | 驾驶员辅助系统 |
JP6488922B2 (ja) * | 2015-07-06 | 2019-03-27 | 株式会社デンソー | 運転者異常検出装置 |
KR101832189B1 (ko) * | 2015-07-29 | 2018-02-26 | 야마하하쓰도키 가부시키가이샤 | 이상화상 검출장치, 이상화상 검출장치를 구비한 화상 처리 시스템 및 화상 처리 시스템을 탑재한 차량 |
JP2017074867A (ja) * | 2015-10-15 | 2017-04-20 | 株式会社デンソー | 異常判定装置 |
US9925987B1 (en) * | 2015-12-11 | 2018-03-27 | Lytx, Inc. | Driving abnormality detection |
JP6563798B2 (ja) * | 2015-12-17 | 2019-08-21 | 大学共同利用機関法人自然科学研究機構 | 視覚認知支援システムおよび視認対象物の検出システム |
US10460600B2 (en) * | 2016-01-11 | 2019-10-29 | NetraDyne, Inc. | Driver behavior monitoring |
JP6775135B2 (ja) * | 2016-05-20 | 2020-10-28 | マツダ株式会社 | ドライバ状態検出装置 |
JP6971020B2 (ja) * | 2016-11-14 | 2021-11-24 | 株式会社日立製作所 | 異常検出装置および異常検出方法 |
JP2018092554A (ja) | 2016-12-02 | 2018-06-14 | システム東京株式会社 | 事故発生予測装置 |
CN106710306A (zh) * | 2016-12-09 | 2017-05-24 | 深圳市元征科技股份有限公司 | 车辆驾驶行为监控方法及装置 |
US10152642B2 (en) * | 2016-12-16 | 2018-12-11 | Automotive Research & Testing Center | Method for detecting driving behavior and system using the same |
CN107180219A (zh) | 2017-01-25 | 2017-09-19 | 问众智能信息科技(北京)有限公司 | 基于多模态信息的驾驶危险系数评估方法和装置 |
EP3593311A4 (en) * | 2017-03-08 | 2020-01-22 | Visa International Service Association | SYSTEM AND METHOD FOR FRAUD RISK ANALYSIS IN THE IOT |
US11117515B2 (en) * | 2017-05-19 | 2021-09-14 | Yazaki Corporation | Monitoring system |
CN108010373B (zh) * | 2017-09-15 | 2019-04-09 | 路特迩科技(杭州)有限公司 | 基于泊位状态信息的泊位服务与管理系统及方法 |
CN108725448B (zh) | 2018-03-30 | 2020-05-08 | 东风商用车有限公司 | 一种基于驾驶员状态监控的主动控车方法和系统 |
CN108961678A (zh) | 2018-04-26 | 2018-12-07 | 华慧视科技(天津)有限公司 | 一种基于人脸检测驾驶员疲劳检测系统及其检测方法 |
CN110866427A (zh) * | 2018-08-28 | 2020-03-06 | 杭州海康威视数字技术股份有限公司 | 一种车辆行为检测方法及装置 |
KR102677702B1 (ko) * | 2018-09-11 | 2024-06-25 | 현대자동차주식회사 | 차량 및 그 제어방법 |
-
2018
- 2018-12-10 JP JP2018231198A patent/JP7234614B2/ja active Active
-
2019
- 2019-10-09 US US16/597,045 patent/US11232313B2/en active Active
- 2019-11-26 CN CN201911173820.XA patent/CN111292509A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150091740A1 (en) | 2013-08-02 | 2015-04-02 | Honda Motor Co., Ltd. | System and method for detection and utilization of driver distraction level |
WO2017056401A1 (ja) | 2015-09-30 | 2017-04-06 | ソニー株式会社 | 制御装置、制御方法及びプログラム |
JP2017084157A (ja) | 2015-10-29 | 2017-05-18 | 三菱電機株式会社 | 警報装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2020095356A (ja) | 2020-06-18 |
US11232313B2 (en) | 2022-01-25 |
CN111292509A (zh) | 2020-06-16 |
US20200184243A1 (en) | 2020-06-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11295143B2 (en) | Information processing apparatus, information processing method, and program | |
US11787408B2 (en) | System and method for controlling vehicle based on condition of driver | |
CN111361552B (zh) | 自动驾驶系统 | |
JP4517393B2 (ja) | 運転支援装置 | |
JP4683192B2 (ja) | 車両用死角監視装置及び車両用運転支援システム | |
CN108263379A (zh) | 基于姿势信息的行人检测和行人碰撞预防装置和方法 | |
CN112534487B (zh) | 信息处理设备、移动体、信息处理方法和程序 | |
CN108725454B (zh) | 安全驾驶辅助系统及其控制方法 | |
WO2019003792A1 (ja) | 制御装置、制御方法、及びプログラム | |
JP7234614B2 (ja) | 異常検出装置、異常検出システム及び異常検出プログラム | |
JP4751894B2 (ja) | 自動車の前方にある障害物を検知するシステム | |
US11643012B2 (en) | Driving assistance device, driving situation information acquisition system, driving assistance method, and program | |
JP4768499B2 (ja) | 車載周辺他車検出装置 | |
KR20200071968A (ko) | 차량 및 그 제어방법 | |
JP4884806B2 (ja) | 車両周辺監視システム | |
CN115131749A (zh) | 图像处理装置、图像处理方法以及计算机可读取存储介质 | |
JP2008269399A (ja) | 車両の車線逸脱警報装置 | |
JP2007249324A5 (ja) | ||
JP6198871B2 (ja) | 車両周辺監視装置、車両周辺監視方法、及び車両周辺監視プログラムとその記録媒体 | |
KR20150074753A (ko) | 차량 운전 보조 장치 및 이를 구비한 차량 | |
JP7495900B2 (ja) | 情報提供装置、情報提供方法、及び情報提供プログラム | |
JP7294483B2 (ja) | 運転支援装置、運転支援方法及びプログラム | |
WO2024189766A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
KR102671440B1 (ko) | 첨단 운전자 지원 시스템 통합 모듈 | |
US20240270239A1 (en) | Driving assistance device and driving assistance method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210420 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220310 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220412 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220502 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220927 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230206 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7234614 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |