DE112022001669T5 - MONITORING DEVICE, VEHICLE, INFORMATION TERMINAL, MONITORING METHOD AND PROGRAM - Google Patents
MONITORING DEVICE, VEHICLE, INFORMATION TERMINAL, MONITORING METHOD AND PROGRAM Download PDFInfo
- Publication number
- DE112022001669T5 DE112022001669T5 DE112022001669.8T DE112022001669T DE112022001669T5 DE 112022001669 T5 DE112022001669 T5 DE 112022001669T5 DE 112022001669 T DE112022001669 T DE 112022001669T DE 112022001669 T5 DE112022001669 T5 DE 112022001669T5
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- situation
- driver
- image
- monitoring device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012806 monitoring device Methods 0.000 title claims abstract description 34
- 238000012544 monitoring process Methods 0.000 title claims description 12
- 238000000034 method Methods 0.000 title claims description 7
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 230000005856 abnormality Effects 0.000 claims abstract description 61
- 238000001514 detection method Methods 0.000 claims description 29
- 238000004891 communication Methods 0.000 claims description 12
- 230000008859 change Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 6
- 238000003672 processing method Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/20—Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles
- G08G1/205—Indicating the location of the monitored vehicles as destination, e.g. accidents, stolen, rental
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/006—Alarm destination chosen according to type of event, e.g. in case of fire phone the fire service, in case of medical emergency phone the ambulance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/016—Personal emergency signalling and security systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Public Health (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Traffic Control Systems (AREA)
Abstract
Eine Überwachungsvorrichtung, welche eine Anomalie eines Fahrers und/oder eines Fahrzeugs überwacht, umfasst: Erfassungsmittel zum Erfassen von Situationsinformationen, welche Situationen des Fahrers und des Fahrzeugs angeben; und Bestimmungsmittel zum Bestimmen, dass die Anomalie auftritt, in einem Fall, in welchem eine vorbestimmte Situation detektiert worden ist, auf Grundlage der durch die Erfassungsmittel erfassten Situationsinformationen, wobei die Situationsinformationen ein erstes Bild umfassen, welches durch eine erste Bildaufnahmeeinheit erhalten wird, die dazu in der Lage ist, ein Bild des Fahrers aufzunehmen, welcher das Fahrzeug fährt.A monitoring device that monitors an abnormality of a driver and/or a vehicle includes: acquiring means for acquiring situation information indicating situations of the driver and the vehicle; and determining means for determining that the abnormality occurs in a case where a predetermined situation has been detected based on the situation information acquired by the detecting means, the situation information comprising a first image obtained by a first image capture unit associated therewith is able to capture an image of the driver driving the vehicle.
Description
TECHNISCHES GEBIETTECHNICAL FIELD
Die vorliegende Erfindung betrifft eine Überwachungsmethode zum Überwachen einer Anomalie eines Fahrers und/oder eines Fahrzeugs.The present invention relates to a monitoring method for monitoring an abnormality of a driver and/or a vehicle.
HINTERGRUNDBILDENDER STAND DER TECHNIKBACKGROUND STATE OF THE TECHNOLOGY
PTL1 schlägt eine Methode eines Analysierens einer Unfallsituation auf Grundlage von Videos oder Audio vor und nach dem Auftreten eines Unfalls, welche von einem an einem Fahrzeug montierten Fahrtenschreiber übertragen worden sind, und eines Übertragens eines Analyseergebnisses an eine Notrufzentrale vor.PTL1 proposes a method of analyzing an accident situation based on videos or audio before and after the occurrence of an accident transmitted from a vehicle-mounted tachograph and transmitting an analysis result to an emergency call center.
ZITATLISTEQUOTE LIST
PATENTLITERATURPATENT LITERATURE
PTL1: Japanisches Patent, Veröffentlichungs-Nr.
ZUSAMMENFASSUNG DER ERFINDUNGSUMMARY OF THE INVENTION
TECHNISCHES PROBLEMTECHNICAL PROBLEM
In der in PTL1 beschriebenen Methode ist eine fortgeschrittene (komplizierte) Verarbeitung für die Videos oder das Audio, welche durch den Drive-Rekorder erhalten worden sind, beim Analysieren der Unfallsituation erforderlich. Jedoch ist es zum Beispiel bei einem Spreizsitz-Typ-Fahrzeug unter dem Gesichtspunkt eines Vermeidens eines Anstiegs der Fahrzeugkosten wünschenswert, eine Anomalie (wie etwa ein Umkippen) des Fahrers und/oder des Fahrzeugs mit einer einfachen Konfiguration und Verarbeitung genau zu detektierenIn the method described in PTL1, advanced (complicated) processing is required for the videos or audio obtained by the drive recorder when analyzing the accident situation. However, for example, in a spreader seat type vehicle, from the viewpoint of avoiding an increase in vehicle cost, it is desirable to accurately detect an abnormality (such as tipping over) of the driver and/or the vehicle with a simple configuration and processing
Daher ist es eine Aufgabe der vorliegenden Erfindung, eine vorteilhafte Methode zum genauen Detektieren einer Anomalie eines Fahrers und/oder eines Fahrzeugs mit einer einfachen Konfiguration und Verarbeitung bereitzustellen.Therefore, an object of the present invention is to provide an advantageous method for accurately detecting an abnormality of a driver and/or a vehicle with a simple configuration and processing.
LÖSUNG DES PROBLEMSTHE SOLUTION OF THE PROBLEM
Um die obige Aufgabe zu erreichen, ist eine Überwachungsvorrichtung als ein Aspekt der vorliegenden Erfindung eine Überwachungsvorrichtung, welche eine Anomalie eines Fahrers und/oder eines Fahrzeugs überwacht, umfassend: Erfassungsmittel zum Erfassen von Situationsinformationen, welche Situationen des Fahrers und des Fahrzeugs angeben; und Bestimmungsmittel zum Bestimmen, dass die Anomalie auftritt, in einem Fall, in welchem eine vorbestimmte Situation detektiert worden ist, auf Grundlage der durch die Erfassungsmittel erfassten Situationsinformationen, dadurch gekennzeichnet, dass die Situationsinformationen ein erstes Bild umfassen, welches durch eine erste Bildaufnahmeeinheit erhalten wird, die dazu in der Lage ist, ein Bild des Fahrers aufzunehmen, welcher das Fahrzeug fährt.In order to achieve the above object, a monitoring device, as an aspect of the present invention, is a monitoring device that monitors an abnormality of a driver and/or a vehicle, comprising: detecting means for detecting situation information indicating situations of the driver and the vehicle; and determining means for determining that the abnormality occurs in a case where a predetermined situation has been detected based on the situation information acquired by the detecting means, characterized in that the situation information includes a first image obtained by a first image capture unit , which is able to capture an image of the driver driving the vehicle.
VORTEILHAFTE EFFEKTE DER ERFINDUNGADVANTAGEOUS EFFECTS OF THE INVENTION
Gemäß der vorliegenden Erfindung ist es zum Beispiel möglich, die vorteilehafte Methode zum genauen Detektieren der Anomalie des Fahrers und/oder des Fahrzeugs mit der einfachen Konfiguration und Verarbeitung bereitzustellen.For example, according to the present invention, it is possible to provide the advantageous method for accurately detecting the abnormality of the driver and/or the vehicle with the simple configuration and processing.
Andere Merkmale und Vorteile der vorliegenden Erfindung werden aus der folgenden Beschreibung in Verbindung mit den begleitenden Zeichnungen klar. Es ist anzumerken, dass gleiche Bezugszeichen über die begleitenden Zeichnungen hinweg die gleichen oder ähnliche Komponenten bezeichnen.Other features and advantages of the present invention will become apparent from the following description taken in conjunction with the accompanying drawings. It should be noted that like reference numerals designate the same or similar components throughout the accompanying drawings.
KURZE BESCHREIBUNG DER ZEICHNUNGENBRIEF DESCRIPTION OF THE DRAWINGS
Die begleitenden Zeichnungen, welche in der Beschreibung aufgenommen sind und einen Teil davon ausmachen, stellen Ausführungsformen der Erfindung dar und dienen zusammen mit der Beschreibung dazu, Prinzipien der Erfindung zu erklären.
-
1 ist eine Darstellung, welche ein Beispiel darstellt, in welchem ein Informationsendgerät an einem Spreizsitz-Typ-Fahrzeug montiert ist. -
2 ist eine Blockdarstellung, welche ein Konfigurationsbeispiel eines Systems darstellt, welches eine Überwachungsvorrichtung umfasst. -
3 ist eine Darstellung, welche ein Anordnungsbeispiel einer Bildaufnahmeeinheit (Kamera) in dem Fahrzeug darstellt. -
4 ist ein Ablaufdiagramm, welches eine Überwachungsverarbeitung zum Überwachen einer Anomalie während eines Fahrens des Fahrzeugs darstellt. -
5A ist eine Darstellung, welche ein Beispiel eines durch die Bildaufnahmeeinheit erhaltenen Bilds darstellt. -
5B ist eine Darstellung, welche ein Beispiel des durch die Bildaufnahmeeinheit erhaltenen Bilds darstellt.
-
1 is a diagram showing an example in which an information terminal is mounted on a straddle-type vehicle. -
2 is a block diagram illustrating a configuration example of a system including a monitoring device. -
3 is a diagram showing an example of an arrangement of an image recording unit (camera) in the vehicle. -
4 is a flowchart illustrating monitoring processing for monitoring an abnormality during driving of the vehicle. -
5A is a diagram showing an example of an image obtained by the image capture unit. -
5B is a diagram showing an example of the image obtained by the image pickup unit.
BESCHREIBUNG DER AUSFÜHRUNGSFORMENDESCRIPTION OF EMBODIMENTS
Im Folgenden werden Ausführungsformen unter Bezugnahme auf die angehängten Zeichnungen im Detail beschrieben. Es ist anzumerken, dass die folgenden Ausführungsformen nicht dazu gedacht sind, den Umfang der beanspruchten Erfindung zu beschränken, und keine Beschränkung auf eine Erfindung erfolgt, welche eine Kombination aller in den Ausführungsformen beschriebenen Merkmale erfordert. Zwei oder mehr der mehreren in den Ausführungsformen beschriebenen Merkmale können gegebenenfalls kombiniert werden. Außerdem sind den gleichen oder ähnlichen Konfigurationen die gleichen oder ähnliche Bezugszeichen gegeben und eine überflüssige Beschreibung davon ist weggelassen.Embodiments will be described in detail below with reference to the attached drawings. It should be noted that The following embodiments are not intended to limit the scope of the claimed invention and are not limited to an invention requiring a combination of all of the features described in the embodiments. Two or more of the several features described in the embodiments may optionally be combined. In addition, the same or similar configurations are given the same or similar reference numerals and unnecessary description thereof is omitted.
<Erste Ausführungsform><First Embodiment>
Im Folgenden wird eine Beschreibung in Bezug auf ein Beispiel gegeben, in welchem eine Überwachungsvorrichtung gemäß der vorliegenden Erfindung auf ein Spreizsitz-Typ-Fahrzeug angewendet wird. Die Überwachungsvorrichtung gemäß der vorliegenden Erfindung ist eine Vorrichtung, welche dazu eingerichtet ist, eine Anomalie (zum Beispiel ein Umkippen/Überschlagen) eines Fahrers und/oder eines Fahrzeugs zu überwachen und die Anomalie zu detektieren. Obwohl in der folgenden Ausführungsform ein Motorrad als ein Beispiel des Spreizsitz-Typ-Fahrzeugs beschrieben wird, kann die Überwachungsvorrichtung gemäß der vorliegenden Erfindung auch auf andere Typen von Spreizsitz-Typ-Fahrzeugen, wie etwa ein dreirädriges Fahrzeug, und andere Fahrzeuge wie das Spreizsitz-Typ-Fahrzeug, wie etwa ein vierrädriges Fahrzeug, angewendet werden. Ferner kann die Überwachungsvorrichtung als eine fahrzeugseitige Vorrichtung eingerichtet sein, welche in einem Fahrzeug bereitgestellt ist, kann aber in der vorliegenden Ausführungsform als ein Informationsendgerät (mobiles Endgerät) eingerichtet sein. Das Informationsendgerät ist zum Beispiel eine Vorrichtung, welche verschiedene Funktionen aufweist, umfassend eine Kommunikationsfunktion, eine Anruffunktion und dergleichen, wie etwa ein Smartphone oder ein Tablet-Endgerät, welches sich in den letzten Jahren weit verbreitet hat, und kann derart eingerichtet sein, dass es durch einen dedizierten Haltemechnanismus HM, zum Beispiel wie in
Als Erstes wird ein Konfigurationsbeispiel der an dem Fahrzeug V montierten fahrzeugseitigen Vorrichtung 10 beschrieben. Die fahrzeugseitige Vorrichtung 10 kann zum Beispiel eine Verarbeitungseinheit 11, eine Speichereinheit 12, eine Bildaufnahmeeinheit 13, einen Zustandsdetektionssensor 14 und eine Kommunikationseinheit 15 umfassen, welche über einen System-Bus 16 kommunikationsfähig miteinander verbunden sind. Die Verarbeitungseinheit 11 ist zum Beispiel eine elektronische Steuereinheit (ECU) und kann einen Prozessor umfassen, welcher durch eine CPU, eine Speichervorrichtung, wie etwa einen Halbleiterspeicher, eine Schnittstelle mit einer externen Vorrichtung und dergleichen repräsentiert ist. Die Speichereinheit 12 speichert ein durch den Prozessor auszuführendes Programm, für eine Verarbeitung durch den Prozessor zu verwendende Daten und dergleichen und die Verarbeitungseinheit 11 kann das in der Speichereinheit 12 gespeicherte Programm in die Speichervorrichtung, wie etwa einen Speicher, lesen und das Programm ausführen.First, a configuration example of the vehicle-
Die Bildaufnahmeeinheit 13 umfasst zum Beispiel eine Kamera und ist derart in dem Fahrzeug V bereitgestellt, dass sie ein Bild (ein Video) erfasst, indem sie ein Bild eines Teils (des Fahrers) des Fahrzeugs V und/oder der Umgebung des Fahrzeugs V aufnimmt. Zum Beispiel kann die Bildaufnahmeeinheit 13 eine Bildaufnahme derart durchführen, dass sie wiederholt (zum Beispiel periodisch) ein Standbild erfasst, oder kann eine Bildaufnahme derart durchführen, dass sie Bewegtbilder erfasst. Die Bildaufnahmeeinheit 13 der vorliegenden Ausführungsform kann eine Mehrzahl von Kameras 13a bis 13f umfassen, welche in dem Fahrzeug V angeordnet sind, wie in
In dem in
Der Zustandsdetektionssensor 14 ist ein Sensor, welcher verschiedene Zustände des Fahrzeugs V detektiert. Zum Beispiel kann der Zustandsdetektionssensor 14 einen Positionssensor (GPS-Sensor), welcher eine aktuelle Position des Fahrzeugs V detektiert, einen Geschwindigkeitssensor, welcher eine Geschwindigkeit des Fahrzeugs V detektiert, einen Beschleunigungssensor, welcher eine Beschleunigung des Fahrzeugs V detektiert, und einen Haltungssensor (Neigungssensor) umfassen, welcher eine Haltung (Neigung) des Fahrzeugs V detektiert. Ferner kann der Zustandsdetektionssensor 14 einen Sensor, welcher einen Zündungszustand (einen AN-Zustand oder einen AUS-Zustand) des Fahrzeugs V detektiert, einen Sensor, welcher eine Position eines Seitenständers detektiert, um das Fahrzeug V selbst stehen zu lassen, wenn das Fahrzeug V angehalten ist, und dergleichen umfassen.The
Die Kommunikationseinheit 15 kommuniziert mit dem Informationsendgerät 20 unter Verwendung eines Kommunikationssystems, zum Beispiel Bluetooth (eingetragene Marke), Wi-Fi (eingetragene Marke) oder dergleichen. Insbesondere kann die Kommunikationseinheit 15 eine Funktion als eine Übertragungseinheit, welche Informationen an das Informationsendgerät 20 überträgt, und eine Funktion als eine Empfangseinheit aufweisen, welche Informationen von dem Informationsendgerät 20 empfängt.The
Als Nächstes wird eine Konfiguration des Informationsendgeräts 20 beschrieben, welches als die Überwachungsvorrichtung eingerichtet ist. Wie oben beschrieben, ist das Informationsendgerät 20 ein Gerät (eine Vorrichtung), welches dazu in der Lage ist, Information zu der fahrzeugseitigen Vorrichtung 10 des Fahrzeugs V zu übertragen und davon zu empfangen, wie etwa ein Smartphone oder ein Tablet-Endgerät, und kann eine Verarbeitungseinheit 21, eine Speichereinheit 22, eine Mitteilungseinheit 23, eine Eingabe-/Ausgabeeinheit 24 und eine Kommunikationseinheit 25 umfassen, welche über einen System-Bus 26 kommunikationsfähig miteinander verbunden sind.Next, a configuration of the
Die Verarbeitungseinheit 21 umfasst einen durch die CPU repräsentierten Prozessor, wie etwa einen Halbleiterspeicher, eine Schnittstelle mit einer externen Vorrichtung und dergleichen. Die Speichereinheit 22 speichert ein durch den Prozessor auszuführendes Programm, durch den Prozessor für eine Verarbeitung zu verwendende Daten und dergleichen und die Verarbeitungseinheit 21 kann das in der Speichereinheit 22 gespeicherte Programm in eine Speichervorrichtung, wie etwa einen Speicher, lesen, um das Programm auszuführen. In dem Fall der vorliegenden Ausführungsform speichert die Speichereinheit 22 ein Anwendungsprogramm (im Folgenden manchmal als ein Überwachungsprogramm bezeichnet) zum Überwachen der Anomalie (zum Beispiel ein Umkippen/Überschlagen) des Fahrers und/oder des Fahrzeugs V und die Verarbeitungseinheit 21 kann das in der Speichereinheit 22 gespeicherte Überwachungsprogramm in eine Speichervorrichtung, wie etwa einen Speicher, lesen und das Programm ausführen. Das heißt, die Verarbeitungseinheit 21 kann ein Computer sein, welcher das Überwachungsprogramm ausführt.The
Die Verarbeitungseinheit 21 der vorliegenden Ausführungsform kann mit einer Erfassungseinheit 21a und einer Bestimmungseinheit 21 b bereitgestellt sein. Die Erfassungseinheit 21 a erfasst Situationsinformationen, welche eine Situation des Fahrers und eine Situation des Fahrzeugs V von der Bildaufnahmeeinheit 13 und/oder dem Zustandsdetektionssensor 14 angeben. Die Situationsinformationen sind Informationen, welche aktuelle Situationen des Fahrers und des Fahrzeugs V angeben, und können Bilder (ein erstes Bild), welche durch ein Aufnehmen des Fahrers, welcher das Fahrzeug V fährt, durch die Kameras 13a und 13b (die erste Bildaufnahmeeinheit) erhalten werden, und/oder Bilder (ein zweites Bild) umfassen, welche durch ein Aufnehmen der Umgebung des Fahrzeugs V durch die Kameras 13c bis 13f (die zweite Bildaufnahmeeinheit) erhalten werden. Ferner können die Situationsinformationen wenigstens ein Informationsstück der Position, der Geschwindigkeit, der Beschleunigung und der Haltung des Fahrzeugs V umfassen, welche durch die verschiedenen Sensoren des Zustandsdetektionssensors 14 detektiert werden. Die Situationsinformationen können Informationen über den Zustand der Zündung des Fahrzeugs V und Informationen über die Position des Seitenständers umfassen. Ferner bestimmt die Bestimmungseinheit 21 b, ob die Anomalie (zum Beispiel eine Anomalie während eines Fahrens) bei dem Fahrer und/oder dem Fahrzeug V auftritt oder nicht, auf Grundlage der durch die Erfassungseinheit 21a erfassten Situationsinformationen. Zum Beispiel kann die Bestimmungseinheit 21 b, wenn auf Grundlage der durch die Erfassungseinheit 21a erfassten Situationsinformationen eine vorbestimmte Situation detektiert wird, bestimmen, dass die Anomalie aufgetreten ist. Die vorbestimmte Situation kann als ein Bestimmungsgegenstand verstanden werden, welcher verwendet wird, um das Auftreten der Anomalie (Umkippen/Überschlagen) zu bestimmen (abzuschätzen), und Details davon werden später beschrieben.The
Die Mitteilungseinheit 23 teilt mit, dass die Anomalie aufgetreten ist. Zum Beispiel kann die Mitteilungseinheit 23, in einem Fall, in welchem das Informationsendgerät 20 einen Lautsprecher umfasst, mitteilen, dass die Anomalie aufgetreten ist, indem ein Audio von dem Lautsprecher ausgegeben wird. Ferner kommuniziert die Mitteilungseinheit 23 über die Kommunikationseinheit 25 mit der fahrzeugseitigen Vorrichtung 10 des Fahrzeugs V und kann mitteilen, dass die Anomalie aufgetreten ist, indem veranlasst wird, dass ein an dem Fahrzeug V montierter Lautsprecher ein Audio ausgibt, oder indem eine Beleuchtungsvorrichtung (ein Scheinwerfer oder ein Rücklicht) oder eine Warnblinkanlage des Fahrzeugs V eingeschaltet wird oder ein Blinken davon veranlasst wird. Die Mitteilungseinheit 23 kann eine externe Organisation (zum Beispiel eine Feuerwehr, eine Polizeistation, ein Versicherungsunternehmen oder dergleichen) kontaktieren, um das Auftreten der Anomalie mitzuteilen, unter Verwendung einer Telefonfunktion, einer Mail-Funktion oder dergleichen, welche an dem Informationsendgerät 20 montiert sind.The
Die Eingabe-/Ausgabeeinheit 24 gibt Informationen an den Fahrer (einen Benutzer) aus und empfängt eine Eingabe von Informationen von dem Fahrer. Zum Beispiel kann die Eingabe-/Ausgabeeinheit 24 eine Einheit sein, welche eine Anzeigeeinheit (Anzeige) und eine Eingabeeinheit (Schaltfläche) umfasst, oder kann eine Berührungsfeldanzeige sein. Außerdem kann die Kommunikationseinheit 25 unter Verwendung eines Kommunikationssystems, wie etwa Bluetooth (eingetragene Marke), Wi-Fi (eingetragene Marke) oder dergleichen, kommunikationsfähig mit der fahrzeugseitigen Vorrichtung 10 des Fahrzeugs 10 verbunden sein. Insbesondere kann die Kommunikationseinheit 25 eine Funktion als eine Übertragungseinheit, welche Informationen an die fahrzeugseitige Vorrichtung 10 überträgt, und eine Funktion als eine Empfangseinheit aufweisen, welche Informationen von der fahrzeugseitigen Vorrichtung 10 empfängt.The input/
[Überwachungsverarbeitung][Monitoring processing]
Als Nächstes wird ein Ablauf einer Verarbeitung (Überwachungsverarbeitung) beschrieben, welche durch die Verarbeitungseinheit 21 des Informationsendgeräts 20 durchgeführt wird, wenn das Überwachungsprogramm ausgeführt wird.
In Schritt S11 bestimmt die Verarbeitungseinheit 21, ob der Fahrer das Fahrzeug V fährt oder nicht. Insbesondere erfasst die Verarbeitungseinheit 21 (Erfassungseinheit 21a) Bilder (das erste Bild) von den Kameras 13a und 13b der Bildaufnahmeeinheit 13. Dann implementiert die Verarbeitungseinheit 21 (Bestimmungseinheit 21b) eine bekannte Bildverarbeitungsmethode an den von den Kameras 13a und 13b erfassten Bildern (erstes Bild), um auf Grundlage der Bilder zu bestimmen, ob eine Situation, in welcher der Fahrer die Lenkstange 31 (wenigstens eines aus dem linken und dem rechten Griff) greift, und/oder eine Situation, in welcher der Fahrer auf dem Sitz 32 (Fahrersitz) des Fahrzeugs V sitzt, auftritt oder nicht. In einem Fall, in welchem die Situation, in welcher der Fahrer die Lenkstange 31 greift, und/oder die Situation, in welcher der Fahrer auf dem Sitz 32 des Fahrzeugs V sitzt, detektiert wird, wird bestimmt, dass der Fahrer das Fahrzeug V fährt, und Schritt S11 wird wiederholt. Andererseits wird, in einem Fall, in welchem eine Situation, in welcher der Fahrer die Lenkstange 31 nicht greift, und/oder eine Situation, in welcher der Fahrer nicht auf dem Sitz 32 des Fahrzeugs V sitzt, in den Bildern von den Kameras 13a und 13b detektiert wird, bestimmt, dass eine Situation auftritt, in welcher der Fahrer das Fahrzeug V nicht fährt (eine erste Situation), und die Verarbeitung geht zu Schritt S12 über.In step S11, the
In Schritt S12 bestimmt die Verarbeitungseinheit 21, ob der Fahrer in der Umgebung des Fahrzeugs detektiert worden ist. Insbesondere veranlasst die Verarbeitungseinheit 21 (Erfassungseinheit 21 a), dass die Erfassungseinheit 21 a Bilder (das zweite Bild) von den Kameras 13c bis 13f der Bildaufnahmeeinheit 13 erfasst. Dann implementiert die Verarbeitungseinheit 21 (Bestimmungseinheit 21b) eine bekannte Bildverarbeitungsmethode an den von den Kameras 13c bis 13f erfassten Bildern (zweites Bild), um auf Grundlage der Bilder zu bestimmen, ob der Fahrer in der Umgebung des Fahrzeugs detektiert worden ist oder nicht. Als ein Beispiel kann die Verarbeitungseinheit 21 bestimmen, ob der Fahrer in den in Schritt S12 von den Kameras 13c bis 13f erfassten Bildern erscheint oder nicht, indem eine charakteristische Stelle des Fahrers, wie etwa eine Farbe oder ein Muster eines Helms oder einer Kleidung extrahiert und gespeichert wird, auf Grundlage der während eines Fahrens des Fahrzeugs V von den Kameras 13a und 13b erhaltenen Bildern. In einem Fall, in welchem der Fahrer in den von den Kameras 13c bis 13f erfassten Bildern erscheint, wird bestimmt, dass der Fahrer in der Umgebung des Fahrzeugs V detektiert worden ist, und die Verarbeitung geht zu Schritt S13 über. Andererseits wird in einem Fall, in welchem der Fahrer nicht in den von den Kameras 13c bis 13f erfassten Bildern erscheint, bestimmt, dass der Fahrer nicht in der Umgebung des Fahrzeugs V detektiert worden ist, und die Verarbeitung geht zu Schritt S17 über.In step S12, the
In Schritt S13 bestimmt die Verarbeitungseinheit 21, ob der Fahrer in den in Schritt S12 erfassten Bildern (zweites Bild) auf einer Straße liegt oder nicht. Insbesondere implementiert die Verarbeitungseinheit 21 (Bestimmungseinheit 21b) eine bekannte Bildverarbeitungsmethode an den in Schritt S12 erfassten Bildern, um zu bestimmen, ob auf Grundlage der Bilder eine Situation, in welcher der Fahrer auf der Straße liegt (zweite Situation), detektiert wird oder nicht. In einem Fall, in welchem die Situation detektiert wird, in welcher der Fahrer auf der Straße liegt (die zweite Situation), geht die Verarbeitung zu Schritt S14 über und die Verarbeitungseinheit 21 bestimmt, dass während eines Fahrens des Fahrzeugs V durch den Fahrer eine Anomalie aufgetreten ist und der Fahrer von dem Fahrzeug V ab-/ausgeworfen worden ist. Dann geht die Verarbeitung zu Schritt S15 über und die Verarbeitungseinheit 21 teilt unter Verwendung der Mitteilungseinheit 23 das Auftreten der Anomalie mit. Wie oben beschrieben, umfassen Beispiele eines Mitteilungsmodus der Mitteilungseinheit 23 eine Ausgabe von Audio von dem Lautsprecher des Informationsendgeräts 20 oder des Fahrzeugs V, ein Leuchten oder Blinken der Beleuchtungsvorrichtung oder der Warnblinkanlage des Fahrzeugs V und den Kontakt mit der externen Organisation, um das Auftreten der Anomalie unter Verwendung der Telefonfunktion, der Mail-Funktion oder dergleichen mitzuteilen.In step S13, the
Andererseits geht, wenn in Schritt S13 eine Situation detektiert wird, in welcher der Fahrer auf der Straße steht oder auf der Straße läuft, und die Situation nicht detektiert wird, in welcher der Fahrer auf der Straße liegt (die zweite Situation), die Verarbeitung zu Schritt S16 über und die Verarbeitungseinheit 21 (Bestimmungseinheit 21b) bestimmt, dass der Fahrer sicher ist, und beendet die Verarbeitung. In diesem Fall besteht eine Möglichkeit, dass der Fahrer selbst das Auftreten der Anomalie mitteilt, oder es besteht die Möglichkeit, dass keine Anomalie aufgetreten ist, und somit wird in der vorliegenden Ausführungsform die Verarbeitung beendet, ohne die Mitteilung des Auftretens der Anomalie durchzuführen.On the other hand, if a situation in which the driver is standing on the road or walking on the road is detected in step S13 and the situation in which the driver is lying on the road (the second situation) is not detected, the processing proceeds Step S16 passes, and the processing unit 21 (
In Schritt S17, zu welchem die Verarbeitung übergeht, wenn in Schritt S12 bestimmt wird, dass der Fahrer in der Umgebung des Fahrzeugs V nicht detektiert worden ist, bestimmt die Verarbeitungseinheit 21, ob eine Situation auftritt oder nicht, in welcher die Zündung des Fahrzeugs V an ist (eine dritte Situation). Insbesondere erfasst die Verarbeitungseinheit 21 (Erfassungseinheit 21a) Bilder (das erste Bild) von den Kameras 13a und 13b der Bildaufnahmeeinheit 13. Als ein Beispiel stellt
Hier bestimmt die Verarbeitungseinheit 21, ob die Situation auftritt oder nicht, in welcher die Zündung des Fahrzeugs V an ist, auf Grundlage der in Schritt S17 der vorliegenden Ausführungsform von den Kameras 13 und 13b erfassten Bildern, aber die vorliegende Erfindung ist nicht darauf beschränkt. In einem Fall, in welchem ein Zündungsdetektionssensor, welcher einen Zustand der Zündung des Fahrzeugs V detektiert, als einer der Zustandsdetektionssensoren 14 in dem Fahrzeug V bereitgestellt ist, kann die Verarbeitungseinheit 21 bestimmen, ob die die Situation auftritt oder nicht, in welcher die Zündung des Fahrzeugs V an ist, auf Grundlage von Zündungszustandsinformationen, welche von dem Zündungsdetektionssensor erfasst worden sind. Zum Beispiel kann die Verarbeitungseinheit 21 in einem Fall, in welchem ein Sensor, welcher die Position (Drehposition) des Zündschlüssels 33 detektiert, als der Zündungsdetektionssensor verwendet wird, bestimmen, ob die Situation auftritt oder nicht, in welcher die Zündung des Fahrzeugs V an ist, auf Grundlage von Zustandsinformationen, welche die von dem Sensor erfasste Position des Zündschlüssels 33 angeben. Ferner kann die Verarbeitungseinheit 21 in einem Fall, in welchem das Fahrzeug V ein Elektrofahrzeug (EV) ist, einen Sensor, welcher einen Zustand (verbleibende Kapazität oder Ausgangskapazität) einer an dem Fahrzeug V montierten Batterie detektiert, als den Zündungsdetektionssensor verwenden und bestimmen, ob die Situation auftritt oder nicht, in welcher die Zündung des Fahrzeugs V an ist, auf Grundlage von Zustandsinformationen, welche den von dem Sensor erfassten Zustand der Batterie angeben.Here, the
In Schritt S19 bestimmt die Verarbeitungseinheit 21, ob eine Situation auftritt oder nicht, in welcher sich das Fahrzeug V in einem umgekippten Zustand (eine vierte Situation) befindet. Insbesondere erfasst die Verarbeitungseinheit 21 (Erfassungseinheit 21a) von den Kameras 13c bis 13f der Bildaufnahmeeinheit 13 erfasste Bilder (das zweite Bild). Dann implementiert die Verarbeitungseinheit 21 (Bestimmungseinheit 21b) eine bekannte Bildverarbeitungsmethode an den von den Kameras 13c bis 13f erfassten Bildern (zweites Bild), um auf Grundlage der Bilder zu bestimmen, ob sich das Fahrzeug V in dem umgekippten Zustand befindet oder nicht. Als ein Beispiel stellt
Hier bestimmt die Verarbeitungseinheit 21, ob die Situation auftritt oder nicht, in welcher sich das Fahrzeug V in dem umgekippten Zustand befindet, auf Grundlage der in Schritt S19 der vorliegenden Ausführungsform von den Kameras 13c bis 13f erfassten Bilder, aber die vorliegende Erfindung ist nicht darauf beschränkt. Zum Beispiel kann die Verarbeitungseinheit 21 in einem Fall, in welchem ein Ständerdetektionssensor, welcher einen Zustand (Position) des Seitenständers des Fahrzeugs V detektiert, als einer der Zustandsdetektionssensoren 14 in dem Fahrzeug V bereitgestellt ist, bestimmen, ob die Situation auftritt oder nicht, in welcher sich das Fahrzeug V in dem umgekippten Zustand befindet, auf Grundlage von Zustandsinformationen des Seitenständers, welche von dem Ständerdetektionssensor erfasst worden sind. Ferner kann die Verarbeitungseinheit 21 in einem Fall, in welchem ein Haltungssensor (Neigungssensor), welcher die Haltung (Neigung) des Fahrzeugs V detektiert, als einer der Zustandsdetektionssensoren 14 in dem Fahrzeug V bereitgestellt ist, bestimmen, ob die Situation auftritt oder nicht, in welcher sich das Fahrzeug V in dem umgekippten Zustand befindet, auf Grundlage von Situationsinformationen (Haltungsinformationen des Fahrzeugs V), welche von dem Haltungssensor erfasst worden sind.Here, the
Wie oben beschrieben, überwacht (detektiert und bestimmt) die Überwachungsvorrichtung (Informationsendgerät 20) gemäß der vorliegenden Ausführungsform die Anomalie des Fahrers und/oder des Fahrzeugs V unter Verwendung der Bilder (erstes Bild), welche durch die Kameras 13a und 13b (erste Bildaufnahmeeinheit) der Bildaufnahmeeinheit 13 erhalten werden, welche dazu in der Lage ist, das Bild des Fahrers aufzunehmen, welcher das Fahrzeug V fährt. Dies macht es möglich, die Anomalie mit einer einfachen Konfiguration und Verarbeitung genau zu detektieren.As described above, the monitoring device (information terminal 20) according to the present embodiment monitors (detects and determines) the abnormality of the driver and/or the vehicle V using the images (first image) captured by the
<Zweite Ausführungsform><Second Embodiment>
In der obigen Ausführungsform kann die Verarbeitungseinheit 21 (Bestimmungseinheit 21b) einen Typ einer Anomalie auf Grundlage von durch die Erfassungseinheit 21a erfassten Situationsinformationen von der Bildaufnahmeeinheit 13 und/oder dem Zustandsdetektionssensor 14 bestimmen und einen Mitteilungsmodus durch die Mitteilungseinheit 23 gemäß dem Typ der Anomalie ändern. Zum Beispiel kann in dem Ablaufdiagramm aus
<Dritte Ausführungsform><Third Embodiment>
Obwohl das Beispiel, in welchem das Informationsendgerät 20 als die Überwachungsvorrichtung fungiert, welche die Anomalie des Fahrers und/oder des Fahrzeugs V überwacht, in den obigen Ausführungsformen beschrieben worden ist, kann die fahrzeugseitige Vorrichtung 10 als die Überwachungsvorrichtung fungieren. In diesem Fall können die Funktionen der Erfassungseinheit 21a und der Bestimmungseinheit 21b, welche in der Verarbeitungseinheit 21 des Informationsendgeräts 20 umfasst sind, in der Verarbeitungseinheit 11 der fahrzeugseitigen Vorrichtung 10 bereitgestellt sein. Ferner kann die Funktion der Mitteilungseinheit 23 des Informationsendgeräts 20 auch an der fahrzeugseitigen Vorrichtung 10 montiert sein.Although the example in which the
<Andere Ausführungsformen><Other Embodiments>
Ferner wird ein Programm zum Erreichen einer oder mehrerer der in den obigen Ausführungsformen beschriebenen Funktionen durch ein Netzwerk oder ein Speichermedium an ein System oder eine Vorrichtung geliefert und ein oder mehrere Prozessoren in einem Computer des Systems oder der Vorrichtung sind dazu in der Lage, das Programm zu lesen und auszuführen. Die vorliegende Erfindung kann auch durch einen derartigen Modus erreicht werden.Further, a program for achieving one or more of the functions described in the above embodiments is delivered to a system or device through a network or storage medium, and one or more processors in a computer of the system or device are capable of executing the program to read and execute. The present invention can also be achieved through such a mode.
<Zusammenfassung der Ausführungsformen><Summary of Embodiments>
1. Eine Überwachungsvorrichtung der oben beschriebenen Ausführungsformen ist eine Überwachungsvorrichtung (z.B. 20), welche eine Anomalie eines Fahrers und/oder eines Fahrzeugs (z.B. V) überwacht und umfasst:
- Erfassungsmittel (z.B. 21a) zum Erfassen von Situationsinformationen, welche Situationen des Fahrers und des Fahrzeugs angeben; und
- Bestimmungsmittel (z.B. 21b) zum Bestimmen, dass die Anomalie auftritt, in einem Fall, in welchem eine vorbestimmte Situation detektiert worden ist, auf Grundlage der durch die Erfassungsmittel erfassten Situationsinformationen,
- wobei die Situationsinformationen ein erstes Bild umfassen, welches durch eine erste Bildaufnahmeeinheit (z.B.
13a bis 13b) erhalten wird, die dazu in der Lage ist, ein Bild des Fahrers aufzunehmen, welcher das Fahrzeug fährt.
- detection means (eg 21a) for detecting situation information indicating situations of the driver and the vehicle; and
- determining means (eg 21b) for determining that the abnormality occurs in a case where a predetermined situation has been detected based on the situation information detected by the detecting means,
- wherein the situation information includes a first image obtained by a first image capture unit (eg, 13a to 13b) capable of capturing an image of the driver driving the vehicle.
Gemäß den Ausführungsformen kann das Auftreten der Anomalie bei dem Fahrer und/oder dem Fahrzeug durch eine einfache Konfiguration und Verarbeitung genau detektiert (bestimmt) werden.According to the embodiments, the occurrence of the abnormality may occur at the driver and/or can be precisely detected (determined) in the vehicle through simple configuration and processing.
2. In den oben beschriebenen Ausführungsformen
umfasst die vorbestimmte Situation eine erste Situation, in welcher der Fahrer das Fahrzeug nicht fährt, und
sind die Bestimmungsmittel dazu in der Lage, die erste Situation auf Grundlage des ersten Bilds zu detektieren.
Gemäß den Ausführungsformen ist es möglich, die erste Situation, in welcher der Fahrer das Fahrzeug nicht fährt, als den Bestimmungsgegenstand zum Bestimmen des Auftretens der Anomalie genau zu detektieren, indem lediglich das erste Bild verwendet wird, welches durch die erste Bildaufnahmeeinheit erhalten worden ist, welche dazu in der Lage ist, das Bild des Fahrers aufzunehmen.2. In the embodiments described above
the predetermined situation includes a first situation in which the driver is not driving the vehicle, and
the determination means are able to detect the first situation based on the first image.
According to the embodiments, it is possible to accurately detect the first situation in which the driver does not drive the vehicle as the determination object for determining the occurrence of the abnormality by using only the first image obtained by the first image pickup unit, which is able to capture the driver's image.
3. In den oben beschriebenen Ausführungsformen
umfasst die erste Situation eine Situation, in welcher der Fahrer eine Lenkstange (z.B. 31) nicht greift, und/oder eine Situation, in welcher der Fahrer nicht auf einem Fahrersitz (z.B. 32) des Fahrzeugs sitzt.
Gemäß den Ausführungsformen, die erste Situation, in welcher der Fahrer das Fahrzeug nicht fährt, als den Bestimmungsgegenstand zum Bestimmen des Auftretens der Anomalie genau zu detektieren, indem lediglich eine Sitzsituation des Fahrers und/oder eine Greifsituation der Lenkstange des Fahrers unter Verwendung des ersten Bilds detektiert wird.3. In the embodiments described above
The first situation includes a situation in which the driver does not grip a handlebar (e.g. 31) and/or a situation in which the driver does not sit in a driver's seat (e.g. 32) of the vehicle.
According to the embodiments, to accurately detect the first situation in which the driver is not driving the vehicle as the determination object for determining the occurrence of the abnormality by only using a driver's sitting situation and/or a driver's handlebar gripping situation using the first image is detected.
4. In den oben beschriebenen Ausführungsformen
umfassen die Situationsinformationen ein zweites Bild, welches durch eine zweite Bildaufnahmeeinheit (z.B. 13c bis 13f) erhalten wird, die dazu in der Lage ist, ein Bild einer Umgebung des Fahrzeugs aufzunehmen,
umfasst die vorbestimmte Situation ferner eine zweite Situation, in welcher der Fahrer liegt, und
sind die Bestimmungsmittel dazu in der Lage, die zweite Situation auf Grundlage des zweiten Bilds zu detektieren, und bestimmen, dass die Anomalie auftritt, in einem Fall, in welchem die zweite Situation zusätzlich zu der ersten Situation detektiert worden ist.4. In the embodiments described above
the situation information includes a second image, which is obtained by a second image capture unit (eg 13c to 13f) which is capable of capturing an image of an environment of the vehicle,
the predetermined situation further includes a second situation in which the driver is lying, and
the determining means is capable of detecting the second situation based on the second image and determines that the anomaly occurs in a case where the second situation has been detected in addition to the first situation.
Gemäß den Ausführungsformen kann die Anomalie des Fahrers und/oder des Fahrzeugs genau detektiert werden, indem eine Kombination einer Mehrzahl von Typen von Situationen detektiert wird, und eine Situation des Fahrers kann ebenfalls auf Grundlage des zweiten Bilds detektiert werden. Somit ist es möglich, eine Behandlung (Verarbeitung oder Mitteilung) im Einklang mit der Situation des Fahrers angemessen durchzuführen.According to the embodiments, the abnormality of the driver and/or the vehicle can be accurately detected by detecting a combination of a plurality of types of situations, and a situation of the driver can also be detected based on the second image. Thus, it is possible to carry out treatment (processing or notification) appropriately in accordance with the driver's situation.
5. In den oben beschriebenen Ausführungsformen
bestimmen die Bestimmungsmittel, dass der Fahrer sicher ist, in einem Fall, in welchem in dem zweiten Bild der Fahrer nicht liegt.5. In the embodiments described above
the determining means determine that the driver is safe in a case in which the driver is not lying in the second image.
Gemäß den Ausführungsformen ist es möglich, die Behandlung (Verarbeitung oder Mitteilung) im Einklang mit der auf Grundlage des zweiten Bilds detektierten Situation des Fahrers angemessen durchzuführen.According to the embodiments, it is possible to appropriately perform the treatment (processing or notification) in accordance with the driver's situation detected based on the second image.
6. In den oben beschriebenen Ausführungsformen
umfasst die vorbestimmte Situation ferner eine dritte Situation, in welcher eine Zündung des Fahrzeugs an ist, und
sind die Bestimmungsmittel dazu in der Lage, die dritte Situation auf Grundlage der Situationsinformationen zu detektieren.6. In the embodiments described above
The predetermined situation further includes a third situation in which an ignition of the vehicle is on, and
the determination means are able to detect the third situation based on the situation information.
Gemäß den Ausführungsformen ist es möglich, genau zu detektieren, in welcher Art von Situation sich das Fahrzeug befindet, und die Behandlung (Verarbeitung oder Mitteilung) im Einklang mit der Situation angemessen durchzuführen.According to the embodiments, it is possible to accurately detect what kind of situation the vehicle is in and appropriately perform treatment (processing or notification) in accordance with the situation.
7. In den oben beschriebenen Ausführungsformen
sind die Bestimmungsmittel dazu in der Lage, die dritte Situation auf Grundlage von Informationen zu detektieren, welche wenigstens eines aus einem Bild, welches durch eine Kamera (z.B. 13a bis 13b) erhalten wird, welche dazu in der Lage ist, ein Bild eines Zündschlüssels (z.B. 33) aufzunehmen, einer Position des Zündschlüssels (z.B. 33) und einem Zustand einer an dem Fahrzeug montierten Batterie angeben.7. In the embodiments described above
the determining means is capable of detecting the third situation based on information comprising at least one of an image obtained by a camera (e.g. 13a to 13b) capable of detecting an image of an ignition key ( e.g. 33), a position of the ignition key (e.g. 33) and a state of a battery mounted on the vehicle.
Gemäß den Ausführungsformen ist es möglich, die dritte Situation genau zu detektieren, in welcher die Zündung des Fahrers an ist.According to the embodiments, it is possible to accurately detect the third situation in which the driver's ignition is on.
8. In den oben beschriebenen Ausführungsformen
bestimmen die Bestimmungsmittel, dass der Fahrer von dem Fahrzeug ab-/ausgestiegen ist, in einem Fall, in welchem die Zündung aus ist.8. In the embodiments described above
the determining means determines that the driver has exited/exited the vehicle in a case where the ignition is off.
Gemäß den Ausführungsformen ist es möglich, genau zu bestimmen, ob der Fahrer angemessen von dem Fahrzeug ab-/ausgestiegen ist oder nicht, auf Grundlage der Kombination der Mehrzahl von Typen detektierter Situationen.According to the embodiments, it is possible to accurately determine whether or not the driver appropriately got off/exited the vehicle based on the combination of the plurality of types of detected situations.
9. In den oben beschriebenen Ausführungsformen
umfasst die vorbestimmte Situation ferner eine vierte Situation, in welcher sich das Fahrzeug in einem umgekippten Zustand befindet, und
bestimmen die Bestimmungsmittel, dass die Anomalie auftritt, in einem Fall, in welchem die dritte Situation und die vierte Situation zusätzlich zu der ersten Situation detektiert worden sind.9. In the embodiments described above
the predetermined situation further includes a fourth situation in which the vehicle is in an overturned state, and
the determining means determines that the abnormality occurs in a case where the third situation and the fourth situation have been detected in addition to the first situation.
Gemäß den Ausführungsformen ist es möglich, das Auftreten der Anomalie bei dem Fahrer und/oder dem Fahrzeug auf Grundlage der Kombination der Mehrzahl von Typen detektierter Situationen genau zu detektieren.According to the embodiments, it is possible to accurately detect the occurrence of the abnormality in the driver and/or the vehicle based on the combination of the plurality of types of detected situations.
10. In den oben beschriebenen Ausführungsformen
bestimmen die Bestimmungsmittel, dass der Fahrer vergessen hat, die Zündung auszuschalten, in einem Fall, in welchem sich das Fahrzeug nicht in dem umgekippten Zustand befindet.10. In the embodiments described above
the determining means determines that the driver has forgotten to turn off the ignition in a case where the vehicle is not in the overturned state.
Gemäß den Ausführungsformen ist es möglich, zu erkennen, dass der Fahrer vergessen hat, die Zündung des Fahrzeugs auszuschalten, auf Grundlage der Kombination der Mehrzahl von Typen detektierter Situationen.According to the embodiments, it is possible to recognize that the driver forgot to turn off the ignition of the vehicle based on the combination of the plurality of types of detected situations.
11. In den oben beschriebenen Ausführungsformen
umfasst die Überwachungsvorrichtung ferner Mitteilungsmittel (z.B. 23) zum Mitteilen der Anomalie in einem Fall, in welchem die Bestimmungsmittel bestimmen, dass die Anomalie auftritt,
wobei die Bestimmungsmittel einen Typ der Anomalie auf Grundlage der durch die Erfassungsmittel erfassten Situationsinformationen bestimmen und einen Mitteilungsmodus der Mitteilungsmittel auf Grundlage des Typs der Anomalie ändern.11. In the embodiments described above
the monitoring device further comprises notification means (eg 23) for notifying the abnormality in a case in which the determining means determines that the abnormality occurs,
wherein the determining means determines a type of the anomaly based on the situation information acquired by the detecting means and changes a notification mode of the notification means based on the type of the anomaly.
Gemäß den Ausführungsformen ist es möglich, das Auftreten der Anomalie angemessen mitzuteilen, auf Grundlage des Typs der Anomalie, welche bei dem Fahrer und/oder dem Fahrzeug auftritt, und somit ist es möglich, die Behandlung (Verarbeitung) der Anomalie angemessen durchzuführen.According to the embodiments, it is possible to appropriately notify the occurrence of the abnormality based on the type of abnormality occurring in the driver and/or the vehicle, and thus it is possible to appropriately perform the treatment (processing) of the abnormality.
12. In den oben beschriebenen Ausführungsformen
ist das Fahrzeug ein Spreizsitz-Typ-Fahrzeug.12. In the embodiments described above
the vehicle is a spreader seat type vehicle.
Gemäß den Ausführungsformen ist es möglich, das Auftreten der Anomalie bei dem Spreizsitz-Typ-Fahrzeug genau zu detektieren.According to the embodiments, it is possible to accurately detect the occurrence of the abnormality in the straddle-type vehicle.
Die Erfindung ist nicht auf die vorstehenden Ausführungsformen beschränkt und innerhalb des Geistes der Erfindung sind verschiedene Variationen/Änderungen möglich.The invention is not limited to the above embodiments and various variations/changes are possible within the spirit of the invention.
Die vorliegende Anmeldung beansprucht eine Priorität, welche auf der japanischen Patentanmeldung Nr.
BEZUGSZEICHENLISTEREFERENCE SYMBOL LIST
- Vv
- Fahrzeugvehicle
- 1010
- Fahrzeugseitige VorrichtungVehicle-side device
- 1313
- BildaufnahmeeinheitImage capture unit
- 1414
- ZustandsdetektionssensorCondition detection sensor
- 2020
- Informationsendgerät (Überwachungsvorrichtung)Information terminal (monitoring device)
- 2121
- VerarbeitungseinheitProcessing unit
- 21a21a
- ErfassungseinheitAcquisition unit
- 21b21b
- BestimmungseinheitDetermination unit
- 2323
- MitteilungseinheitNotification unit
Eine Überwachungsvorrichtung, welche eine Anomalie eines Fahrers und/oder eines Fahrzeugs überwacht, umfasst: Erfassungsmittel zum Erfassen von Situationsinformationen, welche Situationen des Fahrers und des Fahrzeugs angeben; und Bestimmungsmittel zum Bestimmen, dass die Anomalie auftritt, in einem Fall, in welchem eine vorbestimmte Situation detektiert worden ist, auf Grundlage der durch die Erfassungsmittel erfassten Situationsinformationen, wobei die Situationsinformationen ein erstes Bild umfassen, welches durch eine erste Bildaufnahmeeinheit erhalten wird, die dazu in der Lage ist, ein Bild des Fahrers aufzunehmen, welcher das Fahrzeug fährt.A monitoring device that monitors an abnormality of a driver and/or a vehicle includes: acquiring means for acquiring situation information indicating situations of the driver and the vehicle; and determining means for determining that the abnormality occurs in a case where a predetermined situation has been detected based on the situation information acquired by the detecting means, the situation information comprising a first image obtained by a first image capture unit associated therewith is able to capture an image of the driver driving the vehicle.
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- JP 2011123814 [0003]JP 2011123814 [0003]
- JP 2021049129 [0059]JP 2021049129 [0059]
Claims (16)
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021-049129 | 2021-03-23 | ||
JP2021049129 | 2021-03-23 | ||
PCT/JP2022/005584 WO2022201957A1 (en) | 2021-03-23 | 2022-02-14 | Monitoring device, vehicle, information terminal, monitoring method, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
DE112022001669T5 true DE112022001669T5 (en) | 2024-01-11 |
Family
ID=83395514
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE112022001669.8T Pending DE112022001669T5 (en) | 2021-03-23 | 2022-02-14 | MONITORING DEVICE, VEHICLE, INFORMATION TERMINAL, MONITORING METHOD AND PROGRAM |
Country Status (2)
Country | Link |
---|---|
DE (1) | DE112022001669T5 (en) |
WO (1) | WO2022201957A1 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011123814A (en) | 2009-12-14 | 2011-06-23 | Clarion Co Ltd | Processor for traffic accident information |
JP2021049129A (en) | 2019-09-25 | 2021-04-01 | キヤノンメディカルシステムズ株式会社 | Ultrasound diagnostic device and image processing device |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010033409A (en) * | 2008-07-30 | 2010-02-12 | Sumitomo Electric Ind Ltd | Vehicle accident prevention system, computer program, method for controlling vehicle accident prevention, and power supply control device |
JP4985601B2 (en) * | 2008-09-19 | 2012-07-25 | トヨタ自動車株式会社 | Collision avoidance support device |
JP6417962B2 (en) * | 2015-01-23 | 2018-11-07 | 沖電気工業株式会社 | Information processing apparatus, information processing method, and storage medium |
-
2022
- 2022-02-14 DE DE112022001669.8T patent/DE112022001669T5/en active Pending
- 2022-02-14 WO PCT/JP2022/005584 patent/WO2022201957A1/en active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011123814A (en) | 2009-12-14 | 2011-06-23 | Clarion Co Ltd | Processor for traffic accident information |
JP2021049129A (en) | 2019-09-25 | 2021-04-01 | キヤノンメディカルシステムズ株式会社 | Ultrasound diagnostic device and image processing device |
Also Published As
Publication number | Publication date |
---|---|
JPWO2022201957A1 (en) | 2022-09-29 |
WO2022201957A1 (en) | 2022-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102013224725B4 (en) | Method for detecting a fall of a driver of a two-wheeler and device for this purpose | |
DE69920290T2 (en) | DATA RECORDER FOR A MOTOR VEHICLE | |
DE102019101463A1 (en) | VISIBLE PROCESSES AND SYSTEMS FOR DETERMINING THE PRESENCE OF A TRAILER | |
DE102013209055A1 (en) | Data source identification, data collection and data storage for traffic events | |
DE102014107919A1 (en) | Accident reporting system | |
DE102013209999A1 (en) | A method and apparatus for detecting a collision between a vehicle and an object using a mobile terminal coupleable to the vehicle | |
DE112008000416T5 (en) | Vehicle-mounted video communication system and vehicle-mounted image acquisition system | |
DE102018200134B3 (en) | Method for acquiring training data for a driver assistance system, motor vehicle and server device | |
DE102018107755A1 (en) | VEHICLE EVENT IDENTIFICATION AND CLASSIFICATION USING CONTEXTUAL VEHICLE DATA | |
EP3335208A1 (en) | Device for identifying an accident situation of an open road vehicle | |
DE102013113779A1 (en) | System for detecting an accident by passing over | |
DE102012016776A1 (en) | Method for operating a motor vehicle and motor vehicle | |
DE102015213538A1 (en) | Method and system for warning against a wrong-way drive of a vehicle | |
EP4096994B1 (en) | Method and device for classification of an accident of a two-wheeled vehicle | |
DE102020215921A1 (en) | DEVICE AND WARNING SYSTEM FOR INTELLIGENT HELMET | |
DE202015102381U1 (en) | Mobile real-time video recorder | |
DE102020206659A1 (en) | MULTI-HYPOTHESIS OBJECT VERIFICATION FOR AUTOMATED DRIVING SYSTEMS | |
DE102021125734A1 (en) | SYSTEMS AND PROCEDURES FOR VEHICLE DAMAGE IDENTIFICATION AND INCIDENT MANAGEMENT | |
DE102020100496A1 (en) | SYSTEMS AND METHODS FOR DETECTING VEHICLE DAMAGE EVENTS AND REPORTING ON THESE | |
DE102016205425A1 (en) | Method, device and system for monitoring a child | |
CN110706115A (en) | Traffic accident fast claims settlement method, system and server | |
DE112022001669T5 (en) | MONITORING DEVICE, VEHICLE, INFORMATION TERMINAL, MONITORING METHOD AND PROGRAM | |
DE102018201395A1 (en) | Method for monitoring a transport item arranged on an outer side of a motor vehicle, anti-theft alarm device, transport goods device, and motor vehicle | |
DE102020103141A1 (en) | Environmental monitoring device | |
DE102018008683A1 (en) | A method of enabling the identification of a reckless driver of a road vehicle, system, computer program, computer readable medium, and vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed |