DE102019212412A1 - Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program - Google Patents

Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program Download PDF

Info

Publication number
DE102019212412A1
DE102019212412A1 DE102019212412.7A DE102019212412A DE102019212412A1 DE 102019212412 A1 DE102019212412 A1 DE 102019212412A1 DE 102019212412 A DE102019212412 A DE 102019212412A DE 102019212412 A1 DE102019212412 A1 DE 102019212412A1
Authority
DE
Germany
Prior art keywords
interior
data
control unit
designed
monitoring device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE102019212412.7A
Other languages
German (de)
Inventor
Joao Curti
Eduardo Neiva
Rafael Cardoso Pietsch
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZF Friedrichshafen AG
Original Assignee
ZF Friedrichshafen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZF Friedrichshafen AG filed Critical ZF Friedrichshafen AG
Priority to DE102019212412.7A priority Critical patent/DE102019212412A1/en
Publication of DE102019212412A1 publication Critical patent/DE102019212412A1/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/08—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19647—Systems specially adapted for intrusion detection in or around a vehicle
    • G08B13/1965—Systems specially adapted for intrusion detection in or around a vehicle the vehicle being an aircraft
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/22—Status alarms responsive to presence or absence of persons
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G08B5/36—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Electromagnetism (AREA)
  • Alarm Systems (AREA)

Abstract

Die Erfindung betrifft eine Überwachungsvorrichtung (1) zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs die Überwachungsvorrichtung aufweisend eine Erfassungseinrichtung (10), welche zur Generierung von Innenraumdaten ausgestaltet ist, wobei die Innenraumdaten zumindest den Innenraum des Fahrzeugs optisch abbilden, und wobei die Erfassungseinrichtung (10) zum Übertragen der Innenraumdaten ausgebildet ist, undeine Steuereinheit (2) zum Empfang der von der Erfassungseinrichtung (10) übertragenen Innenraumdaten, wobeidie Steuereinheit (2) zur Auswertung der Innenraumdaten in Bezug auf ein erfasstes Lebewesen durch einen auf Künstlicher Intelligenz (KI) basierenden Klassifikator in ein klassifiziertes Auswerteergebnis ausgebildet ist, unddie Steuereinheit (2) dazu ausgebildet ist anhand des klassifizierten Auswerteergebnisses zumindest eine erste Aktion auszulösen.Ferner betrifft die Erfindung noch ein Verfahren und ein ComputerprogrammThe invention relates to a monitoring device (1) for monitoring a living being in the interior of a vehicle, the monitoring device having a detection device (10) which is designed to generate interior data, the interior data at least optically depicting the interior of the vehicle, and wherein the detection device (10 ) is designed to transmit the interior space data, and a control unit (2) for receiving the interior space data transmitted by the detection device (10), the control unit (2) for evaluating the interior space data in relation to a detected living being by means of an artificial intelligence (AI) -based classifier into a classified evaluation result, and the control unit (2) is designed to initiate at least one first action on the basis of the classified evaluation result. The invention also relates to a method and a computer program

Description

Die Erfindung betrifft eine Überwachungsvorrichtung zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs, die Überwachungsvorrichtung aufweisend eine Erfassungseinrichtung, welche zur Generierung von Innenraumdaten ausgestaltet ist, wobei die Innenraumdaten zumindest den Innenraum des Fahrzeugs optisch abbilden, und wobei die Erfassungseinrichtung zum Übertragen der Innenraumdaten ausgebildet ist, und eine Steuereinheit zum Empfang der von der Erfassungseinrichtung übertragenen Innenraumdaten. Ferner betrifft die Erfindung ein Verfahren zur Überwachung eines Innenraums eines Fahrzeugs und ein Computerprogramm.The invention relates to a monitoring device for monitoring a living being in the interior of a vehicle, the monitoring device having a detection device which is designed to generate interior data, the interior data at least optically depicting the interior of the vehicle, and wherein the detection device is designed to transmit the interior data, and a control unit for receiving the interior data transmitted by the detection device. The invention also relates to a method for monitoring an interior of a vehicle and a computer program.

Im Rahmen der Fahrzeugsicherheit sind die Standards zur Personenbeförderung sehr hoch. So werden spezielle Kindersitze und Babyschalen oder Tierhalterungen für die Beförderung von Kleinkindern und Tieren eingesetzt, die im Rahmen eines Unfalls Schutz bieten.In terms of vehicle safety, the standards for passenger transport are very high. For example, special child seats and baby carriers or animal racks are used for the transport of small children and animals that offer protection in the event of an accident.

Jedoch helfen diese Geräte nicht bei unachtsamen Entscheidungen beispielsweise wenn der Fahrer unter hohen Druck steht. Bei der Ankunft an einem Ziel kann beispielsweise der Fahrer das Kleinkind oder das Tier im Fahrzeug vergessen, wenn es außerhalb des Gesichtsfeldes schläft. Auch unterschätzen Fahrer die sich schnell aufstauende Wärme im Fahrzeug, wenn sie dieses für eine kurze Wegbesorgung verlassen und ein schlafendes Kind/Tier im Innenraum des Fahrzeugs zurücklassen. So kommt es beispielsweise durch Wärmestau oder Hitze zu Todesfällen.However, these devices do not help with careless decisions, for example when the driver is under high pressure. When arriving at a destination, for example, the driver can forget the toddler or the animal in the vehicle if it is sleeping outside of the field of view. Drivers also underestimate the heat that quickly builds up in the vehicle when they leave the vehicle for a short trip and leave a sleeping child / animal in the vehicle's interior. For example, heat build-up or heat can lead to deaths.

Ferner können Fahrer im Fahrzeug abgelenkt werden, wenn Kleinkinder sich abschnallen oder beispielsweise Tiere laute Geräusche von sich geben. Es besteht dann die Gefahr, dass sich der Fahrer während der Fahrt zu dem Kind/Tier umdreht und nicht mehr auf den Straßenverkehr achtet. Dies erhöht die Unfallgefahr enorm.Furthermore, drivers in the vehicle can be distracted when small children unbuckle their seat belts or, for example, when animals make loud noises. There is then the risk that the driver will turn around while driving to the child / animal and no longer pay attention to the traffic. This increases the risk of accidents enormously.

Die DE 10 2010 010 179 A1 umfasst eine Vorrichtung welche einen Empfänger, welcher Daten von einer Aufzeichnungseinheit empfangen kann, eine Steuereinheit, welche die Daten weiterleitet und eine Wiedergabeeinheit zur Anzeige der übermittelten Daten aufweist. Dabei erfolgt das Aufzeichnen der Daten innerhalb eines Fahrzeugs.The DE 10 2010 010 179 A1 comprises a device which has a receiver which can receive data from a recording unit, a control unit which forwards the data and a playback unit for displaying the transmitted data. The data is recorded within a vehicle.

Die Aufgabe der Erfindung ist es, Mittel bereitzustellen, mit welchen solche Gefahrensituationen im Fahrzeug vermieden werden können.The object of the invention is to provide means with which such dangerous situations in the vehicle can be avoided.

Diese Aufgabe wird durch eine Überwachungsvorrichtung mit den Merkmalen des Anspruchs 1 sowie ein Verfahren mit den Merkmalen des Anspruchs 14 gelöst.This object is achieved by a monitoring device with the features of claim 1 and a method with the features of claim 14.

Ferner wird die Aufgabe gelöst durch ein Computerprogramm mit den Merkmalen des Anspruchs 15.The object is also achieved by a computer program with the features of claim 15.

In den Unteransprüchen sind weitere vorteilhafte Maßnahmen aufgelistet, die beliebig geeignet miteinander kombiniert werden können, um weitere Vorteile zu erzielen.The subclaims list further advantageous measures that can be combined with one another in any suitable manner in order to achieve further advantages.

Die Aufgabe wird gelöst durch eine Überwachungsvorrichtung zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs, die Überwachungsvorrichtung aufweisend
eine Erfassungseinrichtung, welche zur Generierung von Innenraumdaten ausgestaltet ist, wobei die Innenraumdaten zumindest den Innenraum des Fahrzeugs optisch abbilden, und wobei die Erfassungseinrichtung zum Übertragen der Innenraumdaten ausgebildet ist
eine Steuereinheit zum Empfang der von der Erfassungseinrichtung übertragenen Innenraumdaten,
wobei
die Steuereinheit zur Auswertung der Innenraumdaten durch einen auf Künstlicher Intelligenz (KI) basierenden Klassifikator in ein klassifiziertes Auswerteergebnis in Bezug auf das erfasste Lebewesen ausgebildet ist, und
die Steuereinheit dazu ausgebildet ist, anhand des klassifizierten Auswerteergebnisses zumindest eine erste Aktion auszulösen.The object is achieved by a monitoring device for monitoring a living being in the interior of a vehicle, having the monitoring device
a detection device which is designed to generate interior data, the interior data at least optically depicting the interior of the vehicle, and wherein the detection device is designed to transmit the interior data
a control unit for receiving the interior data transmitted by the detection device,
in which
the control unit is designed to evaluate the interior space data by means of an artificial intelligence (KI) -based classifier into a classified evaluation result in relation to the recorded living being, and
the control unit is designed to trigger at least one first action on the basis of the classified evaluation result.

Eine Erfassungseinrichtung ist zur Erfassung eines Lebewesens im Innenraum des Fahrzeugs ausgestaltet. Dies können beispielsweise Bildsensoren wie Innenraumkameras sein, um zumindest den Innenraum durch Daten optisch abzubilden. Ferner kann die Erfassungseinrichtung noch zusätzlich Temperatursensoren zur Erfassung der Temperatur im Innenraum als Innenraumdaten und/oder ein Mikrofon zur akustischen Erfassung als Innenraumdaten aufweisen. Auch andere Ausgestaltungen sind möglich.A detection device is designed to detect a living being in the interior of the vehicle. This can be, for example, image sensors such as interior cameras in order to optically map at least the interior using data. Furthermore, the detection device can additionally have temperature sensors for detecting the temperature in the interior as interior data and / or a microphone for acoustic detection as interior data. Other configurations are also possible.

Der Innenraum eines Fahrzeugs kann auch als Fahrgastzelle bezeichnet werden.The interior of a vehicle can also be referred to as a passenger compartment.

Die Übertragung von der Erfassungseinrichtung an die Steuereinheit kann drahtlos beispielsweise per Funk oder kabelgebunden erfolgen.The transmission from the detection device to the control unit can take place wirelessly, for example by radio or by cable.

Eine Steuereinheit ist vorzugsweise ein als embedded system ausgestaltetes Steuergerät.A control unit is preferably a control device designed as an embedded system.

Ein Klassifikator ist hier ein auf Methoden der künstlichen Intelligenz beruhendes Klassifikationsverfahren. Solche sind beispielsweise als neuronale Netze, GANs (Generative Adversarial Networks) oder als Reinforcement Learning ausgebildet. Die Steuereinheit kann hierzu einen GPU (Grafikprozessor) aufweisen.
Ferner können auch andere Klassifikatoren aus der künstlichen Intelligenz herangezogen werden.A classifier here is a classification method based on artificial intelligence methods. These are designed, for example, as neural networks, GANs (Generative Adversarial Networks) or as reinforcement learning. The control unit can have a GPU (graphics processor) for this purpose.
Furthermore, other classifiers from artificial intelligence can also be used.

Erste Aktionen können beispielsweise sein: Anschalten einer Klimaanlage durch die Steuereinheit, senden einer Benachrichtigung an eine mobile Einheit eines Besitzers, ausgeben eines Alarms. Hierbei kann es sich um einen Ton, einen Anruf bei einem vorregistrierten Telefon, eine SMS-Nachricht, eine App-Benachrichtigung oder sogar um den Autoalarm selbst handeln. Die erfindungsgemäße Überwachungsvorrichtung kann auch zur Erkennung von Haustieren/Kindern und älteren Menschen eingesetzt werden, die nicht allein handeln können und eine ständige Anwesenheit benötigen.Initial actions can be, for example: the control unit switches on an air conditioning system, sends a notification to an owner's mobile unit, issues an alarm. This could be a tone, a call to a pre-registered phone, a text message, an app notification, or even the car alarm itself. The monitoring device according to the invention can also be used for the detection of pets / children and elderly people who cannot act alone and need constant presence.

Die Überwachungsvorrichtung ist vorzugsweise daher dazu ausgebildet, bei auftretenden Situationen im Fahrzeuginneren selbstständig erste Aktionen in Abhängigkeit von dem klassifizierten Auswerteergebnis zu ergreifen, also beispielsweise Behörden/Besitzer anzurufen und es dient somit nicht als einfache passive Überwachungsvorrichtung, sondern auch als aktive Überwachungsvorrichtung.The monitoring device is therefore preferably designed to independently take first actions depending on the classified evaluation result when situations occur inside the vehicle, for example to call authorities / owners and it therefore does not serve as a simple passive monitoring device, but also as an active monitoring device.

Durch die erfindungsgemäße Überwachungsvorrichtung kann der Zustand und der Status eines Lebewesens beispielsweise eines Kindes oder Tieres durch die optische Erfassung des Innenraums überwacht werden. Somit ist es möglich, ein Kind oder Tier, für kurze Zeit unbegleitet in einem Fahrzeug zu lassen. Mit der Erfassungseinrichtung beispielsweise einer Innenraumkamera und der Bilderkennung durch den Klassifikator klassifiziert die Überwachungsvorrichtung ein Kind/Tier/Lebewesen und seinen Status, wenn es schläft, wach ist, weint usw. als ein Auswerteergebnis und weist diesem eine erste Aktion zu.With the monitoring device according to the invention, the condition and the status of a living being, for example a child or animal, can be monitored by optical detection of the interior. This makes it possible to leave a child or animal unaccompanied in a vehicle for a short time. With the detection device, for example an indoor camera and the image recognition by the classifier, the monitoring device classifies a child / animal / living being and its status when it is sleeping, awake, crying, etc. as an evaluation result and assigns a first action to it.

Die Überwachungsvorrichtung ermöglicht eine Überwachung bzw. ein Innenmonitoring auch während des Fahrzeugs ausgeschaltet ist und bewertet den sicherheitstechnischen Umgebungszustand der Fahrgäste mit dem KI-basierten Klassifikator. Ferner reagiert die Überwachungsvorrichtung auf die klassifizierten Auswerteergebnisse.The monitoring device enables monitoring or interior monitoring even while the vehicle is switched off and evaluates the safety-related environmental status of the passengers with the AI-based classifier. The monitoring device also reacts to the classified evaluation results.

Die Überwachungsvorrichtung ermöglicht es dem Besitzer, auf die von der Überwachungseinrichtung eingestuften Zustand des Lebewesens im Fahrzeug, anhand der von der Steuereinheit der Überwachungsvorrichtung ausgegebenen ersten Aktion angemessen zu reagieren.The monitoring device enables the owner to react appropriately to the condition of the living being in the vehicle classified by the monitoring device on the basis of the first action output by the control unit of the monitoring device.

Dadurch kann ein Erwachsener das Kind/Tier/Lebewesen für eine gewisse Zeitspanne allein in einem Auto lassen, um beispielsweise eine Aufgabe in der Nähe des Autos zu erledigen, wie z.B. das Auto zu betanken oder schnell in die Bäckerei oder den Supermarkt zu gehen.This allows an adult to leave the child / animal / living being alone in a car for a certain period of time, for example to do a task near the car, such as filling up the car or going to the bakery or the supermarket quickly.

Der Besitzer kann somit den Zustand des Kindes/Tieres/Lebewesens überwachen und benachrichtigt werden, falls sich dieser ändert. Wenn der Zustand des Kindes/Tieres/Lebewesens sich verschlechtert und der Besitzer nach einer vorgegebenen Zeitspanne nach der ersten Aktion nicht reagiert, kann die Überwachungsvorrichtung als zweite Aktion beispielsweise einen Fahrzeugalarm auslösen, um eine vorbeikommende Person zu informieren oder sogar den örtlichen Rettungsdienst anrufen.The owner can thus monitor the condition of the child / animal / living being and be notified if it changes. If the condition of the child / animal / living being worsens and the owner does not react after a predetermined period of time after the first action, the monitoring device can, for example, trigger a vehicle alarm as a second action to inform a passing person or even call the local rescue service.

Die Überwachungsvorrichtung kann bei ausgeschaltetem, verschlossenem Fahrzeug als auch bei einem fahrenden Fahrzeug eingesetzt werden. So kann es erkennen, wenn beispielsweise dem Kind/Tier Erbrechen oder Ersticken während der Fahrt droht und den Fahrer alarmieren. Somit kann der Fahrer verzichten, sich während der Fahrt umdrehen zu müssen, um den Zustand des Kindes/Tieres /Lebewesens in Augenschein zu nehmen.The monitoring device can be used when the vehicle is switched off and locked and when the vehicle is moving. For example, it can detect if the child / animal threatens to vomit or suffocate while driving and alert the driver. The driver can thus dispense with having to turn around while driving in order to inspect the condition of the child / animal / living being.

Vorzugsweise ist ein Bewegungssensor vorgesehen, welcher zur Erkennung einer Bewegung im Innenraum des Fahrzeugs und zur Generierung von Bewegungsdaten ausgebildet ist, wobei der Bewegungssensor zur Datenübertragung der Bewegungsdaten mit der Steuereinheit verbunden ist. Der Bewegungssensor ist dazu ausgestaltet eine Bewegung eines Lebewesens im Innenraum zu erkennen. Dabei ist der Bewegungssensor zur Datenübertragung zumindest mit der Steuereinheit verbunden. Durch den Bewegungssensor kann die Anwesenheit zumindest eines Lebewesens, wie Kinder oder Tiere erfasst werden, sowie eine Positionsbestimmung vorgenommen werden. Die vom Bewegungssensor bei einer Bewegung erfassten Bewegungsdaten und die Position der Bewegung werden an die Steuereinheit übermittelt.A movement sensor is preferably provided which is designed to detect movement in the interior of the vehicle and to generate movement data, the movement sensor being connected to the control unit for data transmission of the movement data. The motion sensor is designed to detect a movement of a living being in the interior. The motion sensor for data transmission is connected at least to the control unit. The presence of at least one living being, such as children or animals, can be detected by the motion sensor, and a position can be determined. The movement data recorded by the movement sensor during a movement and the position of the movement are transmitted to the control unit.

In bevorzugter Ausgestaltung ist ein Sitzbelegungssensor vorgesehen, welcher zur Erkennung einer Sitzbelegung auf einem Fahrzeugsitz und zur Generierung von Sitzbelegungsdaten ausgebildet ist, und wobei der Sitzbelegungssensor zur Datenübertragung der Sitzbelegungsdaten mit der Steuereinheit verbunden ist. Der Sitzbelegungssensor meldet somit eine erkannte Sitzbelegung und vorzugsweise die Position der Belegung an die Steuereinheit.
Durch die Sitzbelegung kann somit einfach die Anwesenheit eines Lebewesens auf einem Sitz erkannt werden.In a preferred embodiment, a seat occupancy sensor is provided which is designed to detect seat occupancy on a vehicle seat and to generate seat occupancy data, and wherein the seat occupancy sensor is connected to the control unit for data transmission of the seat occupancy data. The seat occupancy sensor thus reports a detected seat occupancy and preferably the position of the occupancy to the control unit.
The presence of a living being on a seat can thus easily be recognized by the seat occupancy.

In bevorzugter Ausgestaltung ist ein Gurtsensor vorgesehen, welcher zur Erfassung des Anlegezustandes eines Sicherheitsgurtes eines Fahrersitzes und zur Generierung von Anlegezustandsdaten ausgebildet ist, wobei der Gurtsensor zur Datenübertragung der Anlegezustandsdaten mit der Steuereinheit verbunden ist. Der Gurtsensor meldet das Anlegen des Sicherheitsgurtes und vorzugsweise die Position des angelegten Sicherheitsgurtes an die Steuereinheit. Durch einen angelegten, d.h. aktivierten Sicherheitsgurt kann somit die Anwesenheit und Position eines Lebewesens auf einem Sitz erkannt werden.In a preferred embodiment, a belt sensor is provided which is designed to detect the state of application of a seat belt in a driver's seat and to generate state data, the belt sensor being connected to the control unit for data transmission of the state data. The belt sensor reports the wearing of the seat belt and preferably the position of the belt to the Control unit. The presence and position of a living being on a seat can thus be recognized by an applied, ie activated, seat belt.

Vorzugsweise werden der Gurtsensor und der Sitzbelegungssensor als auch der Bewegungssensor gleichzeitig verwendet, um ein Lebewesen im Innenraum zu erkennen und die Position des Lebewesens zu bestimmen. Erkennen alle drei auf ein Lebewesen an, d.h. der Sitzbelegungssensor meldet eine Belegung eines Sitzes, der Gurtsensor ein Anlegen eines Sicherheitsgurtes und der Bewegungssensor eine Bewegung, so kann mit hoher Sicherheit von der Anwesenheit eines Kindes/Tieres/Lebewesens ausgegangen werden.Preferably, the seat belt sensor and the seat occupancy sensor as well as the movement sensor are used simultaneously in order to recognize a living being in the interior space and to determine the position of the living being. If all three recognize a living being, i.e. the seat occupancy sensor reports that a seat is being used, the belt sensor that a seat belt is being worn and the motion sensor is moving, it can be assumed with a high degree of certainty that a child / animal / living being is present.

In bevorzugter Ausgestaltung ist die Steuereinheit dazu ausgebildet, bei Erkennen eines Lebewesens durch den Bewegungssensor und/oder den Gurtsensor und/oder den Sitzbelegungssensor die Erfassungseinrichtung zu aktivieren, wenn diese sich im inaktiven Zustand befindet.In a preferred embodiment, the control unit is designed to activate the detection device when a living being is recognized by the motion sensor and / or the seat belt sensor and / or the seat occupancy sensor, if it is in the inactive state.

Dabei wird die Erfassungseinrichtung beispielsweise bei einem ausgeschalteten Motor des Fahrzeugs inaktiviert, um somit im Stand-By-Betrieb Strom zu sparen. Durch die Aktivierung, lediglich dann, wenn ein Lebewesen im Innenraum erkannt wurde, kann somit Stand-By-Strom gespart werden. Dadurch kann ein schnelles Entleeren der Fahrzeugbatterie vermieden werden.The detection device is deactivated when the vehicle engine is switched off, for example, in order to save electricity in stand-by mode. By activating it, only when a living being has been detected in the interior, stand-by electricity can be saved. This can prevent the vehicle battery from draining quickly.

Ferner weist die Überwachungsvorrichtung vorzugsweise eine WLan /Bluetooth - Schnittstelle und/oder eine GPS-Schnittstelle auf. Die Steuereinheit ist vorzugsweise zum Übertragen der Innenraumdaten an die WLan-/Bluetooth-Schnittstelle und/oder GPS- Schnittstelle ausgebildet und die WLan/Bluetooth-Schnittstelle und/oder GPS-Schnittstelle ist dazu ausgebildet, die Innenraumdaten an eine mobile Einheit zu übertragen.Furthermore, the monitoring device preferably has a WLan / Bluetooth interface and / or a GPS interface. The control unit is preferably designed to transmit the interior data to the WiFi / Bluetooth interface and / or GPS interface and the WiFi / Bluetooth interface and / or GPS interface is designed to transmit the interior data to a mobile unit.

Die Überwachungsvorrichtung weist vorzugsweise zudem noch ein Funkschließsystem (Remote Keyless System) für ein schlüsselloses Ent- und Verriegeln der Fahrzeugtüren per Fernbedienung auf. Das Funkschließsystem ist ebenfalls mit der Steuereinheit verbunden. Dadurch kann der Steuereinheit das Verschließen des Fahrzeugs mitgeteilt werden. Ferner kann durch das Funkschließsystem, erkannt werden, ob sich der Besitzer des Funkschließsystems noch in der Nähe befindet bzw. eine Entfernung zu dem Besitzer des Funkschließsystems bestimmt werden.The monitoring device preferably also has a remote keyless system for keyless unlocking and locking of the vehicle doors by remote control. The radio locking system is also connected to the control unit. This allows the control unit to be informed that the vehicle has been locked. Furthermore, it can be recognized by the radio locking system whether the owner of the radio locking system is still in the vicinity or a distance to the owner of the radio locking system can be determined.

In bevorzugter Ausgestaltung umfasst die Erfassungseinrichtung eine Innenraumkamera, welche zur optischen Erfassung des Innenraums als Bildinnenraumdaten ausgebildet ist, wobei die Bildinnenraumdaten zur Auswertung in Bezug auf ein erfasstes Lebewesen durch den Klassifikator in das klassifizierte Auswerteergebnis an die Steuereinheit übertragen werden. Die Innenraumkamera kann als Bildinnenraumdaten den Innenraum des Fahrzeugs bildlich erfassen, das heißt, in anderen Worten beispielsweise das Kind oder Tier im Innenraum des Fahrzeugs aufnehmen. Diese Bildinnenraumdaten können durch den Klassifikator ausgewertet und beurteilt werden, und das klassifizierte Ergebnis einer Aktion zugeordnet werden.In a preferred embodiment, the detection device comprises an interior camera, which is designed to optically detect the interior space as image interior data, the image interior data being transferred to the control unit for evaluation in relation to a detected living being by the classifier in the classified evaluation result. The interior camera can image the interior of the vehicle as interior image data, that is to say, in other words, for example, record the child or animal in the interior of the vehicle. This image interior data can be evaluated and assessed by the classifier, and the classified result can be assigned to an action.

Vorzugsweise ist eine Schnittstelle, zur bidirektionalen Übertragung von Daten vorgesehen, und wobei die Steuereinheit ferner dazu ausgebildet ist, die Bildinnenraumdaten über die Schnittstelle an eine mobile Einheit zu übertragen und wobei ferner eine Anzeigeeinheit vorgesehen ist, und wobei die Steuereinheit dazu ausgebildet ist, Bilddaten über die Schnittstelle von der mobilen Einheit zu empfangen und an die Anzeigeeinheit weiterzuleiten, und die Anzeigeeinheit dazu ausgebildet ist, die Bilddaten anzuzeigen.An interface is preferably provided for the bidirectional transmission of data, and the control unit is also designed to transmit the image interior data via the interface to a mobile unit and a display unit is also provided, and the control unit is designed to transmit image data via receiving the interface from the mobile unit and forwarding it to the display unit, and the display unit is designed to display the image data.

Somit können die aufgenommenen Bildinnenraumdaten an eine mobile Einheit, beispielsweise ein Handy übertragen werden. Somit kann der Fahrer/Besitzer des Handys den Zustand des Lebewesens im Fahrzeug selbst begutachten. Im fahrenden Zustand kann die Steuereinheit dazu ausgebildet sein, bei einem klassifizierten Auswerteergebnis, dass eine Gefahr für das Lebewesen während der Fahrt droht, eine Warnung/Alarm auf einer Anzeigeeinheit des Fahrzeugs auszugeben.The recorded interior image data can thus be transmitted to a mobile unit, for example a cell phone. Thus, the driver / owner of the cell phone can examine the condition of the living being in the vehicle himself. In the driving state, the control unit can be designed to output a warning / alarm on a display unit of the vehicle in the event of a classified evaluation result that there is a threat to the living being while driving.

Ferner können aufgenommene Bilddaten durch die mobile Einheit in dem Fahrzeuginnenraum angezeigt werden. Dadurch können beispielsweise die Eltern eine kurzfristige Beruhigung des Kindes bewirken.Furthermore, recorded image data can be displayed by the mobile unit in the vehicle interior. In this way, for example, the parents can calm the child down for a short time.

In weiterer bevorzugter Ausgestaltung umfasst die Erfassungseinrichtung ein Schallwandler, welcher zur akustischen Erfassung des Innenraums in Toninnenraumdaten ausgebildet ist, wobei die Toninnenraumdaten zur Auswertung in Bezug auf ein erfasstes Lebewesen durch den Klassifikator in das klassifizierte Auswerteergebnis an die Steuereinheit übertragen werden. Vorzugsweise ist der Schallwandler ein Mikrofon zum Aufnehmen der Geräusche in dem Innenraum als Toninnenraumdaten als auch zum Ausgeben von Tondaten. Dadurch können die Toninnenraumdaten als eine akustische Erfassung des Innenraums und des Lebewesens in den Klassifikator mit einfließen.In a further preferred embodiment, the detection device comprises a sound transducer, which is designed for the acoustic detection of the interior space in sound interior data, the sound interior data being transferred to the control unit for evaluation in relation to a detected living being by the classifier in the classified evaluation result. The sound transducer is preferably a microphone for picking up the noises in the interior space as sound interior data and also for outputting sound data. As a result, the sound interior data can flow into the classifier as an acoustic recording of the interior space and the living being.

Weiterhin vorzugsweise ist eine Schnittstelle zur bidirektionalen Übertragung von Daten vorgesehen, wobei die Steuereinheit dazu ausgebildet ist, die Toninnenraumdaten über die Schnittstelle an eine mobile Einheit zu übertragen und wobei ferner die Steuereinheit zum Empfang von Tondaten, welche von einer mobilen Einheit aufgenommen und gesendet werden, ausgebildet ist, und der Schallwandler zum Ausgeben der Tondaten ausgebildet ist.Furthermore, an interface for the bidirectional transmission of data is preferably provided, the control unit being designed to transmit the audio interior data via the interface to a mobile unit and furthermore the Control unit is designed to receive sound data, which are recorded and transmitted by a mobile unit, and the sound transducer is designed to output the sound data.

Somit können die aufgenommenen Toninnenraumdaten an eine mobile Einheit, beispielsweise ein Handy übertragen werden. Somit kann der Fahrer/Besitzer des Handys den Zustand des Lebewesens im Fahrzeug selbst begutachten. Ferner können aufgenommene Tondaten durch die mobile Einheit in dem Fahrzeuginnenraum ausgegeben werden. Dadurch können beispielsweise die Eltern eine kurzfristige Beruhigung des Kindes/Lebewesens bewirken und eine Unterhaltung mit dem Kind/Lebewesen beginnen.The recorded interior audio data can thus be transmitted to a mobile unit, for example a cell phone. Thus, the driver / owner of the cell phone can examine the condition of the living being in the vehicle himself. Furthermore, recorded sound data can be output by the mobile unit in the vehicle interior. In this way, for example, the parents can calm the child / living being for a short time and start a conversation with the child / living being.

In bevorzugter Ausgestaltung umfasst die Erfassungseinrichtung einen Temperatursensor zur Erfassung der Innenraumtemperatur, wobei die Innenraumtemperatur zur Auswertung in Bezug auf ein erfasstes Lebewesen durch den Klassifikator in das klassifizierte Auswerteergebnis an die Steuereinheit übertragen wird. Ein Temperatursensor kann dabei jedes geeignete Temperaturmesselement sein.In a preferred embodiment, the detection device comprises a temperature sensor for detecting the interior temperature, the interior temperature being transferred to the control unit by the classifier in the classified evaluation result for evaluation in relation to a detected living being. A temperature sensor can be any suitable temperature measuring element.

In bevorzugter Ausgestaltung ist die Steuereinheit dazu ausgebildet, bei einer vorgegebenen ersten Temperaturschwelle eine Aktivierung des Alarmsystems und eine Zeitspanne für eine Reaktion des Benutzers an die Steuereinheit zu setzen und bei Überschreiten einer vorgegebenen zweiten Temperaturschwelle und/oder ablaufen der Zeitspanne ohne Reaktion des Benutzers einen Fahrzeugalarm auszulösen. Somit kann die Überwachungsvorrichtung aktiv zum Wohle eines Kindes/Tieres/Lebewesens eingreifen.In a preferred embodiment, the control unit is designed to activate the alarm system and a time period for a reaction by the user to the control unit at a predetermined first temperature threshold and to set a vehicle alarm when a predetermined second temperature threshold is exceeded and / or the time period expires without a reaction by the user trigger. The monitoring device can thus actively intervene for the benefit of a child / animal / living being.

Vorzugsweise ist eine Aktionsdateneinheit mit unterschiedlichen ersten Aktionen vorgesehen, wobei den unterschiedlichen Auswerteergebnissen unterschiedliche erste Aktionen zugeordnet sind. Die Aktionsdateneinheit kann als Tabelle etc. ausgestaltet sein. Ferner kann eine solche Aktionsdateneinheit auch als ein neuronales Netz/andere Klassifikationsverfahren ausgebildet werden.An action data unit with different first actions is preferably provided, with different first actions being assigned to the different evaluation results. The action data unit can be designed as a table etc. Furthermore, such an action data unit can also be designed as a neural network / other classification method.

Weiterhin vorzugsweise ist die Steuereinheit dazu ausgebildet, in Abhängigkeit von dem klassifizierten Auswerteergebnis und der Reaktion auf die erste Aktion nach einer vorgegebenen Zeitspanne eine zweite Aktion auszugeben.
Den so verschieden klassifizierten Auswerteergebnissen sind verschiedene erste Aktionen zugewiesen. In der Aktionsdateneinheit kann beispielsweise die erste Aktion und die zweite Aktion in Abhängigkeit zu dem jeweilig klassifizierten Ausgabeergebnis eingetragen sein.Furthermore, the control unit is preferably designed to output a second action after a predetermined period of time as a function of the classified evaluation result and the reaction to the first action.
Various first actions are assigned to the evaluation results classified in this way. In the action data unit, for example, the first action and the second action can be entered as a function of the respective classified output result.

So ist beispielsweise ein klassifiziertes Ausgabeergebnis: „Kind im Fahrzeuginnenraum vorhanden, weinend, laut". Die Steuereinheit kann nun als erste Aktion die von der Innenraumkamera aufgenommenen Bildinnenraumdaten und Toninnenraumdaten an die mobile Einheit, vorzugsweise einen Laptop oder ein Handy/Tablet übertragen. Ferner kann beispielsweise die von der mobilen Einheit aufgenommenen und an die Steuereinheit gesendeten Bilder durch die Anzeigeeinheit als erste Aktion ausgegeben werden. Auch kann die Steuereinheit zusätzlich als erste Aktion die über die WLan/Bluetooth- Schnittstelle oder GPS-Schnittstelle empfangenen Tondaten von der mobilen Einheit durch ein Mikrofon ausgeben. So kann beispielsweise das weinende Kind durch die Tonausgabe mittels des Mikrofons und die Bildausgabe durch die Anzeigeeinheit beruhigt werden.For example, a classified output result is: "Child in the vehicle interior, crying, loud". As a first action, the control unit can now transfer the interior image data and interior audio data recorded by the interior camera to the mobile unit, preferably a laptop or a cell phone / tablet For example, the images recorded by the mobile unit and sent to the control unit are output by the display unit as the first action. The control unit can also use the audio data received from the mobile unit via the WiFi / Bluetooth interface or GPS interface as a first action For example, the crying child can be soothed by the sound output by means of the microphone and the image output by the display unit.

Ferner kann eine zweite Zeitspanne festgesetzt werden, innerhalb dessen der Besitzer auf die erste Aktion reagieren muss. Als zweite Aktion kann dann, wenn die zweite Zeitspanne ohne Reaktion des Besitzers verstrichen ist, ein Alarm ausgegeben werden, wobei die zweite Zeitspanne unterschiedlich zur ersten Zeitspanne ausgebildet sein kann.Furthermore, a second period of time can be set within which the owner must react to the first action. As a second action, if the second time period has elapsed without a reaction from the owner, an alarm can be output, wherein the second time period can be configured differently from the first time period.

Ferner wird die Aufgabe gelöst durch ein Verfahren zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs mit einer wie oben beschriebenen Überwachungsvorrichtung mit den Schritten:

  • - Bereitstellen einer Erfassungseinrichtung, welche zur Generierung von Innenraumdaten ausgestaltet ist, wobei die Innenraumdaten zumindest den Innenraum des Fahrzeugs optisch abbilden,
  • - Übertragen der Innenraumdaten an eine Steuereinheit
  • - Auswertung der Innenraumdaten durch einen auf Künstlicher Intelligenz (KI) basierenden Klassifikator in ein klassifiziertes Auswerteergebnis in Bezug auf das erfasste Lebewesen durch die Steuereinheit,
  • - Auslösen zumindest einer ersten Aktion anhand des klassifizierten Auswerteergebnisses durch die Steuereinheit.
Furthermore, the object is achieved by a method for monitoring a living being in the interior of a vehicle with a monitoring device as described above with the steps:
  • - Provision of a detection device which is designed to generate interior data, the interior data at least optically depicting the interior of the vehicle,
  • - Transmission of the interior data to a control unit
  • - Evaluation of the interior data by an artificial intelligence (KI) -based classifier into a classified evaluation result in relation to the living being detected by the control unit,
  • - Triggering at least one first action on the basis of the classified evaluation result by the control unit.

Die Vorteile der Überwachungsvorrichtung können auch auf das Verfahren übertragen werden.The advantages of the monitoring device can also be transferred to the method.

Ferner wird die Aufgabe gelöst durch ein Computerprogramm, umfassend Befehle, die bewirken, dass die wie oben beschriebene Überwachungsvorrichtung das wie oben beschriebene Verfahren ausführt. Das erfindungsgemäße Computerprogramm kann beispielsweise über ein Netz wie das Internet, und/oder ein lokales Netz an dafür vorgesehene Fahrzeuge, welche eine solche Überwachungsvorrichtung, insbesondere aufweisen, verteilt werden. Ferner kann es als Update in Werkstätten in Fahrzeuge eingespielt werden. Das erfindungsgemäße Computerprogramm kann beispielsweise auf einem computerlesbaren Speichermedium gespeichert sein, z. B. einem berührbaren, magnetischen, elektrischen, elektromagnetischen, optischen und/oder andersartigen Speichermedium oder als Datenträgersignal ausgebildet sein. Ein solches Computerprogramm kann leicht in Fahrzeuge nachinstalliert werden, welche Standard-Erfassungseinrichtung und ein Standard-Steuergerät aufweisen.Furthermore, the object is achieved by a computer program comprising commands which cause the monitoring device as described above to carry out the method as described above. The computer program according to the invention can, for example, be connected to it via a network such as the Internet and / or a local network provided vehicles which have such a monitoring device, in particular, are distributed. It can also be imported into vehicles as an update in workshops. The computer program according to the invention can, for example, be stored on a computer-readable storage medium, e.g. B. a touchable, magnetic, electrical, electromagnetic, optical and / or other type of storage medium or as a data carrier signal. Such a computer program can easily be subsequently installed in vehicles which have standard detection devices and a standard control device.

Weitere Merkmale, Eigenschaften und Vorteile der vorliegenden Erfindung ergeben sich aus der nachfolgenden Beschreibung unter Bezugnahme auf die beiliegenden Figuren. Darin zeigen schematisch:

  • 1: eine erfindungsgemäße Überwachungsvorrichtung zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs,
  • 2: eine in der Steuereinheit hinterlegte Aktionsdateneinheit.
  • 3: ein erfindungsgemäßes Verfahren,
  • 4: die erfindungsgemäße Überwachungsvorrichtung im Einsatz,
  • 5: die erfindungsgemäße Überwachungsvorrichtung in einem weiteren Einsatz,
  • 6: die erfindungsgemäße Überwachungsvorrichtung in einem weiteren Einsatz.
Further features, properties and advantages of the present invention emerge from the following description with reference to the accompanying figures. They show schematically:
  • 1 : a monitoring device according to the invention for monitoring a living being in the interior of a vehicle,
  • 2 : an action data unit stored in the control unit.
  • 3 : a method according to the invention,
  • 4th : the monitoring device according to the invention in use,
  • 5 : the monitoring device according to the invention in a further use,
  • 6th : the monitoring device according to the invention in a further use.

Obwohl die Erfindung im Detail durch die bevorzugten Ausführungsbeispiele näher illustriert und beschrieben wurde, ist die Erfindung nicht durch die offenbarten Beispiele eingeschränkt. Variationen hiervon können vom Fachmann abgeleitet werden, ohne den Schutzumfang der Erfindung, wie er durch die nachfolgenden Patentansprüche definiert wird, zu verlassen.Although the invention has been illustrated and described in detail by the preferred exemplary embodiments, the invention is not restricted by the examples disclosed. Variations on this can be derived by the person skilled in the art without departing from the scope of protection of the invention as defined by the following patent claims.

1 zeigt eine Überwachungsvorrichtung 1 zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs. 1 shows a monitoring device 1 for monitoring a living being in the interior of a vehicle.

Die Überwachungsvorrichtung 1 umfasst dabei eine Steuereinheit 2 (ECU = electronic control unit). Die Steuereinheit 2 ist vorzugsweise als embedded system ausgebildet.The monitoring device 1 includes a control unit 2 (ECU = electronic control unit). The control unit 2 is preferably designed as an embedded system.

Die Überwachungsvorrichtung 1 umfasst ferner einen Bewegungssensor 3. Dieser ist dazu ausgestaltet, eine Bewegung eines Lebewesens im Innenraum des Fahrzeugs zu erkennen. Dabei ist der Bewegungssensor 3 zur Datenübertragung zumindest mit der Steuereinheit 2 verbunden. Durch den Bewegungssensor 3 kann die Anwesenheit zumindest eines Lebewesens, wie Kinder oder Tiere erfasst werden, sowie eine Positionsbestimmung vorgenommen werden. Die vom Bewegungssensor 3 bei einer Bewegung erfassten Bewegungsdaten und die Position der Bewegung werden an die Steuereinheit 2 übermittelt. Die Übermittlung kann drahtlos oder drahtgebunden erfolgen. Durch die erfasste Bewegung kann somit auf die Anwesenheit eines Lebewesens im Innenraum geschlossen werden.The monitoring device 1 further comprises a motion sensor 3 . This is designed to recognize a movement of a living being in the interior of the vehicle. Here is the motion sensor 3 for data transmission at least with the control unit 2 connected. Through the motion sensor 3 the presence of at least one living being, such as children or animals, can be detected, and a position can be determined. The one from the motion sensor 3 Movement data recorded during a movement and the position of the movement are sent to the control unit 2 transmitted. The transmission can be wireless or wired. The detected movement can therefore be used to determine the presence of a living being in the interior.

Die Überwachungsvorrichtung 1 umfasst weiterhin einen Sitzbelegungssensor 4, welcher zur Erkennung einer Sitzbelegung auf einem Fahrzeugsitz ausgebildet ist.The monitoring device 1 further comprises a seat occupancy sensor 4th , which is designed to detect seat occupancy on a vehicle seat.

Der Sitzbelegungssensor 4 ist zur Datenübertragung mit der Steuereinheit 2 verbunden. Der Sitzbelegungssensor 4 meldet eine erkannte Sitzbelegung und vorzugsweise die Position der Belegung an die Steuereinheit 2.
Durch die Sitzbelegung kann somit die Anwesenheit und Position eines Lebewesens auf einem Sitz erkannt werden.The seat occupancy sensor 4th is for data transfer with the control unit 2 connected. The seat occupancy sensor 4th reports a recognized seat occupancy and preferably the position of the occupancy to the control unit 2 .
The presence and position of a living being on a seat can thus be recognized by the seat occupancy.

Die Überwachungsvorrichtung 1 umfasst ferner einen Gurtsensor 5, welcher zur Erfassung des Anlegezustandes eines Sicherheitsgurtes eines Fahrersitzes ausgebildet ist. Der Gurtsensor 5 ist zur Datenübertragung mit der Steuereinheit 2 verbunden.The monitoring device 1 further comprises a belt sensor 5 , which is designed to detect the wearing state of a seat belt of a driver's seat. The belt sensor 5 is for data transfer with the control unit 2 connected.

Der Gurtsensor 5 meldet das Anlegen des Sicherheitsgurtes und vorzugsweise die Position des angelegten Sicherheitsgurtes an die Steuereinheit 2. Durch einen angelegten, d.h. aktivierten Sicherheitsgurt kann somit die Anwesenheit und Position eines Lebewesens auf einem Sitz erkannt werden.The belt sensor 5 reports the fastening of the seat belt and preferably the position of the fastened seat belt to the control unit 2 . The presence and position of a living being on a seat can thus be recognized by an applied, ie activated, seat belt.

Vorzugsweise werden der Gurtsensor 5 und der Sitzbelegungssensor 4 als auch der Bewegungssensor 3 gleichzeitig verwendet, um ein Lebewesen im Innenraum zu erkennen und die Position des Lebewesens zu bestimmen. Erkennen alle drei auf ein Lebewesen an, d.h. der Sitzbelegungssensor 4 meldet eine Belegung eines Sitzes, der Gurtsensor 5 ein Anlegen eines Sicherheitsgurtes und der Bewegungssensor 3 eine Bewegung, so kann mit hoher Sicherheit von der Anwesenheit eines Kindes/Tieres/Lebewesens ausgegangen werden. Meldet beispielsweise nur der Sitzbelegungssensor 4 eine Belegung und der Bewegungssensor 3 eine Bewegung, so kann beispielsweise von der Anwesenheit eines Tieres, beispielsweise eines Hundes ausgegangen werden.Preferably the belt sensor 5 and the seat occupancy sensor 4th as well as the motion sensor 3 used at the same time to recognize a living being in the interior and to determine the position of the living being. Recognize all three of a living being, ie the seat occupancy sensor 4th reports the occupancy of a seat, the seat belt sensor 5 putting on a seat belt and the motion sensor 3 a movement, the presence of a child / animal / living being can be assumed with a high degree of certainty. For example, only the seat occupancy sensor reports 4th an occupancy and the motion sensor 3 a movement, for example, the presence of an animal, for example a dog, can be assumed.

Ferner können die Auswertungen des Bewegungssensors 3, des Sitzbelegungssensors 4 und des Gurtsensors 5 gewichtet werden. So kann beispielsweise lediglich bei einer positiven Auswertung des Sitzbelegungssensors 4 und des Gurtsensors 5 davon ausgegangen werden, dass beispielsweise nur eine Tasche angeschnallt auf dem Rücksitz steht.Furthermore, the evaluations of the motion sensor 3 , the seat occupancy sensor 4th and the seat belt sensor 5 be weighted. For example, only in the event of a positive evaluation of the seat occupancy sensor 4th and the seat belt sensor 5 it can be assumed that, for example, only one bag is buckled up on the back seat.

Zudem umfasst die Überwachungsvorrichtung 1 eine Erfassungseinrichtung 10, welche hier vorzugsweise unterschiedliche Sensoren und Kameras umfasst.
Die Erfassungseinrichtung 10 ist dazu ausgebildet, einen Innenraum des Fahrzeugs zumindest als erfasste Innenraumdaten optisch zu erfassen, und die Innenraumdaten zur Verfügung zu stellen.The monitoring device also includes 1 a detection device 10 , which here preferably includes different sensors and cameras.
The detection device 10 is designed to optically detect an interior of the vehicle, at least as captured interior data, and to make the interior data available.

Die Erfassungseinrichtung 10 umfasst dabei eine Innenraumkamera 6
zum bildlichen Erfassen des Innenraums.
Die Innenraumkamera 6 kann als Bildinnenraumdaten somit den Innenraum des Fahrzeugs bildlich erfassen, das heißt in anderen Worten beispielsweise das Kind oder Tier im Innenraum des Fahrzeugs aufnehmen.
Die Innenraumkamera 6 ist mit der Steuereinheit 2 zum Übertragen der erfassten Bildinnenraumdaten an die Steuereinheit 2 verbunden.The detection device 10 includes an interior camera 6th
for visualizing the interior.
The interior camera 6th can thus image the interior of the vehicle as image interior data, that is to say, in other words, for example, record the child or animal in the interior of the vehicle.
The interior camera 6th is with the control unit 2 for transmitting the captured image interior data to the control unit 2 connected.

Die Verarbeitung der Bildinnenraumdaten kann direkt von der Innenraumkamera 6 vorgenommen werden. Die von der Innenraumkamera 6 aufgenommenen Signale werden dabei in der Innenraumkamera 6 zu Bildinnenraumdaten verarbeitet und die verarbeiteten Bildinnenraumdaten werden an die Steuereinheit 2 übermittelt. Alternativ kann die Steuereinheit 2 die Verarbeitung vornehmen.The interior image data can be processed directly from the interior camera 6th be made. The one from the indoor camera 6th Recorded signals are thereby in the interior camera 6th processed into image interior data and the processed image interior data are sent to the control unit 2 transmitted. Alternatively, the control unit 2 carry out the processing.

Im letzteren Fall sind die an die Steuereinheit 2 übermittelten Bildinnenraumdaten, Signale, welche durch die Steuereinheit 2 in darstellbare Bildinnenraumdaten verarbeitet werden.In the latter case, they are sent to the control unit 2 transmitted image interior data, signals transmitted by the control unit 2 processed into displayable image interior data.

Ferner umfasst die Erfassungseinrichtung 10 ein Mikrofon 7 zum Aufnehmen der Geräusche in dem Innenraum als Toninnenraumdaten. Das Mikrofon 7 ist mit der Steuereinheit 2 zum Übertragen der erfassten Toninnenraumdaten an die Steuereinheit 2 verbunden.The detection device also includes 10 a microphone 7th for recording the noises in the interior space as sound interior data. The microphone 7th is with the control unit 2 for transmitting the recorded sound interior data to the control unit 2 connected.

Ferner ist das Mikrofon 7 auch zum Ausgeben von Tondaten, welche beispielsweise von der mobilen Einheit aufgenommen werden, ausgebildet. Die Umwandlung der vom Mikrofon 7 aufgenommenen Signale in ausgebbare Toninnenraumdaten kann dabei von der Steuereinheit 2 oder vom Mikrofon 7 selber vorgenommen werden.Also is the microphone 7th also designed to output sound data, which are recorded by the mobile unit, for example. The conversion of the microphone 7th recorded signals can be outputted in audio interior data by the control unit 2 or from the microphone 7th be made by yourself.

Die Steuereinheit 2 ist ferner dazu ausgebildet bei Erkennen eines Lebewesens durch den Bewegungssensor 3 und/oder den Gurtsensor 5 und/oder den Sitzbelegungssensor 4 die Erfassungseinrichtung 10 zu aktivieren, wenn diese sich im inaktiven Zustand befindet.The control unit 2 is also designed to do this when a living being is recognized by the motion sensor 3 and / or the belt sensor 5 and / or the seat occupancy sensor 4th the detection device 10 to activate when this is in the inactive state.

Alternativ kann der Bewegungssensor 3 und/oder der Gurtsensor 5 und/oder der Sitzbelegungssensor 4 bei Erkennen eines Lebewesens die Erfassungseinrichtung 10 aktivieren.Alternatively, the motion sensor 3 and / or the belt sensor 5 and / or the seat occupancy sensor 4th the detection device when a living being is recognized 10 activate.

Dabei wird die Erfassungseinrichtung 10 beispielsweise bei einem ausgeschalteten Motor des Fahrzeugs inaktiviert, um somit im Stand-By-Betrieb Strom zu sparen. Durch die Aktivierung, lediglich dann, wenn ein Lebewesen im Innenraum erkannt wurde, kann somit Stand-By-Strom gespart werden. Dadurch kann ein schnelles Entleeren der Fahrzeugbatterie vermieden werden.The detection device 10 deactivated when the vehicle engine is switched off, for example, in order to save electricity in stand-by mode. By activating it, only when a living being has been detected in the interior, stand-by electricity can be saved. This can prevent the vehicle battery from draining quickly.

Ferner weist die Überwachungsvorrichtung 1 eine Schnittstelle auf. Diese kann hier als WLan /Bluetooth-Schnittstelle 8 ausgestaltet sein. Ferner kann zusätzlich oder alternativ eine GPS-Schnittstelle 9 vorgesehen sein. Die Steuereinheit 2 ist vorzugsweise zum Übertragen der Innenraumdaten an die WLan-/Bluetooth -Schnittstelle 8 und/oder GPS- Schnittstelle 9 ausgebildet. Ferner ist die WLan/Bluetooth -Schnittstelle 8 und/oder GPS- Schnittstelle 9 dazu ausgebildet, die Innenraumdaten an eine mobile Einheit, beispielsweise an ein Handy/Tablet/Laptop zu übertragen. Die WLan /Bluetooth -Schnittstelle 8 und/oder GPS- Schnittstelle 9 sind insbesondere als bidirektionale Schnittstellen ausgebildet.Furthermore, the monitoring device 1 an interface. This can be designed here as a WLan / Bluetooth interface 8. Furthermore, a GPS interface can additionally or alternatively 9 be provided. The control unit 2 is preferably used to transmit the interior data to the WiFi / Bluetooth interface 8 and / or GPS interface 9 educated. Furthermore, the WLan / Bluetooth interface 8 and / or GPS interface 9 designed to transmit the interior data to a mobile unit, for example to a cell phone / tablet / laptop. The WLan / Bluetooth interface 8 and / or GPS interface 9 are designed in particular as bidirectional interfaces.

Ferner weist die Erfassungseinrichtung 10 einen Temperatursensor 11 zur Messung der Innenraumtemperatur auf. Der Temperatursensor 11 ist zur Übertragung der Innenraumtemperatur an die Steuereinheit 2 ausgebildet.Furthermore, the detection device 10 a temperature sensor 11 for measuring the interior temperature. The temperature sensor 11 is used to transmit the interior temperature to the control unit 2 educated.

Ferner weist die Überwachungsvorrichtung 1 eine Klimaanlage 12 auf. Diese kann durch die Steuereinheit 2 gesteuert werden. Dabei umfasst Steuern auch ein Aktivieren der Klimaanlage 12.Furthermore, the monitoring device 1 an air conditioner 12 on. This can be done by the control unit 2 to be controlled. Controlling also includes activating the air conditioning system 12 .

Zudem weist die Überwachungsvorrichtung 1 noch eine Anzeigeeinheit 13 auf. Diese ist ebenfalls zur Datenübertragung mit der Steuereinheit 2 verbunden.In addition, the monitoring device 1 another display unit 13 on. This is also for data transmission with the control unit 2 connected.

Ferner weist die Überwachungsvorrichtung 1 noch ein Alarmsystem 14 auf, welches einen Fahrzeugalarm generiert. Die Steuereinheit 2 ist zum Aktivieren des Alarmsystems 14 ausgebildet.Furthermore, the monitoring device 1 another alarm system 14th which generates a vehicle alarm. The control unit 2 is to activate the alarm system 14th educated.

Die Überwachungsvorrichtung 1 weist zudem noch ein Funkschließsystem 15 (Remote Keyless System) für ein schlüsselloses Ent- und Verriegeln der Fahrzeugtüren und des Gepäckraums per Fernbedienung auf. Ein solches Funkschließsystem 15 ist zumeist als Funkschlüssel ausgebildet. Ein solches Funkschließsystem 15 kann vorzugsweise ein Starten des Motors ermöglichen. Das Funkschließsystem 15 ist ebenfalls mit der Steuereinheit 2 verbunden. Dadurch kann der Steuereinheit 2 das Verschließen des Fahrzeugs mitgeteilt werden. Die Steuereinheit 2 kann dadurch beispielsweise den Bewegungssensor 3 aktivieren. Durch eine Aktivierung und Betrieb erst bei einem verschlossenen Fahrzeug kann Strom eingespart werden. Ferner kann durch das Funkschließsystem 15 erkannt werden, ob sich der Besitzer des Funkschließsystems 15 noch in der Nähe befindet bzw. eine Entfernung zu dem Besitzer des Funkschließsystems 15 bestimmt werden. Durch diese Entfernungsbestimmung kann die Steuereinheit 2 entscheiden, welche der vorhandenen Schnittstellen eine bessere Datenübertragung an die mobile Einheit des Besitzers aufweist. Befindet sich der Besitzer beispielsweise im nahegelegenen Einkaufsmarkt, so können zur Datenübertragung beispielsweise die WLAN/Bluetooth-Schnittstelle 8, bei weiterer Entfernung die GPS-Schnittstelle 9 verwendet werden.The monitoring device 1 also has a radio locking system 15th (Remote Keyless System) for keyless locking and unlocking of the vehicle doors and the luggage compartment by remote control. Such a radio locking system 15th is mostly designed as a radio key. Such a radio locking system 15th can preferably enable the engine to be started. The radio locking system 15th is also with the control unit 2 connected. This allows the control unit 2 notification of the locking of the vehicle. The control unit 2 can thereby, for example, the Motion sensor 3 activate. Activation and operation only when the vehicle is locked can save electricity. Furthermore, through the radio locking system 15th it can be recognized whether the owner of the radio locking system 15th is still in the vicinity or a distance to the owner of the radio locking system 15th to be determined. By determining the distance, the control unit 2 decide which of the existing interfaces has better data transmission to the mobile unit of the owner. If the owner is in the nearby supermarket, for example, the WLAN / Bluetooth interface can be used for data transmission 8th , if further away, the GPS interface 9 be used.

Wird durch das Funkschließsystem 15 ein Verschließen gemeldet und durch den Gurtsensor 5 und/oder den Bewegungssensor 3 und /oder den Sitzbelegungssensor 4 die Anwesenheit eines Lebewesens im Innenraum des Fahrzeugs durch die Steuereinheit 2 registriert, so ist die Steuereinheit 2 vorzugsweise dazu ausgebildet, die Innenraumkamera 6 und das Mikrofon 7 als auch den Temperatursensor 11 zu aktivieren.Is through the radio locking system 15th a locking reported and by the belt sensor 5 and / or the motion sensor 3 and / or the seat occupancy sensor 4th the presence of a living being in the interior of the vehicle by the control unit 2 registered, the control unit is 2 preferably designed for the interior camera 6th and the microphone 7th as well as the temperature sensor 11 to activate.

Die Steuereinheit 2 ist ferner dazu ausgebildet, eine Auswertung der durch die Erfassungseinrichtung 10, also der Innenraumkamera 6 und vorzugsweise des Temperatursensors 11 und des Mikrofons 7, erfassten Innenraumdaten durch einen Klassifikator vorzunehmen. Ferner wird das Auswerteergebnis in ein klassifiziertes Auswerteergebnis klassifiziert, das heißt eingeteilt.The control unit 2 is also designed to carry out an evaluation of the by the detection device 10 , so the interior camera 6th and preferably the temperature sensor 11 and the microphone 7th to make captured interior data through a classifier. Furthermore, the evaluation result is classified, that is, divided into a classified evaluation result.

Dabei umfasst der Klassifikator vorzugsweise Neuronale Netze, beispielsweise ist der Klassifikator als GANs (Generative Adversarial Networks) oder als Reinforcement Learning ausgebildet. Ferner können auch andere Klassifikatoren aus der künstlichen Intelligenz herangezogen werden.The classifier preferably comprises neural networks, for example the classifier is designed as GANs (Generative Adversarial Networks) or as reinforcement learning. Furthermore, other classifiers from artificial intelligence can also be used.

Die Steuereinheit 2 kann hierzu einen GPU (Grafikprozessor) aufweisen.The control unit 2 can have a GPU (graphics processor) for this purpose.

Den so verschieden klassifizierten Auswerteergebnis sind verschiedene erste Aktionen zugewiesen. Diese Zuordnung kann in einer Aktionsdateneinheit 16 (2), welche in der Steuereinheit 2 gespeichert ist, hinterlegt sein.Different first actions are assigned to the evaluation results classified in this way. This assignment can be in an action data unit 16 ( 2 ), which in the control unit 2 is saved.

2 zeigt beispielshaft eine in der Steuereinheit 2 (1) hinterlegte Aktionsdateneinheit 16.
Hier sind in der ersten Spalte die klassifizierten Ausgabeergebnisse eingetragen. 2 shows one example in the control unit 2 ( 1 ) stored action data unit 16 .
The classified output results are entered in the first column.

In der zweiten Spalte sind die erste Aktion von einer vorgegebenen Zeitspanne und in der dritten Spalte die zweite Aktion in Abhängigkeit zu dem jeweilig klassifizierten Ausgabeergebnis eingetragen.In the second column, the first action of a predetermined period of time is entered and in the third column, the second action, depending on the respective classified output result.

So kann beispielsweise bei einer Auswertung: „Kind im Fahrzeuginnenraum vorhanden, Kind schlafend“, die Steuereinheit 2 (1) als erste Aktion die von der Innenraumkamera 6 (1) aufgenommenen Bildinnenraumdaten über die WLan/Bluetooth- Schnittstelle 8 (1) oder die GPS-Schnittstelle 9 (1) an die mobile Einheit, vorzugsweise einen Laptop oder ein Handy/Tablet, übertragen.
Eine zweite (Nachfolge)aktion kann hier beispielsweise nicht gesetzt sein, ebenso wenig wie eine Zeitspanne.For example, during an evaluation: "Child present in the vehicle interior, child sleeping", the control unit 2 ( 1 ) The first action is that of the interior camera 6th ( 1 ) recorded interior image data via the WiFi / Bluetooth interface 8th ( 1 ) or the GPS interface 9 ( 1 ) to the mobile unit, preferably a laptop or a cell phone / tablet.
A second (follow-up) action cannot be set here, for example, and neither can a time period.

So kann beispielsweise bei einer Auswertung: „Kind im Fahrzeuginnenraum vorhanden, Kind spielend“ die Steuereinheit 2 (1) als erste Aktion die von der Innenraumkamera 6 aufgenommenen Bildinnenraumdaten über die WLan/Bluetooth-Schnittstelle 8 (1) oder die GPS-Schnittstelle 9 (1) an die mobile Einheit, vorzugsweise einen Laptop oder ein Handy/Tablet, übertragen. Ferner kann eine erste Zeitspanne festgesetzt werden, innerhalb dessen der Besitzer auf die erste Aktion reagieren muss.
Als zweite Aktion kann dann, wenn die erste Zeitspanne ohne Reaktion des Besitzers verstrichen ist, ein Alarm ausgegeben werden.For example, in an evaluation: "Child present in the vehicle interior, child playing" the control unit 2 ( 1 ) The first action is that of the interior camera 6th interior image data recorded via the WiFi / Bluetooth interface 8 ( 1 ) or the GPS interface 9 ( 1 ) to the mobile unit, preferably a laptop or a cell phone / tablet. Furthermore, a first period of time can be set within which the owner must react to the first action.
As a second action, an alarm can be issued when the first time has elapsed without a reaction from the owner.

Bei einer Auswertung: „Kind im Fahrzeuginnenraum vorhanden, weinend, laut" kann die Steuereinheit 2 (1) als erste Aktion die von der Innenraumkamera 6 (1) aufgenommenen Bildinnenraumdaten und Toninnenraumdaten an die mobile Einheit, vorzugsweise einen Laptop oder ein Handy/Tablet übertragen. Ferner kann beispielsweise die von der mobilen Einheit aufgenommenen und an die Steuereinheit 2 (1) gesendeten Bilder durch die Anzeigeeinheit 13 als erste Aktion ausgegeben werden. Auch kann die Steuereinheit 2 zusätzlich als erste Aktion die über die WLan/Bluetooth- Schnittstelle 8 (1) oder GPS-Schnittstelle 9 (1) empfangenen Tondaten von der mobilen Einheit durch ein Mikrofon 7 (1) ausgeben. So kann beispielsweise das weinende Kind durch die Tonausgabe mittels des Mikrofons 7 (1) und die Bildausgabe durch die Anzeigeeinheit 13 (1) beruhigt werden. Ferner kann eine zweite Zeitspanne festgesetzt werden, innerhalb dessen der Besitzer auf die erste Aktion reagieren muss.In an evaluation: "Child in the vehicle interior, crying, loud", the control unit can 2 ( 1 ) The first action is that of the interior camera 6th ( 1 ) transmitted image interior data and audio interior data to the mobile unit, preferably a laptop or a cell phone / tablet. Furthermore, for example, those recorded by the mobile unit and sent to the control unit 2 ( 1 ) images sent by the display unit 13 issued as the first action. The control unit can also 2 additionally as the first action via the WiFi / Bluetooth interface 8th ( 1 ) or GPS interface 9 ( 1 ) received audio data from the mobile unit through a microphone 7th ( 1 ) output. For example, the crying child can hear the sound from the microphone 7th ( 1 ) and the image output by the display unit 13 ( 1 ) be calmed down. Furthermore, a second period of time can be set within which the owner must react to the first action.

Als zweite Aktion kann dann, wenn die zweite Zeitspanne ohne Reaktion des Besitzers verstrichen ist, ein Alarm ausgegeben werden, wobei die zweite Zeitspanne unterschiedlich zur ersten Zeitspanne ausgebildet sein kann.As a second action, if the second time period has elapsed without a reaction from the owner, an alarm can be output, wherein the second time period can be configured differently from the first time period.

Bei einer Auswertung: „Hund erkannt, Hund laut bellend“ kann die Steuereinheit 2 (1) als erste Aktion die von der Innenraumkamera 6 (1) aufgenommenen Bildinnenraumdaten und Toninnenraumdaten an die mobile Einheit, vorzugsweise einen Laptop oder ein Handy/Tablet übertragen. Ferner kann beispielsweise die von der mobilen Einheit aufgenommenen und an die Steuereinheit 2 (1) gesendeten Bilder durch die Anzeigeeinheit 13 (1) als erste Aktion ausgegeben werden. Auch kann die Steuereinheit 2 (1) zusätzlich als erste Aktion die über die WLan/Bluetooth-Schnittstelle 8 (1) oder GPS-Schnittstelle 9 (1) empfangenen Tondaten von der mobilen Einheit durch ein Mikrofon 7 (1) ausgeben. So kann beispielsweise der Hund durch die Tonausgabe mittels des Mikrofons 7 (1) und die Bildausgabe durch die Anzeigeeinheit 13 (1) beruhigt werden.
Ferner kann eine zweite Zeitspanne festgesetzt werden, innerhalb dessen der Besitzer auf die erste Aktion reagieren muss.In an evaluation: "Dog recognized, dog barking loudly" the control unit can 2 ( 1 ) The first action is that of the interior camera 6th ( 1 ) transmitted image interior data and audio interior data to the mobile unit, preferably a laptop or a cell phone / tablet. Further can for example be recorded by the mobile unit and sent to the control unit 2 ( 1 ) images sent by the display unit 13 ( 1 ) will be issued as the first action. The control unit can also 2 ( 1 ) additionally as the first action via the WiFi / Bluetooth interface 8 ( 1 ) or GPS interface 9 ( 1 ) received audio data from the mobile unit through a microphone 7th ( 1 ) output. For example, the dog can use the microphone to output sound 7th ( 1 ) and the image output by the display unit 13 ( 1 ) be calmed down.
Furthermore, a second period of time can be set within which the owner must react to the first action.

Als zweite Aktion kann dann, wenn die zweite Zeitspanne ohne Reaktion des Besitzers verstrichen ist, ein Alarm ausgegeben werden, wobei die zweite Zeitspanne unterschiedlich zur ersten Zeitspanne ausgebildet sein kann.As a second action, if the second time period has elapsed without a reaction from the owner, an alarm can be output, wherein the second time period can be configured differently from the first time period.

Ferner kann beispielsweise bei einer Auswertung „Kind erkannt,Temperatur zu hoch“ die Steuereinheit 2 (1) als erste Aktion die Klimaanalage 12 (1) anschalten und ein Warnsymbol/eine Warnung an die mobile Einheit des Besitzers über die WLan/Bluetooth- Schnittstelle 8 (1) oder GPS-Schnittstelle 9 (1) senden. Ferner kann eine dritte Zeitspanne, vorzugsweise wesentlich kürzere Zeitspanne als die erste bzw. zweite Zeitspanne, festgesetzt werden, innerhalb dessen der Besitzer auf die erste Aktion reagieren muss.Furthermore, the control unit can, for example, evaluate “child detected, temperature too high” 2 ( 1 ) the first action is the air conditioning 12 ( 1 ) and a warning symbol / warning to the mobile unit of the owner via the WiFi / Bluetooth interface 8th ( 1 ) or GPS interface 9 ( 1 ) send. Furthermore, a third time span, preferably a significantly shorter time span than the first or second time span, can be set within which the owner has to react to the first action.

Als zweite Aktion kann dann, wenn die dritte Zeitspanne ohne Reaktion des Besitzers verstrichen ist oder die Temperatur rasch ansteigt, das Alarmsystem als zweite Aktion aktiviert werden und ein Alarm ausgegeben werden. Dabei ist die dritte Zeitspanne bevorzugt unterschiedlich zur ersten und zweiten Zeitspanne ausgebildet.As a second action, if the third period of time has passed without a reaction from the owner or the temperature rises rapidly, the alarm system can be activated as a second action and an alarm is issued. The third time span is preferably designed differently from the first and second time span.

Ferner kann beispielsweise bei einer nachfolgenden Auswertung „Kind erkannt, Temperatur kritisch, Alarmsystem aktiv“ bei der das Alarmsystem bereits aktiviert worden ist, die Steuereinheit 2 (1) als erste Aktion den Fahrzeugalarm auslösen und ein weiteres Warnsymbol an die mobile Einheit des Besitzers über die WLan/Bluetooth-Schnittstelle 8 (1) oder GPS-Schnittstelle 9 (1) senden. Ferner kann eine vierte (sehr kurze) Zeitspanne festgesetzt werden, innerhalb dessen der Besitzer auf die erste Aktion reagieren muss.
Wenn die vierte Zeitspanne ohne Reaktion des Besitzers verstrichen ist, kann ein Notruf an eine Notrufstelle wie Feuerwehr oder Polizei gesendet werden.In addition, the control unit can, for example, in a subsequent evaluation “child recognized, temperature critical, alarm system active” in which the alarm system has already been activated 2 ( 1 ) trigger the vehicle alarm as the first action and send another warning symbol to the owner's mobile unit via the WiFi / Bluetooth interface 8 ( 1 ) or GPS interface 9 ( 1 ) send. Furthermore, a fourth (very short) period of time can be set within which the owner must react to the first action.
If the fourth period of time has passed without a reaction from the owner, an emergency call can be sent to an emergency number such as the fire department or police.

3 zeigt beispielshaft ein erfindungsgemäßes Verfahren. 3 shows an example of a method according to the invention.

Hier wird in einem ersten Schritt S1 dem Fahrzeug durch das Funkschließsystem 15 angezeigt, dass das Fahrzeug verschlossen wird.Here, in a first step S1, the vehicle is controlled by the radio locking system 15th indicates that the vehicle is locked.

In einem zweiten Schritt S2 wird der Steuereinheit 2 (1) von dem Gurtsensor 5 (1) das Anlegen eines Sicherheitsgurtes und die Position des angelegten Sicherheitsgurtes im Fahrzeug, vom dem Bewegungssensor 3 (1) eine Bewegung und die Position der Bewegung im Fahrzeuginnenraum und von dem Sitzbelegungssensor 4 (1) das Vorhandensein eines Druckes auf einen Sitz und die Position des Druckes in Bezug auf den Innenraum des Fahrzeugs mitgeteilt, so dass die Steuereinheit 2 (1) durch diese Information auf das Vorhandensein eines Lebewesens und der Position des Lebewesens, hier einem Kind in dem Innenraum des Fahrzeugs schließen kann.In a second step S2 the control unit 2 ( 1 ) from the belt sensor 5 ( 1 ) the use of a seat belt and the position of the seat belt in the vehicle from the motion sensor 3 ( 1 ) a movement and the position of the movement in the vehicle interior and from the seat occupancy sensor 4th ( 1 ) the presence of a pressure on a seat and the position of the pressure in relation to the interior of the vehicle are communicated to the control unit 2 ( 1 ) by means of this information on the presence of a living being and the position of the living being, here a child in the interior of the vehicle.

In einem dritten Schritt S3 wird von der Steuereinheit 2 (1) die Erfassungseinrichtung 10 (1) aktiviert, also die Innenraumkamera 6 (1), der Temperatursensor 11 (1) und das Mikrofon 7(1).In a third step S3, the control unit 2 ( 1 ) the detection device 10 ( 1 ) activated, i.e. the interior camera 6th ( 1 ), the temperature sensor 11 ( 1 ) and the microphone 7 ( 1 ).

In einem vierten Schritt S4 werden von der Innenraumkamera 6 (1) und dem Mikrofon 7 (1) Signale und die Innenraumtemperatur als Innenraumdaten aufgenommen, welche anschließend von der Steuereinheit 2 (1) in verarbeitbare Bildinnenraumdaten und Toninnenraumdaten umgewandelt werden. Auch können diese Signale direkt von der Innenraumkamera 6 (1) und dem Mikrofon 7 (1) umgewandelt werden.In a fourth step S4, the interior camera 6th ( 1 ) and the microphone 7th ( 1 ) Signals and the interior temperature recorded as interior data, which are then received by the control unit 2 ( 1 ) are converted into processable interior image data and interior sound data. These signals can also be sent directly from the interior camera 6th ( 1 ) and the microphone 7th ( 1 ) being transformed.

In einem fünften Schritt S5 werden die aufgenommenen Bildinnenraumdaten, Innenraumtemperatur und Toninnenraumdaten mittels des Klassifikators klassifiziert. Dazu wird die von dem Kind/Tier/Lebewesen bekannte Position herangezogen. Der Klassifikator ist als ein Verfahren aus der künstlichen Intelligenz beispielsweise GANs oder ein neuronales Netz ausgestaltet. Nach der Klassifikation liegt ein klassifiziertes Auswerteergebnis vor.In a fifth step S5, the recorded image interior data, interior temperature and sound interior data are classified by means of the classifier. For this purpose, the position known from the child / animal / living being is used. The classifier is designed as a method from artificial intelligence, for example GANs or a neural network. After the classification there is a classified evaluation result.

In einem sechsten Schritt S6 werden dem klassifizierten Auswerteergebnis anhand der Aktionsdateneinheit 16 (1) die entsprechenden ersten Aktionen zugeordnet.In a sixth step S6, the classified evaluation result is based on the action data unit 16 ( 1 ) assigned the corresponding first actions.

So können bei einer ersten Aktion die aufgenommenen Bild- und Toninnenraumdaten an die mobile Einheit gesendet werden, so dass diese auf der mobilen Einheit beispielsweise einem Handy darstellbar sind. Zum Übersenden wird der Steuereinheit 2 vom Fahrzeug von dem Funkschließsystem 15 (1) angezeigt, ob sich der Besitzer der mobilen Einheit innerhalb einer gewissen Reichweite befindet. Anhand dessen kann die Schnittstelle ausgewählt werden, welche für eine Datenübertragung besser geeignet ist: hier beispielsweise die WLAN/Bluetooth-Schnittstelle 8 (1) oder die GPS-Schnittstelle 9 (1). Dadurch ist eine sichere Übertragung möglich.In the case of a first action, the recorded image and sound interior data can be sent to the mobile unit so that they can be displayed on the mobile unit, for example a cell phone. The control unit is used to send 2 from the vehicle from the radio locking system 15th ( 1 ) indicates whether the owner of the mobile unit is within a certain range. Based on this, the interface can be selected which is used for data transmission is more suitable: here, for example, the WLAN / Bluetooth interface 8th ( 1 ) or the GPS interface 9 ( 1 ). This enables secure transmission.

Vorzugsweise können als weitere erste Aktion das Mikrofon 7 (1) und die Anzeigeeinheit 13 (1) für von der mobilen Einheit übertragenen Bild- und Tondaten freigeschaltet werden.The microphone can preferably be used as a further first action 7th ( 1 ) and the display unit 13 ( 1 ) for image and audio data transmitted by the mobile unit.

Dadurch funktioniert die Überwachungsvorrichtung 1 (1) wie ein elektronischer Babysitter, so dass Eltern das Kind/Tier/Lebewesen, das sich im Auto befindet, von der Innenraumkamera 6 (1) und dem Mikrofon 7 (1) des Fahrzeugs überprüfen können und bei Bedarf mit der mobilen Einheit, beispielsweise dem Handy und einer App auf dem Handy, über die Anzeigeeinheit 13 (1) und das Mikrofon 7 (1) mit dem Kind/Tier kommunizieren können. Dies kommt den Kindern/Tieren und ihren Eltern/Tierhaltern in ihrer Lebensqualität zugute, denn die Kinder/Tiere können im Auto schlafen oder kurz allein sein.This makes the monitoring device work 1 ( 1 ) like an electronic babysitter, so parents can see the child / animal / living being that is in the car from the interior camera 6th ( 1 ) and the microphone 7th ( 1 ) of the vehicle and if necessary with the mobile unit, for example the cell phone and an app on the cell phone, via the display unit 13 ( 1 ) and the microphone 7th ( 1 ) can communicate with the child / animal. This benefits the children / animals and their parents / pet owners in their quality of life, because the children / animals can sleep in the car or be alone for a while.

Wird nach einer vorgegebenen Zeitspanne keine Reaktion durch den Besitzer auf die erste Aktion gezeigt, so ist die Steuereinheit 2 (1) in einem siebten Schritt S7 dazu ausgebildet, eine zweite (Nachfolge)aktion auszulösen. Dies kann beispielsweise das Auslösen des Alarms durch das Alarmsystem 14 (1) sein. Je nach klassifizierten Auswerteergebnis kann die Zeitspanne variieren. So ist die Zeitspanne vorzugsweise bis zum Ausgeben eines Alarms bei einem weinenden Kind kürzer als bei einem schlafenden Kind.If the owner does not respond to the first action after a predetermined period of time, the control unit is 2 ( 1 ) in a seventh step S7 trained to trigger a second (follow-up) action. This can be, for example, the triggering of the alarm by the alarm system 14th ( 1 ) be. The time span can vary depending on the classified evaluation result. For example, the period of time until an alarm is output is preferably shorter for a crying child than for a sleeping child.

Wird hingegen eine zu hohe Temperatur von der Steuereinheit 2 (1) registriert, so kann als eine erste Aktion die Klimaanlage aktiviert werden und ein Alarmsymbol angezeigt werden. 4 zeigt ein solches Beispiel.On the other hand, if the temperature of the control unit is too high 2 ( 1 ), the air conditioning can be activated as a first action and an alarm symbol can be displayed. 4th shows such an example.

4 zeigt beispielshaft die Überwachungsvorrichtung 1 im Einsatz. Hier wurden vom Bewegungssensor 3 (1), dem Gurtsensor 5 (1) und dem Sitzbelegungssensor 4 (1) Bewegungs-/Sitzbelegungs- und Anlegezustandsdaten an die Steuereinheit 2 (1) gesendet, anhand deren ein Kind/Lebewesen im Innenraum des Fahrzeugs erkannt wurde. Alternativ kann auch nur der Bewegungssensor 3 (1), der Gurtsensor 5 (1) und der Sitzbelegungssensor 4 (1) im Fahrzeug vorgesehen sein, welcher die jeweiligen Daten an die Steuereinheit 2 (1) sendet, anhand deren ein Kind/Lebewesen im Innenraum des Fahrzeugs erkannt werden kann. 4th shows the monitoring device by way of example 1 in action. Here were from the motion sensor 3 ( 1 ), the belt sensor 5 ( 1 ) and the seat occupancy sensor 4th ( 1 ) Movement / seat occupancy and application status data to the control unit 2 ( 1 ), based on which a child / living being in the interior of the vehicle was recognized. Alternatively, only the motion sensor can be used 3 ( 1 ), the belt sensor 5 ( 1 ) and the seat occupancy sensor 4th ( 1 ) be provided in the vehicle, which the respective data to the control unit 2 ( 1 ), which can be used to identify a child / living being in the interior of the vehicle.

Die Steuereinheit 2 (1) aktiviert die Erfassungseinrichtung 10 (1), hier die Innenraumkamera 6 (1), das Mikrofon 7 und den Temperatursensor 11 (1), welche Innenraumdaten aufnehmen und diese an die Steuereinheit 2 (1) übersenden.The control unit 2 ( 1 ) activates the detection device 10 ( 1 ), here the interior camera 6th ( 1 ), the microphone 7th and the temperature sensor 11 ( 1 ), which record interior data and send them to the control unit 2 ( 1 ) send.

Anschließend werden die Innenraumdaten von der Steuereinheit 2 (1) in ein Auswerteergebnis mithilfe des KI-basierten Klassifikators klassifiziert.The interior data are then sent by the control unit 2 ( 1 ) classified into an evaluation result using the AI-based classifier.

Abhängig von dem klassifizierten Auswerteergebnis kann das Kind/Tier beispielsweise weiter beobachtet werden, z.B. wenn es schläft. Die Steuereinheit 2 (1) kann vorzugsweise dazu ausgebildet sein, auch in diesem Fall die Ton- und Bildinnenraumdaten und ggf. Temperaturdaten über die WLan-/Bluetooth-Schnittstelle 8 (1) und/oder GPS- Schnittstelle 9 (1) an die mobile Einheit zu senden. Die Steuereinheit 2 (1) überprüft nun anhand der weiter aufgenommenen Bild-/Ton- und Innenraumtemperatur, ob sich der Status des Kindes ändert.Depending on the classified evaluation result, the child / animal can, for example, continue to be observed, for example when it is sleeping. The control unit 2 ( 1 ) can preferably be designed to transmit the sound and image interior data and, if applicable, temperature data via the WiFi / Bluetooth interface 8 ( 1 ) and / or GPS interface 9 ( 1 ) to the mobile unit. The control unit 2 ( 1 ) now uses the recorded image / sound and interior temperature to check whether the child's status has changed.

Wird das Kind wach oder erhöht sich die Temperatur im Innenraum, so sendet die Steuereinheit 2 (1) über die WLan-/Bluetooth-Schnittstelle 8 (1) und/oder GPS-Schnittstelle 9 (1) einen Alarm oder einen Anruf an die mobile Einheit des Benutzers. Somit kann die Steuereinheit 2 (1) einen Alarm an die mobile Einheit des Besitzers senden oder anrufen, wenn sich die Bedingungen des Kindes ändern.If the child wakes up or if the temperature inside increases, the control unit sends 2 ( 1 ) via the WiFi / Bluetooth interface 8 ( 1 ) and / or GPS interface 9 ( 1 ) an alarm or a call to the user's mobile unit. Thus, the control unit 2 ( 1 ) send or call an alarm to the owner's mobile unit when the child's conditions change.

Ferner wird eine vorab definierte Zeitspanne aktiviert, innerhalb dessen der Benutzer reagieren muss. Je nach Auswerteergebnis kann die Zeitspanne länger oder kürzer gesetzt werden. So kann bei einer starken Erhöhung der Temperatur beispielsweise eine kurze Zeitspanne, bei Spielen des Kindes eine längere Zeitspanne vorgesehen sein.Furthermore, a predefined period of time is activated within which the user must react. Depending on the evaluation result, the time span can be set longer or shorter. For example, a short period of time can be provided for a sharp increase in temperature and a longer period of time when the child is playing.

Zeigt der Benutzer keine Reaktion innerhalb der vorgegebenen Zeitspanne, so kann als zweite Aktion die Steuereinheit 2 (1) das Alarmsystem 14 (1) alarmieren, welches einen weiteren Alarm oder sogar einen Fahrzeugalarm oder einen Notruf auslöst. Dieser Alarm kann als ein Ton, einen Anruf bei einem vorregistrierten Telefon, eine SMS-Nachricht, eine App-Benachrichtigung ausgestaltet sein.If the user does not react within the specified period of time, the control unit can act as a second action 2 ( 1 ) the alarm system 14th ( 1 ) alert, which triggers another alarm or even a vehicle alarm or an emergency call. This alarm can be configured as a tone, a call to a pre-registered phone, an SMS message, an app notification.

Zeigt der Benutzer eine Reaktion, beispielsweise durch Übermitteln von Ton- und Bilddaten beispielsweise des Benutzers an die Steuereinheit 2 (1), welche diese durch das Mikrofon 7 und die Anzeigeeinheit 13 (1) in den Innenraum des Fahrzeugs überträgt, so kann die Zeitspanne beispielsweise zurückgesetzt werden. D.h. wenn der Benutzer eine Reaktion auf den Alarm oder den Anruf zur Bewältigung des Zustands des Kindes zeigt, geht die Überwachungsvorrichtung 1 (1) zurück in den Überwachungszustand.If the user shows a reaction, for example by transmitting sound and image data, for example from the user, to the control unit 2 ( 1 ) which this through the microphone 7th and the display unit 13 ( 1 ) transmits into the interior of the vehicle, the time span can be reset, for example. That is, when the user shows a response to the alarm or the call to deal with the child's condition, the monitoring device goes 1 ( 1 ) back to the monitoring state.

5 zeigt beispielshaft die Überwachungsvorrichtung 1 (1) in einem weiteren Einsatz, bei dem ein Kind/Lebewesen im Innenraum erkannt worden ist. 5 shows the monitoring device by way of example 1 ( 1 ) in another mission in which a child / living being was recognized in the interior.

Hier ist das Alarmsystem 14 (1) bereits von der Steuereinheit 2 aktiviert worden, so dass sich die Überwachungsvorrichtung 1 (1) in Alarmbereitschaft befindet. Die Steuereinheit 2 (1) sendet bei einem aktivierten Alarmsystem 14 (1) einen weiteren Alarm an die mobile Einheit, löst einen Fahrzeugalarm aus und setzt eine Zeitspanne für eine Reaktion des Besitzers. Erhält die Steuereinheit 2 (1) keine Rückmeldung innerhalb der Zeitspanne oder verschlechtert sich der Zustand des Kindes, beispielsweise durch eine höhere Innenraumtemperatur, so setzt die Steuereinheit 2 (1) einen Notruf an eine Notdienststelle, beispielsweise die Feuerwehr oder Polizei ab.Here is the alarm system 14th ( 1 ) already from the control unit 2 has been activated so that the monitoring device 1 ( 1 ) is on alert. The control unit 2 ( 1 ) sends when the alarm system is activated 14th ( 1 ) another alarm to the mobile unit, triggers a vehicle alarm and sets a time period for the owner to react. Receives the control unit 2 ( 1 ) no feedback within the time span or if the child's condition deteriorates, for example due to a higher interior temperature, the control unit sets 2 ( 1 ) make an emergency call to an emergency service, for example the fire brigade or police.

6 zeigt beispielshaft die Überwachungsvorrichtung 1 (1) in einem weiteren Einsatz. Hierbei wird die Überwachungsvorrichtung 1 (1) in einem fahrenden Fahrzeug zur Überwachung beispielsweise eines Kindes oder Tieres herangezogen. 6th shows the monitoring device by way of example 1 ( 1 ) in another mission. Here the monitoring device 1 ( 1 ) is used in a moving vehicle to monitor a child or animal, for example.

Die Erfassungseinrichtung 10 (1) ist somit aktiviert. Die Innenraumkamera 6 ( 1), das Mikrofon 7 (1) und der Temperatursensor 11 (1), nehmen somit Innenraumdaten auf und senden diese an die Steuereinheit 2 (1).The detection device 10 ( 1 ) is thus activated. The interior camera 6th ( 1 ), the microphone 7th ( 1 ) and the temperature sensor 11 ( 1 ), thus record interior data and send them to the control unit 2 ( 1 ).

Anschließend werden die Innenraumdaten von der Steuereinheit 2 (1) mittels des Klassifikators in ein Auswerteergebnis klassifiziert.The interior data are then sent by the control unit 2 ( 1 ) classified into an evaluation result using the classifier.

Abhängig von dem klassifizierten Auswerteergebnis wird von der Steuereinheit 2 (1) nun eine erste Aktion ausgelöst.Depending on the classified evaluation result, the control unit 2 ( 1 ) now triggers a first action.

Befindet sich das Kind/Tier in keiner Gefahrensituation, so kann eine erste Aktion als ein Beibehalten der Überwachung ausgestaltet sein.If the child / animal is not in a dangerous situation, a first action can be designed as maintaining the monitoring.

Befindet sich das Kind/Tier in einem Gefahrenzustand, bei beispielsweise erbrechen oder ersticken, so kann als erste Aktion ein Alarm auf der Anzeigeeinheit 13 (1) durch die Steuereinheit 2 (1) dargestellt werden.If the child / animal is in a dangerous state, for example vomiting or suffocating, the first action can be an alarm on the display unit 13 ( 1 ) through the control unit 2 ( 1 ) being represented.

Ein weiterer Anwendungsfall könnte beispielsweise eine Begrenzung der Beschleunigung/Gesamtgeschwindigkeit, wenn sich eine Babyschale mit Baby auf dem Rücksitz befindet und die Steuereinheit 2 (1) eine aggressive Fahrweise des Fahrers erkennt, sein.Another application could, for example, limit the acceleration / total speed when there is a baby seat with a baby on the back seat and the control unit 2 ( 1 ) recognizes an aggressive driving style of the driver.

Die Überwachungsvorrichtung 1 (1) ermöglicht es Eltern/Fahrern, die Kinder/Tiere/Lebewesen für kurze Zeiträume allein in einem Fahrzeug zu lassen, und mit Fernüberwachung und Überwachung durch die Fahrzeugsysteme, einschließlich Kameras, Mikrofone, Multimediasysteme und mit Hilfe künstlicher Intelligenz, die Situation der Kinder/Tiere/Lebewesen zu kontrollieren.The monitoring device 1 ( 1 ) enables parents / drivers to leave the children / animals / living beings alone in a vehicle for short periods of time and, with remote monitoring and monitoring by the vehicle systems, including cameras, microphones, multimedia systems and with the help of artificial intelligence, the situation of the children / animals / To control living things.

Die Überwachungsvorrichtung 1 (1) funktioniert quasi wie ein elektronischer Babysitter, so dass Eltern die Kinder/Tiere/Lebewesen, die sich im Fahrzeug befinden, von der Innenraumkamera 6 (1) und dem Mikrofon 7 (1) des Fahrzeugs aus überprüfen können. Bei Bedarf kann über die Anzeigeeinheit 13 (1), das Mikrofon 7 (1) und eine App auf der mobilen Einheit mit den Kindern/Tieren/Lebewesen kommuniziert werden. Dies kommt den Kindern/Tieren/Lebewesen und ihren Eltern in ihrer Lebensqualität zugute, denn die Kinder/Tiere können im Auto schlafen oder allein sein, während die Eltern notwendige Aufgaben erledigen.The monitoring device 1 ( 1 ) works like an electronic babysitter, so that parents can see the children / animals / living beings in the vehicle from the interior camera 6th ( 1 ) and the microphone 7th ( 1 ) of the vehicle. If necessary, the display unit 13 ( 1 ), the microphone 7th ( 1 ) and an app on the mobile unit to communicate with the children / animals / living beings. This benefits the children / animals / living beings and their parents in their quality of life, because the children / animals can sleep in the car or be alone while the parents do the necessary tasks.

Die Überwachungsvorrichtung 1 (1) ermöglicht somit eine Überwachung bzw. ein Innenmonitoring auch während das Fahrzeug ausgeschaltet ist und bewertet den sicherheitstechnischen Umgebungszustand der Kinder/Tiere/Lebewesen mit einem KI-basierten Klassifikator. Ferner reagiert die Überwachungsvorrichtung 1 (1) auf die klassifizierten Auswerteergebnisse mit verschiedenen geeigneten ersten und zweiten Aktionen. Die Überwachungsvorrichtung 1 (1) ermöglicht es dem Fahrer, das Fahrzeug für kurze Zeit zu verlassen.The monitoring device 1 ( 1 ) thus enables monitoring or indoor monitoring even while the vehicle is switched off and evaluates the safety-related environmental status of the children / animals / living beings with an AI-based classifier. The monitoring device also reacts 1 ( 1 ) on the classified evaluation results with various suitable first and second actions. The monitoring device 1 ( 1 ) enables the driver to leave the vehicle for a short time.

Die Überwachungsvorrichtung 1 (1) kontrolliert den Zustand und den Status von Kindern/Tieren/Lebewesen, die für kurze Zeit unbegleitet in einem Fahrzeug bleiben. Ferner kann die Überwachungsvorrichtung den Zustand und den Status von Kindern/Tieren/Lebewesen in einem fahrenden Fahrzeug, beispielsweise auf dem Rücksitz kontrollieren.The monitoring device 1 ( 1 ) controls the condition and status of children / animals / living beings who remain unaccompanied in a vehicle for a short time. Furthermore, the monitoring device can monitor the condition and status of children / animals / living beings in a moving vehicle, for example on the back seat.

Mit der Erfassungseinrichtung und der durch die Steuereinheit 2 (2) klassifizierten Auswerteergebnis identifiziert die Überwachungsvorrichtung 1 (1) ein Kind/Tier/Lebewesen und seinen Status, wenn ein Erwachsener das Kind allein in einem Auto lässt.With the detection device and that by the control unit 2 ( 2 ) classified evaluation result identifies the monitoring device 1 ( 1 ) a child / animal / living being and its status if an adult leaves the child alone in a car.

Die Überwachungsvorrichtung 1 (1) ermöglicht es dem Besitzer, den Zustand des Kindes /Tieres /Lebewesens des Fahrzeugs über eine mobile Einheit wie ein Smartphone, zu kontrollieren. Der Erwachsene kann den Status des Kindes /Tieres /Lebewesens erhalten und benachrichtigt werden, falls sich dieser ändert, z.B. wenn das Kind /Tier /Lebewesen aufwacht oder anfängt zu weinen.The monitoring device 1 ( 1 ) enables the owner to control the condition of the child / animal / living being of the vehicle via a mobile unit such as a smartphone. The adult can receive the status of the child / animal / living being and be notified if it changes, e.g. if the child / animal / living being wakes up or starts crying.

Ferner kann die Überwachungsvorrichtung 1 (1) eigenständig reagieren, um die Situation des Kindes /Tieres / Lebewesens zu verbessern. Wenn der Zustand des Kind/Tier/Lebewesen schlecht oder kritisch ist und der Erwachsene nach einer Zeitspanne, auch wenn ihm der Alarm zugesandt wurde, nicht mehr reagiert, kann die Überwachungsvorrichtung 1 (1) eigenständig reagieren, und eine vorbeikommende Person zu warnen oder sogar den örtlichen Rettungsdienst anzurufen.Furthermore, the monitoring device 1 ( 1 ) react independently in order to improve the child / animal / living being's situation. If the condition of the child / animal / living being is bad or is critical and the adult no longer reacts after a period of time, even if the alarm has been sent to him, the monitoring device can 1 ( 1 ) react independently, and warn a passing person or even call the local rescue service.

BezugszeichenlisteList of reference symbols

11
ÜberwachungsvorrichtungMonitoring device
22
SteuereinheitControl unit
33
BewegungssensorMotion sensor
44th
SitzbelegungssensorSeat occupancy sensor
55
GurtsensorBelt sensor
66th
InnenraumkameraIndoor camera
77th
Mikrofonmicrophone
88th
WLan /Bluetooth-SchnittstelleWiFi / Bluetooth interface
99
GPS- SchnittstelleGPS interface
1010
ErfassungseinrichtungDetection device
1111
TemperatursensorTemperature sensor
1212
Klimaanlageair conditioner
1313
AnzeigeeinheitDisplay unit
1414th
AlarmsystemAlarm system
1515th
FunkschließsystemRadio locking system
1616
AktionsdateneinheitAction data unit
S 1, ... , S7S 1, ..., S7
VerfahrensschritteProcedural steps

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

  • DE 102010010179 A1 [0005]DE 102010010179 A1 [0005]

Claims (15)

Überwachungsvorrichtung (1) zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs, die Überwachungsvorrichtung (1) aufweisend eine Erfassungseinrichtung (10), welche zur Generierung von Innenraumdaten ausgestaltet ist, wobei die Innenraumdaten zumindest den Innenraum des Fahrzeugs optisch abbilden, und wobei die Erfassungseinrichtung (10) zum Übertragen der Innenraumdaten ausgebildet ist, und eine Steuereinheit (2) zum Empfang der von der Erfassungseinrichtung (10) übertragenen Innenraumdaten, dadurch gekennzeichnet, dass die Steuereinheit (2) zur Auswertung der Innenraumdaten in Bezug auf ein erfasstes Lebewesen durch einen auf Künstlicher Intelligenz (KI) basierenden Klassifikator in ein klassifiziertes Auswerteergebnis ausgebildet ist, und die Steuereinheit (2) dazu ausgebildet ist, anhand des klassifizierten Auswerteergebnisses zumindest eine erste Aktion auszulösen.Monitoring device (1) for monitoring a living being in the interior of a vehicle, the monitoring device (1) having a detection device (10) which is designed to generate interior data, the interior data at least optically depicting the interior of the vehicle, and wherein the detection device (10 ) is designed to transmit the interior space data, and a control unit (2) for receiving the interior space data transmitted by the detection device (10), characterized in that the control unit (2) for evaluating the interior space data in relation to a detected living being by means of an artificial intelligence (KI) based classifier is designed into a classified evaluation result, and the control unit (2) is designed to trigger at least one first action based on the classified evaluation result. Überwachungsvorrichtung (1) nach Anspruch 1, dadurch gekennzeichnet, dass ein Bewegungssensor (3) vorgesehen ist, welcher zur Erkennung einer Bewegung im Innenraum des Fahrzeugs und zur Generierung von Bewegungsdaten ausgebildet ist, und wobei der Bewegungssensor (3) zur Datenübertragung der Bewegungsdaten mit der Steuereinheit (2) verbunden ist.Monitoring device (1) after Claim 1 , characterized in that a movement sensor (3) is provided which is designed to detect movement in the interior of the vehicle and to generate movement data, and the movement sensor (3) is connected to the control unit (2) for data transmission of the movement data. Überwachungsvorrichtung (1) nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass ein Sitzbelegungssensor (4) vorgesehen ist, welcher zur Erkennung einer Sitzbelegung auf einem Fahrzeugsitz und zur Generierung von Sitzbelegungsdaten ausgebildet ist, und wobei der Sitzbelegungssensor (4) zur Datenübertragung der Sitzbelegungsdaten mit der Steuereinheit (2) verbunden ist.Monitoring device (1) after Claim 1 or 2 , characterized in that a seat occupancy sensor (4) is provided which is designed to detect seat occupancy on a vehicle seat and to generate seat occupancy data, and wherein the seat occupancy sensor (4) is connected to the control unit (2) for data transmission of the seat occupancy data. Überwachungsvorrichtung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass ein Gurtsensor (5) vorgesehen ist, welcher zur Erfassung des Anlegezustandes eines Sicherheitsgurtes eines Fahrersitzes und zur Generierung von Anlegezustandsdaten ausgebildet ist, und wobei der Gurtsensor (5) zur Datenübertragung der Anlegezustandsdaten mit der Steuereinheit (2) verbunden ist.Monitoring device (1) according to one of the preceding claims, characterized in that a belt sensor (5) is provided, which is designed to detect the wearing state of a seat belt of a driver's seat and to generate the wearing state data, and wherein the belt sensor (5) for data transmission of the wearing state data is connected to the control unit (2). Überwachungsvorrichtung (1) nach einem der Ansprüche 2 bis 4, dadurch gekennzeichnet, dass die Steuereinheit (2) dazu ausgebildet ist, bei Erkennen eines Lebewesens durch den Bewegungssensor (3) und/oder den Gurtsensor (5) und/oder den Sitzbelegungssensor (4) die Erfassungseinrichtung (10) zu aktivieren, wenn diese sich im inaktiven Zustand befindet.Monitoring device (1) according to one of the Claims 2 to 4th , characterized in that the control unit (2) is designed to activate the detection device (10) when a living being is detected by the motion sensor (3) and / or the belt sensor (5) and / or the seat occupancy sensor (4), if this is in the inactive state. Überwachungsvorrichtung (1) nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Erfassungseinrichtung (10) eine Innenraumkamera (6), welche zur optischen Erfassung des Innenraums als Bildinnenraumdaten ausgebildet ist, umfasst, wobei die Bildinnenraumdaten zur Auswertung in Bezug auf ein erfasstes Lebewesen durch den Klassifikator in das klassifizierte Auswerteergebnis an die Steuereinheit (2) übertragen werden.Monitoring device (1) according to one of the preceding claims, characterized in that the detection device (10) comprises an interior camera (6), which is designed for optical detection of the interior as image interior data, the image interior data for evaluation in relation to a detected living being the classifier in the classified evaluation result can be transferred to the control unit (2). Überwachungsvorrichtung (1) nach Anspruch 6, dadurch gekennzeichnet, dass eine Schnittstelle, zur bidirektionalen Übertragung von Daten vorgesehen ist, wobei die Steuereinheit (2) ferner dazu ausgebildet ist, die Bildinnenraumdaten über die Schnittstelle an eine mobile Einheit zu übertragen und wobei ferner eine Anzeigeeinheit (13) vorgesehen ist, wobei die Steuereinheit (2) dazu ausgebildet ist, Bilddaten über die Schnittstelle von der mobilen Einheit zu empfangen und an die Anzeigeeinheit (13) weiterzuleiten, und die Anzeigeeinheit (13) dazu ausgebildet ist, die Bilddaten anzuzeigen.Monitoring device (1) after Claim 6 , characterized in that an interface is provided for the bidirectional transmission of data, wherein the control unit (2) is further designed to transmit the image interior data via the interface to a mobile unit and a display unit (13) is also provided, wherein the control unit (2) is designed to receive image data via the interface from the mobile unit and forward it to the display unit (13), and the display unit (13) is designed to display the image data. Überwachungsvorrichtung (1) nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Erfassungseinrichtung (10) ein Schallwandler, welcher zur akustischen Erfassung des Innenraums in Toninnenraumdaten ausgebildet ist, umfasst, wobei die Toninnenraumdaten zur Auswertung in Bezug auf ein erfasstes Lebewesen durch den Klassifikator in das klassifizierte Auswerteergebnis an die Steuereinheit (2) übertragen werden.Monitoring device (1) according to one of the preceding claims, characterized in that the detection device (10) comprises a sound transducer which is designed for the acoustic detection of the interior in sound interior data, the sound interior data for evaluation in relation to a detected living being by the classifier in the classified evaluation result can be transmitted to the control unit (2). Überwachungsvorrichtung (1) nach Anspruch 8, dadurch gekennzeichnet, dass eine Schnittstelle, zur bidirektionalen Übertragung von Daten vorgesehen ist, wobei die Steuereinheit (2) dazu ausgebildet ist, die Toninnenraumdaten über die Schnittstelle an eine mobile Einheit zu übertragen und wobei ferner die Steuereinheit (2) zum Empfang von Tondaten, welche von einer mobilen Einheit aufgenommen und gesendet werden, ausgebildet ist, und der Schallwandler zum Ausgeben der Tondaten ausgebildet ist.Monitoring device (1) after Claim 8 , characterized in that an interface is provided for the bidirectional transmission of data, the control unit (2) being designed to transmit the audio interior data via the interface to a mobile unit and furthermore the control unit (2) for receiving audio data, which are received and transmitted by a mobile unit, is formed, and the sound transducer is designed to output the sound data. Überwachungsvorrichtung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Erfassungseinrichtung (10) einen Temperatursensor (11) zur Erfassung der Innenraumtemperatur umfasst, wobei die Innenraumtemperatur zur Auswertung in Bezug auf ein erfasstes Lebewesen durch den Klassifikator in das klassifizierte Auswerteergebnis an die Steuereinheit (2) übertragen wird.Monitoring device (1) according to one of the preceding claims, characterized in that the detection device (10) comprises a temperature sensor (11) for detecting the interior temperature, the interior temperature for evaluation in relation to a detected living being by the classifier in the classified evaluation result to the Control unit (2) is transferred. Überwachungsvorrichtung (1) nach Anspruch 10, dadurch gekennzeichnet, dass die Steuereinheit (2) dazu ausgebildet ist, bei einer vorgegebenen ersten Temperaturschwelle eine Aktivierung des Alarmsystems (14) und eine Zeitspanne für eine Reaktion des Benutzers an die Steuereinheit (2) zu setzen und bei Überschreiten einer vorgegebenen zweiten Temperaturschwelle und/oder ablaufen der Zeitspanne ohne Reaktion des Benutzers einen Fahrzeugalarm auszulösen.Monitoring device (1) after Claim 10 , characterized in that the control unit (2) is designed to with a predetermined first temperature threshold activation of the alarm system (14) and a time period for a reaction of the user to the control unit (2) and triggering a vehicle alarm when a predetermined second temperature threshold is exceeded and / or the time period expires without reaction of the user. Überwachungsvorrichtung (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Aktionsdateneinheit (16) mit unterschiedlichen ersten Aktionen vorgesehen ist, wobei den unterschiedlichen Auswerteergebnissen unterschiedliche erste Aktionen zugeordnet sind.Monitoring device (1) according to one of the preceding claims, characterized in that an action data unit (16) is provided with different first actions, different first actions being assigned to the different evaluation results. Überwachungsvorrichtung (1) nach Anspruch 12, dadurch gekennzeichnet, dass die Steuereinheit (2) dazu ausgebildet ist, in Abhängigkeit von dem klassifizierten Auswerteergebnis und der Reaktion auf die erste Aktion nach einer vorgegebenen Zeitspanne eine zweite Aktion auszugeben.Monitoring device (1) after Claim 12 , characterized in that the control unit (2) is designed to output a second action after a predetermined period of time depending on the classified evaluation result and the reaction to the first action. Verfahren zur Überwachung eines Lebewesens im Innenraum eines Fahrzeugs mit einer Überwachungsvorrichtung (1) nach einem der vorhergehenden Ansprüche 1 bis 13 gekennzeichnet durch: - Bereitstellen einer Erfassungseinrichtung (10), welche zur Generierung von Innenraumdaten ausgestaltet ist, wobei die Innenraumdaten zumindest den Innenraum des Fahrzeugs optisch abbilden, - Übertragen der Innenraumdaten an eine Steuereinheit (2), - Auswertung der Innenraumdaten durch einen auf Künstlicher Intelligenz (KI) basierenden Klassifikator in ein klassifiziertes Auswerteergebnis in Bezug auf das erfasste Lebewesen durch die Steuereinheit (2), - Auslösen zumindest einer ersten Aktion anhand des klassifizierten Auswerteergebnisses durch die Steuereinheit (2).Method for monitoring a living being in the interior of a vehicle with a monitoring device (1) according to one of the preceding Claims 1 to 13 characterized by : - providing a detection device (10) which is designed to generate interior data, the interior data at least optically depicting the interior of the vehicle, - transmission of the interior data to a control unit (2), - evaluation of the interior data by an artificial intelligence (KI) based classifier into a classified evaluation result in relation to the detected living being by the control unit (2), - triggering at least one first action based on the classified evaluation result by the control unit (2). Computerprogramm, umfassend Befehle, die bewirken, dass die Überwachungsvorrichtung (1) nach einem der vorhergehenden Ansprüche 1 bis 13 das Verfahren nach Anspruch 14 ausführt.Computer program, comprising instructions which cause the monitoring device (1) according to one of the preceding Claims 1 to 13 the procedure after Claim 14 executes.
DE102019212412.7A 2019-08-20 2019-08-20 Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program Ceased DE102019212412A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102019212412.7A DE102019212412A1 (en) 2019-08-20 2019-08-20 Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102019212412.7A DE102019212412A1 (en) 2019-08-20 2019-08-20 Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program

Publications (1)

Publication Number Publication Date
DE102019212412A1 true DE102019212412A1 (en) 2021-02-25

Family

ID=74495274

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019212412.7A Ceased DE102019212412A1 (en) 2019-08-20 2019-08-20 Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program

Country Status (1)

Country Link
DE (1) DE102019212412A1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022268313A1 (en) * 2021-06-23 2022-12-29 Pierburg Gmbh Interior monitoring system for a vehicle and method for recognizing signs of life in the interior of a vehicle
DE102022116989A1 (en) 2022-07-07 2024-01-18 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Method for monitoring the interior of a motor vehicle
DE102022131558A1 (en) 2022-11-29 2024-05-29 Gestigon Gmbh METHOD AND SYSTEM FOR DETECTING A SEAT POSITIONING CONDITION IN A VEHICLE
DE102022132747A1 (en) 2022-12-09 2024-06-20 Gestigon Gmbh METHOD FOR CREATING AN EVALUATION MODEL FOR DETECTING A SEAT OCCUPANCY STATE OF A SEATING ARRANGEMENT
DE102023000575A1 (en) 2023-02-20 2024-08-22 Mercedes-Benz Group AG Method for detecting living beings in a vehicle interior and vehicle

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005060055A1 (en) * 2004-12-27 2006-07-20 Trw Automotive U.S. Llc, Livonia Method and device for determining the position of a vehicle seat
DE102009061016A1 (en) * 2009-08-07 2011-03-03 Audi Ag Vehicle i.e. passenger car, operating method, involves detecting parameter in vehicle by detection mechanism, correlating parameter with face of living being, and implementing action depending on detected parameter
DE102010010179A1 (en) * 2010-03-04 2011-09-08 Kathrin Graser Device for monitoring e.g. baby within passenger car, has receiver for receiving data from recording unit, control unit for transmitting data, and reproducing unit for displaying transmitted data
EP2616287B1 (en) * 2010-09-13 2016-03-02 Huf Electronics GmbH Sensor device for a vehicle
DE19983911B4 (en) * 1999-01-27 2018-09-06 Compumedics Sleep Pty. Ltd. Wachsamkeitsüberwachungssystem

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19983911B4 (en) * 1999-01-27 2018-09-06 Compumedics Sleep Pty. Ltd. Wachsamkeitsüberwachungssystem
DE102005060055A1 (en) * 2004-12-27 2006-07-20 Trw Automotive U.S. Llc, Livonia Method and device for determining the position of a vehicle seat
DE102009061016A1 (en) * 2009-08-07 2011-03-03 Audi Ag Vehicle i.e. passenger car, operating method, involves detecting parameter in vehicle by detection mechanism, correlating parameter with face of living being, and implementing action depending on detected parameter
DE102010010179A1 (en) * 2010-03-04 2011-09-08 Kathrin Graser Device for monitoring e.g. baby within passenger car, has receiver for receiving data from recording unit, control unit for transmitting data, and reproducing unit for displaying transmitted data
EP2616287B1 (en) * 2010-09-13 2016-03-02 Huf Electronics GmbH Sensor device for a vehicle

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022268313A1 (en) * 2021-06-23 2022-12-29 Pierburg Gmbh Interior monitoring system for a vehicle and method for recognizing signs of life in the interior of a vehicle
DE102022116989A1 (en) 2022-07-07 2024-01-18 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Method for monitoring the interior of a motor vehicle
DE102022131558A1 (en) 2022-11-29 2024-05-29 Gestigon Gmbh METHOD AND SYSTEM FOR DETECTING A SEAT POSITIONING CONDITION IN A VEHICLE
DE102022132747A1 (en) 2022-12-09 2024-06-20 Gestigon Gmbh METHOD FOR CREATING AN EVALUATION MODEL FOR DETECTING A SEAT OCCUPANCY STATE OF A SEATING ARRANGEMENT
DE102023000575A1 (en) 2023-02-20 2024-08-22 Mercedes-Benz Group AG Method for detecting living beings in a vehicle interior and vehicle
WO2024175288A1 (en) 2023-02-20 2024-08-29 Mercedes-Benz Group AG Method for detecting living beings in a vehicle interior, and vehicle

Similar Documents

Publication Publication Date Title
DE102019212412A1 (en) Monitoring device and method for monitoring a living being in the interior of a vehicle and computer program
DE102016209501B4 (en) Method for generating a warning to one or more occupants of a vehicle
DE102012206535B4 (en) IN A VEHICLE BUILT-IN CHILDREN'S PRESENCE AND REMINDER SYSTEM
DE102009061016B4 (en) Vehicle and method for operating a parked vehicle
US20160049061A1 (en) Integrated vehicle sensing and warning system
DE102017130414A1 (en) VEHICLE SYSTEMS FOR CONTEXT-RELATED ASSESSMENT
DE102017109730A1 (en) Temperature monitoring in autonomous vehicles
DE102014221527B4 (en) Method and device for visual accident detail reporting
DE102017113596A1 (en) DETECTING HAZARDS IN EXPECTATION OF OPENING VEHICLE DOORS
DE102014215348A1 (en) System for detecting a driving mode of a vehicle and method for carrying it out
DE102016123486A1 (en) CHILD / INTRINSION DETECTION ALARM BY USING INNER MOTION / SOUND SENSORS
WO2008119729A1 (en) Automated voice emergency call
WO2019115182A1 (en) Method for operating a motor vehicle
DE102021101561A1 (en) APPROXIMATE VEHICLE SAFETY SYSTEMS AND PROCEDURES
EP2284044B1 (en) Vehicle and method for operating a parked vehicle with unattended children or animals
WO2019086599A1 (en) Child safety seat checking system, and child safety seat checking method
EP3407318A1 (en) Security device and security method
DE102019128543A1 (en) In-vehicle accident prevention device and in-vehicle accident prevention system
DE102006053618B4 (en) Arrangement for monitoring a vehicle and vehicle with such an arrangement
DE102009036488B4 (en) Vehicle and method for operating a parked vehicle
DE102016119159A1 (en) SYSTEM FOR REMINDER OF A BABY IN THE VEHICLE
DE102018121413A1 (en) Generate a warning that a cell phone has been forgotten in the vehicle
DE102020207289A1 (en) Device and system for warning a vehicle driver
DE102017214605A1 (en) Passenger detection with emergency treatment in a motor vehicle
DE102016011926A1 (en) Method for monitoring a vehicle interior

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R002 Refusal decision in examination/registration proceedings
R003 Refusal decision now final