DE102021126088A1 - Occupant presence detection system for a vehicle and method for detecting the presence of occupants in a vehicle - Google Patents
Occupant presence detection system for a vehicle and method for detecting the presence of occupants in a vehicle Download PDFInfo
- Publication number
- DE102021126088A1 DE102021126088A1 DE102021126088.4A DE102021126088A DE102021126088A1 DE 102021126088 A1 DE102021126088 A1 DE 102021126088A1 DE 102021126088 A DE102021126088 A DE 102021126088A DE 102021126088 A1 DE102021126088 A1 DE 102021126088A1
- Authority
- DE
- Germany
- Prior art keywords
- noise
- vehicle
- interior
- exterior
- vehicle interior
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 37
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000007635 classification algorithm Methods 0.000 claims abstract description 28
- 230000005540 biological transmission Effects 0.000 claims abstract description 26
- 238000012545 processing Methods 0.000 claims abstract description 16
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 14
- 230000000694 effects Effects 0.000 claims description 6
- 238000010801 machine learning Methods 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 3
- 238000012546 transfer Methods 0.000 description 10
- 241001465754 Metazoa Species 0.000 description 7
- 238000013016 damping Methods 0.000 description 4
- 230000029058 respiratory gaseous exchange Effects 0.000 description 4
- 208000037656 Respiratory Sounds Diseases 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 101100116570 Caenorhabditis elegans cup-2 gene Proteins 0.000 description 1
- 206010011469 Crying Diseases 0.000 description 1
- 101100116572 Drosophila melanogaster Der-1 gene Proteins 0.000 description 1
- 206010019345 Heat stroke Diseases 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 206010039740 Screaming Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000009413 insulation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000000149 penetrating effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
- G01H3/00—Measuring characteristics of vibrations by using a detector in a fluid
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/22—Status alarms responsive to presence or absence of persons
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/24—Reminder alarms, e.g. anti-loss alarms
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17821—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the input signals only
- G10K11/17823—Reference signals, e.g. ambient acoustic environment
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17821—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the input signals only
- G10K11/17825—Error signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17879—General system configurations using both a reference signal and an error signal
- G10K11/17881—General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/27—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the analysis technique
- G10L25/30—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the analysis technique using neural networks
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
- G01H17/00—Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves, not provided for in the preceding groups
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/10—Applications
- G10K2210/128—Vehicles
- G10K2210/1282—Automobiles
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3024—Expert systems, e.g. artificial intelligence
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3033—Information contained in memory, e.g. stored signals or transfer functions
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3035—Models, e.g. of the acoustic system
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/321—Physical
- G10K2210/3215—Arrays, e.g. for beamforming
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
- G10L17/26—Recognition of special voice characteristics, e.g. for use in lie detectors; Recognition of animal voices
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Emergency Management (AREA)
- Signal Processing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biophysics (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
Die Erfindung betrifft ein Insassenanwesenheits-Detektionssystem (10) für ein Fahrzeug (100), mit mindestens einem Außenraumaudiosensor (20) zur Erfassung von Außengeräuschen (SA) außerhalb eines Fahrzeuginnenraums (12), wobei die Außengeräusche (SA) ein Außengeräuschprofil (SAR) bilden, einer Prozessoreinheit (30), die dazu konfiguriert ist, das von dem mindestens einen Außenraumaudiosensor (20) erfasste Außengeräuschprofil (SAR) mittels eines Signalverarbeitungsalgorithmus (31) zu verarbeiten, indem mittels eines fahrzeugbasierten charakteristischen Geräuschübertragungsmodells basierend auf dem außerhalb des Fahrzeugs (100) aufgenommenen Außengeräuschprofil (SAR) ein modellbasiertes Interferenz-Geräuschprofil (SAN) definiert wird, das zu den in den Fahrzeuginnenraum (12) übertragenen und im Fahrzeuginnenraum (12) wahrnehmbaren Außengeräuschen (SAP) gegenphasig ausgebildet ist, mindestens einem Lautsprecher (28), über den das gegenphasige Interferenz-Geräuschprofil (SAN) im Fahrzeuginnenraum (12) ausgebbar ist, und mindestens einem Innenraumaudiosensor (25) zur Erfassung von Innengeräuschen (SP) innerhalb des Fahrzeuginnenraums (12), wobei die mit dem mindestens einen Innenraumaudiosensor (25) aufgenommenen Innengeräusche (SP) mittels eines Klassifizierungsalgorithmus (35) derart klassifiziert werden, dass von Insassen (50) stammende Lebenszeichen erkennbar sind. Ferner betrifft die Erfindung ein entsprechendes Verfahren (10')The invention relates to an occupant presence detection system (10) for a vehicle (100), having at least one exterior audio sensor (20) for detecting exterior noise (SA) outside a vehicle interior (12), the exterior noise (SA) forming an exterior noise profile (SAR). , a processor unit (30) configured to process the exterior noise profile (SAR) detected by the at least one exterior audio sensor (20) by means of a signal processing algorithm (31) by using a vehicle-based characteristic noise transmission model based on the outside of the vehicle (100) recorded external noise profile (SAR), a model-based interference noise profile (SAN) is defined, which is designed to be in phase opposition to the external noise (SAP) transmitted into the vehicle interior (12) and perceptible in the vehicle interior (12), at least one loudspeaker (28) via which the antiphase interference noise profile (SAN) can be output in the vehicle interior (12), and at least one interior audio sensor (25) for detecting interior noise (SP) inside the vehicle interior (12), the interior noise ( SP) are classified by means of a classification algorithm (35) in such a way that signs of life originating from the occupants (50) can be identified. The invention also relates to a corresponding method (10')
Description
Die Erfindung betrifft ein Insassenanwesenheits-Detektionssystem für ein Fahrzeug, insbesondere für einen Personenkraftwagen sowie ein Verfahren zur Detektion der Anwesenheit von Insassen in einem Fahrzeug.The invention relates to an occupant presence detection system for a vehicle, in particular for a passenger car, and a method for detecting the presence of occupants in a vehicle.
Aufgrund stetig steigender Sicherheitsanforderungen an Fahrzeuge steigt die Anzahl an Sicherheitssystemen in Fahrzeugen insbesondere in PKW. Der Erkennung von Personen oder Tieren im Fahrzeuginnenraum kommt eine immer größere Bedeutung zu, nicht nur für den Fall eines schweren Verkehrsunfalls, bei dem häufig unklar ist, wie viele Insassen sich im Fahrzeug befunden haben, sondern auch dann, wenn Kinder oder Tiere versehentlich in einem geparkten PKW zurückgelassen werden. Insbesondere wenn Kinder oder Tiere im Fahrzeug zurückbleiben, die sich nicht selbstständig befreien können, vor allem dann nicht, wenn die Schließanlagen moderner PKWs ein Öffnen der Türen von innen nicht zulassen, kann es schnell zu Gefahrensituationen kommen, die zum Teil lebensbedrohlich für Mensch und Tier sein können. Da sich der Fahrzeuginnenraum insbesondere in den Sommermonaten bei direkter Sonneneinstrahlung extrem aufheizen kann, kann es beispielsweise bei Säuglingen oder Kleinkindern schnell zu einem Hitzschlag kommen, der mitunter zum Tod führen kann. Mithilfe entsprechender Anwesenheits-Detektionssysteme können Insassen im Fahrzeuginnenraum sicher erkannt werden, sodass frühzeitig Gegenmaßnahmen eingeleitet werden können, durch die Gefahrensituationen vermieden werden.Due to steadily increasing safety requirements for vehicles, the number of safety systems in vehicles is increasing, especially in passenger cars. The detection of people or animals in the vehicle interior is becoming increasingly important, not only in the event of a serious traffic accident, in which it is often unclear how many occupants were in the vehicle, but also when children or animals accidentally get into one parked cars are left behind. In particular, if children or animals are left behind in the vehicle and cannot free themselves, especially if the locking systems of modern cars do not allow the doors to be opened from the inside, dangerous situations can quickly arise, some of which are life-threatening for people and animals could be. Since the interior of the vehicle can heat up extremely, especially in the summer months when it is exposed to direct sunlight, infants or small children, for example, can quickly suffer from heat stroke, which can sometimes lead to death. With the help of appropriate presence detection systems, occupants in the vehicle interior can be reliably detected so that countermeasures can be initiated at an early stage to avoid dangerous situations.
Aus dem Stand der Technik sind diverse Vorrichtungen sowie Verfahren bekannt, die zur Detektion der Anwesenheit von Insassen in einem Fahrzeug einsetzbar sind.Various devices and methods are known from the prior art which can be used to detect the presence of occupants in a vehicle.
Die
In der
Aufgrund von Störgeräuschen, die hauptsächlich von außerhalb des Fahrzeugs stammen, sind derartige Audioerkennungssysteme im Fahrzeuginnenraum nicht präzise genug, um auch relativ leise Geräusche, wie beispielsweise die Atmung eines schlafenden Kindes, zu erfassen.Due to noise, which mainly originates from outside the vehicle, such audio detection systems in the vehicle interior are not precise enough to also detect relatively quiet sounds, such as the breathing of a sleeping child.
Daher liegt der vorliegenden Erfindung die Aufgabe zu Grunde, ein Insassenanwesenheits-Detektionssystem zu schaffen, dass sich durch eine besonders hohe Genauigkeit hinsichtlich der Erfassung und Erkennung von Geräuschen im Fahrzeuginnenraum auszeichnet.Therefore, the present invention is based on the object of creating an occupant presence detection system that is characterized by a particularly high level of accuracy with regard to the detection and recognition of noises in the vehicle interior.
Diese Aufgabe wird mit einem erfindungsgemäßen Insassenanwesenheits-Detektionssystem für ein Fahrzeug mit den Merkmalen des Anspruchs 1 gelöst.This object is achieved with an occupant presence detection system for a vehicle according to the invention with the features of claim 1 .
Das erfindungsgemäße Insassenanwesenheits-Detektionssystem für ein Fahrzeug umfasst mindestens einen Außenraumaudiosensor der außerhalb eines Fahrzeuginnenraums, vorzugsweise an der Außenseite der Fahrzeugkarosserie zur Erfassung von Außengeräuschen angeordnet ist. Dadurch werden die Außengeräusche außerhalb des Fahrzeugs direkt und ungedämpft als Außengeräuschprofil von dem Außenraumaudiosensor erfasst. Ferner umfasst das erfindungsgemäße Insassenanwesenheits-Detektionssystem eine Prozessoreinheit, die dazu konfiguriert ist, das mit dem Außenraumaudiosensor erfasste Außengeräuschprofil, das die Gesamtheit der Umgebungsgeräusche abbildet, zu verarbeiten.The occupant presence detection system for a vehicle according to the invention comprises at least one exterior audio sensor which is arranged outside of a vehicle interior, preferably on the outside of the vehicle body, for detecting exterior noise. As a result, the exterior noises outside the vehicle are recorded directly and unattenuated as an exterior noise profile by the exterior audio sensor. Furthermore, the occupant presence detection system according to the invention comprises a processor unit, which is configured to process the exterior noise profile detected with the exterior audio sensor, which depicts the totality of the ambient noises.
Die Prozessoreinheit umfasst einen Signalverarbeitungsalgorithmus der mithilfe eines fahrzeugbasierten charakteristischen Geräuschübertragungsmodells, das die akustischen Eigenschaften des Fahrzeugs, insbesondere die der Fahrzeugkarosserie abbildet, und ein modellbasiertes Interferenz-Geräuschprofil basierend auf dem Außengeräuschprofil definiert. Das Interferenz-Geräuschprofil ist zu den in den Fahrzeuginnenraum übertragenen und im Fahrzeuginnenraum wahrnehmbaren Außengeräuschen gegenphasig ausgebildet. Die Außengeräusche werden mithilfe des Geräuschübertragungsmodells so abgebildet, wie sie im Fahrzeuginnenraum wahrgenommen werden, wobei das modellbasierte Interferenz-Geräuschprofil gegenüber diesem Außengeräuschtransferprofil invers ausgebildet ist. Das modellbasierte und gegenphasige Interferenz-Geräuschprofil wird mithilfe mindestens eines im Fahrzeuginnenraum angeordneten Lautsprechers im Fahrzeuginnenraum ausgegeben. Dazu kann entweder mindestens ein eigens dafür vorgesehener Lautsprecher oder mindestens ein Lautsprecher des Entertainmentsystems des Fahrzeugs genutzt werden.The processor unit includes a signal processing algorithm that uses a vehicle-based characteristic noise transmission model that maps the acoustic properties of the vehicle, in particular those of the vehicle body, and defines a model-based interference noise profile based on the exterior noise profile. The interference noise profile is in phase opposition to the external noise transmitted into the vehicle interior and perceptible in the vehicle interior. With the help of the noise transfer model, the exterior noise is mapped as it is perceived in the vehicle interior, with the model-based interference noise profile being inversely designed in relation to this exterior noise transfer profile. The model-based and anti-phase interference noise profile is specified using at least one in the vehicle interior assigned speaker in the vehicle interior. For this purpose, either at least one speaker provided specifically for this purpose or at least one speaker of the vehicle's entertainment system can be used.
Zeitlich gesehen, wird das Interferenz-Geräuschprofil so ausgegeben, dass es sich mit dem eigentlichen im Fahrzeuginnenraum wahrnehmbaren Geräuschprofil der Außengeräusche in destruktiver Weise überlagert. Dadurch werden die von den in den Innenraum übertragenen Außengeräuschen stammenden Schallwellen durch entsprechende inverse und gegenphasige Schallwellen ausgelöscht, sodass die von außen in den Innenraum übertragenen Außengeräusche gedämpft, bzw. ausgelöscht werden. Dieser Effekt wird als Antischall oder auch Active-Noise-Cancelling (ANC) bezeichnet. Durch die Applikation des Antischall-Effekts und die daraus resultierende Dämpfung der Außengeräusche wird die Erkennungsgenauigkeit von Lebenszeichen, die von den sich im Fahrzeuginnenraum befindenden Insassen abgegeben werden, deutlich erhöht.In terms of time, the interference noise profile is output in such a way that it is destructively superimposed on the noise profile of the exterior noise that is actually perceptible in the vehicle interior. As a result, the sound waves originating from the external noise transmitted into the interior are canceled out by corresponding inverse and anti-phase sound waves, so that the external noise transmitted from the outside into the interior is dampened or canceled out. This effect is known as anti-noise or active noise canceling (ANC). By applying the anti-noise effect and the resulting damping of external noise, the detection accuracy of signs of life emitted by the occupants in the vehicle interior is significantly increased.
Das Insassenanwesenheits-Detektionssystem umfasst ferner einen Innenraumaudiosensor, der zur Erfassung von Innengeräuschen innerhalb des Fahrzeuginnenraums angeordnet ist. Mithilfe des Innenraumaudiosensors werden insbesondere Geräusche von Insassen erfasst, die beispielsweise nach dem Abstellen des Fahrzeugs im Fahrzeuginnenraum zurückgeblieben sind. Dies können beispielsweise Säuglinge, Kleinkinder, Erwachsene oder auch Haustiere sein. Mittels eines Klassifizierungsalgorithmus werden die erfassten Innengeräusche derart klassifiziert, dass die von den im Fahrzeuginnenraum zurückgebliebenen Insassen ausgehenden akustischen Lebenszeichen erkannt werden können. Derartige Lebenszeichen können beispielsweise für Menschen oder Tiere charakteristische Geräusche oder Geräuschmuster wie Sprechen, Schreien, Weinen, Bellen oder durch die Atmung eines Insassen verursachte Geräusche sein. Der Klassifizierungsalgorithmus analysiert die von den Innenraumaudiosensoren erfassten Geräusche und ordnet die Geräusche anhand ihrer akustischen Charakteristik dem zugehörigen Insassentyp zu. Dazu sind vordefinierte akustische Insassenprofile hinterlegt, wobei der Klassifizierungsalgorithmus vorzugsweise in der Lage ist, selbstständig entsprechende akustische Insassenprofile zu erstellen, zu bearbeiten und zu hinterlegen.The occupant presence detection system further includes an interior audio sensor arranged to sense interior noise within the vehicle interior. The interior audio sensor is used in particular to record noises from occupants who have remained in the vehicle interior after the vehicle has been parked, for example. This can be, for example, infants, small children, adults or pets. Using a classification algorithm, the detected interior noises are classified in such a way that the acoustic signs of life emanating from the occupants left behind in the vehicle interior can be recognized. Such signs of life can be, for example, noises or noise patterns that are characteristic of humans or animals, such as speaking, screaming, crying, barking, or noises caused by the breathing of an occupant. The classification algorithm analyzes the noises detected by the interior audio sensors and assigns the noises to the relevant occupant type based on their acoustic characteristics. For this purpose, predefined acoustic occupant profiles are stored, with the classification algorithm preferably being able to independently create, process and store corresponding acoustic occupant profiles.
Somit können auch in lauten Umgebungen relativ leise Geräusche, wie beispielsweise Atemgeräusche sicher erfasst und erkannt werden, sodass sich das erfindungsgemäße Insassenanwesenheits-Detektionssystem durch eine besonders hohe Erkennungsgenauigkeit auszeichnet.Thus, even in noisy environments, relatively quiet noises, such as breathing noises, can be reliably detected and recognized, so that the occupant presence detection system according to the invention is characterized by a particularly high detection accuracy.
In einer besonders bevorzugten Ausgestaltung der Erfindung ist der Signalverarbeitungsalgorithmus dazu konfiguriert, das Geräuschübertragungsmodell durch maschinelles Lernen zu definieren. Der Signalverarbeitungsalgorithmus erstellt selbstständig ein Modell der akustischen Übertragungseigenschaften des Fahrzeugs basierend auf vordefinierten Parametern, die die akustischen Übertragungseigenschaften maßgeblich definieren. Durch die Optimierung relevanter Parameter kann ein realitätsnahes Geräuschübertragungsmodell definiert werden, dass das reale akustische Dämpfungs- und Übertragungsverhalten der Fahrzeugkarosserie und der übrigen Fahrzeugteile realitätsnah abbildet.In a particularly preferred embodiment of the invention, the signal processing algorithm is configured to define the noise transmission model through machine learning. The signal processing algorithm independently creates a model of the acoustic transmission properties of the vehicle based on predefined parameters that largely define the acoustic transmission properties. By optimizing relevant parameters, a realistic noise transmission model can be defined that realistically maps the real acoustic damping and transmission behavior of the vehicle body and the other vehicle parts.
In einer alternativen Ausgestaltung der Erfindung ist das Geräuschübertragungsmodell mithilfe zuvor ermittelter Messdaten definiert. Dazu werden die akustischen Übertragungseigenschaften des Fahrzeugs mittels einer entsprechenden Messvorrichtung, beispielsweise einem Mikrofonarray gemessen und in einem entsprechenden Geräuschübertragungsmodell abgebildet.In an alternative embodiment of the invention, the noise transmission model is defined using previously determined measurement data. For this purpose, the acoustic transmission properties of the vehicle are measured using an appropriate measuring device, for example a microphone array, and mapped in an appropriate noise transmission model.
Vorteilhafterweise sind die Audiosensoren, d.h. sowohl die Außenraumaudiosensoren als auch die Innenraumaudiosensoren als Mikrofone ausgebildet. Aufgrund ihres relativ günstigen Preises und ihrer relativ hohen akustischen Auflösung eignen sich Mikrofone besonders gut zur Erfassung von Außen- und/oder Innengeräuschen in einem Fahrzeug. Ferner lassen sich mithilfe von Mikrofonarrays mithilfe des Beamforming-Verfahrens Geräusche innerhalb sowie außerhalb des Fahrzeugs relativ genau lokalisieren, wodurch der Geräuschursprung relativ genau bestimmbar ist. Zusätzlich kann mithilfe dieser Geräuschlokalisierung die Genauigkeit des Geräuschübertragungsmodells verbessert werden, indem der selbstlernende Signalverarbeitungsalgorithmus ein dreidimensionales und adaptives Geräuschübertragungsmodell erstellt, das die Richtung, aus der die Geräusche kommen, bei der Geräuschübertragung berücksichtigt. Zusätzlich kann beispielsweise mithilfe mehrerer im Fahrzeuginnenraum verteilter Lautsprecher sowie mehrerer im Fahrzeuginnenraum verteilter Mikrofone der neue Noise-Cancelling-Effekt lokal in Abhängigkeit des Geräuschursprungs angepasst werden, indem beispielsweise aus einer bestimmten Richtung kommende Außengeräusche durch unterschiedliche Ansteuerung der Lautsprecher entsprechend im Fahrzeuginnenraum lokal unterschiedlich gedämpft bzw. ausgelöscht werden, wodurch sich eine besonders hohe Geräuschdämpfungsrate ergibt.Advantageously, the audio sensors, i.e. both the exterior audio sensors and the interior audio sensors, are designed as microphones. Due to their relatively low price and their relatively high acoustic resolution, microphones are particularly well suited for capturing exterior and/or interior noise in a vehicle. Furthermore, with the help of microphone arrays using the beamforming method, noises inside and outside the vehicle can be localized relatively precisely, as a result of which the origin of the noise can be determined relatively precisely. In addition, this noise localization can improve the accuracy of the noise transmission model, as the self-learning signal processing algorithm creates a three-dimensional and adaptive noise transmission model that takes into account the direction from which the noise is coming when transmitting the noise. In addition, the new noise-cancelling effect can be adapted locally, depending on the origin of the noise, for example with the help of several loudspeakers distributed in the vehicle interior and several microphones distributed in the vehicle interior, for example by locally different attenuation or suppression of external noise coming from a certain direction through different activation of the loudspeakers in the vehicle interior .
In einer besonders bevorzugten Ausgestaltung der Erfindung weist die Prozessoreinheit eine Signalschnittstelle auf. Über diese Signalschnittstelle kann ein von der Prozessoreinheit generiertes Warnsignal an ein externes Empfangsgerät übermittelt werden. Beispielsweise kann die Prozessoreinheit über die Signalschnittstelle mit einem entsprechenden Steuergerät des Fahrzeugs gekoppelt werden, sodass ein entsprechendes Warnsignal an das Fahrzeugsteuergerät übermittelt werden kann und die Fahrzeugelektronik geeignete Gegenmaßnahmen einleiten kann, wie das Einschalten der Alarmanlage zur Warnung von Passanten in der Umgebung, das Absetzen eines Notrufs, das Einschalten der Klimaanlage zur Senkung der Temperatur, das Entriegeln des Fahrzeugs oder das Öffnen der Fenster.In a particularly preferred embodiment of the invention, the processor unit has a signal interface. A warning generated by the processor unit can be sent via this signal interface signal can be transmitted to an external receiving device. For example, the processor unit can be coupled to a corresponding control unit of the vehicle via the signal interface, so that a corresponding warning signal can be transmitted to the vehicle control unit and the vehicle electronics can initiate suitable countermeasures, such as switching on the alarm system to warn pedestrians in the area, setting down a emergency call, turning on the air conditioning to lower the temperature, unlocking the vehicle or opening the windows.
Vorzugsweise umfasst die Signalschnittstelle eine Mobilfunkschnittstelle, wodurch das von der Prozessoreinheit generierte Warnsignal direkt an ein Mobiltelefon, idealerweise an das Mobiltelefon des Fahrzeughalters übermittelt werden kann. Somit kann der Fahrzeughalter selbst geeignete Maßnahmen ergreifen, um die im Fahrzeug zurückgebliebenen Insassen zu befreien. Beispielsweise könnte auch eine Mobilfunkverbindung zu dem Fahrzeug hergestellt werden, sodass der Fahrzeughalter mit den Insassen im Fahrzeug sprechen kann oder aber auch über sein Mobiltelefon das Fahrzeug beispielsweise entriegeln kann.The signal interface preferably includes a mobile radio interface, as a result of which the warning signal generated by the processor unit can be transmitted directly to a mobile phone, ideally to the vehicle owner's mobile phone. Thus, the vehicle owner can take suitable measures himself to free the occupants who are left behind in the vehicle. For example, a mobile phone connection to the vehicle could also be established, so that the vehicle owner can speak to the occupants in the vehicle or, for example, unlock the vehicle via his mobile phone.
In einer besonders bevorzugten Ausgestaltung der Erfindung ist der Klassifizierungsalgorithmus dahingehend konfiguriert, charakteristische Geräuschmuster durch maschinelles Lernen zu definieren. Dieser selbstlernende Klassifizierungsalgorithmus nutzt dazu ein vordefiniertes Repertoire von Insassenprofilen, auf deren Basis der Klassifizierungsalgorithmus selbstständig charakteristische Geräuschmuster erkennen und definieren kann und diese entsprechend den Insassentypen zuordnen kann, wobei der Klassifizierungsalgorithmus auch in der Lage sein kann, Insassenprofile selbstständig zu erstellen und zu definieren. Somit kann der Klassifizierungsalgorithmus sich selbstständig an unbekannte Insassen und folglich an unbekannte Geräuschmuster anpassen, sodass ein Anlernen mit individuell angepassten Insassenprofilen nicht erforderlich ist.In a particularly preferred embodiment of the invention, the classification algorithm is configured to define characteristic noise patterns using machine learning. This self-learning classification algorithm uses a predefined repertoire of occupant profiles, on the basis of which the classification algorithm can independently recognize and define characteristic noise patterns and assign them according to the occupant types, whereby the classification algorithm can also be able to create and define occupant profiles independently. Thus, the classification algorithm can independently adapt to unknown occupants and consequently to unknown noise patterns, so that training with individually adapted occupant profiles is not necessary.
Vorzugsweise ist der Klassifizierungsalgorithmus dahingehend konfiguriert, ein charakteristisches Geräuschmuster eines Kindes zu erkennen. Der Klassifizierungsalgorithmus ist demzufolge vorzugsweise in der Lage bei Erkennung eines Menschen zwischen dem Geräuschmuster eines Erwachsenen und dem Geräuschmuster eines Kindes zu unterscheiden, da bei Erkennung eines Kindes, insbesondere eines Kleinkindes oder Säuglings andere Maßnahmen erforderlich sind als bei der Erkennung eines Erwachsenen. Beispielsweise kann es bei Erkennung eines Erwachsenen im Fahrzeuginnenraum ausreichend sein, die Türen des Fahrzeugs zu entriegeln, wohingegen ein Entriegeln der Türen bei der Erkennung eines Kleinkindes im Fahrzeuginnenraum weniger sinnvoll ist, sodass stattdessen beispielsweise die Alarmanlage eingeschaltet werden kann.Preferably, the classification algorithm is configured to recognize a characteristic noise pattern of a child. The classification algorithm is therefore preferably able to distinguish between the noise pattern of an adult and the noise pattern of a child when recognizing a human being, since recognizing a child, in particular a small child or infant, requires different measures than recognizing an adult. For example, it may be sufficient to unlock the vehicle doors when an adult is detected in the vehicle interior, whereas unlocking the doors makes less sense when a small child is detected in the vehicle interior, so that the alarm system can be switched on instead.
Ferner wird die Aufgabe der Erfindung mit einem Verfahren zur Erkennung der Anwesenheit von Insassen in einem Fahrzeug mit den Merkmalen des Anspruchs 9 gelöst.Furthermore, the object of the invention is achieved with a method for detecting the presence of occupants in a vehicle with the features of claim 9.
Ein erfindungsgemäßes Verfahren zur Detektion der Anwesenheit von Insassen in einem Fahrzeuginnenraum umfasst folgende Verfahrensschritte:
- In einem ersten Verfahrensschritt werden Außengeräusche durch mindestens einen außerhalb des Fahrzeuginnenraums angeordneten Außenraumaudiosensor erfasst.
- In a first method step, exterior noise is detected by at least one exterior audio sensor arranged outside the vehicle interior.
Das von dem Außenraumaudiosensor erfasste und aus den Außengeräuschen gebildete Außengeräuschprofil wird in einem nächsten Verfahrensschritt in einer dazu eingerichteten Prozessoreinheit mittels eines Signalverarbeitungsalgorithmus verarbeitet und analysiert. In einem weiteren Verfahrensschritt wird aus diesem Außengeräuschprofil mittels eines fahrzeugbasierten charakteristischen Geräuschübertragungsmodells, das die akustischen Übertragungseigenschaften des Fahrzeugs abbildet, ein gegenphasiges Interferenzgeräuschprofil erzeugt. Dieses gegenphasige Interferenz-Geräuschprofil entspricht der Inversen eines mithilfe des Geräuschübertragungsmodells modellbasierten im Fahrzeug Innenraum wahrnehmbaren Geräuschprofil aus Außengeräuschen, d.h. das Außengeräuschprofil wird mithilfe des Geräuschübertragungsmodells derart modifiziert, dass es einem Geräuschprofil der in den Fahrzeuginnenraum übertragenen Außengeräusche entspricht, das im Fahrzeuginnenraum erfasst worden wäre.The exterior noise profile detected by the exterior audio sensor and formed from the exterior noise is processed and analyzed in a next method step in a processor unit set up for this purpose by means of a signal processing algorithm. In a further method step, an antiphase interference noise profile is generated from this exterior noise profile using a vehicle-based characteristic noise transmission model that maps the acoustic transmission properties of the vehicle. This antiphase interference noise profile corresponds to the inverse of a noise profile from exterior noise that can be perceived in the vehicle interior using the noise transmission model, i.e. the exterior noise profile is modified using the noise transmission model in such a way that it corresponds to a noise profile of the exterior noise transmitted into the vehicle interior that would have been recorded in the vehicle interior.
Das modellbasierte gegenphasige Interferenzgeräuschprofil wird anschließend an mindestens einen Lautsprecher übertragen, der vorzugsweise im Fahrzeuginnenraum angeordnet ist. Dieser mindestens eine Lautsprecher gibt das gegenphasige Interferenz-Geräuschprofil in einem weiteren Verfahrensschritt im Fahrzeuginnenraum aus, sodass es sich mit den eigentlichen im Fahrzeug wahrnehmbaren Außengeräuschen überlagert.The model-based anti-phase interference noise profile is then transmitted to at least one loudspeaker, which is preferably arranged in the vehicle interior. In a further method step, this at least one loudspeaker emits the antiphase interference noise profile in the vehicle interior, so that it is superimposed on the actual external noise that can be heard in the vehicle.
Im folgenden Schritt wird das gegenphasige Interferenzgeräuschprofil mittels mindestens eines im Fahrzeuginnenraum angeordneten Innenraumaudiosensors erfasst, wobei der Innenraumaudiosensor auch die von außen in den Fahrzeuginnenraum übertragenen Außengeräusche erfasst. Durch die sich destruktiv überlagernden Geräuschprofile, einerseits das Geräuschprofil der von außen in den Fahrzeuginnenraum übertragenen Außengeräusche und andererseits das Interferenz-Geräuschprofil, wird ein Antischall-Effekt erzeugt, wodurch sich die beiden Geräuschprofile gegenseitig auslöschen, sodass die im Fahrzeuginnenraum wahrnehmbaren Außengeräusche gedämpft werden.In the following step, the antiphase interference noise profile is detected by means of at least one interior audio sensor arranged in the vehicle interior, with the interior audio sensor also detecting the external noise transmitted from the outside into the vehicle interior. Due to the destructively overlapping noise profiles, on the one hand the noise profile of the external noise transmitted from the outside into the vehicle interior and on the other hand the interference noise profile, an anti-noise effect is generated, whereby the two noise profiles cancel each other out, so that the outside noises perceptible in the vehicle interior are dampened.
Ferner erfasst der Innenraumaudiosensor in einem nächsten Verfahrensschritt Geräusche innerhalb des Fahrzeuginnenraums, die von Insassen abgegeben werden, die beispielsweise nach dem Abstellen des Fahrzeugs im Fahrzeuginnenraum zurückgeblieben sind. Derartige Insassen können beispielsweise Säuglinge, Kinder, Erwachsene oder auch Haustiere sein. Der mindestens eine Innenraumaudiosensor erfasst diese Innengeräusche und verarbeitet die erfassten Innengeräusche mithilfe der Prozessoreinheit.Furthermore, in a next method step, the interior audio sensor detects noises inside the vehicle interior that are emitted by occupants who, for example, have stayed behind in the vehicle interior after the vehicle has been parked. Such occupants can be, for example, infants, children, adults or pets. The at least one interior audio sensor captures these interior noises and processes the captured interior noises using the processor unit.
Mittels eines Klassifizierungsalgorithmus werden in einem weiteren Verfahrensschritt die erfassten Innengeräusche dahingehend klassifiziert, dass von Insassen stammende Lebenszeichen erkennbar sind. Der Innenraumaudiosensor erfasst beispielsweise die Stimme eines versehentlich im Fahrzeug zurückgebliebenen Insassen, worauf hin der Klassifizierungsalgorithmus diese Stimme anhand ihrer Charakteristik und ihres Geräuschmusters mit entsprechend hinterlegten Insassenprofilen abgleicht und klassifiziert, sodass der Klassifizierungsalgorithmus die erfasste Stimme beispielsweise einem Kind zuordnet. Auf gleiche Weise können auch andere von Insassen stammende Geräusche klassifiziert werden, wie beispielsweise Geräusche von Säuglingen oder von Haustieren. Durch die Dämpfung der in den Innenraum übertragenen Außengeräusche mithilfe des Antischall-Effekts können sogar relativ leise Geräusche, wie die Atmung eines schlafenden Kindes erfasst werden, sodass das vorliegende Verfahren eine besonders hohe Erkennungsgenauigkeit besitzt.In a further method step, the detected interior noises are classified by means of a classification algorithm such that signs of life originating from the occupants can be identified. For example, the interior audio sensor records the voice of an occupant who accidentally stayed behind in the vehicle, whereupon the classification algorithm compares and classifies this voice based on its characteristics and noise pattern with correspondingly stored occupant profiles, so that the classification algorithm assigns the recorded voice to a child, for example. Other occupant-derived sounds, such as sounds from infants or sounds from pets, can also be classified in the same way. By using the anti-noise effect to dampen the external noise transmitted into the interior, even relatively quiet noises, such as the breathing of a sleeping child, can be detected, so that the present method has a particularly high detection accuracy.
In einer bevorzugten Ausgestaltung der vorliegenden Erfindung wird das Verfahren ausgeführt, wenn sich das Fahrzeug in einem geparkten Zustand befindet. Dementsprechend wird das Verfahren zur Detektion der Anwesenheit von Insassen in einem Fahrzeuginnenraum nur dann durchgeführt, wenn der Fahrzeugführer das Fahrzeug abgestellt und verlassen hat.In a preferred embodiment of the present invention, the method is performed when the vehicle is in a parked state. Accordingly, the method for detecting the presence of occupants in a vehicle interior is only carried out when the vehicle driver has parked and left the vehicle.
Vorzugsweise wird bei der Detektion von Insassen im Fahrzeuginnenraum ein Warnsignal durch die Prozessoreinheit an ein externes Gerät übermittelt. Beispielsweise kann über eine geeignete Signalschnittstelle ein Warnsignal an ein Mobiltelefon, beispielsweise an das Mobiltelefon des Fahrzeughalters übermittelt werden, sodass dieser über die im Fahrzeug zurückgebliebenen Insassen informiert wird.When occupants are detected in the vehicle interior, a warning signal is preferably transmitted by the processor unit to an external device. For example, a warning signal can be transmitted to a mobile phone, for example to the mobile phone of the vehicle owner, via a suitable signal interface, so that the latter is informed about the occupants left behind in the vehicle.
Vorteilhafterweise werden die Warnsignale durch die Prozessoreinheit in unterschiedliche Warnstufen kategorisiert. Dazu sind unterschiedliche charakteristische Geräuschmuster verschiedenen Warnstufen zugeordnet. In Abhängigkeit des erkannten Geräuschmusters und der Klassifizierung durch den Klassifizierungsalgorithmus können somit der Klassifizierung entsprechende Gegenmaßnahmen eingeleitet werden. Beispielsweise könnte bei Erkennung eines Kleinkindes oder eines Haustieres ein Warnton über die Alarmanlage des Fahrzeugs abgegeben werden, der Passanten in der Nähe aufmerksam macht. Alternativ können bei der Erkennung eines Erwachsenen beispielsweise lediglich die Türen des Fahrzeugs entriegelt werden, sodass dieser sich selbst befreien kann.The warning signals are advantageously categorized into different warning levels by the processor unit. For this purpose, different characteristic noise patterns are assigned to different warning levels. Depending on the recognized noise pattern and the classification by the classification algorithm, countermeasures corresponding to the classification can thus be initiated. For example, if a small child or a pet is detected, a warning tone could be emitted via the vehicle's alarm system, alerting passers-by in the vicinity. Alternatively, if an adult is detected, only the doors of the vehicle can be unlocked, for example, so that the adult can free himself.
Nachfolgend wird ein bevorzugtes Ausführungsbeispiel eines erfindungsgemäßen Insassenanwesenheits-Detektionssystems und eines entsprechenden erfindungsgemäßes Verfahrens anhand von Zeichnungen näher erläutert. Es zeigen:
-
1 ein Insassenanwesenheits-Detektionssystem in einem Fahrzeug in einer schematischen Draufsicht, und -
2 ein Verfahren zur Detektion der Anwesenheit von Insassen in einem Fahrzeug, das von dem Insassenanwesenheits-Detektionssystem der1 ausgeführt wird.
-
1 an occupant presence detection system in a vehicle in a schematic plan view, and -
2 a method for detecting the presence of occupants in a vehicle by the occupant presence detection system of1 is performed.
Der Signalverarbeitungsalgorithmus 31 umfasst ein Geräuschübertragungsmodell, das von dem Signalverarbeitungsalgorithmus 31 selbstständig durch maschinelles Lernen definiert wurde. Dieses Geräuschübertragungsmodell bildet die akustischen Übertragungs- und Dämpfungseigenschaften des Fahrzeugs 100 realitätsnah ab, sodass unter Verwendung des Geräuschübertragungsmodells zunächst ein modellbasiertes Geräuschprofil erstellt wird, das dem aus den in das Fahrzeuginnenraum 12 übertragenen Außengeräuschen SA gebildeten Außengeräuschtransferprofil SAP entspricht. Auf Basis des modellbasierten Geräuschprofils erzeugt der Signalverarbeitungsalgorithmus 31 ein gegenphasiges Interferenz-Geräuschprofil SAN, das gegenüber dem modellbasierten Geräuschprofil und somit gegenüber dem in den Fahrzeuginnenraum 12 übertragenen Außengeräuschtransferprofil SAP invers ausgebildet ist, d.h., dass beispielsweise bei einer positiven Amplitude des Außengeräuschtransferprofil SAP mit dem Wert 1 das Interferenz-Geräuschprofil SAN eine entsprechend der Form der positiven Amplitude des Außengeräuschtransferprofil SAP identisch ausgebildete, aber negative Amplitude mit dem Wert -1 aufweist. Der Signalverlauf des Interferenz-Geräuschprofils SAN entspricht folglich einem an der Abszisse des Signalverlaufsdiagramms gespiegelten Signalverlauf des Außengeräuschtransferprofils SAP, wie
Das Insassen-Anwesenheits-Detektionssysteme 10 umfasst ferner einen Innenraumaudiosensor 25 der innerhalb des Fahrzeuginnenraums 12 angeordnet ist. Der Innenraumaudiosensor 25 erfasst insbesondere Innengeräusche SP, die von Insassen 50 abgegeben werden, die in dem Fahrzeug 100 im Fahrzeuginnenraum 12 zurückgeblieben sind, während sich das Fahrzeug 100 im geparkten Zustand befindet. Je nach Intensität der außerhalb des Fahrzeugs auftretenden Außengeräusche SA entstehen trotz der dämmungsbedingt relativ guten Dämpfungseigenschaften moderner PKW-Karossen im Fahrzeuginnenraum 12 Störgeräusche, die die Erfassung von durch Insassen 50 abgegebene Innengeräusche SP erschweren.The occupant
Zur Reduzierung der Störgeräusche wird das von dem Signalverarbeitungsalgorithmus 31 erzeugte gegenphasige Interferenz-Geräuschprofil SAN an mindestens einen im Fahrzeuginnenraum 12 angeordneten Lautsprecher 28 übertragen und von diesem im Fahrzeuginnenraum 12 ausgegeben. Der Lautsprecher 28, der das Interferenz-Geräuschprofil SAN im Fahrzeuginnenraum 12 ausgibt, ist in Bezug auf den Innenraumaudiosensor 25 in einem Abstand von ca. 1 m angeordnet. Die Schallwellen des Interferenz-Geräuschprofils SAN überlagern die Schallwellen des Außengeräuschtransferprofils SAP in destruktiver Weise. Durch diese destruktive Interferenz werden die Schallwellen des Außengeräuschtransferprofils SAP von den gegenphasigen Schallwellen des Interferenz-Geräuschprofils SAN ausgelöscht, sodass der Innenraumaudiosensor 25 das Außengeräuschtransferprofil SAP nicht oder nur stark gedämpft erfasst. In order to reduce the background noise, the antiphase interference noise profile SAN generated by the
Dieses Verfahren wird als Active-Noise-Cancelling oder Antischall bezeichnet, wobei eine Anordnung mit einem außerhalb des Schallraums - hier außerhalb des Fahrzeuginnenraums 12 - angeordneten Außenraumaudiosensor 20 als Feedforward-Active-Noise-Cancelling bezeichnet wird.This method is referred to as active noise canceling or anti-noise, with an arrangement having an outside of the sound space—here outside the
Durch den Einsatz des Active-Noise-Cancelling-Verfahrens werden die von außen in den Fahrzeuginnenraum 12 eindringenden Störgeräusche nahezu vollständig eliminiert, wodurch der Innenraumaudiosensor 25 nur die von den Insassen 50 abgegebenen Innengeräusche SP erfasst und somit eine besonders hohe Erfassungsgenauigkeit besitzt, sodass der Innenraumaudiosensor 25 in der Lage ist, selbst relativ leise Geräusche wie die Atemgeräusche des Insassen 50 - hier die Atemgeräusche eines schlafenden Säuglings - relativ genau und frei von Störgeräuschen zu erfassen.By using the active noise canceling method, the noise penetrating into the vehicle interior 12 from the outside is almost completely eliminated, as a result of which the
Die von dem Innenraumaudiosensor 25 erfassten Innengeräusche SP werden nach ihrer Erfassung mittels der Prozessoreinheit 30 verarbeitet. Dazu umfasst die Prozessoreinheit 30 einen selbstlernenden Klassifizierungsalgorithmus 35, der die erfassten Innengeräusche SP anhand ihres Geräuschmusters analysiert und auf Basis ihrer akustischen Charakteristik einem Insassentyp zuordnet. Der Klassifizierungsalgorithmus 35 ist folglich dahingehend konfiguriert, die erfassten Innengeräusche SP zu klassifizieren und somit von den Insassen 50 stammende Lebenszeichen zu erkennen, d.h., der Klassifizierungsalgorithmus 35 erkennt, ob es sich um einen Menschen oder ein Tier handelt, wobei der Klassifizierungsalgorithmus 35 im Falle der Erkennung eines Menschen ferner erkennen kann, ob es sich um einen Erwachsenen, ein Kind oder einen Säugling handelt.The interior noise SP detected by the
Durch die hohe Erfassungsgenauigkeit erkennt der Klassifizierungsalgorithmus 35 in dem vorliegenden Ausführungsbeispiel, dass sich ein Säugling im Fahrzeuginnenraum 12 befindet. Dazu umfasst der Klassifizierungsalgorithmus 35 eine Vielzahl von Insassenprofilen für jeden Insassentyp, wobei der Klassifizierungsalgorithmus 35 durch maschinelles Lernen selbstständig neue Insassenprofile anlegen kann oder bestehende Insassenprofile bearbeiten kann. Somit kann der Klassifizierungsalgorithmus 35 sich selbstständig an neue und unbekannte Geräuschmuster mit einer entsprechend neuen Charakteristik anpassen und diese einem hinterlegten Insassentyp zuordnen.Due to the high detection accuracy, the
Sobald ein Insasse 50 im Fahrzeuginnenraum 12 durch den Klassifizierungsalgorithmus 35 der Prozessoreinheit 30 erkannt wird, generiert die Prozessoreinheit 30 ein Warnsignal einer bestimmten Warnstufe. Die Warnstufe wird anhand des erkannten Geräuschmusters und anhand des entsprechend der Geräuschmusters zugeordneten Insassentypen festgelegt. Dementsprechend existieren für jeden Insassentypen unterschiedliche Warnstufen. Die Warnstufen sind kategorisiert und lösen unterschiedliche Gegenmaßnahmen aus. Die Erkennung eines im Fahrzeuginnenraum 12 zurückgebliebenen Säuglings löst ein Warnsignal der höchsten Warnstufe aus, welches an eine Signalschnittstelle 40 der Prozessoreinheit 30 übermittelt wird. Die Signalschnittstelle 40 umfasst eine Mobilfunkschnittstelle 41 über die ein Mobilfunk-Warnsignal an ein externes Empfangsgerät 45 - hier das Mobiltelefon 46 des Fahrzeughalters - übermittelt wird. Zusätzlich wird ein Warnsignal an eine Steuereinheit 48 des Fahrzeugs 100 abgegeben, das beispielsweise die Alarmanlage des Fahrzeugs 100 aktiviert, sodass der Fahrzeughalter, falls dieser sich noch in der Nähe des Fahrzeugs 100 befindet, alarmiert wird, bzw. sodass Passanten alarmiert werden, die sich in der Nähe des Fahrzeugs 100 befinden.As soon as an
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturPatent Literature Cited
- DE 102017124291 A1 [0004]DE 102017124291 A1 [0004]
- US 20210023964 A1 [0005]US20210023964A1 [0005]
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102021126088.4A DE102021126088A1 (en) | 2021-10-07 | 2021-10-07 | Occupant presence detection system for a vehicle and method for detecting the presence of occupants in a vehicle |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102021126088.4A DE102021126088A1 (en) | 2021-10-07 | 2021-10-07 | Occupant presence detection system for a vehicle and method for detecting the presence of occupants in a vehicle |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102021126088A1 true DE102021126088A1 (en) | 2023-04-13 |
Family
ID=85705648
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102021126088.4A Pending DE102021126088A1 (en) | 2021-10-07 | 2021-10-07 | Occupant presence detection system for a vehicle and method for detecting the presence of occupants in a vehicle |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102021126088A1 (en) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008034789A1 (en) | 2006-09-18 | 2008-03-27 | Anocsys Ag | Arrangement having an active noise reduction system |
US20150012267A1 (en) | 2013-07-02 | 2015-01-08 | Audi Ag | Countermeasures for voice recognition deterioration due to exterior noise from passing vehicles |
DE102017124291A1 (en) | 2016-10-19 | 2018-04-19 | Ford Global Technologies, Llc | VEHICLE ENVIRONMENT AUDIO CLASSIFICATION VIA NEURAL NETWORK MACHINE LEARNING |
US20190392810A1 (en) | 2019-08-22 | 2019-12-26 | Lg Electronics Inc. | Engine sound cancellation device and engine sound cancellation method |
WO2020075035A1 (en) | 2018-10-09 | 2020-04-16 | Giuseppe Guida | Sound equipment to monitor and detect the presence of a subject inside a motor vehicle |
US20210023964A1 (en) | 2017-12-22 | 2021-01-28 | Stmicroelectronics S.R.L. | Safety electronic device for presence detection inside a vehicle |
-
2021
- 2021-10-07 DE DE102021126088.4A patent/DE102021126088A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008034789A1 (en) | 2006-09-18 | 2008-03-27 | Anocsys Ag | Arrangement having an active noise reduction system |
US20150012267A1 (en) | 2013-07-02 | 2015-01-08 | Audi Ag | Countermeasures for voice recognition deterioration due to exterior noise from passing vehicles |
DE102017124291A1 (en) | 2016-10-19 | 2018-04-19 | Ford Global Technologies, Llc | VEHICLE ENVIRONMENT AUDIO CLASSIFICATION VIA NEURAL NETWORK MACHINE LEARNING |
US20210023964A1 (en) | 2017-12-22 | 2021-01-28 | Stmicroelectronics S.R.L. | Safety electronic device for presence detection inside a vehicle |
WO2020075035A1 (en) | 2018-10-09 | 2020-04-16 | Giuseppe Guida | Sound equipment to monitor and detect the presence of a subject inside a motor vehicle |
US20190392810A1 (en) | 2019-08-22 | 2019-12-26 | Lg Electronics Inc. | Engine sound cancellation device and engine sound cancellation method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102014201228A1 (en) | System and method for active noise control | |
DE102017115621A1 (en) | Vehicle information presentation device | |
DE19749372A1 (en) | Electronic recognition system for acoustic signals | |
WO2019081198A1 (en) | Method for capturing a voice input by a user in an exterior area of a motor vehicle, and motor vehicle | |
DE102018210488B4 (en) | Roof fin for a vehicle for recording ambient noise, vehicle with such a roof fin, kit for a roof fin that can be retrofitted to a vehicle, and method for producing a roof fin | |
DE102017218542A1 (en) | Method for voice control of vehicle functions of a motor vehicle from outside the motor vehicle, roof antenna element for a motor vehicle and motor vehicle with a roof antenna element | |
WO2019219718A1 (en) | Acoustic detection of a vehicle environment | |
WO2018172231A1 (en) | Method and device for entertaining a user of a vehicle | |
DE10217822C1 (en) | Viewing direction identification method for vehicle driver using evaluation of speech signals for determining speaking direction | |
DE102018122880A1 (en) | Ultrasonic noise suppression in passenger compartments of vehicles | |
DE102018007582A1 (en) | Motor vehicle and method for processing sound from outside the motor vehicle | |
DE102012016820A1 (en) | Driver assistance system for motor car, has signal processor for assigning safety level of relevance to identified noise, and loudspeaker reproducing identified noise with volume dependant on assigned safety level | |
DE102017214605A1 (en) | Passenger detection with emergency treatment in a motor vehicle | |
DE102018007830A1 (en) | Method for detecting external noise | |
DE102018202143A1 (en) | Method for operating a vehicle audio system, vehicle audio system and vehicle | |
DE102020117542A1 (en) | Component for assembly in the exterior of a vehicle | |
DE102021126088A1 (en) | Occupant presence detection system for a vehicle and method for detecting the presence of occupants in a vehicle | |
DE102022103057B3 (en) | Method for providing a noise canceling function in an automobile and motor vehicle | |
DE102017206856A1 (en) | Equipment, vehicle and procedure | |
WO2019233993A1 (en) | Detection of an impact event | |
DE102019213697B4 (en) | Method for recognizing an approach and / or distance of an emergency vehicle relative to a vehicle | |
DE102020215652A1 (en) | VEHICLE IMAGE PROCESSING SYSTEM | |
DE102020112307A1 (en) | Method for determining a collision object external to the vehicle, as well as detection device and motor vehicle | |
DE102017208382B4 (en) | Method for improving temporarily impaired speech recognition in a vehicle | |
WO2022268313A1 (en) | Interior monitoring system for a vehicle and method for recognizing signs of life in the interior of a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication |