DE102018207758A1 - Acoustic detection of a vehicle environment - Google Patents
Acoustic detection of a vehicle environment Download PDFInfo
- Publication number
- DE102018207758A1 DE102018207758A1 DE102018207758.4A DE102018207758A DE102018207758A1 DE 102018207758 A1 DE102018207758 A1 DE 102018207758A1 DE 102018207758 A DE102018207758 A DE 102018207758A DE 102018207758 A1 DE102018207758 A1 DE 102018207758A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- microphones
- detection
- noise
- detection data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0965—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages responding to signals from another vehicle, e.g. emergency vehicle
Abstract
Die Erfindung betrifft ein akustisches Erfassen eines Fahrzeugumfelds. Insbesondere betrifft die Erfindung eine Erfassungseinrichtung (130 für ein akustisches Signal in einem Fahrzeugumfeld, mit einer Mehrzahl von Mikrofonen (131), die an einer Außenseite eines Fahrzeugs (1) von diesem weg gerichtet angeordnet sind. Erfindungsgemäß sind die Mikrofone (131) oberhalb einer Fahrzeugkabine (2), gemeinsam eine Fläche (132) aufspannend, angeordnet. Ferner betrifft die Erfindung ein Fahrassistenzsystem (100) mit einer solchen Erfassungseinrichtung (130) sowie ein Verfahren zum Betrieb des Fahrzeugs (1). Die Erfindung ermöglicht eine verbesserte Erfassung des Fahrzeugumfelds durch eine mögliche Kombination von Erfassungsdaten verschiedener Sensoren (120, 131).The invention relates to an acoustic detection of a vehicle environment. More particularly, the invention relates to an acoustic signal detecting device (130) in a vehicle environment having a plurality of microphones (131) disposed on an outer side of a vehicle (1) away therefrom According to the invention, the microphones (131) are above one The invention relates to a driver assistance system (100) having such a detection device (130) and a method for operating the vehicle (1) .The invention enables improved detection of the vehicle surroundings by a possible combination of acquisition data from different sensors (120, 131).
Description
Gebiet der ErfindungField of the invention
Die vorliegende Erfindung betrifft allgemein das Erfassen eines akustischen Signales in einem Fahrzeugumfeld. Insbesondere betrifft die Erfindung eine Erfassungsvorrichtung für ein akustisches Signal in einem Fahrzeugumfeld, ein damit ausgestattetes Fahrassistenzsystem sowie ein Verfahren zum Betrieb eines Fahrzeugs.The present invention generally relates to detecting an acoustic signal in a vehicle environment. In particular, the invention relates to a detection device for an acoustic signal in a vehicle environment, a driver assistance system equipped therewith and a method for operating a vehicle.
Stand der TechnikState of the art
Während des Betriebs eines Fahrzeugs können durch einen Fahrzeugführer unterschiedliche Umgebungsgeräusche aus dem Fahrzeugumfeld wahrgenommen werden. Für die Fahrsicherheit sind dabei insbesondere Warnsignale bzw. Schallzeichen von Bedeutung, wie z.B. Sondersignale von Einsatzfahrzeugen, Hupsignale usw. Der Fahrzeugführer kann diese ohne Weiteres über sein Gehör wahrnehmen und häufig auch nach Wichtigkeit klassifizieren sowie die Geräusch- oder Schallquelle ungefähr lokalisieren. Infolgedessen kann der Fahrzeugführer beispielsweise eine Fahrspur für das identifizierte Einsatzfahrzeug freigeben oder andere geeignete Fahrmanöver durchführen. Fahrassistenzsysteme bzw. Systeme, die ein autonomes Fahren ermöglichen, sind dagegen nicht ohne Weiteres in der Lage, Umgebungsgeräusche überhaupt wahrzunehmen oder daraus geeignete Fahrmanöver abzuleiten.During operation of a vehicle, a vehicle driver may perceive different environmental sounds from the vehicle environment. In particular, warning signals or acoustic signals are important for driving safety, such as, for example, Special signals from emergency vehicles, sound signals, etc. The driver can easily hear these by his hearing and often classified by importance and locate the noise or sound source approximately. As a result, the driver may, for example, release a lane for the identified emergency vehicle or perform other suitable driving maneuvers. Driver assistance systems or systems that enable autonomous driving, however, are not readily able to perceive ambient noise at all or derive suitable driving maneuvers from it.
In der
Offenbarung der ErfindungDisclosure of the invention
Die Aufgabe der Erfindung ist es daher, eine verbesserte Möglichkeit zum akustischen Erfassen eines Fahrzeugumfelds zu schaffen.The object of the invention is therefore to provide an improved possibility for the acoustic detection of a vehicle environment.
Diese Aufgabe wird durch eine Erfassungsvorrichtung für ein akustisches Signal, ein damit ausgestattetes Fahrassistenzsystem sowie ein Verfahren zum Betrieb eines Fahrzeug gemäß den unabhängigen sowie nebengeordneten Ansprüchen gelöst. Vorteilhafte Weiterbildungen der Erfindung ergeben sich aus den abhängigen Ansprüchen, der Beschreibung sowie den begleitenden Figuren.This object is achieved by a detection device for an acoustic signal, a driving assistance system equipped therewith and a method for operating a vehicle according to the independent and independent claims. Advantageous developments of the invention will become apparent from the dependent claims, the description and the accompanying drawings.
Eine erfindungsgemäße Erfassungsvorrichtung für ein akustisches Signal einer Geräusch- oder Schallquelle in einem Fahrzeugumfeld weist eine Mehrzahl von Mikrofonen auf, die an einer Außenseite eines Fahrzeugs vorzugsweise so angeordnet sind, dass diese von dem Fahrzeug weg gerichtet sind. Erfindungsgemäß sind die mehreren Mikrofone oberhalb einer Fahrzeugkabine derart angeordnet, dass sie gemeinsam eine Fläche aufspannen. Vorzugsweise sind mindestens drei Mikrofone vorgesehen, die möglichst nicht auf einer gemeinsamen Geraden angeordnet sind. Die durch die mehreren Mikrofone aufgespannte Fläche kann eben oder gewölbt sein, wobei darunter verstanden werden kann, dass die Mikrofone oberhalb der Fahrzeugkabine auch in voneinander abweichenden Höhen angeordnet sein können. Unter einer Anordnung der Mikrofone oberhalb einer Fahrzeugkabine kann in diesem Zusammenhang verstanden werden, dass die Mikrofone oberhalb eines Passagierbereichs des Fahrzeugs, also außerhalb und insbesondere oberhalb eines Fahrzeuginnenraums mitsamt Kofferraum angeordnet sind. Die Richtungsangabe oberhalb bezieht sich hierbei auf eine Fahrzeug-Hochachse, die auch als Vertikal- oder Gierachse des Fahrzeugs bezeichnet wird. Die einzelnen Mikrofone können sich auch hinsichtlich des erfassbaren Frequenzbereichs voneinander unterscheiden.A detection device for an acoustic signal of a noise or sound source in a vehicle environment according to the invention has a plurality of microphones, which are preferably arranged on an outer side of a vehicle so that they are directed away from the vehicle. According to the invention, the plurality of microphones above a vehicle cabin are arranged in such a way that together they span a surface. Preferably, at least three microphones are provided, which are preferably not arranged on a common straight line. The area spanned by the plurality of microphones surface may be flat or curved, which may be understood that the microphones above the vehicle cab can also be arranged in different heights. In this context, an arrangement of the microphones above a vehicle cabin can be understood to mean that the microphones are arranged above a passenger area of the vehicle, that is to say outside and in particular above a vehicle interior together with the trunk. The direction above refers here to a vehicle vertical axis, which is also referred to as the vertical or yaw axis of the vehicle. The individual microphones may also differ from each other in terms of the detectable frequency range.
Diese Konfiguration der Erfassungsvorrichtung ermöglicht gleich mehrere Vorteile. So sind die Mikrofone in einer exponierten Lage angeordnet, so dass auch für weiter entfernte Geräusch- oder Schallquellen der Schallausbreitungsweg nicht gestört ist. Daraus folgt ein besonders gutes Signal-Rausch-Verhältnis. Auch stellt das Fahrzeug selbst keinen Schallschatten für die Mikrofone dar, da diese in einer vergleichsweise großen Höhe an dem Fahrzeug angeordnet sind. Auch eventuell ungewollte Störgeräusche, wie etwa die aus dem Auspuff eines vorausfahrenden Autos austretenden Geräusche oder die Abrollgeräusche eines vorausfahrenden Autos, beeinträchtigen die Erfassung durch die Mikrofone aufgrund deren hoher Anordnung nicht. Durch die eine Fläche aufspannende Anordnung der mehreren Mikrofone kann zudem eine Richtungs- und/oder Abstandserkennung durchgeführt werden. Die Richtungs- und Abstandserkennung kann insbesondere dadurch erfolgen, dass bei vergleichsweise geringen Abständen der Mikrofone zueinander, ein jeweiliger Phasenunterschied bestimmt wird. Zusätzlich oder alternativ dazu, können bei vergleichsweise großen Abständen der Mikrofone zueinander ein jeweiliger Laufzeitunterschied bestimmt werden. Ebenfalls zusätzlich oder alternativ dazu, kann ein jeweiliger Unterschied eines Schalldrucks an den Mikrofonen, das heißt eine (komplexe) Schallamplitude, bestimmt werden. Somit kann nicht nur das Vorhandensein eines akustischen Signals, sondern auch dessen Ursprungsrichtung bestimmt werden.This configuration of the detection device allows several advantages. Thus, the microphones are arranged in an exposed position so that the sound propagation path is not disturbed even for more distant noise or sound sources. This results in a particularly good signal-to-noise ratio. Also, the vehicle itself is not an acoustic shadow for the microphones, since they are arranged at a comparatively high altitude on the vehicle. Even unwanted noise, such as the exiting from the exhaust of a car ahead sounds or the rolling noise of a car in front, affect the detection by the microphones due to their high arrangement. In addition, a directional and / or distance detection can be performed by arranging the several microphones spanning an area. The direction and distance detection can be effected in particular by determining a respective phase difference at comparatively small distances between the microphones. Additionally or alternatively, a respective delay difference can be determined at relatively large distances of the microphones to each other. Also additionally or alternatively, a respective difference of a sound pressure at the microphones, that is a (complex) sound amplitude, can be determined. Thus, not only the presence of an acoustic signal but also its origin direction can be determined.
Mit der Erfassungsvorrichtung können neben der Warnsignal- oder Schallzeichenwahrnehmung auch Fahrzeugfahr- bzw. Beschleunigungsgeräusche, Bahnkreuzungen, Fahrradklingeln, Hupsignale, Bremsgeräusche, Unfallgeräusche, Hilferufe oder ähnliches erfasst und erkannt werden. Insbesondere können akustische Signale erfasst werden, die im Frequenzbereich von etwa 20 bis 20.000 Hz liegen und somit dem durchschnittlichen menschlichen Hörvermögen entsprechen. Selbstverständlich lässt sich der Frequenzbereich auch über das menschliche Hörvermögen hinaus erweitern. In addition to the warning signal or acoustic signal perception, the detection device can also detect and recognize vehicle driving or acceleration noises, railway crossings, bicycle bells, hopping signals, brake noises, accident noises, calls for help or the like. In particular, acoustic signals can be detected, which are in the frequency range of about 20 to 20,000 Hz and thus correspond to the average human hearing. Of course, the frequency range can also extend beyond human hearing.
Eine vorteilhafte Weiterbildung der Erfindung sieht vor, dass die Mikrofone an oder auf einem Fahrzeugdach angeordnet sind. Die Mikrofone können auch Teil eines Dachaufbaus sein, z.B. auch in ein aerodynamisch optimiertes Gehäuse eingehaust sein. Das Fahrzeugdach ist zum einen der höchste Punkt des Fahrzeugs stellt deshalb eine besonders exponierte Lage für die Mikrofone dar. Zum anderen bietet das Fahrzeugdach eine vergleichsweise große Fläche, so dass die Abstände zwischen den einzelnen Mikrofonen ebenfalls groß gewählt werden können. Dadurch kann das gesamte Frequenzspektrum lokal abgebildet werden, ohne dass eine Beschränkung auf Obertöne bestimmter akustischer Signale erfolgen muss.An advantageous development of the invention provides that the microphones are arranged on or on a vehicle roof. The microphones may also be part of a roof structure, e.g. be housed in an aerodynamically optimized housing. The vehicle roof is on the one hand the highest point of the vehicle is therefore a particularly exposed position for the microphones. On the other hand, the vehicle roof has a comparatively large area, so that the distances between the individual microphones can also be made large. As a result, the entire frequency spectrum can be reproduced locally without having to limit it to overtones of specific acoustic signals.
Für eine möglichst gute Richtungserkennung und/oder eine möglichst genaue Lokalisation der Geräusch- oder Schallquelle kann es vorteilhaft sein, wenn mindestens drei Mikrofone im Wesentlichen komplanar, also im Wesentlichen in einer gemeinsamen Ebene, angeordnet sind. Die Verwendung von mindestens drei Mikrofonen in einer gemeinsamen Ebene ermöglicht eine genaue Lokalisation der Geräusch- oder Schallquelle. Die Ebene kann hierbei durch das Fahrzeugdach gebildet sein, wobei die Mikrofone auch bei einer leichten Wölbung des Fahrzeugdachs im Wesentlich in einer gemeinsamen Ebene angeordnet sind.For the best possible directional recognition and / or the best possible localization of the noise or sound source, it may be advantageous if at least three microphones are arranged substantially coplanar, ie substantially in a common plane. The use of at least three microphones in a common plane allows a precise localization of the noise or sound source. The plane may in this case be formed by the vehicle roof, wherein the microphones are arranged even in a slight curvature of the vehicle roof substantially in a common plane.
Eine andere vorteilhafte Weiterbildungen der Erfindung sieht vor, dass die Mikrofone ein zum Beamforming eingerichtetes Mikrofon-Array bilden. Unter Beamforming ist ein Verfahren zur Positionsbestimmung einer Geräusch- oder Schallquelle zu verstehen, das auf einer der Laufzeit von der Geräusch- oder Schallquelle zum jeweiligen Mikrofon entsprechenden Zeitverschiebung der von diesem Mikrofon erfassten Signale beruht. Beim Beamforming können auch Störquellen ausgeblendet werden, so dass eine besonders genaue Erfassung des akustischen Signals möglich ist.Another advantageous development of the invention provides that the microphones form a microphone array designed for beamforming. Beamforming is understood to be a method for determining the position of a noise or sound source which is based on a time shift of the signals detected by this microphone which corresponds to the transit time from the noise or sound source to the respective microphone. When beamforming sources of interference can be hidden, so that a particularly accurate detection of the acoustic signal is possible.
Es hat sich als vorteilhaft erwiesen, wenn die Mikrofone einzeln oder gruppiert triangulär angeordnet sind. In anderen Worten kann die Anordnung der Mikrofone auf dem Fahrzeugdach direkt oder als Projektion ein Dreieck beschreiben. Unter einer gruppierten triangulären Anordnung kann verstanden werden, dass zwar einige der Mikrofone kollinear, also auf einer gemeinsamen Geraden angeordnet sind, aber andere nicht. Dadurch ist ausgeschlossen, dass sämtliche Mikrofone aus der Mehrzahl von Mikrofonen kollinear angeordnet sind, so dass eine gute Richtungs- und/oder Positionsbestimmung möglich ist. Bei Messungen bzw. Simulationen mit verschiedenen Frequenzen des akustischen Signals hat sich bei dieser Anordnung der Mikrofone eine gute Winkelgenauigkeit gezeigt, die ein Maß für die Richtungs- und/oder Positionsbestimmung der Geräusch- oder Schallquelle darstellt. Auch die Signaleindeutigkeit hat sich bei dieser Anordnung als gut erwiesen.It has proved to be advantageous if the microphones are arranged individually or grouped triangular. In other words, the arrangement of the microphones on the vehicle roof can describe a triangle directly or as a projection. By a grouped triangular arrangement, it can be understood that while some of the microphones are collinear, that is, they are arranged on a common line, but others are not. This excludes that all microphones from the plurality of microphones are arranged collinear, so that a good direction and / or position determination is possible. In measurements or simulations with different frequencies of the acoustic signal, a good angular accuracy has been shown in this arrangement of the microphones, which is a measure of the direction and / or position determination of the noise or sound source. Also, the signal uniqueness has been found in this arrangement to be good.
Alternativ dazu können die Mikrofone auch einzeln oder gruppiert kreuzförmig angeordnet sein. Auch so lässt sich bewerkstelligen, dass diese nicht kollinear angeordnet sind und somit eine gute Richtungs- und/oder Positionsbestimmung möglich ist. Bei Messungen bzw. Simulationen mit verschiedenen Frequenzen wurde auch hier eine ausreichend genaue Winkelgenauigkeit und Signaleindeutigkeit ermittelt.Alternatively, the microphones may also be arranged individually or grouped in a cross shape. Even so can be accomplished that they are not collinear and thus a good direction and / or position determination is possible. For measurements or simulations with different frequencies, a sufficiently accurate angular accuracy and signal uniqueness were also determined here.
Als ebenfalls vorteilhaft hat es sich erwiesen, wenn die Mikrofone kreisförmig auf einem gemeinsamen Kreisring angeordnet sind. Diese alternative Anordnung hat sich hinsichtlich der Winkelgenauigkeit und der Signaleindeutigkeit als besonders vorteilhaft erwiesen.As also advantageous, it has been found that the microphones are arranged in a circle on a common circular ring. This alternative arrangement has proved to be particularly advantageous in terms of angular accuracy and signal uniqueness.
Dabei hat es sich als besonders vorteilhaft erwiesen, wenn die Mikrofone auf dem Kreisring mit jeweils identischem Abstand zueinander angeordnet sind. Dies bewirkt, dass die Winkelabhängigkeit für das gesamte Winkelspektrum konstant ist und lediglich von der Frequenz der Geräusch- oder Schallquelle abhängt.It has proved to be particularly advantageous if the microphones are arranged on the circular ring with an identical distance from each other. This causes the angle dependence for the entire angle spectrum is constant and depends only on the frequency of the noise or sound source.
Die vorstehend beschriebenen Anordnungen, also triangulär, kreuz- und kreisförmig, haben sich als besonders vorteilhaft erwiesen, wobei eine Auswahl der jeweiligen Variante z.B. durch die Fahrzeugform, die Fahrzeugdachgröße oder ähnliche Faktoren beeinflusst werden kann.The arrangements described above, ie triangular, cross and circular, have proved to be particularly advantageous, with a selection of the respective variant being e.g. can be influenced by the vehicle shape, the vehicle roof size or similar factors.
Die Erfindung bezieht sich auch auf ein Fahrassistenzsystem für ein Fahrzeug, das eine elektronische Steuereinrichtung, vorzugsweise mit wenigstens einem Prozessor, und wenigstens einen optischen Sensor, wie etwa eine Kamera und/oder eine LIDAR-Sensorik, zum Erfassen eines Fahrzeugumfelds aufweist. Erfindungsgemäß ist die Steuereinrichtung dazu eingerichtet, zum Steuern einer Fahrfunktion des Fahrzeugs, also z.B. für ein aktorisch betätigtes Lenken, Bremsen usw., Erfassungsdaten des optischen Sensors mit Erfassungsdaten der vorstehend beschriebenen Erfassungsvorrichtung zu kombinieren.The invention also relates to a driver assistance system for a vehicle which has an electronic control device, preferably with at least one processor, and at least one optical sensor, such as a camera and / or a LIDAR sensor system, for detecting a vehicle environment. According to the invention, the control device is set up to control a driving function of the vehicle, that is to say for actuation by an actuated steering, brakes etc., detection data of the optical sensor with detection data of the vehicle to combine the above-described detection device.
Das Fahrassistenzsystem kann auch dazu eingerichtet sein, das Fahrzeug vollautonom zu steuern. Vorteilhaft daran ist, dass die Geräusch- oder Schallquelle nicht nur erfasst, sondern auch deren Position ermittelt werden kann, wobei durch eine Sensorfusion mit dem optischen Sensor und ggf. weiterer Sensorik des Fahrzeugs eine hohe Genauigkeit erreicht werden kann. Das damit ausgestattete Fahrzeug lässt sich deshalb besonders sicher durch den Straßenverkehr bewegen.The driver assistance system may also be configured to control the vehicle fully autonomously. The advantage of this is that the noise or sound source not only detected, but also their position can be determined, with a high accuracy can be achieved by a sensor fusion with the optical sensor and possibly other sensors of the vehicle. The vehicle equipped with it can therefore be moved particularly safely through the traffic.
Das Fahrassistenzsystem bzw. die Steuereinrichtung können dazu eingerichtet sein, das Fahrzeug durch die Ansteuerung von Aktoren zu manövrieren, also z.B. zu beschleunigen, abzubremsen, zu lenken usw. Beispielsweise kann die Steuereinrichtung das Fahrzeug so ansteuern, dass bei der Erfassung und/oder Erkennung eines Warnsignals, wie etwa einem Martinshorn eines Einsatzfahrzeuges, das Fahrzeug selbstständig an den Fahrbahnrand oder eine andere Fahrspur manövriert wird.The driver assistance system or the control device can be set up to maneuver the vehicle by the actuation of actuators, that is, e.g. accelerate, decelerate, steer, etc. For example, the controller may control the vehicle so that upon detection and / or detection of a warning signal, such as a siren of an emergency vehicle, the vehicle is autonomously maneuvered to the lane or other lane.
Die Erfindung bezieht sich auch auf ein Verfahren zum Betrieb eines Fahrzeugs, wobei das Fahrzeug vorzugsweise eine vorstehend beschriebene Erfassungsvorrichtung und/oder ein vorstehend beschriebenes Fahrassistenzsystem aufweist. Das Verfahren umfasst die folgenden Schritte:The invention also relates to a method for operating a vehicle, wherein the vehicle preferably has a detection device described above and / or a driver assistance system described above. The method comprises the following steps:
Während des Betriebs des Fahrzeugs wird ein Fahrzeugumfeld durch wenigstens einen optischen Sensor erfasst, wobei dieser als Kamera, als LIDAR-Sensorik oder ähnliches ausgebildet sein kann. Die Erfassungsdaten des Sensors können einer Steuereinrichtung zugeführt werden, die diese vorzugsweise zur Steuerung von Fahrzeugfunktionen über entsprechende Aktoren verarbeitet.During operation of the vehicle, a vehicle environment is detected by at least one optical sensor, which may be designed as a camera, as a LIDAR sensor or the like. The detection data of the sensor can be supplied to a control device, which preferably processes these for controlling vehicle functions via corresponding actuators.
Erfindungsgemäß erfolgt zusätzlich ein Erfassen eines akustischen Signals des Fahrzeugumfelds durch eine Mehrzahl von Mikrofonen, die oberhalb einer Fahrzeugkabine unter Aufspannen einer Ebene angeordnet sind. Wie vorstehend beschrieben, bietet diese Anordnung von Mikrofonen einen signifikanten Vorteil bei der Erfassungsgenauigkeit von akustischen Signalen.In addition, according to the invention, an acoustic signal of the vehicle environment is detected by a plurality of microphones, which are arranged above a vehicle cabin while mounting a plane. As described above, this arrangement of microphones provides a significant advantage in the detection accuracy of acoustic signals.
Dann erfolgt ein Kombinieren von Erfassungsdaten des optischen Sensors mit Erfassungsdaten der Mikrofone, um so mittels einer Sensorfusion eine hohe Erfassungsgenauigkeit des Fahrzeugumfelds zu erreichen. Dieses Kombinieren der Erfassungsdaten kann vorzugsweise durch eine elektronische Steuereinrichtung erfolgen, die z.B. softwarebasiert die Position einer Geräusch- oder Schallquelle bestimmt.Then, detection data of the optical sensor are combined with detection data of the microphones so as to achieve a high detection accuracy of the vehicle surroundings by means of a sensor fusion. This combining of the detection data may preferably be done by an electronic control device, e.g. software-based determines the position of a noise or sound source.
Anhand der kombinierten Erfassungsdaten erfolgt dann ein Steuern einer Fahrfunktion des Fahrzeugs, wobei die Steuereinrichtung entsprechende Aktoren des Fahrzeugs ansteuert, die das Fahrzeug daraufhin zu einem Fahrmanöver veran lassen.Based on the combined detection data is then carried out controlling a driving function of the vehicle, wherein the control device controls corresponding actuators of the vehicle, which then cause the vehicle veran to a driving maneuver.
Eine Weiterbildung der Erfindung sieht vor, dass das Kombinieren der Erfassungsdaten eine Plausibilisierung der Erfassungsdaten des optischen Sensors durch die Erfassungsdaten der Mikrofone umfasst. So kann, wenn optisch z.B. ein Einsatzfahrzeug mit Warnleuchte erfasst wird, über die akustische Erfassung seines Warnsignals plausibilisiert werden, dass es sich tatsächlich um ein Einsatzfahrzeug handelt und nicht etwa um ein Zivilfahrzeug, dem keine besondere Vorfahrt eingeräumt werden muss. Bei Klassifikation der Geräusch- oder Schallquelle als z.B. Einsatzfahrzeug kann die Steuereinrichtung das Fahrzeug so steuern, dass dem Einsatzfahrzeug Vorfahrt gewährt wird.A development of the invention provides that the combining of the detection data comprises a plausibility check of the detection data of the optical sensor by the detection data of the microphones. Thus, if optically e.g. an emergency vehicle is detected with a warning light, be made plausible on the acoustic detection of his warning signal that it is actually a emergency vehicle and not about a civilian vehicle, which does not have to be given a special right of way. In classifying the noise or sound source as e.g. Emergency vehicle, the controller can control the vehicle so that the emergency vehicle is granted priority.
Eine andere Weiterbildung der Erfindung sieht vor, dass nach dem Erfassen des akustischen Signals eine Richtungserkennung, insbesondere auch eine Lokalisierung, einer Geräusch- oder Schallquelle durchgeführt wird. Dies kann über eine Verarbeitung der Erfassungsdaten der Mikrofone, beispielsweise auch durch Beamforming oder Time Difference of Arrival (TDOA) unter Berücksichtigung der Dopplerverschiebung, in der Steuereinrichtung erfolgen. Damit können insbesondere die Richtung, der Abstand und die (Eigen-)Geschwindigkeit der Geräusch- oder Schallquelle relativ zu dem Fahrzeug bestimmt werden, wobei dies insbesondere auf Basis eines zeitlichen Trackings der Geräusch- oder Schallquelle erfolgen kann. Daraufhin können z.B. die Fahrgeschwindigkeit des Fahrzeugs verändert oder angepasst oder ein Ausweichmanöver eingeleitet werden.Another development of the invention provides that after the detection of the acoustic signal, a direction detection, in particular a localization, a noise or sound source is performed. This can be done by processing the detection data of the microphones, for example, by beamforming or Time Difference of Arrival (TDOA), taking into account the Doppler shift, in the control device. Thus, in particular the direction, the distance and the (self-) speed of the noise or sound source relative to the vehicle can be determined, which can be done in particular on the basis of a temporal tracking of the noise or sound source. Thereupon, e.g. the driving speed of the vehicle changed or adapted or an evasive maneuver can be initiated.
Eine Richtungserkennung des Signals und/oder der Geräusch- oder Schallquelle kann gemäß einer Weiterbildung zusätzlich oder alternativ dazu auch erfolgen, indem die gemessenen Schalldrücke zwischen den Mikrofonen zur Richtungserkennung des Signals und/oder der Geräusch- oder Schallquelle ausgewertet werden. Bei Verwendung von mindestens drei Mikrofonen, die nicht kollinear angeordnet sind, lässt sich eine besonders genaue Richtungserkennung erreichen.A directional detection of the signal and / or the noise or sound source can according to a development additionally or alternatively also be done by the measured sound pressure between the microphones for direction detection of the signal and / or the noise or sound source are evaluated. When using at least three microphones that are not collinear, a particularly accurate direction detection can be achieved.
Noch weiter kann die Erfassungs- bzw. Erkennungsqualität erhöht werden, wenn nach dem Erfassen des akustischen Signals eine Klassifizierung des Signals und/oder der Geräusch- oder Schallquelle durchgeführt wird. So kann z.B. durch die Steuereinrichtung bestimmt werden, dass das erfasste akustische Signal von einem Einsatzfahrzeug oder einer anderen vorbestimmten Fahrzeugklasse stammt. Beispielhafte Klassen können dabei sein: Warnsignale oder Schallzeichen, Fahrzeugfahr- bzw. Beschleunigungsgeräusche, Bahnkreuzungen, Fahrradklingeln, Hupsignale, Bremsgeräusche, Unfallgeräusche, Hilferufe oder ähnliches. Um unnötigen Rechenaufwand einzusparen, kann die Klassifizierung des Signals und/oder der Geräusch- oder Schallquelle vor einer Richtungserkennung bzw. Lokalisierung durchgeführt werden, so dass irrelevante Klassen von der Bestimmung ausgenommen werden.Still further, the detection quality can be increased if a classification of the signal and / or the noise or sound source is performed after the detection of the acoustic signal. For example, it can be determined by the control device that the detected acoustic signal originates from an emergency vehicle or another predetermined vehicle class. Exemplary classes can be: warning signals or acoustic signals, vehicle driving or Accelerating noises, railroad crossings, bicycle bells, hopping signals, brake noises, accident noises, cries for help or the like. To save unnecessary computational effort, the classification of the signal and / or the noise or sound source before a direction detection or localization can be performed so that irrelevant classes are excluded from the determination.
Weitere, die Erfindung verbessernde Maßnahmen werden nachstehend gemeinsam mit der Beschreibung der bevorzugten Ausführungsbeispiele der Erfindung anhand von Figuren näher dargestellt.Further measures improving the invention will be described in more detail below together with the description of the preferred embodiments of the invention with reference to figures.
Figurenlistelist of figures
Im Folgenden werden Ausführungsbeispiele der Erfindung mit Bezug auf die begleitenden Figuren detailliert beschrieben. Es zeigen:
-
1 ein Fahrzeug mit einem erfindungsgemäßen Fahrassistenzsystem bzw. einer erfindungsgemäßen Erfassungsvorrichtung für ein akustisches Signal gemäß einer Ausführungsform, -
2 ein Fahrzeug mit einem erfindungsgemäßen Fahrassistenzsystem bzw. einer erfindungsgemäßen Erfassungsvorrichtung für ein akustisches Signal gemäß einer weiteren Ausführungsform, -
3 ein Fahrzeug mit einem erfindungsgemäßen Fahrassistenzsystem bzw. einer erfindungsgemäßen Erfassungsvorrichtung für ein akustisches Signal gemäß einer weiteren Ausführungsform und -
4 ein Flussdiagramm eines erfindungsgemäßen Verfahrens zum Betrieb eines Fahrzeugs.
-
1 a vehicle having a driver assistance system according to the invention or an acoustic signal detection device according to the invention according to an embodiment, -
2 a vehicle having a driver assistance system according to the invention or an acoustic signal detection device according to the invention according to a further embodiment, -
3 a vehicle with a driver assistance system according to the invention or an inventive detection device for an acoustic signal according to another embodiment and -
4 a flowchart of a method according to the invention for operating a vehicle.
Die Figuren sind lediglich schematisch und nicht maßstabsgetreu. In den Figuren sind gleiche, gleichwirkende oder ähnliche Elemente durchgängig mit gleichen Bezugszeichen versehen.The figures are only schematic and not to scale. In the figures, the same, equivalent or similar elements are consistently provided with the same reference numerals.
Ausführungsformen der ErfindungEmbodiments of the invention
Das Fahrzeug
Die Erfassungsvorrichtung
Die Mikrofone
Die Steuereinrichtung
Das Fahrzeug
In einem optionalen Schritt wird das erfasste akustische Signal
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- DE 102014223881 A1 [0003]DE 102014223881 A1 [0003]
Claims (14)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018207758.4A DE102018207758A1 (en) | 2018-05-17 | 2018-05-17 | Acoustic detection of a vehicle environment |
PCT/EP2019/062411 WO2019219718A1 (en) | 2018-05-17 | 2019-05-15 | Acoustic detection of a vehicle environment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102018207758.4A DE102018207758A1 (en) | 2018-05-17 | 2018-05-17 | Acoustic detection of a vehicle environment |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102018207758A1 true DE102018207758A1 (en) | 2019-11-21 |
Family
ID=66597560
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102018207758.4A Pending DE102018207758A1 (en) | 2018-05-17 | 2018-05-17 | Acoustic detection of a vehicle environment |
Country Status (2)
Country | Link |
---|---|
DE (1) | DE102018207758A1 (en) |
WO (1) | WO2019219718A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102021118762A1 (en) | 2021-07-20 | 2023-01-26 | Datacollect Traffic Systems Gmbh | Method and system for detecting an electrically powered vehicle |
AT525938A1 (en) * | 2022-02-24 | 2023-09-15 | Avl List Gmbh | Test stand system for testing a driver assistance system with a hearing sound sensor |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11889278B1 (en) | 2021-12-22 | 2024-01-30 | Waymo Llc | Vehicle sensor modules with external audio receivers |
WO2023152077A1 (en) * | 2022-02-10 | 2023-08-17 | Zf Friedrichshafen Ag | Microphone system and computer program product for determining the original direction of acoustic signals, and vehicle having a microphone system of this kind |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2500569A (en) * | 2012-02-29 | 2013-10-02 | Leonard Maxwell | Emergency Siren Alert System for a Vehicle |
JP2015022453A (en) * | 2013-07-18 | 2015-02-02 | カルソニックカンセイ株式会社 | Emergency vehicle alarm system |
DE102014223881B4 (en) | 2014-11-24 | 2022-10-20 | Robert Bosch Gmbh | Warning system for a vehicle, method of operating a warning system |
DE102014226026A1 (en) * | 2014-12-16 | 2016-06-16 | Continental Automotive Gmbh | Driver assistance system for recording an event in the environment outside a vehicle |
US9873428B2 (en) * | 2015-10-27 | 2018-01-23 | Ford Global Technologies, Llc | Collision avoidance using auditory data |
DE102016006802A1 (en) * | 2016-06-03 | 2016-12-08 | Daimler Ag | Method and device for detecting at least one special signal emanating from an emergency vehicle |
-
2018
- 2018-05-17 DE DE102018207758.4A patent/DE102018207758A1/en active Pending
-
2019
- 2019-05-15 WO PCT/EP2019/062411 patent/WO2019219718A1/en active Application Filing
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102021118762A1 (en) | 2021-07-20 | 2023-01-26 | Datacollect Traffic Systems Gmbh | Method and system for detecting an electrically powered vehicle |
AT525938A1 (en) * | 2022-02-24 | 2023-09-15 | Avl List Gmbh | Test stand system for testing a driver assistance system with a hearing sound sensor |
Also Published As
Publication number | Publication date |
---|---|
WO2019219718A1 (en) | 2019-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2019219718A1 (en) | Acoustic detection of a vehicle environment | |
DE102014002116B4 (en) | Method for operating a driver assistance system for overtaking operations and motor vehicle | |
DE102018120786A1 (en) | Method and device for monitoring an autonomous vehicle | |
DE102014107917A1 (en) | A method and apparatus for avoiding a collision of a vehicle comprising a motor vehicle and a trailer with an obstacle | |
DE102010044219A1 (en) | Method for detecting the environment of a vehicle | |
DE102014111951A1 (en) | A method for warning a driver of a motor vehicle of the presence of an object in the environment, driver assistance system and motor vehicle | |
DE102009047066A1 (en) | A method for warning of an object in the vicinity of a vehicle and driving assistant system | |
DE102013207904A1 (en) | Provide an efficient environment map for a vehicle | |
DE102019106169A1 (en) | METHOD AND DEVICE FOR RECOGNIZING A CLIMBING VEHICLE VEHICLE | |
DE102015209373A1 (en) | DRIVING SUPPORT UNIT | |
DE102006034122A1 (en) | Driver assistance system | |
DE102013220430A1 (en) | Method and system for identifying a dangerous situation and use of the system | |
DE102016204877A1 (en) | Method for operating a driver assistance system for carrying out an autonomous or semi-autonomous driving maneuver of a vehicle and such a driving assistance system | |
DE102018205661A1 (en) | Method for environment detection and environment detection system for a motor vehicle | |
DE112020004779T5 (en) | Systems and methods for providing audio information in a vehicle | |
DE102015103361A1 (en) | TRAFFIC DENSITY SENSITIVITY VOTERS | |
DE102014217732B4 (en) | Method for assisting a driver of a motor vehicle, device and system | |
DE102020104535A1 (en) | Method for supporting an occupant when getting out of a vehicle, taking into account follow-up objects, computing device and driver assistance system | |
DE3304620A1 (en) | Device for maintaining a constant speed of travel for motor vehicles | |
DE102017206856A1 (en) | Equipment, vehicle and procedure | |
DE102017122543A1 (en) | A method for assisting a driver of a motor vehicle when overtaking an object and driver assistance system | |
DE102017223570B3 (en) | A method for enriching a cloud with acoustic vehicle environment data | |
WO2019137864A1 (en) | Method for preventing a critical situation for a motor vehicle, wherein a distance between a motor vehicle contour and an object contour is determined, driver assistance system and motor vehicle | |
DE112019003127T5 (en) | HEAD-UP DISPLAY DEVICE | |
EP2605039A1 (en) | Method for recognising objects in the vicinity of a vehicle |