DE112019005822T5 - Vorrichtung und verfahren zur bereitstellung einer situationserkennung unter verwendung von positionssensoren und virtueller akustischer modellierung - Google Patents

Vorrichtung und verfahren zur bereitstellung einer situationserkennung unter verwendung von positionssensoren und virtueller akustischer modellierung Download PDF

Info

Publication number
DE112019005822T5
DE112019005822T5 DE112019005822.3T DE112019005822T DE112019005822T5 DE 112019005822 T5 DE112019005822 T5 DE 112019005822T5 DE 112019005822 T DE112019005822 T DE 112019005822T DE 112019005822 T5 DE112019005822 T5 DE 112019005822T5
Authority
DE
Germany
Prior art keywords
detection system
sensors
situation detection
identification
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE112019005822.3T
Other languages
English (en)
Inventor
Perry Teevens
Robert J.E. Dalton Jr.
David E. Romblom
Peter G. Otto
Elliot M. Patros
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of DE112019005822T5 publication Critical patent/DE112019005822T5/de
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/26
    • B60K35/28
    • B60K35/60
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/02Spatial or constructional arrangements of loudspeakers
    • H04R5/023Spatial or constructional arrangements of loudspeakers in a chair, pillow
    • B60K2360/177
    • B60K2360/178
    • B60K2360/179
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2400/00Indexing codes relating to detected, measured or calculated conditions or factors
    • B60W2420/408
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54Audio sensitive means, e.g. ultrasound
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/22Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only 
    • H04R1/24Structural combinations of separate transducers or of two parts of the same transducer and responsive respectively to two or more frequency ranges
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/403Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2203/00Details of circuits for transducers, loudspeakers or microphones covered by H04R3/00 but not provided for in any of its subgroups
    • H04R2203/12Beamforming aspects for stereophonic sound reproduction with loudspeaker arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/13Acoustic transducers and sound field adaptation in vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H04R3/14Cross-over networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Stereophonic System (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)

Abstract

Ein Situationserkennungssystem ist bereitgestellt und beinhaltet Sensoren, die zur Erfassung eines Objekts und zur Erzeugung von Signalen des erfassten Objekts konfiguriert sind. Ein Identifizierungs- und Klassifizierungsmodul steht in Verbindung mit den Sensoren. Das Identifizierungs- und Klassifizierungsmodul ist zur Identifizierung des erfassten Objekts und zum Ermitteln der Position, Geschwindigkeit und Richtung jedes erfassten Objekts konfiguriert. Ein Klangsynthesemodul steht mit dem Identifizierungs- und Klassifizierungsmodul in Verbindung. Das Klangsynthesemodul ist so konfiguriert, dass es Klänge für das erfasste Objekt erzeugt und ist ferner so konfiguriert, dass es ein binaurales virtuelles akustisches Modell für das erfasste Objekt erzeugt. Das binaurale virtuelle akustische Modell wird verwendet, um das erfasste Objekt im virtuellen Raum an einer Position zu positionieren, die seiner Position im realen Raum entspricht. Ein oder mehrere Strahlformungsanordnungen stehen mit dem Klangsynthesemodul in Verbindung und sind für die Ausgabe von Klang konfiguriert. Der abgegebene Klang erhöht die Situationserkennung eines Fahrzeugführers.

Description

  • VERWANDTE ANMELDUNGEN
  • Diese Anmeldung beansprucht die Priorität der vorläufigen US-Patentanmeldung Nr. 62/770,352 , eingereicht am 21. November 2018, deren Offenbarungsgehalt hierin durch Bezugnahme in vollem Umfang aufgenommen ist.
  • HINTERGRUND
  • Ein Führer (Fahrer) eines Fahrzeugs ist einer Vielzahl von Stimuli ausgesetzt. Die Stimuli können aus dem Fahrzeuginneren stammen und die Stimuli können von außerhalb des Fahrzeugs stammen. Nicht einschränkende Beispiele für interne Stimuli beinhalten Musik aus einem Radio, Blinkergeräusche, Motorgeräusche, Stimmen, Knarr- und Quietschgeräusche und dergleichen. Nicht einschränkende Beispiele für externe Stimuli beinhalten Geräusche von anderen Fahrzeugen, Sirenen, Hupen und dergleichen. In bestimmten Fällen können die internen und externen Stimuli die Situationserkennung des Führers beeinflussen.
  • In bestimmten Fällen kann die Situationserkennung eines Fahrzeugführers durch das Hinzufügen von Stimuli zu Warnungen, Ereignissen, Objekten, Situationen und dergleichen verbessert werden, die vom Fahrzeugführer ansonsten möglicherweise nicht bemerkt werden. Als ein nicht einschränkendes Beispiel würde eine klangbasierte Warnung vor möglicher Eisbildung auf der Straße bei Nacht, die sonst schwer zu erkennen wäre, die Situationserkennung verbessern. Als weiteres, nicht einschränkendes Beispiel würde eine hörbare Benachrichtigung, dass eine rote Ampel grün geworden ist, die Situationserkennung verbessern.
  • In anderen Fällen kann die Situationserkennung eines Fahrzeugführers verbessert werden, indem die Wahrnehmbarkeit eines ablenkenden Stimulus abgeschwächt, aufgehoben oder reduziert wird. Als ein nicht einschränkendes Beispiel kann das Fahren über raue Oberflächen, wie beispielsweise Kies, Stein und dergleichen, Geräusche erzeugen, die für den Fahrzeugführer ablenkend sein können und auch die Fähigkeit des Fahrzeugführers zur Wahrnehmung wichtigerer Stimuli beeinträchtigen können.
  • In bestimmten Fällen kann die Situationserkennung eines Fahrzeugführers verbessert werden, indem der Klang natürlich auftretender Stimuli, die der Fahrzeugführer im Normalfall imstande ist wahrzunehmen oder auch nicht, verstärkt oder verändert wird. Als ein nicht einschränkendes Beispiel könnte eine Vielzahl von Geräuschen, die von einem Verbrennungsmotor ausgehen und darauf hinweisen, dass das Motoröl gewechselt werden muss, mit einer klangbasierten Warnung einhergehen, wodurch die Situationserkennung des Fahrzeugführers verbessert wird.
  • In anderen Fällen kann die Situationserkennung eines Fahrzeugführers verbessert werden, indem die Position verschiedener Arten oder Klassen von Stimuli in der virtuellen akustischen Szene eingestellt wird. Die Position der Stimuli kann automatisch oder manuell eingestellt werden. Als ein nicht einschränkendes Beispiel können Fahrhinweise automatisch in Richtung einer bevorstehenden Abbiegung des Fahrzeugs positioniert werden. Als weiteres nicht einschränkendes Beispiel kann ein audiobasiertes Telefongespräch in Richtung des Beifahrersitzes positioniert werden.
  • Vorteilhaft wäre es, wenn die Situationserkennung eines Fahrzeugführers verbessert werden könnte.
  • KURZDARSTELLUNG
  • Es wird darauf hingewiesen, dass diese Kurzdarstellung eine Auswahl von Konzepten in vereinfachter Form bereitstellt, wobei die Konzepte weiter unten in der ausführlichen Beschreibung näher beschrieben werden. Diese Kurzdarstellung soll weder Schlüsselmerkmale oder wesentliche Merkmale dieser Offenbarung identifizieren noch den Umfang der Vorrichtung und des Verfahrens zur Bereitstellung einer Situationserkennung unter Verwendung von Positionssensoren und virtueller akustischer Modellierung einschränken.
  • Die vorstehenden Ziele sowie andere nicht speziell aufgezählte Ziele werden durch ein Situationserkennungssystem erreicht, das konfiguriert ist, ein binaurales virtuelles akustisches Modell eines erfassten Objekts zu erzeugen. Das Situationserkennungssystem beinhaltet einen oder mehrere Sensoren, die konfiguriert sind, ein Objekt zu erfassen und Signale des erfassten Objekts zu erzeugen. Ein Identifizierungs- und Klassifizierungsmodul steht mit dem einen oder den mehreren Sensoren in Verbindung. Das Identifizierungs- und Klassifizierungsmodul ist konfiguriert, um das erfasste Objekt zu identifizieren, und ferner konfiguriert, um die Position, Geschwindigkeit und Richtung jedes erfassten Objekts zu ermitteln. Ein Klangsynthesemodul steht mit dem Identifizierungs- und Klassifizierungsmodul in Verbindung. Das Klangsynthesemodul ist so konfiguriert, dass es Klänge für das erfasste Objekt erzeugt und ist ferner so konfiguriert, dass es ein binaurales virtuelles akustisches Modell für das erfasste Objekt erzeugt. Das binaurale virtuelle akustische Modell wird verwendet, um das erfasste Objekt im virtuellen Raum an einer Position zu positionieren, die seiner Position im realen Raum entspricht. Ein oder mehrere Strahlformungsanordnungen stehen mit dem Klangsynthesemodul in Verbindung und sind für die Ausgabe von Klang konfiguriert. Der von der einen oder den mehreren Strahlformungsanordnungen abgegebene Klang erhöht die Situationserkennung eines Fahrzeugführers.
  • Die vorstehenden Ziele sowie andere nicht speziell aufgezählte Ziele werden auch durch ein Verfahren zum Betreiben eines Situationserkennungssystems erreicht. Das Verfahren beinhaltet die Schritte des Erfassens eines Objekts unter Verwendung eines oder mehrerer Sensoren, wobei der eine oder die mehreren Sensoren ein Erfassungssignal erzeugen, des Analysierens des Erfassungssignals zur Identifizierung des Objekts, des Ermittelns der Position, Geschwindigkeit und Richtung des Objekts, des Erzeugens eines oder mehrerer Klänge für das Objekt, des Sendens von Positionsinformationen für das Objekt an ein virtuelles akustisches Modell, des Positionierens des Objekts im virtuellen Raum an einer Position, die seiner Position im realen Raum entspricht, des Erzeugens von Signalen für die positionierten Objekte oder Schallquellen zur Übertragung an Strahlformungsanordnungen und des Übertragens der Signale an die Strahlformungsanordnungen.
  • Verschiedene Aufgaben und Vorteile der Vorrichtung und des Verfahrens zur Bereitstellung einer Situationserkennung unter Verwendung von Positionssensoren und virtueller akustischer Modellierung werden für Fachleute aus der folgenden ausführlichen Beschreibung ersichtlich, wenn sie im Lichte der begleitenden Zeichnungen gelesen wird.
  • Figurenliste
    • 1 ist eine Draufsicht auf ein Fahrzeug, das mit einem Situationserkennungssystem ausgestattet ist.
    • 2 ist eine Seitenansicht eines Fahrzeugs, das mit dem Situationserkennungssystem von 1 ausgestattet ist.
    • 3 ist eine schematische Ansicht der Elemente des Situationserkennungssystems von 1.
    • 4 ist eine perspektivische Ansicht eines Innenbereichs eines Fahrzeugs, die Teile des Situationserkennungssystems von 1 darstellt.
    • 5 ist ein Ablaufdiagramm, das den Betrieb des Situationserkennungssystems von 1 veranschaulicht.
    • 6 ist eine schematische Draufsicht auf einen Innenbereich eines Fahrzeugs, die eine Erweiterung von Strahlformungsanordnungen mit in Kopfstützen positionierten Lautsprechern veranschaulicht.
  • AUSFÜHRLICHE BESCHREIBUNG
  • Die Vorrichtung und das Verfahren zur Bereitstellung einer Situationserkennung unter Verwendung von Positionssensoren und virtueller akustischer Modellierung (im Folgenden „Situationserkennungssystem“) werden nun unter gelegentlicher Bezugnahme auf spezifische Ausführungsformen beschrieben. Das Situationserkennungssystem kann jedoch in unterschiedlichen Formen ausgeführt sein und sollte nicht als auf die hierin dargelegten Ausführungsformen beschränkt ausgelegt werden. Vielmehr werden diese Ausführungsformen bereitgestellt, damit die vorliegende Offenbarung möglichst umfassend und vollständig ist und Fachleuten auf dem Gebiet den Umfang des Situationserkennungssystems vollständig vermittelt.
  • Sofern nicht anders definiert, haben alle hierin verwendeten technischen und wissenschaftlichen Begriffe die gleiche Bedeutung, wie sie von einem Fachkundigen auf dem Gebiet, zu dem das Situationserkennungssystem gehört, allgemein verstanden wird. Die bei der Beschreibung des Situationserkennungssystems verwendete Terminologie dient hier lediglich zur Beschreibung bestimmter Ausführungsformen und soll das Situationserkennungssystem in keiner Weise einschränken. Wie in der Beschreibung des Situationserkennungssystems und den beigefügten Ansprüchen verwendet, sollen die Singularformen „ein(e)“ und „der/die/das“ ebenso die Pluralformen beinhalten, sofern aus dem Kontext nicht eindeutig etwas anderes hervorgeht.
  • Sofern nicht anders angegeben, sind alle Zahlen, die Größen von Abmessungen wie Länge, Breite, Höhe usw. ausdrücken, wie in der Beschreibung und den Ansprüchen verwendet, als in allen Fällen durch den Begriff „etwa“ modifiziert zu verstehen. Die in der Beschreibung und den Ansprüchen dargelegten numerischen Eigenschaften sind demnach, soweit nicht anders angegeben, Näherungswerte, die je nach den gewünschten Eigenschaften, die bei Ausführungsformen des Situationserkennungssystems erzielt werden sollen, variieren können. Obwohl es sich bei den numerischen Bereichen und Parametern, die den breiten Anwendungsbereich des Situationserkennungssystems beschreiben, um Näherungswerte handelt, werden die numerischen Werte in den spezifischen Beispielen so genau wie möglich angegeben. Alle numerischen Werte enthalten jedoch inhärent gewisse Fehler, die sich zwangsläufig aus Fehlern in den jeweiligen Messungen ergeben.
  • Die Beschreibung und die Figuren offenbaren ein Situationserkennungssystem zur Verwendung in einem Fahrzeug. Im Allgemeinen verwendet das Situationserkennungssystem Sensoren, um ein binaurales virtuelles akustisches Modell eines erfassten Objekts zu erzeugen. Das binaurale virtuelle akustische Modell lokalisiert das Objekt im virtuellen Raum an einer Position, der seiner Position im realen Raum entspricht. Das binaurale virtuelle akustische Modell wird an den Fahrer des Fahrzeugs übertragen, um eine verbesserte Situationserkennung bereitzustellen.
  • Der hierin verwendete Begriff „Situationserkennung“ ist definiert als die Wahrnehmung von Umweltelementen und Ereignissen bezüglich Zeit oder Raum. Der Begriff „Situationserkennung“ kann das Verständnis der Umweltelemente und -ereignisse beinhalten und kann ferner Prognosen über ihren zukünftigen Zustand beinhalten.
  • Eine binaurale virtuelle akustische Anzeige kann teilweise durch eine Vielzahl von Lautsprechern erzeugt werden, die zusammen mit der Absicht der Wiedergabe eines binauralen Audiosignals an den Ohren eines Fahrzeugführers konfiguriert sind. Die jeweilige Anordnung der Lautsprecher kann kontextabhängig und entsprechend dem Ziel ausgebildet sein, bestimmte Qualitäten des wiedergegebenen Audiosignals für den Fahrzeugführer und umstehenden Zuhörer zu verbessern. Nicht einschränkende Beispiele für ein solches Lautsprechersystem beinhalten ein Strahlformungssystem, beispielsweise eine Lautsprecheranordnung, sowie eine Mehrkanal-Konfiguration, beispielsweise ein Stereolautsprechersystem .
  • Ein aktives Geräuschunterdrückungssystem kann teilweise aus einem oder einer Vielzahl von Lautsprechern bestehen, die zusammen konfiguriert sind, um eine physische Schallquelle, die von innen, außen oder aus dem Fahrzeug stammt, zu dämpfen, zu modifizieren oder zu verstärken. Die jeweilige Anordnung der Lautsprecher kann kontextabhängig sein und entsprechend dem Ziel der Verbesserung bestimmter Qualitäten einer virtuellen akustischen Anzeige, einer allgemeinen akustischen Umgebung für den Fahrzeugführer und umstehende Zuhörer oder dem Ziel der Verbesserung der physischen akustischen Interaktionen zwischen einem Lautsprechersystem und dem Fahrzeug selbst ausgelegt sein. Nicht einschränkende Beispiele für ein solches Lautsprechersystem beinhalten ein Strahlformungssystem, beispielsweise eine Lautsprecheranordnung, eine Mehrkanal-Konfiguration, beispielsweise ein Stereolautsprechersystem, oder einzelne, eigenständige Lautsprecher.
  • Zu den physischen Komponenten eines Strahlformungs- oder Mehrkanalsystems (im Folgenden nur als Strahlformungssystem bezeichnet) gehört jedes Lautsprechersystem, das zur Erzeugung unterschiedlicher Audiosignale an den Ohren eines Zuhörers verwendet wird. Das Strahlformungssystem kann mit Sensoren ergänzt werden, um seine Fähigkeit zu verbessern, präzise Audiosignale an einen Zielhörer zu übertragen. Nicht einschränkende Beispiele beinhalten das Verfolgen der Position von Zielhörern, das Verfolgen physischer Merkmale im Fahrzeug sowie das Überwachen des akustischen Inhalts in der Umgebung. Die Softwarekomponenten eines Strahlformungssystems können Algorithmen zur Strahlformung oder Raumfiltergenerierung, Amplitudenschwenkung, Verzögerungsschwenkung und Software zum Interpretieren von Sensordaten beinhalten. Diese können entweder in Echtzeit generiert oder, z. B. mithilfe eines Kopfverfolgungssystems, interpoliert werden. Andere Ressourcen, die von einem Strahlformungssystem benötigt werden, können vorberechnete Strahlformung oder Raumfilter beinhalten. Raumfilter können eine physische kopfbezogene Übertragungsfunktionskompensation beinhalten, um den räumlichen Eindruck des binauralen Bildes zu verbessern.
  • Ein Strahlformungssystem kann die physischen akustischen Eigenschaften von Objekten im Schallfeld, einschließlich des Fahrzeugführers, von Merkmalen im Fahrzeug, wie Fenstern oder Sitzen, sowie von Modifikationen an den Lautsprechern selbst nutzen, die die Erzeugung gewünschter akustischer Antworten unterstützen. Beispielsweise kann ein Stereolautsprecherpaar in der Kopfstütze hinter den Ohren des Fahrers angeordnet sein, sodass sein Kopf zur akustischen Abschattung oder Ausbreitungsverzögerung beiträgt.
  • Die Interaktion zwischen zwei oder mehr unterschiedlichen Arten von Strahlformungssystemen kann zu einem verbesserten räumlichen Eindruck beitragen, was die Situationserkennung verbessern würde. So kann beispielsweise die Kombination einer strahlformenden Lautsprecheranordnung für höhere Frequenzen und eines Stereolautsprechersystems in der Kopfstütze für niedrigere Frequenzen für einen Fahrzeugführer einen realistischeren Raumeindruck erzeugen als eine Anordnung allein.
  • Eine binaurale virtuelle akustische Anzeige wird zum Teil durch eine oder mehrere Signalverarbeitungstechniken erzeugt, die verwendet werden, einem Audiosignal Lokalisierungshinweise zu geben, sodass, wenn sie in jedes Ohr eingespielt werden, der Eindruck von Direktionalität entsteht. Nicht einschränkende Beispiele für diese Verfahren beinhalten binaurale Mannequin-Aufnahmetechniken, binaurale Synthese aus Modellen oder aufgezeichneten Daten sowie die Filterung mit binauralen Filtern.
  • Das beschriebene Strahlformungssystem wird von dem Klangsynthesemodul insofern gesteuert, als es einen oder mehrere Audiokanäle als Eingang empfängt, einen sogenannten Mehrkanaleingang. Das Klangsynthesemodul kann von seinen Sensoren, der Software oder den Benutzern aufgefordert werden, mehrere Arten von Audio gleichzeitig zu übertragen. In verschiedenen Fällen kann einer oder mehrere dieser Beteiligten kein, einen Teil oder das gesamte Klangsynthesemodul steuern. So kann beispielsweise ein Benutzer in einigen Kontexten die Fähigkeit haben, die von der Software bereitgestellte Funktionalität zu übersteuern oder umgekehrt. Die Fähigkeit des Klangsynthesemoduls, Software zur Priorisierung von Aufgaben zu verwenden, die sich möglicherweise widersprüchlich auf die Situationserkennung eines Fahrzeugführers auswirken, kann von dem Kontext abhängen, und entsprechend dem Ziel der Verbesserung bestimmter Qualitäten des wiedergegebenen Audiosignals für den Fahrer oder umstehende Zuhörer ausgebildet sein. Nicht einschränkende Beispiele für Mehrkanaleingaben beinhalten Audiostreams von Mediengeräten, die von Fahrzeugführern und Passagieren mitgeführt werden, wie z. B. Telefone, sowie von Mediengeräten, die in das Fahrzeug eingebettet sind, einschließlich von Radio- oder Unterhaltungssystemen.
  • Unter jetziger Bezugnahme auf die Zeichnungen ist in den 1 und 2 eine schematische und vereinfachte Ansicht eines Fahrzeugs 10 dargestellt. In der dargestellten Ausführungsform ist das Fahrzeug 10 ein Kraftfahrzeug. In anderen Ausführungsformen kann das Fahrzeug 10 jedoch andere Formen haben, einschließlich der nicht einschränkenden Beispiele von Lastkraftwagen, Zügen, Booten, U-Bahnwagen, Straßenbahnen, Wagen und dergleichen.
  • Unter erneuter Bezugnahme auf 1 und 2 fährt das Fahrzeug 10 auf einer Fahrbahn 12. Die Fahrbahn 12 ist in der dargestellten Ausführungsform eine asphaltierte Straße. In alternativen Ausführungsformen kann die Fahrbahn 12 andere Formen haben, einschließlich der nicht einschränkenden Beispiele einer unbefestigten Straße, einer mit Schotter oder Kies bedeckten Straße, eines Schienenstrangs, eines Flusses und dergleichen.
  • Unter erneuter Bezugnahme auf die 1 und 2 beinhaltet das Fahrzeug 10 eine Vielzahl von Sensoren, die schematisch mit 14a-14e dargestellt sind. Die Sensoren 14a-14e sind zur Erfassung der Umgebung außerhalb des Fahrzeugs 10 konfiguriert. Die Sensoren 14a-14e sind auch zur Erfassung von Signalen konfiguriert, wenn äußere Umgebungsbedingungen und -faktoren erfasst werden. Die Sensoren 14a-14e können als einzelne Elemente oder als Anordnungen von zusammenwirkenden Elementen konfiguriert sein. Die Sensoren 14a-14e haben in der dargestellten Ausführungsform die Form von Radar, Lidar, Sonar und dergleichen. Die Sensoren 14a-14e können an einer beliebigen Stelle außerhalb des Fahrzeugs 10 positioniert werden. Es ist ferner denkbar, dass eine gewünschte Anzahl von Sensoren innerhalb des Fahrzeugs 10 positioniert werden kann.
  • Unter Bezugnahme auf die 2 und 3 beinhaltet das Fahrzeug 10 ferner ein Steuermodul 16. Das Steuermodul 16 beinhaltet ein Identifizierungs- und Klassifizierungsmodul 18 und ein Klangsynthesemodul 20. In bestimmten Ausführungsformen können das Identifizierungs- und Klassifizierungsmodul 18 und das Klangsynthesemodul 20 als softwarebasierte Elemente in das Steuermodul 16 aufgenommen werden. In anderen Ausführungsformen können das Identifizierungs- und Klassifizierungsmodul 18 und das Klangsynthesemodul 20 als diskrete physische Elemente in das Steuermodul 16 aufgenommen werden. In noch anderen Ausführungsformen können das Klassifizierungsmodul 18 und das Klangsynthesemodul 20 als eine Kombination von softwarebasierten Elementen und diskreten physischen Elementen in das Steuermodul 16 aufgenommen werden.
  • Unter Bezugnahme auf die 1-3 ist das Identifizierungs- und Klassifizierungsmodul 18 für mehrere Funktionen konfiguriert. Erstens ist das Identifizierungs- und Klassifizierungsmodul 18 so konfiguriert, dass es die von den Sensoren 14a-14e erzeugten Signale empfängt. Zweitens ist das Identifizierungs- und Klassifizierungsmodul 18 konfiguriert, die von den Sensoren 14a-14e empfangenen Rohsignale zu analysieren. Drittens ist das Identifizierungs- und Klassifizierungsmodul 18 konfiguriert, dass es anhand der von den Sensoren 14a-14e empfangenen Rohsignale ein Objekt 22 identifiziert, wie beispielsweise ein Fahrrad, das sich auf der Fahrbahn 12 befindet. Obwohl das Objekt 22 als Fahrrad identifiziert wird, kann in anderen Ausführungsformen das Identifizierungs- und Klassifizierungsmodul 18 konfiguriert sein, andere Objekte zu identifizieren, einschließlich der nicht einschränkenden Beispiele von Kraftfahrzeugen, Personen, Tieren und dergleichen. Schließlich ist das Identifizierungs- und Klassifizierungsmodul 18 konfiguriert, die Position, Geschwindigkeit und Richtung jedes identifizierten Objekts unter Verwendung der von den Sensoren 14a-14e empfangenen Rohsignale zu ermitteln.
  • Unter erneuter Bezugnahme auf die 1-3 ist das Klangsynthesemodul 20 konfiguriert, die Identifizierungsinformationen sowie die Position, Geschwindigkeit und Richtung jeder identifizierten Objektinformationen vom Identifizierungs- und Klassifizierungsmodul 18 zu empfangen. Anhand dieser Informationen ist das Klangsynthesemodul 20 ferner für mehrere Funktionen konfiguriert. Erstens ist das Klangsynthesemodul 20 konfiguriert, verschiedene Arten von Klängen für jedes Objekt 22 oder jede Schallquelle zu erzeugen. Zweitens wird anhand der Positionsdaten, der Klangklassifizierung und des synthetisierten Klangs für jedes Objekt oder jede Schallquelle ein binaurales virtuelles akustisches Modell erstellt und verwendet, um das Objekt oder die Schallquelle im virtuellen Raum an einer Position zu positionieren, die seiner Position im realen Raum entspricht. Drittens erzeugt das Klangsynthesemodul 20 Signale der positionierten Objekte oder Schallquellen zur Übertragung an die Strahlformungsanordnungen 24.
  • Unter nun erfolgender Bezugnahme auf 4 ist ein repräsentativer Innenbereich 26 eines Fahrzeugs dargestellt. Der Innenbereich 26 weist einen Fahrerbereich 28 und einen angrenzenden Beifahrerbereich 30 auf. Da die Ohren des Fahrers (nicht dargestellt) nicht verdeckt werden können, können keine Kopfhörer verwendet werden, um das von dem Klangsynthesemodul 20 erstellte virtuelle akustische Modell an den Fahrer zu übertragen. Stattdessen werden die Signale für das linke und das rechte Ohr, die das virtuelle akustische Modell bilden, unter Verwendung einer oder mehrerer Strahlformungsanordnungen 32a-32d einzeln an den Fahrer übertragen. Die Strahlformungsanordnungen 32a-32d können oberhalb, vor und/oder angrenzend an den Fahrer positioniert sein. Während die in 4 dargestellte und vorstehend beschriebene Ausführungsform getrennte und unterschiedliche Strahlformungsanordnungen 32a-32d beinhaltet, wird die Verwendung einer einzelnen Strahlformungsanordnung 36 in Betracht gezogen. Die einzelne Strahlformungsanordnung 36 kann an einer beliebigen Stelle positioniert werden.
  • Unter erneuter Bezugnahme auf 4 werden die binauralen Signale zur Verbesserung der Lokalisierung auf die individuellen anthropomorphen Merkmale des Fahrers personalisiert, die von einer im Innenbereich 26 des Fahrzeugs positionierten Erfassungskamera 34 extrahiert wurden. Vorteilhafterweise führen die personalisierten binauralen Signale zu einer verbesserten Kongruenz zwischen den Objekten 22 oder Schallquellen und den synthetisierten Klängen.
  • Unter erneuter Bezugnahme auf 4 wird die akustische Übertragungsfunktion zwischen den Strahlformungsanordnungen 32a-32d und den Ohren des Hörers (nicht dargestellt) entfernt, um eine hohe Wiedergabetreue und positionsgenaue Lokalisierung sicherzustellen. Diese Entfernung ist so konfiguriert, dass die Höhensignale, die der Position der Anordnungen 32a-32d entsprechen, abgeschwächt werden. Vielmehr ist es erwünscht, dass der Hörer (Fahrer) die durch das binaurale virtuelle akustische Modell synthetisierten Höhensignale wahrnimmt, die der Position der extern erfassten Objekte 22 entsprechen.
  • Unter Bezugnahme auf 5 wird die Arbeitsweise des Situationserkennungssystems kurz beschrieben. In einem ersten Schritt 40 werden die Objekte 22 durch einen oder mehrere der Sensoren 14a-14e erfasst. In einem zweiten Schritt 42 kommunizieren der eine oder die mehreren Sensoren 14a-14e mit dem Identifizierungs- und Klassifizierungsmodul 18. In einem nächsten Schritt 44 analysiert das Identifizierungs- und Klassifizierungsmodul 18 die von einem oder mehreren der Sensoren 14a-14e empfangenen Rohsignale, um das Objekt 22 zu identifizieren. Als nächstes ermittelt das Identifizierungs- und Klassifizierungsmodul 18 in Schritt 46 die Position, Geschwindigkeit und Richtung jedes identifizierten Objekts 22. In einem nächsten Schritt 48 kommuniziert das Identifizierungs- und Klassifizierungsmodul 18 mit dem Klangsynthesemodul 20. Als nächstes erzeugt das Klangsynthesemodul 20 in Schritt 50 verschiedene Arten von Klängen für jedes Objekt 22. In einem nächsten Schritt 52 werden Positionsinformationen an das virtuelle akustische Modell gesendet. In einem nächsten Schritt 54 wird ein binaurales virtuelles akustisches Modell verwendet, um das Objekt oder die Schallquelle im virtuellen Raum an einer Position zu positionieren, die seiner Position im realen Raum entspricht. Als nächstes werden in Schritt 56 Signale für die positionierten Objekte oder Schallquellen zur Übertragung an die Strahlformungsanordnungen 32a-32d erzeugt. In einem letzten Schritt 58 werden die Signale an die Strahlformungsanordnungen 32a-32d übertragen.
  • Unter nun erfolgender Bezugnahme auf 6 ist eine weitere Ausführungsform dargestellt. In dieser Ausführungsform beinhaltet ein Innenbereich 126 eines Fahrzeugs einen Fahrerbereich 128 und einen angrenzenden Beifahrerbereich 130. Der Innenbereich 126 beinhaltet ferner ein Fahrzeug-Armaturenbrett 160 mit einer Vielzahl von Strahlformungsanordnungen 132a-132c. In der dargestellten Ausführungsform sind die Strahlformungsanordnungen 132a-132c gleich oder ähnlich wie die in 4 dargestellten und vorstehend beschriebenen Strahlformungsanordnungen 32a-32d. In anderen Ausführungsformen können sich die Strahlformungsanordnungen 132a-132c jedoch von den Strahlformungsanordnungen 32a-32d unterscheiden.
  • Unter erneuter Bezugnahme auf 6 beinhaltet der Innenbereich 126 einen Fahrersitz, der schematisch bei 162 dargestellt ist, und einen Beifahrersitz, der schematisch bei 164 dargestellt ist. Der Fahrersitz 162 beinhaltet eine Fahrerkopfstütze 170 und der Beifahrersitz 164 beinhaltet eine Beifahrerkopfstütze 172, die beide wie in der Technik bekannt konfiguriert sind. Die Fahrerkopfstütze 170 beinhaltet eine Vielzahl von Lautsprechern 174a, 174b und die Beifahrerkopfstütze 172 beinhaltet eine Vielzahl von Lautsprechern 176a, 176b.
  • Unter erneuter Bezugnahme auf 6 sind die Strahlformungsanordnungen 132a-132c so konfiguriert, dass sie von der Vielzahl von Fahrerlautsprechern 174a, 174b, die hinter dem Kopf des Fahrers positioniert sind, ergänzt werden. In dieser Ausführungsform wird eine Frequenzweiche verwendet, um Hochfrequenzinhalte zu den Strahlformungsanordnungen 132a-132c und Tieffrequenzinhalte zu den Fahrlautsprechern 174a, 174b zu senden. Der Beifahrerbereich 130 kann in ähnlicher Weise mit einer Vielzahl von beifahrerseitigen Strahlformungsanordnungen (aus Gründen der Übersichtlichkeit nicht dargestellt) und den Beifahrerlautsprechern 176a, 176b konfiguriert werden. Während die Lautsprecher 174a, 174b, 176a, 176b als in den Kopfstützen 162, 164 positioniert dargestellt sind, ist es denkbar, dass die Lautsprecher 174a, 174b, 176a, 176b an anderen Stellen positioniert werden können, die geeignet sind, die Vielzahl von Strahlformungsanordnungen 132a-132c, wie hierin beschrieben, zu ergänzen.
  • Das Situationserkennungssystem stellt viele Vorteile bereit, obwohl nicht alle Vorteile in allen Ausführungsformen vorhanden sein müssen. Erstens ist das Situationserkennungssystem so konfiguriert, dass es eine aktive Geräuschunterdrückung aller internen oder externen Stimuli schützt. Zweitens ist das Situationserkennungssystem so konfiguriert, dass es die akustisch erweiterte Realität schützt, d. h., das Situationserkennungssystem ist so konfiguriert, dass es alle internen oder externen Stimuli binauralisiert, verstärkt, abschwächt und durch ein Klangsymbol ersetzt. Drittens beinhaltet das Situationserkennungssystem eine manuelle oder automatische Lokalisierung von Geräuschen nach Zweck oder Klasse, um die Anzahl der gleichzeitig zu verstehenden Stimuli zu erhöhen. Viertens kann der sich auf die Situationserkennung beziehende Inhalt auf Eingaben von Sensoren basieren oder nicht. In alternativen Ausführungsformen kann der Inhalt allgemeiner von jeder Stufe im Signalablaufdiagramm in 5 stammen. Beispielsweise kann das „Klangsynthesemodul“ jede Art von Inhalt ohne die Verwendung von Sensoren erzeugen. Fünftens können auch andere Quellen, einschließlich der nicht einschränkenden Beispiele von Geräten wie Radio, Telefon, Bordcomputer des Fahrzeugs, als Sensoren oder Quellen für Inhalte der Situationserkennung gelten, die einen beliebigen Teil des in 5 beschriebenen Signalablaufdiagramms beeinflussen oder steuern können. Sechstens können auch Benutzer, einschließlich des Fahrers und der Beifahrer, als Sensoren oder Quellen für Inhalte der Situationserkennung gelten, die einen beliebigen Teil des in 5 beschriebenen Signalablaufdiagramms beeinflussen oder steuern können. Schließlich kann jede Signalverarbeitungs- oder Audiotechnik, die die Fähigkeit des in 5 beschriebenen Signalablaufdiagramms zur Unterstützung der Situationserkennung erhöht, jeden beliebigen Teil des Systems beeinflussen oder steuern. Dies beinhaltet die nicht einschränkenden Beispiele von Höhensignalen, kopfbezogenen Übertragungsfunktionen (head-related transfer functions, HRTFs), anderen Teilen eines Strahlformungssystems, benutzerdefinierten HRTFs bezüglich der beabsichtigten Hörer und dergleichen.
  • Das Prinzip und die Arbeitsweise des Situationserkennungssystems wurden gemäß den Bestimmungen der Patentstatuten in bestimmten Ausführungsformen erläutert und dargestellt. Es sollte jedoch verstanden werden, dass das Situationserkennungssystem auch anders als spezifisch erklärt und illustriert praktiziert werden kann, ohne von seinem Geist oder Umfang abzuweichen.
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • US 62/770352 [0001]

Claims (14)

  1. Situationserkennungssystem, das zur Erzeugung eines binauralen virtuellen akustischen Modells eines erfassten Objekts konfiguriert ist, wobei das Situationserkennungssystem umfasst: einen oder mehrere Sensoren, konfiguriert zum Erfassen eines Objekts und zum Erzeugen von Signalen des erfassten Objekts; ein Identifizierungs- und Klassifizierungsmodul in Kommunikation mit dem einen oder den mehreren Sensoren, wobei das Identifizierungs- und Klassifizierungsmodul zur Identifizierung des erfassten Objekts und ferner zur Ermittlung der Position, Geschwindigkeit und Richtung jedes erfassten Objekts konfiguriert ist; ein Klangsynthesemodul in Kommunikation mit dem Identifizierungs- und Klassifizierungsmodul, wobei das Klangsynthesemodul zur Erzeugung von Klängen für das erfasste Objekt und ferner zur Erzeugung eines binauralen virtuellen akustischen Modells für das erfasste Objekt konfiguriert ist, wobei das binaurale virtuelle akustische Modell zur Positionierung des erfassten Objekts im virtuellen Raum an einer Position entsprechend seiner Position im realen Raum verwendet wird; und eine oder mehrere Strahlformungsanordnungen, die mit dem Klangsynthesemodul kommunizieren und für die Übertragung von Klängen konfiguriert sind; wobei der von der einen oder den mehreren Strahlformungsanordnungen übertragene Klang die Situationserkennung eines Fahrzeugführers erhöht.
  2. Situationserkennungssystem nach Anspruch 1, wobei die eine oder die mehreren Strahlformungsanordnungen ein Netzwerk von Lautsprechersystemen beinhalten, einschließlich Einkanal- und Mehrkanal-Lautsprechersystemen.
  3. Situationserkennungssystem nach Anspruch 1, wobei das Identifizierungs- und Klassifizierungsmodul und das Klangsynthesemodul softwarebasierte Elemente sind.
  4. Situationserkennungssystem nach Anspruch 1, wobei das Identifizierungs- und Klassifizierungsmodul und das Klangsynthesemodul als eine Kombination aus softwarebasierten Elementen und diskreten physischen Elementen ausgebildet sind.
  5. Situationserkennungssystem nach Anspruch 1, wobei der eine oder die mehreren Sensoren an einem Fahrzeug positioniert sind und sich das erfasste Objekt auf einer Fahrbahn befindet.
  6. Situationserkennungssystem nach Anspruch 1, wobei der eine oder die mehreren Sensoren die Form eines Radars haben.
  7. Situationserkennungssystem nach Anspruch 1, wobei die eine oder die mehreren Strahlformungsanordnungen oberhalb, vor und/oder angrenzend an den Fahrzeugführer positioniert sind.
  8. Situationserkennungssystem nach Anspruch 1, wobei die eine oder die mehreren Strahlformungsanordnungen in einem Armaturenbrett eines Fahrzeugs positioniert sind.
  9. Situationserkennungssystem nach Anspruch 1, wobei eine vorhandene Erfassungskamera verwendet wird, um binaurale Signale auf die individuellen anthropomorphen Merkmale des Fahrzeugführers zu personalisieren.
  10. Situationserkennungssystem nach Anspruch 1, wobei die eine oder die mehreren Strahlformungsanordnungen in einer Kopfstütze eines Fahrzeugsitzes angeordnet sind.
  11. Verfahren zum Betreiben eines Situationserkennungssystems, umfassend die Schritte: Erfassen eines Objekts unter Verwendung eines oder mehrerer Sensoren, wobei der eine oder die mehreren Sensoren ein Erfassungssignal erzeugen; Analysieren des Erfassungssignals zur Identifizierung des Objekts; Ermitteln der Position, Geschwindigkeit und Richtung des Objekts; Erzeugen eines oder mehrerer Klänge für das Objekt; Senden von Positionsinformationen für das Objekt an ein virtuelles akustisches Modell, Positionieren des Objekts im virtuellen Raum an einer Position, die seiner Position im realen Raum entspricht; Erzeugen von Signalen für die positionierten Objekte oder Schallquellen zur Übertragung an Strahlformungsanordnungen; und Übertragen der Signale an die Strahlformungsanordnungen.
  12. Verfahren nach Anspruch 11, wobei ein Identifizierungs- und Klassifizierungsmodul zur Ermittlung der Position, Geschwindigkeit und Richtung des Objekts verwendet wird.
  13. Verfahren nach Anspruch 11, wobei ein Klangsynthesemodul zur Kommunikation der Identität, Position, Geschwindigkeit und Richtung des Objekts verwendet wird.
  14. Verfahren nach Anspruch 11, wobei ein virtuelles akustisches Modell zur Positionierung des Objekts im virtuellen Raum an einer Position verwendet wird, die seiner Position im realen Raum entspricht.
DE112019005822.3T 2018-11-21 2019-11-20 Vorrichtung und verfahren zur bereitstellung einer situationserkennung unter verwendung von positionssensoren und virtueller akustischer modellierung Pending DE112019005822T5 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862770352P 2018-11-21 2018-11-21
US62/770,352 2018-11-21
PCT/US2019/062378 WO2020106818A1 (en) 2018-11-21 2019-11-20 Apparatus and method to provide situational awareness using positional sensors and virtual acoustic modeling

Publications (1)

Publication Number Publication Date
DE112019005822T5 true DE112019005822T5 (de) 2021-09-09

Family

ID=70774224

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112019005822.3T Pending DE112019005822T5 (de) 2018-11-21 2019-11-20 Vorrichtung und verfahren zur bereitstellung einer situationserkennung unter verwendung von positionssensoren und virtueller akustischer modellierung

Country Status (4)

Country Link
US (1) US20220014865A1 (de)
CN (1) CN113039509A (de)
DE (1) DE112019005822T5 (de)
WO (1) WO2020106818A1 (de)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220258755A1 (en) * 2021-02-16 2022-08-18 Toyota Research Institute, Inc. Directional stimuli to enhance vehicle operator situational awareness

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6996244B1 (en) * 1998-08-06 2006-02-07 Vulcan Patents Llc Estimation of head-related transfer functions for spatial sound representative
US7424127B1 (en) * 2000-03-21 2008-09-09 Bose Corporation Headrest surround channel electroacoustical transducing
FR2842064B1 (fr) * 2002-07-02 2004-12-03 Thales Sa Systeme de spatialisation de sources sonores a performances ameliorees
US8250102B2 (en) * 2008-03-14 2012-08-21 Microsoft Corporation Remote storage and management of binary object data
JP5354514B2 (ja) * 2008-03-31 2013-11-27 現代自動車株式会社 脇見運転検出警報システム
JP5483535B2 (ja) * 2009-08-04 2014-05-07 アイシン精機株式会社 車両周辺認知支援装置
US9578440B2 (en) * 2010-11-15 2017-02-21 The Regents Of The University Of California Method for controlling a speaker array to provide spatialized, localized, and binaural virtual surround sound

Also Published As

Publication number Publication date
US20220014865A1 (en) 2022-01-13
WO2020106818A8 (en) 2021-06-17
CN113039509A (zh) 2021-06-25
WO2020106818A1 (en) 2020-05-28

Similar Documents

Publication Publication Date Title
DE112015006772T5 (de) System und Verfahren für Geräuschrichtungsdetektion in einem Fahrzeug
DE102012208825A1 (de) 3d-audiogerät
WO2017137235A2 (de) Sitzplatzoptimierte entertainmentwiedergabe für autonomes fahren
WO2012159946A1 (de) Tonwiedergabevorrichtung mit hörszenariosimulation
DE102010009888A1 (de) Kommunikationsverbesserung in Fahrzeugen
WO2009013143A1 (de) Verfahren zur information eines beobachters über ein im einsatz befindliches einsatzfahrzeug und anordnung dazu
DE102018209962A1 (de) Privataudiosystem für ein 3D-artiges Hörerlebnis bei Fahrzeuginsassen und ein Verfahren zu dessen Erzeugung
DE102014226026A1 (de) Fahrassistenzsystem zur Erfassung eines Ereignisses im Umfeld außerhalb eines Fahrzeugs
DE102012218482A1 (de) Verfahren und Vorrichtung zum Betreiben eines Fahrerassistenzsystems eines Fahrzeugs
DE102014210105A1 (de) Zonenbasierte Tonwiedergabe in einem Fahrzeug
DE102014217500A1 (de) Verfahren und Vorrichtung zum Diagnostizieren von Zuständen eines Fahrzeugs
WO2018172231A1 (de) Verfahren und vorrichtung zum unterhalten eines nutzers eines fahrzeugs
DE102013226040A1 (de) Warneinrichtung und Verfahren zum Warnen eines Kraftfahrzeugführers
DE102018221120A1 (de) Fahrzeug und Verfahren zum Steuern desselben
DE112013005207T5 (de) Fahrunterstützungsvorrichtung und Fahrunterstützungssystem
DE102017100628A1 (de) System und Verfahren zum Bereitstellen einer personenbezogenen Audiowiedergabe
DE102012016820A1 (de) Fahrerassistenzsystem und Betriebsverfahren dafür
DE112019005822T5 (de) Vorrichtung und verfahren zur bereitstellung einer situationserkennung unter verwendung von positionssensoren und virtueller akustischer modellierung
WO2020007405A1 (de) Audioeinrichtung für ein fahrzeug und verfahren zum betrieb einer audioeinrichtung für ein fahrzeug
DE102015015130A1 (de) Verfahren zum Betreiben eines Kraftfahrzeugs und Kraftfahrzeug
DE102014210606A1 (de) Individuelle Hörkurveneinstellung
WO2023016924A1 (de) Verfahren und system zum erzeugen von geräuschen in einem innenraum basierend auf extrahierten und klassifizierten realen geräuschquellen und für spezifische zielgeräusche akustisch transparentes fahrzeug umfassend ein derartiges system
DE102017102234A1 (de) Verfahren und Vorrichtung zur räumlichen Darstellung virtueller Geräuschquellen in einem Fahrzeug
DE102021130908A1 (de) Audio-Verarbeitungsverfahren und -system für ein Sitzkopfstützen-Audiosystem
DE102017122116A1 (de) Fahrzeugverwendung der mikrofone von smarten tragbaren vorrichtungen eines benutzers

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R409 Internal rectification of the legal status completed
R016 Response to examination communication