DE102017213256A1 - Method, device, mobile user device, computer program for controlling an audio system of a vehicle - Google Patents

Method, device, mobile user device, computer program for controlling an audio system of a vehicle Download PDF

Info

Publication number
DE102017213256A1
DE102017213256A1 DE102017213256.6A DE102017213256A DE102017213256A1 DE 102017213256 A1 DE102017213256 A1 DE 102017213256A1 DE 102017213256 A DE102017213256 A DE 102017213256A DE 102017213256 A1 DE102017213256 A1 DE 102017213256A1
Authority
DE
Germany
Prior art keywords
vehicle
audio signal
voice
speaker
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102017213256.6A
Other languages
German (de)
Inventor
Alexander Augst
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Priority to DE102017213256.6A priority Critical patent/DE102017213256A1/en
Publication of DE102017213256A1 publication Critical patent/DE102017213256A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G3/00Gain control in amplifiers or frequency changers without distortion of the input signal
    • H03G3/20Automatic control
    • H03G3/30Automatic control in amplifiers having semiconductor devices
    • H03G3/32Automatic control in amplifiers having semiconductor devices the control being dependent upon ambient noise level or sound level
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G3/00Gain control in amplifiers or frequency changers without distortion of the input signal
    • H03G3/20Automatic control
    • H03G3/30Automatic control in amplifiers having semiconductor devices
    • H03G3/34Muting amplifier when no signal is present or when only weak signals are present, or caused by the presence of noise signals, e.g. squelch systems
    • H03G3/342Muting when some special characteristic of the signal is sensed which distinguishes it from noise, e.g. using speech detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4398Processing of audio elementary streams involving reformatting operations of audio signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/13Acoustic transducers and sound field adaptation in vehicles

Abstract

Bei einem Verfahren zur Steuerung eines Audiosystems eines Fahrzeugs erfolgt ein Ermitteln insbesondere Prädizieren, eines Parameters einer auditiven Kommunikation im Innenraum eines Fahrzeugs, und ein Verändern zumindest eines Parameters eines Audiosignals des Audiosystems des Fahrzeugs abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation.

Figure DE102017213256A1_0000
In a method for controlling an audio system of a vehicle, a determination is made, in particular, of prediction of a parameter of an auditive communication in the interior of a vehicle, and a change of at least one parameter of an audio signal of the audio system of the vehicle depending on the determined, in particular predicated parameter of the auditory communication.
Figure DE102017213256A1_0000

Description

Die Erfindung betrifft ein Verfahren, eine Vorrichtung, ein mobiles Anwendergerät und ein korrespondierendes Computerprogramm zur Steuerung eines Audiosystems eines Fahrzeugs.The invention relates to a method, a device, a mobile user device and a corresponding computer program for controlling an audio system of a vehicle.

Moderne Fahrzeuge können auf eine Vielzahl unterschiedlicher Audioquellen zugreifen, die über ein Audiosystem des Fahrzeugs im Innenraum des Fahrzeugs abgespielt werden können. Die Audioquellen umfassen dabei z.B. einen Radioempfänger, Musik oder Hörbücher von einem in dem Fahrzeug fest eingebauten Speicher (z.B. einer Festplatte) oder von einem in dem Fahrzeug mitgeführten Endgerät. Dazu zählt auch Zugriff bzw. Wiedergabe von Streaming-Inhalten, z.B. eines Unterhaltungsprogramms aus dem Internet. Ebenso kann beispielsweise ein Sound zu einem Video, eine Fernsehsendung, einem Videospiel, eine Videosimulation, z.B. über ein sog. Rear-Seat-Entertainment-System, ausgegeben werden. Ferner sind Audiosysteme für Fahrzeuge bekannt, die mit einer zunehmenden Fahrzeuggeschwindigkeit während der Fahrt die Lautstärke eines Multimediaprogramms anpassen.Modern vehicles can access a variety of different audio sources that can be played through an audio system of the vehicle in the interior of the vehicle. The audio sources include e.g. a radio receiver, music or audiobooks from a memory (e.g., a hard disk) fixed in the vehicle or from a terminal carried in the vehicle. This includes access or playback of streaming content, e.g. an entertainment program from the internet. Likewise, for example, a sound may be added to a video, a television program, a video game, a video simulation, e.g. via a so-called rear-seat entertainment system. Furthermore, audio systems for vehicles are known, which adjust the volume of a multimedia program with an increasing vehicle speed while driving.

Über ein Audiosystem des Fahrzeugs wird auch zunehmend ein künstlich erzeugtes Motorgeräusch ausgegeben. Ein solches Motorgeräusch kann Bestandteil eines bestimmten Sound-Designs sein. Bei elektromotorisch betriebenen Fahrzeugen dient das künstlich erzeugte Motorgeräusch z.B. dazu, das vertraute Gefühl von Verbrennungsmotoren für den Fahrer zu erzeugen.An audio system of the vehicle is also increasingly an artificially generated engine noise output. Such engine noise can be part of a particular sound design. In electric motor vehicles, the artificially generated engine noise is e.g. to create the familiar feeling of internal combustion engines for the driver.

Darüber hinaus, besteht typischerweise ein Bedürfnis oder Notwenigkeit der Insassen des Fahrzeugs untereinander zu kommunizieren. Eine solche, insbesondere sprachliche Kommunikation kann für den Nutzer des Fahrzeugs oftmals eine sehr hohe Relevanz haben. Die Möglichkeit der Insassen untereinander möglichst ungestört zu kommunizieren kann für die Nutzer des Fahrzeugs zeitweise viel wichtiger sein, als die technischen Parameter des Fahrzeugs, wie Motorleistung, Fertigungsqualität, das Fahrzeugdesign oder die Fahrzeugmarke. Eine Kommunikation der Insassen wird dennoch sehr häufig durch eine Vielzahl der im Fahrzeug ausgegebenen Audiosignalen gestört. Daher besteht ein Widerspruch zwischen dem Wunsch der Insassen bestimmte Audiosignale zu hören und bei der Fahrt ungestört zu sprechen. Auch können die Insassen des Fahrzeugs, z.B. Mitglieder einer Familie sehr unterschiedliche, teils widersprüchliche Bedürfnisse, z.B. hinsichtlich der aktiven sprachlichen Kommunikation oder hinsichtlich dem Zuhören zu anderen Insassen oder dem Zuhören zu bestimmten Audiosignalen haben.In addition, there is typically a need or necessity for the occupants of the vehicle to communicate with one another. Such, in particular linguistic communication can often have a very high relevance for the user of the vehicle. The ability of the occupants to communicate with each other as undisturbed as possible may be much more important for the users of the vehicle at times than the technical parameters of the vehicle, such as engine power, manufacturing quality, the vehicle design or the vehicle brand. Nevertheless, a communication of the occupants is very often disturbed by a large number of the audio signals output in the vehicle. Therefore, there is a contradiction between the desire of the occupants to hear certain audio signals and to speak undisturbed while driving. Also, the occupants of the vehicle, e.g. Members of a family have very different, partly conflicting needs, e.g. in terms of active linguistic communication or listening to other inmates or listening to particular audio signals.

Die Aufgabe, die der Erfindung zugrunde liegt, ist ein Verfahren, eine Vorrichtung, ein mobiles Anwendergerät und ein korrespondierendes Computerprogramm zu einer verbesserten Steuerung eines Audiosystems des Fahrzeugs aufzuzeigen. Insbesondere wird dabei zumindest ein auszugebendes Audiosignals derart angepasst, dass sich funktionale Verbesserung bzw. eine funktionale Mehrung ergibt.The object on which the invention is based is to disclose a method, a device, a mobile user device and a corresponding computer program for improved control of an audio system of the vehicle. In particular, at least one audio signal to be output is adapted in such a way that functional improvement or a functional increase results.

Die Aufgabe wird gelöst durch die Merkmale der unabhängigen Patentansprüche. Vorteilhafte Ausgestaltungen sind in den Unteransprüchen gekennzeichnet.The object is solved by the features of the independent claims. Advantageous embodiments are characterized in the subclaims.

Die Erfindung zeichnet sich gemäß eines ersten Aspekts durch ein Verfahren zur Steuerung eines Audiosystems eines Fahrzeugs, umfassend ein Ermitteln insbesondere Prädizieren, eines Parameters einer auditiven Kommunikation im Innenraum eines Fahrzeugs, und ein Verändern zumindest eines Parameters eines Audiosignals des Audiosystems des Fahrzeugs abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation.According to a first aspect, the invention is characterized by a method for controlling an audio system of a vehicle, comprising determining in particular predicting a parameter of an auditive communication in the interior of a vehicle, and changing at least one parameter of an audio signal of the audio system of the vehicle depending on the determined , in particular predicated parameters of auditory communication.

In einem vereinfachten Beispiel wird im Verfahren, wenn erkannt wird, dass beispielsweise der Beifahrer anfängt zu sprechen oder vorhat zu sprechen, das auszugebende, insbesondere das gerade ausgegebene, Audiosignal passend verändert. Bevorzugt erfolgt die Veränderung nur bzw. vorwiegend betreffend das passende Zeitintervall.In a simplified example, in the method, when it is detected that, for example, the passenger is beginning to speak or intend to speak, the audio signal to be output, especially the audio currently being output, is suitably changed. The change preferably takes place only or predominantly with regard to the appropriate time interval.

Somit wird mittels des Verfahrens das Audiosignal derart verändert, dass das (veränderte) Audiosignal und/oder der Insasse, zumindest die sprachliche Botschaft des Insassen besser gehört bzw. verstanden werden kann.Thus, by means of the method, the audio signal is changed in such a way that the (modified) audio signal and / or the occupant, or at least the linguistic message of the occupant, can be better heard or understood.

Das Verfahren kann zur Erreichung bestimmter Ziele eingerichtet sein. Solche Ziele bzw. die daraus resultierende Vorteile können insbesondere sein:

  • - Ein Sprecher (Fahrer, Beifahrer, Person auf dem Rücksitz), muss ein laufendes Audioprogramm nicht übertönen um hinreichend gehört bzw. verstanden zu werden.
  • - Ein Zuhörer muss sich weniger anstrengen.
  • - Der Sprecher und der Zuhörer müssen nicht auf das Audioprogramm verzichten um eine Konversation zu führen. Das Audioprogramm kann weiter gehört werden.
  • - Auch dringende Mitteilungen können selbst bei sehr lauter Musik zuverlässig kommuniziert werden.
The method can be set up to achieve specific goals. Such goals and the resulting advantages may be in particular:
  • - A speaker (driver, passenger, person in the back seat), must not drown out a running audio program to be heard or understood sufficiently.
  • - A listener has to make less effort.
  • - The speaker and the listener do not have to give up the audio program to have a conversation. The audio program can still be heard.
  • - Even urgent messages can be reliably communicated even with very loud music.

Das auszugebende Audiosignal kann beispielsweise bereits als ein Stereosignal, bevorzugt ein mehrkanaliges Signal, oder als ein, z.B. kodiertes, Raumklangsignal von einer Audioquelle, z.B. als ein Datenstrom bzw. entsprechende Datenpakete vorliegen. Das auszugebende Audiosignal kann z.B. in einem der aus Heimkino-Anwendungen bekannten Raumklangformate vorliegen. Bevorzugt kann ein dem Audiosignal entsprechendes Raumklangsignal, z.B. aus den Daten oder Datenpaketen einer Audioquelle, entsprechend den nachstehend beschriebenen Merkmalen der Erfindung ermittelt, verstärkt und im Innenraum des Fahrzeugs, ausgegeben werden.The output audio signal, for example, already as a stereo signal, preferably a multi-channel signal, or as a, for example coded, surround sound signal from an audio source, for example as a data stream or corresponding data packets are present. The audio signal to be output can be present, for example, in one of the surround sound formats known from home theater applications. Preferably, a room sound signal corresponding to the audio signal, for example from the data or data packets of an audio source, can be determined in accordance with the features of the invention described below, amplified and output in the interior of the vehicle.

In einem vereinfachten Beispiel kann das Verändern des Parameters des Audiosignals ein Verändern einer Lautstärke oder einer Lautstärke eines der mehrerer bestimmter Lautsprecher des Audiosystems des Fahrzeugs sein. Weitere Varianten werden in der weiteren Beschreibung aufgezeigt.In a simplified example, changing the parameter of the audio signal may be changing a volume or volume of one of a plurality of particular speakers of the vehicle's audio system. Further variants are shown in the further description.

Das Verändern, insbesondere Anpassen des auszugebenden Audiosignals kann bereits während seiner Erzeugung, z.B. beim Ermitteln der das Audiosignal repräsentierender Datenabschnitte bzw. des Datenstroms erfolgen. Das Verändern, insbesondere Anpassen des im Innenraum des Fahrzeugs auszugebenden Audiosignals kann mittels einer unmittelbaren oder mittelbaren Ansteuerung des Audiosystems des Fahrzeugs bzw. einer im Fahrzeug mitgeführten Recheneinheit, die das Audiosignal erzeugt, verarbeitet oder ausgibt, erfolgen.The modification, in particular adaptation of the audio signal to be output, can already take place during its generation, e.g. when determining the audio signal representing data sections or the data stream done. The modification, in particular adaptation of the audio signal to be output in the interior of the vehicle, can take place by means of a direct or indirect activation of the audio system of the vehicle or of a computer unit carried in the vehicle which generates, processes or outputs the audio signal.

Beispielsweise kann ein Verändern, insbesondere Anpassen zumindest eines Parameters des im Innenraum auszugebenden Audiosignals, durch Ansteuern eines im Innenraum des Fahrzeugs mitgeführten Audiosystems abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation erfolgen, wobei die Steuerungssignale zum Ansteuern des Audiosystems, insbesondere zumindest teilweise mit Mitteln eines Bordcomputers des Fahrzeugs oder eines im Fahrzeug mitgeführten mobilen Anwendergeräts erfolgen.For example, a modification, in particular adaptation of at least one parameter of the audio signal to be output in the interior, can be effected by driving an audio system carried in the interior of the vehicle depending on the determined, in particular predicated parameter of the auditory communication, the control signals for controlling the audio system, in particular at least partially Means of an on-board computer of the vehicle or carried in the vehicle mobile user device done.

Das Ermitteln insbesondere Prädizieren, des Parameters einer auditiven Kommunikation kann beispielsweise mit Mitteln des Fahrzeugs, z.B. Mikrophonen einer Freisprecheinrichtung, z.B. der ins Fahrzeug integrierter Freisprecheinrichtung oder einer weiteren Sensorik im Innenraum des Fahrzeugs, beispielsweise einer Innenraumkamera, erfolgen.Determining, in particular, predicting the parameter of an auditory communication can be done, for example, by means of the vehicle, e.g. Microphones of a handsfree, e.g. the integrated into the vehicle handsfree or another sensor in the interior of the vehicle, such as an interior camera done.

Insbesondere kann ein Parameter kennzeichnend den Anfang und/oder Ende der Sprachmitteilung, Verlauf der Laustärke, Tonlage, etc., ermittelt werden.In particular, a parameter characterizing the beginning and / or end of the voice message, the course of the volume, pitch, etc., can be determined.

Bei der auditiven Kommunikation kann es sich um ein Gespräch im Innenraum des Fahrzeugs (ein Monolog, ein Dialog oder ein multidirektionales Gespräch, quasi ein „Multilog“, zwischen mehreren Personen im Fahrzeug) handeln.Auditory communication can be a conversation inside the vehicle (a monologue, a dialogue or a multi-directional conversation, a kind of "multi-log", between several people in the vehicle).

Insbesondere umfasst zumindest ein Abschnitt der besagten auditiven Kommunikation eine sprachliche Botschaft, oder die zur Kommunikation bestimmter Laute eines Insassen im Innenraum des Fahrzeugs. Dabei kann es sich auch um ein Monolog handeln, wobei sich insbesondere zumindest ein potentieller Zuhörer im Fahrzeug befindet.In particular, at least a portion of said auditory communication comprises a linguistic message, or the sounds intended for communication of an occupant in the interior of the vehicle. This can also be a monologue, with at least one potential listener in particular being in the vehicle.

Bevorzugt kann das Verfahren umfassen: Erkennen, dass sich zumindest zwei Insassen im Fahrzeug befinden, insbesondere Ermitteln der Anzahl von Insassen im Innenraum des Fahrzeugs und eine Berücksichtigung der erkannten Information im Verfahren. Dabei kann beispielsweise bei einer Erkennung einer menschlichen Sprache und wenn sich zumindest zwei Insassen im Innenraum des Fahrzeugs befinden, andere Veränderung des Parameters eines im Innenraum auszugebenden Audiosignals erfolgen, im Vergleich zu dem Fall, bei dem erkannt wird, dass sich lediglich ein Insasse (z.B. nur der Fahrer bzw. Fahrerin) im Innenraum befindet.The method may preferably include: detecting that at least two occupants are in the vehicle, in particular determining the number of occupants in the interior of the vehicle and taking into account the detected information in the method. In this case, for example, in a recognition of a human language and if there are at least two occupants in the interior of the vehicle, other change in the parameter of a be issued in the interior audio signal, as compared to the case in which it is recognized that only one occupant (eg only the driver) is located in the interior.

Das Audiosignal kann in dieser Erfindung folgendes sein:

  • - Bevorzugt ein über ein Multimediasystem des Fahrzeugs abgespielter Multimediainhalt, z.B. Musik, Video, Radiosendung, Videospiel, Simulation, etc., hierzu gehört auch ein sogenanntes Rear-Seat-Entertainment-System.
  • - Ein Teil eines Sound-Designs des Fahrzeugs und/oder eines künstlich erzeugten Motorgeräuschs bzw. Fahrgeräuschs, wie dieses beispielsweise bei Elektrofahrzeugen vorgesehen werden kann.
The audio signal in this invention may be:
  • Preferably a multimedia content played via a multimedia system of the vehicle, eg music, video, radio program, video game, simulation, etc., this also includes a so-called rear-seat entertainment system.
  • - A part of a sound design of the vehicle and / or an artificially generated engine noise or driving noise, as this can be provided for example in electric vehicles.

Insbesondere kann ein Audiosignal ein künstlich erzeugtes, z.B. synthetisiertes Motorgeräusch bzw. ein künstlich erzeugtes Fahrgeräusch sein. Ein solcher Motorgeräusch bzw. ein künstlich erzeugtes Fahrgeräusch können zusätzlich oder abhängig von dem eigentlichen, physikalischen Motorgeräusch für den Innenraum des Fahrzeugs erzeugt und (ebenfalls) mit dem Audiosystem des Fahrzeugs ausgegeben werden. Dieser kann im Audiosystem des Fahrzeugs mit einem oder mehreren weiteren Audiosignalen kombiniert, insbesondere gemischt, insbesondere als eine oder mehrere virtuelle (für einen Insassen in einer bestimmten Position, Entfernung, Richtung wahrnehmbare) Klangquellen platziert werden.In particular, an audio signal may be an artificially generated, e.g. be synthesized engine noise or an artificially generated driving noise. Such engine noise or artificially generated driving noise may be generated in addition to or dependent upon the actual physical engine noise for the interior of the vehicle and (also) output with the vehicle's audio system. This can be combined in the audio system of the vehicle with one or more further audio signals, in particular mixed, in particular as one or more virtual (for an occupant in a particular position, distance, direction noticeable) sound sources are placed.

Ein künstlich erzeugtes Motorgeräusch bzw. Fahrgeräusch kann im Verfahren abhängig von einer real erzeugten bzw. abgegebenen Leistung des Antriebs des Fahrzeugs und/oder abhängig von einer durch den Fahrer vom Fahrzeugantrieb abgerufener Leistung (beispielsweise noch bevor die entsprechende Leistung tatsächlich vorliegt) erfolgen. Dabei kann im Verfahren für die Insassen, insbesondere für den Fahrer ein von ihm gewünschtes Fahrgefühl mit einer subjektiv verbesserten Fahrdynamik vermittelt werden. Ein entsprechendes auszugebendes Audiosignal kann erfindungsgemäß derart erzeugt bzw. gesteuert werden, dass ein Übermitteln eine sprachliche Kommunikation nicht oder lediglich geringfügig beeinträchtigt wird. Dadurch ergibt sich eine wesentliche gestalterische Freiheit zur Umsetzung eines solchen Motorgeräusche bzw. Fahrgeräuschs.An artificially generated engine noise or driving noise may in the process depending on a real generated or delivered power of the drive of the vehicle and / or depending on a retrieved by the driver from the vehicle drive power (for example, even before the corresponding power is actually present) take place. In this case, in the process for the occupants, in particular for the driver, a desired driving feeling with him a subjectively improved driving dynamics are taught. A corresponding audio signal to be output according to the invention can be generated or controlled in such a way that a transmission of a linguistic communication is not or only slightly impaired. This results in an essential creative freedom for implementing such engine noise or road noise.

Der ermittelte, insbesondere prädizierte Parameter der auditiven Kommunikation ist insbesondere ein akustischer Parameter, bevorzugt:

  • - ein Raumklangparameter, z.B. räumliche Verteilung des akutischen Signals der Sprache,
  • - ein Frequenzparameter, z.B. ein Energiedichtespektrum
  • - ein Parameter kennzeichnend Amplitudenverlauf, bzw. Amplitudenveränderung, bzw. Amplitudendynamik, bzw. eine sogenannte Dynamikkompression,
  • - ein Phasenparameter, z.B. Phasenverschiebungsparameter.
The determined, in particular predicated, parameter of the auditory communication is in particular an acoustic parameter, preferably:
  • a spatial sound parameter, eg spatial distribution of the acoustic signal of the speech,
  • a frequency parameter, eg an energy density spectrum
  • a parameter characterizing amplitude curve, or amplitude change, or amplitude dynamics, or a so-called dynamic compression,
  • a phase parameter, eg phase shift parameter.

Es können auch mehrere Parameter der auditiven Kommunikation ermittelt und/oder prädiziert werden.Several parameters of the auditory communication can also be determined and / or predicted.

Gemäß einer optionalen Ausgestaltung betrifft die Veränderung des Parameters des Audiosignals zumindest einen Raumklangparameter, wobei, bevorzugt zumindest eine Richtung, aus der das Audiosignal des Audiosystems des Fahrzeugs kommt oder gehört wird, insbesondere vom Fahrer des Fahrzeugs gehört wird, angepasst wird.According to an optional embodiment, the change of the parameter of the audio signal relates to at least one surround parameter, wherein, preferably at least one direction from which the audio signal of the audio system of the vehicle comes or is heard, in particular heard by the driver of the vehicle, is adjusted.

Bevorzugt wird im Verfahren die Belegung eines oder mehrerer Sitze (z.B. durch erwachsene Personen, Kinder, sogenannte Kinder-Sitze und/oder Babysitze) ermittelt. Besonders bevorzugt wird im Verfahren die Anzahl und/oder Verteilung der im Fahrzeug anwesenden Insassen auf bestimmte Sitzplätze bzw. Sitzpositionen innerhalb des Fahrzeuginnenraums ermittelt und im Verfahren berücksichtigt.Preferably, in the method, the occupancy of one or more seats (e.g., by adults, children, so-called child seats, and / or baby seats) is determined. In the method, the number and / or distribution of the occupants present in the vehicle to specific seats or seat positions within the vehicle interior is particularly preferably determined and taken into account in the method.

Die Ermittlung der Anzahl und/oder der Verteilung der im Fahrzeug anwesender Personen kann in einem vereinfachten Fall über die Auswertung der Betätigung entsprechender Türkontakte, und/oder Sicherheitsgurt-Anschnallerkennung, und/oder durch eine an sich dem Fachmann bekannte, sensorische, z.B. kapazitive Sitzbelegungserkennung erfolgen.The determination of the number and / or distribution of the persons present in the vehicle can in a simplified case via the evaluation of the operation of corresponding door contacts, and / or seatbelt buckle recognition, and / or by a per se known in the art, sensory, e.g. capacitive seat occupancy detection carried out.

Ferner kann die Ermittlung der Anzahl und/oder der Verteilung der im Fahrzeug anwesender Personen auch über die Anzahl der im Fahrzeuginnenraum erkannten, insbesondere lokalisierten mobilen Anwendergeräte, z.B. Mobilfunkendgeräte und/oder Wearables (z.B. Smart Watches) erfolgen. Ferner kann Anzahl und/oder der Verteilung der im Fahrzeug anwesender Personen mittels sogenannter Smart-Closes oder einer Nahfeldkommunikation mittels NFC (= Near Field Communication) oder z.B. RFID-Chips (= Radio Frequency Identification) erfolgen. Eine Identifikation der persönlichen Identität der Insassen ist im Verfahren nicht notwendig. Dennoch kann auch eine derartige Identifikation bestimmter Personen, insbesondere zum Zuweisen eines bestimmten für das Verfahren maßgeblichen Nutzerprofils, ausgeführt werden. Beispielsweise kann auch ermittelt werden, welche der anwesenden Personen an welchem der Sitze des Fahrzeugs sitzt, beispielsweise um daraufhin bestimmte Optimierungskriterien für die entsprechende Personen oder Sitze zuzuordnen.Furthermore, the determination of the number and / or the distribution of the persons present in the vehicle can also be determined by the number of mobile user devices detected in the vehicle interior, in particular localized mobile user devices, e.g. Mobile terminals and / or wearables (e.g., smart watches). Furthermore, the number and / or the distribution of the persons present in the vehicle by means of so-called smart closes or near-field communication by means of NFC (= Near Field Communication) or e.g. RFID chips (= Radio Frequency Identification). An identification of the personal identity of the inmates is not necessary in the procedure. Nevertheless, such an identification of certain persons, in particular for assigning a particular user profile relevant for the method, can also be carried out. For example, it can also be determined which of the persons present is sitting at which of the seats of the vehicle, for example, in order to then assign certain optimization criteria for the corresponding persons or seats.

Insbesondere kann auch eine Zuordnung zwischen den Personen oder Personengruppen, z.B. Personengruppen: ein Erwachsener, ein Kind, ein Baby ohne Babysitz, ein Babysitz mit oder ohne Baby zu bestimmten Sitzpositionen bzw. Sitzen innerhalb des Fahrzeugs festgestellt werden. Das Verfahren kann auch unterschiedliche Personengruppen (jeweils als „Sprecher“ und zumindest potentielle „Zuhörer“) unterschiedlich angewandt werden. Beispielsweise können Verfahren vorgegebene Audio-Parameter, z.B. Grenzparameter berücksichtigt werden, die in einem bestimmten Sitzbereich, z.B. im Sitzbereich eines Kindes oder Babys überschritten und/oder nicht überschritten werden sollen.In particular, an association between the persons or groups of persons, e.g. Groups of people: an adult, a child, a baby without a baby seat, a baby seat with or without a baby are detected at specific seating positions or seats within the vehicle. The method can also be applied differently to different groups of people (in each case as "speakers" and at least potential "listeners"). For example, methods may specify predetermined audio parameters, e.g. Be taken into account in a particular seating area, e.g. in the seating area of a child or baby should be exceeded and / or not exceeded.

Daraufhin kann eine derartige Veränderung zumindest eines auszugebenden Audiosignals ausgeführt werden, dass eine Verschiebung der in bestimmten Teilen des Fahrzeuginnenraums erzeugten bzw. zu erzeugenden akustischen Leistung und/oder eine Veränderung der Phase des aus einem oder mehreren bestimmten Lautsprechern ausgegebenen Audiosignals erfolgen. Insbesondere kann eine frequenzabhängige Veränderung einer Phasenverschiebung zwischen dem durch zumindest zwei Lautsprecher des Fahrzeugs ausgegebenen Audiosignals ausgeführt werden.Thereupon, such a change of at least one audio signal to be output can be carried out such that a shift of the acoustic power generated or to be generated in certain parts of the vehicle interior and / or a change in the phase of the audio signal output from one or more specific loudspeakers takes place. In particular, a frequency-dependent change in a phase shift between the audio signal output by at least two loudspeakers of the vehicle can be carried out.

Optional kann hierbei die Quelle des Audiosignals abhängig von dem, insbesondere prädizierten Parameter der auditiven Kommunikation, beispielsweise bei einem erkannten Kommunikationsvorhaben und/oder einer Stimme zumindest eines Insassen des Fahrzeugs objektiv, z.B. hinsichtlich einer von einem Lautsprecher (in einem bestimmten Raumbereich) erzeugten Leistung, verlagert werden.Optionally, in this case, the source of the audio signal can be dependent on the, in particular predicated parameters of the auditory communication, for example in the case of a recognized communication project and / or a voice of at least one occupant of the vehicle objectively, e.g. with respect to a power generated by a speaker (in a certain space).

Bevorzugt kann alternativ oder zusätzlich eine mit Mitteln des Raumklangverfahrens erzeugte, subjektiv empfundene Richtung, aus der das Audiosignal kommt, abhängig von dem, insbesondere prädizierten Parameter der auditiven Kommunikation, beispielsweise abhängig von einem erkannten Kommunikationsvorhaben und/oder einer Stimme zumindest eines Insassen des Fahrzeugs verschoben werden. Dies kann besonders bevorzugt in Kombination mit einem Variieren der Amplitude und/oder Frequenzparameter des Audiosignals erfolgen.Preferably, alternatively or additionally, a subjectively perceived direction, generated by means of the surround sound method, from which the audio signal comes depends on the, in particular predicated, parameter of the auditory communication, for example, depending on a recognized communication project and / or a voice, at least be moved by an occupant of the vehicle. This can be done particularly preferably in combination with a variation of the amplitude and / or frequency parameters of the audio signal.

Besonders bevorzugt repräsentiert der zumindest eine (anzupassende) Raumklangparameter einen oder mehrere Parameter zum Erzeugen von einer oder mehreren (auch virtuellen, zumindest durch menschliche Wahrnehmung hörbaren) Klangquellen. Beispielsweise repräsentiert ein Raumklangparameter eine Richtung, Abstand, Position, akustische Parameter einer oder mehreren Klangquellen, die mittels des Audiosystems des Fahrzeugs erzeugt werden. Das Erzeugen der Klangquellen im Verfahren kann sich jeweils auf einen bestimmten Innenraumbereich beziehen, aus welchem aus diese (besonders gut oder in einem zweckmäßigen Maße) wahrnehmbar gemacht werden. Bevorzugt kann ein Raumklangparameter auch bestimmen, welche (wahrnehmbare) Richtung, Abstand, Position, akustische Parameter zu zumindest einer Klangquelle, welche in einem räumlichen Bereich des Innenraums, und/oder im Zusammenhang mit einem Sitzplatz und/oder von einer Person, Person zugehörig zu einer Personengruppe oder einer bestimmten Person wahrnehmbar gemacht werden soll. Beispielsweise werden auf Basis des anzupassenden Audiosignals, abhängig von den besagten Parameter der auditiven Kommunikation, für zumindest zwei verschiedene räumliche Bereiche des Innenraums des Fahrzeugs oder für zwei bestimmte Insassen, bzw. Insassen an bestimmten Sitzen, auditiv wahrnehmbare Klangquellen erzeugt werden, die unterschiedliche, jeweils zweckmäßig angepasste, objektiv messbare oder subjektiv von den tatsächlich anwesenden oder angenommenen Insassen, wahrnehmbaren akustischen Parametern aufweist.Particularly preferably, the at least one surround sound parameter (to be adapted) represents one or more parameters for generating one or more sound sources (also virtual, at least audible by human perception). For example, a surround parameter represents a direction, distance, position, acoustic parameters of one or more sound sources generated by the vehicle's audio system. The generation of the sound sources in the method can in each case relate to a specific interior area from which they are made perceptible (particularly well or to an appropriate extent). Preferably, a surround sound parameter may also determine which (perceptible) direction, distance, position, acoustic parameters are associated with at least one sound source, which is in a spatial area of the interior, and / or in connection with a seat and / or by a person, person made perceptible to a group of persons or a specific person. For example, based on the audio signal to be adjusted, depending on said auditory communication parameters, auditory perceptible sound sources are generated for at least two different spatial regions of the vehicle interior or for two specific occupants or occupants at particular seats, the different ones, respectively suitably adapted, objectively measurable or subjectively perceived by the actually present or assumed occupants, audible acoustic parameters.

Auch kann ein Raumklangparameter im Verfahren abhängig von der ermittelten Verteilung der Personen auf die Sitzplätze des Fahrzeugs und/oder ihrer Positionen derart angepasst werden, dass eine kumulierter Wert für zumindest zwei Personen, repräsentierend die Güte der Wahrnehmbarkeit und/oder Verständlichkeit zumindest eines Audiosignals und/oder zumindest einer sprachlichen Kommunikation erhöht bzw. zu einem Zielwert hin gesteuert wird.Also, a surround sound parameter in the method can be adjusted depending on the determined distribution of the persons on the seats of the vehicle and / or their positions such that a cumulative value for at least two persons representing the quality of the perceptibility and / or intelligibility of at least one audio signal and / or at least a linguistic communication is increased or controlled to a target value.

Beispielsweise kann nur oder überwiegend ein bestimmter Teil des Audiosignals, der in einem Raumklangsystem, z.B. in einem Kinoformat, die Sprache (z.B. die Stimme eines Protagonisten) repräsentiert, verändert, insbesondere für die Wahrnehmung zumindest eines Insassen räumlich verschoben werden. Dabei kann einhergehend ein anderer Teil, bzw. Kanal des Audiosignals, z.B. repräsentierend eine im Raumklangsystem auszugebende Hintergrundmusik, z.B. weniger oder auf eine andere Weise, abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation angepasst werden.For example, only or predominantly a certain portion of the audio signal used in a surround sound system, e.g. in a cinema format representing language (e.g., the voice of a protagonist), in particular, being spatially displaced for the perception of at least one inmate. In doing so, a different part or channel of the audio signal, e.g. representing a background music to be output in the surround sound system, e.g. be adapted less or in some other way, depending on the determined, in particular predicated parameters of the auditory communication.

Dabei kann im Verfahren eine Optimierung der Hörbarkeit bestimmter Teile, insbesondere Kanäle eines Raumklangs bzw. den Raumklang umfassenden Audiosignals erfolgen.In this case, in the method an optimization of the audibility of certain parts, in particular channels of a room sound or the surround sound comprehensive audio signal can be carried out.

Auch kann im Verfahren in diesem Zusammenhang eine, insbesondere inhaltliche Verteilung der auditiven Kommunikation und des Audiosignals auf „zwei der Ohren eines oder eines bestimmten Zuhörers“ erzeugt werden, was wiederum eine gegenseitige Maskierung der auditiven Kommunikation und des auszugebenden Audiosignals verringert und/oder eine verbesserte akustische Wahrnehmbarkeit durch den Zuhörer ermöglicht.Also, in the method in this context, a distribution of the auditory communication and the audio signal to "two ears of a particular listener" may be generated, which in turn reduces and / or enhances mutual masking of the auditory communication and the audio signal to be output acoustic perceptibility by the listener.

Ferner kann auch das Gehirn des Menschen die Inhalte dadurch wesentlich besser verarbeiten. Auch die entsprechenden Inhalte (die zu den Audioreizen passen) können somit bei ihrer Wahrnehmung durch einen Menschen sehr viel besser „sortiert“ und inhaltlich verarbeitet werden.Furthermore, the brain of humans can process the content much better. The corresponding contents (which match the audio notes) can thus be "sorted" much better in terms of their perception by a human and processed in terms of content.

Bevorzugt kann hierbei auch unterschieden werden, wie viele Personen, insbesondere welche der Personen mit welcher Person auditiv kommunizieren (sprechen) und abhängig davon ein oder mehrere Parameter des Audiosignals in Bezug auf den Raumklang bzw. räumliche Verteilung des Audiosignals zweckmäßig angepasst werden.In this case, it is also preferably possible to distinguish how many persons, in particular which of the persons, communicate audibly with which person and depending on this, suitably adjust one or more parameters of the audio signal with respect to the spatial sound or spatial distribution of the audio signal.

Gemäß einer weiteren optionalen Ausgestaltung umfasst die Veränderung des Parameters des Audiosignals eine Abwandlung des Audiosignals im Frequenzbereich, derart dass Signalkomponenten des Audiosignals, die den Frequenzbereich der menschlichen Sprache, insbesondere innerhalb der Stimme des Sprechers betreffen, derart abgewandelt werden, dass die Signalenergie auf eine oder mehrere Frequenzbereiche verteilt wird, die den Frequenzbereich der menschlichen Stimme, insbesondere der Stimme des Sprechers, nicht oder in einem geringeren Maße betreffen.According to a further optional embodiment, the change of the parameter of the audio signal comprises a modification of the audio signal in the frequency domain, such that signal components of the audio signal which relate to the frequency range of human speech, in particular within the voice of the speaker, are modified such that the signal energy to one or more several frequency ranges is distributed, which do not affect the frequency range of the human voice, in particular the voice of the speaker, or to a lesser extent.

Mit anderen Worten kann hierbei eine Transformation der Frequenzen des Audiosignals derart erfolgen, dass die Frequenzen der Signalkomponenten des Audiosignals, die einen wesentlichen Teil ihrer Signalenergie innerhalb des Frequenzbereichs der menschlichen Sprache, insbesondere innerhalb der Stimme des Sprechers aufweisen, in einen oder mehrere Frequenzbereiche transformiert werden, der oder die den Frequenzbereich der menschlichen Sprache nicht oder weniger betreffen.In other words, a transformation of the frequencies of the audio signal can take place in such a way that the frequencies of the signal components of the audio signal, which have a substantial part of their signal energy within the frequency range of human speech, in particular within the voice of the speaker, are transformed into one or more frequency ranges that does not affect or less the frequency range of human speech.

Beispielsweise kann im Verfahren abhängig von dem zumindest einen Parameter der Kommunikation:For example, in the method, depending on the at least one parameter of the communication:

Eine, Veränderung, insbesondere Anpassung des auszugebenden Audiosignals eine Abwandlung der Frequenzkomponenten des Audiosignals umfassen, die eine Überdeckung mit dem Frequenzbereich der menschlichen Sprache, insbesondere der Stimme des Sprechers aufweisen, in Frequenzkomponenten, die eine geringere Überdeckung mit dem Frequenzbereich der menschlichen Stimme, insbesondere der Stimme des Sprechers aufweisen. A modification, in particular adaptation of the audio signal to be output comprises a modification of the frequency components of the audio signal which have an overlap with the frequency range of the human speech, in particular the voice of the speaker, in frequency components which have a lower coverage with the frequency range of the human voice, in particular Voice of the speaker.

Beispielsweise kann im Verfahren abhängig von dem zumindest einen Parameter der Kommunikation: For example, in the method, depending on the at least one parameter of the communication:

Eine, Veränderung, insbesondere Anpassung auf das im Frequenzbereich kodierten oder in Frequenzbereich transformierte Audiosignal angewandt werden, wobei die spektralen Eigenschaften, insbesondere ein Frequenzdichtespektrum zumindest eines Teils des Audiosignals, angepasst werden.A, change, in particular adaptation to be applied to the frequency domain coded or transformed in frequency domain audio signal, wherein the spectral properties, in particular a frequency density spectrum of at least a portion of the audio signal, adjusted.

Dabei kann die Abwandlung, insbesondere Transformation mehrerer Signalkomponenten des Audiosignals derart erfolgen, dass ein mathematisches Verhältnis zwischen den Signalkomponenten, insbesondere eine oder mehrere Proportionen, z.B. betreffend Frequenzdichtespektrum, im Wesentlichen erhalten bleiben.In this case, the modification, in particular transformation of several signal components of the audio signal can be carried out such that a mathematical relationship between the signal components, in particular one or more proportions, e.g. concerning frequency density spectrum, are essentially preserved.

Insbesondere kann dabei auch eine Frequenzbandtransformation angewandt werden, wobei die Frequenzkomponenten des Audiosignals, die innerhalb des Frequenzbandes der menschlichen Sprache, insbesondere innerhalb der Stimme des Sprechers, liegen zu den Frequenzbereichen hin transformiert werden, die im Wesentlichen außerhalb des vorgenannten, für die menschliche Kommunikation besonders wichtigen, Frequenzbandes liegen.In particular, a frequency band transformation can also be used, wherein the frequency components of the audio signal which are transformed within the frequency band of human speech, in particular within the voice of the speaker, are transformed to the frequency ranges which are substantially outside of the aforementioned, for human communication in particular important, frequency band lie.

Gemäß einer weiteren optionalen Ausgestaltung umfasst die Veränderung des Parameters des Audiosignals eine zumindest teilweise Verlagerung der Frequenzen des Audiosignals, die zumindest statistisch den Frequenzen des Sprachsignals des Sprechers entsprechen, insbesondere in Bezug auf eine Position und/oder Kopfausrichtung zumindest eines Zuhörers von einer ersten Raumrichtung, in der sich der Sprecher befindet zu einer zweiten Raumrichtung, die abweichend als die erste Raumrichtung, insbesondere im Wesentlichen entgegengesetzt zu der ersten Richtung, angeordnet ist. According to a further optional embodiment, the change of the parameter of the audio signal comprises an at least partial shifting of the frequencies of the audio signal which at least statistically correspond to the frequencies of the speaker's voice signal, in particular with respect to a position and / or head orientation of at least one listener from a first spatial direction, in which the speaker is located to a second spatial direction, which is arranged differently than the first spatial direction, in particular substantially opposite to the first direction.

Eine zumindest teilweise Verlagerung ist hierbei beispielsweise derart ausgebildet, dass das Audiosignal aus der Richtung des Sprechers zumindest mit einem Frequenzbereich, z.B. von 120 - 6000 Hz, insbesondere 350 - 3000 Hz verringert wird und Frequenzen des Audiosignals aus dem Audiosystem des Fahrzeugs, das im Wesentlichen aus einer anderen Richtung als die Richtung des Sprechers kommt, und in einem Frequenzbereich von 200 - 6000 Hz, insbesondere 350 - 3000 Hz verstärkt wird.An at least partial displacement is in this case for example designed such that the audio signal from the direction of the speaker at least with a frequency range, e.g. is reduced from 120-6000 Hz, in particular 350-3000 Hz, and frequencies of the audio signal from the audio system of the vehicle, which essentially comes from a direction other than the direction of the speaker, and in a frequency range of 200 - 6000 Hz, in particular 350 -. 3000 Hz is amplified.

Besonders bevorzugt erfolgt dabei eine räumliche Verlagerung des Audiosignals mit bestimmten Frequenzen derart, dass eine insgesamt, in Summe beim Zuhörer ankommende, Frequenzgewichtung des Audiosignals im Wesentlichen unverändert bleibt oder zumindest wesentlich geringer ausfällt, als die Verringerung der Frequenzen aus der Richtung des Sprechers.Particularly preferred is a spatial displacement of the audio signal with certain frequencies such that a total, in total at the listener incoming, frequency weighting of the audio signal is substantially unchanged or at least substantially less fails than the reduction of the frequencies from the direction of the speaker.

Besonders bevorzugt können unterschiedliche Audiosignale, insbesondere unterschiedliche Abschnitte bzw. Kanäle eines mehrkanaligen Audiosignals im Verfahren unterschiedlich verändert, insbesondere angepasst. Diese können in jeweils bestimmter Art und Weise, z.B. zu Erreichung eines bestimmten, durch ein Optimierungskriterium angestrebten Ziels, angepasst werden.With particular preference, different audio signals, in particular different sections or channels of a multi-channel audio signal, can be modified differently in the method, in particular adapted. These may each be determined in a particular manner, e.g. to achieve a particular objective, which is aimed at by an optimization criterion.

Bevorzugt können im Verfahren die (überwiegend) Sprache repräsentierende Audiosignale, bzw. Abschnitte oder Kanäle eines Audiosignals, beispielsweise Radiosendungen, anders, insbesondere stärker angepasst werden, als die (überwiegend) Musik repräsentierende Audiosignale, bzw. Abschnitte oder Kanäle eines Audiosignal.In the method, the (predominantly) speech-representing audio signals, or sections or channels of an audio signal, for example radio broadcasts, can be adapted differently, in particular more strongly, than the (predominantly) music-representing audio signals, or sections or channels of an audio signal.

Dabei kann das Verfahren einen Schritt zur Auswertung eines, z.B. von einer Audioquelle kommenden Audiosignals, wobei eine Indikator für die Zusammensetzung des Inhalts des Audiosignals, z.B. Anteile von Sprache, Gesang, Musikhintergrund, szenische Hintergrundgeräusche, ermittelt und im Verfahren berücksichtigt wird.The method may include a step of evaluating a, e.g. an audio signal coming from an audio source, an indicator of the composition of the content of the audio signal, e.g. Shares of speech, song, music background, scenic background noise, determined and taken into account in the process.

Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren zusätzlich ein Einlernen einer bestimmten Stimme und/oder einer bestimmten körperlichen Regung eines Sprechers (sprechenden Insassen) zu einem oder mehreren (früheren) Zeitintervallen und daraufhin bei einer Wiedererkennung der bestimmten Stimme und/oder der bestimmten körperlichen Regung eines Sprechers zu einem oder mehreren späteren Zeitintervallen eine Anwendung einer optimierten oder vorgespeicherten Anpassung des Audiosignals für die Stimme des Sprechers.In addition, according to another optional embodiment, the method additionally comprises teaching a certain voice and / or a specific physical movement of a speaker (speaking occupant) at one or more (earlier) time intervals and then recognizing the determined voice and / or the determined physical movement a speaker at one or more later time intervals, an application of an optimized or pre-stored adaptation of the audio signal for the voice of the speaker.

Bevorzugt ergibt sich hierbei eine folgende Abhängigkeit:

  • - Wenn eine körperliche Regung, z.B. ein bestimmtes Lippenbewegungsmuster erkannt wird, bei einer Person, die bisher im Fahrzeug immer leise und/oder undeutlich gesprochen hat, dann wird das Audiosignal vergleichsweise stark, und passend zu der Sprachfrequenz des Sprechers angepasst.
  • - Wenn eine körperliche Regung, z.B. ein bestimmtes Lippenbewegungsmuster erkannt wird, bei einer Person, die bisher im Fahrzeug immer laut und/oder deutlich gesprochen hat, dann wird das Audiosignal nicht oder vergleichsweise schwach, und passend zu der Sprachfrequenz des Sprechers angepasst.
Preferably, this results in the following dependence:
  • - When a physical sensation, eg, a particular lip movement pattern, is detected in a person who has always spoken softly and / or indistinctly in the vehicle, then the audio signal is adjusted comparatively strongly, and in accordance with the speech frequency of the speaker.
  • - If a physical emotion, such as a specific lip movement pattern is detected, in a person who has always spoken loud and / or clearly in the vehicle, then the audio signal is not or comparatively weak, and adapted to the speech frequency of the speaker.

Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren ein Einlernen einer bestimmten körperlichen Regung, die dem Sprechen, insbesondere bei einem bestimmten Insassen, einer sprachlichen Kommunikation vorausgeht zu einem oder mehreren Zeitintervallen und daraufhin bei einer Wiedererkennung der körperlichen Regung, insbesondere auch beim Wiedererkennen des bestimmten Sprechers und/oder der für den Sprecher aus mehreren Zeitintervallen typischen körperlichen Regung eine Anwendung einer optimierten oder vorgespeicherten Anpassung des Audiosignals für die Stimme des Sprechers.According to a further optional embodiment, the method comprises training a certain physical impulse, which precedes the speech, in particular in the case of a certain occupant, of a linguistic communication at one or more time intervals and subsequently at a recognition of the physical impulse, in particular also when the particular speaker is recognized and / or the physical impulse typical of the speaker of multiple time intervals, an application of an optimized or pre-stored adaptation of the audio signal for the voice of the speaker.

Besonders bevorzugt kann hierbei auch eine, einer bestimmten Stimmlage bzw. Sprachton vorausgehende körperliche Regung erkannt werden, und daraufhin eine (noch viel präzisere) Anpassung des Audiosignals erfolgen.Particularly preferably, a physical impulse preceding a certain vocal range or speech tone can also be recognized, and a (much more precise) adaptation of the audio signal then takes place.

Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren zusätzlich ein Erfassen eines Kommunikationsvorhabens und/oder einer Stimme zumindest eines, insbesondere eines bestimmten Insassen des Fahrzeugs und/oder eines Insassen an einem bestimmten Sitzplatz des Fahrzeugs, und ein Verändern des Audiosignals abhängig von dem erfassten Kommunikationsvorhabens und/oder der Stimme des Insassen.According to another optional embodiment, the method additionally comprises detecting a communication project and / or a voice of at least one, in particular a certain occupant of the vehicle and / or an occupant at a certain seat of the vehicle, and changing the audio signal depending on the detected communication project and / or the voice of the inmate.

Das Kommunikationsvorhaben und/oder die Stimme zumindest eines, insbesondere eines bestimmten Insassen des Fahrzeugs können beispielsweise mit Mitteln des Fahrzeugs, z.B. mit Mikrophonen einer Freisprecheinrichtung und/oder mit weiterer Innenraumsensorik erfasst werden. Besonders bevorzugt kann ein Kommunikationsvorhaben mit einer Innenraumkamera des Fahrzeugs und der entsprechend eingerichteten Bildverarbeitung erfolgen.The communication project and / or the voice of at least one, in particular a certain occupant of the vehicle can be detected, for example, by means of the vehicle, e.g. be detected with microphones of a hands-free device and / or with other interior sensors. Particularly preferred may be a communication project with an interior camera of the vehicle and the correspondingly configured image processing.

In einem Beispiel repräsentiert das Kommunikationsvorhaben, dass eine sprachliche Kommunikation, insbesondere von einem bestimmten Insassen oder von einem Insassen an einem bestimmten Sitzplatz, insbesondere mit einem gewissen (einen Schwellwert übersteigendem) Wahrscheinlichkeitsmaß zu erwarten ist. Auch kann mit dem Kommunikationsvorhaben einen prädizierten Wert eines, z.B. akustischen Parameter der erwarteten sprachlichen Kommunikation erfasst und berücksichtigt werden. Auch kann der Parameter „Kommunikationsvorhaben“ auf die analoge Weise einen Abschluss bzw. die Beendigung eines Abschnitts der sprachlichen Kommunikation, z.B. ein Ende eines Satzes, Phrase, oder einer bestimmten linguistischen Struktur kennzeichnen.In one example, the communication project represents that a linguistic communication, in particular from a certain occupant or from an occupant at a particular seat, in particular with a certain probability (exceeding a threshold value) is to be expected. Also, with the communication project, a predicted value of, e.g. acoustic parameters of expected linguistic communication are captured and taken into account. Also, the parameter "communication project" may, in the analogous manner, signify completion of a portion of the linguistic communication, e.g. identify an end of a sentence, phrase, or linguistic structure.

Insbesondere kann hierbei ein Parameter kennzeichnend den Anfang und/oder Ende der Sprachmitteilung, Verlauf der Laustärke, Tonlage, etc., ermittelt werden.In particular, in this case a parameter characterizing the beginning and / or end of the voice message, the course of the volume, pitch, etc., can be determined.

Gemäß einer weiteren optionalen Ausgestaltung wird auch erkannt, dass es sich bei der erfassten Stimme um eine Personenstimme, insbesondere um eine Stimme einer bestimmten Person oder bestimmten Personengruppe, handelt und das Verändern des Audiosignals erfolgt abhängig von der Erkennung der Stimme als eine Personenstimme, insbesondere abhängig vom Erkennen der Stimme einer bestimmten Person oder Personengruppe.According to a further optional embodiment, it is also recognized that the detected voice is a person's voice, in particular a voice of a specific person or group of persons, and the changing of the audio signal is dependent on the recognition of the voice as a person's voice, in particular dependent from recognizing the voice of a particular person or group of people.

Mit anderen Worten wird hierbei speziell auf Personenstimmen, insbesondere nicht auf weitere Geräuschquellen, wie z.B. das Bellen eines Hundes oder Hupen anderer Verkehrsteilnehmer oder auf einen Hintergrundgeräusch, z.B. Windgeräusche oder spezifischen Geräuschkulissen reagiert. Beziehungsweise wird auf andere Soundquellen erfindungsgemäß prinzipiell anders und/oder mit einem anderen Verändern des Audiosignals, z.B. auch mittels Anpassung von Parametern des Audiosignals reagiert.In other words, in this case, especially for persons' voices, in particular not for further noise sources, such as e.g. the barking of a dog or horns of other road users or background noise, e.g. Wind noise or specific background noise responds. Respectively, according to the invention, in principle different from other sound sources and / or with a different variation of the audio signal, e.g. also reacts by adjusting parameters of the audio signal.

Beispielsweise erfolgt eine Anpassung einer, insbesondere Sprache bzw. Personenstimmen umfassenden, auszugebenden Audiosignals vorwiegend oder stärker auf den oder die Parameter der auditiven Kommunikation als, z.B. auf akustische Parameter einer weiterer Geräuschquelle, wie z.B. das Bellen eines Hundes oder Hupen anderer Verkehrsteilnehmer oder auf einen Hintergrundgeräusch, z.B. Windgeräusche oder spezifischen Geräuschkulissen.For example, an adaptation of an audio signal to be output, in particular comprising speech or person voices, takes place predominantly or more intensively on the parameter (s) of the auditive communication than, for example, to acoustic parameters of another noise source, such as the barking of a dog or horns of other road users or background noise, e.g. Wind noise or specific background noise.

Beispielsweise wird ein Parameter des Audiosignals, auf die Erkennung dass das Audiosignal Sprache umfasst, anders, insbesondere stärker angepasst, im Vergleich zu einem Audiosignal, welches keine Sprache umfasst oder vorwiegend Musikinhalte umfasst.For example, a parameter of the audio signal, to the recognition that the audio signal includes speech, different, especially more adapted, compared to an audio signal that does not include speech or predominantly includes music content.

Dies ist besonders vorteilhaft, weil eine sprachliche Meldung, hinsichtlich ihrer Verständlichkeit wesentlich stärker durch andere Personenstimmen als durch weitere Geräusche gestört wird.This is particularly advantageous because a voice message is much more disturbed by other persons' voices in terms of their intelligibility than by other sounds.

Bei der Stimme einer bestimmten Person und/oder der Stimme zugehörig zu einer bestimmten Personengruppe kann es sich um eine eingelernte Stimme handeln. Bei der eingelernten Stimme ist eine, insbesondere eine durch bestimmte, eingelernte Parameter oder Parameterkombinationen gekennzeichnete Stimme handeln. Bevorzugt können im Verfahren auch Stimmen bestimmter Personen eingelernt werden, und speziell auf die Erkennung der Stimmen der Personen eine passende Anpassung des Audiosignals ausgeführt werden.The voice of a particular person and / or the voice belonging to a particular group of persons may be a learned voice. When the voice is learned, one, in particular one by certain, taught parameters or combinations of parameters marked voice act. Preferably, in the method, voices of certain persons can also be taught in, and a suitable adaptation of the audio signal can be performed especially for the recognition of the voices of the persons.

Das Einlernen der Stimme (einer bestimmten Person) oder der Personengruppe kann wiederum im Fahrzeug oder auch außerhalb des Fahrzeugs oder mit Mitteln eines weiteren Geräts, z.B. eines mobilen Anwendergeräts erfolgen.The training of the voice (of a certain person) or of the group of persons can in turn be done in the vehicle or outside the vehicle or by means of another device, e.g. a mobile user device done.

Besonders bevorzugt kann für zumindest zwei Stimmen von zwei unterschiedlichen Personen eine unterschiedliche Anpassung (Kennlinie, mathematischer Zusammenhang) zumindest eines Abschnitts des Audiosignals ausgeführt werden.Particularly preferably, for at least two voices of two different persons, a different adaptation (characteristic curve, mathematical relationship) of at least one section of the audio signal can be carried out.

In einem weiterführenden Beispiel kann, die zumindest ein Parameter des Audiosignals, auf bestimmte durch eine Erkennung oder Voreinstellung hervorgehobene Personen, bzw. Insassen auf bestimmten Sitzen, anders, insbesondere wesentlich stärker angepasst werden.In a further example, the at least one parameter of the audio signal may be adapted to particular persons or occupants in certain seats highlighted by a recognition or presetting differently, in particular significantly more.

Beispielsweise wenn eine zur Führung berechtigte Person, z.B. eine Führungsperson oder ein Einsatzleiter bei einer Fahrt mit bzw. an seinen Mitarbeitern bzw. Mannschaft spricht, kann mit dem Verfahren um eine hinreichende Stille, bzw. Hörbarkeit der sprachlichen Botschaft gesorgt werden.For example, if a person authorized to lead, e.g. If a leader speaks on a journey with or to his staff or crew, the procedure can be used to ensure sufficient silence or audibility of the spoken message.

Die „Personengruppen“ umfassen hierbei z.B. Familienmitglieder, bekannte, insbesondere im Fahrzeug eingelernte Stimmen, „Frauen“, „Männer“, „Kinder“. The "groups of persons" in this case include e.g. Family members, known voices, especially those taught in the vehicle, "women", "men", "children".

Insbesondere ist dabei eine im Innenraum des Fahrzeugs (live) gesprochene Stimme einer Person (keine dort wiedergegebene Stimme, z.B. aus einer Radiosendung) gemeint.In particular, a voice of a person spoken in the interior of the vehicle (live) is meant (no voice reproduced there, for example from a radio broadcast).

Gemäß einer weiteren optionalen Ausgestaltung wird die Stimme eines Sprechers im Innenraum des Fahrzeugs von einer Stimme aus einem Multimediaabspielgerät, insbesondere aus dem Soundsystem des Fahrzeugs oder einem an das Fahrzeug angeschlossenen mitgeführten Multimediaabspielgerät, unterschieden.According to a further optional embodiment, the voice of a speaker in the interior of the vehicle is distinguished by a voice from a multimedia player, in particular from the sound system of the vehicle or a multimedia player attached to the vehicle.

Bevorzugt kann die Stimme eines Sprechers im Innenraum des Fahrzeugs von der Stimme aus einem Multimediasystem durch einen Abgleich der Signale eines Mikrofonsystems des Fahrzeugs und eines Signals des Multimediasystems des Fahrzeugs unterschieden werden.Preferably, the voice of a speaker in the interior of the vehicle can be distinguished from the voice from a multimedia system by matching the signals of a microphone system of the vehicle and a signal of the multimedia system of the vehicle.

Beispielsweise kann die Stimme eines Sprechers im Innenraum des Fahrzeugs von einer Stimme aus einem Multimediaabspielgerät, insbesondere aus dem Soundsystem des Fahrzeugs oder einem an das Fahrzeug angeschlossenen mitgeführten Multimediaabspielgerät, dadurch unterschieden werden, dass ermittelt wird, ob die Stimme eines Sprechers im Fahrzeug nur im Mikrofonsystem des Fahrzeugs enthalten ist bzw. erkennbar ist, oder ob die Stimme (auch) in einem ausgewerteten Signal eines Multimediasystems erkannt werden kann. Ein solcher Abgleich kann z.B. mittels Auswertung eines Ähnlichkeitsmaßes bzw. Korrelationsmaßes zwischen einem mit einem Mikrofon erfassten Signals und eines, z.B. aus dem Multimediasystem, eingelesenen Audiosignals erfolgen.For example, the voice of a speaker in the interior of the vehicle of a voice from a multimedia player, in particular from the sound system of the vehicle or connected to the vehicle entrained multimedia player, be distinguished by determining whether the voice of a speaker in the vehicle only in the microphone system of the vehicle is contained or recognizable, or whether the voice (also) can be detected in an evaluated signal of a multimedia system. Such a calibration may e.g. by evaluating a similarity measure or correlation measure between a signal detected with a microphone and a, e.g. be done from the multimedia system, read audio signal.

Gemäß einer weiteren optionalen Ausgestaltung erfolgt das Erfassen des Kommunikationsvorhabens zumindest eines Insassen des Fahrzeugs mittels des Erkennens seiner Lippenbewegung und/oder einer körperlichen Regung, insbesondere mittels einer Innenraumkamera.According to a further optional embodiment, the detection of the communication project of at least one occupant of the vehicle takes place by means of recognizing his lip movement and / or a bodily movement, in particular by means of an interior camera.

Bevorzugt kann ein Parameter des Audiosignals auch vorab (vor oder kurz nach dem Anfang des Sprechens) angepasst werden. Dabei ergibt sich der Vorteil, dass der Person mit einem Mitteilungswunsch oder Mitteilungsabsicht, bzw. die dabei ist etwas sprachlich zu kommunizieren, sehr zuvorgekommen wird.Preferably, a parameter of the audio signal can also be adjusted in advance (before or shortly after the beginning of the speech). This results in the advantage that the person with a message request or message intention, or who is about to communicate something linguistically, is very anticipated.

Dies kann beispielsweise mittels einer Innenraumkamera des Fahrzeugs realisiert werden, die zumindest den Fahrer des Fahrzeugs (und ggf. den Beifahrer) erfasst und entsprechende körperliche Regungen erkennen kann.This can be realized for example by means of an interior camera of the vehicle, which detects at least the driver of the vehicle (and possibly the passenger) and can detect corresponding physical impulses.

Als Kommunikationsvorhaben können auch eine oder mehrere körperlichen Regungen (aus der Analyse der Körpersprache und/oder Emotionsauswertung) erkannt werden, die einem Sprechen vorangehen. Dies kann basierend auf entsprechenden aus der Wissenschaft basierenden Gesetzmäßigkeiten oder Beobachtungen, und/oder basierend auf Nutzereinstellungen und/oder bevorzugt basierend auf einem maschinellen Lernverfahren erfolgen.One or more physical impulses (from the analysis of the body language and / or emotion evaluation), which precede a speech, can also be recognized as communication projects. This may be done based on appropriate science-based laws or observations, and / or based on user preferences, and / or preferably based on a machine learning technique.

Besonders bevorzugt ist hierbei vorgesehen, dass als eine Bedingung zur Anpassung des Audiosignals ein Lächeln und Sprechen und/oder ein durch eine starke mimische Geste erkennbar erschrecktes Gesicht und lautes Sprechen bzw. Schreien erkannt wird und daraufhin eine, insbesondere verstärkte, Anpassung eines Parameters des Audiosignals erfolgt.Particularly preferably, it is provided that a smile and speech and / or a recognizable by a strong mimic gesture recognizable face and loud talking or shouting is recognized as a condition for adjusting the audio signal and then a, in particular amplified, adaptation of a parameter of the audio signal he follows.

Besonders bevorzugt kann daraufhin das Audiosignal beim Erkennen eines erschreckten Gesichts (mimischer Ausdruck) und/oder beim Erkennen eines Streits oder Schreiens ausgeschaltet, angehalten, unterbrochen oder stärker angepasst werden, als bei einer durchschnittlich ausgeprägten Kommunikationsbereitschaft und/oder Stimmerkennung.The audio signal can then be switched off, paused, interrupted or adjusted more strongly when recognizing a startled face (mimic expression) and / or upon detecting a hassle or screaming, than with an average pronounced one Communication readiness and / or voice recognition.

Gemäß einer weiteren optionalen Ausgestaltung wird das Audiosignal abhängig von der Position des Sprechers und/oder einer relativen Richtung, aus der der gesprochene Inhalt kommt oder entsprechend dem Kommunikationsvorhaben kommen wird, angepasst.According to a further optional embodiment, the audio signal is adapted depending on the position of the speaker and / or a relative direction from which the spoken content comes or will come in accordance with the communication project.

Beispielsweise kann auf das Sprechen oder die Kommunikationsbereitschaft des Fahrers und/oder das Sprechen eines Insassen am Beifahrersitz das (laufende oder geplante) Audiosignal anders, insbesondere stärker angepasst werden, als auf das Sprechen und/oder Kommunikationsbereitschaft eines Insassen von der Rückbank.For example, the speech or the communication readiness of the driver and / or the speaking of an occupant in the passenger seat, the (current or planned) audio signal can be adjusted differently, in particular more than on the speech and / or communication readiness of an occupant from the back seat.

Beispielsweise können somit Insassen von der Rückbank eine Verkehrsmitteilung nicht oder nur in bestimmten Fällen verändern, während der Insasse am Beifahrersitz einen stärkeren Einfluss hat.For example, therefore, inmates from the back seat can not or only in certain cases modify a traffic message, while the occupant has a stronger influence on the passenger seat.

Die Position des Sprechers kann erfindungsgemäß ermittelt werden, durch einen Abgleich zwischen den Signalen eines Mikrofonsystems im Fahrzeug (z.B. mind. zwei Mikrofone einer Freisprecheinrichtung) und/oder Sitzbelegungserkennung und/oder Innenraumkamera.The position of the speaker can be determined according to the invention by matching between the signals of a microphone system in the vehicle (for example at least two microphones of a hands-free device) and / or seat occupancy recognition and / or interior camera.

Beispielsweise kann die Position des Sprechers aus einer Phasenverschiebung eines akustischen Signals ermittelt werden, das z.B. von zwei räumlich versetzten Mikrofonen im Fahrzeug erfasst wird.For example, the position of the speaker can be determined from a phase shift of an acoustic signal, e.g. detected by two spatially displaced microphones in the vehicle.

Gemäß einer weiteren optionalen Ausgestaltung wird eine Emotionserkennung und/oder Absichtserkennung eines Insassen des Fahrzeugs erkannt und im Verfahren berücksichtigt, wobei daraufhin die Veränderung des Audiosignals, bevorzugt in unterschiedlicher Weise, erfolgt.According to a further optional embodiment, an emotion recognition and / or intent recognition of an occupant of the vehicle is recognized and taken into account in the method, wherein then the change of the audio signal, preferably in different ways, takes place.

Hierbei kann die Emotionserkennung und/oder Absichtserkennung insbesondere mit Mitteln des Fahrzeugs, z.B. mit einer Innenraumkamera des Fahrzeugs erkannt werden. Beispielsweise kann die Emotionserkennung und/oder Absichtserkennung durch eine Auswertung des zeitlichen Verlaufs der Mimik des Insassen, seiner Gestik mit oder ohne weitere körperliche Regungen umfassen.In this case, the emotion recognition and / or intent recognition may be carried out in particular by means of the vehicle, e.g. be detected with an interior camera of the vehicle. For example, the emotion recognition and / or intent recognition may include an evaluation of the time course of the facial expression of the occupant, his gestures with or without further physical impulses.

Beispielsweise kann bei einer erkannten sehr hoher Aufregung des Insassen (Sprechers) eine frühere und/oder stärkere Anpassung des Audiosignals erfolgen.For example, in the case of a detected very high level of excitement of the occupant (speaker), an earlier and / or greater adaptation of the audio signal can take place.

Ferner kann im Verfahren alternativ oder zusätzlich ein Umschalten von einem ersten Audiosignal zu einem zweiten Audiosignal, und ggf. umgekehrt, abhängig von dem erfassten Parameter der auditiven Kommunikation erfolgen. Dabei kann zumindest ein Abschnitt des Audiosignals durch einen anderen Abschnitt des Audiosignals ersetzt werden. Dies kann im Verfahren durch einen Zugriff auf die entsprechende Signalquelle bzw. Datenabschnitte variiert werden.Furthermore, in the method, alternatively or additionally, switching from a first audio signal to a second audio signal, and possibly vice versa, can take place depending on the detected parameter of the auditory communication. In this case, at least a portion of the audio signal can be replaced by another portion of the audio signal. This can be varied in the method by accessing the corresponding signal source or data sections.

Ferner kann auf das Ermitteln, insbesondere Prädizieren eines Parameters der auditiven Kommunikation ein derartiges Verändern der Raumklangparameter des Audiosystems erfolgen, dass, veränderte, insbesondere für den Parameter der auditiven Kommunikation angepasste, akustische Raum-Eigenschaften, insbesondere eine virtuelle Akustik, für die Ausgabe eines Abschnitts des Audiosignals simuliert werden. Beispielsweise kann es dabei um eine, insbesondere fließende Umschaltung bzw. Umwandlung zwischen zumindest zwei Parameter-Datensätzen repräsentierend unterschiedliche räumliche Eigenschaften, z.B. ein (bestimmtes) „Konzertsaal“, „Jazz-Club“, „Science-Fiction“, „Kino“, „Gaming“, etc. „Nachrichten“, erfolgen.Furthermore, determining, in particular predicating a parameter of the auditory communication, such a changing of the surround sound parameters of the audio system can be effected by changing the acoustic room characteristics, in particular virtual acoustics, adapted for the parameter of the auditory communication, for the output of a section of the audio signal. By way of example, this may involve a, in particular flowing, switching between at least two parameter data sets representing different spatial properties, e.g. a (certain) "concert hall", "jazz club", "science fiction", "cinema", "gaming", etc. "news".

Dabei kann abhängig von dem erfassten Parameter der auditiven Kommunikation (im Ergebnis) ein schnelles Umschalten oder ein schrittweiser Übergang zwischen einer optimierten Musikwahrnehmung und einer optimierten Hörbarkeit der auditiven Kommunikation oder zu einer insgesamt optimierten Wahrnehmbarkeit ausgeführt werden.In this case, depending on the detected parameter of the auditory communication (as a result), a rapid switching or a gradual transition between an optimized music perception and an optimized audibility of auditory communication or to an overall optimized perceptibility can be performed.

Ferner kann im Verfahren optional vorgesehen sein, dass eine Wiederholung eines Abschnitts eines Audiosignals erfolgt, welcher durch die ermittelte auditive Kommunikation wesentlich beeinflusst ist bzw. wurde. Dabei kann z.B. ein bereits angefangener Musiktitel, der während des Abspielens durch die auditive Kommunikation wesentlich (stark oder während eines relativ langen Zeitintervalls) übertönt worden ist, wiederholt ausgegeben werden.Furthermore, it may optionally be provided in the method that a repetition of a section of an audio signal takes place, which is or has been significantly influenced by the ascertained auditory communication. In this case, e.g. an already started track that has been drowned out during playback by the auditory communication substantially (strong or during a relatively long time interval) are issued repeatedly.

Dabei kann beispielsweise ein Teil eines Sprache umfassenden Programms, der während des Abspielens durch die auditive Kommunikation wesentlich (stark oder während eines erheblichen Zeitintervalls) übertönt worden ist, wiederholt ausgegeben werden. Dabei kann die Wiederholung derart erfolgen, dass der wiederholte Abschnitt des Audiosignals einen gültigen und hinreichend vollständigen, insbesondere eines an sich sinnvoll wahrnehmbaren Musikabschnitts, z.B. eine Gesangsstrophe und/oder ein an sich verständlichen Informationsabschnitt und/oder einer sprachlichen Struktur (Phrase, Satz, Nebensatz, etc.) repräsentiert.In this case, for example, a part of a program comprising speech which has been drowned out during the playback by the auditory communication substantially (strongly or during a considerable time interval) can be repeatedly output. In this case, the repetition can be carried out in such a way that the repeated section of the audio signal contains a valid and sufficiently complete music section, in particular a perceptually perceptible music section, e.g. a vocal stanza and / or an understandable information section and / or a linguistic structure (phrase, sentence, subordinate clause, etc.) represents.

Als eine Wiederholung ist dabei auch zu verstehen, dass ein neuer Abschnitt des Audiosignals bzw. ein Abschnitt des Audiosignals erneut erzeugt wird, zumindest ein nicht hinreichend übermittelter Inhalt, z.B. damit ausgeglichen, ergänzt oder ersetzt wird.A repetition is also to be understood that a new section of the audio signal or a section of the audio signal is generated again, at least one not sufficiently transmitted Content, eg balanced, supplemented or replaced.

Auch kann ein Ermitteln eines Maßes für die Anwendbarkeit und/oder Erfolgswahrscheinlichkeit in Bezug auf die Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals, unter Berücksichtigung des ermittelten Parameter der auditiven Kommunikation und/oder zumindest eines weiteren, im Innenraum des Fahrzeugs hörbaren akustischen Inhalts, z.B. eines Fahrgeräusches bzw. Motorgeräusches, z.B. auch in Bezug auf vorausdefinierte Optimierungskriterien, nicht hinreichend ist oder war, und daraufhin: Auswahl einer Maßnahme in Bezug auf das auszugebende Audiosignal.Also, determining a measure of the applicability and / or probability of success with respect to the output of at least a portion of the audio signal to be output, taking into account the determined parameter of the auditory communication and / or at least one further, audible in the interior of the vehicle acoustic content, e.g. a driving noise or engine noise, e.g. also with regard to predefined optimization criteria, is or was not sufficient, and thereupon: selection of a measure with regard to the audio signal to be output.

Beispielsweise kann ein Maß für eine zweckmäßige Anwendbarkeit der Anpassung des Audiosignals und/oder ein Maß der Erfolgswahrscheinlichkeit zumindest teilweise vorab, d.h. vor oder teilweise während der Ausgabe des Audiosignals erfolgen. Auch kann ein Maß für die Erfolgswahrscheinlichkeit in Bezug auf einen bereits in der Ausgabe befindlichen oder bereits ausgegebenen Abschnitt des Audiosignals ermittelt werden. Beispielsweise kann ein Maß für die Anwendbarkeit oder Erfolgswahrscheinlichkeit eine, insbesondere voraussichtliche, Erreichung eines Optimierungskriteriums, z.B. bezüglich einer Wahrnehmbarkeit des betreffenden Abschnitts der auditiven und/oder des Audiosignals, z.B. von einem oder mehreren bestimmten Sitzen des Fahrzeugs aus, repräsentieren.For example, a measure of a proper applicability of the adaptation of the audio signal and / or a measure of the probability of success may be at least partially predetermined, i. before or partly during the output of the audio signal. It is also possible to determine a measure of the probability of success with regard to a section of the audio signal already in the output or already output. For example, a measure of the applicability or probability of success may be an, in particular, anticipated, achievement of an optimization criterion, e.g. with regard to perceptibility of the relevant portion of the auditory and / or audio signal, e.g. from one or more particular seats of the vehicle.

Abhängig von dem ermittelten Maßes für die Anwendbarkeit und/oder Erfolgswahrscheinlichkeit können diverse in diesem Dokument beschriebene Parameter des Audiosignals, z.B. die Logik zur Anpassung des Audiosignals angepasst werden. Beispielsweise kann eine solche Maßnahme kann z.B. das Variieren des Zeitpunkts der Ausgabe zumindest eines Abschnitts des Audiosignals und/oder einer wiederholten Ausgabe eines Abschnitts des Audiosignals umfassen.Depending on the determined measure of applicability and / or probability of success, various parameters of the audio signal described in this document, e.g. the logic to adapt the audio signal to be adjusted. For example, such a measure may e.g. varying the timing of the output of at least a portion of the audio signal and / or a repeated output of a portion of the audio signal.

Alternativ oder zusätzlich kann zumindest ein Zeitparameter zur Ausgabe zumindest eines Abschnitts des Audiosignals ermittelt werden, der einen (absoluten oder relativen) Zeitpunkt, insbesondere zu einem Anfang und/oder Ende oder der Dauer eines Zeitintervalls kennzeichnet, der zur Ausgabe des Audiosignals, insbesondere eines bestimmten Abschnitt des Audiosignals oder eines Audiosignals mit einem bestimmten Inhalt, beispielsweise unter Berücksichtigung zumindest eines Optimierungskriteriums, (explizit) nicht geeignet ist. Daraufhin kann die Ausgabe zumindest eines Abschnitts eines Audiosignals unter Berücksichtigung eines solchen Zeitparameters erfolgen.Alternatively or additionally, at least one time parameter for outputting at least a portion of the audio signal can be determined which identifies an (absolute or relative) time, in particular at the beginning and / or end or the duration of a time interval, for outputting the audio signal, in particular a specific one Section of the audio signal or an audio signal with a specific content, for example, taking into account at least one optimization criterion, (explicitly) is not suitable. Thereupon, the output of at least a portion of an audio signal can take place taking into account such a time parameter.

Bevorzugt erfolgt die besagte Anpassung des Audiosignals des Fahrzeugs als eine Regelung eines oder mehrerer Parameter des besagten Audiosignals, wobei ein Sollwert der Regelung abhängig von einer vorgegebenen Hörbarkeit und/oder akustischen Wahrnehmbarkeit einer mit dem Audiosignal repräsentierten Inhalts und/oder zumindest eines Abschnitts der auditiven Kommunikation gewählt, insbesondere laufend angepasst wird.The said adaptation of the audio signal of the vehicle preferably takes place as a regulation of one or more parameters of the said audio signal, wherein a desired value of the control depends on a given audibility and / or acoustic perceptibility of a content represented by the audio signal and / or at least a portion of the auditory communication chosen, in particular continuously adapted.

Gemäß einer weiteren optionalen Ausgestaltung umfasst das Verfahren ein Ermitteln einer Anwendbarkeit, insbesondere einer Erfolgswahrscheinlichkeit, dass die Parameter des Audiosignals bei bestimmten Parameter und/oder Inhalten der gesprochenen Sprache, insbesondere unter Berücksichtigung eines Hintergrundgeräuschs nicht hinreichend abwandelbar waren oder sind. Daraufhin erfolgt eine Auswahl einer Maßnahme oder einer Maßnahmenkombination in Bezug auf das Audiosignal des Fahrzeugs, insbesondere zum Verändern des Audiosignals des Fahrzeugs und/oder eine erneute Wiedergabe zumindest eines Abschnitts des Audiosignals erfolgt. Auch können auf dieser Basis können die Parameter zur weiteren bzw. erneuten Anpassung des Audiosignals ermittelt werden.According to a further optional embodiment, the method comprises determining an applicability, in particular a probability of success, that the parameters of the audio signal were or are not sufficiently modifiable for certain parameters and / or contents of the spoken language, in particular taking into account background noise. This is followed by a selection of a measure or a combination of measures with respect to the audio signal of the vehicle, in particular for changing the audio signal of the vehicle and / or a new reproduction of at least a portion of the audio signal. Also on this basis, the parameters for further or re-adjustment of the audio signal can be determined.

Gemäß eines zweiten Aspekts zeichnet sich die Erfindung aus durch eine Vorrichtung zur Steuerung eines Audiosystems eines Fahrzeugs, wobei die Vorrichtung dazu ausgebildet ist das Verfahren auszuführen. Die erfindungsgemäße Vorrichtung weist die gleichen Vorteile auf, wie diese vorstehend in Verbindung mit dem erfindungsgemäßen Verfahren beschrieben wurden. In einer zweckmäßigen Ausgestaltung weist die Vorrichtung weitere Mittel zur Durchführung des Verfahrens auf.According to a second aspect, the invention is characterized by a device for controlling an audio system of a vehicle, wherein the device is designed to carry out the method. The device according to the invention has the same advantages as described above in connection with the method according to the invention. In an expedient embodiment, the device has further means for carrying out the method.

Gemäß eines dritten Aspekts zeichnet sich die Erfindung aus durch ein mobiles Anwendergerät, das eine Schnittstelle mit dem Fahrzeug umfasst und eingerichtet ist, zumindest einen Teil des Verfahrens auszuführen.According to a third aspect, the invention is characterized by a mobile user equipment, which comprises an interface with the vehicle and is arranged to carry out at least a part of the method.

Gemäß eines vierten Aspekts zeichnet sich die Erfindung aus durch ein Computerprogramm, insbesondere ein Computerprogrammprodukt umfassend das Computerprogramm, wobei das Computerprogramm ausgebildet ist, bei seiner Ausführung auf einer Recheneinheit einen wesentlichen Teil des erfindungsgemäßen Verfahrens oder eine vorteilhafte Ausgestaltung des Verfahrens gemäß einem oder mehrerer weiterer Merkmale des Verfahrens durchzuführen. Insbesondere handelt es sich bei dem Computerprogramm um ein Computerprogramm, welches beispielsweise als eine App ( = „Applikation“) auf einer im Fahrzeug verbauten oder mitführbaren Vorrichtung umfassend zumindest eine Recheneinheit lauffähig ist.According to a fourth aspect, the invention is characterized by a computer program, in particular a computer program product comprising the computer program, wherein the computer program is designed, when executed on a computer unit, an essential part of the method according to the invention or an advantageous embodiment of the method according to one or more further features of the procedure. In particular, the computer program is a computer program which, for example, can run as an app (= "application") on a device installed or to be carried in the vehicle, comprising at least one arithmetic unit.

Das Computerprogramm bzw. Computerprogrammprodukt umfasst dabei einen ausführbaren Programmcode, der bei einer Ausführung durch eine Vorrichtung umfassend eine Recheneinheit, zumindest einen Teil des Verfahrens gemäß einem vorliegend beschriebenen Aspekt oder eine vorteilhafte Ausgestaltung des vorliegend beschriebenen Verfahrens ausführt. Das Computerprogrammprodukt kann dabei als ein Update eines bisherigen Computerprogramms ausgebildet sein, welches beispielsweise im Rahmen einer Funktionserweiterung, beispielsweise im Rahmen eines sogenannten „Remote Software Update“ die Teile des Computerprogramms bzw. des entsprechenden Programmcode für eine Vorrichtung des Fahrzeug umfasst. The computer program or computer program product in this case comprises an executable program code, which executes in an embodiment by a device comprising a computing unit, at least part of the method according to an aspect described herein or an advantageous embodiment of the method described herein. The computer program product can be designed as an update of a previous computer program, which includes, for example as part of a functional extension, for example in the context of a so-called "remote software update" the parts of the computer program or the corresponding program code for a device of the vehicle.

Beim Fahrzeug handelt es sich im Rahmen dieser Beschreibung bevorzugt um ein Kraftfahrzeug, insbesondere ein PKW (= Personen-Kraft-Wagen). Dies ist vorteilhaft, weil das Innenraum eines solchen Fahrzeugs einen vergleichsweise knapp bemessenen, akustisch weitgehend isolierten bzw. abgeschlossenen Raum bildet in dem mehrere auditive Kommunikationen und ein oder mehrere Audiosignale innerhalb eines eng bemessenen Raums erzeugt und gehört werden sollen. Grundsätzlich kann das Verfahren aber auch auf andere Arten der Fahrzeuge, z.B. einen Bus, Zug, Wasserfahrzeug, Flugzeug, ggf. in einer sinngemäß angepassten Form angewandt werden.In the context of this description, the vehicle is preferably a motor vehicle, in particular a passenger car (= passenger-power car). This is advantageous because the interior of such a vehicle forms a comparatively tight, acoustically largely isolated space in which multiple auditory communications and one or more audio signals are to be generated and heard within a confined space. In principle, however, the method can also be applied to other types of vehicles, e.g. a bus, train, watercraft, aircraft, if necessary, be applied in a mutatis mutandis adapted form.

Ausführungsbeispiele der Erfindung sind im Folgenden, ohne Einschränkung der Allgemeinheit, anhand der schematischen Zeichnung näher erläutert. Es zeigt:

  • 1 Ein Ablaufdiagramm zur Steuerung eines Audiosystems eines Fahrzeugs.
Embodiments of the invention are explained in more detail below, without limiting the generality, with reference to the schematic drawing. It shows:
  • 1 A flowchart for controlling an audio system of a vehicle.

Die 1 zeigt ein Ablaufdiagramm zur Steuerung eines Audiosystems eines Fahrzeugs.The 1 shows a flowchart for controlling an audio system of a vehicle.

Das Programm kann von einer Vorrichtung oder verteilt von mehreren Vorrichtungen abgearbeitet werden. Die Vorrichtung umfasst hierfür insbesondere eine Recheneinheit, einen Programm- und Datenspeicher, sowie beispielsweise eine oder mehrere Kommunikationsschnittstellen.The program can be executed by one device or distributed by several devices. For this purpose, the device comprises in particular a computing unit, a program and data memory, as well as, for example, one or more communication interfaces.

Das Programm wird in einem Schritt S1 gestartet, in dem gegebenenfalls Variablen initialisiert werden können.The program will be in one step S1 started in which variables can be initialized if necessary.

In einem Schritt S3 erfolgt ein Ermitteln insbesondere Prädizieren, eines Parameters einer auditiven Kommunikation im Innenraum eines Fahrzeugs.In one step S3 a determination is made, in particular, of prediction, of a parameter of an auditory communication in the interior of a vehicle.

In diesem Beispiel des Verfahrens wird die Stimme einer Person (eines Sprechers) im Innenraum des Fahrzeugs von einem, eine menschliche Stimme umfassenden, im Fahrzeug ausgegebenen Inhalt, z.B. aus des besagten Audiosystem des Fahrzeugs oder aus einer weiteren Audioausgabevorrichtung, insbesondere eines weiteren mobilen Anwendergeräts, unterschieden. Eine solche Unterscheidung kann im Verfahren abhängig von einem Abgleich eines Signals des Audiosystems mit dem Signal eines Mikrofons erfolgen.In this example of the method, the voice of a person (a speaker) in the interior of the vehicle is heard from a content in the vehicle, including a human voice, e.g. from the said audio system of the vehicle or from a further audio output device, in particular a further mobile user device, distinguished. Such a distinction may be made in the method depending on a matching of a signal of the audio system with the signal of a microphone.

Der besagte Parameter der auditiven Kommunikation kann eine, z.B. zeitlich geordnete, Sequenz aus mehreren Parameterwerten, z.B. in Bezug auf die nahe Vergangenheit, und/oder etwa den aktuellen Zeitpunkt, und/oder eine Prädiktion für die nahe Zukunft, umfassen. Beispielsweise kann ein Parameter der auditiven Kommunikation auch ein Maß der Veränderung der Werte eines bestimmten Parameterwerts im Verlauf der Zeit und/oder in Bezug auf ein auf den Raum (räumliche Dimension, Distanzeinheit, Positionswert, etc) bezogene Größe, z.B. Richtung oder Distanz repräsentieren.The said parameter of the auditive communication may be a, e.g. time-ordered, sequence of several parameter values, e.g. with respect to the near past, and / or about the current time, and / or a near future prediction. For example, a parameter of the auditory communication may also be a measure of the change in the values of a particular parameter value over time and / or in relation to a quantity related to the space (spatial dimension, distance unit, position value, etc.), e.g. Represent direction or distance.

Zumindest ein Parameter der auditiven Kommunikation kann im Verfahren auf Basis von Sensordaten, einer Historie, z.B. im Zusammenhang mit einer oder mehreren Kommunikationen im Fahrzeuginnenraum oder Kommunikationen mit Beteiligung bestimmter Personen und/oder unter Berücksichtigung einer Wahrscheinlichkeitsrechnung, ermittelt werden. Beispielsweise kann zumindest ein Parameter der auditiven Kommunikation, insbesondere anhand eines Abgleichs bzw. Verrechnung einer Vielzahl der Parameter aus der Historie prädiziert werden.At least one parameter of the auditive communication may be included in the method based on sensor data, a history, e.g. in connection with one or more communications in the vehicle interior or communications involving certain persons and / or considering a probability calculation. For example, at least one parameter of the auditory communication, in particular by means of a comparison or billing of a plurality of the parameters from the history can be predicted.

Auch kann eine Erkennung von Schlüsselworten oder bestimmter Kommunikationslaute (Ausrufewort, Interjektion, Zungenschnalzen, Aufschreien, Lachen, Schluchzen, Weinen, etc.) berücksichtigt werden. Insbesondere kann zumindest ein Parameter des im Innenraum auszugebenden Audiosignals abhängig von der erkannten Gestik und von einem erkannten Schlüsselwort, insbesondere vorausschauend angepasst werden. Also, a recognition of keywords or certain communication sounds (exclamation word, interjection, tongue lashes, screaming, laughing, sobbing, crying, etc.) are taken into account. In particular, at least one parameter of the audio signal to be output in the interior can be adapted in a forward-looking manner as a function of the recognized gesture and of a recognized keyword.

Bevorzugt kann im Verfahren ein Maß der Übereinstimmung zwischen der zumindest einer erkannten Gestik und zumindest einem Schlüsselwort oder eines Kommunikationslauts ermittelt und berücksichtigt werden.In the method, a measure of the correspondence between the at least one recognized gesture and at least one keyword or a communication tone can preferably be determined and taken into account.

In einem Schritt S5 erfolgt ein Verändern zumindest eines Parameters eines Audiosignals des Audiosystems des Fahrzeugs abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation.In one step S5 there is a change of at least one parameter of an audio signal of the audio system of the vehicle as a function of the determined, in particular predicated, parameter of the auditory communication.

Das Verändern umfasst in diesem Beispiel eine Anpassung des Audiosignals, insbesondere einzelner Kanäle eines Raumklangsignals, Proportionen zwischen einzelnen Kanälen, Vorschrift zum Verarbeiten (z.B. Mischen) einzelner Kanäle des Audiosignals, auch abhängig von bestimmten Optimierungskriterien.The modification comprises in this example an adaptation of the audio signal, in particular individual channels of a surround sound signal, proportions between individual channels, regulation for processing (eg mixing) individual channels of the Audio signal, also depending on certain optimization criteria.

Die Optimierungskriterien können dabei (in Bezug auf das Verfahren), z.B. ein insgesamt möglichst geringer Schallpegel im Innenraum, insbesondere an bestimmten Sitzpositionen, eine bessere subjektive Wahrnehmbarkeit und/oder Verständlichkeit der Kommunikation und/oder Inhalte des Audiosignals sein. Diese können z.B. mit den Nutzereinstellungen verändert werden.The optimization criteria may be (in relation to the method), e.g. a total of the lowest possible sound level in the interior, especially at certain seating positions, a better subjective perceptibility and / or intelligibility of the communication and / or contents of the audio signal. These may e.g. be changed with the user settings.

Beispielsweise erfolgt abhängig von dem zumindest einen ermittelten Parameter der auditiven Kommunikation im Innenraum ein Anpassen eines oder mehrerer Parameters der oder die kennzeichnend sind für die räumliche Aufteilung eines oder mehrerer auszugebenden Audiosignale, insbesondere Audiosignale mit unterschiedlichen Inhalten und/oder aus unterschiedlichen Audioquellen und/oder mehrerer Kanäle eines Raumklangsignals, innerhalb des Innenraums des Fahrzeugs.For example, depending on the at least one ascertained parameter of the auditory communication in the interior, an adjustment of one or more parameters is characteristic for the spatial distribution of one or more audio signals to be output, in particular audio signals with different contents and / or from different audio sources and / or several Channels of a surround sound signal, within the interior of the vehicle.

Die Beschallung mit bestimmen Audiosignalen, von denen es nicht nur einen, sondern auch mehrere gegeben kann, kann auch durch die Auswahl der Lautsprecher bzw. die Optimierung der Balance zwischen bestimmten Lautsprechern („links“, „rechts“, „center“, „vorne“, „hinten“), im Innenraum des Fahrzeugs angepasst werden. Weiterhin können alternativ oder zusätzlich Phasenparameter zumindest einer Signalkomponente eines Audiosignals derart angepasst werden, dass bei einem Insassen ein subjektiver Eindruck erzeugt wird, dass die einem (bestimmten) Teils bzw. Abschnitt eines Audioinhalts entsprechende Klangquelle aus einer bestimmten Richtung kommt und/oder sich in einer bestimmten Entfernung vom Insassen befindet und/oder bewegt wird.The sonication with certain audio signals, of which there can be not only one but also several, can also be achieved by selecting the loudspeakers or optimizing the balance between certain loudspeakers ("left", "right", "center", "front "," Rear ") to be adjusted in the interior of the vehicle. Furthermore, alternatively or additionally, phase parameters of at least one signal component of an audio signal can be adapted such that a subjective impression is produced on an occupant that the sound source corresponding to a (specific) part of an audio content comes from a specific direction and / or in one certain distance from the occupant and / or moved.

Dabei kann der Parameter des zumindest einen oder zwei von den auszugebenden Audiosignalen derart angepasst werden, dass sich eine (optimierte) Verteilung der zweier unterschiedlichen darin repräsentierten Audio-Inhalte innerhalb des Innenraums des Fahrzeugs ergibt. Insbesondere kann dabei von einer (in einem Raumklangsignal der Audioquelle möglicherweise vorgesehenen) Verteilung bzw. Abbildung der Teile des Audio-Inhalts auf bestimmte räumliche Bereiche und/oder Richtungen abgewichen werden.In this case, the parameter of the at least one or two of the audio signals to be output can be adapted such that there results an (optimized) distribution of the two different audio contents represented therein within the interior of the vehicle. In particular, it is possible to deviate from a distribution or illustration of the parts of the audio content (possibly provided in a surround sound signal of the audio source) to specific spatial areas and / or directions.

Ferner können im Verfahren auch die Eigenschaften der Ausbreitung, Dämpfung, Reflektion akustischer Wellen, insbesondere aus mehreren Frequenzbereichen im Innenraum des Fahrzeugs, berücksichtigt werden. Dabei können die entsprechenden Parameter, z.B. ein Datensatz repräsentierend ein akustisches Modell des Fahrzeuginnenraums, im Verfahren eingelesen und berücksichtigt werden.Furthermore, in the method, the properties of the propagation, attenuation, reflection of acoustic waves, in particular from a plurality of frequency ranges in the interior of the vehicle, are taken into account. The corresponding parameters, e.g. a record representing an acoustic model of the vehicle interior, read in the process and taken into account.

Ferner kann im Verfahren kann eine Zuordnung zwischen den (voreingestellten, ermittelten, oder geschätzten) Interessen der Insassen, z.B. bestimmter Personen, Insassen zugehörig zu bestimmten Personengruppen einerseits und der Arten und/oder Inhalten des Audiosignals andererseits berücksichtigt werden.Further, in the method, an association between the (pre-set, determined, or estimated) interests of the occupants, e.g. certain persons, occupants belonging to certain groups of persons on the one hand and the types and / or contents of the audio signal on the other.

Auch kann ein Maß der Relevanz bestimmter Abschnitte des Audiosignals für bestimmte Insassen, z.B. zugehörig zu bestimmten Personengruppen, Insassen an bestimmten Sitzen des Fahrzeugs ermittelt und berücksichtigt werden. Beispielsweise kann eine Anpassung zumindest eines Abschnitts des Audiosignals derart erfolgen, dass ein Alter (Baby, Kind, Teenager, Erwachsener, Senior, etc.) und/oder Geschlecht eines Insassen berücksichtigt wird. Dabei können auch die für einen bestimmten Insassen, z.B. Insassen zugehörig zu einer bestimmten Personengruppe, spezifischen Eigenschaften der auditiven Wahrnehmung, z.B. aus der Psychoakustik bekannte Phänomene bzw. Unterschiede, ermittelt berücksichtigt werden. In einem vereinfachten Fall können die Interessen und/oder spezifischen Eigenschaften der Wahrnehmung aus einem hinterlegten oder ermittelten Nutzerprofil ermittelt, insbesondere geschätzt werden. Dies kann z.B. in Form der Abweichungen oder Unterschieden, z.B. im Vergleich zu standardisierten Werten.Also, a measure of the relevance of certain portions of the audio signal to particular occupants, e.g. belonging to certain groups of persons, occupants are determined and taken into account at certain seats of the vehicle. For example, an adaptation of at least a portion of the audio signal can be made such that an age (baby, child, teenager, adult, senior, etc.) and / or gender of an occupant is taken into account. In doing so, those for a particular occupant, e.g. Inmates belonging to a particular group of persons, specific characteristics of auditory perception, e.g. from psychoacoustics known phenomena or differences, be taken into account. In a simplified case, the interests and / or specific characteristics of the perception can be determined from a stored or determined user profile, in particular estimated. This can e.g. in the form of variations or differences, e.g. compared to standardized values.

In einer alternativen oder zusätzlichen Variante der Erfindung ist vorgesehen, dass abhängig von dem erkannten Thema, Intonation und Richtung der Kommunikation, der an der Kommunikation beteiligten, bestimmten Insassen, eine Entscheidung zur Ausgabe eines von zwei oder mehreren unterschiedlichen Audiosignalen, z.B. aus unterschiedlichen Audiosignalquellen und/oder mit unterschiedlichen Inhalten, getroffen wird. Beispielsweise kann ein Umschalten zwischen zumindest zwei unterschiedlichen Audiosignalen, insbesondere mit wesentlich unterschiedlichen Inhalten, Themen, Stillrichtungen oder aus unterschiedlichen Audioquellen, ausgeführt werden.In an alternative or additional variant of the invention it is provided that, depending on the detected topic, intonation and direction of communication, the occupants involved in the communication, a decision to issue one of two or more different audio signals, e.g. from different audio signal sources and / or with different contents. For example, switching between at least two different audio signals, in particular with substantially different contents, themes, still directions or from different audio sources, can be performed.

Beispielsweise kann, wenn Eheleute bzw. Partner über ein Beziehungsthema, ein Thema betreffen Kinder, ein typisches Streitthema, sprechen und die entsprechenden (typischen, objektiv erfassbaren) Merkmale bzw. Parameter von diesem Thema erkannt werden, ein Abschnitt des Audiosignals mit einem passenden Inhalt, z.B. ein ruhigerer Musiktitel oder Programm (oder ein Abschnitt des Audiosignal der einen gewünschten psychologischen Effekt bewirken kann) ausgegeben wird, insbesondere anstatt von einem bisher ausgegebenen oder geplanten, z.B. einem eher unruhigen Inhalt.For example, when spouses or partners discuss a relationship issue, a topic, children, a typical topic of contention, and the corresponding (typical, objectively detectable) features or parameters are recognized by the subject, a portion of the audio signal with a suitable content, eg a quieter music track or program (or a portion of the audio signal that can produce a desired psychological effect) is output, in particular instead of a previously issued or scheduled, e.g. a rather restless content.

Optional kann im Verfahren eine (für die Person selbst mehr oder minder bewusste oder intuitiv oder reflexartig ausgeführte) körperliche Regung, die der Absicht in eine bestimmte Richtung zuzuhören, z.B. umfassend eine Kopfdrehung oder eine Hand am rechten Ohr oder am linken Ohr, ermittelt werden und im Verfahren verarbeitet werden. In einem Beispiel kann dabei ein Parameter, insbesondere repräsentieren die Signallautstärke des aus der jeweiligen Richtung auszugebenden Audiosignals bzw. des Inhalts aus einer betreffenden, bestimmten Richtung verändert, in diesem Beispiel erhöht werden, und/oder ein Abschnitt des Audiosignals, z.B. der letzte Satz oder Phrase, können wiederholt werden.Optionally, in the process, a (for the person himself more or less conscious or intuitive or knee-jerked) physical impulse intended to listen in a particular direction, eg comprising a head rotation or a hand on the right ear or the left ear, are detected and processed in the procedure. In one example, a parameter, in particular representing the signal volume of the audio signal to be output from the respective direction or the content from a particular, particular direction, may be increased in this example, and / or a portion of the audio signal, eg the last sentence or Phrase, can be repeated.

Beispielsweise kann eine Umverteilung der ausgegebenen Audio-Inhalte zwischen zumindest zwei Raumbereichen des Fahrzeugs erfolgt, indem z.B. der vordere linke Bereich stärker und/oder mit veränderten Frequenzcharakteristik als der hintere rechte Bereich mit einem bestimmten Audio-Inhalt beschallt wird. Es kann somit eine Verteilung zwischen Vorder- und Rücksitzen, zwischen Fahrersitz und den übrigen Sitzen oder zwischen der rechten und der linken Hälfte des Innenraums erfolgen. Hierdurch kann beispielsweise die auditive Kommunikation eines Insassen, der den Beifahrersitz belegt und sich an Insassen auf der Rückbank wendet, dadurch verbessert werden, dass beispielsweise ein über die hinteren Lautsprecher auszugebenden bzw. ausgegebenes Motorgeräusch bzw. Fahrgeräusch im Bereich der Rückbank wesentlich abgeschwächt und/oder mit veränderten Parametern ausgegeben wird. Das über die, dem Fahrersitz zugewandten, Lautsprecher ausgegebene Motorgeräusch bzw. Fahrgeräusch kann demgegenüber fortbestehen bleiben.For example, redistribution of the output audio content between at least two spatial regions of the vehicle may be accomplished by e.g. the front left area is stronger and / or sonicated with altered frequency characteristics than the rear right area with a particular audio content. It can thus be a distribution between the front and rear seats, between the driver's seat and the other seats or between the right and left half of the interior. As a result, for example, the auditory communication of an occupant who occupies the passenger seat and turns to inmates in the back seat, be improved by, for example, substantially over the rear speakers to be issued or spent engine noise or driving noise in the backbone significantly attenuated and / or is output with changed parameters. In contrast, the engine noise or driving noise emitted via the loudspeakers facing the driver's seat can remain in existence.

Dabei können z.B. sogenannte Klangquellen für zumindest zwei Audiosignale, die unterschiedlichen Audio-Inhalten und/oder Signalquellen entsprechen, abhängig von dem zumindest einen ermittelten Position eines Sprechers (z.B. des aktuell auditiv kommunizierenden Insassen) gesteuert, insbesondere geregelt werden.Thereby, e.g. so-called sound sources for at least two audio signals that correspond to different audio contents and / or signal sources, depending on the at least one determined position of a speaker (e.g., the currently auditory communicating occupant) controlled, in particular regulated.

Beispielsweise kann eine Zuordnung eines oder mehrerer Kanäle eines Raumklangsignals zu bestimmten physikalischen Lautsprecher und/oder virtuelle Klangquellen abhängig von der Kopfposition und/oder Kopfrichtung und/oder Blickrichtung des Insassen angepasst werden.For example, an assignment of one or more channels of a surround sound signal to certain physical speakers and / or virtual sound sources can be adjusted depending on the head position and / or head direction and / or viewing direction of the occupant.

Insbesondere kann ein zeitliches Variieren der räumlichen Verteilung der Audio-Inhalte (eine sich über die Zeit verändernde, adaptive räumliche Verteilung) ausgeführt werden. Das Variieren der räumlichen Verteilung der Audio-Inhalte kann abhängig von einer erkannten Veränderung, insbesondere einer Prädiktion einer Veränderung des zumindest einen Parameters der auditiven Kommunikation erfolgen.In particular, a temporal variation of the spatial distribution of the audio contents (a time-varying, adaptive spatial distribution) may be performed. Varying the spatial distribution of the audio content can be done depending on a detected change, in particular a prediction of a change in the at least one parameter of the auditory communication.

Insbesondere wird im Verfahren eine subjektiv empfundene Richtung und/oder Entfernung, und/oder ein subjektiv empfundener Ort, an dem ein bestimmter durch das Audiosignal repräsentierter Inhalts durch die menschliche (binourale) akustische Wahrnehmung empfunden (gehört) wird, angepasst. Beispielsweise können dabei die den bestimmten Inhalten des Audiosignals entsprechenden Klangquellen hinsichtlich ihrer wahrgenommenen Position und/oder Richtung und/oder Entfernung variiert werden.In particular, in the method, a subjectively perceived direction and / or distance, and / or a subjectively perceived location at which a particular content represented by the audio signal is perceived (heard) by the human (binaural) acoustic perception is adapted. For example, the sound sources corresponding to the particular contents of the audio signal can be varied with regard to their perceived position and / or direction and / or distance.

Im Verfahren kann ein oder mehrere Phasenparameter, insbesondere ein Phasenversatz zumindest einer Signalkomponente der Teile des Audiosignals oder zweier Audiosignale die aus zumindest zwei unterschiedlichen Lautsprechern im Innenraum ausgegeben wird bzw. auszugeben sind, zweckmäßig angepasst werden.In the method, one or more phase parameters, in particular a phase offset of at least one signal component of the parts of the audio signal or of two audio signals which are output from at least two different loudspeakers in the interior or are to be output, are suitably adapted.

Insbesondere kann dabei eine Steuerung, bevorzugt Regelung eines Parameters eines oder mehrerer auszugebenden Audiosignale oder Kanäle eines auszugebenden Raumklangsignals, abhängig vom dem zumindest einem Parameter einer aktuellen oder prädizierten auditiven Kommunikation ausgeführt werden. Dabei können die Parameter des Audiosignals auch derart angepasst werden, dass sich eine sogenannte Umhüllende und/oder ein integrierter Wert und/oder ein tiefpassgefilterter Wert zumindest eines Parameters innerhalb vorausbestimmter Grenzen ergibt.In particular, a control, preferably regulation of a parameter of one or more audio signals or channels of a spatial sound signal to be output, can be carried out depending on the at least one parameter of a current or predicated auditory communication. In this case, the parameters of the audio signal can also be adapted such that a so-called envelope and / or an integrated value and / or a low-pass filtered value of at least one parameter results within predetermined limits.

Beispielsweise kann auf das Sprechen und/oder einen erfassten oder prädizierten Parameter auditiven Kommunikation des zumindest einen ersten Insassen, je nachdem an welchen Sitzplatz er innerhalb des Fahrzeugs sitzt, und/oder in welche Richtung der erste Insasse kommuniziert, das im Innenraum des Fahrzeugs auszugebende Audiosignal anders, insbesondere stärker angepasst werden, als auf das Sprechen und/oder einen erwarteten Parameter der auditiven Kommunikation eines weiteren, zweiten Insassen im Innenraum des Fahrzeugs, der sich in auf einem anderen Sitzplatz innerhalb des Innenraums befindet.For example, the speech and / or a detected or predicated parameter auditory communication of the at least one first occupant, depending on which seat he sits inside the vehicle, and / or in which direction the first occupant communicates, the audio signal to be output in the interior of the vehicle be adapted differently, in particular more strongly, than on the speaking and / or an expected parameter of the auditory communication of another, second occupant in the interior of the vehicle, which is in on another seat within the interior.

In einem Schritt S7 wird das Programm beendet und kann gegebenenfalls wieder in dem Schritt S1 gestartet werden.In one step S7 the program terminates and may again be in the step S1 to be started.

Der Verfahren kann optional einen oder mehrere der folgenden Schritte umfassen:The method may optionally include one or more of the following steps:

Einen Schritt bei dem die Veränderung des Parameters des Audiosignals zumindest einen Raumklangparameter betrifft, wobei, bevorzugt zumindest eine Richtung, aus der das Audiosignal des Audiosystems des Fahrzeugs kommt oder gehört wird, insbesondere vom Fahrer des Fahrzeugs gehört wird, angepasst wird. A step in which the change of the parameter of the audio signal relates to at least one surround sound parameter, wherein, preferably at least one direction from which the audio signal of the audio system of the vehicle comes or is heard, in particular heard by the driver of the vehicle is adjusted.

Einen Schritt bei dem die Veränderung des Parameters des Audiosignals umfasst:

  • eine Abwandlung des Audiosignals im Frequenzbereich derart, dass Signalkomponenten des Audiosignals, die den Frequenzbereich der menschlichen Sprache, insbesondere innerhalb der Stimme des Sprechers betreffen, derart abgewandelt werden, dass die Signalenergie auf eine oder mehrere Frequenzbereiche verteilt wird, die den Frequenzbereich der menschlichen Stimme, insbesondere der Stimme des Sprechers, nicht oder in einem geringeren Maße betreffen.
A step in which the change of the parameter of the audio signal comprises:
  • a modification of the audio signal in the frequency domain such that signal components of the audio signal which relate to the frequency range of human speech, in particular within the voice of the speaker, are modified such that the signal energy is distributed to one or more frequency ranges representing the frequency range of the human voice; especially the voice of the speaker, not or to a lesser extent.

Einen Schritt bei dem die Veränderung des Parameters des Audiosignals eine zumindest teilweise Verlagerung der Frequenzen des Audiosignals umfasst, die zumindest statistisch den Frequenzen des Sprachsignals des Sprechers entsprechen, von einer ersten Raumrichtung, in der sich der Sprecher befindet zu einer zweiten Raumrichtung, die abweichend als die erste Raumrichtung, insbesondere im Wesentlichen entgegengesetzt zu der ersten Richtung, angeordnet ist.A step in which changing the parameter of the audio signal comprises at least partially shifting the frequencies of the audio signal that at least statistically correspond to the frequencies of the speaker's speech signal, from a first spatial direction in which the speaker is to a second spatial direction different than the first spatial direction, in particular substantially opposite to the first direction, is arranged.

Einen Schritt umfassend:

  • - ein Einlernen einer bestimmten Stimme und/oder einer bestimmten körperlichen Regung eines Sprechers zu einem oder mehreren Zeitintervallen, und daraufhin:
  • - bei einer Wiedererkennung der bestimmten Stimme und/oder der bestimmten körperlichen Regung eines Sprechers zu einem oder mehreren späteren Zeitintervallen:
  • - Anwendung einer optimierten oder vorgespeicherten Anpassung des Audiosignals für die Stimme des Sprechers.
One step:
  • - teaching a particular voice and / or a particular physical emotion of a speaker at one or more time intervals, and then:
  • upon recognition of the particular voice and / or physical vocation of a speaker at one or more later time intervals:
  • - Application of an optimized or pre-stored adaptation of the audio signal for the voice of the speaker.

Eingelernte Stimmen können als ein oder mehrere, für die Stimme typische Parameterwerte repräsentiert werden. Auf Basis solcher Parameter können Erkennungsdaten für eine oder mehrere bestimmte Stimmen ermittelt bzw. im Verfahren verarbeitet werden. Beispielsweise können die Erkennungsdaten für eine oder mehrere Stimmen auch auf Basis der Daten einer Sprachsteuerung, Freisprechvorrichtung des Fahrzeugs, oder eines mobilen Anwendergeräts (z.B. beim Telefonieren) gewonnen werden.Teach-in voices can be represented as one or more typical parameter values for the voice. On the basis of such parameters, identification data for one or more specific voices can be determined or processed in the method. For example, the recognition data for one or more voices may also be obtained based on the data of a voice control, hands-free device of the vehicle, or a mobile user device (e.g., when making a phone call).

Einen Schritt umfassend:

  • - ein Einlernen einer bestimmten körperlichen Regung, die dem Sprechen, insbesondere bei einem bestimmten Insassen, einer sprachlichen Kommunikation vorausgeht zu einem oder mehreren Zeitintervallen, und daraufhin:
  • - bei einer Wiedererkennung der körperlichen Regung, insbesondere auch beim Wiedererkennen des bestimmten Sprechers und/oder der für den Sprecher aus mehreren Zeitintervallen typischen körperlichen Regung:
  • - Anwendung einer optimierten oder vorgespeicherten Anpassung des Audiosignals für die Stimme des Sprechers.
One step:
  • - A learning of a certain physical impulse, which precedes the speech, especially in a particular occupant, a linguistic communication at one or more time intervals, and then:
  • in the case of a recognition of the physical impulse, in particular also in the recognition of the particular speaker and / or the physical impulse typical for the speaker from several time intervals:
  • - Application of an optimized or pre-stored adaptation of the audio signal for the voice of the speaker.

Insbesondere bezieht sich das Einlernen der Stimmen und/oder körperliche Regungen auf bestimmte, für bestimmte Insassen, insbesondere Insassen zugehörig zu bestimmten Personengruppen, charakteristische Merkmale, z.B. entsprechende qualitative und/oder quantitative Werte oder Zusammenhänge zwischen solchen.In particular, the training of the voices and / or physical impulses refers to certain characteristics associated with certain occupants, in particular occupants belonging to particular groups of persons, e.g. appropriate qualitative and / or quantitative values or relationships between such.

Bevorzugt bezieht sich ein Einlernen auf das Ermitteln eines (naturwissenschaftlichen, mathematischen) Zusammenhangs zwischen einem Parameter einer oder mehreren körperlichen Regungen, die abhängig von bestimmten Mustern der Gestik und/oder Mimik sind, und einer einhergehenden oder nachfolgenden auditiven Kommunikation, insbesondere dem Sprechen einer Person (Insassen). Dies kann im Verfahren in Bezug auf eine bestimmte Person oder in Bezug auf eine Person mit bestimmten, z.B. sensorisch erkennbaren Eigenschaften (Körpergröße, Kleidung, Bewegungsparameter, Personengruppe, etc.) oder in Bezug auf eine Person an einer bestimmten Raumposition und/oder an einem Sitzplatz des Fahrzeugs eingelernt werden.Preferably, learning refers to the determination of a (scientific, mathematical) relationship between a parameter of one or more bodily emotions that are dependent on particular patterns of gestures and / or facial expressions and a concomitant or subsequent auditive communication, in particular speaking of a person (occupant). This may be in the process with respect to a particular person or with respect to a person having certain, e.g. sensory characteristics (body size, clothing, movement parameters, group of people, etc.) or with respect to a person at a specific room position and / or seat of the vehicle are taught.

Erfindungsgemäß kann das besagte Einlernen ferner umfassen: Erfassen eines Feedback-Indikators, der kennzeichnend ist für eine zumindest einmal, zweckmäßige, passende bzw. zufriedenstellende Anpassung des Audiosignals, und daraufhin eine Berücksichtigung des Feedback-Indikators bei einer wiederholten Ausführung des Verfahrens.According to the invention, said teaching may further comprise: detecting a feedback indicator indicative of at least one, convenient, matching adaptation of the audio signal, and then considering the feedback indicator in a repeated execution of the method.

Einen Schritt umfassend:

  • - Erfassen eines Kommunikationsvorhabens und/oder einer Stimme zumindest eines, insbesondere eines bestimmten Insassen des Fahrzeugs und/oder eines Insassen an einem bestimmten Sitzplatz des Fahrzeugs, und
  • - Verändern des Audiosignals abhängig von dem erfassten Kommunikationsvorhabens und/oder der Stimme des Insassen.
One step:
  • Detecting a communication project and / or a voice of at least one, in particular a certain occupant of the vehicle and / or an occupant at a certain seat of the vehicle, and
  • - Changing the audio signal depending on the detected communication project and / or the voice of the occupant.

In diesem Beispiel kann das Kommunikationsvorhaben ein Wahrscheinlichkeitsmaß repräsentieren, dass eine sprachliche Kommunikation, insbesondere von einem bestimmten Insassen oder aus einem bestimmten Raumbereich des Innenraum des Fahrzeugs, insbesondere mit einem gewissen akustischen Parameter, zu erwarten ist. Alternativ kann zumindest ein Wahrscheinlichkeitsschwellwert vorgegeben werden, wobei nur ein Kommunikationsvorhaben oberhalb des Schwellwerts berücksichtigt wird.In this example, the communication project may represent a probability measure that a linguistic communication, in particular from a certain occupant or from a certain area of the interior of the vehicle, in particular with a certain acoustic parameter, is to be expected. Alternatively, at least one probability threshold can be specified, whereby only one communication project above the threshold value is taken into account.

Einen Schritt bei dem auch erkannt wird, dass es sich bei der erfassten Stimme um eine Personenstimme, insbesondere um eine Stimme einer bestimmten Person oder bestimmten Personengruppe, handelt und das Verändern des Audiosignals abhängig von der Erkennung der Stimme als eine Personenstimme, insbesondere abhängig vom Erkennen der Stimme einer bestimmten Person oder Personengruppe erfolgt.A step in which it is also recognized that the recorded voice is a person's voice, in particular a voice of a certain person or group of persons, and the changing of the audio signal depending on the recognition of the voice as a person's voice, in particular depending on the recognition the voice of a particular person or group of people.

Einen Schritt bei dem die Stimme eines Sprechers im Innenraum des Fahrzeugs von einer Stimme aus einem Multimediaabspielgerät, insbesondere dem Soundsystem des Fahrzeugs oder einem an das Fahrzeug angeschlossenen mitgeführten Multimediaabspielgerät, unterschieden wird.A step in which the voice of a speaker in the interior of the vehicle is distinguished from a voice from a multimedia player, in particular the sound system of the vehicle or a multimedia player attached to the vehicle.

Einen Schritt bei dem das Erfassen des Kommunikationsvorhabens zumindest eines Insassen des Fahrzeugs mittels des Erkennens seiner Lippenbewegung und/oder einer körperlichen Regung, insbesondere mittels einer Innenraumkamera erfolgt.A step in which the detection of the communication project of at least one occupant of the vehicle by means of recognizing his lip movement and / or a physical movement, in particular by means of an interior camera.

Einen Schritt bei dem das Audiosignal abhängig von der Position des Sprechers und/oder einer relativen Richtung, aus der der gesprochene Inhalt kommt oder entsprechend dem Kommunikationsvorhaben kommen wird, angepasst wird.A step in which the audio signal is adjusted depending on the position of the speaker and / or a relative direction from which the spoken content comes or will come in accordance with the communication project.

Einen Schritt bei dem eine Emotionserkennung und/oder Absichtserkennung eines Insassen des Fahrzeugs erkannt wird und im Verfahren berücksichtigt wird, wobei daraufhin die Veränderung des Audiosignals, bevorzugt in unterschiedlicher Weise, erfolgt.A step in which an emotion recognition and / or intent recognition of an occupant of the vehicle is detected and taken into account in the method, wherein then the change of the audio signal, preferably in different ways, takes place.

Einen Schritt umfassend:

  • - Ermitteln einer Anwendbarkeit, insbesondere einer Erfolgswahrscheinlichkeit, dass die Parameter oder Inhalte der gesprochenen Sprache und die Parameter des Audiosignals, insbesondere im Hinblick auf einen Hintergrundgeräusch nicht hinreichend abwandelbar sind,
und daraufhin:
Auswahl einer Maßnahme oder einer Maßnahmenkombination in Bezug auf das Audiosignal des Fahrzeugs, insbesondere zum Verändern des Audiosignals des Fahrzeugs.One step:
  • Determining an applicability, in particular a probability of success, that the parameters or contents of the spoken language and the parameters of the audio signal, in particular with regard to a background noise, are not sufficiently modifiable,
and then:
Selection of a measure or a combination of measures with respect to the audio signal of the vehicle, in particular for changing the audio signal of the vehicle.

Claims (16)

Verfahren zur Steuerung eines Audiosystems eines Fahrzeugs, umfassend: - Ermitteln insbesondere Prädizieren, eines Parameters einer auditiven Kommunikation im Innenraum eines Fahrzeugs, und - Verändern zumindest eines Parameters eines Audiosignals des Audiosystems des Fahrzeugs abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation.A method of controlling an audio system of a vehicle comprising: In particular, determining prediction of a parameter of an auditive communication in the interior of a vehicle, and - Changing at least one parameter of an audio signal of the audio system of the vehicle depending on the determined, in particular predicated parameters of the auditory communication. Verfahren nach dem Anspruch 1, bei dem die Veränderung des Parameters des Audiosignals zumindest einen Raumklangparameter betrifft, wobei, bevorzugt zumindest eine Richtung, aus der das Audiosignal des Audiosystems des Fahrzeugs kommt oder gehört wird, insbesondere vom Fahrer des Fahrzeugs gehört wird, angepasst wird.Method according to the Claim 1 in which the change in the parameter of the audio signal relates to at least one surround sound parameter, wherein, preferably at least one direction from which the audio signal of the audio system of the vehicle comes or is heard, in particular heard by the driver of the vehicle, is adjusted. Verfahren nach einem der vorangegangenen Ansprüche, wobei die Veränderung des Parameters des Audiosignals umfasst: eine Abwandlung des Audiosignals im Frequenzbereich derart, dass Signalkomponenten des Audiosignals, die den Frequenzbereich der menschlichen Sprache, insbesondere der Stimme des Sprechers betreffen, derart abgewandelt werden, dass die Signalenergie auf eine oder mehrere Frequenzbereiche verteilt wird, die den Frequenzbereich der menschlichen Stimme, insbesondere der Stimme des Sprechers, nicht oder in einem geringeren Maße betreffen.Method according to one of the preceding claims, wherein the change of the parameter of the audio signal comprises: a modification of the audio signal in the frequency domain such, that signal components of the audio signal which relate to the frequency range of the human speech, in particular the voice of the speaker, are modified in such a way, that the signal energy is distributed to one or more frequency ranges that do not affect the frequency range of the human voice, in particular the voice of the speaker, or to a lesser extent. Verfahren nach einem der vorangegangenen Ansprüche, bei dem die Veränderung des Parameters des Audiosignals eine zumindest teilweise Verlagerung der Frequenzen des Audiosignals umfasst, die zumindest statistisch den Frequenzen des Sprachsignals des Sprechers entsprechen, von einer ersten Raumrichtung, in der sich der Sprecher befindet zu einer zweiten Raumrichtung, die abweichend als die erste Raumrichtung, insbesondere im Wesentlichen entgegengesetzt zu der ersten Richtung, angeordnet ist.Method according to one of the preceding claims, in which the change in the parameter of the audio signal comprises an at least partial shift of the frequencies of the audio signal which at least statistically correspond to the frequencies of the speaker's voice signal, from a first spatial direction in which the speaker is located to a second Direction of space, which is arranged differently than the first spatial direction, in particular substantially opposite to the first direction. Verfahren nach einem der vorangegangenen Ansprüche, auch umfassend: - ein Einlernen einer bestimmten Stimme und/oder einer bestimmten körperlichen Regung eines Sprechers zu einem oder mehreren Zeitintervallen, und daraufhin: - bei einer Wiedererkennung der bestimmten Stimme und/oder der bestimmten körperlichen Regung eines Sprechers zu einem oder mehreren späteren Zeitintervallen: - Anwendung einer optimierten oder vorgespeicherten Anpassung des Audiosignals für die Stimme des Sprechers.Method according to one of the preceding claims, also comprising: - teaching a particular voice and / or a particular physical emotion of a speaker at one or more time intervals, and then: upon recognition of the particular voice and / or physical vocation of a speaker at one or more later time intervals: - Application of an optimized or pre-stored adaptation of the audio signal for the voice of the speaker. Verfahren nach einem der vorangegangenen Ansprüche, auch umfassend: - ein Einlernen einer bestimmten körperlichen Regung, die dem Sprechen, insbesondere bei einem bestimmten Insassen, einer sprachlichen Kommunikation vorausgeht zu einem oder mehreren Zeitintervallen, und daraufhin: - bei einer Wiedererkennung der körperlichen Regung, insbesondere auch beim Wiedererkennen des bestimmten Sprechers und/oder der für den Sprecher aus mehreren Zeitintervallen typischen körperlichen Regung: - Anwendung einer optimierten oder vorgespeicherten Anpassung des Audiosignals für die Stimme des Sprechers.Method according to one of the preceding claims, also comprising: - a learning of a certain physical impulse, which is a speech, in particular for a certain occupant, a linguistic Communication precedes at one or more time intervals, and thereupon: - upon recognition of the physical impulse, in particular also on recognition of the particular speaker and / or the physical impulse typical of the speaker from several time intervals: - application of an optimized or pre-stored adaptation of the audio signal for the voice of the speaker. Verfahren nach einem der vorangegangenen Ansprüche auch umfassend: - Erfassen eines Kommunikationsvorhabens und/oder einer Stimme zumindest eines, insbesondere eines bestimmten Insassen des Fahrzeugs und/oder eines Insassen an einem bestimmten Sitzplatz des Fahrzeugs, und - Verändern des Audiosignals abhängig von dem erfassten Kommunikationsvorhabens und/oder der Stimme des Insassen.Method according to one of the preceding claims also comprising: Detecting a communication project and / or a voice of at least one, in particular a certain occupant of the vehicle and / or an occupant at a certain seat of the vehicle, and - Changing the audio signal depending on the detected communication project and / or the voice of the occupant. Verfahren nach dem Anspruch 7, bei dem auch erkannt wird, dass es sich bei der erfassten Stimme um eine Personenstimme, insbesondere um eine Stimme einer bestimmten Person oder bestimmten Personengruppe, handelt und das Verändern des Audiosignals abhängig von der Erkennung der Stimme als eine Personenstimme, insbesondere abhängig vom Erkennen der Stimme einer bestimmten Person oder einer Person zugehörig zu einer Personengruppe erfolgt.Method according to the Claim 7 in which it is also recognized that the recorded voice is a person's voice, in particular a voice of a specific person or group of persons, and the changing of the audio signal depends on the recognition of the voice as a person's voice, in particular depending on the recognition of the voice Voice of a particular person or person belonging to a group of people. Verfahren nach einem der Ansprüche 7 oder 8, bei dem die Stimme eines Sprechers im Innenraum des Fahrzeugs von einer Stimme aus einem Multimediaabspielgerät, insbesondere dem Soundsystem des Fahrzeugs oder einem an das Fahrzeug angeschlossenen, mitgeführten Multimediaabspielgerät, unterschieden wird.Method according to one of Claims 7 or 8th in which the voice of a speaker in the interior of the vehicle is distinguished by a voice from a multimedia player, in particular the sound system of the vehicle or a multimedia player connected to the vehicle. Verfahren nach einem der Ansprüche 7 bis 9, bei dem das Erfassen des Kommunikationsvorhabens zumindest eines Insassen des Fahrzeugs mittels des Erkennens seiner Lippenbewegung und/oder einer körperlichen Regung, insbesondere mittels einer Innenraumkamera erfolgt.Method according to one of Claims 7 to 9 in which the detection of the communication project of at least one occupant of the vehicle takes place by means of the recognition of his lip movement and / or a bodily movement, in particular by means of an interior camera. Verfahren nach einem der Ansprüche 7 bis 10, bei dem das Audiosignal abhängig von der Position des Sprechers und/oder einer relativen Richtung, aus der der gesprochene Inhalt kommt oder entsprechend dem Kommunikationsvorhaben kommen wird, angepasst wird.Method according to one of Claims 7 to 10 in which the audio signal is adjusted depending on the position of the speaker and / or a relative direction from which the spoken content comes or will come in accordance with the communication project. Verfahren nach einem der Ansprüche 7 bis 11, bei dem eine Emotionserkennung und/oder Absichtserkennung eines Insassen des Fahrzeugs erkannt wird und im Verfahren berücksichtigt wird, wobei daraufhin die Veränderung des Audiosignals, bevorzugt in unterschiedlicher Weise, erfolgt.Method according to one of Claims 7 to 11 in which an emotion recognition and / or intent recognition of an occupant of the vehicle is detected and taken into account in the method, wherein then the change of the audio signal, preferably in different ways, takes place. Verfahren nach einem der Ansprüche 7 bis 12, auch umfassend, - Ermitteln einer Anwendbarkeit, insbesondere einer Erfolgswahrscheinlichkeit, dass die Parameter des Audiosignals bei bestimmten Parameter und/oder Inhalten der gesprochenen Sprache, insbesondere unter Berücksichtigung eines Hintergrundgeräuschs nicht hinreichend abwandelbar waren oder sind, und daraufhin: Auswahl einer Maßnahme oder einer Maßnahmenkombination in Bezug auf das Audiosignal des Fahrzeugs, insbesondere zum Verändern des Audiosignals des Fahrzeugs und/oder eine erneute Wiedergabe zumindest eines Abschnitts des Audiosignals.Method according to one of Claims 7 to 12 also comprising, determining an applicability, in particular a probability of success, that the parameters of the audio signal for certain parameters and / or contents of the spoken language, in particular taking into account a background noise were not sufficiently modified or are, and then: Selection of a measure or a combination of measures in relation to the audio signal of the vehicle, in particular for changing the audio signal of the vehicle and / or a replay of at least a portion of the audio signal. Vorrichtung zur Steuerung eines Audiosystems eines Fahrzeugs, wobei die Vorrichtung dazu ausgebildet ist ein Verfahren nach einem der Ansprüche 1 bis 13 auszuführen.Device for controlling an audio system of a vehicle, wherein the device is designed for a method according to one of Claims 1 to 13 perform. Mobiles Anwendergerät zur Steuerung eines Audiosystems eines Fahrzeugs, das eine Schnittstelle mit dem Fahrzeug umfasst und eingerichtet ist, zumindest einen Teil des Verfahrens nach einem der Ansprüche 1 bis 13 auszuführen.A mobile user device for controlling an audio system of a vehicle, which comprises an interface with the vehicle and is set up, at least part of the method according to one of Claims 1 to 13 perform. Computerprogramm, insbesondere ein Computerprogrammprodukt umfassend ein Computerprogramm, wobei das Computerprogramm ausgebildet ist, bei seiner Ausführung auf einer Recheneinheit das Verfahren nach einem der Ansprüche 1-13 durchzuführen.Computer program, in particular a computer program product comprising a computer program, wherein the computer program is designed, when executed on a computing unit, the method according to one of Claims 1 - 13 perform.
DE102017213256.6A 2017-08-01 2017-08-01 Method, device, mobile user device, computer program for controlling an audio system of a vehicle Pending DE102017213256A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102017213256.6A DE102017213256A1 (en) 2017-08-01 2017-08-01 Method, device, mobile user device, computer program for controlling an audio system of a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017213256.6A DE102017213256A1 (en) 2017-08-01 2017-08-01 Method, device, mobile user device, computer program for controlling an audio system of a vehicle

Publications (1)

Publication Number Publication Date
DE102017213256A1 true DE102017213256A1 (en) 2019-02-07

Family

ID=65019983

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017213256.6A Pending DE102017213256A1 (en) 2017-08-01 2017-08-01 Method, device, mobile user device, computer program for controlling an audio system of a vehicle

Country Status (1)

Country Link
DE (1) DE102017213256A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021128098A1 (en) 2021-10-28 2023-05-04 Audi Aktiengesellschaft Motor vehicle with an audio device and method for outputting audio content in a motor vehicle

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150310865A1 (en) * 2011-05-12 2015-10-29 Johnson Controls Technology Company Vehicle voice recognition systems and methods
DE102015118553A1 (en) * 2014-10-29 2016-05-04 Gm Global Technology Operations, Llc Systems and methods for selecting audio filter methods

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150310865A1 (en) * 2011-05-12 2015-10-29 Johnson Controls Technology Company Vehicle voice recognition systems and methods
DE102015118553A1 (en) * 2014-10-29 2016-05-04 Gm Global Technology Operations, Llc Systems and methods for selecting audio filter methods

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021128098A1 (en) 2021-10-28 2023-05-04 Audi Aktiengesellschaft Motor vehicle with an audio device and method for outputting audio content in a motor vehicle

Similar Documents

Publication Publication Date Title
EP3661797B1 (en) Method, device, mobile user apparatus and computer program for controlling an audio system of a vehicle
EP3327931B1 (en) Sound reproduction device with scenario simulation
WO2021023667A1 (en) System and method for assisting selective hearing
DE102014214052A1 (en) Virtual masking methods
DE10308414A1 (en) Method for controlling an acoustic system in the vehicle
DE102019200956A1 (en) Signal processing device, system and method for processing audio signals
DE102017213249A1 (en) Method and system for generating an auditory message in an interior of a vehicle
EP3396978B1 (en) Hearing aid and method for operating a hearing aid
DE10156954B4 (en) Image-based adaptive acoustics
WO2016005415A1 (en) Hearing system with user-specific programming
WO2008009429A1 (en) Method, spoken dialog system, and telecommunications terminal device for multilingual speech output
Cueille et al. Effects of reverberation on speech intelligibility in noise for hearing-impaired listeners
DE102017213252A1 (en) A method, apparatus and computer program for varying an audio content to be output in a vehicle
DE102017213256A1 (en) Method, device, mobile user device, computer program for controlling an audio system of a vehicle
WO2022023417A2 (en) System and method for headphone equalization and room adjustment for binaural playback in augmented reality
EP3833052A1 (en) Method for training a hearing situation classifier for a hearing aid
DE102014210760B4 (en) operation of a communication system
DE102017213260A1 (en) Method, device, mobile user device, computer program for controlling an audio system of a vehicle
EP1881738A2 (en) Method of operating a hearing aid and assembly with a hearing aid
DE102017111443A1 (en) Autiosystem and method for selecting a content selection and / or setting a sound setting
DE112019007580B4 (en) Sound field control device and sound field control method
DE102017213246A1 (en) Method, apparatus and computer program for generating auditory messages
DE102018207530A1 (en) Device and method for improving privacy
CN117953890A (en) Volume control method in vehicle, electronic device and storage medium
DE102014214053A1 (en) Autogenerative masking signals

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed
R016 Response to examination communication