DE102017213246A1 - Method, apparatus and computer program for generating auditory messages - Google Patents

Method, apparatus and computer program for generating auditory messages Download PDF

Info

Publication number
DE102017213246A1
DE102017213246A1 DE102017213246.9A DE102017213246A DE102017213246A1 DE 102017213246 A1 DE102017213246 A1 DE 102017213246A1 DE 102017213246 A DE102017213246 A DE 102017213246A DE 102017213246 A1 DE102017213246 A1 DE 102017213246A1
Authority
DE
Germany
Prior art keywords
auditory
vehicle
message
communication
linguistic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102017213246.9A
Other languages
German (de)
Inventor
Alexander Augst
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Priority to DE102017213246.9A priority Critical patent/DE102017213246A1/en
Publication of DE102017213246A1 publication Critical patent/DE102017213246A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/02Methods for producing synthetic speech; Speech synthesisers
    • G10L13/027Concept to speech synthesisers; Generation of natural phrases from machine-based concepts
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition

Abstract

Die Erfindung beschreibt ein Verfahren, Vorrichtung und ein korrespondierendes Computerprogramm zum Erzeugen auditiver Meldungen eines mit einem Fahrzeug (1) mitgeführten Computers, wobei die auditive Meldung eine sprachliche Meldung an zumindest einen Insassen (11, 12, 13) des Fahrzeugs (1) umfasst. Es wird der Schritt des Ermittelns zumindest eines inhaltlichen Merkmals einer sprachlichen Kommunikation zwischen den zumindest zwei Insassen (11, 12, 13) des Fahrzeugs (1) durchgeführt. Ferner wird die auditive Meldung in Abhängigkeit von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den Insassen (11, 12, 13) des Fahrzeugs (1) angepasst.The invention describes a method, apparatus and a corresponding computer program for generating auditory reports of a computer carried by a vehicle (1), the auditory message comprising a voice message to at least one occupant (11, 12, 13) of the vehicle (1). The step of determining at least one content-related feature of a linguistic communication between the at least two occupants (11, 12, 13) of the vehicle (1) is carried out. Furthermore, the auditory message is adapted in dependence on the determined content characteristic of the linguistic communication between the occupants (11, 12, 13) of the vehicle (1).

Description

Die Erfindung betrifft ein Verfahren, eine Vorrichtung und ein korrespondierendes Computerprogramm zum Erzeugen auditiver Meldungen im Innenraum eines Fahrzeugs.The invention relates to a method, a device and a corresponding computer program for generating auditory messages in the interior of a vehicle.

Moderne Fahrzeuge verfügen über Bordcomputer und Multimediasysteme, über den bzw. das Audio-Inhalte unterschiedlicher Audioquellen im Innenraum des Fahrzeugs abgespielt werden können. Darüber hinaus sind der Bordcomputer bzw. das Multimediasystem in der Lage mittels einer Sprachausgabe Meldungen an die Insassen des Fahrzeugs auszugeben. Solche Meldungen, die in dieser Beschreibung als auditive Meldung bezeichnet werden, können z.B. Ansagen eines Navigationssystems, Antworten auf Sprachbefehle oder Gesten, verschiedene Hinweise (z.B. zur Umgebung, zum Wetter, zum Zustand des Fahrzeugs, ...) usw. sein. Dabei ist auch eine temporäre Absenkung der Lautstärke der gerade ausgegebenen Multimediainhalte, z.B. Musik bekannt, während der Bordcomputer eine sprachliche Information, z.B. eine Navigationsinformation für den Fahrer ausgibt.Modern vehicles have on-board computers and multimedia systems, via which the audio content of different audio sources in the interior of the vehicle can be played. In addition, the on-board computer or the multimedia system are able to output messages to the occupants of the vehicle by means of a voice output. Such messages, referred to in this specification as auditory reporting, may be e.g. Announcements of a navigation system, answers to voice commands or gestures, various hints (for example, to the environment, the weather, the condition of the vehicle, ...) and so on. There is also a temporary decrease in the volume of the multimedia contents being output, e.g. Music is known, while the on-board computer provides linguistic information, e.g. outputs a navigation information for the driver.

Einerseits besteht das Bedürfnis, eine möglichst große Anzahl an Informationen in einem Fahrzeug an die Insassen auszugeben, um den Informationsbedarf zu decken. Außerdem kann dadurch auch die Ablenkung der Insassen durch die Beobachtung bzw. Bedienung von Anzeigen des Fahrzeugs und/oder in dem Fahrzeug mitgeführten Endgeräten reduziert werden.On the one hand there is a need to spend the largest possible amount of information in a vehicle to the occupants to meet the information needs. In addition, thereby the deflection of the occupants can be reduced by the observation or operation of displays of the vehicle and / or carried in the vehicle terminals.

Andererseits besteht typischerweise ein Bedürfnis oder Notwenigkeit der Insassen des Fahrzeugs untereinander zu kommunizieren. Eine solche, insbesondere sprachliche, Kommunikation kann für Nutzer des Fahrzeugs oftmals eine sehr hohe Relevanz haben. Die Möglichkeit der Insassen untereinander möglichst ungestört zu kommunizieren, kann für die Nutzer des Fahrzeugs zeitweise sehr viel wichtiger sein als die technischen Parameter des Fahrzeugs, wie z.B. die Motorleistung, Fertigungsqualität, das Fahrzeugdesign oder sogar die Marke bzw. Fabrikat des Fahrzeugs. Eine solche Kommunikation wird dennoch sehr häufig durch eine Vielzahl der im Fahrzeug ausgegebenen Sprachmitteilungen gestört. Daher besteht ein Widerspruch zwischen dem Wunsch der Insassen, insbesondere des Fahrers, die Sprachmitteilungen des Bordcomputers wahrzunehmen und dem Bedürfnis der gleichen oder anderer Insassen während der Fahrt ungestört zu kommunizieren.On the other hand, there is typically a need or necessity for the occupants of the vehicle to communicate with each other. Such, in particular linguistic, communication can often have a very high relevance for users of the vehicle. The ability of the occupants to communicate with each other as undisturbed as possible may at times be much more important to the users of the vehicle than the technical parameters of the vehicle, such as e.g. engine performance, manufacturing quality, vehicle design or even the make or make of the vehicle. Such communication is nevertheless very often disturbed by a large number of voice messages issued in the vehicle. Therefore, there is a contradiction between the desire of the occupants, in particular the driver, to perceive the voice messages of the on-board computer and to communicate undisturbed the need of the same or other occupants while driving.

Es ist Aufgabe der Erfindung, ein Verfahren, eine Vorrichtung und ein Computerprogramm anzugeben, welche das Erzeugen auditiver Meldungen in einem Fahrzeug funktional verbessern. Insbesondere soll eine gegenseitige Verträglichkeit der sprachlichen Kommunikation zwischen den Insassen und auszugebender auditiver Meldungen verbessert werden.It is an object of the invention to provide a method, a device and a computer program which functionally improve the generation of auditory messages in a vehicle. In particular, a mutual compatibility of the linguistic communication between the inmates and auditory messages to be issued should be improved.

Diese Aufgaben werden gelöst durch ein Verfahren gemäß den Merkmalen des Anspruches 1, ein Computerprogramm gemäß den Merkmalen des Anspruches 16 und eine Vorrichtung gemäß den Merkmalen des Anspruches 17. Vorteilhafte Ausgestaltungen sind in den abhängigen Ansprüchen angegeben.These objects are achieved by a method according to the features of claim 1, a computer program according to the features of claim 16 and a device according to the features of claim 17. Advantageous embodiments are specified in the dependent claims.

Es wird ein Verfahren zum Erzeugen auditiver Meldungen eines mit einem Fahrzeug mitgeführten Computers vorgeschlagen, wobei die auditive Meldung eine sprachliche Mitteilung an zumindest einen Insassen des Fahrzeugs umfasst.A method is proposed for generating auditory messages of a computer carried by a vehicle, wherein the auditory message comprises a voice message to at least one occupant of the vehicle.

Bevorzugt umfasst die auditive Meldung zumindest eine sprachliche Botschaft, die mit Mitteln der Sprachsynthese bzw. aus einer Datenbank mit vorgefertigten Lauten, Wörtern, Satzabschnitten oder Sätzen erzeugt wird. Auditive Meldungen können, z.B. mittels einer künstlichen Intelligenz, generierte, bevorzugt auch nicht vorgefertigte bzw. vorab festgelegte, sprachlichen Strukturen umfassen. In einem vereinfachten Fall umfasst die auditive Meldung eine Information, z.B. einen Textabschnitt, die in einer (im Computer oder Fahrzeug) voreingestellten Sprache akustisch ausgegeben wird.Preferably, the auditory message comprises at least one linguistic message, which is generated by means of speech synthesis or from a database with prefabricated sounds, words, sentence sections or sentences. Auditory messages may, e.g. by means of an artificial intelligence, generated, preferably not prefabricated or predetermined, linguistic structures include. In a simplified case, the auditory message comprises information, e.g. a section of text that is audibly output in a preset language (computer or vehicle).

Beispielsweise können z.B. die Ansagen eines Richtungshinweises eines Navigationssystems, Ansagen des Bordcomputers über den Zustand des Fahrzeugs oder aktuelle Informationen über bestimmte Gefahren als auditive Meldungen verstanden werden.For example, e.g. the announcements of a direction indication of a navigation system, announcements of the on-board computer about the condition of the vehicle or current information about certain dangers are understood as auditory messages.

Auditive Meldungen können abhängig von einer vorausbestimmten Bedingung erzeugt bzw. akustisch ausgegeben werden. Beispielsweise können auditive Meldungen, insbesondere sprachlich, auszugebende Informationen umfassen, die abhängig vom Fahrkontext des Fahrzeugs (z.B. Verkehrsschilder, Staumeldungen, andere Verkehrsteilnehmer) und/oder abhängig von dem Zustand des Fahrers (Müdigkeitserkennung, Ablenkung) und/oder Aktionen des Fahrers (Hinweise zu möglichen Folgen einer Handlung) erzeugt werden.Auditory messages can be generated or output acoustically depending on a predetermined condition. For example, auditory messages, in particular linguistically, may include information to be output that depends on the driving context of the vehicle (eg traffic signs, traffic jams, other road users) and / or driver's condition (fatigue detection, distraction) and / or driver's actions (references to possible consequences of an action) are generated.

Ferner kann ein automatisiertes Vorlesen von Texten, beispielsweise ankommende SMS, E-Mails oder Einträge (Posts, Tweats, Breaking News, etc.) in sozialen Netzwerken und dergleichen mit Mitteln des Computers (Bordcomputers), auch als auditive Meldung angesehen werden.Furthermore, an automated reading-out of texts, for example incoming SMS, e-mails or entries (posts, tweaks, breaking news, etc.) in social networks and the like by means of the computer (on-board computer), can also be regarded as an auditory message.

Eine auditive Meldung kann auch, zumindest vorwiegend, für einen bestimmten Insassen, z.B. an den Fahrer des Fahrzeugs oder an einen bestimmten weiteren Insassen (Passagier) bestimmt sein. Bei einer auditiven Meldung kann es sich um eine Fahrerinformation handeln, die beispielsweise Handlungsempfehlungen, Handlungsanweisungen, Statusmitteilungen im Zusammenhang mit zumindest teilweise automatisierten Fahren und/oder einem automatisiert oder durch den Fahrer durchführbares Manöver, z.B. Parkmanöver des Fahrzeugs, betreffen. Auditive Meldungen können beispielsweise eine Mensch-Maschine-Schnittstelle eines digitalen, auf künstlicher Intelligenz basierenden, Fahrzeugassistenten und/oder eines „Co-Piloten“ sein. Ein solcher „Co-Pilot“ kann auch zur Mitsteuerung des Fahrzeugs ausgestaltet sein.An auditory message can also, at least predominantly, for a particular occupant, eg to the driver of the vehicle or to a specific one be determined further inmates (passenger). An auditory message may be a driver information item which relates, for example, to action recommendations, instructions, status messages in connection with at least partially automated driving and / or a maneuver that can be automated or performed by the driver, eg parking maneuvers of the vehicle. Auditory messages may be, for example, a human machine interface of a digital artificial intelligence based vehicle assistant and / or a "co-pilot". Such a "co-pilot" can also be designed to co-control the vehicle.

Außerdem sind unter dem Begriff auditive Meldungen auch weitere, insbesondere interaktiv generierte, Sprachbotschaften, die beispielsweise der Unterhaltung von Insassen dienen, zu verstehen. Beispielsweise kann eine auditive Meldung eine Antwort, z.B. Auskunft oder Replik auf eine, von einem Insassen, insbesondere vom Fahrer, gestellte Frage oder durch die Körpersprache ausgeführte Geste bzw. mimische Handlung sein.In addition, the term auditory messages also includes other, in particular interactively generated, voice messages that serve, for example, the entertainment of inmates. For example, an auditory message may contain a response, e.g. Information or replica to a question asked by an occupant, in particular the driver, or a gesture or facial expression made by the body language.

Insbesondere betrifft die auditive Meldung Umfänge, die nicht nur zur bloßen Wahrnehmung (Hören, wie z.B. Musik), sondern zur Interpretation der entsprechenden Botschaft (Verstehen, Unterscheiden) durch zumindest einen Insassen, z.B. dem Fahrer, bestimmt sind.In particular, the auditory message relates to circumferences that are not limited to mere perception (listening, such as music) but to the interpretation of the corresponding message (understanding, distinguishing) by at least one occupant, e.g. the driver, are determined.

Unter einem mit dem Fahrzeug mitgeführten Computer werden in der vorliegenden Beschreibung insbesondere ein Bordcomputer des Fahrzeugs verstanden. Ein mit dem Fahrzeug mitgeführter Computer kann auch eine von dem Fahrzeug externe Einheit sein, die drahtlos oder drahtgebunden mit dem Fahrzeug, insbesondere mit dem Bordnetz des Fahrzeugs, verbunden ist. Eine solche Einheit ist beispielsweise ein im Fahrzeug betreibbares Anwendergerät, wie z.B. ein tragbares Navigationsgerät, ein mobiles Anwendergerät, z.B. ein persönliches Mobilfunkendgerät (z.B. ein Smartphone), eine Datenbrille und dergleichen. Insbesondere kann die Ausgabe der auditiven Meldung mit Mitteln des Multimediasystems des Fahrzeugs, insbesondere durch die im Fahrzeug verbauten Lautsprecher, erfolgen. Bevorzugt kann der Computer auch ein Teil des Multimediasystems des Fahrzeugs, oder ein Teil einer kombinierten Vorrichtung sein.In the present description, a computer carried by the vehicle is understood to mean, in particular, an on-board computer of the vehicle. A computer carried along with the vehicle can also be an external unit of the vehicle, which is connected wirelessly or by wire to the vehicle, in particular to the on-board network of the vehicle. Such a unit is, for example, an in-vehicle user equipment, such as e.g. a portable navigation device, a mobile user device, e.g. a personal mobile radio terminal (e.g., a smartphone), data glasses, and the like. In particular, the output of the auditory message can take place by means of the multimedia system of the vehicle, in particular by the speakers installed in the vehicle. Preferably, the computer may also be part of the multimedia system of the vehicle, or part of a combined device.

Bei dem Verfahren wird zumindest ein inhaltliches Merkmal einer sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs ermittelt. Eine sprachliche Kommunikation ist beispielsweise ein im Innenraum des Fahrzeugs zwischen Insassen geführtes Gespräch. Ein solches Gespräch kann ein Monolog eines Insassen oder ein Dialog zwischen zwei oder mehr Insassen im Fahrzeug sein. Eine solche sprachliche Kommunikation zwischen den Insassen des Fahrzeugs kann explizit von weiterem, Sprache umfassenden Audio-Kontext im Fahrzeug, wie z.B. einem Musiktitel, Nachrichtenprogramm, einem kombinierten Radioprogramm oder einem Hörbuch, unterschieden werden. Die sprachliche Kommunikation unterscheidet sich ferner von einem weiteren, im Innenraum des Fahrzeugs hörbaren akustischen Hintergrund sowie von einem von außerhalb des Fahrzeugs kommenden, aber im Innenraum des Fahrzeugs hörbaren, akustischen Inhalt.In the method, at least one content-related feature of a linguistic communication between the occupants of the vehicle is determined. Linguistic communication is, for example, a conversation conducted in the interior of the vehicle between inmates. Such a conversation may be a monologue of an occupant or a dialogue between two or more occupants in the vehicle. Such linguistic communication between the occupants of the vehicle may be explicitly affected by further speech-related audio context in the vehicle, such as e.g. a music title, news program, a combined radio program or an audiobook. The linguistic communication also differs from a further, audible in the interior of the vehicle audible background as well as coming from outside the vehicle, but audible in the interior of the vehicle, acoustic content.

Bei dem Verfahren erfolgt ferner ein Anpassen der auditiven Meldung in Abhängigkeit von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs.In the method, the auditory message is further adjusted as a function of the determined content characteristic of the linguistic communication between the occupants of the vehicle.

Das zumindest eine inhaltliche Merkmal der sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs kann mit einem oder mehreren im Innenraum des Fahrzeugs vorhandenen oder mitgeführten Mikrofonen ermittelt werden. Dabei kann es sich um verbaute oder zusätzliche Mikrofone, z.B. ein oder mehrere zu einer Freisprecheinrichtung des Fahrzeugs oder eines mobilen Anwendergeräts gehörende Mikrofone handeln. Ein inhaltliches Merkmal der sprachlichen Kommunikation zwischen zumindest zwei Insassen kann dabei mit Mitteln der Signalverarbeitung, Spracherkennung, Sprachanalyse und Dergleichen erfasst, insbesondere erkannt, insbesondere ausgewertet werden. Die Erkennung kann mit Mitteln des Bordcomputers und/oder eines mitgeführten mobilen Anwendergeräts erfolgen.The at least one content-related feature of the linguistic communication between the occupants of the vehicle can be determined with one or more microphones present or carried in the interior of the vehicle. These may be built-in or additional microphones, e.g. act one or more belonging to a hands-free device of the vehicle or a mobile user device microphones. A content-related feature of the linguistic communication between at least two occupants can be detected, in particular recognized, in particular evaluated by means of signal processing, speech recognition, speech analysis and the like. The detection can take place with means of the on-board computer and / or a mobile user device carried along.

Eine sprachliche Kommunikation kann im Verfahren ferner von einem weiteren denkbaren Audio-Kontext im Innenraum des Fahrzeugs unterschieden werden.A linguistic communication can also be distinguished in the method from another conceivable audio context in the interior of the vehicle.

Mit anderen Worten wird bei dem vorliegenden Verfahren eine (zumindest einfache) inhaltliche Bewertung oder Analyse einer im Innenraum des Fahrzeugs stattfindenden sprachlichen Kommunikation ausgeführt. Der mit dem Fahrzeug mitgeführte Computer berücksichtigt diese, nicht mit ihm geführte bzw. nicht an ihn gerichtete, sprachliche Kommunikation und passt daraufhin wiederum die, von ihm zu erzeugende auditive Meldung an. Bei der anzupassenden auditiven Meldung handelt es sich um eine, bevorzugt von der Kommunikation zwischen den Insassen an sich unabhängige Information.In other words, in the present method, a (at least simple) substantive evaluation or analysis of a linguistic communication taking place in the interior of the vehicle is carried out. The computer, which is carried by the vehicle, takes into account linguistic communication not directed or addressed to it, and then adjusts the auditory message which it is to generate. The auditory message to be adjusted is one which is preferably independent of the communication between the occupants.

Das Anpassen der auditiven Meldung kann im Verfahren sich auf eine aktuell auszugebende (z.B. zumindest teilweise bereits als Daten generierte) auditive Meldung und/oder auf das (erstmalige oder wiederholte) Erzeugen der auditiven Meldung (z.B. aus einer vorhandenen Information für zumindest einen Insassen) unter Berücksichtigung der ermittelten Anpassung beziehen. Insbesondere kann die Anpassung derart durchgeführt werden, dass im Verfahren eine Anpassungsinformation, z.B. repräsentierend Steuerungssignale, zur Steuerung des Computers, in dem die auditive Meldung generiert wird, und/oder zur Steuerung der Audioausgabevorrichtung des Fahrzeugs, z.B. des Multimediasystems, mit welchem die auditive Meldung ausgegeben wird, bestimmt wird. Solche Steuerungssignale können innerhalb des Fahrzeugs oder in einer weiteren (mit dem Fahrzeug mitgeführten oder beabstandet, z.B. in einer Cloud angeordneten) Vorrichtung bestimmt und zur Ausführung der Anpassung übermittelt werden.The adjustment of the auditory message in the process can be based on an auditory message (eg, at least partially already generated as data) and / or on the (initial or repeated) generation of the auditory message (eg from an existing information for at least one occupant) consideration relate to the identified adjustment. In particular, the adaptation can be carried out such that in the method adaptation information, eg representing control signals, for controlling the computer in which the auditory message is generated, and / or for controlling the audio output device of the vehicle, eg the multimedia system, with which the auditory message is issued is determined. Such control signals may be determined within the vehicle or in another device (carried along with the vehicle or spaced apart, eg arranged in a cloud) and transmitted for carrying out the adaptation.

Das Anpassen der auditiven Meldung kann im Verfahren beispielsweise einen inhaltlichen Parameter (vereinfacht: Inhalt) und/oder einen linguistischer Parameter der auditiven Meldung betreffen. Ein inhaltlicher oder linguistischer Parameter kann z.B. die Wortwahl (z.B. eine Auswahl auf zwei oder mehrere Formulierungsoptionen, Stimme, Sprechgeschwindigkeit, Satzbau-Parameter, z.B. Reihenfolge der Wörter oder Haupt- und Nebensätze einer sprachlichen Botschaft) und dergleichen repräsentieren.For example, adjusting the auditory message in the method may involve a content parameter (simplified: content) and / or a linguistic parameter of the auditory message. A content or linguistic parameter may e.g. represent the choice of words (e.g., a selection of two or more formulation options, voice, speech rate, sentence structure parameters, e.g., order of words or major and minor sentences of a linguistic message), and the like.

Dabei kann im Verfahren ein inhaltliches Merkmal, insbesondere ein textueller Inhalt der auszugebenden auditiven Meldung abhängig von einem inhaltlichen Merkmal der Kommunikation zwischen zumindest zwei Insassen, gesteuert werden, wobei die Inhalte der auditiven Meldung mit dem Inhalt der Kommunikation zwischen den Insassen nicht oder zumindest nicht unmittelbar oder zumindest nicht kausal, thematisch oder logisch zusammenhängen.In the process, a content-related feature, in particular a textual content of the auditory message to be output, can be controlled depending on a content-related feature of the communication between at least two occupants, wherein the contents of the auditory message with the content of the communication between the inmates is not or at least not immediate or at least not causally, thematically or logically related.

In einer weiteren Ausgestaltung des Verfahrens können die, z.B. aus der Kommunikationswissenschaft bekannten, Bestandteile der durch die auditive Meldung repräsentierten Kommunikationsbotschaft variiert, insbesondere gezielt, angepasst werden. Beispielsweise können die aus der Kommunikationswissenschaft bekannten Bestandteile „Appell“, „Beziehung“, „Selbstoffenbarung“, „Inhalt“ (reiner Informationsinhalt) einer Nachricht der auszugebenden, insbesondere zu generierenden, auditiven Meldung angepasst werden. Beispielsweise können auch die Proportionen zwischen diesen Bestandteilen angepasst werden.In a further embodiment of the method, the, e.g. components of the communication message represented by the auditory message, which are known from communications science, vary, in particular in a targeted manner. For example, the components of "appeal", "relationship", "self-disclosure", "content" (pure information content) known from communications science can be adapted to a message of the auditory message to be issued, in particular to be generated. For example, the proportions between these components can be adjusted.

Ein anzupassender Parameter der auditiven Meldung kann einen Parameter des Kommunikationsverhaltens repräsentieren. Ein solcher Parameter kann ein Kommunikationsverhalten des Computers gegenüber zumindest einem Insassen des Fahrzeugs bestimmen. Ein solcher Parameter kann z.B. beim Erzeugen der auditiven Meldungen zur Kommunikation mit zumindest einem Insassen dem angewandten Kommunikationsmodell entsprechen, insbesondere hinsichtlich der Interpretation der Sprachbotschaften des Insassen und/oder hinsichtlich des Erzeugens einer Antwort. Beispielsweise kann im Verfahren ein Parameter, das ein Kommunikationsverhalten basierend oder im Einklang mit einem auf einer Transaktionsanalyse oder einem SR-Modell (= Stimulus-Response Modell) basierenden Modells und/oder einem vorausbestimmten Kommunikationsziel ist, verändert, insbesondere angepasst werden.A parameter of the auditory message to be adjusted may represent a parameter of the communication behavior. Such a parameter may determine a communication behavior of the computer to at least one occupant of the vehicle. Such a parameter may e.g. when generating the auditory messages for communication with at least one occupant corresponding to the applied communication model, in particular with regard to the interpretation of the voice messages of the occupant and / or with regard to generating a response. For example, in the method, a parameter that is a communication behavior based on or in accordance with a model based on a transaction analysis or an SR model (= stimulus-response model) and / or a predetermined communication target can be changed, in particular adapted.

Beispielsweise kann das Kommunikationsverhalten des Bordcomputers abhängig von zumindest einem Parameter der Kommunikation im Innenraum des Fahrzeugs etwa entsprechend der aus einer Transaktionsanalyse oder einem SR-Modell bekannten Logik bzw. Zusammenhängen angepasst werden.For example, depending on at least one parameter of the communication in the interior of the vehicle, the communication behavior of the on-board computer can be adjusted approximately according to the logic or contexts known from a transaction analysis or an SR model.

Alternativ oder zusätzlich kann das Anpassen der auditiven Meldung ein Anpassen, z.B. Steuern oder Regeln, eines Parameters des beim Erzeugen oder der Ausgabe der auditiven Meldung generierten Audiosignals umfassen, was insbesondere akustische Parameter betrifft.Alternatively or additionally, adjusting the auditory message may include adjusting, e.g. Controlling or regulating a parameter of the audio signal generated when generating or outputting the auditory message, in particular as regards acoustic parameters.

Das Anpassen der zumindest einen auditiven Meldung kann im Verfahren als eine Optimierung nach einem oder mehreren vorausbestimmten Kriterien, z.B. den Nutzereinstellungen, erfolgen.The adaptation of the at least one auditory message may be performed in the method as an optimization according to one or more predetermined criteria, e.g. the user settings.

Das Verfahren kann, insbesondere gleichzeitig, auf mehrere sprachliche Kommunikationen im Fahrzeug (z.B. zwischen je zwei oder mehreren Insassen) angewandt werden. Beispielsweise kann es auf unterschiedliche gleichzeitig bzw. zeitlich überschneidend ablaufende Kommunikationen angewandt werden. Als unterschiedliche Kommunikationen können beispielsweise Kommunikationen angesehen werden, die zwischen unterschiedlichen Personen geführt und/oder an unterschiedliche Personen gerichtet sind. Wenngleich im Rahmen dieser Beschreibung von einer Kommunikation die Rede ist, kann damit jeweils eine, insbesondere eine bestimmte, von mehreren stattfindenden oder möglichen Kommunikationen im Fahrzeug gemeint sein, z.B. eine Kommunikation, die den Fahrer betrifft.The method may be applied, in particular simultaneously, to multiple linguistic communications in the vehicle (e.g., between any two or more occupants). For example, it can be applied to different concurrent communications. As different communications, for example, communications may be viewed that are conducted between different people and / or directed to different people. Although communication is referred to in the context of this description, it may mean one, in particular one, of a plurality of or possible communications in the vehicle, e.g. a communication that concerns the driver.

Gemäß einer zweckmäßigen Ausgestaltung wird das zumindest eine inhaltliche Merkmal der sprachlichen Kommunikation mittels einer linguistischen Analyse ermittelt, wobei bei der linguistischen Analyse eines oder mehrere der folgenden Merkmale der sprachlichen Kommunikation verarbeitet werden. Dabei kann eine Semantik der sprachlichen Kommunikation und/oder ein Thema bzw. ein Themenmerkmal der sprachlichen Kommunikation und/oder eine Information, ob oder ob nicht die sprachliche Kommunikation eine inhaltlich abgeschlossene Botschaft umfasst, verarbeitet werden. Eine inhaltlich abgeschlossene Botschaft im Sinne der vorliegenden Beschreibung kann ein Satz oder eine Phrase sein.According to an expedient embodiment, the at least one content-related feature of the linguistic communication is determined by means of a linguistic analysis, wherein in the linguistic analysis one or more of the following features of the linguistic communication are processed. In this case, a semantics of the linguistic communication and / or a topic or a topic feature of the linguistic communication and / or an information as to whether or not the linguistic communication comprises a content-contained message can be processed. One content Completed message in the sense of the present description may be a sentence or phrase.

Die Themenmerkmale können im Verfahren mittels einer hinterlegten Assoziationsvorschrift, Assoziationslogik, einer Datenbank repräsentierend unterschiedlich starke (Assoziations-) Zuordnungen zwischen den Themen, Wörtern, typischen Satzstrukturen, etc. ermittelt werden.The topic features can be determined in the method by means of a stored association rule, association logic, a database representing different strong (association) associations between the topics, words, typical sentence structures, etc.

Wenn beispielsweise erkannt, insbesondere prädiziert, wird, dass bzw. wann ein Insasse („Sprecher“) seinen Satz und/oder eine Phrase und/oder eine Botschaft zu Ende gesprochen hat bzw. sprechen wird, kann daraufhin die auf das Ende der Phrase bzw. der Botschaft angepasste auditive Meldung erzeugt bzw. ausgegeben werden.If, for example, it is recognized, in particular predicated, that or when an occupant ("speaker") has spoken or is about to finish his sentence and / or a phrase and / or a message, then the phrase that points to the end of the phrase or phrase can be spoken the message adapted to the message generated or issued.

Bevorzugt kann aus dem inhaltlichen Merkmal ermittelt werden, zu welchem Zeitpunkt eine sprachliche Botschaft des sprechenden Insassen des Fahrzeugs abgeschlossen sein wird. Daraufhin kann beispielsweise der Beginn zumindest eines Teils der auditiven Meldung geplant werden. Bei nicht abgeschlossenen Sentenzen wartet der Computer mit der weiteren Wiedergabe der angepassten oder nicht angepassten auditiven Meldung etwas länger, unter der Annahme, dass weitere Sprachinhalte des sprechenden Insassen folgen werden.Preferably, it can be determined from the content-related feature at which time a linguistic message of the speaking occupant of the vehicle will be completed. Thereupon, for example, the beginning of at least part of the auditory report can be planned. In the case of incomplete sentences, the computer waits a little longer to continue playing the adjusted or unmatched auditory message, assuming that more speech content will follow from the talking occupant.

Bevorzugt kann im Verfahren ein Abgleich zwischen einer, auf die sprachliche Kommunikation der zumindest zwei Insassen angewandte, inhaltliche, insbesondere linguistische, Analyse und einer Auswertung einer oder mehrerer einhergehend (im Zeitintervall von ca. 1, 3, 5, 10 Sekunden) stattfindender körperlichen Regungen bzw. mimischer Ausdrücke, beispielsweise der Gesichtsmuskel oder Lippenbewegungen des oder der Insassen, die mit einer Innenraumkamera erfasst werden, ausgeführt und berücksichtigt werden.In the method, a comparison can preferably be made between a physical, in particular linguistic, analysis applied to the linguistic communication of the at least two inmates and an evaluation of one or more corporeal impulses (occurring in the time interval of approximately 1, 3, 5, 10 seconds) Mimic expressions, for example, the facial muscles or lip movements of the occupant or those who are detected with an indoor camera, carried out and taken into account.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass der Inhalt der auditiven Meldung in Abhängigkeit des ermittelten inhaltlichen Merkmals der sprachlichen Kommunikation zwischen zumindest zwei Insassen des Fahrzeugs angepasst wird. In diesem Beispiel erfolgt (auch) eine Anpassung einer oder mehrerer durch die auditive Meldung repräsentierter Informationen, z.B. des akustisch auszugebenden Textes.A further expedient embodiment provides that the content of the auditory message is adapted as a function of the determined content characteristic of the linguistic communication between at least two occupants of the vehicle. In this example, adaptation of one or more information represented by the auditory message, e.g. the acoustically output text.

Es kann im Verfahren eine Anpassung der auditiven Meldung in Abhängigkeit von dem Thema der sprachlichen Kommunikation zwischen den Insassen vorgesehen werden, die z.B. nach vorausbestimmten Kriterien bzw. Logik festgelegt werden kann. Beispielsweise kann eine unterschiedliche Anpassung der auditiven Meldung vorgesehen werden, je nachdem, ob die Insassen über ein auf das Fahrzeug, den Fahrkontext, die Fahrtroute, etc. bezogenes Thema sprechen oder nicht.In the method, an adaptation of the auditory message depending on the subject of the speech communication between the occupants, e.g. can be determined according to predetermined criteria or logic. For example, a different adjustment of the auditory message may be provided, depending on whether or not the occupants are talking about a topic related to the vehicle, the driving context, the route, etc.

Gemäß dieser Ausgestaltung wird abhängig von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs eine, insbesondere vorausschauende, inhaltliche Anpassung der auditiven Meldung ausgeführt. Beispielsweise kann abhängig von dem ermittelten, insbesondere prädizierten, inhaltlichen Merkmalen der sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs eine Reduktion der Inhalte der auditiven Meldung und/oder ein Hinzufügen weiterer Inhalte zur auditiven Meldung und/oder eine ausführlichere Beschreibung der Inhalte der auditiven Meldung erfolgen. Der Computer steuert damit die Inhalte seiner generierten auditiven Meldung abhängig von einem inhaltlichen Merkmal, wobei die Inhalte der auditiven Meldung mit der Kommunikation der Insassen jedoch nicht unmittelbar, insbesondere nicht thematisch, logisch oder kausal, zusammenhängen.According to this refinement, depending on the determined content-related feature of the linguistic communication between the occupants of the vehicle, a particularly forward-looking, content-related adaptation of the auditory message is carried out. For example, depending on the determined, in particular predicated, content characteristics of the linguistic communication between the occupants of the vehicle, a reduction of the contents of the auditory message and / or addition of further contents for auditory reporting and / or a more detailed description of the contents of the auditory message can take place. The computer thus controls the contents of its generated auditory message depending on a content-related feature, but the contents of the auditory message with the communication of the inmates are not directly related, especially not thematically, logically or causally.

Im Verfahren kann eine auditive Meldung, die auch einen Teil der nicht durch Sprache repräsentierte Information umfasst, angepasst werden. Beispielsweise kann derart ein die zumindest eine auditive Meldung begleitender Sound angepasst werden.In the method, an auditory message, which also includes a part of the information not represented by speech, can be adapted. For example, such a sound accompanying the at least one auditory message can be adapted.

Gemäß einer weiteren zweckmäßigen Ausgestaltung wird ein Zeitpunkt zur Ausgabe zumindest eines Teils der auditiven Meldung abhängig von dem ermittelten inhaltlichen Merkmal bestimmt. Das inhaltliche Merkmal kann prädiziert sein. Abhängig von dem inhaltlichen Merkmal kann beispielsweise bestimmt werden, dass der Zeitpunkt zur Ausgabe erst nach dem Feststellen eines Endes der sprachlichen Kommunikation erfolgt. Alternativ kann bestimmt werden, dass der zumindest eine Teil der auditiven Meldung in einer festgestellten Pause der sprachlichen Kommunikation erfolgt.According to a further expedient embodiment, a time for the output of at least part of the auditory message is determined as a function of the determined content-related feature. The content characteristic can be predicated. Depending on the content-related feature, it can be determined, for example, that the time for the output takes place only after the determination of an end of the linguistic communication. Alternatively, it may be determined that the at least part of the auditory message occurs in a determined pause of the linguistic communication.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass die auditive Meldung abhängig von dem ermittelten inhaltlichen Merkmal pausiert und/oder in zumindest zwei Teile aufgeteilt wird, deren Ausgabe, beispielsweise mit einer (zeitlichen) Unterbrechung erfolgt und/oder deren Reihenfolge verändert wird oder veränderbar ist. Auch bei dieser Ausgestaltungsvariante kann das inhaltliche Merkmal der sprachlichen Kommunikation einen linguistischen Parameter umfassen. Abhängig hiervon kann bestimmt werden, die auditive Meldung zu unterbrechen und den Rest der auditiven Meldung zu einem späteren Zeitpunkt, z.B. nach Beendigung der sprachlichen Kommunikation wiederzugeben.A further expedient embodiment provides that the auditory message is paused and / or divided into at least two parts as a function of the determined content-related feature, the output of which is effected, for example, with a (temporal) interruption and / or whose sequence is changed or changeable. In this embodiment variant too, the content-related feature of the linguistic communication can comprise a linguistic parameter. Depending on this, it may be determined to interrupt the auditory message and the rest of the auditory message at a later time, e.g. after the completion of the linguistic communication.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass die auditive Meldung abhängig von dem ermittelten inhaltlichen Merkmal stilistisch, hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder einem Unterton angepasst wird.A further expedient embodiment provides that the auditory message depends on the identified content-related feature stylistically, with regard to their voice and / or their pitch and / or undertone.

Die Tonlage der auditiven Meldung und/oder der Inhalt der auditiven Meldung können derart angepasst werden, dass z.B. ein mehr oder minder höfliches, bevorzugt stilistisch passendes Einfügen in die sprachliche Kommunikation der Insassen des Fahrzeugs erfolgt. Dabei kann die auditive Meldung je nach inhaltlichem Parameter der sprachlichen Kommunikation in Wortwahl, Ton, Stimme oder linguistischem Parameter variiert werden. Diese können dabei angepasst oder entsprechend einem Kommunikationsmodell, z.B. einem Modell basierend auf einer Transaktionsanalyse oder einem sog. SR (Stimulus-Response)-Modell bestimmt werden.The pitch of the auditory message and / or the content of the auditory message may be adjusted such that e.g. a more or less polite, preferably stylistically fitting insertion into the linguistic communication of the occupants of the vehicle takes place. Depending on the content-related parameter of the linguistic communication, the auditory message can be varied in word choice, tone, voice or linguistic parameter. These may be adapted or adapted according to a communication model, e.g. a model based on a transaction analysis or a so-called SR (Stimulus Response) model.

In einem vereinfachten Fall kann der Computer abhängig von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation erzeugte auditive Meldungen anpassen. Der Computer kann dann z.B. die auditive Meldung in einem „ruhigen“ Ton ausgeben oder in einem „klaren“ Ton ausgeben oder einen Anteil empathischer Ausdrücke variieren oder einen Kommunikationsstil entsprechend einem Transaktionsmodell wählen. Die oben genannten Beispiele können auch in beliebiger Weise miteinander kombiniert werden.In a simplified case, the computer may adapt auditory messages generated based on the linguistic communication content characteristic determined. The computer can then be e.g. output the auditory message in a "quiet" tone, or output it in a "clear" tone, or vary a portion of empathetic expressions, or choose a communication style according to a transaction model. The above examples can also be combined in any way.

Alternativ oder zusätzlich kann die auditive Meldung hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder einem Unterton (auch) abhängig von der Stimme und/oder Tonlage und/oder Unterton der sprachlichen Kommunikation zwischen zumindest zwei Insassen angepasst werden. Dabei kann das Verfahren eine Auswertung der Stimme und/oder der Tonlage und/oder des Untertons der sprachlichen Kommunikation zwischen zumindest zwei Insassen umfassen.Alternatively or additionally, the auditory message regarding their voice and / or their pitch and / or an undertone (also) depending on the voice and / or pitch and / or undertone of the linguistic communication between at least two inmates can be adjusted. In this case, the method may include an evaluation of the voice and / or the pitch and / or undertone of the linguistic communication between at least two occupants.

Das Anpassen des Stils der auszugebenden auditiven Meldung, insbesondere hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder dem Unterton, kann auch Inhalte (inhaltliche Merkmale der betreffender Botschaften) betreffen, die mit den Inhalten der Kommunikation zwischen den Insassen nicht, insbesondere nicht unmittelbar, insbesondere nicht kausal, logisch, thematisch zusammenhängen.The adaptation of the style of the auditory message to be output, in particular with regard to their voice and / or their pitch and / or undertone, may also relate to contents (content characteristics of the messages in question) that do not, in particular not directly, with the contents of the communication between the inmates , in particular not causal, logical, thematically related.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass eine Erkennung eines oder mehrerer Schlüsselwörter in der Kommunikation zumindest eines Insassen und/oder eine Erkennung der Gestik zumindest eines Insassen durchgeführt wird und daraufhin die auditive Meldung hinsichtlich eines Inhaltlichen Merkmals und/oder eines akustischen Parameters (mit dem diese erzeugt bzw. ausgegeben wird) angepasst wird. Beispielsweise können als Anhaltspunkt für die Anpassung der auditiven Meldung eine Nennung der Zielperson beim Namen und/oder vorgegebene Schlüsselwörter wie „an alle“, „hört alle zu“, „Kinder“, „ihr hinten“ genutzt werden. In diesem Zusammenhang ist es zweckmäßig, wenn Schlüsselwörter wie die oben genannten im Voraus definiert und eingelernt sind. Ebenso ist es zweckmäßig, vorgegebene Gesten der Insassen, die eine Richtung der Kommunikation kennzeichnen, im Voraus zu definieren und im Voraus zu lernen.A further expedient embodiment provides that recognition of one or more keywords in the communication of at least one occupant and / or recognition of the gesture of at least one occupant is performed and then the auditory message regarding a content feature and / or an acoustic parameter (with the this is generated or output) is adjusted. For example, as an indication for the adjustment of the auditory message, a mention of the target person by name and / or predefined keywords such as "to all", "all listen to", "children", "behind her" can be used. In this context, it is useful if keywords such as those mentioned above are defined in advance and learned. Likewise, it is convenient to define in advance and to learn in advance given gestures of the occupants that characterize a direction of the communication.

Es kann darüber hinaus eine Erkennung von vorgegebenen, insbesondere eingelernten Schlüsselwörtern und/oder Gesten der Insassen, die eine Richtung der Kommunikation kennzeichnen, erfolgen und anschließend eine Anpassung der auditiven Meldung, bevorzugt zumindest eines Raumklangparameters, in Abhängigkeit der erkannten Schlüsselwörter und/oder Gesten.In addition, recognition of predefined, in particular learned, key words and / or gestures of the occupants which characterize a direction of the communication can take place, and subsequently an adaptation of the auditory message, preferably of at least one surround parameter, depending on the recognized keywords and / or gestures.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass mittels einer linguistischen Auswertung der sprachlichen Kommunikation ein Prädizieren eines zeitlichen Parameters, insbesondere eines zeitlichen Verlaufs, der sprachlichen Kommunikation ausgeführt wird und der zeitliche Parameter beim Erzeugen und/oder der Ausgabe der auditiven Meldung verarbeitet wird. Die Berücksichtigung des zeitlichen Parameters kann hinsichtlich eines Anfangs und/oder eines Endes und/oder des zeitlichen Verlaufs der Amplituden und/oder Frequenzparameter erfolgen. Die linguistische Analyse kann in Bezug auf Sätze oder Phrasen erfolgen. Beim Erzeugen der auditiven Meldung, insbesondere hinsichtlich ihres Inhalts, ihrer Aufteilung oder dem Zeitpunkt der Ausgabe kann die linguistische Analyse berücksichtigt werden. Zweckmäßigerweise wird eine vorausschauende Anpassung der als auditive Meldung auszugebenden Inhalte ausgeführt. Alternativ oder zusätzlich kann das Prädizieren des zeitlichen Verlaufs der Stimme des sprechenden Insassen auch mittels der Analyse der körperlichen Regungen, seiner Mimik, einem Lippenbewegungsmuster und/oder der Körpersprache erfolgen.A further expedient embodiment provides that by means of a linguistic evaluation of the linguistic communication, a prediction of a temporal parameter, in particular a chronological progression, of the linguistic communication is carried out and the temporal parameter is processed during the generation and / or the output of the auditory message. The consideration of the temporal parameter can take place with regard to an initial and / or an end and / or the chronological progression of the amplitudes and / or frequency parameters. The linguistic analysis can be done in terms of sentences or phrases. When generating the auditory report, in particular with regard to its content, its division or the time of issue, the linguistic analysis can be taken into account. Expediently, a forward-looking adaptation of the content to be output as an auditory message is carried out. Alternatively or additionally, the prediction of the time course of the voice of the speaking occupant can also take place by means of the analysis of the bodily movements, his facial expressions, a lip movement pattern and / or the body language.

Besonders bevorzugt werden zumindest zwei zeitliche Parameter ermittelt, insbesondere prädiziert, kennzeichnend ein Zeitintervall, in dem die auszugebende auditive Meldung insbesondere mit keiner, keiner wesentlichen oder zumindest verringerter zeitlicher Überschneidung mit der besagten sprachlichen Kommunikation im Innenraum des Fahrzeugs ausgegeben werden kann. Besonders bevorzugt erfolgt daraufhin eine vorausschauende Anpassung des auszugebenden Audiosignals, z.B. in Form einer zeitlichen Planung der Ausgabe von einem oder mehreren Abschnitten des Audiosignals.Particularly preferably, at least two temporal parameters are determined, in particular predicated, characterizing a time interval in which the auditory message to be output can be output in the interior of the vehicle, in particular with no, no significant or at least reduced temporal overlap. It is particularly preferable then to perform a predictive adaptation of the audio signal to be output, e.g. in the form of scheduling the output of one or more portions of the audio signal.

Bevorzugt werden abhängig von einem oder mehreren zeitlichen Parametern: das Starten der Ausgabe eines (bestimmten) Abschnitts des Audiosignals, und/oder des Ende der Ausgabe eines (bestimmten) Abschnitts der auditiven Meldung, und/oder der zeitlichen Verlauf der Amplituden und/oder Frequenzparameter der auditiven Meldung, angepasst. Eine solche Anpassung kann im Verfahren zyklisch, laufend ausgeführt werden.Depending on one or more temporal parameters, the starting of the output of a (specific) section of the audio signal, and / or the end of the output of a ( determined portion of the auditory message, and / or the time course of the amplitudes and / or frequency parameters of the auditory message, adjusted. Such an adaptation can be carried out cyclically, continuously in the method.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass die Art und/oder der Inhalt eines weiteren im Innenraum des Fahrzeugs hörbaren, insbesondere von einer sprachlich repräsentierten Information abweichenden, Audio-Kontexts ermittelt und in Abhängigkeit eines Analyseergebnisses zur Anpassung der auszugebenden auditiven Meldung verarbeitet wird.A further expedient embodiment provides that the type and / or content of another audible audio context which can be heard in the interior of the vehicle, deviating in particular from linguistically represented information, is determined and processed as a function of an analysis result for adapting the auditory message to be output.

Diese Ausgestaltung sieht vor, dass eine Anpassung der auditiven Meldung abhängig von der Art eines oder mehrerer weiterer im Fahrzeug hörbarer Audio-Kontexte erfolgt. Die Art des Audio-Kontexts kann in folgende oder vergleichbare Arten unterteilt werden: Musiktitel; Sprachprogramm; Fernmeldeinhalt (Telefonat, vorgelesene SMS, Messenger, usw.). Die Anpassung der auditiven Meldung kann abhängig vom Inhalt dieses weiteren Audio-Kontexts im Fahrzeug bzw. des Fahrzeugs erfolgen.This embodiment provides that an adaptation of the auditory message depends on the type of one or more further audible audio contexts audible in the vehicle. The type of audio context can be divided into the following or similar types: music titles; Language program; Telecommunication content (telephone call, read SMS, messenger, etc.). The adaptation of the auditory message can be done depending on the content of this further audio context in the vehicle or the vehicle.

Der Inhalt des, insbesondere im Innenraum hörbaren, insbesondere aktuell vorhandenen oder ausgegebenen, Audio-Kontexts kann im Verfahren, z.B. akustisch, als ein auszugebendes Audiosignal oder auszugebende Daten, erfasst und anhand folgender oder vergleichbarer Klassen unterteilt werden: Anfang/Ende eines Satzes und/oder Phrase eines Sprache umfassenden Multimediaprogramms (Radiosendung); Nachrichtenmeldung, Eilmeldung, Unterhaltungsprogramm; Sprachmitteilung, Fernmelde-Inhalt, (z.B. ein mit oder ohne eine Freisprecheinrichtung von einem Insassen geführtes Telefonat, eine Telefon- oder Videokonferenz und dergleichen).The content of the, in particular in the interior audible, in particular currently existing or output, audio context can in the process, e.g. acoustically, as an audio signal to be output or data to be output, are recorded and subdivided according to the following or comparable classes: start / end of a sentence and / or phrase of a multimedia program comprising multimedia (radio program); News, breaking news, entertainment; Voice messaging, telecommunications content (e.g., a hands-free call, with or without hands-free from a passenger, a telephone or video conference, and the like).

Beispielsweise kann das Verfahren abhängig vom Ermitteln einer hohen Priorität eines aktuellen oder prädizierten weiteren Audio-Kontexts, z.B. als „wichtig“ und/oder „dringend“, zu einer wesentlich stärkeren Anpassung der auditiven Meldung führen, als bei einem Audio-Kontext mit einer mittleren oder niedrigeren Priorität. Beispielsweise kann beim Feststellen einer zeitlichen Überschneidung zwischen einem Audio-Kontext bestimmter Art und/oder Inhalts und einer auditiven Meldung, die auditive Meldung zu einem früheren oder späteren Zeitpunkt und/oder in einer verkürzten Form und/oder mit einem veränderten akustischen Parameter ausgegeben werden.For example, depending on determining a high priority of a current or predicted further audio context, e.g. as "important" and / or "urgent", lead to a much greater adaptation of the auditory message than in an audio context with a medium or lower priority. For example, upon detecting a temporal overlap between an audio context of a particular type and / or content and an auditory message, the auditory message may be output at an earlier or later time and / or in a shortened form and / or with a changed acoustic parameter.

Das inhaltliche Merkmal der sprachlichen Kommunikation kann die Wichtigkeit und/oder Dringlichkeit des Kommunikationsinhalts und/oder eine bestimmte Wortwahl und/oder eine bestimmte, die auditive Meldung begleitende oder vorausgehende Gestik sein. Gemäß dieser Ausgestaltung kann demnach ein auszugebendes Audiosignal eines Musiktitels oder eines Unterhaltungsprogramms, insbesondere hinsichtlich seiner zu erzeugenden akustischen Wirkung im Fahrzeug, angepasst werden, wenn zugleich ermittelt wird, dass ein oder mehrere Insassen, z.B. anhand der Mimik, Lautstärke, Wortwahl und dergleichen, eine wichtige und/oder dringende Botschaft zu vermitteln haben. Abhängig von der erkannten Art und/oder dem Inhalt des Weiteren, im Innenraum des Fahrzeugs hörbaren Audio-Kontexts kann eine sprachliche Kommunikation eines Insassen des Fahrzeugs von diesen weiteren, insbesondere eine Sprache oder Textkommunikation umfassenden, Inhalten unterschieden werden.The content feature of the linguistic communication may be the importance and / or urgency of the communication content and / or a particular word choice and / or a particular gesture accompanying or preceded by the auditory message. Accordingly, according to this embodiment, an audio signal to be outputted from a song or an entertainment program, especially with regard to its acoustic effect to be generated in the vehicle, can be adjusted if it is also determined that one or more occupants, e.g. to communicate an important and / or urgent message on the basis of facial expressions, volume, wording and the like. Depending on the recognized type and / or the content of further, in the interior of the vehicle audible audio context, a linguistic communication of an occupant of the vehicle of these other, in particular a language or text communication comprising content can be distinguished.

Darüber hinaus kann ein Parameter des Weiteren, im Innenraum des Fahrzeugs hörbaren Audio-Kontexts ermittelt und verarbeitet werden. Die Anpassung des Parameters des Audiosignals kann abhängig von der Art des Audio-Kontexts erfolgen. Es kann zwischen einem Audio-Kontext, das im Innenraum des Fahrzeugs entsteht bzw. ausgegeben wird, und einem akustischen Signal, das von außerhalb des Fahrzeuginnenraums stammt und in diesen eindringt, unterschieden werden.In addition, a parameter may be further determined and processed in the interior of the vehicle audible audio context. The adjustment of the parameter of the audio signal may be made depending on the kind of the audio context. It can be discriminated between an audio context originating in the interior of the vehicle and an audible signal coming from and entering from outside the vehicle interior.

Es kann auch zwischen einem Audio-Kontext (z.B. einer Radiosendung, einer Talkshow, etc.), das von einem mit dem Fahrzeug mitgeführten Wiedergabegerät (z.B. Anwendergerät mit einem Lautsprecher) ausgegeben wird, und weiterem Audio-Kontext, z.B. von einer Geräuschkulisse, unterschieden werden. Ferner kann eine von zumindest einem Insassen telefonisch geführte Kommunikation im Verfahren ebenfalls als eine Art der sprachlichen Kommunikation berücksichtigt werden. Diese kann zu einer ähnlichen oder einer anderen Anpassung der auszugebenden auditiven Meldung führen.It may also be between an audio context (e.g., a radio broadcast, a talk show, etc.) output from a vehicle-mounted playback device (e.g., a user device with a speaker) and another audio context, e.g. from a background noise, can be distinguished. Furthermore, a telephone call conducted by at least one occupant communication in the process can also be considered as a type of linguistic communication. This may lead to a similar or different adaptation of the auditory report to be issued.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass abhängig von einer Auswertung zumindest einer körperlichen Haltung und/oder einer Geste des zumindest einen Insassen des Fahrzeugs erkannt wird, dass eine sprachliche Botschaft explizit an den im Fahrzeug mitgeführten Computer oder explizit nicht an den Computer des Fahrzeugs und/oder an einen bestimmten Insassen des Fahrzeugs gerichtet ist.Another expedient embodiment provides that, depending on an evaluation of at least one physical attitude and / or a gesture of the at least one occupant of the vehicle is detected that a linguistic message explicitly to the entrained in the vehicle computer or explicitly not to the computer of the vehicle and / or is directed to a specific occupant of the vehicle.

Diese Ausgestaltung ermöglicht die Erkennung, dass die sprachliche Kommunikation explizit nicht an den Bordcomputer gerichtet ist, z.B. wenn ein Sprecher einen Satz sagt und sich dabei körperlich an einen anderen Insassen des Fahrzeugs wendet. Daraufhin wird die von dem Sprecher ausgegebene sprachliche Mitteilung nicht oder zumindest nicht zwecks Generierung einer Antwort oder Befehlsausführung analysiert.This embodiment allows the recognition that the speech communication is explicitly not addressed to the on-board computer, e.g. when a speaker says one sentence and turns physically to another occupant of the vehicle. Thereafter, the linguistic message output by the speaker is not or at least not analyzed to generate a response or command execution.

Ferner kann im Verfahren ein Ermitteln und Berücksichtigen eines (naturwissenschaftlichen, mathematischen) Zusammenhangs zwischen einem Parameter einer oder mehrerer körperlicher Regungen zumindest eines Insassen, die abhängig von bestimmten Mustern der Gestik und/oder Mimik sind, und einem einhergehenden oder nachfolgenden inhaltlichen Merkmal der sprachlichen Kommunikation, insbesondere dem Sprechen des Insassen oder einer Reaktion des Insassen auf das Sprechen eines weiteren Insassen oder auf eine bestimmte auditive Meldung, erfolgen. Furthermore, in the method, a determination and consideration of a (scientific, mathematical) relationship between a parameter of one or more physical impulses of at least one occupant, which are dependent on certain patterns of gestures and / or facial expressions, and a concomitant or subsequent content-related feature of the linguistic communication , in particular the speaking of the occupant or a reaction of the occupant to the speech of another occupant or to a specific auditory message.

Dabei können auch nicht erwünschte Antworten oder nicht gewünschte (textuelle) Analyse des Gesprächs vermieden werden. Die Auswertung erfolgt dann vielmehr zweckgerichtet, insbesondere lediglich zur Anpassung des Parameters der durch den Computer generierten auditiven Meldungen. Beispielsweise kann sich die Klangquelle, die der generierten Stimme des Bordcomputers entspricht, abhängig von einem Richtungsparameter der sprachlichen Kommunikation zwischen zumindest zwei Insassen des Fahrzeugs virtuell verschoben, entfernt, näher gebracht oder bewegt werden. Hierzu kann die körperliche Haltung und/oder eine Geste zumindest eines Insassen des Fahrzeugs mit einer Kamera erkannt werden. Eine Zuwendung des Kopfes eines Insassen oder eine Körperdrehung und/oder ein Augenkontakt zu einem anderen Insassen kann dadurch erkannt werden.It is also possible to avoid unwanted answers or unwanted (textual) analysis of the conversation. The evaluation is then rather purposive, in particular only to adapt the parameter of the auditory messages generated by the computer. For example, depending on a direction parameter of the voice communication between at least two occupants of the vehicle, the sound source corresponding to the generated voice of the on-board computer may be virtually moved, removed, brought closer or moved. For this purpose, the physical posture and / or a gesture of at least one occupant of the vehicle can be detected with a camera. A donation of the head of an occupant or a body rotation and / or eye contact to another occupant can be recognized thereby.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass ein Wahrscheinlichkeitsmaß für eine erkannte sprachliche Botschaft eines Insassen ermittelt wird, wobei dann, wenn das Wahrscheinlichkeitsmaß einen Schwellwert übersteigt, dass die Botschaft nicht an den Computer, insbesondere mit der Erwartung einer Reaktion, gerichtet ist, die auditive Meldung angepasst wird.A further expedient embodiment provides that a probability measure for a recognized linguistic message of an occupant is determined, wherein when the probability measure exceeds a threshold that the message is not directed to the computer, in particular with the expectation of a response, the auditory Message is adjusted.

Bevorzugt kann im Verfahren ein Wahrscheinlichkeitsmaß ermittelt und berücksichtigt werden, dass zumindest ein Teil der auditiven Kommunikation, insbesondere eine bestimmte (im Innenraum des Fahrzeugs hörbare) sprachliche Botschaft, nicht an den Bordcomputer gerichtet ist und/oder an einen anderen Zuhörer gerichtet ist und/oder an einen per Mobilfunk zugeschalteten Zuhörer gerichtet ist. Daraufhin kann die Anpassung des zumindest eines Parameters des Audio-Inhalts unter Berücksichtigung eines oder mehrerer ermittelter Wahrscheinlichkeitsmaße erfolgen.Preferably, in the method, a probability measure can be determined and taken into account that at least part of the auditory communication, in particular a specific (audible in the interior of the vehicle) linguistic message is not directed to the on-board computer and / or directed to another listener and / or addressed to a listener connected by mobile. Thereupon, the adaptation of the at least one parameter of the audio content can take place taking into account one or more determined probability measures.

Meldungen von Insassen des Fahrzeugs werden dahingehend analysiert, ob und ggf. mit welcher Wahrscheinlichkeit diese an den Computer (Bordcomputer) gerichtet sind oder nicht. Übersteigt die Ermittlung eines ermittelten Wahrscheinlichkeitsmaßes einen vorgegebenen Schwellwert nicht, dann soll der Computer die sprachliche Botschaft nicht analysieren, nicht beantworten oder nicht (für den Insassen wahrnehmbar) reagieren, insbesondere nicht im Sinne einer Befehlsinterpretation verarbeiten bzw. keinen Sprachbefehl ausführen. Dies kann beispielsweise unter Berücksichtigung einer inhaltlichen, insbesondere linguistischen Sprachanalyse erzielt werden.Inmissions of passengers of the vehicle are analyzed to see whether and, if so, with what probability they are directed to the computer (on-board computer) or not. If the determination of a determined probability measure does not exceed a predetermined threshold value, then the computer should not analyze the linguistic message, not answer it or not (perceptible for the occupant), in particular not process in the sense of a command interpretation or execute a voice command. This can be achieved, for example, taking into account a content-related, in particular linguistic, speech analysis.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass zumindest ein Merkmal der sprachlichen Kommunikation zwischen den zumindest zwei Insassen des Fahrzeugs abhängig von der erkannten Körpersprache und/oder eine Stimmlage, insbesondere einer Veränderung der Stimme, zumindest eines der Insassen ermittelt und zur Anpassung des Erzeugens und/oder der Ausgabe der auditiven Meldung verarbeitet wird.A further expedient refinement provides that at least one feature of the linguistic communication between the at least two occupants of the vehicle is determined as a function of the recognized body language and / or a voice position, in particular a change in voice, of at least one of the occupants and / or to adapt the generation and / or or the output of the auditory message is processed.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass eine Reihenfolge zumindest zweier auditiver Meldungen und/oder einzelner Inhalte einer jeweiligen auditiven Meldung abhängig von einer gegenwärtigen Kommunikation oder einem prädizierten Kommunikationsvorhaben und/oder einer Stimme zumindest eines Insassen und/oder eines Insassen an einem bestimmten Sitzplatz verändert wird. Beispielsweise kann dabei die Anpassung der auszugebenden auditiven Meldungen derart erfolgen, dass die Datenabschnitte, die zu unterschiedlichen auditiven Meldungen und/oder einzelnen Teilen einer (aufgeteilten) auditiven Mitteilung gehören, in einer veränderten Reihenfolge ausgegeben werden.A further expedient embodiment provides that an order of at least two auditory messages and / or individual contents of a respective auditory message changes depending on a current communication or a predicted communication project and / or a vote of at least one occupant and / or occupant at a particular seat becomes. For example, the adjustment of the auditory messages to be output can take place in such a way that the data sections which belong to different auditory messages and / or individual parts of a (split) auditory communication are output in a changed order.

Zweckmäßigerweise wird dabei eine solche Reihenfolge gewählt, bei der in Form der auditiven Meldung auszugebender Inhalt in möglichst wenige Teile zerlegt werden muss und/oder eine Länge der Pausen zwischen der sprachlichen Kommunikation der Insassen im Fahrzeug und zumindest einem Teil der auditiven Meldung eingehalten wird.Expediently, an order is selected in which the content to be output in the form of the auditory message must be broken down into as few parts as possible and / or a length of the pauses between the linguistic communication of the occupants in the vehicle and at least part of the auditory message is maintained.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass ein inhaltliches Merkmal der sprachlichen Kommunikation zwischen zumindest zwei Insassen des Fahrzeugs ermittelt wird und/oder die Art und/oder die Priorität einer oder mehrerer auszugebender auditiver Meldungen ermittelt wird. Daraufhin wird eine Reihenfolge der zumindest zwei auditiven Meldungen und/oder einzelner Inhalte der auditiven Meldung, beispielsweise der zwei Teile einer aufgeteilten auditiven Meldung, ermittelt, abhängig von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation und/oder der ermittelten Art und/oder der Priorität der zumindest zwei auszugebenden auditiven Meldungen.A further expedient embodiment provides that a content-related feature of the linguistic communication between at least two occupants of the vehicle is determined and / or the type and / or priority of one or more auditory messages to be output is determined. Thereupon, an order of the at least two auditory messages and / or individual contents of the auditory message, for example the two parts of a divided auditory message, is determined, depending on the determined content characteristic of the linguistic communication and / or the determined type and / or the priority of the at least two auditory reports to be issued.

In diesem Fall kann eine gezielte Analyse und Priorisierung mehrerer akustisch auszugebender auditiver Meldungen oder mehrerer Teile einer auditiven Meldung ausgeführt werden. Daraufhin können zwei oder mehrere auditiven Meldungen bzw. Teile einer aufgeteilten auditiven Meldung im Rahmen einer Planung passend auf einer Zeitachse platziert werden.In this case, a targeted analysis and prioritization of multiple auditory messages to be audibly issued or multiple portions of an auditory message may be performed. Thereupon two can or several auditory messages or parts of a split auditory report are placed on a timeline as part of a schedule.

Bevorzugt kann im Verfahren eine Analyse der Art und/oder Priorität von zumindest zwei auszugebenden auditiven Meldungen oder Teilen einer auditiven Meldung ausgeführt werden. Daraufhin kann die Ausgabe von zumindest zwei auszugebenden auditiven Meldungen oder der Abschnitte einer auditiven Meldung, insbesondere abhängig von den Unterschieden zwischen Ihren Arten und/oder Prioritäten, geplant, insbesondere bestimmten Zeitintervallen und/oder einem oder mehreren erwarteten Kriterien oder Events (z.B. auf das Erreichen eines bestimmten Fahrbahnabschnitts, z.B. vor einer Kreuzung, Ausfahrt, etc.) zugeordnet werden.Preferably, in the method, an analysis of the type and / or priority of at least two auditory reports to be output or parts of an auditory report can be carried out. Thereupon, the output of at least two auditory messages or sections of auditory reporting may be scheduled, in particular depending on the differences between their types and / or priorities, particularly particular time intervals and / or one or more expected criteria or events (eg, achievement a certain road section, for example, before an intersection, exit, etc.) are assigned.

Alternativ oder zusätzlich kann im Verfahren ein Abgleich der Parameter des Audio-Kontexts, der eine Art und/oder eine vorgegebene oder ein aus der Art ermitteltes Prioritätsmaß repräsentiert, ausgeführt werden, und der Parameter des einer auszugebenden auditiven Meldung, die eine Art und/oder eine vorgegebene oder ein aus der Art ermitteltes Prioritätsmaß repräsentiert, der auditiven Meldung ausgeführt werden. Ein solcher Abgleich kann beispielsweise nach einer vorgegebenen Vorschrift, Logik, Zuordnungstabelle, etc. ausgeführt werden. Abhängig von dem Abgleich der Parameter kann ein Anpassen der auszugebenden akustischen Meldung erfolgen.Alternatively or additionally, in the method, a comparison of the parameters of the audio context, representing a type and / or a predetermined or determined from the type priority measure, executed, and the parameter of an auditory message to be issued, a kind and / or a predetermined or one of the kind determined priority measure represents the auditory message executed. Such an adjustment can be carried out, for example, according to a prescribed rule, logic, assignment table, etc. Depending on the adjustment of the parameters, the acoustic message to be output can be adapted.

Bevorzugt repräsentiert zumindest ein Optimierungskriterium zur Anpassung zumindest einer auditiven Meldung eine hinreichende Hörbarkeit und/oder Wahrnehmbarkeit und/oder (akustische) Verständlichkeit zumindest einer (bestimmten) auditiven Kommunikation zwischen den Insassen und/oder der zumindest einen auditiven Meldung. Eine solche Wahrnehmbarkeit bzw. Hörbarkeit bzw. Verständlichkeit kann beispielsweise unter Einsatz eines psychoakustischen Modells einer menschlichen akustischen Wahrnehmung ermittelt und im Verfahren berücksichtigt werden.At least one optimization criterion for adapting at least one auditory message preferably represents a sufficient audibility and / or perceptibility and / or (acoustic) intelligibility of at least one (specific) auditory communication between the occupants and / or the at least one auditory message. Such perceptibility or audibility or intelligibility can be determined, for example, using a psychoacoustic model of a human acoustic perception and taken into account in the method.

Bevorzugt repräsentiert zumindest ein weiteres Optimierungskriterium zur Anpassung zumindest einer auditiven Meldung eine Minimierung einer zeitlichen Überschneidung zwischen dem Sprechen zumindest eines Insassen und der Ausgabe der auditiven Meldung.At least one further optimization criterion for adapting at least one auditory message preferably represents a minimization of a temporal overlap between the speech of at least one occupant and the output of the auditory message.

Ein weiteres Optimierungskriterium kann zumindest eine Fahrzeugeinstellung oder eine Nutzereinstellung sein, die z.B. zu einem Sitzplatz oder einem Nutzerprofil eines Insassen zugeordnet werden kann. Diese kann beispielsweise repräsentieren, in welchem Maße eine auditive Kommunikation, insbesondere aus einer bestimmten Richtung und/oder in welchem Maße eine, insbesondere eine bestimmte, auditive Meldung hörbar sein soll. Dabei können auch bestimmte Wahrnehmungseigenschaften zumindest einer bestimmten Person, z.B. Parameter repräsentierend ein Audiogramm eines bestimmten Insassen, berücksichtigt werden.Another optimization criterion may be at least one vehicle setting or user setting, e.g. can be assigned to a seat or a user profile of an occupant. This can represent, for example, the extent to which auditory communication, in particular from a certain direction and / or to what extent one, in particular a specific, auditory message should be audible. Certain perception characteristics of at least one particular person, e.g. Parameter representing an audiogram of a particular occupant, be taken into account.

Folglich kann das Verfahren derart ausgeführt werden, dass sowohl zumindest eine auditive Kommunikation als auch zumindest eine auditive Meldung, insbesondere von einem bestimmten Insassen, hinreichend und/oder in einem gewünschten Maße hörbar ist.Consequently, the method may be carried out such that both at least one auditory communication and at least one auditory message, in particular from a particular occupant, is sufficiently audible and / or to a desired extent.

Eine weitere zweckmäßige Ausgestaltung sieht vor, dass ermittelt wird, dass ein Teil der auditiven Meldung mit einer, einen vorgegebenen Schwellwert übersteigenden, Wahrscheinlichkeit nicht hinreichend wahrnehmbar ist, und der Teil der auditiven Meldung wiederholt wird. Bei dieser Ausgestaltung kann zumindest ein Teil der auditiven Meldung wiederholt werden, so dass der wiederholte Teil der auditiven Meldung einen gültigen, d.h. hinreichend vollständigen und für die Insassen verständlichen, Satz ergibt.A further expedient embodiment provides that it is determined that a part of the auditory message is not sufficiently perceptible with a probability exceeding a predetermined threshold, and the part of the auditory message is repeated. In this embodiment, at least a portion of the auditory message may be repeated such that the repeated portion of the auditory message is a valid, i. sufficiently complete and comprehensible to the inmates.

Alternativ oder zusätzlich kann ein Anpassen eines, der auditiven Meldung entsprechenden Audiosignals erfolgen, dass die Signalenergie zumindest eines Teils der auditiven Meldung auf einen oder mehrere Frequenzbereiche verteilt wird, die eine geringere, insbesondere eine möglichst geringe Überschneidung oder Korrelation zu den Frequenzbereichen der menschlichen Stimme, insbesondere zur Stimme eines bestimmten Insassen (des „Sprechers“) aufweisen. Dabei kann die Wahrnehmbarkeit und/oder Verständlichkeit der sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs und/oder der auditiven Meldung erhöht oder eine wechselseitige Störung, insbesondere eine (beispielsweise aus der Psychoakustik bekannte) Maskierung verringert werden.Alternatively or additionally, an adaptation of the audio signal corresponding to the auditory message can be carried out such that the signal energy of at least a part of the auditory message is distributed to one or more frequency ranges which have a lesser, in particular the smallest possible overlap or correlation with the frequency ranges of the human voice. in particular to the voice of a particular occupant (the "speaker"). In this case, the perceptibility and / or comprehensibility of the linguistic communication between the occupants of the vehicle and / or the auditory message can be increased or a mutual interference, in particular a masking (known, for example, from psychoacoustics) can be reduced.

In einem weiteren Beispiel des Verfahrens kann der Computer, insbesondere eine einem „Fahrzeugassistenten“ oder einem „Co-Piloten“ entsprechende Applikation, zum Verhalten als eine „mitsprechende“ Partei im Innenraum des Fahrzeugs eingerichtet sein, welche die Kommunikation zwischen den Insassen in dem Fahrzeug nicht in nachteiliger Weise beeinflusst. Dabei kann der Computer mit einer eignen vorgegebenen Sprachpriorität versehen werden, der die Kommunikation der Insassen in dem Fahrzeug wahrnimmt und einen passenden Zeitpunkt in der Kommunikation wählt, um die auditive Meldung auszugeben. Falls angenommen werden kann, dass die auditive Meldung nicht hinreichend gehört wurde, kann der Computer diese wiederholen, ohne dass eine Aktion der Insassen hierfür notwendig ist.In another example of the method, the computer, in particular an application corresponding to a "vehicle assistant" or a "co-pilot", may be configured to behave as a "cooperative" party in the interior of the vehicle, which is the communication between the occupants in the vehicle not adversely affected. In doing so, the computer may be provided with its own predetermined voice priority, which perceives the communication of the occupants in the vehicle and chooses an appropriate time in the communication to issue the auditory message. If it can be assumed that the auditory message has not been sufficiently heard, the computer can repeat it without any action on the part of the occupants being necessary.

Bei der Anwendung des Verfahrens auf zumindest zwei gleichzeitig bzw. zeitlich überschneidend ablaufenden Kommunikationen kann die resultierende Anpassung des Inhalts und/oder eines Audiosignalparameters einer auszugebenden auditiven Meldung unter Berücksichtigung der zumindest zwei Kommunikationen im Innenraum des Fahrzeugs erfolgen. Dabei können die zumindest zwei unterschiedlichen Kommunikationen im Verfahren beispielsweise mit unterschiedlichen vorausbestimmten Kriterien und/oder mit unterschiedlichem Einfluss auf die zumindest eine auditive Meldung berücksichtigt werden. In applying the method to at least two concurrent communications, the resulting adaptation of the content and / or audio signal parameter of an auditory message to be output may be made taking into account the at least two communications in the interior of the vehicle. In this case, the at least two different communications in the method can be taken into account, for example, with different predetermined criteria and / or with different influence on the at least one auditory message.

Bevorzugt erfolgt im Verfahren eine Steuerung eines zeitlichen Parameters zumindest eines Teil der auditiven Meldung, eines entsprechenden akustischen Parameters, insbesondere eines Raumklangparameters und des Inhalts (inhaltlicher Parameter) der auditiven Meldung abhängig von einem oder mehreren inhaltlichen Merkmalen einer oder mehrerer sprachlichen Kommunikationen im Innenraum eines Fahrzeugs zwischen den zumindest zwei Insassen des Fahrzeugs.Preferably, in the method, a control of a temporal parameter of at least a part of the auditory message, a corresponding acoustic parameter, in particular a surround sound parameter and the content (content parameter) of the auditory message is dependent on one or more content characteristics of one or more linguistic communications in the interior of a vehicle between the at least two occupants of the vehicle.

Es können im Verfahren zumindest zwei inhaltliche Merkmale der sprachlichen Kommunikation ermittelt und berücksichtigt werden, die eine, z.B. zeitlich geordnete, Sequenz aus mehreren entsprechenden Parameterwerten, z.B. in Bezug auf die nahe Vergangenheit und/oder etwa den aktuellen Zeitpunkt und/oder eine Prädiktion für die nahe Zukunft, umfassen. Beispielsweise kann ein Parameterwert inhaltlich auch ein Maß der Veränderung eines entsprechenden Werts im Verlauf der Zeit repräsentieren.In the method, at least two content-related features of the linguistic communication can be determined and taken into account, which include a, e.g. time-ordered sequence of several corresponding parameter values, e.g. with regard to the near past and / or about the current time and / or a prediction for the near future. For example, a parameter value in terms of content may also represent a measure of the change of a corresponding value over time.

Das inhaltliche Merkmal muss nicht dem Inhalt der Kommunikation entsprechen. Dieses kann lediglich einen oder mehrere Parameterwerte umfassen, die ein oder mehrere Merkmale der Kommunikation repräsentieren (ohne dabei die Kommunikation selbst wiederzugeben). In einem besonderen Beispiel des Verfahrens kann ein inhaltliches Merkmal der sprachlichen Kommunikation beispielsweise einen (im Verfahren eingeschätzten) objektiven und/oder subjektiven Wahrheitsgehalt eines entsprechenden Abschnitts der sprachlichen Kommunikation, z.B. eine Aussage, repräsentieren.The content characteristic does not have to correspond to the content of the communication. This may include only one or more parameter values representing one or more features of the communication (without reflecting the communication itself). In a particular example of the method, a linguistic communication feature may include, for example, an objective and / or subjective truth content of a corresponding portion of the linguistic communication (e.g., estimated in the method), e.g. a statement, represent.

Zumindest ein inhaltliches Merkmal der sprachlichen Kommunikation kann im Verfahren auf Basis von Sensordaten, einer Historie, z.B. im Zusammenhang mit einer oder mehreren Kommunikationen im Fahrzeuginnenraum oder Kommunikationen mit Beteiligung bestimmter Personen und/oder unter Berücksichtigung einer Wahrscheinlichkeitsrechnung, ermittelt werden. Beispielsweise kann zumindest ein inhaltliches Merkmal einer aktuellen oder bevorstehenden sprachlichen Kommunikation, mittels eines Abgleichs bzw. einer Verrechnung einer Vielzahl inhaltlicher Merkmale und/oder weiterer Parameter aus der Historie prädiziert werden. Ein solcher Abgleich kann im Verfahren z.B. innerhalb eines Backends ausgeführt werden.At least one content-related feature of the linguistic communication can be used in the method on the basis of sensor data, a history, e.g. in connection with one or more communications in the vehicle interior or communications involving certain persons and / or considering a probability calculation. For example, at least one content-related feature of a current or forthcoming linguistic communication can be predicted by means of a comparison or a clearing of a multiplicity of content-related features and / or further parameters from the history. Such alignment can be performed in the method e.g. be executed within a backend.

Bevorzugt erfolgt im Verfahren ein, insbesondere laufend bzw. zyklisch ausgeführtes, Anpassen zumindest einer auditiven Meldung, z.B. eines Parameters der auditiven Meldung. Das Anpassen kann vor und/oder während der Ausgabe zumindest eines Abschnitts der auditiven Meldung, abhängig von zumindest einem in der Vergangenheit oder aktuell ermittelten inhaltlichen Parameter und/oder zumindest einem prädizierten inhaltlichen Parameter der Kommunikation erfolgen. Das „Anpassen“ bedeutet im Verfahren insbesondere ein zweckmäßiges Verändern, welches beispielsweise zur Erreichung eines oder mehrerer vorausbestimmter Ziele, eines oder mehrerer vorausbestimmter logischer oder mathematischer Zusammenhänge dient, insbesondere nach einem oder mehreren Optimierungskriterien.In the method, it is preferable to adapt, in particular continuously or cyclically, to adapt at least one auditory message, e.g. a parameter of the auditory message. The adaptation can take place before and / or during the output of at least one section of the auditory message, depending on at least one of the past or currently determined content-related parameters and / or at least one predefined content-related parameter of the communication. The "adaptation" in the method means, in particular, a suitable modification, which serves, for example, to achieve one or more predefined goals, one or more predefined logical or mathematical relationships, in particular according to one or more optimization criteria.

Der Computer kann optional auch zur Erfassung, Interpretation einer gesprochenen Sprache zu einer Spracheingabe, Befehlsausführung oder Generierung einer Antwort, ausgestaltet sein. Dabei ergeben sich synergetische Vorteile, weil die (auf das Sprechen mit dem Fahrer ausgerichteten) Merkmale eines solchen Computers zur Ausführung des Verfahrens, insbesondere zur Analyse der nicht an den Bordcomputer gerichteten sprachlichen Kommunikation, mitgenutzt oder befähigt werden können.Optionally, the computer may also be configured to capture, interprete a spoken language into a voice input, command execution or generation of a response. This results in synergistic advantages, because the (oriented to the speaking with the driver) features of such a computer for executing the method, in particular for the analysis of not directed to the on-board computer linguistic communication, can be shared or enabled.

Beim Fahrzeug handelt es sich im Rahmen dieser Beschreibung bevorzugt um ein Kraftfahrzeug, insbesondere einen PKW (= Personen-Kraft-Wagen). Dies ist vorteilhaft, weil der Innenraum eines solchen Fahrzeugs einen vergleichsweise knapp bemessenen, akustisch weitgehend isolierten bzw. abgeschlossenen Raum bildet, in dem mehrere auditive Kommunikationen und die auditive Meldung innerhalb eines eng bemessenen Raums erzeugt und gehört werden sollen. Grundsätzlich kann das Verfahren aber auch auf andere Arten der Fahrzeuge, z.B. einen Bus, Zug, Wasserfahrzeug, Flugzeug, ggf. in einer sinngemäß angepassten Form angewandt werden. Somit kann auch die visuelle Wahrnehmung des Fahrers und die Notwendigkeit, den Blick von der Umgebung des Fahrzeugs auf ein Anzeigeinstrument (meist häufig) zu akkommodieren, geschont werden.In the context of this description, the vehicle is preferably a motor vehicle, in particular a passenger car (= passenger-power car). This is advantageous because the interior of such a vehicle forms a comparatively tight, acoustically largely isolated space in which multiple auditory communications and auditory messages are to be generated and heard within a confined space. In principle, however, the method can also be applied to other types of vehicles, e.g. a bus, train, watercraft, aircraft, if necessary, be applied in a mutatis mutandis adapted form. Thus, the visual perception of the driver and the need to accommodate the view of the surroundings of the vehicle on a display instrument (usually often), can be spared.

Ferner ist eine Anwendung der Erfindung auf ein automatisiert fahrendes Fahrzeug besonders vorteilhaft, weil der Fahrer eines solchen Fahrzeugs aufgrund der Entlastung von Fahraufgaben die Augen auch für längere Zeit schließen oder vom Fahrgeschehen abwenden darf. Die auditive Kommunikation im Allgemeinen und insbesondere vom Fahrer mit einem weiteren Insassen und/oder mit dem Computer wird dadurch entsprechend bedeutsamer. Die Erfindung erlaubt es, diese wesentlich komfortabler zu gestalten und ggf. auszuweiten. Somit können z.B. auch wichtige Informationen als generierte Sprache ausgegeben werden.Furthermore, an application of the invention to an automated moving vehicle is particularly advantageous because the driver of such a vehicle due to the relief of driving tasks close the eyes for a long time or avert from driving. The auditory communication in general and in particular by the driver with another occupant and / or with the Computer becomes correspondingly more significant. The invention makes it much more comfortable to design and expand if necessary. Thus, for example, important information can also be output as generated language.

Die Erfindung schafft ferner ein Computerprogrammprodukt, das direkt in den internen Speicher eines digitalen Rechners geladen werden kann und Softwarecodeabschnitte umfasst, mit denen die Schritte des in dieser Beschreibung ausgeführten Verfahrens ausgeführt werden, wenn das Produkt auf einem Computer läuft. Das Computerprogrammprodukt kann auf einem Datenträger, wie z.B. einer DVD, einer CD-ROM, einem USB-Stick und dergleichen, verwirklicht sein. Ebenso kann das Computerprogrammprodukt als ein zu ladendes Programm verwirklicht sein, das über ein Netzwerk oder drahtlos geladen werden kann. Das Computerprogrammprodukt kann auch als ein Update eines bisherigen Computerprogramms ausgebildet sein, welches beispielsweise im Rahmen einer Funktionserweiterung, beispielsweise im Rahmen eines sogenannten „Remote Software Update“, den entsprechenden Programmcode bzw. die Teile betreffenden Softwarecodeabschnitte zur Ausführung des Verfahrens umfasst.
Die Erfindung schlägt ferner eine Vorrichtung zum Erzeugen auditiver Meldungen eines mit einem Fahrzeug mitgeführten Computers vor, wobei die auditive Meldung eine sprachliche Mitteilung an Insassen des Fahrzeugs umfasst. Die Vorrichtung umfasst ein erstes Mittel zum Ermitteln zumindest eines inhaltlichen Merkmals einer sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs sowie ein zweites Mittel zum Anpassen der auditiven Meldung in Abhängigkeit von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den Insassen des Fahrzeugs.
The invention further provides a computer program product that can be loaded directly into the internal memory of a digital computer and includes software code portions that perform the steps of the method set forth in this specification when the product is run on a computer. The computer program product can be realized on a data carrier, such as a DVD, a CD-ROM, a USB stick and the like. Likewise, the computer program product may be implemented as a program to be loaded that may be loaded over a network or wirelessly. The computer program product can also be designed as an update of a previous computer program, which includes, for example as part of a functional extension, for example in the context of a so-called "remote software update", the corresponding program code or software code sections relating to the execution of the method.
The invention further proposes an apparatus for generating auditory messages of a computer carried by a vehicle, the auditory message comprising a voice message to occupants of the vehicle. The device comprises a first means for determining at least one content characteristic of a linguistic communication between the occupants of the vehicle and a second means for adjusting the auditory message in dependence on the determined content characteristic of the linguistic communication between the occupants of the vehicle.

Bevorzugt kann die Vorrichtung zusammen mit oder auf Basis von einer Vorrichtung realisiert werden, die zur Erfassung, Interpretation einer gesprochenen Sprache für eine Spracheingabe, Befehlsausführung oder Generierung einer Antwort dient. Dabei können die (auf das Sprechen mit dem Fahrer ausgestalteten) Mittel der Vorrichtung auch zur Ausführung des Verfahrens, insbesondere zur Analyse der nicht an den Bordcomputer gerichteter sprachlichen Kommunikation und/oder Anpassung der auditiven Meldungen eingerichtet sein. Ferner kann die Vorrichtung weitere, z.B. im Fahrzeug mitgeführte oder verbaute Mittel umfassen.Preferably, the device may be implemented together with or based on a device for detecting, interpreting a spoken language for voice input, executing commands, or generating a response. In this case, the means (designed for speaking to the driver) of the device can also be set up for executing the method, in particular for analyzing the linguistic communication not directed to the on-board computer and / or adaptation of the auditory messages. Furthermore, the device may have further, e.g. include means carried or installed in the vehicle.

Die erfindungsgemäße Vorrichtung weist die gleichen Vorteile auf, wie diese vorstehend in Verbindung mit dem erfindungsgemäßen Verfahren beschrieben wurden.The device according to the invention has the same advantages as described above in connection with the method according to the invention.

In einer zweckmäßigen Ausgestaltung weist die erfindungsgemäße Vorrichtung weitere Mittel zur Durchführung des Verfahrens gemäß der oben wiedergegebenen und nachfolgenden Beschreibung auf.In an expedient refinement, the device according to the invention has further means for carrying out the method according to the above-described and following description.

Die Erfindung wird nachfolgend näher anhand von Ausführungsbeispielen in der Zeichnung, ohne Beschränkung der Allgemeinheit, erläutert. Es zeigen:

  • 1 eine schematische Darstellung eines Fahrzeugs mit einer Vorrichtung zum adaptiven Erzeugen auditiver Meldungen.
The invention will be explained in more detail below with reference to embodiments in the drawing, without limiting the generality. Show it:
  • 1 a schematic representation of a vehicle with an apparatus for adaptively generating auditory messages.

1 zeigt in einer schematischen Darstellung eine Draufsicht auf ein Fahrzeug 1. Bei dem Fahrzeug 1 handelt es sich um ein Kraftfahrzeug, insbesondere einen Personenkraftwagen, einen Van oder einen Minibus. Das Fahrzeug 1 kann mit einem Verbrennungsmotor und/oder einem Elektromotor angetrieben werden. Das Fahrzeug 1 kann auch dazu ausgebildet sein, rein elektrisch bewegt zu werden. Optional kann das Fahrzeug 1 über teilautonome oder vollautonome Fahrfunktionen verfügen. Grundsätzlich kann das Verfahren auch auf andere Arten der Fahrzeuge 1 (z.B. Bus, Zug, Wasserfahrzeug, Flugzeug) in einer entsprechend angepassten Form angewandt werden. 1 shows a schematic representation of a plan view of a vehicle 1 , In the vehicle 1 it is a motor vehicle, in particular a passenger car, a van or a minibus. The vehicle 1 can be powered by an internal combustion engine and / or an electric motor. The vehicle 1 can also be designed to be moved purely electrically. Optionally, the vehicle 1 have semi-autonomous or fully autonomous driving functions. Basically, the procedure can also apply to other types of vehicles 1 (eg bus, train, watercraft, aircraft) are applied in a suitably adapted form.

In der in 1 gezeigten Darstellung entspricht die Fahrtrichtung des Fahrzeugs 1 der mit „vorne“ gekennzeichneten Pfeilrichtung des Koordinatensystems. Das Fahrzeug 1 bewegt sich somit in der Zeichnung in Blattebene von unten nach oben.In the in 1 shown representation corresponds to the direction of travel of the vehicle 1 the arrow direction of the coordinate system marked "front". The vehicle 1 thus moves in the drawing in leaf level from bottom to top.

Das Fahrzeug 1 verfügt lediglich beispielhaft über vier Sitzplätze. Ein linker Vordersitz ist mit 2L, ein rechter Vordersitz mit 2R, ein linker, hinterer Sitzplatz mit 3L und ein rechter, hinterer Sitzplatz mit 3R gekennzeichnet. Lediglich beispielhaft sitzen auf dem linken Vordersitz 2L, auf dem rechten Vordersitz 2R und auf dem rechten, hinteren Sitzplatz 3R jeweils ein Insasse 11, 12, 13. Lediglich beispielhaft ist der linke, hintere Sitzplatz 3L nicht belegt. Der Insasse 11 stellt den Fahrer des Fahrzeugs 1 dar. Lediglich zu Illustrationszwecken ist daher in Fahrtrichtung vor dem Insassen 11 ein Lenkrad 14 oder ein anderes Steuerelement zur Beeinflussung der Querführung des Fahrzeugs angeordnet.The vehicle 1 has only four seats for example. A left front seat is with 2L, a right front seat with 2R , a left, rear seat with 3L and a right, rear seat with 3R characterized. By way of example only sitting on the left front seat 2L , in the right front seat 2R and on the right, rear seat 3R one inmate each 11 . 12 . 13 , For example only, the left, rear seat 3L not used. The inmate 11 represents the driver of the vehicle 1 Only for illustration purposes is therefore in the direction of travel in front of the occupant 11 a steering wheel 14 or another control arranged to influence the lateral guidance of the vehicle.

Das schematisch dargestellte Fahrzeug 1 umfasst ein Multimediasystem 4. Zur Ausgabe von auditiven Meldungen ist das Multimediasystem 4 mit einer Anzahl an Lautsprechern 8-1, ..., 8-7 verbunden. Die Lautsprecher 8-1, ..., 8-7 sind im Innenraum des Fahrzeugs verteilt, wobei lediglich beispielhaft die Lautsprecher 8-1 zentral im Bereich des Armaturenbretts vor den Insassen angeordnet ist. Die Lautsprecher 8-2, 8-4, 8-6 sind im linken Bereich der Karosserie des Fahrzeugs und die Lautsprecher 8-4, 8-5, 8-7 im rechten Bereich der Karosserie des Fahrzeugs 1 angeordnet. Das Multimediasystem 4 verfügt optional über eine nicht näher dargestellte Steuereinheit, welche in der Lage ist, einen Raumklang im Innenraum des Fahrzeugs 1 zu erzeugen. Dies bedeutet, über die Lautsprecher 8-1, ..., 8-7 ausgegebene auditive Informationen können durch gezielte Ansteuerung von Raumklangparametern, Frequenzparametern, Amplitudenverlauf und/oder Phasenparametern so gesteuert werden, dass die Lautstärke und/oder Klangeigenschaften an unterschiedlichen Sitzplätzen des Fahrzeugs unterschiedlich ausgebildet werden können.The schematically illustrated vehicle 1 includes a multimedia system 4 , The output of auditory messages is the multimedia system 4 with a number of speakers 8th - 1 , ..., 8th - 7 connected. The speaker 8th - 1 , ..., 8th - 7 are distributed in the interior of the vehicle, with only the example of the speakers 8th - 1 centrally located in the area of the dashboard in front of the occupants. The speaker 8th - 2 . 8th - 4 . 8th - 6 are in the left area of the body of the vehicle and the speakers 8th - 4 . 8th - 5 . 8th - 7 in the right area of the body of the vehicle 1 arranged. The multimedia system 4 Optionally has a not shown Control unit, which is capable of a surround sound in the interior of the vehicle 1 to create. This means over the speakers 8th - 1 , ..., 8th - 7 output auditory information can be controlled by targeted control of Raumklangparametern, frequency parameters, amplitude curve and / or phase parameters so that the volume and / or sound properties can be formed differently at different seats of the vehicle.

Alternativ oder zusätzlich zum dargestellten Multimediasystem kann zumindest ein Teil des Verfahrens, insbesondere die Ausgabe der auditiven Meldung, mit einem im Fahrzeug mitgeführten Gerät durchgeführt werden, das zumindest zur Energieversorgung und/oder zum Datenaustausch zur Ausführung des Verfahrens mit dem Fahrzeug gekoppelt ist.As an alternative or in addition to the illustrated multimedia system, at least part of the method, in particular the output of the auditory message, can be carried out with a device carried in the vehicle, which is coupled to the vehicle at least for energy supply and / or data exchange for executing the method.

Das Fahrzeug 1 verfügt darüber hinaus als Computer über einen Bordcomputer 5, der eine Recheneinheit darstellt. Mit dem Bordcomputer 5 sind eine Kamera 6 zur Erfassung des Innenraumbereichs des Fahrzeugs und ein Mikrofon 7 zur Aufnahme von, von den Insassen 11, 12, 13 gesprochenen Botschaften angeordnet. Als Computer könnte auch ein in dem Fahrzeug mitgeführtes und in der Figur nicht dargestelltes, insbesondere mobiles, Endgerät dienen, wie z.B. ein tragbares Navigationssystem oder ein Mobilfunkendgerät. Diese können über eine drahtlose (z.B. Bluetooth) oder eine kontaktbehaftete Verbindung bidirektional Daten mit dem Auto, z.B. dem Multimediasystem 4, austauschen. Es können eine Vielzahl unterschiedlicher auditiver Meldungen (Informationen zum Zuhören und Verstehen) abhängig von vorausbestimmten Kriterien ausgegeben oder frei generiert werden.The vehicle 1 also has a computer on an on-board computer 5 which represents a computing unit. With the on-board computer 5 are a camera 6 for detecting the interior area of the vehicle and a microphone 7 for the reception of, by the inmates 11 . 12 . 13 arranged messages. As a computer could also be carried in the vehicle and not shown in the figure, in particular mobile terminal serve, such as a portable navigation system or a mobile terminal. These can use a wireless (eg Bluetooth) or a contact connection bidirectional data with the car, eg the multimedia system 4 , change. A variety of different auditory messages (information about listening and understanding) can be issued depending on predefined criteria or generated freely.

Mit dem Bezugszeichen 9 ist allgemein eine Sensorik gekennzeichnet. Die Sensorik 9 kann beispielsweise Sensoren zur Erkennung einer Sitzbelegung und/oder Sensoren zum Erkennen eines angelegten Sicherheitsgurts und/oder Türsensoren, die das Öffnen und Schließen einer Tür erkennen, umfassen. Mit Hilfe der Sensorik 9 ist es möglich, die Belegung der einzelnen Sitzplätze 2L, 2R, 3L, 3R rechnergestützt zu bestimmen. Zur Erkennung, ob ein Sitzplatz belegt ist, kann darüber hinaus das von der Kamera 6 erfasste Bild des Innenraums ausgewertet werden. Wird beispielsweise festgestellt, dass auf einem bestimmten Sitzplatz des Fahrzeugs niemand sitzt, dann kann ausgeschlossen werden, dass eine sprachliche Kommunikation aus der entsprechenden Raumrichtung zu erwarten ist. Demgegenüber kann eine bessere Anpassung der Parameter des Audio-Inhalts für zumindest eine andere Raumrichtung erfolgen.With the reference number 9 In general, a sensor is characterized. The sensors 9 For example, sensors for detecting a seat occupancy and / or sensors for detecting an applied seat belt and / or door sensors, which detect the opening and closing of a door may comprise. With the help of sensors 9 It is possible to change the occupancy of each seat 2L . 2R . 3L . 3R computer-aided to determine. In addition, to detect whether a seat is occupied, the camera 6 captured image of the interior to be evaluated. If, for example, it is determined that nobody is sitting on a certain seat of the vehicle, then it can be ruled out that a linguistic communication from the corresponding spatial direction is to be expected. In contrast, a better adaptation of the parameters of the audio content for at least one other spatial direction can take place.

Die beschriebene Vorrichtung wird dazu genutzt, auditive Meldungen, und auch weitere, von den auditiven Meldungen unterschiedliche Audio-Inhalte, derart auszugeben, dass diese eine sprachliche Kommunikation der Insassen 11, 12, 13 nicht stört.The described device is used to output auditory messages, as well as other audio content other than the auditory messages, in such a way as to provide linguistic communication to the occupants 11 . 12 . 13 does not bother.

Dazu wird mithilfe der Sensorik und/oder dem Computer (d.h. dem Bordcomputer oder dem im Fahrzeug mitgeführten, aber Fahrzeug-externen Endgerät) ermittelt, wann ein geeigneter Zeitpunkt zur Ausgabe der auditiven Meldung ist. Die Vorrichtung wird ferner dazu genutzt, die auditiven Meldungen derart auszugeben, dass diese abhängig von der sprachlichen Kommunikation und/oder Inhalten der sprachlichen Kommunikation im Fahrzeug intelligent gesteuert werden. Dazu kann die auditive Meldung in mehrere Teilstücke zerlegt und zu unterschiedlichen Zeitpunkten ausgegeben werden, welche den Redefluss der Insassen bei ihrer sprachlichen Kommunikation berücksichtigen. Es kann ein zeitliches Verschieben, Vorziehen oder eine Aufteilung der auditiven Meldungen erfolgen. Dabei kann auch ein optimiertes Platzieren der zerlegten Teile der auditiven Meldung hinsichtlich der Reihenfolge ihrer Ausgabe im Redefluss der Kommunikation innerhalb des Fahrzeugs erfolgen.To do so, it is determined by means of the sensors and / or the computer (i.e., the on-board computer or the vehicle-mounted but vehicle-external terminal) when a suitable time for issuing the auditory message is. The device is also used to output the auditory messages such that they are intelligently controlled depending on the linguistic communication and / or content of the linguistic communication in the vehicle. For this purpose, the auditory message can be divided into several sections and output at different times, which take into account the flow of speech of the occupants in their linguistic communication. It can be a temporal shift, preference or a distribution of auditory notifications. It can also be an optimized placement of the disassembled parts of the auditory message regarding the order of their issue in the flow of communication within the vehicle.

Der Zeitpunkt der Ausgabe der auditiven Meldung wird abhängig von einem prädizierten akustischen Inhalt der sprachlichen Kommunikation bestimmt. Dabei wird zwischen einem im Innenraum erzeugten und einem von außen kommenden, jedoch im Innenraum hörbaren akustischen Inhalt unterschieden. Darüber hinaus kann eine Unterscheidung zwischen einem akustischen Inhalt der sprachlichen Kommunikation und einem fahrzeugeigenen oder an das Fahrzeug angeschlossenen oder im Fahrzeug mitgeführten Audioausgabesystem erfolgen.The timing of the output of the auditory message is determined depending on a predicted acoustic content of the voice communication. In this case, a distinction is made between an interior generated and an exterior audible but audible interior acoustic content. In addition, a distinction between an acoustic content of the speech communication and an on-board or connected to the vehicle or carried in the vehicle audio output system can be done.

Besonders bevorzugt werden ein oder mehrere zeitliche Intervalle, z.B. repräsentiert durch einen Zeitpunkt und/oder Dauer, ermittelt, welche zur Ausgabe zumindest einer (bestimmten) auditiven Meldung oder eines bestimmten Abschnitts einer auditiven Meldung und/oder eines oder mehrerer Abschnitte einer auditiven Meldung mit (jeweils) einer bestimmten zeitlichen Dauer geeignet und/oder ungeeignet sind.Particularly preferred are one or more temporal intervals, e.g. represented by a time and / or duration, determined which are suitable for outputting at least one (specific) auditory report or section of an auditory report and / or one or more sections of an auditory report having (respectively) a particular time duration; and / or are unsuitable.

Das Bestimmen des entsprechenden zeitlichen Parameters zur Ausgabe einer oder mehrerer auditiver Meldungen oder der Abschnitte der auditiven Meldungen kann im Verfahren aus den ermittelten Zeitintervallen und der Information darüber, ob diese (mehr oder minder, insbesondere in einem quantitativen Maß) geeignet und/oder ungeeignet zur Ausgabe der auditiven Meldungen sind, bestimmt werden. In einem vereinfachten Fall können (in einer analogen Weise) die geeigneten Zeitpunkte bzw. Intervalle aus dem zeitlichen Parametern ermittelt werden, die Zeitpunkte bzw. Zeitintervalle kennzeichnen, die zur Ausgabe der auditiven Meldungen nicht geeignet sind.The determination of the corresponding temporal parameter for the output of one or more auditory reports or the sections of the auditory messages may be suitable and / or unsuitable in the method from the determined time intervals and the information as to whether these more or less, in particular in a quantitative measure Output of the auditory messages are to be determined. In a simplified case, the appropriate time points or intervals can be determined from the temporal parameters (in an analogous manner) which indicate time points or time intervals which are not suitable for outputting the auditory messages.

Darüber hinaus ist auch eine Unterscheidung zwischen einer Art des im Innenraum hörbaren akustischen Inhalts (z.B. Musik, Audioprogramm, sprachliche Kommunikation) möglich. Unterschiedlichen Insassen oder Insassen auf unterschiedlichen Sitzplätzen kann ein jeweils unterschiedlicher Einfluss auf das Bestimmen des Zeitpunkts zur Ausgabe der auditiven Meldung und/oder auf den inhaltlichen Einfluss auf die auditive Meldung zugewiesen werden. So kann der Computer bei der Ausgabe der auditiven Meldung beispielsweise die Kommunikation des Fahrers mit einem anderen Insassen bezüglich des Zeitpunkts zur Ausgabe der auditiven Meldung berücksichtigen, während eine zwischen dem Insassen 12 auf dem Beifahrersitz und dem Insassen 13 auf dem hinteren rechten Sitzplatz stattfindende Kommunikation als nicht relevant betrachtet wird. Dies kann beispielsweise bei der Ausgabe von Navigationsansagen der Fall sein, welche sich üblicherweise lediglich an den Fahrer (d.h. Insasse 11) des Fahrzeugs 1 wendet.In addition, a distinction between a type of audible in the interior audible content (eg music, audio program, voice communication) is possible. Different occupants or occupants in different seats may each have a different influence on the determination of the time for the output of the auditory message and / or on the substantive influence on the auditory message assigned. For example, when issuing the auditory alert, the computer may consider, for example, the driver's communication with another occupant regarding the time the auditory message was issued, while one between the occupant 12 in the passenger seat and the occupant 13 is considered to be irrelevant in the back seat on the right. This may be the case, for example, in the issuance of navigation announcements, which are usually only to the driver (ie occupant 11 ) of the vehicle 1 applies.

Optional kann im Verfahren eine Erkennung belegter Sitze im Fahrzeug erfolgen sowie eine Anzahl im Fahrzeug vorhandener Insassen und eine Verteilung bestimmter Insassen über Sitze ermittelt und berücksichtigt werden. Dabei kann zumindest ein potentieller Zuhörer der sprachlichen Kommunikation und/oder der auditiven Meldung im Innenraum des Fahrzeugs ermittelt werden. Ferner kann das Anpassen der auditiven Meldung unter Berücksichtigung des zumindest einen potentiellen Zuhörers, insbesondere einer Sitzposition des potentiellen Zuhörers ausgeführt werden. Falls hingegen ermittelt wird, dass sich in einem bestimmten Teil des Fahrzeuginnenraums niemand befindet, dann kann auf eine Anpassung bzw. Optimierung für den betreffenden Teil des Innenraums verzichtet werden und/oder eine für zumindest einen weiteren Teil des Innenraums (z.B. Sitzplätze) optimierte Anpassung der zumindest einer auditiven Meldung ausgeführt werden kann.Optionally, in the method, a recognition of occupied seats in the vehicle can take place and a number of occupants present in the vehicle and a distribution of certain occupants via seats can be determined and taken into account. In this case, at least one potential listener of the speech communication and / or the auditory message in the interior of the vehicle can be determined. Furthermore, the adaptation of the auditory message can be carried out taking into account the at least one potential listener, in particular a sitting position of the potential listener. If, on the other hand, it is determined that there is nobody in a certain part of the vehicle interior, then an adaptation or optimization for the relevant part of the interior can be dispensed with and / or an adaptation of the adaptation optimized for at least one further part of the interior (eg seats) at least one auditory message can be executed.

Optional kann ferner eine Anpassung des zumindest eines Parameters der auditiven Meldung, eine Zuordnung bestimmter auszugebender Inhalte und/oder Signalkomponenten der zumindest einen auditiven Meldung zu zumindest einem Lautsprecher und/oder durch die Anpassung der Balance zwischen zumindest zwei, bevorzugt zwischen zumindest vier, im Fahrzeuginnenraum angeordneten Lautsprechern erfolgen.Optionally, furthermore, an adaptation of the at least one parameter of the auditory message, an assignment of certain contents to be output and / or signal components of the at least one auditory message to at least one loudspeaker and / or by adjusting the balance between at least two, preferably between at least four, in the vehicle interior arranged loudspeakers take place.

Optional können im Verfahren, beispielsweise mittels einer entsprechenden Bestimmung bzw. Veränderung des einen oder mehreren Raumklangparameter, eine oder mehrere (auch virtuelle, zumindest durch menschliche Wahrnehmung im Innenraum des Fahrzeugs hörbare) Klangquellen erzeugt werden.Optionally, in the method, for example by means of a corresponding determination or modification of the one or more surround sound parameters, one or more (also virtual, audible at least by human perception in the interior of the vehicle) sound sources can be generated.

Beispielsweise kann eine Klangquelle, die mit der Ausgabe einer auditiven Meldung korrespondiert, insbesondere mit der einen oder den mehreren auditiven Meldungen ausgegeben werden, jeweils unterschiedliche, insbesondere im Verfahren steuerbare bzw. anpassbare Richtungen, Abstände, Positionen, akustische Parameter aufweisen.For example, a sound source which corresponds to the output of an auditory message, in particular with the one or more auditory messages, may each have different directions, distances, positions, acoustic parameters which can be controlled or adapted in particular in the method.

Das Erzeugen der Klangquellen zu einer oder mehreren auditiven Meldungen kann sich jeweils auf einen bestimmten Innenraumbereich des Fahrzeugs beziehen, von welchem aus diese Klangquelle oder Klangquellen wahrnehmbar (hörbar) gemacht werden.Generating the sound sources to one or more auditory messages may each refer to a particular interior region of the vehicle from which that sound source or sources are made perceptible (audible).

Bevorzugt kann im Verfahren ein Raumklangparameter, der eine (aus einer bestimmten Sitzposition und/oder Kopfausrichtung des Insassen wahrnehmbare) Richtung, Abstand, Position, akustische Parameter zu zumindest einer Klangquelle repräsentiert, bestimmt werden und eine entsprechende Klangquelle erzeugt werden.Preferably, in the method, a surround sound parameter representing a direction, distance, position, acoustic parameters to at least one sound source (perceptible from a specific seating position and / or head orientation of the occupant) can be determined and a corresponding sound source generated.

Beispielsweise werden auf Basis einer auszugebenden auditiven Meldung, abhängig von dem besagten Parameter der auditiven Kommunikation, für zumindest zwei verschiedene räumliche Bereiche des Innenraums des Fahrzeugs oder für zwei bestimmte Insassen bzw. Insassen an bestimmten Sitzen, auditiv wahrnehmbare Klangquellen erzeugt. Dabei können diese Klangquellen bzw. die den Klangquellen korrespondierenden auditiven Meldungen unterschiedliche, jeweils zweckmäßig angepasste, objektiv messbare oder subjektiv von den tatsächlich anwesenden oder angenommenen Insassen, wahrnehmbare Parameter aufweisen.For example, auditory perceptible sound sources are generated for at least two different spatial areas of the interior of the vehicle or for two specific occupants or occupants at certain seats, based on an auditory message to be output, depending on said auditory communication parameter. In this case, these sound sources or the auditory messages corresponding to the sound sources may have different perceptible parameters, each suitably adapted, objectively measurable or subjectively perceived by the actually present or assumed occupants.

Optional kann abhängig von der Erkennung des der zumindest einen Stimme, mit der die besagte Kommunikation im Innenraum des Fahrzeugs stattfindet, entsprechenden Geschlechts das Geschlecht der Stimme, in der eine Sprache umfassende auditive Meldung erzeugt wird, bestimmt werden. Dieses kann dann je nach vorausbestimmten Kriterien, z.B. Nutzereinstellungen oder Logik, jeweils demselben oder einem jeweils anderen Geschlecht entsprechen.Optionally, depending on the recognition of the gender corresponding to the at least one voice with which said communication takes place in the interior of the vehicle, the gender of the voice in which a voice comprising an auditory message is generated can be determined. This can then be determined according to predetermined criteria, e.g. User settings or logic, each corresponding to the same or a different gender.

Beispielsweise wenn erkannt wird, dass eine Kommunikation im Innenraum mit einer oder mehreren männlichen Stimmen erfolgt, dann wird eine Sprachmitteilung des Computers in einer weiblichen Stimme ausgegeben und/oder wenn erkannt wird, dass eine Kommunikation im Wohnraum mit einer oder mehreren weiblichen Stimmen erfolgt, dann wird eine mit dem Audiosignal zu übermittelnde Sprachmitteilung des Computers in einer männlichen Stimme ausgegeben.For example, if it is detected that there is an indoor communication with one or more male voices, then a voice message of the computer is output in a female voice and / or if it is detected that communication in the living space occurs with one or more female voices, then becomes a to be transmitted with the audio signal Voice message of the computer output in a male voice.

Optional kann abhängig von einem inhaltlichen Merkmal der sprachlichen Kommunikation die Priorität der jeweiligen, von einem Insassen gesprochener, Kommunikation automatisch eingeschätzt oder berücksichtigt werden. So kann eine für die Verkehrssicherheit relevante sprachliche Kommunikation zwischen den Insassen priorisiert werden, so dass z.B. eine auditive Meldung des Computers gestoppt und zu einem späteren Zeitpunkt, z.B. nach Beendigung der sprachlichen Kommunikation zwischen den Insassen, ausgegeben wird.Optionally, depending on a content-related feature of the linguistic communication, the priority of the respective communication spoken by an occupant can be automatically estimated or taken into account. Thus, a traffic-relevant linguistic communication between the occupants can be prioritized, so that e.g. stopped an auditory message from the computer and at a later time, e.g. after completion of the linguistic communication between the inmates, is issued.

Bevorzugt wird ein Parameter der sprachlichen Kommunikation zwischen den Insassen, z.B. ein Indikator darüber wie lange die Kommunikation noch dauern wird, prädiziert und beim Anpassen der auditiven Meldung berücksichtigt.Preferably, a parameter of the linguistic communication between the occupants, e.g. An indicator of how long the communication will take, predicted and taken into account when adjusting the auditory message.

Es kann abhängig von der Art eines ermittelten oder prädizierten akustischen Inhalts der sprachlichen Kommunikation eine geplante oder gerade ausgegebene auditive Meldung pausiert und nach dem Ende der sprachlichen Kommunikation (oder eines Satzes innerhalb der sprachlichen Kommunikation) wiedergegeben werden. Hierzu wird die auditive Meldung in zumindest zwei Teile aufgeteilt.Depending on the nature of a determined or predicted acoustic content of the linguistic communication, a scheduled or currently issued auditory message may be paused and played back after the end of the linguistic communication (or sentence within the linguistic communication). For this purpose, the auditory message is divided into at least two parts.

Die auditive Meldung kann abhängig von dem ermittelten oder prädizierten Merkmal der sprachlichen Kommunikation, insbesondere abhängig von der Art des akustischen Inhalts, pausiert werden. Alternativ oder zusätzlich kann der Inhalt der auditiven Meldung in zumindest zwei Teile aufgeteilt werden. Ein solches Vorgehen kann abhängig von der prädizierten auditiven Meldung, z.B. vor oder während ihrer Ausgabe, veranlasst werden. Beispielsweise wird die auditive Meldung, wie eine Ansage des Bordcomputers 5, pausiert oder vorausschauend, d.h. noch vor ihrer Ausgabe, in zwei oder mehrere Teile zerlegt.The auditory message can be paused depending on the determined or predicted feature of the linguistic communication, in particular depending on the type of acoustic content. Alternatively or additionally, the content of the auditory message may be divided into at least two parts. Such a procedure may be initiated depending on the predicated auditory message, eg, before or during its issue. For example, the auditory message, such as an announcement of the onboard computer 5 paused or anticipatory, ie before its release, divided into two or more parts.

Wird bei der Ausgabe der auditiven Meldung mit Hilfe der Sensorik 9 festgestellt, dass zumindest ein, insbesondere relevanter, Teil der auditiven Meldung mit einer vorgegebenen Wahrscheinlichkeit nicht hinreichend durch die Insassen wahrgenommen wurde, so wird zumindest ein relevanter Teil (der Teil und/oder ein im Zusammenhang mit dem Teil stehender Teil) der auditiven Meldung wiederholt. Die Wiederholung erfolgt bevorzugt dergestalt, dass der wiederholte Teil der auditiven Meldung einen gültigen, d.h. hinreichend vollständigen, Satz ergibt.Will at auditory announcement issue by means of sensors 9 determined that at least one, in particular relevant, part of the auditory message was not sufficiently perceived by the occupants with a given probability, at least one relevant part (the part and / or a part related to the part) of the auditory message is repeated , The repetition preferably takes place in such a way that the repeated part of the auditory message results in a valid, ie sufficiently complete, sentence.

Dabei kann eine Wiederholung eines Abschnitts der auditiven Meldung erfolgen, welcher durch die ermittelte auditive (sprachliche) Kommunikation im Innenraum wesentlich beeinflusst ist bzw. wurde. Dabei kann z.B. eine bereits angefangene auditive Meldung, die während ihrer Ausgabe durch die auditive Kommunikation wesentlich (stark und/oder während eines relativ langen Zeitintervalls) übertönt worden ist, wiederholt ausgegeben werden.This may be a repetition of a portion of the auditory message, which is or has been significantly influenced by the determined auditory (linguistic) communication in the interior. In this case, e.g. an auditory message already started which has been substantially drowned out during its output by the auditory communication (strong and / or during a relatively long time interval) will be issued repeatedly.

Als eine Wiederholung ist dabei auch zu verstehen, dass eine neue auditive Meldung bzw. ein Abschnitt der auditiven Meldung erneut erzeugt wird, wobei zumindest ein, nicht hinreichend übermittelter Inhalt damit ausgeglichen, ergänzt oder ersetzt wird.As a repetition is also to be understood that a new auditory message or a portion of the auditory message is generated again, whereby at least one, not sufficiently transmitted content is thus compensated, supplemented or replaced.

Eine sprachliche Kommunikation (Sprache) kann im Verfahren ferner von einem weiteren denkbaren Audio-Kontext im Innenraum des Fahrzeugs, insbesondere auch von einem Sprache umfassendem Multimediaprogramm, (explizit) unterschieden werden. Dabei kann auch eine Trennung eines, beispielsweise akustisch erfassten, Signals in einen, eine sprachliche Kommunikation umfassenden, Teil und/oder einen weitere sprachliche Inhalte umfassenden und/oder keine der Sprache entsprechenden Teil erfolgen.In the method, linguistic communication (speech) can also be (explicitly) distinguished from another conceivable audio context in the interior of the vehicle, in particular also from a multimedia program comprising a language. In this case, a separation of a, for example, acoustically detected, signal in a, a linguistic communication comprehensive, part and / or a further linguistic content comprehensive and / or no language corresponding part done.

Eine sprachliche Kommunikation im Innenraum des Fahrzeugs kann von weiteren Audiokontexten, z.B. des Multimediasystems, bevorzugt unterschieden werden, wobei ein Abgleich zwischen einem aus dem Multimediasystem ausgegebenen Audiosignals und einem mit zumindest einem Mikrofon im Innenraum des Fahrzeugs erfassten Signal ausgeführt wird. Dabei können beispielsweise die aus dem Multimediasystem ausgegebenen sprachlichen Inhalte (Stimme eines Nachrichtensprechers) von der Stimme zumindest eines Insassen unterschieden werden. Der Abgleich kann mittels Analyse der Ähnlichkeit, Korrelation, etc. ermittelt werden.Linguistic communication in the interior of the vehicle may be affected by other audio contexts, e.g. of the multimedia system, preferably a comparison being carried out between an audio signal output from the multimedia system and a signal recorded with at least one microphone in the interior of the vehicle. In this case, for example, the linguistic contents (voice of a newscaster) output from the multimedia system can be distinguished from the voice of at least one occupant. The comparison can be determined by analysis of similarity, correlation, etc.

Ferner können die weiteren aus dem Multimediasystem auszugebenen Inhalte prädiziert und bei der Anpassung der zumindest einen auditiven Meldung berücksichtigt werden. Beispielsweise kann der Inhalt eines gestreamten Datenstroms oder eines von einem Datenträger gelesenen Inhalts vor seiner Wiedergabe zu analysiert werden. Typischerweise liegt ein solcher (aus dem Internet, Cloud oder von der CD gelesener) Datenstrom zumindest einige Sekunden vor seiner Wiedergabe in einem entsprechenden Gerät (Computer, Speicher bzw. Arbeitsspeicherbereich) vor. In der Erfindung kann dieser auch (zumindest grob, z.B. nach dem Amplitudenverlauf) analysiert werden.Furthermore, the further contents to be output from the multimedia system can be predicted and taken into account when adapting the at least one auditory message. For example, the content of a stream of stream or content read from a volume may be analyzed before it is rendered. Typically, such a data stream (read from the Internet, cloud or CD) is present at least a few seconds prior to its playback in a corresponding device (computer, memory or memory area). In the invention, it can also be analyzed (at least roughly, for example according to the amplitude curve).

Dabei kann eine Anpassung der auditiven Meldungen auch unter Berücksichtigung eines für die nahe Zukunft prädizierten Audio-Kontexts erfolgen. Mit anderen Worten kann im Verfahren in eine nahe Zukunft geschaut werden, um daraufhin die auditiven Meldungen hinsichtlich ihrer inhaltlichen Parameter, Parameter des entsprechenden akustischen Signals, hinsichtlich des Zeitpunkts der Ausgabe oder der Reihenfolge von zumindest zwei akustischen Meldungen oder Teilen einer, beispielsweise aufgeteilten, akustischen Meldung anzupassen.In this case, the auditory messages can also be adapted taking into account a predicted audio context for the near future. In other words, the method can be used to look into the near future, in order then to determine the auditory messages with regard to their content parameters, parameters of the corresponding acoustic signal, with regard to the time of the output or the Order of at least two acoustic messages or parts of a, for example, split, acoustic message adapt.

Insbesondere erfolgt zumindest ein Anpassen der auditiven Meldung, insbesondere hinsichtlich ihres inhaltlichen Merkmals, abhängig von (in den letzten Sekunden) prädizierten Parametern und zumindest ein weiteres Anpassen, insbesondere hinsichtlich eines akustischen Parameters, nahezu in Echtzeit. Es kann auch ein zyklisches, laufendes Anpassen der auditiven Meldung, insbesondere nahezu in Echtzeit, ausgeführt werden.In particular, at least the auditory message is adjusted, in particular with regard to its content feature, depending on (in the last few seconds) predicted parameters and at least one further adaptation, in particular with regard to an acoustic parameter, almost in real time. It is also possible to carry out a cyclical, ongoing adaptation of the auditory message, in particular almost in real time.

Dennoch kann auch ein inhaltliches Merkmal während des Erzeugens der auszugebenden auditiven Meldung, z.B. abweichend von einem vorher geplanten inhaltlichen Merkmal, (laufend) angepasst werden.Nevertheless, a feature of content may also be generated during the generation of the auditory message to be output, e.g. deviating from a previously planned content-related characteristic, (ongoing).

In diesem Beispiel können folgende Parameter der sprachlichen Kommunikation zwischen den Insassen erfasst, mittels einer Spracherkennung ausgewertet und berücksichtigt werden:

  • - Phonologische Parameter (z.B. betreffend Phoneme, Silben);
  • - Morphologische Parameter (z.B. betreffend Bestandteile einer Sprache (Morpheme), deren Kombination, Verhältnis zueinander, etc.);
  • - Syntaktische Parameter (z.B. zur Form und der Struktur von Wortkombinationen, Satzgrammatik);
  • - Lexikologische Parameter (z.B. betreffend einlernen bestimmter Wörter);
  • - Semantische Parameter (z.B. die Bedeutung von Wörtern in Bezug auf bestimmte Gegebenheiten);
  • - Satzsemantische Parameter (z.B. betreffend logische Bedeutung von Sätzen);
  • - Textsemantische Parameter (z.B. betreffend Bezüge auf erkannte Gegebenheiten).
In this example, the following parameters of the linguistic communication between the occupants can be detected, evaluated by means of speech recognition and taken into account:
  • - Phonological parameters (eg concerning phonemes, syllables);
  • - Morphological parameters (eg concerning components of a language (morphemes), their combination, relationship to each other, etc.);
  • - Syntactic parameters (eg on the form and structure of word combinations, sentence grammar);
  • - lexicological parameters (eg regarding learning specific words);
  • - semantic parameters (eg the meaning of words in relation to specific circumstances);
  • - sentence-semantic parameters (eg regarding the logical meaning of sentences);
  • - Text-semantic parameters (eg regarding references to recognized circumstances).

Ferner können im Verfahren Stimmen eines oder mehrerer Insassen eingelernt und, insbesondere im Zusammenhang mit inhaltlichen Merkmalen, berücksichtigt werden. Eingelernte Stimmen können als ein oder mehrere, für die Stimme typische Parameterwerte repräsentiert werden. Auf Basis solcher Parameter können Erkennungsdaten für eine oder mehrere bestimmte Stimmen ermittelt bzw. im Verfahren verarbeitet werden. Beispielsweise können die Erkennungsdaten für eine oder mehrere Stimmen auch auf Basis der Daten einer Sprachsteuerung, Freisprechvorrichtung des Fahrzeugs oder eines mobilen Anwendergeräts (z.B. beim Telefonieren) gewonnen werden.Furthermore, voices of one or more inmates can be learned in the method and taken into account, in particular in connection with content-related features. Teach-in voices can be represented as one or more typical parameter values for the voice. On the basis of such parameters, identification data for one or more specific voices can be determined or processed in the method. For example, the recognition data for one or more voices may also be obtained based on the data of a voice control, hands-free device of the vehicle, or a mobile user device (e.g., when making a phone call).

Ein oder mehrere der genannten Parameter werden auch bei der Anpassung der zumindest einen auszugebenden auditiven Meldung, insbesondere mittels einer Sprachgenerierung oder Sprachsynthese variiert, insbesondere derart, dass eine Optimierung nach vorausbestimmten Kriterien angestrebt wird. Dabei kann eine jeweils zweckmäßige Kombination der Parameter ermittelt und berücksichtigt werden.One or more of the mentioned parameters are also varied during the adaptation of the at least one auditory message to be output, in particular by means of a speech generation or speech synthesis, in particular such that an optimization according to predetermined criteria is sought. In this case, an appropriate combination of the parameters can be determined and taken into account.

In diesem Beispiel ist die Vorrichtung derart ausgestaltet, dass eine wechselseitige Störung zwischen einer auditiven Meldung und einer Kommunikation zwischen zumindest zwei Insassen, insbesondere in Bezug auf die Hörbarkeit und/oder Verständlichkeit sprachlicher Inhalte, minimiert wird. Mit dem Verfahren kann dies auch bei einer optimalen Laustärke der sprachlichen Kommunikation und/oder der auditiven Mitteilung erreicht werden.In this example, the device is designed such that a mutual interference between an auditory message and a communication between at least two occupants, in particular with respect to the audibility and / or intelligibility of linguistic contents, is minimized. With the method, this can also be achieved with an optimal volume of speech communication and / or auditory communication.

Eine auditive Meldung kann im Verfahren derart angepasst werden, dass dabei eine, durch Töne, Sequenzen von Tönen oder Melodien repräsentierte Information variiert wird. Alternativ oder zusätzlich können wiederum Töne, Sequenzen von Tönen oder Melodien angepasst werden, die dabei eine im Wesentlichen unveränderte Information repräsentieren.An auditory message can be adjusted in the method such that a piece of information represented by tones, sequences of tones or melodies is varied. Alternatively or additionally, in turn, tones, sequences of tones or melodies can be adapted, which represent a substantially unchanged information.

Mit anderen Worten kann eine mit der auditiven Meldung zu übermittelnde, beispielsweise auf Fahrzeugdaten basierende, Information, z.B. eine Fahrerinformation variiert werden. Diese kann im Verfahren mittels veränderter, angepasster Töne, Sequenzen von Tönen oder Melodien ausgegeben werden. Dabei kann zumindest ein erstes Kriterium einer auditiven Meldung mit einer bestimmten Art oder einem bestimmten Inhalt angepasst werden, während zumindest ein zweites Kriterium, welches die auditive Meldung als auditive Meldung der bestimmten Art oder mit dem bestimmten Inhalt gekennzeichnet, unverändert ausgegeben oder verstärkt wird. Beispielsweise können eine oder mehrere Frequenzen und/oder Amplituden, in welchen die Töne der auditiven Meldung ausgegeben werden, angepasst werden, während eine Sequenz der Töne, beispielsweise nur die zeitlichen Zusammenhänge zwischen der Ausgabe der Töne, im Wesentlichen konstant bleibt. Somit kann erreicht werden, dass die auditive Meldung durch die menschliche Wahrnehmung immer noch hinreichend wiedererkennbar bzw. interpretierbar ist.In other words, information to be transmitted with the auditory message, for example based on vehicle data, e.g. a driver information can be varied. This can be output in the method by means of modified, adapted tones, sequences of tones or melodies. In this case, at least a first criterion of an auditory message with a certain type or a specific content can be adapted, while at least a second criterion, which identifies the auditory message as an auditory message of the particular kind or with the particular content, is issued or enhanced unchanged. For example, one or more frequencies and / or amplitudes in which the tones of the auditory message are output may be adjusted, while a sequence of the tones, for example only the temporal relationships between the output of the tones, remain substantially constant. Thus, it can be achieved that the auditory message is still sufficiently recognizable or interpretable by human perception.

In einem weiteren Beispiel können aus einem inhaltlichen Merkmal der sprachlichen Kommunikation, insbesondere unter der Berücksichtigung (Abgleich) mit zumindest einem inhaltlichen Parameter aus der Historie, ein oder mehrere Prioritätsmaße für die vorliegende Kommunikation ermittelt und im Verfahren berücksichtigt werden.In another example, one or more priority measures for the present communication can be determined from a content characteristic of the linguistic communication, in particular taking into account (matching) with at least one content-related parameter from the history, and taken into account in the method.

Dabei kann in einem vereinfachten Beispiel festgestellt werden, dass es sich um ein wichtiges Gespräch der Insassen handelt, und daraufhin ein Erzeugen der auditiven Meldung unterdrückt werden und zu einem späteren Zeitpunkt nachgeholt werden. It can be stated in a simplified example that it is an important conversation of the inmates, and then generating the auditory message are suppressed and made up for later.

Abhängig von dem Abgleich der eingelesenen, ermittelten oder geschätzten Prioritätsmaße kann ein Anpassen zumindest einer auszugebenden, auditiven Meldung erfolgen. Dabei kann der Zeitpunkt der Ausgabe und/oder zumindest ein, insbesondere akustischer Parameter bei der Ausgabe der auditiven Meldung variiert werden. Beispielsweise kann, wenn nur ein kurzes Zeitintervall zwischen einer sprachlichen Kommunikation erkannt oder prädiziert wird, eine auditive Meldung zum passenden Zeitintervall ausgegeben werden. In diesem Falle wird zumindest der Zeitpunkt oder ein Zeitintervall der Ausgabe der auditiven Meldung angepasst. Ferner kann das Verfahren auch den Zeitpunkt, zu dem die Ausgabe der auditiven Meldung beendet werden soll, und/oder das Zeitintervall der Ausgabe der auditiven Meldung anpassen. Insbesondere kann die auditive Meldung passend zu einem zur Verfügung stehenden Zeitintervall innerhalb einer Kommunikation zwischen den zumindest zwei Insassen des Fahrzeugs platziert bzw. geplant werden. Depending on the alignment of the read-in, determined or estimated priority measures, it is possible to adapt at least one auditory message to be output. In this case, the time of the output and / or at least one, in particular acoustic parameters in the output of the auditory message can be varied. For example, if only a short time interval between speech communication is detected or predicted, an auditory message may be issued at the appropriate time interval. In this case, at least the time or a time interval of the output of the auditory message is adjusted. Further, the method may also adjust the time at which the auditory message is to be ended and / or the auditory message time interval. In particular, the auditory message may be appropriately placed or scheduled within an available time interval within a communication between the at least two occupants of the vehicle.

Beispielsweise kann diese zwischen zwei Phrasen eines Sprechers oder einer Phrase eines Sprechers ausgegeben werden, wobei ein Zeitintervall bis zu einer erwarteten Erwiderung der Phrase durch einen anderen Insassen als hinreichend ermittelt, prädiziert bzw. geschätzt wird. Ferner kann abhängig von dem Abgleich der besagten Parameter eine zur Ausgabe als eine akustische Meldung bestimmte Information alternativ oder zusätzlich als eine visuelle Meldung, z.B. Bild, Grafik, Text oder Symbol, oder eine haptische Meldung, z.B. Vibration, ausgegeben werden.For example, this may be output between two phrases of a speaker or a phrase of a speaker, wherein a time interval until an expected response of the phrase by another occupant is sufficiently determined, predicted or estimated. Further, depending on the matching of said parameters, information intended to be output as an audible message may alternatively or additionally be presented as a visual message, e.g. Image, graphic, text or symbol, or a haptic message, e.g. Vibration, be issued.

Beispielsweise kann, falls aus dem Abgleich der Parameter ermittelt wird, dass der akustische Inhalt eine insgesamt höhere Priorität als die akustische Meldung erhalten soll, die auditive Meldung unterdrückt oder zu einem späteren Zeitpunkt und/oder mit veränderten Parameter ausgegeben werden. Beispielsweise kann, falls aus dem Abgleich der Prioritätsmaße ermittelt wird, dass eine bestimmte auditive Meldung ein insgesamt höheres Prioritätsmaß als ein bestimmter akustischer Inhalt inne hat, die auditive Meldung mit einem veränderten Parameter, z.B. lauter oder vorwiegend aus einem anderen Lautsprecher, ausgegeben werden und zusätzlich eine visuelle bzw. grafische und/oder haptische Meldung ausgegeben werden. Es können im Verfahren eine oder mehrere auditive Meldungen auf dieser Basis erzeugt werden, wobei die Zeitpunkte für ihre Ausgabe derart gewählt werden, dass diese hinsichtlich des Ausgabezeitintervalls im Wesentlichen zwischen zwei weiteren akustischen Inhalten, z.B. zu bestimmte Schwellen übersteigenden Amplituden bzw. Amplitudenmaxima von zwei akustischen Inhalten, passt.For example, if it is determined from the adjustment of the parameter that the acoustic content is to receive an overall higher priority than the acoustic message, the auditory message can be suppressed or output at a later time and / or with changed parameters. For example, if it is determined from the alignment of the priority measures that a particular auditory message has an overall higher priority measure than a certain auditory content, the auditory message may be associated with a changed parameter, e.g. louder or predominantly from another loudspeaker, and in addition a visual or graphical and / or haptic message are output. One or more auditory messages may be generated in the method on this basis, wherein the times for their output are chosen such that, with respect to the output time interval, they are substantially separated between two further audible contents, e.g. to certain thresholds exceeding amplitudes or amplitude maxima of two acoustic content, fits.

Zur Ausgabe der auditiven Meldung kann eine Emotionserkennung und/oder Absichtserkennung eines Insassen des Fahrzeugs vorgenommen werden, woraufhin eine Anpassung der Art und/oder Lautstärke und/oder Intonation und/oder Tonlage der auditiven Meldung erfolgt. Die Emotionserkennung und/oder Absichtserkennung kann mit Hilfe der Sensorik, z.B. der Kamera 6, des Fahrzeugs erkannt werden. Hierzu kann eine Auswertung des zeitlichen Verlaufs der Mimik der Insassen und/oder deren Gestik und/oder weiterer körperlicher Regungen erfolgen.To output the auditory message, an emotion recognition and / or intention recognition of an occupant of the vehicle can be carried out, after which an adaptation of the type and / or volume and / or intonation and / or pitch of the auditory message takes place. The emotion recognition and / or intent detection can with the help of sensors, such as the camera 6 , the vehicle can be detected. For this purpose, an evaluation of the time course of the facial expressions of the occupants and / or their gestures and / or other physical impulses can take place.

Bei einer erkannten, hohen emotionalen Erregung zumindest eines der Insassen, insbesondere des sprechenden Insassen, kann eine frühere und/oder stärkere Anpassung der auditiven Meldung erfolgen. Hierdurch kann die Wahrnehmbarkeit der auditiven Meldung und die Verkehrssicherheit erhöht werden.With a recognized, high emotional excitement of at least one of the inmates, in particular of the speaking inmate, an earlier and / or stronger adjustment of the auditory message can take place. This can increase the visibility of the auditory message and the traffic safety.

In einem weiteren Beispiel des Verfahrens kann eine auditive Meldung je nach dem inhaltlichen Parameter der sprachlichen Kommunikation zwischen zumindest zwei Insassen des Fahrzeugs in ihrer Wortwahl, Ton, Stimme, linguistischen Parameter variiert werden, wobei dies unter Berücksichtigung eines sogenannten Kommunikationsmodells erfolgt. Dabei kann ein bestimmtes, beispielsweise von den Nutzereinstellungen abhängiges, Kommunikationsziel angestrebt werden.In another example of the method, an auditory message may be varied in terms of its verbal, tone, voice, linguistic parameters, depending on the content parameter of the linguistic communication between at least two occupants of the vehicle, taking into account a so-called communication model. In this case, a specific, for example dependent on the user settings, communication goal can be sought.

Beispielsweise können eine oder mehrere auditiven Mitteilungen unter Berücksichtigung eines, bevorzugt auf einer Transaktionsanalyse oder einem SR-Modell (= Stimulus-Response Modell) basierenden, Kommunikationsmodells, angepasst werden. Beispielsweise kann das Anpassen derart erfolgen, dass

  • - einem psychischen Bedürfnis zumindest einer Person im Wohnraum entsprochen wird, und/oder
  • - ein Informationsaustausch verbessert, insbesondere optimiert, wird, und/oder
  • - ein bestimmtes Kommunikationsziel gefördert wird, und/oder
  • - ein emotionaler Ausgleich gefördert wird.
For example, one or more auditory messages may be adjusted taking into account a communication model, preferably based on a transaction analysis or an SR model (= stimulus-response model). For example, the adjustment can be made such that
  • - a mental need of at least one person in the living space is met, and / or
  • an information exchange is improved, in particular optimized, and / or
  • - a specific communication objective is promoted, and / or
  • - an emotional balance is promoted.

Die hier beschriebenen Aspekte des Verfahrens und der Vorrichtung, die auf eine auditive Meldung angewandt wurden, können ersatzweise auf die Anpassung weiterer im Fahrzeug auszugebender, hörbarer Inhalte, beispielsweise auf Informationen für zumindest einen Insassen, z.B. eine Fahrerinformation repräsentierende Töne, Sequenzen von Tönen oder Melodien, in einer entsprechenden oder sinngemäß angepassten Weise, angewandt werden.The aspects of the method and apparatus described herein which have been applied to an auditory message may alternatively be applied to the adaptation of further audible content to be output in the vehicle, for example to information for at least one occupant, e.g. tones representative of driver information, sequences of tones or melodies, in a corresponding or adapted manner.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

11
Fahrzeugvehicle
2L2L
linker Vordersitzleft front seat
2R2R
rechter Vordersitzright front seat
3L3L
linker, hinterer Sitzplatzleft, rear seat
3R3R
rechter, hinterer Sitzplatzright, rear seat
44
Multimediasystemmultimedia system
55
Bordcomputer (Recheneinheit)On-board computer (arithmetic unit)
66
Kameracamera
77
Mikrofonmicrophone
8-1, ... , 8-78-1, ..., 8-7
Lautsprecherspeaker
99
Sensorik (Sitzbelegung, Gurtanlegeerkennung)Sensor technology (seat allocation, seat belt detection)
11, 12, 1311, 12, 13
Insasseinmate
1414
Lenkradsteering wheel

Claims (18)

Verfahren zum Erzeugen auditiver Meldungen eines mit einem Fahrzeug (1) mitgeführten Computers, wobei die auditive Meldung eine sprachliche Mitteilung an Insassen (11, 12, 13) des Fahrzeugs (1) umfasst, mit folgenden Schritten: - Ermitteln zumindest eines inhaltlichen Merkmals einer sprachlichen Kommunikation zwischen den Insassen (11, 12, 13) des Fahrzeugs (1), und - Anpassen der auditiven Meldung in Abhängigkeit von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den Insassen (11, 12, 13) des Fahrzeugs (1).A method of generating auditory messages from a computer carried by a vehicle (1), the auditory message comprising a voice message to occupants (11, 12, 13) of the vehicle (1), comprising the steps of: Determining at least one content-related feature of a linguistic communication between the occupants (11, 12, 13) of the vehicle (1), and - Adjust the auditory message depending on the determined content characteristic of the linguistic communication between the occupants (11, 12, 13) of the vehicle (1). Verfahren nach Anspruch 1, bei dem das zumindest eine inhaltliche Merkmal der sprachlichen Kommunikation mittels einer linguistischen Analyse ermittelt wird, wobei bei der linguistischen Analyse eines oder mehrere der folgenden Merkmale der sprachlichen Kommunikation verarbeitet werden: - eine Semantik; - ein Themenmerkmal; - eine Information, ob oder ob nicht die sprachliche Kommunikation eine inhaltlich abgeschlossene Botschaft, insbesondere Sätze und/oder Phrasen, umfasst.Method according to Claim 1 in which the at least one content-related feature of the linguistic communication is determined by means of a linguistic analysis, wherein the linguistic analysis processes one or more of the following features of the linguistic communication: a semantics; - a theme feature; an information as to whether or not the linguistic communication comprises a content-concluded message, in particular sentences and / or phrases. Verfahren nach Anspruch 1 oder 2, bei dem der Inhalt der auditiven Meldung in Abhängigkeit des ermittelten inhaltlichen Merkmals der sprachlichen Kommunikation zwischen den Insassen angepasst wird.Method according to Claim 1 or 2 , in which the content of the auditory message is adjusted depending on the determined content characteristic of the linguistic communication between the inmates. Verfahren nach einem der vorhergehenden Ansprüche, bei dem ein Zeitpunkt zur Ausgabe zumindest eines Teils der auditiven Meldung abhängig von dem ermittelten inhaltlichen Merkmal bestimmt wird.Method according to one of the preceding claims, in which a time for the output of at least part of the auditory message is determined as a function of the determined content-related feature. Verfahren nach Anspruch 4, bei dem die auditive Meldung abhängig von dem ermittelten inhaltlichen Merkmal pausiert und/oder in zumindest zwei Teile aufgeteilt wird.Method according to Claim 4 in which the auditory message is paused and / or divided into at least two parts as a function of the determined content-related feature. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die auditive Meldung abhängig von dem ermittelten inhaltlichen Merkmal stilistisch, hinsichtlich ihrer Stimme und/oder Tonlage und/oder Unterton angepasst wird.Method according to one of the preceding claims, in which the auditory message is adapted stylistically, with regard to its voice and / or pitch and / or undertone, depending on the determined content-related feature. Verfahren nach einem der vorhergehenden Ansprüche, bei dem eine Erkennung eines oder mehrerer Schlüsselwörter in der Kommunikation zumindest eines der Insassen (11, 12, 13) und/oder eine Erkennung der Gestik zumindest eines der Insassen (11, 12, 13) durchgeführt wird und daraufhin die auditive Meldung hinsichtlich ihres inhaltlichen Merkmals und/oder eines akustischen Parameter angepasst wird.Method according to one of the preceding claims, in which recognition of one or more keywords in the communication of at least one of the occupants (11, 12, 13) and / or recognition of the gestures of at least one of the occupants (11, 12, 13) is performed, and then the auditory message is adjusted in terms of their content feature and / or an acoustic parameter. Verfahren nach einem der vorhergehenden Ansprüche, bei dem mittels einer linguistischen Auswertung der sprachlichen Kommunikation ein Prädizieren eines zeitlichen Parameters, insbesondere eines zeitlichen Verlaufs, der sprachlichen Kommunikation ausgeführt wird und der zeitliche Parameter beim Anpassen der auszugebenden auditiven Meldung verarbeitet wird.Method according to one of the preceding claims, in which by means of a linguistic evaluation of the linguistic communication, a prediction of a temporal parameter, in particular of a chronological progression, of the linguistic communication is carried out and the temporal parameter is processed during the adaptation of the auditory message to be output. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die Art und/oder der Inhalt eines weiteren im Innenraum des Fahrzeugs (1) hörbaren Audio-Kontexts ermittelt und in Abhängigkeit eines Analyseergebnisses zur Anpassung des Erzeugens und/oder der Ausgabe der auditiven Meldung verarbeitet wird.Method according to one of the preceding claims, in which the type and / or content of another audible context audible in the interior of the vehicle (1) is determined and processed as a function of an analysis result for adapting the generation and / or the output of the auditory message. Verfahren nach einem der vorhergehenden Ansprüche, bei dem abhängig von einer Auswertung zumindest einer körperlichen Haltung und/oder einer Geste des zumindest eines Insassen (11, 12, 13) des Fahrzeugs (1) erkannt wird, dass eine sprachliche Botschaft: - explizit an den im Fahrzeug (1) mitgeführten Computer oder explizit nicht an den Computer (5) des Fahrzeugs (1), und/oder - an einen bestimmten Insassen (11, 12, 13) des Fahrzeugs (1) gerichtet ist.Method according to one of the preceding claims, in which, depending on an evaluation of at least one physical posture and / or a gesture of the at least one occupant (11, 12, 13) of the vehicle (1), it is recognized that a linguistic message: explicitly to the computer carried in the vehicle (1) or explicitly not to the computer (5) of the vehicle (1), and / or - is directed to a specific occupant (11, 12, 13) of the vehicle (1). Verfahren nach Anspruch 10, bei dem ein Wahrscheinlichkeitsmaß für eine erkannte sprachliche Botschaft ermittelt wird, wobei dann, wenn der Wahrscheinlichkeitsmaß einen Schwellwert übersteigt, dass die Botschaft nicht an den Computer (5) gerichtet ist, die auditive Meldung angepasst wird.Method according to Claim 10 in which a probability measure for a recognized linguistic message is determined, wherein if the probability measure exceeds a threshold that the message is not addressed to the computer (5), the auditory message is adjusted. Verfahren nach einem der vorhergehenden Ansprüche, bei dem zumindest ein Merkmal der sprachlichen Kommunikation zwischen den zumindest zwei Insassen (11, 12, 13) des Fahrzeugs (1) abhängig von der erkannten Körpersprache und/oder einer Stimmlage, insbesondere einer Veränderung der Stimme, zumindest eines der Insassen (11, 12, 13) ermittelt und zur Anpassung der auditiven Meldung verarbeitet wird.Method according to one of the preceding claims, in which at least one feature of the linguistic communication between the at least two occupants (11, 12, 13) of the vehicle (1) depends on the recognized body language and / or a voice position, in particular a change of the voice, at least one of the occupants (11, 12, 13) is determined and processed to adapt the auditory message. Verfahren nach einem der vorausgegangenen Ansprüche, bei dem eine Reihenfolge zumindest zweier auditiver Meldungen und/oder einzelner Inhalte einer jeweiligen auditiven Meldung abhängig von einer gegenwärtigen Kommunikation oder einem prädizierten Kommunikationsvorhaben und/oder einer Stimme zumindest eines Insassen (11, 12, 13) und/oder eines Insassen (11, 12, 13) an einem bestimmten Sitzplatz verändert wird.Method according to one of the preceding claims, in which a sequence of at least two auditory messages and / or individual contents of a respective auditory message depends on a current communication or a predicted communication project and / or a voice of at least one occupant (11, 12, 13) and / or an occupant (11, 12, 13) at a particular seat is changed. Verfahren nach einem der vorhergehenden Ansprüche, bei dem - ein inhaltliches Merkmal der sprachlichen Kommunikation zwischen zumindest zwei Insassen (11, 12, 13) des Fahrzeugs (1) ermittelt wird, und/oder - die Art und/oder die Priorität einer oder mehrerer auszugebender auditiver Meldungen ermittelt wird; und daraufhin: - eine Reihenfolge der zumindest zwei auditiven Meldungen und/oder einzelner Inhalte der auditiven Meldung ermittelt wird, abhängig von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation und/oder der ermittelten Art und/oder Priorität der zumindest zwei auszugebenden auditiven Meldungen.Method according to one of the preceding claims, in which a content-related feature of the linguistic communication between at least two occupants (11, 12, 13) of the vehicle (1) is determined, and / or - the nature and / or priority of one or more auditory reports to be issued is determined; and then: a sequence of the at least two auditory reports and / or individual contents of the auditory report is determined, depending on the determined content-related feature of the spoken communication and / or the ascertained type and / or priority of the at least two auditory messages to be output. Verfahren nach einem der vorhergehenden Ansprüche, bei dem - ermittelt wird, dass ein Teil der auditiven Meldung mit einer, einen vorgegebenen Schwellwert übersteigenden, Wahrscheinlichkeit nicht hinreichend wahrnehmbar ist, - zumindest ein Teil der auditiven Meldung, der mit dem nicht wahrnehmbaren Teil im Zusammenhang steht, insbesondere der Teil der auditiven Meldung, wiederholt wird.Method according to one of the preceding claims, in which - it is determined that a part of the auditory message is not sufficiently perceptible with a probability that exceeds a predetermined threshold, - at least part of the auditory report associated with the imperceptible part, in particular the part of the auditory report, is repeated. Computerprogrammprodukt, das direkt in den internen Speicher eines digitalen Rechners geladen werden kann und Softwarecodeabschnitte umfasst, mit denen die Schritte gemäß einem der vorhergehenden Ansprüche ausgeführt werden, wenn das Produkt auf einem Computer läuft.A computer program product that can be loaded directly into the internal memory of a digital computer and includes software code portions that perform the steps of any one of the preceding claims when the product is run on a computer. Vorrichtung zum Erzeugen auditiver Meldungen eines mit einem Fahrzeug (1) mitgeführten Computers, wobei die auditive Meldung eine sprachliche Mitteilung an Insassen (11, 12, 13) des Fahrzeugs (1) umfasst, umfassend: - ein erstes Mittel zum Ermitteln zumindest eines inhaltlichen Merkmals einer sprachlichen Kommunikation zwischen den Insassen (11, 12, 13) des Fahrzeugs (1), und - ein zweites Mittel zum Anpassen der auditiven Meldung in Abhängigkeit von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den Insassen (11, 12, 13) des Fahrzeugs (1).Apparatus for generating auditory messages from a computer carried by a vehicle (1), the auditory message comprising a voice message to occupants (11, 12, 13) of the vehicle (1), comprising: a first means for determining at least one content-related feature of a linguistic communication between the occupants (11, 12, 13) of the vehicle (1), and - A second means for adjusting the auditory message depending on the determined content characteristic of the linguistic communication between the occupants (11, 12, 13) of the vehicle (1). Vorrichtung nach Anspruch 17, dadurch gekennzeichnet, dass diese weitere Mittel zur Durchführung des Verfahrens nach einem der Ansprüche 2 bis 15 umfasst.Device after Claim 17 , characterized in that this further means for performing the method according to one of Claims 2 to 15 includes.
DE102017213246.9A 2017-08-01 2017-08-01 Method, apparatus and computer program for generating auditory messages Pending DE102017213246A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102017213246.9A DE102017213246A1 (en) 2017-08-01 2017-08-01 Method, apparatus and computer program for generating auditory messages

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017213246.9A DE102017213246A1 (en) 2017-08-01 2017-08-01 Method, apparatus and computer program for generating auditory messages

Publications (1)

Publication Number Publication Date
DE102017213246A1 true DE102017213246A1 (en) 2019-02-07

Family

ID=65020025

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017213246.9A Pending DE102017213246A1 (en) 2017-08-01 2017-08-01 Method, apparatus and computer program for generating auditory messages

Country Status (1)

Country Link
DE (1) DE102017213246A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050060158A1 (en) * 2003-09-12 2005-03-17 Norikazu Endo Method and system for adjusting the voice prompt of an interactive system based upon the user's state
US20090055190A1 (en) * 2007-04-26 2009-02-26 Ford Global Technologies, Llc Emotive engine and method for generating a simulated emotion for an information system
US20150149177A1 (en) * 2013-11-27 2015-05-28 Sri International Sharing Intents to Provide Virtual Assistance in a Multi-Person Dialog
US20160379643A1 (en) * 2015-06-23 2016-12-29 Toyota Infotechnology Center Co., Ltd. Group Status Determining Device and Group Status Determining Method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050060158A1 (en) * 2003-09-12 2005-03-17 Norikazu Endo Method and system for adjusting the voice prompt of an interactive system based upon the user's state
US20090055190A1 (en) * 2007-04-26 2009-02-26 Ford Global Technologies, Llc Emotive engine and method for generating a simulated emotion for an information system
US20150149177A1 (en) * 2013-11-27 2015-05-28 Sri International Sharing Intents to Provide Virtual Assistance in a Multi-Person Dialog
US20160379643A1 (en) * 2015-06-23 2016-12-29 Toyota Infotechnology Center Co., Ltd. Group Status Determining Device and Group Status Determining Method

Similar Documents

Publication Publication Date Title
EP3661797B1 (en) Method, device, mobile user apparatus and computer program for controlling an audio system of a vehicle
DE112016004391B4 (en) Dialogue device and dialogue method
WO2021023667A1 (en) System and method for assisting selective hearing
DE102010040818B4 (en) A responsive counseling system for use by one or more occupants of a motor vehicle
DE102014017384B4 (en) Motor vehicle operating device with speech recognition correction strategy
DE10338512A1 (en) Support procedure for speech dialogues for the operation of motor vehicle functions
DE102018125966A1 (en) SYSTEM AND METHOD FOR RECORDING KEYWORDS IN A ENTERTAINMENT
DE10008226C2 (en) Voice control device and voice control method
EP3430615B1 (en) Transportation means, and system and method for adapting the length of a permissible speech pause in the context of a speech input
DE102015106280B4 (en) Systems and methods for compensating for speech artifacts in speech recognition systems
DE102017213249A1 (en) Method and system for generating an auditory message in an interior of a vehicle
DE102018107326A1 (en) Adaptive occupant talk early warning system
KR20190109864A (en) Dialogue processing apparatus, vehicle having the same and dialogue processing method
DE102021211812A1 (en) DEVICE AND METHOD FOR MONITORING EMOTION BASED ON A VEHICLE NOISE
DE102016217026A1 (en) Voice control of a motor vehicle
DE112017008305T5 (en) Speech recognition device, speech recognition system and speech recognition method
EP4189974A2 (en) System and method for headphone equalization and room adjustment for binaural playback in augmented reality
DE102017213252A1 (en) A method, apparatus and computer program for varying an audio content to be output in a vehicle
DE102017213246A1 (en) Method, apparatus and computer program for generating auditory messages
DE102017213260A1 (en) Method, device, mobile user device, computer program for controlling an audio system of a vehicle
DE102019218058B4 (en) Device and method for recognizing reversing maneuvers
DE112019007580B4 (en) Sound field control device and sound field control method
DE102013002680B3 (en) Method for operating device e.g. passenger car, involves detecting speech input as predeterminable gesture, and arranging index finger, middle finger, ring finger and small finger of hand one above other in vertical direction of user body
DE102017213256A1 (en) Method, device, mobile user device, computer program for controlling an audio system of a vehicle
EP3735688B1 (en) Method, device and computer-readable storage medium having instructions for processing a speech input, motor vehicle, and user terminal with speech processing

Legal Events

Date Code Title Description
R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: G10L0025480000

Ipc: G10L0013000000

R163 Identified publications notified
R012 Request for examination validly filed