WO2020064281A1 - Bereitstellen eines interaktiven feedbacks zu einer sprachansage für fahrzeuginsassen - Google Patents

Bereitstellen eines interaktiven feedbacks zu einer sprachansage für fahrzeuginsassen Download PDF

Info

Publication number
WO2020064281A1
WO2020064281A1 PCT/EP2019/073525 EP2019073525W WO2020064281A1 WO 2020064281 A1 WO2020064281 A1 WO 2020064281A1 EP 2019073525 W EP2019073525 W EP 2019073525W WO 2020064281 A1 WO2020064281 A1 WO 2020064281A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
voice announcement
voice
detection means
vehicle occupant
Prior art date
Application number
PCT/EP2019/073525
Other languages
English (en)
French (fr)
Inventor
Sebastian Hergeth
Frederik Naujoks
Original Assignee
Bayerische Motoren Werke Aktiengesellschaft
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke Aktiengesellschaft filed Critical Bayerische Motoren Werke Aktiengesellschaft
Priority to US17/280,583 priority Critical patent/US20220005469A1/en
Priority to CN201980055449.9A priority patent/CN112601933A/zh
Publication of WO2020064281A1 publication Critical patent/WO2020064281A1/de

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3629—Guidance using speech or audio output, e.g. text-to-speech
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/24—Speech recognition using non-acoustical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Definitions

  • the invention relates to a method for providing interactive feedback for vehicle occupants, a control unit, a voice output device and a vehicle.
  • Voice output which gives the driver information and information by means of an announcement.
  • notices and information are e.g. issued by the navigation system, but also warnings and traffic reports are sent via
  • Voice announcement issued Often, the driver may only partially hear the voice message or may miss it due to background noise or conversation. The system will not repeat this undetected message without being prompted. Previous options for repeating an announcement are sometimes very complicated and require the driver's attention so that the driver can even be distracted from the traffic.
  • DE10201 1084664A1 proposes that the driver's line of sight be monitored during and shortly after a voice announcement. If the driver looks at the display means of the navigation system shortly after the voice output, it can be assumed that the driver has the Did not understand the announcement and the voice output with the navigation information should be repeated. However, there is still room for improvement in recognizing when a driver has not understood a voice announcement and performing a repetition with little or no effort or distraction for the driver.
  • a method for providing interactive feedback for vehicle occupants, wherein a voice announcement is output to a vehicle occupant in a vehicle.
  • Reaction detection means detects whether the driver has understood the voice announcement. If this is not the case, the voice announcement is repeated.
  • the driver is considered to be the vehicle occupant, since this is usually through the voice announcement, e.g. Navigation instructions, warnings etc. should be addressed.
  • voice announcement e.g. Navigation instructions, warnings etc. should be addressed.
  • any other vehicle occupant can also be addressed, depending on the type of voice announcement.
  • Detection means in particular microphones, can be used as acoustic response detection means. However, other detection means can also be used which can receive an acoustic utterance by the vehicle occupant.
  • the detected signals are preferably sent to a control unit which is designed to receive signals from acoustic signals
  • the control unit is set up to process the received signals in such a way that that it can be determined that the vehicle occupant did not understand the voice prompt. If this is the case, the control unit can output a signal to the voice output device arranged in the vehicle, so that the
  • Such a voice output device can belong to a navigation system that outputs directions, warnings, etc., depending on the version. However, it can also belong to an infotainment or entertainment system, which emits warnings, information or other communication in an acoustic manner and on a
  • reaction can range from a simple understanding of the information given and, if necessary, a reaction to an expected answer.
  • the system should respond accordingly.
  • the reaction can also be intentionally avoided, so that repeating the announcement would lead to displeasure in the vehicle occupant.
  • the vehicle occupant simply did not understand the voice announcement, although he tried to do so and wanted it.
  • the recognition that a vehicle occupant has not understood the voice announcement is carried out by means of voice recognition.
  • voice recognition With the help of acoustic signals already installed in the vehicle or additionally arranged
  • Reaction detection means such as microphones, the driver's reaction to a voice announcement is recorded and then by a computing unit or
  • Control unit evaluated. If the system detects that the vehicle occupant asks for a repetition of the message by means of a corresponding statement, or expresses his lack of understanding by means of a corresponding pronunciation, the system repeats the message. Acoustically expressed misunderstanding can be caused by short sounds such as "huh?", "what?", or statements with predefined keywords such as "please repeat” etc. By switching on or opening the input channels, for example a microphone, for speech recognition after the voice announcement has ended or shortly before, a demand from the vehicle occupant can be recorded in the
  • Control unit interpreted and reacted accordingly. If there is no response from the vehicle occupant within a predetermined time frame or time interval, e.g. within 2 to 5 seconds after the end of the voice announcement
  • Input channels e.g. of the microphone can be closed again.
  • a detection for example a reaction or a facial expression, which implies an understanding of the message, and then the detection can be recorded
  • Input channels are closed again.
  • a detection is made as to whether the vehicle occupant has understood a voice announcement, and if this is not the fold, the voice announcement is repeated.
  • sensors, cameras, etc. that are present in the vehicle can be used, which can detect the gestures and / or facial expressions of the vehicle occupant (s).
  • the signal is sent to a corresponding control unit for further processing.
  • control unit can be used as a separate control unit, as a control unit integrated in an existing control unit, but also as in that
  • Corresponding reaction detection means integrated control unit if this is possible in the reaction detection means, be formed.
  • the method is advantageously implemented as software with program code for carrying out the method.
  • the software advantageously runs on one or more software-controlled devices, e.g. the control unit.
  • Speech output device as well as acoustic reaction detection means, depending on the version also visual reaction detection means, necessary.
  • Control unit necessary, which can process the signals and issue appropriate commands.
  • FIG. F shows a schematic representation of important components for carrying out the method in a vehicle according to an embodiment of the present
  • FIG. 1 shows a schematic view which shows the most important components for carrying out the method and also makes the method comprehensible.
  • a voice output device is installed in the vehicle and is used to send a voice announcement 2 to a vehicle occupant 1, e.g. the driver to spend. If the latter has not understood the voice announcement 2 and there is a corresponding acoustic reaction, which expresses the lack of understanding, as indicated in FIG. 1 as a speech bubble with “??”, this is indicated by an acoustic reaction detection means 3. a microphone.
  • the acoustic vibrations, a microphone is indicated in FIG. 1 and is used to send a voice announcement 2 to a vehicle occupant 1, e.g. the driver to spend. If the latter has not understood the voice announcement 2 and there is a corresponding acoustic reaction, which expresses the lack of understanding, as indicated in FIG. 1 as a speech bubble with “??”, this is indicated by an acoustic reaction detection means 3. a microphone.
  • Reaction detection means 3 is preferably activated shortly before the end or directly after the end of the voice announcement 2. If an acoustic response has been detected, it is sent to a control unit 4, which is set up to process the acoustic signal and to interpret whether the vehicle occupant 1 has expressed his lack of understanding. If this is the case, the control unit 4 outputs a signal to the voice output device so that it repeats the voice announcement 2. If the vehicle occupant 1 has again not understood the announcement, the process is repeated until an acoustic expression of the lack of understanding is no longer detected. For the accuracy of the detection of whether a vehicle occupant 1 has understood the voice announcement 2 or not, additional visual reaction detection means (not shown) can be used, as already mentioned. These can additionally record the facial expressions and / or gestures and the control unit 4 can additionally

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Navigation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Bereitgestellt wird ein Verfahren zum Bereitstellen eines interaktiven Feedbacks für Fahrzeuginsassen, wobei eine Sprachansage an einen Fahrzeuginsassen, insbesondere einen Fahrer, in einem Fahrzeug ausgegeben wird und mittels im Fahrzeug vorhandenen akustischen Reaktionserfassungsmitteln eine Erfassung erfolgt, ob der Fahrzeuginsasse die Sprachansage verstanden hat, und wenn dies nicht der Fall ist, die Sprachansage wiederholt wird.

Description

BEREITSTELLEN EINES INTERAKTIVEN FEEDBACKS ZU EINER
SPRACHANSAGE FÜR FAHRZEUGINSASSEN
Die Erfindung betrifft ein Verfahren zum Bereitstellen eines interaktiven Feedbacks für Fahrzeuginsassen, eine Steuereinheit, eine Sprachausgabeeinrichtung und ein Fahrzeug.
Viele Funktionalitäten im Fahrzeug besitzen heute die Möglichkeit einer
Sprachausgabe, welche dem Fahrer Hinweise und Informationen mittels einer Ansage mitteilt. Solche Hinweise und Informationen werden z.B. vom Navigationssystem ausgegeben, aber auch Warnungen und Verkehrsnachrichten werden per
Sprachansage ausgegeben. Häufig kann es dazu kommen, dass der Fahrer die Sprachmeldung nur teilweise wahrnimmt, oder aufgrund des Hintergrundlärms oder einer Unterhaltung diese überhört. Das System wird diese nicht wahrgenommene Meldung ohne Aufforderung nicht mehr wiederholen. Bisherige Möglichkeiten, eine Ansage wiederholen zu lassen, sind teilweise sehr kompliziert und benötigen die Aufmerksamkeit des Fahrers, so dass dieser sogar vom Verkehr abgelenkt sein kann.
Es gibt bereits Ansätze, die Aufforderung zur Wiederholung zu vereinfachen. So gibt es in bestimmten Ausführungen die Möglichkeit, per Tastendruck am Lenkrad eine
Wiederholung z.B. der Navigationsansage zu fordern. Die DE10201 1084664A1 schlägt vor, dass die Blickrichtung des Fahrers während und kurz nach einer Sprachansage überwacht wird. Wenn der Fahrer kurz nach der Sprachausgabe auf das Anzeigemittel des Navigationssystems blickt, so kann angenommen werden, dass der Fahrer die Ansage nicht verstanden hat und die Sprachausgabe mit der Navigationsinformation wiederholt werden sollte. Allerdings besteht immer noch Verbesserungsbedarf daran, zu erkennen, wann ein Fahrer eine Sprachansage nicht verstanden hat und eine Wiederholung mit geringem oder keinem Aufwand bzw. Ablenkung für den Fahrer auszuführen.
Deshalb ist es eine Aufgabe dieser Erfindung, ein entsprechendes Verfahren und eine entsprechende Vorrichtung bereitzustellen, bei denen diese Nachteile überwunden werden. Diese Aufgabe wird erfindungsgemäß durch die Merkmale der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausgestaltungen sind Gegenstand der abhängigen Ansprüche.
Vorgeschlagen wird ein Verfahren zum Bereitstellen eines interaktiven Feedbacks für Fahrzeuginsassen, wobei eine Sprachansage an einen Fahrzeuginsassen in einem Fahrzeug ausgegeben wird. Mittels im Fahrzeug vorhandenen akustischen
Reaktionserfassungsmitteln erfolgt eine Erfassung, ob der Fahrer die Sprachansage verstanden hat. Wenn dies nicht der Fall ist, wird die Sprachansage wiederholt.
Insbesondere wird dabei auf den Fahrer als Fahrzeuginsasse abgestellt, da dieser in der Regel durch die Sprachansage, z.B. Navigationsanweisung, Warnung etc., angesprochen werden soll. Es kann aber auch jeder andere Fahrzeuginsasse adressiert werden, je nach Art der Sprachansage.
Um zu erfassen, ob der Fahrzeuginsasse die Sprachansage, welche eine akustische Ausgabe darstellt, verstanden hat, können bereits im Fahrzeug vorhandene
Erfassungsmittel, insbesondere Mikrofone, als akustische Reaktionserfassungsmittei verwendet werden. Es können aber auch andere Erfassungsmittel verwendet werden, welche eine akustische Äußerung des Fahrzeuginsassen empfangen können.
Zur Verarbeitung werden die erfassten Signale bevorzugt an eine Steuereinheit gesendet, welche dazu ausgebitdet ist, Signale von akustischen
Reaktionserfassungsmitteln in Abhängigkeit von einer Ausgabe einer Sprachansage an einen Fahrzeuginsassen, insbesondere einen Fahrer, in dem Fahrzeug zu erhalten. Die Steuereinheit ist dazu eingerichtet, die empfangenen Signale derart zu verarbeiten, dass ermitelt werden kann, dass der Fahrzeuginsasse die Sprachansage nicht verstanden hat. Wenn dies der Fall ist, kann die Steuereinheit ein Signal an die im Fahrzeug angeordnete Sprachausgabeeinrichtung ausgeben, so dass die
Sprachansage wiederholt wird.
Eine solche Sprachausgabeeinrichtung kann zu einem Navigationssystem gehören, das Richtungsangaben, Warnungen etc. ausgibt, je nach Ausführung. Es kann aber auch zu einem Infotainment- oder Entertainmentsystem gehören, welche Warnungen, Hinweise oder sonstige Kommunikation in akustischer Weise ausgeben und auf eine
entsprechende Reaktion vom Fahrzeuginsassen warten. Die Reaktion kann dabei vom reinen Verstehen der ausgegebenen Information und ggf. Reaktion bis hin zu einer erwarteten Antwort reichen.
Wenn die Reaktion oder Antwort ausbleibt, sollte das System entsprechend reagieren. Allerdings kann die Reaktion auch gewollt unterbleiben, so dass eine Wiederholung der Ansage zu Missmut beim Fahrzeuginsassen führen würde in bestimmten Situationen kann es Vorkommen, dass der Fahrzeuginsasse die Sprachansage aber einfach nicht verstanden hat, obwohl er sich darum bemühte und diese erwünscht war. Hier sind, wie bereits erwähnt bereits Systeme vorhanden, welche eine Blickrichtung des
Fahrzeuginsassen verfolgen, um zu erkennen, ob der Blick in Richtung einer visuell erfassbaren Informationseinheit, z.B. einem Display, wandert. Daraus wird dann ein Rückschluss gezogen, dass der Fahrzeuginsasse die Sprachansage bzw. Information nicht oder nicht vollständig verstanden hat und die Sprachansage wird wiederholt.
Gemäß der vorliegenden Erfindung wird das Erkennen, dass ein Fahrzeuginsasse die Sprachansage nicht verstanden hat, mittels Spracherkennung ausgeführt. Mithilfe im Fahrzeug bereits verbauten oder zusätzlich angeordneten akustischen
Reaktionserfassungsmittei wie Mikrofone wird die Reaktion des Fahrers auf eine Sprachansage aufgezeichnet und anschließend durch eine Recheneinheit bzw.
Steuereinheit ausgewertet. Stellt das System fest, dass der Fahrzeuginsasse akustisch durch eine entsprechende Aussage um eine Wiederholung der Meldung bittet, oder über eine entsprechende Aussprache sein Unverständnis ausdrückt, wiederholt das System die Meldung. Akustisch ausgedrücktes Unverständnis kann durch kurze Laute wie„hä?“,„was?“, oder Aussagen mit vordefinierten Schfagwörtern wie„bitte wiederholen“ etc. ausgedrückt werden. Indem nach Beenden der Sprachansage oder kurz davor die Eingabekanäle, z.B. Mikrofon, zur Spracherkennung eingeschaltet bzw. geöffnet werden, kann eine Nachfrage des Fahrzeuginsassen erfasst, in der
Steuereinheit interpretiert und entsprechend reagiert werden. Wenn keine Reaktion des Fahrzeuginsassen innerhalb eines vorgegebenen Zeitrahmens bzw. Zeitintervalls, z.B. innerhalb von 2 bis 5 Sekunden nach Ende der Sprachansage, erfolgt, kann
angenommen werden, dass die Sprachansage verstanden wurde und die
Eingangskanäle z.B. des Mikrofons können wieder geschlossen werden. Alternativ oder zusätzlich kann eine Erfassung z.B, einer Reaktion oder auch eines Gesichtsausdrucks erfasst werden, der ein Verstehen der Nachricht impliziert, und daraufhin die
Eingabekanäle wieder geschlossen werden.
Zusätzlich kann auch z.B. mitels visuellen Reaktionserfassungsmiteln eine Erfassung erfolgen, ob der Fahrzeuginsasse eine Sprachansage verstanden hat, und wenn dies nicht der Falt ist, wird die Sprachansage wiederholt. Hierzu können im Fahrzeug vorhandene Sensoren, Kameras etc. verwendet werden, welche die Gestik und/oder Mimik des oder der Fahrzeuginsassen erfassen können. Auch hier wird das Signal an eine entsprechende Steuereinheit zu Weiterverarbeitung gesendet.
Grundsätzlich kann die Steuereinheit als separate Steuereinheit, als in einer vorhandenen Steuereinheit integrierte Steuereinheit, aber auch als in dem
entsprechenden Reaktionserf assu ngsm itel integrierte Steuereinheit, sofern dies in dem Reaktionserfassungsmittel möglich ist, gebildet sein.
Das Verfahren ist vorteilhaft als eine Software mit Programmcode zur Durchführung des Verfahrens ausgeführt. Die Software läuft dabei vorteilhafterweise auf einer oder mehreren softwaregesteuerten Einrichtungen, z.B. der Steuereinheit, ab.
Zur Durchführung des Verfahrens in einem Fahrzeug ist eine entsprechende
Ausstattung des Fahrzeugs Voraussetzung. Es sind mindestens eine
Sprachausgabeeinrichtung, sowie akustische Reaktionserfassungsmittel, je nach Ausführung auch visuelle Reaktionserfassungsmittel, nötig. Ebenso ist eine Steuereinheit nötig, weiche die Signale verarbeiten und entsprechende Befehle ausgeben kann.
Weitere Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen der Erfindung, anhand der Figuren der Zeichnung, die erfindungsgemäße Einzelheiten zeigt, und aus den Ansprüchen. Die einzelnen Merkmale können je einzeln für sich oder zu mehreren in beliebiger
Kombination bei einer Variante der Erfindung verwirklicht sein,
Bevorzugte Ausführungsformen der Erfindung werden nachfolgend anhand der beigefügten Zeichnung näher erläutert,
Fig. f zeigt eine schematische Darstellung wichtiger Komponenten zur Durchführung des Verfahrens in einem Fahrzeug gemäß einer Ausführung der vorliegenden
Erfindung.
In Figur 1 ist eine schematische Ansicht gezeigt, welche sowohl die wichtigsten Komponenten zur Durchführung des Verfahrens anzeigt, als auch das Verfahren nachvollziehbar macht. Eine Sprachausgabeeinrichtung ist im Fahrzeug verbaut und dient dazu, eine Sprachansage 2 an einen Fahrzeuginsassen 1 , z.B. den Fahrer, auszugeben. Wenn dieser die Sprachansage 2 nicht verstanden hat und eine entsprechende akustische Reaktion, welche das Unverständnis ausdrückt, erfolgt, wie in Figur 1 als Sprechblase mit„??“ gekennzeichnet, wird dies von einem akustischen Reaktionserfassungsmittel 3. z.B. einem Mikrofon, erfasst. Das akustische
Reaktionserfassungsmittel 3 wird dabei vorzugsweise kurz vor Ende oder direkt nach Ende der Sprachansage 2 aktiviert. Wenn eine akustische Reaktion erfasst wurde, wird diese an eine Steuereinheit 4 gesendet, welche dazu eingerichtet ist, das akustische Signal zu verarbeiten und zu interpretieren, ob der Fahrzeuginsasse 1 damit sein Unverständnis ausgedrückt hat. Wenn dies der Fall ist, gibt die Steuereinheit 4 ein Signal an die Sprachausgabeeinrichtung aus, damit diese die Sprachansage 2 wiederholt. Wenn der Fahrzeuginsasse 1 die Ansage wieder nicht verstanden hat, wird das Verfahren solange wiederholt, bis kein akustischer Ausdruck des Unverständnisses mehr erfasst wird. Um die Genauigkeit der Erfassung, ob ein Fahrzeuginsasse 1 die Sprachansage 2 verstanden hat oder nicht, können zusätzliche visuelle Reaktionserfassungsmittel (nicht gezeigt) verwendet werden, wie bereits erwähnt Diese können zusätzlich die Mimik und/oder Gestik erfassen und die Steuereinheit 4 kann diese zusätzlichen
Informationen zur Beurteilung verwenden, ob der Fahrzeuginsasse 1 durch seine akustische Äußerung die Sprachansage 2 verstanden hat oder nicht.

Claims

Patentansprüche
1. Verfahren zum Bereitstellen eines interaktiven Feedbacks für Fahrzeuginsassen
(1 ), wobei eine Sprachansage {2} an einen Fahrzeuginsassen {1 }, insbesondere einen Fahrer, in einem Fahrzeug ausgegeben wird und mittels im Fahrzeug vorhandenen akustischen Reaktionserfassungsmitteln (3) eine Erfassung erfolgt, ob der Fahrzeuginsasse (1 ) die Sprachansage (2) verstanden hat, und wenn dies nicht der Fall ist, die Sprachansage (2) wiederholt wird,
2. Verfahren nach Anspruch 1 , wobei von den akustischen
Reaktionserfassungsmiteln {3} erfassbare akustische Reaktionen des
Fahrzeuginsassen (1 ) mindestens ein akustisch ausgedrücktes Unverständnis (??) ist.
3. Verfahren nach Anspruch 1 oder 2, wobei zusätzlich mittels visuellen
Reaktionserfassungsmitteln eine Erfassung erfolgt ob der Fahrzeuginsasse (1 ) die Sprachansage (2) verstanden hat, und wenn dies nicht der Fall ist, die Sprachansage (2) wiederholt wird.
4. Verfahren nach einem der vorhergehenden Ansprüche, wobei die akustischen Reaktionserfassungsmittel (3) und die visuellen Reaktionserfassungsmittel, wenn vorhanden, bei oder kurz vor Ende der Sprachansage (2) aktiviert werden und bis zu einem vorgegebenen Zeitpunkt aktiv bleiben.
5. Verfahren nach Anspruch 4, wobei der vorgegebene Zeitpunkt ein festes
Zeitintervall ist oder ein Zeitpunkt, an dem erfasst wurde, dass die Sprachansage
(2) verstanden wurde.
6. Steuereinheit (4), welche dazu ausgebildet ist, Signale von akustischen
Reaktionserfassungsmitteln (3) in Abhängigkeit von einer Ausgabe einer Sprachansage (2) an einen Fahrzeuginsassen (1 ), insbesondere einen Fahrer, in einem Fahrzeug zu erhalten und derart zu verarbeiten, dass bei Ermitteln, dass der Fahrzeuginsasse (1) die Sprachansage (2) nicht verstanden hat» ein Signal auszugeben so dass die Sprachansage (2) wiederholt wird.
7. Steuereinheit (4) nach Anspruch 6» welche ferner dazu ausgebildet ist» Signale von visuellen Reaktionserfassungsmitteln (3) zu erhalten und derart zu verarbeiten, dass bei Ermitteln» dass der Fahrzeuginsasse (1 ) die Sprachansage (2) nicht verstanden hat» ein Signal auszugeben» so dass die Sprachansage (2) wiederholt wird,
8. Sprachausgabeeinrichtung, welche in einem Fahrzeug angeordnet ist und zur Ausgabe von Sprachansagen (2) zumindest an einen Fahrzeuginsassen (1) des Fahrzeugs eingerichtet ist, wobei die Sprachausgabeeinrichtung abhängig von einem Signal der Steuereinheit (4} nach Anspruch 8 oder 7 eine getätigte Sprachansage (2) wiederholt.
9. Fahrzeug, umfassend
- eine Sprachausgabeeinrichtung nach Anspruch 6 oder 7,
- zumindest akustische Reaktionserfassungsmittel (3), welche dazu eingerichtet sind, eine Aussprache eines Fahrzeuginsassen (1 ) zu erfassen»
- eine Steuereinheit (4) nach Anspruch 8.
10. Software mit Programmcode zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 5» wenn die Software auf einer odei mehreren
softwaregesteuerten Einrichtungen abläuft.
PCT/EP2019/073525 2018-09-27 2019-09-04 Bereitstellen eines interaktiven feedbacks zu einer sprachansage für fahrzeuginsassen WO2020064281A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/280,583 US20220005469A1 (en) 2018-09-27 2019-09-04 Providing Interactive Feedback, on a Spoken Announcement, for Vehicle Occupants
CN201980055449.9A CN112601933A (zh) 2018-09-27 2019-09-04 为车辆乘员提供对语音播报的交互式反馈

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102018216621.8A DE102018216621B3 (de) 2018-09-27 2018-09-27 Verfahren zum Bereitstellen eines interaktiven Feedbacks für Fahrzeuginsassen, eine Steuereinheit, eine Sprachausgabeeinrichtung und ein Fahrzeug
DE102018216621.8 2018-09-27

Publications (1)

Publication Number Publication Date
WO2020064281A1 true WO2020064281A1 (de) 2020-04-02

Family

ID=67874446

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2019/073525 WO2020064281A1 (de) 2018-09-27 2019-09-04 Bereitstellen eines interaktiven feedbacks zu einer sprachansage für fahrzeuginsassen

Country Status (4)

Country Link
US (1) US20220005469A1 (de)
CN (1) CN112601933A (de)
DE (1) DE102018216621B3 (de)
WO (1) WO2020064281A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114812591A (zh) * 2022-03-14 2022-07-29 高德软件有限公司 语音导航方法、电子设备及计算机程序产品
WO2023209888A1 (ja) * 2022-04-27 2023-11-02 パイオニア株式会社 情報処理装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007029862A1 (de) * 2007-06-28 2009-01-02 GM Global Technology Operations, Inc., Detroit Navigationsvorrichtung und Verfahren zunm Betreiben einer Navigationsvorrichtung
DE102011084664A1 (de) 2011-10-18 2013-04-18 Robert Bosch Gmbh Verfahren zum Betrieb eines Navigationssystems, insbesondere Verfahren zur Steuerung von auf einem Anzeigemittel des Navigationssystems anzeigbaren Informationen
US20170068423A1 (en) * 2015-09-08 2017-03-09 Apple Inc. Intelligent automated assistant in a media environment

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020105423A1 (en) * 2000-12-05 2002-08-08 Rast Rodger H. Reaction advantage anti-collision systems and methods
US8700332B2 (en) * 2008-11-10 2014-04-15 Volkswagen Ag Operating device for a motor vehicle
US9418674B2 (en) * 2012-01-17 2016-08-16 GM Global Technology Operations LLC Method and system for using vehicle sound information to enhance audio prompting
DE102014216208A1 (de) * 2014-08-14 2016-02-18 Robert Bosch Gmbh Verfahren und eine Vorrichtung zum Bestimmen einer Reaktionszeit eines Fahrzeugführers
US20160059775A1 (en) * 2014-09-02 2016-03-03 Nuance Communications, Inc. Methods and apparatus for providing direction cues to a driver
US20160267335A1 (en) * 2015-03-13 2016-09-15 Harman International Industries, Incorporated Driver distraction detection system
US10521512B2 (en) * 2017-05-26 2019-12-31 Bose Corporation Dynamic text-to-speech response from a smart speaker
DE102017213235A1 (de) * 2017-08-01 2019-02-07 Audi Ag Verfahren zum Ermitteln eines Benutzerfeedbacks bei einer Benutzung eines Geräts durch einen Benutzer sowie Steuervorrichtung zum Durchführen des Verfahrens
US10275043B2 (en) * 2017-08-23 2019-04-30 Ford Global Technologies, Llc Detection of lane conditions in adaptive cruise control systems
US10442432B2 (en) * 2017-11-14 2019-10-15 Ford Global Technologies, Llc Lead vehicle monitoring for adaptive cruise control
US10414336B1 (en) * 2018-05-22 2019-09-17 Zoox, Inc. Acoustic notifications

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007029862A1 (de) * 2007-06-28 2009-01-02 GM Global Technology Operations, Inc., Detroit Navigationsvorrichtung und Verfahren zunm Betreiben einer Navigationsvorrichtung
DE102011084664A1 (de) 2011-10-18 2013-04-18 Robert Bosch Gmbh Verfahren zum Betrieb eines Navigationssystems, insbesondere Verfahren zur Steuerung von auf einem Anzeigemittel des Navigationssystems anzeigbaren Informationen
US20170068423A1 (en) * 2015-09-08 2017-03-09 Apple Inc. Intelligent automated assistant in a media environment

Also Published As

Publication number Publication date
US20220005469A1 (en) 2022-01-06
DE102018216621B3 (de) 2020-03-05
CN112601933A (zh) 2021-04-02

Similar Documents

Publication Publication Date Title
DE102016212647B4 (de) Verfahren zum Betreiben eines Sprachsteuerungssystems in einem Innenraum und Sprachsteuerungssystem
DE102015224555A1 (de) Verfahren zum Betreiben eines Fahrzeugs
EP3526790B1 (de) Multimodaler dialog in einem kraftfahrzeug
DE10338512A1 (de) Unterstützungsverfahren für Sprachdialoge zur Bedienung von Kraftfahrzeugfunktionen
EP1127748B1 (de) Vorrichtung und Verfahren zur Sprachsteuerung
WO2019025120A1 (de) Verfahren zum ermitteln eines benutzerfeedbacks bei einer benutzung eines geräts durch einen benutzer sowie steuervorrichtung zum durchführen des verfahrens
EP3430615B1 (de) Fortbewegungsmittel, system und verfahren zur anpassung einer länge einer erlaubten sprechpause im rahmen einer spracheingabe
WO2020064281A1 (de) Bereitstellen eines interaktiven feedbacks zu einer sprachansage für fahrzeuginsassen
DE112017007280T5 (de) Fahrzeuginterne Kommunikationssteuerungsvorrichtung, fahrzeuginternes Kommunikationssystem, und fahrzeuginternes Kommunikationssteuerungsverfahren
DE102017202051A1 (de) Bedieneinrichtung für ein Kraftfahrzeug und Verfahren zum Betrieb einer Bedieneinrichtung
DE102017206876B4 (de) Verfahren zum Betreiben eines Sprachsteuerungssystems in einem Kraftfahrzeug undSprachsteuerungssystem
WO2000023982A1 (de) Verfahren und vorrichtung zur ausgabe von informationen und/oder meldungen per sprache
DE102004035988A1 (de) Notrufsystem für ein Personentransportsystem, insbesondere für ein Kraftfahrzeug, und Verfahren zur automatischen Übermittlung eines Notrufes
DE102018103414A1 (de) Verfahren zur Charakterisierung eines Objekts in einem Umgebungsbereich eines Kraftfahrzeugs mit Höhenschätzung anhand einer seitlichen Ableitung eines Empfangssignals eines Ultraschallsensors, Recheneinrichtung sowie Ultraschallsensorvorrichtung
DE102013013695A1 (de) Kraftfahrzeug mit Spracherkennung
DE102019116498A1 (de) Vorrichtung, Fortbewegungsmittel und Verfahren zur Anpassung einer Fahrerassistenzfunktion
DE102012201934A1 (de) Verfahren zur Ausgabe von Fahrerassistenzinformationen
DE102016003401A1 (de) Erfassungsvorrichtung und Verfahren zum Erfassen einer Sprachäußerung einer sprechenden Person in einem Kraftfahrzeug
DE102020200273A1 (de) Verfahren zum Betreiben einer Fahrzeugkomponente eines zumindest teilweise autonom betriebenen Kraftfahrzeugs mittels eines Sprachbefehls, sowie Assistenzsystem
DE102005010230B4 (de) Verfahren zum Ausgeben von Hilfeinformationen
DE102022124133B3 (de) Verfahren zum Verarbeiten gestottert gesprochener Sprache mittels eines Sprachassistenten für ein Kraftfahrzeug
DE112018002415T5 (de) Fahrzeugantriebssteuerungssystem und fahrzeugantriebs-steuerungsverfahren
DE102017211518A1 (de) Verfahren zum Erzeugen einer virtuellen Umgebung für einen Benutzer in einem Fahrzeug, entsprechendes Virtual-Reality-System sowie Fahrzeug
WO2005029465A1 (de) Arbeitsbelastungsabhängige dialogführung
WO2023025358A1 (de) Intelligentes kommunikationssystem zum steuern der ausgabe von informationen an einen fahrzeuginsassen

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19765225

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19765225

Country of ref document: EP

Kind code of ref document: A1