DE102023000477A1 - Method for operating a vehicle-integrated voice assistant and vehicle - Google Patents
Method for operating a vehicle-integrated voice assistant and vehicle Download PDFInfo
- Publication number
- DE102023000477A1 DE102023000477A1 DE102023000477.4A DE102023000477A DE102023000477A1 DE 102023000477 A1 DE102023000477 A1 DE 102023000477A1 DE 102023000477 A DE102023000477 A DE 102023000477A DE 102023000477 A1 DE102023000477 A1 DE 102023000477A1
- Authority
- DE
- Germany
- Prior art keywords
- control element
- vehicle
- voice assistant
- voice
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000000007 visual effect Effects 0.000 claims abstract description 14
- 230000000694 effects Effects 0.000 claims description 5
- 230000008859 change Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 5
- 230000003213 activating effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000010257 thawing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
- B60R16/0373—Voice control
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Arrangements Of Lighting Devices For Vehicle Interiors, Mounting And Supporting Thereof, Circuits Therefore (AREA)
Abstract
Die Erfindung betrifft ein Verfahren zum Betrieb eines fahrzeugintegrierten Sprachassistenten, wobei der Sprachassistent einen von einem Nutzer ausgegebenen Sprachbefehl detektiert, auf seine Semantik hin analysiert und abhängig davon eine Fahrzeugfunktion ansteuert. Das erfindungsgemäße Verfahren ist dadurch gekennzeichnet, dass wenn der Sprachassistent im Sprachbefehl eine Suchanfrage nach der Position eines bestimmten Bedienelements erkennt, der Sprachassistent eine visuelle Verortungseinrichtung zum optischen Hervorheben des gesuchten Bedienelements im Fahrzeuginnenraum ansteuert.The invention relates to a method for operating a vehicle-integrated voice assistant, wherein the voice assistant detects a voice command issued by a user, analyzes its semantics and, depending on this, controls a vehicle function. The method according to the invention is characterized in that when the voice assistant recognizes a search query for the position of a specific control element in the voice command, the voice assistant controls a visual location device for visually highlighting the searched control element in the vehicle interior.
Description
Die Erfindung betrifft ein Verfahren zum Betrieb eines fahrzeugintegrierten Sprachassistenten nach der im Oberbegriff von Anspruch 1 näher definierten Art sowie ein Fahrzeug mit einem solchen Sprachassistenten.The invention relates to a method for operating a vehicle-integrated voice assistant according to the type defined in more detail in the preamble of claim 1 and to a vehicle with such a voice assistant.
Eine Interaktion zwischen Fahrzeug und Fahrzeuginsasse ist über verschiedene Mensch-Maschine-Schnittstellen möglich. So verfügen Fahrzeuge typischerweise über physische Bedienelemente wie das Lenkrad, einen Schaltknauf sowie diverse Tasten, Knöpfe, Schieberegler, Drehregler und dergleichen. Zunehmend werden berührempfindliche Anzeigevorrichtungen in Fahrzeuge integriert, welche ebenfalls zum Empfangen von Bedienhandlungen genutzt werden können. Ferner sind Sprachassistenten für Fahrzeuge bekannt, welche eine Interaktion zwischen Fahrzeuginsasse und Fahrzeug per Sprachdialog ermöglichen. So kann ein Fahrzeuginsasse Sprachbefehle eingeben und das Fahrzeug kann per akustischer Ausgabe antworten und/oder eine Fahrzeugfunktion direkt ansteuern.Interaction between the vehicle and the vehicle occupant is possible via various human-machine interfaces. Vehicles typically have physical controls such as the steering wheel, a gear knob and various buttons, knobs, sliders, dials and the like. Touch-sensitive display devices are increasingly being integrated into vehicles, which can also be used to receive operating actions. Furthermore, voice assistants for vehicles are known, which enable interaction between the vehicle occupant and the vehicle via voice dialogue. A vehicle occupant can enter voice commands and the vehicle can respond via acoustic output and/or directly control a vehicle function.
Um den Fahrzeuginsassen das bestmögliche Nutzungserlebnis zu gewährleisten sind Fahrzeughersteller bestrebt den Bedienkomfort bei der Nutzung von Fahrzeugen stetig zu verbessern.In order to ensure vehicle occupants the best possible user experience, vehicle manufacturers strive to continually improve the ease of use when using vehicles.
Aus der
Ferner offenbart die
Der vorliegenden Erfindung liegt die Aufgabe zugrunde ein verbessertes Verfahren zum Betrieb eines fahrzeugintegrierten Sprachassistenten anzugeben, welches den Komfort für einen Fahrzeuginsassen bei der Nutzung des Fahrzeugs weiter steigert.The present invention is based on the object of specifying an improved method for operating a vehicle-integrated voice assistant, which further increases the comfort for a vehicle occupant when using the vehicle.
Erfindungsgemäß wird diese Aufgabe durch ein Verfahren zum Betrieb eines fahrzeugintegrierten Sprachassistenten mit den Merkmalen des Anspruchs 1 gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen sowie ein Fahrzeug mit einem solchen Sprachassistenten ergeben sich aus den hiervon abhängigen Ansprüchen.According to the invention, this object is achieved by a method for operating a vehicle-integrated voice assistant with the features of claim 1. Advantageous refinements and further developments as well as a vehicle with such a voice assistant result from the requirements dependent on this.
Ein gattungsgemäßes Verfahren zum Betrieb eines fahrzeugintegrierten Sprachassistenten, wobei der Sprachassistent einen von einem Nutzer ausgegebenen Sprachbefehl detektiert, auf seine Semantik hin analysiert und abhängig davon eine Fahrzeugfunktion ansteuert, wird erfindungsgemäß dadurch weitergebildet, dass, wenn der Sprachassistent im Sprachbefehl eine Suchanfrage nach der Position eines bestimmten Bedienelements erkennt, der Sprachassistent eine visuelle Verortungseinrichtung zum optischen Hervorheben des gesuchten Bedienelements im Fahrzeuginnenraum ansteuert. Sprachassistenten erleichtern die Bedienung des Fahrzeugs insbesondere während der Fahrt. Viele Nutzer bevorzugen jedoch weiterhin das manuelle Betätigen von Bedienelementen, da sich das Ausgeben von Sprachbefehlen für die Nutzer ungewohnt anfühlen kann bzw. das Ausgeben eines Sprachbefehls auch mehr Zeit in Anspruch nehmen kann, als das simple drücken einer Taste. Dabei kann der Problemfall auftreten, dass ein Nutzer ein Bedienelement manuell betätigen möchte, um eine bestimmte Fahrzeugfunktion zu nutzen, jedoch nicht weiß, wo dieses Bedienelement im Fahrzeuginnenraum verortet ist. Hier schafft das erfindungsgemäße Verfahren Abhilfe, indem eine Möglichkeit für den Nutzer bereitgestellt wird, eine Suchanfrage an den Sprachassistenten per Sprachbefehl zu stellen, woraufhin der Sprachassistent das gesuchte Bedienelement im Fahrzeuginnenraum visuell hervorhebt, sodass es durch den Nutzer einfacher auffindbar ist. Hierfür eignet sich die Eingabe per Sprache im Besonderen, da hierzu der Nutzer keinerlei Wissen über das Bedienfeldlayout der das gesuchte Bedienelement umfassenden Vorrichtung erfordert.A generic method for operating a vehicle-integrated voice assistant, whereby the voice assistant detects a voice command issued by a user, analyzes its semantics and controls a vehicle function depending on this, is further developed according to the invention in that when the voice assistant contains a search query for the position of a vehicle in the voice command recognizes a certain control element, the voice assistant controls a visual location device to visually highlight the desired control element in the vehicle interior. Voice assistants make it easier to operate the vehicle, especially while driving. However, many users still prefer to operate controls manually, as issuing voice commands can feel unfamiliar to users or issuing a voice command can take more time than simply pressing a button. The problem that can arise is that a user wants to operate a control element manually in order to use a specific vehicle function, but does not know where this control element is located in the vehicle interior. The method according to the invention provides a remedy here by providing an opportunity for the user to send a search query to the voice assistant using a voice command, whereupon the voice assistant visually highlights the desired control element in the vehicle interior so that it can be found more easily by the user. Input by voice is particularly suitable for this, as this does not require the user to have any knowledge of the control panel layout of the device containing the control element you are looking for.
Der Nutzer kann sich nach der Hervorhebung den Ort des Bedienelements merken und für künftige Bedieneingaben merken. Somit muss nur einmal ein Sprachdialog mit dem Sprachassistenten geführt werden. Dies verbessert den Komfort für den Nutzer. Sollte der Nutzer die Position des Bedienelements vergessen, so kann er erneut eine Anfrage an den Sprachassistenten stellen.After highlighting, the user can remember the location of the control element and remember it for future control inputs. This means you only have to have a voice dialogue with the voice assistant once. This improves comfort for the user. If the user forgets the position of the control element, he or she can make another request to the voice assistant.
Zur Verarbeitung der Sprachbefehle können bewährte Methoden der computerbasierten Sprachanalyse eingesetzt werden. Um das erfindungsgemäße Verfahren in ein Fahrzeug zu implementieren müssen feste Zuordnungen zwischen eindeutigen Bedienelement-Bezeichnern, also dem von einem Nutzer verwendeten, ggf. umgangssprachlichen „Namen“ zum referenzieren eines bestimmten Bedienelements und den im Fahrzeug vorhandenen Bedienelementen festgelegt werden. Ein von einem Nutzer eingegebener Sprachbefehl könnte beispielsweise lauten „Hey Mercedes, wo ist die <Taste>“, wobei für den Begriff <Taste> die Bezeichnung des vom Nutzer gesuchten Bedienelements, beispielsweise „Enteisungstaste“, „Feststellbremse“, „Schalter für die Nebelschlussleuchte“ oder dergleichen, eingesetzt wird. Der Sprachbefehl kann auch ein charakteristisches Codewort zum Aktivieren des Sprachassistenten umfassen, in diesem Falle „Hey Mercedes“.Proven methods of computer-based speech analysis can be used to process the voice commands. In order to implement the method according to the invention in a vehicle, fixed associations must be made between unique control element identifiers, i.e. those used by a user, if necessary colloquially “Names” can be defined to reference a specific control element and the controls available in the vehicle. A voice command entered by a user could, for example, be “Hey Mercedes, where is the <button>”, where the term <button> is the name of the control element the user is looking for, for example “de-icing button”, “parking brake”, “switch for the rear fog light”. “or the like is used. The voice command can also include a characteristic code word to activate the voice assistant, in this case “Hey Mercedes”.
In einer zur Bereitstellung des Sprachassistenten verwendeten Recheneinheit sind dann besagte Zuordnungen sowie eine Ortsinformation, an welcher Stelle sich die jeweiligen Bedienelemente im Fahrzeuginnenraum befinden gespeichert, woraufhin der Sprachassistent die visuelle Verortungseinrichtung entsprechend zum optischen Hervorheben des Bedienelements ansteuert.In a computing unit used to provide the voice assistant, said assignments and location information as to where the respective control elements are located in the vehicle interior are then stored, whereupon the voice assistant controls the visual location device accordingly to visually highlight the control element.
Eine vorteilhafte Weiterbildung des erfindungsgemäßen Verfahrens sieht vor, dass bei einem gesuchten physischen Bedienelement mit integrierter Leuchtfunktion zum optischen Hervorheben das vom Bedienelement abgegebene Licht in seiner Helligkeit und/oder Farbe verändert wird. In diesem Zusammenhang fungiert die integrierte Leuchtfunktion des physischen Bedienelements als visuelle Verortungseinrichtung. Beispielsweise können Knöpfe, Schalter, Tasten, Drehregler und dergleichen eine Hinterleuchtung aufweisen. Die Oberfläche des Bedienelements kann dann eine opake Beschichtung aufweisen, welche partiell entfernt wurde, sodass das Licht der Hinterleuchtung hindurchscheinen kann. Diese integrierte Leuchtfunktion kann genutzt werden, um auf besonders einfache Art und Weise dem Nutzer das gesuchte physische Bedienelement anzuzeigen.An advantageous development of the method according to the invention provides that, in the case of a desired physical control element with an integrated lighting function for optical highlighting, the light emitted by the control element is changed in its brightness and/or color. In this context, the integrated lighting function of the physical control element acts as a visual location device. For example, buttons, switches, keys, rotary controls and the like can have backlighting. The surface of the control element can then have an opaque coating that has been partially removed so that the light from the backlighting can shine through. This integrated light function can be used to show the user the physical control element they are looking for in a particularly simple way.
Die in der Recheneinheit gespeicherte Ortsinformation kann in diesem Falle von einer physischen-, bzw. „Hardwareadresse“ des oder der zur Bereitstellung der Leuchtfunktion des Bedienelements verwendeten Leuchtmittel ausgebildet sein. So lässt sich beispielsweise eine zur Hirtterleuchtung eines Knops verwendete LED über einen entsprechenden Datenbus ein- und ausschalten.In this case, the location information stored in the computing unit can be formed by a physical or “hardware address” of the lighting device or devices used to provide the lighting function of the control element. For example, an LED used to illuminate a button can be switched on and off via a corresponding data bus.
Ist die Leuchtfunktion beispielsweise eines Tastenfelds in einer Grundeinstellung gerade deaktiviert, so kann nur das gesuchte Bedienelement im Tastenfeld aufleuchten, um es optisch hervorzuheben. Ist hingegen die integrierte Leuchtfunktion weiterer Bedienelemente aktiv, so leuchten beispielsweise physische Tasten eines Armaturenbretts bei eingeschaltetem Abblendlicht, kann für das gesuchte Bedienelement die Helligkeit und/oder Farbe des jeweilig abgestrahlten Lichts im Vergleich zu den übrigen Bedienelementen geändert werden. Beispielsweise kann das gesuchte Bedienelement heller leuchten und/oder rot, wenn die übrigen Bedienelemente schwach weiß leuchten. Dieses visuelle Hervorheben des gesuchten Bedienelements kann so lange fortgeführt werden, bis der Nutzer das gesuchte Bedienelement betätigt oder aber bis zum Verstreichen einer festgelegten Wartedauer.For example, if the lighting function of a keypad is currently deactivated in a basic setting, only the control element you are looking for can light up in the keypad in order to highlight it visually. However, if the integrated lighting function of other control elements is active, for example physical buttons on a dashboard light up when the low beam is switched on, the brightness and/or color of the respective emitted light can be changed for the control element you are looking for in comparison to the other control elements. For example, the control you are looking for may glow brighter and/or red when the other controls glow dimly white. This visual highlighting of the searched control element can be continued until the user presses the searched control element or until a specified waiting period has elapsed.
Bevorzugt wechselt die Helligkeit und/oder Farbe des vom gesuchten Bedienelements abgegebenen Lichts für einen festgelegten Zeitraum altemierend, um einen Blinkeffekt zu erzielen. Durch das Aufblinken ist das gesuchte Bedienelement besonders leicht vom Nutzer zu identifizieren und im Fahrzeuginnenraum zu verorten. Die Blinkfrequenz kann dabei frei eingestellt werden und an Kundenanforderungen angepasst werden.The brightness and/or color of the light emitted by the control element you are looking for preferably changes alternately for a set period of time in order to achieve a flashing effect. By flashing, the desired control element is particularly easy for the user to identify and locate in the vehicle interior. The flashing frequency can be freely set and adapted to customer requirements.
Bei der integrierten Leuchtfunktion des physischen Bedienelements kann es sich um eine Funktionsbeleuchtung oder auch eine dedizierte Suchbeleuchtung handeln. Als Leuchtmittel kommen bewährte Lichtquellen in Frage wie beispielsweise Glühlampen, LEDs oder Laser. LEDs können auch gepulst betrieben werden. Zum visuellen Hervorheben eines solchen Bedienelements kann eine entsprechende LED mit einer angepassten Pulsweitenmodulation angesteuert werden. Hierdurch lässt sich die Helligkeit anpassen und besagter Blinkeffekt umsetzen.The integrated lighting function of the physical control element can be functional lighting or dedicated search lighting. Tried-and-tested light sources such as incandescent lamps, LEDs or lasers can be used as lamps. LEDs can also be operated in pulsed mode. To visually highlight such a control element, a corresponding LED can be controlled with an adapted pulse width modulation. This allows you to adjust the brightness and implement the flashing effect.
Ebenfalls ist es denkbar, dass ein korrespondierendes physisches Bedienelement von außen mit einer separaten Leuchtvorrichtung angestrahlt wird. Beispielsweise können in ein Armaturenbrett oder den Dachhimmel Lampen, Scheinwerfer, Laser oder dergleichen installiert sein, die auf die verschiedenen Bedienelemente ausgerichtet sind. Wird ein bestimmtes Bedienelement gesucht, so wird die jeweilige auf das Bedienelement ausgerichtete Leuchtvorrichtung zum Anstrahlen aktiviert. Auch ist es denkbar, dass eine bewegliche Leuchtvorrichtung im Fahrzeuginnenraum angeordnet ist, die das Bereitstellen eines beweglichen „Suchstrahls“ erlaubt.It is also conceivable that a corresponding physical control element is illuminated from the outside with a separate lighting device. For example, lamps, headlights, lasers or the like can be installed in a dashboard or the headliner, which are aimed at the various controls. If a specific control element is sought, the respective lighting device aligned with the control element is activated to illuminate it. It is also conceivable that a movable lighting device is arranged in the vehicle interior, which allows the provision of a movable “search beam”.
Eine weitere vorteilhafte Ausgestaltung des erfindungsgemäßen Verfahrens sieht ferner vor, dass bei einem gesuchten auf einer berührempfindlichen Anzeigevorrichtung dargestellten virtuellen Bedienelements zum optischen Hervorheben das virtuelle Bedienelement auf der Anzeigevorrichtung in einer abweichenden Größe, Kontrast, Transparenz, Farbe und/oder Helligkeit dargestellt wird. Zunehmend werden berührempfindliche Anzeigevorrichtungen in Fahrzeuge integriert, um Informationen an einen Nutzer auszugeben und als Bedienschnittstelle zu fungieren. Solche berührempfindlichen Anzeigevorrichtungen können in das Instrumentenbrett eingelassen sein, beispielsweise als Head-Unit, Kombiinstrument oder dergleichen. Eine solche berührempfindliche Anzeigevorrichtung kann dazu genutzt werden physische Bedienelemente zu ersetzen. So können auf der berührempfindlichen Anzeigevorrichtung virtuelle Bedienelemente dargestellt werden. Diese können in einem standardmäßig auf der Anzeigevorrichtung dargestellten Menü für den Nutzer präsentiert werden oder auch in Untermenüs.A further advantageous embodiment of the method according to the invention further provides that when a virtual control element is displayed on a touch-sensitive display device for visual highlighting, the virtual control element is displayed on the display device in a different size, contrast, transparency, color and / or brightness. Touch-sensitive display devices are increasingly being integrated into vehicles to provide information to a user and to function as an operating interface. Such touch sensitive ones Display devices can be embedded in the instrument panel, for example as a head unit, instrument cluster or the like. Such a touch-sensitive display device can be used to replace physical controls. Virtual controls can be displayed on the touch-sensitive display device. These can be presented to the user in a menu that is displayed as standard on the display device or in submenus.
Gilt es einen Nutzer auf ein solches virtuelles Bedienelement hinzuweisen, so kann das auf der Anzeigevorrichtung dargestellte virtuelle Bedienelement im Bezug zu weiteren auf der berührempfindlichen Anzeigevorrichtung dargestellten virtuellen Bedienelementen auf besagte Art und Weise abweichend dargestellt werden, sodass es durch einen Nutzer besonders leicht aufgefunden werden kann. In diesem Falle stellt die berührempfindliche Anzeigevorrichtung die visuelle Verortungseinrichtung dar.If it is necessary to point out such a virtual control element to a user, the virtual control element shown on the display device can be displayed differently in the said manner in relation to other virtual control elements shown on the touch-sensitive display device, so that it can be found particularly easily by a user . In this case, the touch-sensitive display device represents the visual location device.
Zum Hervorheben des virtuellen Bedienelements kann dabei die Transparenz einer entsprechenden Schaltfläche auf der berührempfindlichen Anzeigevorrichtung ein beliebiges Ausmaß zwischen 100% sichtbar, also opak, und 0% sichtbar, also vollständig durchsichtig, gewechselt werden. Dies ist gleichbedeutend mit dem Ein- und Ausblenden des virtuellen Bedienelements. Das virtuelle Bedienelement kann als Knopf, Schalter, Schieberegler, Drehregler oder dergleichen visualisiert sein.To highlight the virtual control element, the transparency of a corresponding button on the touch-sensitive display device can be changed to any extent between 100% visible, i.e. opaque, and 0% visible, i.e. completely transparent. This is equivalent to showing and hiding the virtual control. The virtual control element can be visualized as a button, switch, slider, rotary control or the like.
Bevorzugt wechselt die Größe, der Kontrast, die Transparenz, die Farbe und/oder die Helligkeit des virtuellen Bedienelements für einen festgelegten Zeitraum alternierend, um einen Blinkeffekt zu erzielen. Wie auch im Zusammenhang mit dem physischen Bedienelement erläutert ist hierdurch ein besonders intuitives und schnelles Auffinden des virtuellen Bedienelements für den Nutzer gewährleistet.The size, contrast, transparency, color and/or brightness of the virtual control element preferably changes alternately for a specified period of time in order to achieve a flashing effect. As explained in connection with the physical control element, this ensures that the virtual control element can be found particularly intuitively and quickly for the user.
Bevorzugt nimmt das alternierende Wechseln der optischen Hervorhebung des Bedienelements während des festgelegten Zeitraums bei einer ausbleibenden Bedienung durch den Nutzer in seiner Frequenz zu. Bleibt die Bedienung des gesuchten Bedienelements aus, so ist dies ein Indiz dafür, dass der Nutzer das Bedienelement trotz optischer Hervorhebung dennoch nicht auffindet. Indem die Frequenz, mit der die Hervorhebung des gesuchten Bedienelements erfolgt, erhöht wird, hebt sich das gesuchte Bedienelement noch deutlicher von den restlichen Bedienelementen in seinem Umfeld ab. Dies begünstigt die Wahrscheinlichkeit, dass das gesuchte Bedienelement durch einen Nutzer aufgefunden wird, noch weiter.Preferably, the alternating change in the visual highlighting of the control element increases in frequency during the specified period of time if the user does not operate it. If the desired control element is not operated, this is an indication that the user cannot find the control element despite the visual highlighting. By increasing the frequency with which the searched control element is highlighted, the searched control element stands out even more clearly from the remaining controls in its surroundings. This further increases the likelihood that the user will find the control element they are looking for.
Beispielsweise kann der Bedienknopf zum Aktivieren bzw. Deaktivieren einer Enteisungsvorrichtung nach Empfangen eines entsprechenden Suchbefehls per Sprache durch den Sprachassistenten anfangen in pinker Farbe zu blinken mit einer Frequenz von 1 Hertz. Wird der Enteisungsknopf in den nächsten drei Sekunden nicht betätigt, so kann die Blinkfrequenz mit fortschreitender Zeitdauer immer weiter vergrößert werden, beispielsweise pro Sekunde, in der das Bedienelement nicht betätigt wird, um ein Hertz. Zusätzlich können weitere visuelle Anpassungen getroffen werden, wie die Zunahme der Beleuchtungshelligkeit des nicht betätigten und gesuchten Bedienelements bei ausbleibender Bedienung mit der Zeit.For example, the control button for activating or deactivating a de-icing device can start flashing in pink at a frequency of 1 Hertz after receiving a corresponding search command by voice from the voice assistant. If the defrost button is not pressed in the next three seconds, the flashing frequency can be increased as the time progresses, for example by one hertz for every second in which the control element is not pressed. In addition, further visual adjustments can be made, such as increasing the lighting brightness of the unused and searched control element over time when there is no operation.
Für ein virtuelles Bedienelement können analog nach und nach weitere Mechanismen zum Hervorheben hinzugenommen werden, wie, ausgehend vom simplen Ein- und Ausblenden des virtuellen Bedienelements auf einem entsprechenden Display, das ergänzende Ändern seiner Größe und bei fortwährend ausbleibender Bedienung auch noch das Ändern seiner Farbe.For a virtual control element, further mechanisms for highlighting can be gradually added, such as, starting from simply showing and hiding the virtual control element on a corresponding display, additionally changing its size and, if there is still no operation, changing its color.
Bei einem Fahrzeug mit einem integrierten Sprachassistenten ist erfindungsgemäß der Sprachassistent dazu eingerichtet mittels eines im vorigen beschriebenen Verfahrens betrieben zu werden. Bei dem Fahrzeug handelt es sich um ein beliebiges Straßenfahrzeug wie einen Pkw, Lkw, Transporter, Bus oder dergleichen oder auch ein Schienenfahrzeug, Wasserfahrzeug oder Luftfahrzeug wie ein Flugzeug oder Helikopter.In a vehicle with an integrated voice assistant, according to the invention, the voice assistant is set up to be operated using a method described above. The vehicle is any road vehicle such as a car, truck, van, bus or the like, or a rail vehicle, watercraft or aircraft such as an airplane or helicopter.
Weitere vorteilhafte Ausgestaltungen des erfindungsgemäßen Verfahrens zum Betrieb des fahrzeugintegrierten Sprachassistenten ergeben sich auch aus dem Ausführungsbeispiel, welches nachfolgend unter Bezugnahme auf die Figur näher beschrieben wird.Further advantageous refinements of the method according to the invention for operating the vehicle-integrated voice assistant also result from the exemplary embodiment, which is described in more detail below with reference to the figure.
Dabei zeigt
In einem Verfahrensschritt 101 startet das Verfahren.The process starts in a
In einem Verfahrensschritt 102 gibt ein Fahrzeuginsasse als Sprachbefehl ein, dass ein bestimmtes Bedienelement, beispielsweise eine Taste zum Starten eines Enteisungsmodus, gesucht wird.In a
In einem Verfahrensschritt 103 verarbeitet der Sprachassistent die Suchanfrage. Das Fahrzeug kann über Mikrofone verfügen, über die sich Audiosignale im Fahrzeuginnenraum erfassen lassen. Mit Hilfe eines Spracherkennungsmoduls lassen sich diese Audiosignale einlesen und in eine Zeichenkette wandeln. Mittels eines Moduls zur Erkennung natürlicher Sprache kann dann diese Zeichenkette ausgelesen werden und eine mit dem Sprachbefehl übermittelte Absicht erkannt werden. Die besagten Module können auf einer gemeinsamen Recheneinheit oder auch auf unterschiedlichen Recheneinheiten ausgeführt werden.In a
Der Sprachassistent bzw. die Recheneinheit(en) prüft in einem Verfahrensschritt 104 bei einem physischen Bedienelement, welche Art von Beleuchtung das Bedienelement aufweist.In a
Bei einer durch ein Leuchtmittel mit einer im eingeschalteten Zustand kontinuierlicher Lichtabgabe hinterleuchtbaren Taste wird in einem Verfahrensschritt 105 über den Sprachassistent ein Signal „Suchanzeige“ mit dem Zustand „aktiv“ an ein Bus-Steuergerät des entsprechenden Bedienelements versendet. Im anschließendem Verfahrensschritt 106 fängt die entsprechende Taste bei ausgewertetem Signal an für einen definierten Zeitraum mit einer definierten Frequenz zu blinken. Hierzu wird das besagte Leuchtmittel alternierend durch das BUS-Steuergerät ein- und ausgeschaltet. Es kann sich bei der Leuchtfunktion um eine Funktionsbeleuchtung oder auch eine dedizierte Suchbeleuchtung handeln.In the case of a button that can be backlit by a lamp with a continuous light output when switched on, in a method step 105 a “search display” signal with the status “active” is sent to a bus control device of the corresponding control element via the voice assistant. In the
Als Leuchtmittel können über eine Pulsweitenmodulation ansteuerbare LEDs verwendet werden.
Im Verfahrensschritt 109 endet das Verfahren.The process ends in
Analog lässt sich der Verfahrensablauf zum Hervorheben eines virtuellen Bedienelements auf einer berührempfindlichen Anzeigevorrichtung umsetzen. So könnte zuerst zwischen den Verfahrensschritten 103 und 104 geprüft werden, ob ein physisches Bedienelement oder ein virtuelles Bedienelement gesucht wird. Der Sprachassistent steuert dann ein passendes Bus-Steuergerät an, um wiederum besagte berührempfindliche Anzeigevorrichtung zum Hervorheben des virtuellen Bedienelements anzusteuern.The process flow for highlighting a virtual control element on a touch-sensitive display device can be implemented in an analogous manner. It could first be checked between method steps 103 and 104 whether a physical control element or a virtual control element is being sought. The voice assistant then controls a suitable bus control device in order to in turn control said touch-sensitive display device to highlight the virtual control element.
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- DE 102006052600 A1 [0004]DE 102006052600 A1 [0004]
- DE 102012004601 A1 [0005]DE 102012004601 A1 [0005]
Claims (7)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102023000477.4A DE102023000477A1 (en) | 2023-02-13 | 2023-02-13 | Method for operating a vehicle-integrated voice assistant and vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102023000477.4A DE102023000477A1 (en) | 2023-02-13 | 2023-02-13 | Method for operating a vehicle-integrated voice assistant and vehicle |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102023000477A1 true DE102023000477A1 (en) | 2024-01-04 |
Family
ID=89167742
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE102023000477.4A Ceased DE102023000477A1 (en) | 2023-02-13 | 2023-02-13 | Method for operating a vehicle-integrated voice assistant and vehicle |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102023000477A1 (en) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060155547A1 (en) | 2005-01-07 | 2006-07-13 | Browne Alan L | Voice activated lighting of control interfaces |
| DE102006052600A1 (en) | 2006-11-08 | 2008-05-15 | Volkswagen Ag | Voice operation providing method for use in motor vehicle, involves automatically activating voice recognition device by control device, when automatic activation of recognition unit is assigned to system condition or traffic situation |
| DE102012004601A1 (en) | 2012-03-07 | 2012-10-11 | Daimler Ag | Assistance system for rider for offering and/or signaling information to passenger of motor car, has control device for controlling output device such that occupants offer and/or signal information in context-sensitive manner |
| US20200202855A1 (en) | 2018-12-19 | 2020-06-25 | Toyota Jidosha Kabushiki Kaisha | Vehicle-mounted device operation system |
| DE102019127183A1 (en) | 2019-10-09 | 2021-04-15 | Audi Ag | Display system for displaying an operating instruction for an operating element in a motor vehicle |
-
2023
- 2023-02-13 DE DE102023000477.4A patent/DE102023000477A1/en not_active Ceased
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060155547A1 (en) | 2005-01-07 | 2006-07-13 | Browne Alan L | Voice activated lighting of control interfaces |
| DE102006052600A1 (en) | 2006-11-08 | 2008-05-15 | Volkswagen Ag | Voice operation providing method for use in motor vehicle, involves automatically activating voice recognition device by control device, when automatic activation of recognition unit is assigned to system condition or traffic situation |
| DE102012004601A1 (en) | 2012-03-07 | 2012-10-11 | Daimler Ag | Assistance system for rider for offering and/or signaling information to passenger of motor car, has control device for controlling output device such that occupants offer and/or signal information in context-sensitive manner |
| US20200202855A1 (en) | 2018-12-19 | 2020-06-25 | Toyota Jidosha Kabushiki Kaisha | Vehicle-mounted device operation system |
| DE102019127183A1 (en) | 2019-10-09 | 2021-04-15 | Audi Ag | Display system for displaying an operating instruction for an operating element in a motor vehicle |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| DE112006000147T5 (en) | Voice-activated lighting of control interfaces | |
| DE102008037977B4 (en) | Display device for a vehicle and method for displaying information in the interior of a vehicle | |
| DE102008052442A1 (en) | Functional unit e.g. illumination device, operating method for motor vehicle, involves operating operating functions of operating level, which lies below highest operating level, in voice-controlled manner and/or manually | |
| DE102007008835A1 (en) | Device and method for interactive information output and / or assistance for the user of a motor vehicle | |
| DE10121392A1 (en) | Device for controlling devices by viewing direction | |
| DE102017208504A1 (en) | Activate a driving function for automated driving | |
| EP2017116B1 (en) | Method for operational support | |
| DE102009060391A1 (en) | Method for identifying controlling responsibility for automated driving process of driver assistance system, involves distributing controlling responsibility as function of driving conditions between driver and driver assistance system | |
| DE102011121617A1 (en) | Method for displaying information in a vehicle interior | |
| DE102017206876B4 (en) | Method of operating a voice control system in a motor vehicle and voice control system | |
| WO2016016050A1 (en) | Method for operating a light function of motor-vehicle headlamps and motor vehicle having a display device and an operating element for operating the light function of the motor-vehicle headlamps | |
| DE102010048746A1 (en) | Method for providing user interface in vehicle e.g. motor car, involves changing display element based on detected operating intention of information content of control element | |
| DE102013001884A1 (en) | System-initiated help function for the operation of a device associated with a vehicle - input of spaces | |
| DE102011017261A1 (en) | Method for providing user interface in vehicle for determining information in index database, involves accounting cross-reference between database entries assigned to input sequences by determining number of hits | |
| DE102023000477A1 (en) | Method for operating a vehicle-integrated voice assistant and vehicle | |
| DE102012015062B4 (en) | Methods and devices for activating a lighting device of a vehicle | |
| DE202015001767U1 (en) | Device for configuring a lighting in a vehicle interior | |
| DE102004035425A1 (en) | Switching device for motor vehicle has control unit connected to operating element and allocates to operating element other switching functions in dependence upon various driving situations | |
| DE102021204194A1 (en) | Method and operating device for controlling a vehicle function using a steering device | |
| DE102009033383A1 (en) | Motor vehicle has windscreen, head-up display for graphic representation of information on windshield and another display for graphical representation of information | |
| EP2744680A1 (en) | Display device for a vehicle | |
| EP3040842B1 (en) | User interface and method for hybrid use of a display unit of a means of locomotion | |
| DE102008026030A1 (en) | Information and assistance system and a method for its control | |
| DE102017011498A1 (en) | Method for operating an assistance system and an assistance system for a motor vehicle | |
| DE102008033441B4 (en) | Method for operating an operating system for a vehicle and operating system for a vehicle |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R012 | Request for examination validly filed | ||
| R230 | Request for early publication | ||
| R002 | Refusal decision in examination/registration proceedings | ||
| R003 | Refusal decision now final |