WO2021259609A1 - Method for individualizing a voice control, computer-readable storage medium and system - Google Patents

Method for individualizing a voice control, computer-readable storage medium and system Download PDF

Info

Publication number
WO2021259609A1
WO2021259609A1 PCT/EP2021/064846 EP2021064846W WO2021259609A1 WO 2021259609 A1 WO2021259609 A1 WO 2021259609A1 EP 2021064846 W EP2021064846 W EP 2021064846W WO 2021259609 A1 WO2021259609 A1 WO 2021259609A1
Authority
WO
WIPO (PCT)
Prior art keywords
user input
assignment
command
commands
value
Prior art date
Application number
PCT/EP2021/064846
Other languages
German (de)
French (fr)
Inventor
Christian Suess
Laith Alkurdi
Original Assignee
Bayerische Motoren Werke Aktiengesellschaft
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke Aktiengesellschaft filed Critical Bayerische Motoren Werke Aktiengesellschaft
Publication of WO2021259609A1 publication Critical patent/WO2021259609A1/en

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G06F40/35—Discourse or dialogue representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks

Definitions

  • the invention relates to a method for individualizing voice control for execution by a control unit, in particular by a control unit of a vehicle, with an associated storage medium which has at least one discrete storage area, a computer-readable storage medium and a system for carrying out such a method.
  • voice control by a user is based on the data processing of a control unit which accesses a dictionary stored in a storage medium.
  • a user input can be converted into a defined vocabulary so that the control unit can make permanently assigned settings.
  • the user must enter defined terms and in particular specific parameter values via the voice control in order to be able to use the functionality by means of the control unit. Any, unspecific formulations for describing the desired setting to be made cannot be used or implemented by the control unit.
  • the invention is based on the object of specifying a method which enables the individualization of voice control, carried out by a control unit, in a simple and efficient manner, so that any user-specific inputs can be converted into (parameter) settings to be changed, for example a vehicle . Furthermore, a computer-readable storage medium and a system for implementing the method are to be specified. These objects are achieved with regard to the method by the subject matter of claim 1, with regard to the computer-readable storage medium by the subject matter of claim 6 and with regard to the system by the subject matter of claim 7. Preferred embodiments are specified in the dependent claims.
  • a method for individualizing voice control for execution by a control unit, in particular by a control unit of a vehicle, with an assigned storage medium which has at least one discrete memory area in which at least one setting command from a plurality of setting commands for changing a parameter value a device and / or an actuator is stored and at least one assignment command, preferably a list of assignment commands, is stored for assigning a user input to the at least one setting command, the method having the following steps:
  • a similarity value in particular by using a neural network, between the first user input and at least one of the setting commands, in particular identifying a parameter value to be set for a device and / or an actuator, and / or between the first user input and an assignment command, in particular from a list with a plurality of assignment commands; where if the determined similarity value between the first user input and the at least one setting command and / or at least one assignment command is equal to a predeterminable similarity threshold value or is above the predeterminable similarity threshold value:
  • the invention is based on the idea of customizing a voice control executed by the control unit in such a way that informal terminology of individual users can be converted into actuating commands to be executed, in particular so that the setting or changing of parameter values of a device or an actuator is made possible.
  • the aim of the individualization of the voice control is to be able to implement a non-specific first user input, without direct reference to the setting command to be executed, for setting at least one parameter value using the control unit.
  • a user input can also be understood as an implicit user input, in contrast to an explicit user input, which is indubitably and directly assignable to an actuating command to be executed.
  • first user inputs can be formulated unspecifically in such a way that the control unit does not issue an actuating command to the first user input Change a parameter value can assign.
  • the command to change parameters in the sense of a setting to be made, can be recognized by the control unit, but the discrete parameter value to be set cannot be taken from the first user input for the control unit.
  • a control command can be understood as a combination of a parameter value to be set and the command to set or change the parameter, i.e. as a control command to be executed with a discrete parameter value of a device and / or an actuator to be set.
  • the user can transfer the setting of a "comfortable temperature" in the vehicle interior to the voice control as a user input.
  • a "comfortable” temperature is such a non-specific value that the control unit cannot find an adequate setting command with a specific parameter value to make the setting in a meaningful way to be able to implement.
  • the user input cannot be assigned to any setting command, in particular to any parameter value to be set for a device and / or an actuator.
  • the invention provides for the control unit to determine a similarity value between the first user input and at least one stored assignment command and / or at least one of the stored control commands.
  • the similarity value can be determined using a neural network, also known as a “deep neural net”.
  • the similarity value is to be understood in the sense of the present invention in such a way that, on the basis of the similarity value, a match or assignment of the first user input to an actuating command and / or to an assignment command can be made possible.
  • an assignment command can be a link between insufficiently specific first user inputs and stored ones Adjustment commands are understood to enable a translation of the first user input by the control unit.
  • an assignment command can represent additional (data) information that allows an exact or more precise or further assignment of a first user input with respect to the plurality of stored control commands.
  • a data basis for determining a similarity value can be supplemented by additional data and / or an immediate, direct link, in particular with an actuating command.
  • the determined similarity value can be compared with a predeterminable similarity threshold value in order to determine a successful assignment of the first user input to a setting command or an assignment command.
  • the first user input can be successfully assigned to a control command or to a parameter value to be changed of a device and / or an actuator.
  • control unit could not assign the first user input. This result can be output visually and / or acoustically to the user in order to enable a second user input for storing a new assignment command for selecting at least one setting command to be executed with a discrete value.
  • the user would like to set a sportier driving style for a vehicle via the voice control.
  • the control unit which dynamic properties of the vehicle, such as engine power, chassis, steering, etc., are to be changed.
  • the specific chassis hardness level for the control unit for example between half the maximum hardness, three quarters of the maximum hardness or the maximum hardness, is not clearly evident from the first user input.
  • a second user input can only assign a chassis hardness level to the specific, individual user input and a chassis hardness value.
  • the associated assignment command for Linking the unspecific first user input with the setting of the user-specific chassis hardness level can be stored in the storage medium as additional data information or assignment aid for the assignment to at least one control command including the parameter to be set.
  • additional data information or assignment aid for the assignment to at least one control command including the parameter to be set In the case of subsequent first user entries of the same type, only the chassis hardness level can be set directly by the control unit using the stored assignment command.
  • a discrete value for example, an air temperature in the vehicle interior, a chassis hardness level, an engine power characteristic selection from a plurality of predetermined engine power characteristics or the like can be understood.
  • settings between 0 and 100% can also be understood as discrete values, such as, for example, the interior brightness, the brightness of headlights, the maximum available engine power, regardless of discrete engine power characteristics, or the like.
  • the setting of the interior lighting according to the first user input can be requested by the user as "bright as day”.
  • the control unit determines a similarity value between the first user input for setting the interior lighting to "bright as day” and the existing setting commands for setting a parameter value and possibly already stored assignment commands the user will be notified of the lack of assignability.
  • the unspecific first user input "bright as day” can then be assigned a lighting value of 70% of the maximum brightness.
  • an individual parameter value or the setting of such an individual parameter value can be made in the memory unit of an unspecific first user input. can be assigned and are called up or implemented directly on subsequent calls in the sense of the same first user input.
  • Voice control can advantageously be individualized for a user so that unspecific user inputs can be implemented by the control unit on the basis of assignable commands that can be stored.
  • the determination of the similarity value takes place using a cluster formation and / or a ranking between at least some of the control commands and / or assignment commands stored on the storage medium.
  • the neural network to be preferably used can run through one or more stages or levels in the context of determining the similarity value and, for example, carry out several cluster steps in order to gradually reduce the setting commands that appear suitable and the selection in this way, in the light of a steadily increasing similarity value to be more precise step by step.
  • the neural network it is possible, in particular using the neural network, to create a ranking within the framework of determining the similarity value between the stored setting commands and / or assignment commands in order to assign the first user input to a setting command to be executed.
  • the stored setting and / or assignment commands can be arranged in a ranking order, for example, on the basis of user-specific preferences, in the sense of user information values.
  • setting and / or assignment commands that are directed, for example, to the air conditioning of the vehicle interior or the driving dynamics of the vehicle, can be excluded on the basis of the cluster formation.
  • a ranking can be established between the setting and / or assignment commands clustered as relevant. For example, in the light of the first user input with regard to the visibility conditions in the dark, it is possible to prioritize the headlight setting, while the interior lighting is given a subordinate ranking position.
  • determining a similarity value can in particular also be understood as a statistical or probabilistic analysis, the greatest correspondence or similarity between the first user input and the control command to be identified from the plurality of control commands being determined.
  • a database is available that can be composed in particular of known assignment commands, e.g. in the form of unambiguous discrete assignments to control commands or in the form of data records to identify the preferences and properties of various users.
  • the method has the steps: - providing at least one user information value of the user in the storage medium;
  • a user information value for example, the age of the user, the gender, the vehicle model, the user-specific driving style, a visual acuity or a visual impairment of the user or the like can be stored in the storage medium.
  • control unit can make a preselection for assigning the first user input to a specific value or value range and thus accelerate or make the final assignment process more efficient.
  • the method has the further step:
  • Pre-processing of the at least one first user input by the control unit in particular on the basis of a word and / or sentence embedding analysis such as BERT, ULMfit and / or ELMo.
  • the assignment of the first user input to a setting command to be executed with a parameter value to be set, or to an assignment command that has already been stored can be accelerated or be optimized, in particular can be accelerated or optimized by means of a semantic structure to reduce the number of input data for a language model.
  • the amount of data to be processed by the control unit can thus be reduced on the basis of the preprocessing and the process of assigning the first user input to a setting command with a parameter value to be set can be made more efficient.
  • the first user input is linked to a pointer element or mapped onto a pointer element on the basis of the preprocessing, the pointer element for identifying at least one setting command from a plurality of setting commands, in particular at least one discrete memory area with at least one setting command, and / or at least an assignment command from a plurality of assignment commands in the storage medium is used, in particular so that the determination of a similarity value between the first user input and at least one setting command and / or an assignment command is simplified.
  • the preprocessing can be used to map the first user input to a vector or pointer element for the specific assignment of the first user input to a control command and / or assignment command within a vector space or a "latent space" with a large number of control commands and / or assignment commands .
  • a (semantic) preprocessing of the first user input is used to make a preselection from the total amount, for example in the form of a "latent space", of available setting commands and / or assignment commands in the memory unit, so that the control unit makes an efficient comparison - and / or assignment process, in particular in the sense of determining a similarity value, can perform for the first user input.
  • semantic comparisons between the first user input and in particular the stored control commands can be used in order to narrow down, in particular, the available control commands in advance of the Determine the similarity value.
  • a computer-readable storage medium in particular for access by a control unit, preferably the control unit of a vehicle that contains instructions to cause at least one processor to implement a method according to the invention when the instructions are executed by the at least one processor.
  • the instructions can be at least partially executable on one or more processors arranged in a distributed manner, in particular one or more servers and the processors of at least two vehicles, in particular the processors of the control units of at least two vehicles.
  • a system for carrying out a method according to the invention is provided, with at least one first vehicle which has a control unit and at least one storage medium assigned to the control unit.
  • the at least one storage medium assigned to the control unit has a plurality of discrete storage areas in which different setting commands and / or assignment commands can be stored and read independently of one another.
  • Individual setting commands and / or assignment commands can thus be called up by the control unit and first user inputs can be linked to setting commands for changing parameter values of a device and / or an actuator.
  • the storage medium assigned to the control unit is designed as a local storage medium of the vehicle and / or as a central server.
  • Control commands and assignment commands can be stored locally in a vehicle directly. Fast, direct access to assignments of the first user inputs by the executing control unit is possible at any time.
  • Adjustment commands or assignment commands can be stored on a central server, which is preferably designed to receive and send data, and with the at least one local control unit or the at least one vehicle including the local control unit is in a (data) communicative connection for data transmission.
  • first user inputs that have already been assigned can be exchanged, in particular between several vehicles.
  • implicit learning across different user groups is possible, for example as a function of user information values such as the age of the user, the vehicle type or the like.
  • control unit is in (data) communicative connection with the central server, as at least part of the storage medium, in such a way that it can be assigned based on the determination of a similarity value between the first user input and at least one on the central server Server stored assignment command and / or control command can be determined.
  • Assignments of first user inputs to control commands with parameter values can be shared or exchanged across vehicles and users via the central server, in particular between users with comparable user information values.
  • FIG. 1 shows a flow chart relating to an individualization of a
  • Voice control carried out by a control unit.
  • FIG. 1 shows a flow chart relating to the possible sequence of individualization of a voice control.
  • a first step at least one first user input is received from a user for changing at least one parameter value of a device and / or an actuator.
  • the first user input can preferably be provided as an acoustic user input, in the sense of a voice input for controlling the control unit.
  • a similarity value is determined between the first user input and at least one assignment command and / or at least one of the setting commands as a setting command to be executed by the control unit.
  • a discrete parameter value to be set of a device and / or an actuator is identified.
  • a command for changing a parameter value and the discrete parameter value to be set can be identified.
  • assignment commands can be stored in the storage medium as a list of assignment commands.
  • a neural network can preferably be used to determine the similarity value 20.
  • a cluster formation and / or a ranking formation can preferably take place in order to enable an optimized assignment process, in the context of determining the similarity value, of the first user input for at least one setting command and / or assignment command from the multitude of setting and / or assignment commands .
  • the stored setting and / or assignment commands can be arranged in such a way that relevant setting commands are grouped in the light of the first user input.
  • control and / or assignment commands can be sorted according to their priority.
  • the efficiency of the determination of the similarity value for identifying a setting command and a parameter value to be set can be optimized on the basis of a combined formation of clusters and rankings by the neural network.
  • a visual and / or acoustic output 30b of a lack of assignability is provided if the at least one specific similarity value between the first user input and the at least one assignment command and / or the at least one setting command is below a predeterminable similarity threshold value.
  • a lack of assignability if the unspecific first user input does not allow the control unit to draw any conclusions about a discrete parameter value to be set.
  • the specific similarity value between the first user input and the at least one control command and / or at least one assignment command is equal to a predeterminable similarity threshold value or is above the predeterminable similarity threshold value, that the at least one control command is selected and executed (30a). In this case, no further individualization of the voice control carried out by the control unit is necessary.
  • a second user input is received 40 with an assignment command for selecting at least one setting command to be executed with a discrete value as a parameter value to be set for a device and / or an actuator.
  • a discrete parameter value to be set can be assigned or linked or a command for changing a parameter in combination with a discrete parameter value to be set can be assigned or linked on the basis of the first user input.
  • the assignment command is stored 50 in accordance with the second user input in the storage medium, in particular so that the first user input can be assigned to the setting command to be executed with the discrete value as the parameter value to be set for a device and / or an actuator.
  • the assignment command already stored in the storage medium can be used as a direct link or in the sense of a supplementary data basis in order to determine an assignment of the first user input to the associated setting command with the parameter value to be set.
  • a sufficient similarity value between the first user input and the already stored assignment command can be determined in order to determine the assignment to the setting command with a discrete parameter value.
  • the first user input 10 has the unspecific wording "I see nothing" corresponding to everyday use as its object % Luminosity to be set.
  • the determined similarity value 20 between this first user input and the existing control commands and / or assignment commands in the storage medium lies below a predetermined similarity threshold value. It is therefore not possible to assign this first user input to an adjustment command / assignment command that has the object of increasing the headlight brightness to 100% luminosity. In particular, the control unit cannot find a corresponding setting command in the storage medium that is suitable for implementing the first user input.
  • the control unit can transmit a visual and / or acoustic message 30b to the user, which indicates the lack of assignability.
  • a second user input by the control unit can be requested from the user in the context of a voice dialog of the voice control.
  • the control unit can then receive 40 a second user input from the user, the second user input indicating, in particular explicitly expressing, that the headlights should be set to 100% luminosity.
  • the control unit can make a clear assignment of the first user input to an actuating command with a parameter to be set, namely the maximum luminosity of the headlights.
  • an assignment command can be deposited or stored in the storage medium, which, in the sense of a supplementary data basis, allows the assignment of the first user input to the associated setting command with the discrete parameter value to be set.
  • Another example can relate to the first user input "I want to drive more sportily”. Due to an insufficient similarity value, the control unit cannot assign 20; 30b how sporty the chassis, the steering and / or the maximum available engine power should be set.
  • various commands for setting discrete parameter values can be assigned to the first user input.
  • the chassis hardness level can be adjusted to 60% according to the individual preferences of the user, with 85% of the engine power and maximum directness of the steering being assigned to this first user input.
  • the at least one assignment command, in the sense of this second user input, can be stored 50 in the storage medium.
  • control unit can determine a sufficient similarity value with the previously stored assignment command and use this to determine the corresponding parameter values of the vehicle, for example to change the hardness of the chassis, the engine power and the directness of the steering.
  • a first user input is made such as "I want to set the sportiest driving", a lack of assignability 20; 30b can be determined again and a further second user input 40 for determining new assignment commands can be requested 30b by the control unit.
  • an efficient individualization of a voice control carried out by a control unit, can be made possible.
  • unspecific first user inputs based on the determination of similarity values, preferably using a neural network, can be linked with discrete parameter values or with setting commands for setting these discrete parameter values on a device and / or an actuator.
  • Voice control can thus be optimized and individualized in terms of everyday or colloquial first user inputs. You can do this Furthermore, individual user information values are taken into account in the sense of preprocessing or preselection of the available control commands in order to optimize the process of comparison with existing control commands or assignment commands.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Feedback Control In General (AREA)

Abstract

The invention relates to method for individualizing a voice control to be executed by a control unit, in particular by a control unit of a vehicle, comprising an associated storage medium. It is provided that the first user input is assigned to a control command that is to be executed, with a discrete value as a parameter value that is to be set of a device and/or actuator. The invention further relates to a computer-readable storage medium and to a system for carrying out such a method.

Description

19-0158 PIF 19-0158 PIF
Verfahren zum Individualisieren einer Sprachsteuerung, computerlesbaresMethod for individualizing a voice control, computer-readable
Speichermedium und System Storage medium and system
BESCHREIBUNG DESCRIPTION
Die Erfindung betrifft ein Verfahren zum Individualisieren einer Sprachsteuerung zur Ausführung durch eine Steuereinheit, insbesondere durch eine Steuereinheit eines Fahrzeuges, mit einem zugeordneten Speichermedium, welches mindestens einen diskreten Speicherbereich aufweist, ein computerlesbares Speichermedium sowie ein System zur Durchführung eines solchen Verfahrens. The invention relates to a method for individualizing voice control for execution by a control unit, in particular by a control unit of a vehicle, with an associated storage medium which has at least one discrete storage area, a computer-readable storage medium and a system for carrying out such a method.
Die Verwendung einer Sprachsteuerung durch einen Benutzer basiert auf der Datenverarbeitung einer Steuereinheit, die auf ein in einem Speichermedium hinterlegtes Wörterbuch zugreift. Eine Benutzereingabe kann hierbei in einen festgelegten Wortschatz umgesetzt werden, sodass die Steuereinheit fest zugeordnete Einstellungen vornehmen kann. The use of voice control by a user is based on the data processing of a control unit which accesses a dictionary stored in a storage medium. A user input can be converted into a defined vocabulary so that the control unit can make permanently assigned settings.
Jedoch besteht das Problem, dass diverse Einstellungen, z.B. in einem Fahrzeug, speziell ohne die Eingabe konkreter Parameterwerte, wie einer einzustellenden Innenraumtemperatur oder einer einzustellenden Geschwindigkeit, für eine Sprachsteuerung nicht umsetzbar sind. However, there is the problem that various settings, e.g. in a vehicle, especially without entering specific parameter values, such as an interior temperature to be set or a speed to be set, cannot be implemented for voice control.
Demnach muss der Benutzer festgelegte Begriffe und insbesondere konkrete Parameterwerte über die Sprachsteuerung eingeben, um die Funktionalität mittels der Steuereinheit nutzen zu können. Beliebige, unspezifische Formulierungen zur Umschreibung der gewünschten, vorzunehmenden Einstellung sind hierbei nicht verwendbar bzw. durch die Steuereinheit umsetzbar. Accordingly, the user must enter defined terms and in particular specific parameter values via the voice control in order to be able to use the functionality by means of the control unit. Any, unspecific formulations for describing the desired setting to be made cannot be used or implemented by the control unit.
Der Erfindung liegt die Aufgabe zu Grunde ein Verfahren anzugeben, welches die Individualisierung einer Sprachsteuerung, ausgeführt durch eine Steuereinheit, auf einfache und effiziente Weise ermöglicht, sodass beliebige, benutzerspezifische Eingaben in zu ändernde (Parameter-)Einstellungen, beispielsweise eines Fahrzeuges, umgesetzt werden können. Des Weiteren sollen ein computerlesbares Speichermedium sowie ein System zur Umsetzung des Verfahrens angegeben werden. Diese Aufgaben werden mit Blick auf das Verfahren durch den Gegenstand des Anspruchs 1 gelöst, mit Blick auf das computerlesbare Speichermedium durch den Gegenstand des Anspruchs 6 und mit Blick auf das System durch den Gegenstand des Anspruchs 7. Bevorzugte Ausführungsformen sind in den abhängigen Ansprüchen angegeben. The invention is based on the object of specifying a method which enables the individualization of voice control, carried out by a control unit, in a simple and efficient manner, so that any user-specific inputs can be converted into (parameter) settings to be changed, for example a vehicle . Furthermore, a computer-readable storage medium and a system for implementing the method are to be specified. These objects are achieved with regard to the method by the subject matter of claim 1, with regard to the computer-readable storage medium by the subject matter of claim 6 and with regard to the system by the subject matter of claim 7. Preferred embodiments are specified in the dependent claims.
Gemäß der Erfindung ist ein Verfahren zum Individualisieren einer Sprachsteuerung zur Ausführung durch eine Steuereinheit vorgesehen, insbesondere durch eine Steuereinheit eines Fahrzeuges, mit einem zugeordneten Speichermedium, welches mindestens einen diskreten Speicherbereich aufweist, in dem wenigstens ein Stellbefehl von einer Mehrzahl von Stellbefehlen zum Verändern eines Parameterwertes einer Vorrichtung und/oder eines Aktuators gespeichert ist und wenigstens ein Zuordnungsbefehl, vorzugsweise eine Liste von Zuordnungsbefehlen, zum Zuordnen einer Benutzereingabe zu dem wenigstens einen Stellbefehl gespeichert ist, wobei das Verfahren die folgenden Schritte aufweist: According to the invention, a method for individualizing voice control is provided for execution by a control unit, in particular by a control unit of a vehicle, with an assigned storage medium which has at least one discrete memory area in which at least one setting command from a plurality of setting commands for changing a parameter value a device and / or an actuator is stored and at least one assignment command, preferably a list of assignment commands, is stored for assigning a user input to the at least one setting command, the method having the following steps:
- Empfangen wenigstens einer ersten Benutzereingabe von einem Benutzer zum Verändern wenigstens eines Parameterwertes einer Vorrichtung und/oder eines Aktuators, insbesondere einer ersten akustischen Benutzereingabe zum sprachbasierten Steuern der Steuereinheit; - Receiving at least one first user input from a user for changing at least one parameter value of a device and / or an actuator, in particular a first acoustic user input for voice-based control of the control unit;
- Bestimmen eines Ähnlichkeitswertes, insbesondere durch Einsatz eines neuronalen Netzes, zwischen der ersten Benutzereingabe und wenigstens einem der Stellbefehle, insbesondere identifizieren eines einzustellenden Parameterwertes einer Vorrichtung und/oder eines Aktuators, und/oder zwischen der ersten Benutzereingabe und einem Zuordnungsbefehl, insbesondere aus einer Liste mit einer Mehrzahl von Zuordnungsbefehlen; wobei wenn der bestimmte Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem wenigstens einen Stellbefehl und/oder wenigstens einem Zuordnungsbefehl gleich eines vorgebbaren Ähnlichkeits-Schwellwertes ist oder oberhalb des vorgebbaren Ähnlichkeits- Schwellwertes liegt: - Determination of a similarity value, in particular by using a neural network, between the first user input and at least one of the setting commands, in particular identifying a parameter value to be set for a device and / or an actuator, and / or between the first user input and an assignment command, in particular from a list with a plurality of assignment commands; where if the determined similarity value between the first user input and the at least one setting command and / or at least one assignment command is equal to a predeterminable similarity threshold value or is above the predeterminable similarity threshold value:
Auswahlen und Ausfuhren des wenigstens einen Stellbefehls; und/oder wenn der wenigstens eine bestimmte Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem wenigstens einen Stellbefehl und/oder wenigstens einem Zuordnungsbefehl unterhalb eines vorgebbaren Ähnlichkeits-Schwellwertes liegt, insbesondere wenn ein einzustellender Parameterwert nicht identifizierbar ist: Selecting and executing the at least one setting command; and / or if the at least one specific similarity value between the first user input and the at least one setting command and / or at least one assignment command is below a predeterminable similarity threshold value, in particular if a parameter value to be set cannot be identified:
- Visuelles und/oder akustisches Ausgeben einer fehlenden Zuordbarkeit; - Visual and / or acoustic output of a missing assignability;
- Empfangen einer zweiten Benutzereingabe mit einem Zuordnungsbefehl zur Auswahl wenigstens eines auszuführenden Stellbefehls mit einem diskreten Wert als einem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators; - Receiving a second user input with an assignment command for selecting at least one setting command to be executed with a discrete value as a parameter value to be set for a device and / or an actuator;
- Speichern des Zuordnungsbefehls gemäß der zweiten Benutzereingabe in dem Speichermedium, insbesondere sodass die erste Benutzereingabe dem auszuführenden Stellbefehl mit dem diskreten Wert als dem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators zuordbar ist, insbesondere durch Bestimmen des Ähnlichkeitswertes zuordbar ist. - Saving the assignment command according to the second user input in the storage medium, in particular so that the first user input can be assigned to the setting command to be executed with the discrete value as the parameter value to be set for a device and / or an actuator, in particular by determining the similarity value.
Der Erfindung liegt die Idee zugrunde eine durch die Steuereinheit ausgeführte Sprachsteuerung derart individualisierbar auszugestalten, dass formlose Begrifflichkeiten einzelner Benutzer in auszuführende Stellbefehle umgesetzt werden können, insbesondere sodass die Einstellung bzw. Änderung von Parameterwerten einer Vorrichtung bzw. eines Aktuators ermöglicht wird. The invention is based on the idea of customizing a voice control executed by the control unit in such a way that informal terminology of individual users can be converted into actuating commands to be executed, in particular so that the setting or changing of parameter values of a device or an actuator is made possible.
Die Individualisierung der Sprachsteuerung zielt darauf ab, eine unspezifische erste Benutzereingabe, ohne direkten Bezug auf den auszuführenden Stellbefehl, zum Einstellen wenigstens eines Parameterwertes anhand der Steuereinheit umsetzen zu können. Eine solche Benutzereingabe kann auch als eine implizite Benutzereingabe verstanden werden, im Gegensatz zu einer expliziten Benutzereingabe, welche einem auszuführenden Stellbefehl unzweifelhaft und unmittelbar zuordbar ist. The aim of the individualization of the voice control is to be able to implement a non-specific first user input, without direct reference to the setting command to be executed, for setting at least one parameter value using the control unit. Such a user input can also be understood as an implicit user input, in contrast to an explicit user input, which is indubitably and directly assignable to an actuating command to be executed.
Insbesondere können erste Benutzereingaben derart unspezifisch formuliert sein, sodass die Steuereinheit der ersten Benutzereingabe keinen Stellbefehl zum Ändern eines Parameterwertes zuordnen kann. Dies trifft speziell auf die Alltagssprache bzw. umgangssprachliche Formulierungen eines Benutzers zu. So ist es beispielsweise auch möglich, dass zwar der Befehl zur Parameteränderung, im Sinne einer vorzunehmenden Einstellung, durch die Steuereinheit erkannt werden kann, jedoch der diskrete, einzustellende Parameterwert der ersten Benutzereingabe für die Steuereinheit nicht entnehmbar ist. In particular, first user inputs can be formulated unspecifically in such a way that the control unit does not issue an actuating command to the first user input Change a parameter value can assign. This particularly applies to the everyday language or slang formulations of a user. For example, it is also possible that the command to change parameters, in the sense of a setting to be made, can be recognized by the control unit, but the discrete parameter value to be set cannot be taken from the first user input for the control unit.
Im Sinne der Erfindung kann ein Stellbefehl als eine Kombination aus einem einzustellenden Parameterwert und dem Befehl zum Einstellen bzw. Verändern des Parameters aufgefasst werden, also als ein auszuführender Stellbefehl mit einem einzustellenden diskreten Parameterwert einer Vorrichtung und/oder eines Aktuators. In the context of the invention, a control command can be understood as a combination of a parameter value to be set and the command to set or change the parameter, i.e. as a control command to be executed with a discrete parameter value of a device and / or an actuator to be set.
Beispielsweise kann der Benutzer die Einstellung einer „angenehmen Temperatur" im Fahrzeuginnenraum als Benutzereingabe an die Sprachsteuerung übergeben. Eine „angenehme" Temperatur ist ein derart unspezifischer Wert, dass die Steuereinheit keinen adäquaten Stellbefehl mit einem konkreten Parameterwert auffinden kann, um die Einstellung auf sinnvolle Weise umsetzen zu können. Die Benutzereingabe ist keinem Stellbefehl zuordbar, insbesondere keinem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators zuordbar. For example, the user can transfer the setting of a "comfortable temperature" in the vehicle interior to the voice control as a user input. A "comfortable" temperature is such a non-specific value that the control unit cannot find an adequate setting command with a specific parameter value to make the setting in a meaningful way to be able to implement. The user input cannot be assigned to any setting command, in particular to any parameter value to be set for a device and / or an actuator.
Um eine solche (fehlende) Zuordnung zu ermitteln ist im Sinne der Erfindung vorgesehen, dass die Steuereinheit einen Ähnlichkeitswert zwischen der ersten Benutzereingabe und wenigstens einem gespeicherten Zuordnungsbefehl und/oder wenigstens einem der gespeicherten Stellbefehle bestimmt. In order to determine such a (missing) assignment, the invention provides for the control unit to determine a similarity value between the first user input and at least one stored assignment command and / or at least one of the stored control commands.
Insbesondere kann das Bestimmen des Ähnlichkeitswertes unter Verwendung bzw. Anwendung eines neuronalen Netzes, auch bekannt als „Deep Neural Net", erfolgen. In particular, the similarity value can be determined using a neural network, also known as a “deep neural net”.
Der Ähnlichkeitswert ist im Sinne der vorliegenden Erfindung derart zu verstehen, dass anhand des Ähnlichkeitswertes eine Übereinstimmung bzw. Zuordnung der ersten Benutzereingabe zu einem Stellbefehl und/oder zu einem Zuordnungsbefehl ermöglicht werden kann. The similarity value is to be understood in the sense of the present invention in such a way that, on the basis of the similarity value, a match or assignment of the first user input to an actuating command and / or to an assignment command can be made possible.
Ein Zuordnungsbefehl kann im Sinne der Erfindung als eine Verknüpfung zwischen unzureichend spezifischen ersten Benutzereingaben und gespeicherten Stellbefehlen verstanden werden, um eine Übersetzung der ersten Benutzereingabe durch die Steuereinheit zu ermöglichen. In diesem Sinne kann ein Zuordnungsbefehl eine zusätzliche (Daten-)Information darstellen, die eine exakte oder eine genauere bzw. eine weitere Zuordnung einer ersten Benutzereingabe gegenüber der Mehrzahl von gespeicherten Stellbefehlen erlaubt. In the context of the invention, an assignment command can be a link between insufficiently specific first user inputs and stored ones Adjustment commands are understood to enable a translation of the first user input by the control unit. In this sense, an assignment command can represent additional (data) information that allows an exact or more precise or further assignment of a first user input with respect to the plurality of stored control commands.
Anhand von zusätzlichen Zuordnungsbefehlen kann eine Datengrundlage für die Bestimmung eines Ähnlichkeitswertes ergänzt werden, durch zusätzliche Daten und/oder eine unmittelbare, direkte Verknüpfung insbesondere mit einem Stellbefehl. With the aid of additional assignment commands, a data basis for determining a similarity value can be supplemented by additional data and / or an immediate, direct link, in particular with an actuating command.
Der ermittelte Ähnlichkeitswert kann mit einem vorgebbaren Ähnlichkeits- Schwellwert abgeglichen werden, um eine erfolgreiche Zuordnung der ersten Benutzereingabe zu einem Stellbefehl oder einem Zuordnungsbefehl zu ermitteln. The determined similarity value can be compared with a predeterminable similarity threshold value in order to determine a successful assignment of the first user input to a setting command or an assignment command.
Sofern der bestimmte Ähnlichkeitswert gleich oder größer als ein vorgegebener Ähnlichkeits-Schwellwert ist, kann die erste Benutzereingabe einem Stellbefehl bzw. einem zu verändernden Parameterwert einer Vorrichtung und/oder eines Aktuators erfolgreich zugeordnet werden. If the determined similarity value is equal to or greater than a predetermined similarity threshold value, the first user input can be successfully assigned to a control command or to a parameter value to be changed of a device and / or an actuator.
Liegt der bestimmte Ähnlichkeitswert unterhalb des vorgegebenen Ähnlichkeits- Schwellwertes, konnte keine Zuordnung der ersten Benutzereingabe durch die Steuereinheit erfolgen. Dieses Ergebnis kann visuell und/oder akustisch an den Benutzer ausgegeben werden, um eine zweite Benutzereingabe zum Hinterlegen eines neuen Zuordnungsbefehls zur Auswahl wenigstens eines auszuführenden Stellbefehls mit einem diskreten Wert zu ermöglichen. If the determined similarity value is below the predefined similarity threshold value, the control unit could not assign the first user input. This result can be output visually and / or acoustically to the user in order to enable a second user input for storing a new assignment command for selecting at least one setting command to be executed with a discrete value.
Als ein weiteres Beispiel ist es möglich, dass der Benutzer über die Sprachsteuerung eine sportlichere Fahrweise eines Fahrzeugs einstellen möchte. Einerseits ist für die Steuereinheit uneindeutig, welche fahrdynamischen Eigenschaften des Fahrzeugs, wie Motorleistung, Fahrwerk, Lenkung, etc., verändert werden sollen. Andererseits geht für die Steuereinheit die konkrete Fahrwerks-Härtestufe, z.B. zwischen halber Maximalhärte, dreiviertel Maximalhärte oder Maximalhärte, aus der ersten Benutzereingabe nicht eindeutig hervor. In der Folge kann durch eine zweite Benutzereingabe lediglich eine Fahrwerks-Härtestufe der spezifischen, individuellen Benutzereingabe ein Fahrwerks-Härtewert zugeordnet werden. Der zugehörige Zuordnungsbefehl, zur Verknüpfung der unspezifischen ersten Benutzereingabe mit der Einstellung der benutzerindividuellen Fahrwerks-Härtestufe, kann in dem Speichermedium, als zusätzliche Dateninformation bzw. Zuordnungshilfe, für die Zuordnung zu wenigstens einem Stellbefehl einschließlich des einzustellenden Parameters hinterlegt werden. Bei nachfolgenden ersten Benutzereingaben derselben Art ist einzig die Fahrwerks-Härtestufe anhand des gespeicherten Zuordnungsbefehls durch die Steuereinheit direkt einstellbar. As a further example, it is possible that the user would like to set a sportier driving style for a vehicle via the voice control. On the one hand, it is unclear for the control unit which dynamic properties of the vehicle, such as engine power, chassis, steering, etc., are to be changed. On the other hand, the specific chassis hardness level for the control unit, for example between half the maximum hardness, three quarters of the maximum hardness or the maximum hardness, is not clearly evident from the first user input. As a result, a second user input can only assign a chassis hardness level to the specific, individual user input and a chassis hardness value. The associated assignment command for Linking the unspecific first user input with the setting of the user-specific chassis hardness level can be stored in the storage medium as additional data information or assignment aid for the assignment to at least one control command including the parameter to be set. In the case of subsequent first user entries of the same type, only the chassis hardness level can be set directly by the control unit using the stored assignment command.
Als ein diskreter Wert kann beispielsweise eine Lufttemperatur im Fahrzeuginnenraum, eine Fahrwerks-Härtestufe, eine Motorleistungskennlinien- Auswahl unter mehreren vorgegebenen Motorleistungskennlinien oder dergleichen verstanden werden. Ferner können als diskrete Werte insbesondere auch Einstellungen zwischen 0 und 100% verstanden werden, wie beispielsweise die Innenraumhelligkeit, die Helligkeit von Scheinwerfen, die maximal abrufbare Motorleistung, unabhängig von diskreten Motorleistungskennlinien, oder dergleichen. As a discrete value, for example, an air temperature in the vehicle interior, a chassis hardness level, an engine power characteristic selection from a plurality of predetermined engine power characteristics or the like can be understood. Furthermore, settings between 0 and 100% can also be understood as discrete values, such as, for example, the interior brightness, the brightness of headlights, the maximum available engine power, regardless of discrete engine power characteristics, or the like.
Als ein zusätzliches Beispiel kann die Einstellung der Innenraumbeleuchtung gemäß der ersten Benutzereingabe als „taghell" vom Benutzer gefordert werden. As an additional example, the setting of the interior lighting according to the first user input can be requested by the user as "bright as day".
Die Steuereinheit bestimmt einen Ähnlichkeitswert zwischen der ersten Benutzereingabe zur Einstellung der Innenraumbeleuchtung auf „taghell" und den vorhandenen Stellbefehlen zur Einstellung eines Parameterwertes sowie gegebenenfalls bereits gespeicherten Zuordnungsbefehlen. Ist keine Ähnlichkeit oder nur eine geringe Ähnlichkeit, unterhalb eines vordefinierbaren Ähnlichkeits- Schwellwertes, ermittelbar, kann ein Hinweis der fehlenden Zuordbarkeit an den Benutzer erfolgen. The control unit determines a similarity value between the first user input for setting the interior lighting to "bright as day" and the existing setting commands for setting a parameter value and possibly already stored assignment commands the user will be notified of the lack of assignability.
Anhand einer darauffolgenden zweiten Benutzereingabe kann der unspezifischen ersten Benutzereingabe „taghell" dann ein Beleuchtungswert von 70% der maximalen Helligkeit zugeordnet werden. Der zugehörige Zuordnungsbefehl kann in Zusammenhang mit dem Stellbefehl zum Einschalten der Innenraumbeleuchtung auf 70% in dem Speichermedium hinterlegt werden. On the basis of a subsequent second user input, the unspecific first user input "bright as day" can then be assigned a lighting value of 70% of the maximum brightness.
Indem anhand einer zweiten Benutzereingabe ein Zuordnungsbefehl, im Sinne einer Zusatzinformation bzw. einer Zusatzdatenbasis, bereitgestellt wird, kann in der Speichereinheit einer unspezifischen ersten Benutzereingabe ein individueller Parameterwert, bzw. die Einstellung eines solchen individuellen Parameterwertes, zugeordnet werden und bei nachfolgenden Aufrufen im Sinne der selbigen ersten Benutzereingabe direkt abgerufen bzw. umgesetzt werden. By providing an assignment command in the sense of additional information or an additional database on the basis of a second user input, an individual parameter value or the setting of such an individual parameter value can be made in the memory unit of an unspecific first user input. can be assigned and are called up or implemented directly on subsequent calls in the sense of the same first user input.
Auf vorteilhafte Weise ist eine Sprachsteuerung für einen Benutzer individualisierbar, sodass unspezifische Benutzereingaben anhand von hinterlegbaren Zuordnungsbefehlen durch die Steuereinheit umsetzbar werden. Voice control can advantageously be individualized for a user so that unspecific user inputs can be implemented by the control unit on the basis of assignable commands that can be stored.
Gemäß einer bevorzugten Ausführungsform ist vorgesehen, dass das Bestimmen des Ähnlichkeitswertes, insbesondere durch Einsatz eines neuronalen Netzes, unter Anwendung einer Cluster-Bildung und/oder einem Bilden einer Rangfolge zwischen wenigstens einem Teil der auf dem Speichermedium gespeicherten Stellbefehlen und/oder Zuordnungsbefehlen erfolgt. According to a preferred embodiment it is provided that the determination of the similarity value, in particular by using a neural network, takes place using a cluster formation and / or a ranking between at least some of the control commands and / or assignment commands stored on the storage medium.
Im Falle einer Cluster-Bildung ist vorgesehen, dass die verfügbaren, einbeziehbaren Stellbefehle und/oder Zuordnungsbefehle auf Basis der zur Verfügung stehenden Informationen gemäß der ersten Benutzereingabe unterteilt und in diesem Sinne geclustert werden. Auf diese Weise kann mittels dem Clustern im Rahmen der Ähnlichkeitswert-Bestimmung, in einem oder mehreren Schritten, ein einzelner Stellbefehl zum Verändern eines Parameterwertes einer Vorrichtung und/oder eines Aktuators auf effiziente Weise ermittelbar sein. In the case of a cluster formation, provision is made for the available control commands and / or assignment commands that can be included to be subdivided on the basis of the information available according to the first user input and, in this sense, clustered. In this way, an individual setting command for changing a parameter value of a device and / or an actuator can be determined in an efficient manner by means of the clustering in the context of the similarity value determination, in one or more steps.
Das vorzugsweise anzuwendende neuronale Netz kann eine oder mehrere Stufen bzw. Ebenen im Rahmen des Bestimmens des Ähnlichkeitswertes durchlaufen und beispielsweise mehrere Cluster-Schritte durchführen, um die als geeignet erscheinenden Stellbefehle schrittweise zu reduzieren und die Auswahl auf diese Weise, im Lichte eines stetig zunehmenden Ähnlichkeitswertes, schrittweise zu präzisieren. The neural network to be preferably used can run through one or more stages or levels in the context of determining the similarity value and, for example, carry out several cluster steps in order to gradually reduce the setting commands that appear suitable and the selection in this way, in the light of a steadily increasing similarity value to be more precise step by step.
Des Weiteren ist es möglich, dass insbesondere anhand des neuronalen Netzes eine Rangfolgen-Bildung mi Rahmen der Ähnlichkeitswert-Bestimmung zwischen den gespeicherten Stellbefehlen und/oder Zuordnungsbefehlen ausgeführt wird, um die erste Benutzereingabe einem auszuführenden Stellbefehl zuzuordnen. Die gespeicherten Stell- und/oder Zuordnungsbefehle können beispielsweise anhand von benutzerspezifischen Präferenzen, im Sinne von Benutzerinformationswerten, in einer Rangfolge geordnet werden. Furthermore, it is possible, in particular using the neural network, to create a ranking within the framework of determining the similarity value between the stored setting commands and / or assignment commands in order to assign the first user input to a setting command to be executed. The stored setting and / or assignment commands can be arranged in a ranking order, for example, on the basis of user-specific preferences, in the sense of user information values.
Darüber hinaus ist es möglich, eine Cluster-Bildung mit einer Rangfolgen-Bildung zu kombinieren. So können im Lichte der ersten Benutzereingabe sämtliche gespeicherten Stellbefehle und/oder Zuordnungsbefehle in einem Schritt geclustert werden, um abwegige Stell- und/oder Zuordnungsbefehle auszuschließen. It is also possible to combine clustering with ranking. In the light of the first user input, all stored positioning commands and / or assignment commands are clustered in one step in order to exclude erroneous positioning and / or assignment commands.
Sofern also die erste Benutzereingabe zum Gegenstand hat, dass die Sichtbedingungen in der Dunkeleinheit zu schlecht sind, können Stell- und/oder Zuordnungsbefehle, die beispielsweise auf die Klimatisierung des Fahrzeuginnenraums oder die Fahrdynamik des Fahrzeuges gerichtet sind, anhand der Cluster-Bildung ausgeschlossen werden. If the object of the first user input is that the visibility conditions in the dark unit are too poor, setting and / or assignment commands that are directed, for example, to the air conditioning of the vehicle interior or the driving dynamics of the vehicle, can be excluded on the basis of the cluster formation.
In einem weiteren Schritt kann eine Rangfolgen-Bildung zwischen den als relevant geclusterten Stell- und/oder Zuordnungsbefehlen erfolgen. So ist es beispielsweise möglich, im Lichte der ersten Benutzereingabe bezüglich der Sichtbedingungen in der Dunkelheit die Scheinwerfer-Einstellung zu priorisieren, während die Innenraumbeleuchtung eine nachgeordnete Rangfolgen-Position erhält. In a further step, a ranking can be established between the setting and / or assignment commands clustered as relevant. For example, in the light of the first user input with regard to the visibility conditions in the dark, it is possible to prioritize the headlight setting, while the interior lighting is given a subordinate ranking position.
Anhand der Cluster-Bildung und/oder der Rangfolgen-Bildung der Stellbefehle und/oder Zuordnungsbefehle ist eine effiziente Verarbeitung der ersten Benutzereingaben im Sinne des Bestimmens von Ähnlichkeitswerten zum Identifizieren wenigstens eines Stell- und/oder Zuordnungsbefehls mit einem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators möglich. Based on the cluster formation and / or the ranking of the setting commands and / or assignment commands, efficient processing of the first user inputs in the sense of determining similarity values for identifying at least one setting and / or assignment command with a parameter value to be set of a device and / or an actuator possible.
In diesem Kontext kann unter dem Bestimmen eines Ähnlichkeitswertes insbesondere auch eine statistische bzw. probabilistische Analyse verstanden werden, wobei die größte Übereinstimmung bzw. Ähnlichkeit zwischen der ersten Benutzereingabe und dem aus der Mehrzahl von Stellbefehlen zu identifizierenden Stellbefehl ermittelt wird. In this context, determining a similarity value can in particular also be understood as a statistical or probabilistic analysis, the greatest correspondence or similarity between the first user input and the control command to be identified from the plurality of control commands being determined.
Für die bevorzugte Verwendung eines neuronalen Netzes steht hierbei eine Datengrundlage bereit, die sich insbesondere aus bekannten Zuordnungsbefehlen, z.B. in Form von eindeutigen diskreten Zuordnungen zu Stellbefehlen oder in Form von Datensätzen zur Identifizierung von Präferenzen und Eigenschaften diverser Benutzer, zusammensetzen kann. For the preferred use of a neural network, a database is available that can be composed in particular of known assignment commands, e.g. in the form of unambiguous discrete assignments to control commands or in the form of data records to identify the preferences and properties of various users.
In einer bevorzugten Ausführungsform weist das Verfahren die Schritte auf: - Bereitstellen wenigstens eines Benutzerinformations-Wertes des Benutzers in dem Speichermedium; In a preferred embodiment, the method has the steps: - providing at least one user information value of the user in the storage medium;
- Bestimmen des Ähnlichkeitswertes unter Berücksichtigung des wenigstens einen Benutzerinformations-Wertes, wobei das Clustern von und/oder das Bilden einer Rangfolge zwischen wenigstens zwei Stellbefehlen, insbesondere zweier einzustellender, diskreter Parameterwerte, aus der Mehrzahl von Stellbefehlen und/oder zwischen wenigstens zwei Zuordnungsbefehlen aus der Mehrzahl von Zuordnungsbefehlen in Abhängigkeit von dem wenigstens einen Benutzerinformations-Wert durch die Steuereinheit erfolgt. - Determination of the similarity value taking into account the at least one user information value, the clustering of and / or the formation of a ranking between at least two setting commands, in particular two discrete parameter values to be set, from the plurality of setting commands and / or between at least two assignment commands from the A plurality of assignment commands takes place as a function of the at least one user information value by the control unit.
Als ein Benutzerinformations-Wert kann beispielsweise das Alter des Benutzers, das Geschlecht, das Fahrzeugmodell, die benutzerspezifische Fahrweise, eine Sehstärke bzw. eine Sehschwäche des Benutzers oder dergleichen in dem Speichermedium hinterlegt sein. As a user information value, for example, the age of the user, the gender, the vehicle model, the user-specific driving style, a visual acuity or a visual impairment of the user or the like can be stored in the storage medium.
Indem im Rahmen des Bestimmens des Ähnlichkeitswertes derartige benutzerspezifische Informationen für eine Auswahl von in Frage kommende Stellbefehl berücksichtigt werden, kann eine vereinfachte und effiziente Konfiguration bzw. Eingrenzung im Kontext der ersten Benutzereingabe erfolgen. Insbesondere kann die Steuereinheit zur Zuordnung der ersten Benutzereingabe zu einem konkreten Wert bzw. Wertebereich eine Vorauswahl treffen und somit den finalen Zuordnungsprozess beschleunigen bzw. effizienter gestalten. Since such user-specific information is taken into account for a selection of relevant control commands in the context of determining the similarity value, a simplified and efficient configuration or limitation can take place in the context of the first user input. In particular, the control unit can make a preselection for assigning the first user input to a specific value or value range and thus accelerate or make the final assignment process more efficient.
Gemäß einer Ausführungsform weist das Verfahren den weiteren Schritt auf: According to one embodiment, the method has the further step:
- Vorverarbeiten der wenigstens einen ersten Benutzereingabe durch die Steuereinheit, insbesondere anhand einer Wort- und/oder Satzeinbettungsanalyse wie BERT, ULMfit und/oder ELMo. - Pre-processing of the at least one first user input by the control unit, in particular on the basis of a word and / or sentence embedding analysis such as BERT, ULMfit and / or ELMo.
Indem eine (semantische) Vorverarbeitung der ersten Benutzereingabe im Sinne eines „word embeddings" oder „sentence embeddings" vorgesehen sein kann, kann die Zuordnung der ersten Benutzereingabe zu einem auszuführenden Stellbefehl mit einem einzustellenden Parameterwert, oder zu einem bereits hinterlegten Zuordnungsbefehl, beschleunigt bzw. optimiert werden, insbesondere beschleunigt bzw. optimiert werden mittels eines semantischen Gliederns zum Verringern der Anzahl der Eingangsdaten für ein Sprachmodell. Since (semantic) preprocessing of the first user input in the sense of a "word embeddings" or "sentence embeddings" can be provided, the assignment of the first user input to a setting command to be executed with a parameter value to be set, or to an assignment command that has already been stored, can be accelerated or be optimized, in particular can be accelerated or optimized by means of a semantic structure to reduce the number of input data for a language model.
So kann die durch die Steuereinheit zu verarbeitende Datenmenge anhand der Vorverarbeitung reduziert und der Prozess der Zuordnung der ersten Benutzereingabe zu einem Stellbefehl mit einem einzustellenden Parameterwert effizienter gestaltet werden. The amount of data to be processed by the control unit can thus be reduced on the basis of the preprocessing and the process of assigning the first user input to a setting command with a parameter value to be set can be made more efficient.
Nach einer weiteren Ausführungsform wird die erste Benutzereingabe anhand dem Vorverarbeiten mit einem Zeigerelement verknüpft bzw. auf ein Zeigerelement abgebildet, wobei das Zeigerelement zum Identifizieren wenigstens eines Stellbefehls aus einer Vielzahl von Stellbefehlen, insbesondere wenigstens eines diskreten Speicherbereiches mit wenigstens einem Stellbefehl, und/oder wenigstens eines Zuordnungsbefehls aus einer Vielzahl von Zuordnungsbefehlen in dem Speichermedium dient, insbesondere sodass das Bestimmen eines Ähnlichkeits-Wertes zwischen der ersten Benutzereingabe und wenigstens einem Stellbefehl und/oder einem Zuordnungsbefehl vereinfacht wird. According to a further embodiment, the first user input is linked to a pointer element or mapped onto a pointer element on the basis of the preprocessing, the pointer element for identifying at least one setting command from a plurality of setting commands, in particular at least one discrete memory area with at least one setting command, and / or at least an assignment command from a plurality of assignment commands in the storage medium is used, in particular so that the determination of a similarity value between the first user input and at least one setting command and / or an assignment command is simplified.
Insbesondere kann anhand der Vorverarbeitung die erste Benutzereingabe auf ein Vektor- bzw. Zeigerelement abgebildet werden, zur spezifischen Zuordnung der ersten Benutzereingabe zu einem Stellbefehl und/oder Zuordnungsbefehl innerhalb eines Vektorraums bzw. einem „latent space" mit einer Vielzahl von Stellbefehlen und/oder Zuordnungsbefehlen. In particular, the preprocessing can be used to map the first user input to a vector or pointer element for the specific assignment of the first user input to a control command and / or assignment command within a vector space or a "latent space" with a large number of control commands and / or assignment commands .
Es kann bevorzugter Weise vorgesehen sein, dass anhand einer (semantischen) Vorverarbeitung der ersten Benutzereingabe eine Vorauswahl aus der Gesamtmenge, z.B. in Form eines „latent space", von verfügbaren Stellbefehlen und/oder Zuordnungsbefehlen in der Speichereinheit erfolgt, sodass die Steuereinheit einen effizienten Vergleichs- und/oder Zuordnungsprozess, insbesondere im Sinne des Bestimmens eines Ähnlichkeitswertes, für die erste Benutzereingabe ausführen kann. Auf diese Weise können semantische Vergleiche zwischen der ersten Benutzereingabe und insbesondere den gespeicherten Stellbefehlen herangezogen werden, um eine Eingrenzung insbesondere der verfügbaren Stellbefehle im Vorlauf zu der Bestimmung des Ähnlichkeitswertes vorzunehmen. It can preferably be provided that a (semantic) preprocessing of the first user input is used to make a preselection from the total amount, for example in the form of a "latent space", of available setting commands and / or assignment commands in the memory unit, so that the control unit makes an efficient comparison - and / or assignment process, in particular in the sense of determining a similarity value, can perform for the first user input. In this way, semantic comparisons between the first user input and in particular the stored control commands can be used in order to narrow down, in particular, the available control commands in advance of the Determine the similarity value.
In einem nebengeordneten Aspekt der Erfindung ist ein computerlesbares Speichermedium vorgesehen, insbesondere zum Zugriff durch eine Steuereinheit, vorzugsweise der Steuereinheit eines Fahrzeuges, das Instruktionen enthält mindestens einen Prozessor dazu zu veranlassen ein erfindungsgemäßes Verfahren zu implementieren, wenn die Instruktionen durch den mindestens einen Prozessor ausgeführt werden. In a secondary aspect of the invention, a computer-readable storage medium is provided, in particular for access by a control unit, preferably the control unit of a vehicle that contains instructions to cause at least one processor to implement a method according to the invention when the instructions are executed by the at least one processor.
Insbesondere können die Instruktionen zumindest teilweise auf einem oder mehreren verteilt angeordneten Prozessoren ausführbar sein, insbesondere einem oder mehreren Servern und den Prozessoren wenigstens zweier Fahrzeuge, insbesondere den Prozessoren der Steuereinheiten wenigstens zweier Fahrzeuge. In particular, the instructions can be at least partially executable on one or more processors arranged in a distributed manner, in particular one or more servers and the processors of at least two vehicles, in particular the processors of the control units of at least two vehicles.
Nach einem weiteren nebengeordneten Aspekt der Erfindung ist ein System zur Durchführung eines erfindungsgemäßen Verfahrens vorgesehen, mit wenigstens einem ersten Fahrzeug, welches eine Steuereinheit und wenigstens ein der Steuereinheit zugeordnetes Speichermedium aufweist. According to a further secondary aspect of the invention, a system for carrying out a method according to the invention is provided, with at least one first vehicle which has a control unit and at least one storage medium assigned to the control unit.
Gemäß einer bevorzugten Ausführungsform weist das wenigstens eine der Steuereinheit zugeordnete Speichermedium eine Mehrzahl diskreter Speicherbereiche auf, in denen unterschiedliche Stellbefehle und/oder Zuordnungsbefehle unabhängig voneinander speicherbar und lesbar sind. According to a preferred embodiment, the at least one storage medium assigned to the control unit has a plurality of discrete storage areas in which different setting commands and / or assignment commands can be stored and read independently of one another.
Somit können einzelne Stellbefehle und/oder Zuordnungsbefehle durch die Steuereinheit abgerufen werden und erste Benutzereingaben mit Stellbefehlen zum Verändern von Parameterwerten einer Vorrichtung und/oder eines Aktuators verknüpft werden. Individual setting commands and / or assignment commands can thus be called up by the control unit and first user inputs can be linked to setting commands for changing parameter values of a device and / or an actuator.
In einer Ausführungsform ist das der Steuereinheit zugeordnete Speichermedium als ein lokales Speichermedium des Fahrzeugs und/oder als ein zentraler Server ausgebildet. In one embodiment, the storage medium assigned to the control unit is designed as a local storage medium of the vehicle and / or as a central server.
So können Stellbefehle und Zuordnungsbefehle unmittelbar in einem Fahrzeug lokal gespeichert sein. Es ist zu jedem Zeitpunkt ein schneller, direkter Zugriff auf Zuordnungen der ersten Benutzereingaben durch die ausführende Steuereinheit möglich. Control commands and assignment commands can be stored locally in a vehicle directly. Fast, direct access to assignments of the first user inputs by the executing control unit is possible at any time.
Alternativ oder ergänzend hierzu können erste Benutzereingaben bzw. As an alternative or in addition to this, first user inputs or
Stellbefehle bzw. Zuordnungsbefehle auf einem zentralen Server gespeichert sein, der vorzugsweise zum Empfangen und Senden von Daten ausgebildet ist und mit der wenigstens einen lokalen Steuereinheit bzw. dem wenigstens einen Fahrzeug einschließlich der lokalen Steuereinheit in einer (daten-)kommunikativen Verbindung zur Datenübertragung steht. Adjustment commands or assignment commands can be stored on a central server, which is preferably designed to receive and send data, and with the at least one local control unit or the at least one vehicle including the local control unit is in a (data) communicative connection for data transmission.
So können beispielsweise bereits zugeordnete erste Benutzereingaben insbesondere zwischen mehreren Fahrzeugen ausgetauscht werden. Es ist insbesondere ein implizites Lernen über verschiedene Benutzergruppen hinweg, zum Beispiel in Abhängigkeit Benutzerinformations-Werte wie dem Alter des Benutzers, des Fahrzeugtyps oder dergleichen, möglich. For example, first user inputs that have already been assigned can be exchanged, in particular between several vehicles. In particular, implicit learning across different user groups is possible, for example as a function of user information values such as the age of the user, the vehicle type or the like.
In einer weiteren bevorzugten Ausführungsform ist vorgesehen, dass die Steuereinheit derart in (daten-)kommunikativer Verbindung mit dem zentralen Server, als wenigstens einem Teil des Speichermediums steht, dass eine Zuordbarkeit anhand des Bestimmens eines Ähnlichkeitswertes zwischen der ersten Benutzereingabe und wenigstens einem auf dem zentralen Server gespeicherten Zuordnungsbefehl und/oder Stellbefehl ermittelbar ist. In a further preferred embodiment it is provided that the control unit is in (data) communicative connection with the central server, as at least part of the storage medium, in such a way that it can be assigned based on the determination of a similarity value between the first user input and at least one on the central server Server stored assignment command and / or control command can be determined.
Zuordnungen von ersten Benutzereingaben zu Stellbefehlen mit Parameterwerten können über den zentralen Server fahrzeug- und benutzerübergreifend geteilt bzw. ausgetauscht werden, insbesondere zwischen Benutzern mit vergleichbaren Benutzerinformations-Werten. Assignments of first user inputs to control commands with parameter values can be shared or exchanged across vehicles and users via the central server, in particular between users with comparable user information values.
Im Folgenden wird die vorliegende Erfindung anhand der beigefügten Zeichnung näher im Detail erläutert. The present invention is explained in more detail below with reference to the accompanying drawing.
Es zeigt schematisch: It shows schematically:
Fig. 1 ein Flussdiagramm betreffend eine Individualisierung einer1 shows a flow chart relating to an individualization of a
Sprachsteuerung, ausgeführt durch eine Steuereinheit. Voice control carried out by a control unit.
In Fig. 1 ist ein Flussdiagramm bezüglich des möglichen Ablaufs einer Individualisierung einer Sprachsteuerung gezeigt. 1 shows a flow chart relating to the possible sequence of individualization of a voice control.
In einem ersten Schritt erfolgt ein Empfangen 10 wenigstens einer ersten Benutzereingabe von einem Benutzer zum Verändern wenigstens eines Parameterwertes einer Vorrichtung und/oder eines Aktuators. Vorzugsweise kann die erste Benutzereingabe als eine akustische Benutzereingabe vorgesehen sein, im Sinne einer Spracheingabe zum Steuern der Steuereinheit. In einem zweiten Schritt ist ein Bestimmen 20 eines Ähnlichkeitswertes zwischen der ersten Benutzereingabe und wenigstens einem Zuordnungsbefehl und/oder wenigstens einem der Stellbefehle als durch die Steuereinheit auszuführender Stellbefehl vorgesehen. In a first step, at least one first user input is received from a user for changing at least one parameter value of a device and / or an actuator. The first user input can preferably be provided as an acoustic user input, in the sense of a voice input for controlling the control unit. In a second step, a similarity value is determined between the first user input and at least one assignment command and / or at least one of the setting commands as a setting command to be executed by the control unit.
Vorzugsweise erfolgt lediglich ein Identifizieren eines einzustellenden diskreten Parameterwertes einer Vorrichtung und/oder eines Aktuators. Alternativ kann ein Identifizieren eines Befehls zum Ändern eines Parameterwertes und des einzustellenden diskreten Parameterwertes erfolgen. Preferably, only a discrete parameter value to be set of a device and / or an actuator is identified. Alternatively, a command for changing a parameter value and the discrete parameter value to be set can be identified.
Insbesondere können mehrere Zuordnungsbefehle als eine Liste von Zuordnungsbefehlen in dem Speichermedium hinterlegt sein. In particular, several assignment commands can be stored in the storage medium as a list of assignment commands.
Bevorzugter Weise kann zum Bestimmen des Ähnlichkeitswertes 20 ein neuronales Netz angewandt werden. Vorzugsweise kann eine Cluster-Bildung und/oder eine Rangfolgen-Bildung erfolgen, um einen optimierten Zuordnungsprozess, im Kontext der Ähnlichkeitswert-Bestimmung, der ersten Benutzereingabe zu wenigstens einem Stellbefehl und/oder Zuordnungsbefehl aus der Vielzahl von Stell- und/oder Zuordnungsbefehlen zu ermöglichen. A neural network can preferably be used to determine the similarity value 20. A cluster formation and / or a ranking formation can preferably take place in order to enable an optimized assignment process, in the context of determining the similarity value, of the first user input for at least one setting command and / or assignment command from the multitude of setting and / or assignment commands .
Im Sinne der Cluster-Bildung können die gespeicherten Stell- und/oder Zuordnungsbefehle derart geordnet werden, dass im Lichte der ersten Benutzereingabe relevante Stellbefehle gruppiert werden. Im Sine einer Rangfolgen-Bildung können Stell- und/oder Zuordnungsbefehle nach ihrer Priorität geordnet werden. In terms of cluster formation, the stored setting and / or assignment commands can be arranged in such a way that relevant setting commands are grouped in the light of the first user input. As part of the formation of a ranking, control and / or assignment commands can be sorted according to their priority.
Besonders bevorzugter Weise kann anhand einer kombinierten Cluster- und Rangfolgen-Bildung durch das neuronale Netz die Effizienz der Bestimmung des Ähnlichkeitswertes zum Identifizieren eines Stellbefehls und eines einzustellenden Parameterwertes optimiert werden. In a particularly preferred manner, the efficiency of the determination of the similarity value for identifying a setting command and a parameter value to be set can be optimized on the basis of a combined formation of clusters and rankings by the neural network.
In einem dritten Schritt ist ein visuelles und/oder akustisches Ausgeben 30b einer fehlenden Zuordbarkeit vorgesehen, wenn der wenigstens eine bestimmte Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem wenigstens einen Zuordnungsbefehl und/oder dem wenigstens einen Stellbefehl unterhalb eines vorgebbaren Ähnlichkeits-Schwellwertes liegt. Insbesondere kann eine fehlende Zuordbarkeit vorliegen, sofern die unspezifische erste Benutzereingabe keinen Rückschluss auf einen einzustellenden diskreten Parameterwert durch die Steuereinheit zulässt. In a third step, a visual and / or acoustic output 30b of a lack of assignability is provided if the at least one specific similarity value between the first user input and the at least one assignment command and / or the at least one setting command is below a predeterminable similarity threshold value. In particular, there may be a lack of assignability if the unspecific first user input does not allow the control unit to draw any conclusions about a discrete parameter value to be set.
Alternativ kann in dem dritten Schritt vorgesehen sein, sofern der bestimmte Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem wenigstens einen Stellbefehl und/oder wenigstens einem Zuordnungsbefehl gleich eines vorgebbaren Ähnlichkeits-Schwellwertes ist oder oberhalb des vorgebbaren Ähnlichkeits-Schwellwertes liegt, dass der wenigstens eine Stellbefehl ausgewählt und ausgeführt (30a) wird. In diesem Falle ist keine weitergehende Individualisierung der Sprachsteuerung, ausgeführt durch die Steuereinheit, notwendig. Alternatively, it can be provided in the third step, provided that the specific similarity value between the first user input and the at least one control command and / or at least one assignment command is equal to a predeterminable similarity threshold value or is above the predeterminable similarity threshold value, that the at least one control command is selected and executed (30a). In this case, no further individualization of the voice control carried out by the control unit is necessary.
In einem nächsten Schritt erfolgt ein Empfangen 40 einer zweiten Benutzereingabe mit einem Zuordnungsbefehl zur Auswahl wenigstens eines auszuführenden Stellbefehls mit einem diskreten Wert als einem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators. In a next step, a second user input is received 40 with an assignment command for selecting at least one setting command to be executed with a discrete value as a parameter value to be set for a device and / or an actuator.
Anhand des Zuordnungsbefehls gemäß der zweiten Benutzereingabe kann auf Basis der ersten Benutzereingabe ein einzustellender diskreter Parameterwert zuordbar bzw. verknüpfbar sein oder ein Befehl zum Verändern eines Parameters in Kombination mit einem einzustellenden diskreten Parameterwert zuordbar bzw. verknüpfbar sein. Using the assignment command according to the second user input, a discrete parameter value to be set can be assigned or linked or a command for changing a parameter in combination with a discrete parameter value to be set can be assigned or linked on the basis of the first user input.
In einem weiteren Schritt erfolgt ein Speichern 50 des Zuordnungsbefehls gemäß der zweiten Benutzereingabe in dem Speichermedium, insbesondere sodass die erste Benutzereingabe dem auszuführenden Stellbefehl mit dem diskreten Wert als dem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators zuordbar ist. In a further step, the assignment command is stored 50 in accordance with the second user input in the storage medium, in particular so that the first user input can be assigned to the setting command to be executed with the discrete value as the parameter value to be set for a device and / or an actuator.
Bei erneutem Auftreten der ersten Benutzereingabe derselben Art, kann der bereits im Speichermedium hinterlegte Zuordnungsbefehl, als eine direkte Verknüpfung oder im Sinne einer ergänzenden Datengrundlage, genutzt werden, um eine Zuordnung der ersten Benutzereingabe zu dem zugehörigen Stellbefehl mit einzustellendem Parameterwert zu ermitteln. Insbesondere ist ein hinreichender Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem bereits hinterlegten Zuordnungsbefehl bestimmbar, um die Zuordnung zu dem Stellbefehl mit diskretem Parameterwert zu ermitteln. Beispielsweise kann vorgesehen sein, dass die erste Benutzereingabe 10 die unspezifische, dem Alltagsgebrauch entsprechende Formulierung „Ich sehe nichts" zum Gegenstand hat. Der Benutzer möchte hiermit ausdrücken, dass die Scheinwerfer eines Fahrzeuges zu wenig Licht aussenden und auf die maximale Hel ligkeit, also 100% Leuchtstärke, eingestellt werden sollen. If the first user input of the same type occurs again, the assignment command already stored in the storage medium can be used as a direct link or in the sense of a supplementary data basis in order to determine an assignment of the first user input to the associated setting command with the parameter value to be set. In particular, a sufficient similarity value between the first user input and the already stored assignment command can be determined in order to determine the assignment to the setting command with a discrete parameter value. For example, it can be provided that the first user input 10 has the unspecific wording "I see nothing" corresponding to everyday use as its object % Luminosity to be set.
Der ermittelte Ähnlichkeitswert 20 zwischen dieser ersten Benutzereingabe und den vorhandenen Stellbefehlen und/oder Zuordnungsbefehlen in dem Speichermedium liegt jedoch unterhalb eines vorgegebenen Ähnlichkeits- Schwellwertes. Somit ist keine Zuordnung dieser ersten Benutzereingabe zu einem Stellbefehl / Zuordnungsbefehl möglich, die die Erhöhung der Schweinwerfer-Helligkeit auf 100%-Leuchtstärke zum Gegenstand haben. Insbesondere kann die Steuereinheit keinen entsprechenden Stellbefehl in dem Speichermedium auffinden, der zur Umsetzung der ersten Benutzereingabe geeignet ist. The determined similarity value 20 between this first user input and the existing control commands and / or assignment commands in the storage medium, however, lies below a predetermined similarity threshold value. It is therefore not possible to assign this first user input to an adjustment command / assignment command that has the object of increasing the headlight brightness to 100% luminosity. In particular, the control unit cannot find a corresponding setting command in the storage medium that is suitable for implementing the first user input.
Die Steuereinheit kann dem Benutzer eine visuelle und/oder akustische Nachricht übermitteln 30b, die auf die mangelnde Zuordbarkeit hinweist. Es kann eine zweite Benutzereingabe durch die Steuereinheit im Rahmen eines Sprachdialogs der Sprachsteuerung von dem Benutzer abgefragt werden. The control unit can transmit a visual and / or acoustic message 30b to the user, which indicates the lack of assignability. A second user input by the control unit can be requested from the user in the context of a voice dialog of the voice control.
Daraufhin kann die Steuereinheit eine zweite Benutzereingabe von dem Benutzer empfangen 40, wobei die zweite Benutzereingabe aussagt, insbesondere explizit ausdrückt, dass die Scheinwerfer auf 100% Leuchtstärke eingestellt werden sollen. The control unit can then receive 40 a second user input from the user, the second user input indicating, in particular explicitly expressing, that the headlights should be set to 100% luminosity.
Die Steuereinheit kann anhand der empfangenen zweiten Benutzereingabe 40 eine eindeutige Zuordnung der ersten Benutzereingabe zu einem Stellbefehl mit einem einzustellenden Parameter, nämlich der maximalen Leuchtstärke der Scheinwerfer, vornehmen. Insbesondere kann auf Basis der zweiten Benutzereingabe ein Zuordnungsbefehl in dem Speichermedium hinterlegt bzw. gespeichert 50 werden, der, im Sinne einer ergänzenden Datengrundlage, die Zuordnung der ersten Benutzereingabe zu dem zugehörigen Stellbefehl mit dem einzustellenden diskreten Parameterwert erlaubt. On the basis of the received second user input 40, the control unit can make a clear assignment of the first user input to an actuating command with a parameter to be set, namely the maximum luminosity of the headlights. In particular, on the basis of the second user input, an assignment command can be deposited or stored in the storage medium, which, in the sense of a supplementary data basis, allows the assignment of the first user input to the associated setting command with the discrete parameter value to be set.
So kann bei einer erneuten ersten Benutzereingabe „Ich sehe nichts" auf die zuvor erfolgte Zuordnung mittels dem gespeicherten Zuordnungsbefehl 50 durch die Steuereinheit zurückgegriffen und unmittelbar die maximale Scheinwerfer- Helligkeit eingestellt werden. Thus, when a new first user input “I see nothing”, the previously made assignment can be looked up by means of the stored assignment command 50 the control unit is used and the maximum headlight brightness can be set immediately.
Ein weiteres Beispiel kann die erste Benutzereingabe „Ich möchte sportlicher fahren" betreffen. Es ist für die Steuereinheit aufgrund eines unzureichenden Ähnlichkeitswertes nicht zuordbar 20; 30b, wie sportlich das Fahrwerk, die Lenkung und/oder die maximal abrufbare Motorleistung eingestellt werden sollen. Another example can relate to the first user input "I want to drive more sportily". Due to an insufficient similarity value, the control unit cannot assign 20; 30b how sporty the chassis, the steering and / or the maximum available engine power should be set.
Anhand wenigstens einer zweiten Benutzereingabe 40 können diverse Befehle zur Einstellung diskreter Parameterwerte der ersten Benutzereingabe zugeordnet werden. So ist nach individuellen Vorlieben des Benutzers z.B. die Fahrwerks- Härtestufe auf 60 % justierbar, wobei 85 % der Motorleistung und eine maximale Direktheit der Lenkung dieser ersten Benutzereingabe zugeordnet werden sollen. Der wenigstens eine Zuordnungsbefehl, im Sinne dieser zweiten Benutzereingabe, kann in dem Speichermedium hinterlegt 50 werden. Using at least one second user input 40, various commands for setting discrete parameter values can be assigned to the first user input. For example, the chassis hardness level can be adjusted to 60% according to the individual preferences of the user, with 85% of the engine power and maximum directness of the steering being assigned to this first user input. The at least one assignment command, in the sense of this second user input, can be stored 50 in the storage medium.
Sofern durch den Benutzer eine erste Benutzereingabe wie „Ich möchte sportlicher Fahren" oder „Bitte stelle sportlicheres Fahren ein" erfolgt, kann die Steuereinheit einen hinreichenden Ähnlichkeitswert mit dem zuvor hinterlegten Zuordnungsbefehl ermitteln und auf diesen zurückgreifen, um die entsprechenden Parameterwerte des Fahrzeuges, also beispielsweise die Fahrwerks-Härtestufe, die Motorleistung und die Direktheit der Lenkung, zu verändern. If the user makes a first user input such as "I want to drive more sportily" or "Please set more sporty driving", the control unit can determine a sufficient similarity value with the previously stored assignment command and use this to determine the corresponding parameter values of the vehicle, for example to change the hardness of the chassis, the engine power and the directness of the steering.
Erfolgt eine erste Benutzereingabe wie z.B. „Ich möchte das sportlichste Fahren einstellen", kann erneut eine mangelnde Zuordbarkeit 20; 30b festgestellt werden und in der Folge eine weitere zweite Benutzereingabe 40 zum Bestimmen neuer Zuordnungsbefehle durch die Steuereinheit angefordert 30b werden. If a first user input is made such as "I want to set the sportiest driving", a lack of assignability 20; 30b can be determined again and a further second user input 40 for determining new assignment commands can be requested 30b by the control unit.
Zusammenfassend kann anhand der vorliegenden Erfindung eine effiziente Individualisierung einer Sprachsteuerung, ausgeführt durch eine Steuereinheit, ermöglicht werden. Insbesondere sind unspezifische erste Benutzereingaben, anhand der Bestimmung von Ähnlichkeitswerten, bevorzugter Weise unter Anwendung eines neuronalen Netzes, mit diskreten Parameterwerten bzw. mit Stellbefehlen zum Einstellen dieser diskreten Parameterwerte an einer Vorrichtung und/oder einem Aktuator verknüpfbar. In summary, based on the present invention, an efficient individualization of a voice control, carried out by a control unit, can be made possible. In particular, unspecific first user inputs, based on the determination of similarity values, preferably using a neural network, can be linked with discrete parameter values or with setting commands for setting these discrete parameter values on a device and / or an actuator.
Eine Sprachsteuerung kann somit im Sinne alltäglicher bzw. umgangssprachlicher erster Benutzereingaben optimiert und individualisiert werden. Hierzu können ferner individuelle Benutzerinformations-Werte im Sinne einer Vorverarbeitung bzw. Vorauswahl der zur Verfügung stehenden Stellbefehle berücksichtigt werden, um den Prozess des Abgleichs mit vorliegenden Stellbefehlen bzw. Zuordnungsbefehlen zu optimieren. Voice control can thus be optimized and individualized in terms of everyday or colloquial first user inputs. You can do this Furthermore, individual user information values are taken into account in the sense of preprocessing or preselection of the available control commands in order to optimize the process of comparison with existing control commands or assignment commands.
Bezugszeichenliste Empfangen wenigstens einer ersten Benutzereingabe Bestimmen eines Ähnlichkeitswertes a Auswahlen und Ausfuhren des wenigstens einen Stellbefehlsb Visuelles / akustisches Ausgeben einer fehlenden Zuordbarkeit Empfangen einer zweiten Benutzereingabe Speichern des Zuordnungsbefehls LIST OF REFERENCE SYMBOLS Receiving at least one first user input Determining a similarity value a Selecting and executing the at least one control command b Visual / acoustic output of a lack of assignability Receiving a second user input Saving the assignment command

Claims

ANSPRÜCHE EXPECTATIONS
1. Verfahren zum Individualisieren einer Sprachsteuerung zur Ausführung durch eine Steuereinheit, insbesondere durch eine Steuereinheit eines Fahrzeuges, mit einem zugeordneten Speichermedium, welches mindestens einen diskreten Speicherbereich aufweist, in dem wenigstens ein Stellbefehl von einer Mehrzahl von Stellbefehlen zum Verändern eines Parameterwertes einer Vorrichtung und/oder eines Aktuators gespeichert ist und wenigstens ein Zuordnungsbefehl, vorzugsweise eine Liste von Zuordnungsbefehlen, zum Zuordnen einer Benutzereingabe zu dem wenigstens einen Stellbefehl gespeichert ist, wobei das Verfahren die folgenden Schritte aufweist: 1. A method for individualizing a voice control for execution by a control unit, in particular by a control unit of a vehicle, with an assigned storage medium which has at least one discrete memory area in which at least one setting command from a plurality of setting commands for changing a parameter value of a device and / or an actuator is stored and at least one assignment command, preferably a list of assignment commands, is stored for assigning a user input to the at least one setting command, the method having the following steps:
- Empfangen (10) wenigstens einer ersten Benutzereingabe von einem Benutzer zum Verändern wenigstens eines Parameterwertes einer Vorrichtung und/oder eines Aktuators, insbesondere einer ersten akustischen Benutzereingabe zum sprachbasierten Steuern der Steuereinheit; - Receiving (10) at least one first user input from a user for changing at least one parameter value of a device and / or an actuator, in particular a first acoustic user input for voice-based control of the control unit;
- Bestimmen (20) eines Ähnlichkeitswertes, insbesondere durch Einsatz eines neuronalen Netzes, zwischen der ersten Benutzereingabe und wenigstens einem der Stellbefehle, insbesondere identifizieren eines einzustellenden Parameterwertes einer Vorrichtung und/oder eines Aktuators, und/oder zwischen der ersten Benutzereingabe und einem Zuordnungsbefehl, insbesondere aus einer Liste mit einer Mehrzahl von Zuordnungsbefehlen; wobei wenn der bestimmte Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem wenigstens einen Stellbefehl und/oder wenigstens einem Zuordnungsbefehl gleich eines vorgebbaren Ähnlichkeits-Schwellwertes ist oder oberhalb des vorgebbaren Ähnlichkeits- Schwellwertes liegt: - Determination (20) of a similarity value, in particular by using a neural network, between the first user input and at least one of the setting commands, in particular identifying a parameter value to be set of a device and / or an actuator, and / or between the first user input and an assignment command, in particular from a list with a plurality of assignment commands; where if the determined similarity value between the first user input and the at least one setting command and / or at least one assignment command is equal to a predeterminable similarity threshold value or is above the predeterminable similarity threshold value:
Auswählen und Ausfuhren (30a) des wenigstens einen Stellbefehls; und/oder wenn der wenigstens eine bestimmte Ähnlichkeitswert zwischen der ersten Benutzereingabe und dem wenigstens einen Stellbefehl und/oder wenigstens einem Zuordnungsbefehl unterhalb eines vorgebbaren Ähnlichkeits-Schwellwertes liegt, insbesondere wenn ein einzustellender Parameterwert nicht identifizierbar ist: Selecting and executing (30a) the at least one setting command; and or if the at least one specific similarity value between the first user input and the at least one setting command and / or at least one assignment command is below a predeterminable similarity threshold value, in particular if a parameter value to be set cannot be identified:
- Visuelles und/oder akustisches Ausgeben (30b) einer fehlenden Zuordbarkeit; - Visual and / or acoustic output (30b) of a lack of allocability;
- Empfangen (40) einer zweiten Benutzereingabe mit einem Zuordnungsbefehl zur Auswahl wenigstens eines auszuführenden Stellbefehls mit einem diskreten Wert als einem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators; - Receiving (40) a second user input with an assignment command for selecting at least one setting command to be executed with a discrete value as a parameter value to be set for a device and / or an actuator;
- Speichern (50) des Zuordnungsbefehls gemäß der zweiten Benutzereingabe in dem Speichermedium, insbesondere sodass die erste Benutzereingabe dem auszuführenden Stellbefehl mit dem diskreten Wert als dem einzustellenden Parameterwert einer Vorrichtung und/oder eines Aktuators zuordbar ist, insbesondere durch Bestimmen des Ähnlichkeitswertes zuordbar ist. - Storing (50) the assignment command according to the second user input in the storage medium, in particular so that the first user input can be assigned to the setting command to be executed with the discrete value as the parameter value to be set for a device and / or an actuator, in particular by determining the similarity value.
2. Verfahren nach Anspruch 1, d a d u rc h g e ke n nz e i c h n et, d a ss das Bestimmen (20) des Ähnlichkeitswertes, insbesondere durch Einsatz eines neuronalen Netzes, unter Anwendung einer Cluster-Bildung und/oder einem Bilden einer Rangfolge zwischen wenigstens einem Teil der auf dem2. The method according to claim 1, dadu rc hge ke n nz eichn et, that ss determining (20) the similarity value, in particular by using a neural network, using a cluster formation and / or a ranking between at least one part the one on the
Speichermedium gespeicherten Stellbefehle und/oder Zuordnungsbefehle erfolgt. Storage medium stored control commands and / or assignment commands takes place.
3. Verfahren nach Anspruch 2, d a d u rc h g e ke n nze i c h n et, d a ss das Verfahren die Schritte aufweist: 3. The method according to claim 2, d a d u rc h g e ke n nze i c h n et, d a ss the method comprises the steps:
- Bereitstellen wenigstens eines Benutzerinformations-Wertes des Benutzers in dem Speichermedium; - providing at least one user information value of the user in the storage medium;
- Bestimmen des Ähnlichkeitswertes unter Berücksichtigung des wenigstens einen Benutzerinformations-Wertes, wobei das Clustern von und/oder das Bilden einer Rangfolge zwischen wenigstens zwei Stellbefehlen, insbesondere zweier einzustellender, diskreter Parameterwerte, aus der Mehrzahl von Stellbefehlen und/oder zwischen wenigstens zwei Zuordnungsbefehlen aus der Mehrzahl von Zuordnungsbefehlen in Abhängigkeit von dem wenigstens einen Benutzerinformations-Wert durch die Steuereinheit erfolgt. - Determination of the similarity value taking into account the at least one user information value, the clustering of and / or the formation of a ranking between at least two setting commands, in particular two discrete parameter values to be set, from the plurality of setting commands and / or between at least two assignment commands from the plurality of assignment commands depending on the at least one user information value the control unit takes place.
4. Verfahren nach einem der vorhergehenden Ansprüche, d a d u rc h g e ke n nze i c h n et, d a ss das Verfahren den weiteren Schritt aufweist: 4. The method according to any one of the preceding claims, d a d u rc h g e ke n nze i c h n et, d a ss the method has the further step:
- Vorverarbeiten der wenigstens einen ersten Benutzereingabe durch die Steuereinheit, insbesondere anhand einer Wort- und/oder Satzeinbettungsanalyse wie BERT, ULMfit und/oder ELMo. - Pre-processing of the at least one first user input by the control unit, in particular on the basis of a word and / or sentence embedding analysis such as BERT, ULMfit and / or ELMo.
5. Verfahren nach Anspruch 4, d a d u rc h g e ke n nze i c h n et, d a ss die erste Benutzereingabe anhand dem Vorverarbeiten mit einem Zeigerelement verknüpft bzw. auf ein Zeigerelement abgebildet wird, wobei das Zeigerelement zum Identifizieren wenigstens eines Stellbefehls aus einer Vielzahl von Stellbefehlen, insbesondere wenigstens eines diskreten Speicherbereiches mit wenigstens einem Stellbefehl, und/oder wenigstens eines Zuordnungsbefehls aus einer Vielzahl von Zuordnungsbefehlen in dem Speichermedium dient, insbesondere sodass das Bestimmen eines Ähnlichkeits-Wertes zwischen der ersten Benutzereingabe und wenigstens einem Stellbefehl und/oder einem Zuordnungsbefehl vereinfacht wird. 5. The method according to claim 4, dadu rc hge ke n nze ichn et, that ss the first user input based on the preprocessing is linked to a pointer element or is mapped onto a pointer element, the pointer element for identifying at least one setting command from a plurality of setting commands, In particular, at least one discrete memory area with at least one setting command and / or at least one assignment command from a plurality of assignment commands in the storage medium is used, in particular so that the determination of a similarity value between the first user input and at least one setting command and / or an assignment command is simplified.
6. Computerlesbares Speichermedium, das Instruktionen enthält mindestens einen Prozessor dazu zu veranlassen ein Verfahren nach einem der vorhergehenden Ansprüche zu implementieren, wenn die Instruktionen durch den mindestens einen Prozessor ausgeführt werden. 6. Computer-readable storage medium containing instructions to cause at least one processor to implement a method according to any one of the preceding claims when the instructions are executed by the at least one processor.
7. System zur Durchführung eines Verfahrens nach einem der Ansprüche 1 bis7. System for performing a method according to any one of claims 1 to
5, mit wenigstens einem ersten Fahrzeug, welches eine Steuereinheit und wenigstens ein der Steuereinheit zugeordnetes Speichermedium aufweist. 5, with at least one first vehicle, which has a control unit and at least one storage medium assigned to the control unit.
8. System nach Anspruch 7, d a d u rc h g e ke n nze i c h n et, d a ss das wenigstens eine der Steuereinheit zugeordnete Speichermedium eine Mehrzahl diskreter Speicherbereiche aufweist, in denen unterschiedliche Stellbefehle und/oder Zuordnungsbefehle unabhängig voneinander speicherbar und lesbar sind. 8. System according to claim 7, d a d u rc h g e ke n nze i c h n et, d a ss the at least one storage medium assigned to the control unit has a plurality of discrete memory areas in which different setting commands and / or assignment commands can be stored and read independently of one another.
9. System nach Anspruch 7 oder 8, d a d u rc h g e ke n nze i c h n et, d a ss das der Steuereinheit zugeordnete Speichermedium als ein lokales Speichermedium des Fahrzeugs und/oder als ein zentraler Server ausgebildet ist. 9. System according to claim 7 or 8, d a d u rc h g e ke n nze i c h n et, d a ss the storage medium assigned to the control unit is designed as a local storage medium of the vehicle and / or as a central server.
10. System nach Anspruch 9, d a d u rc h g e ke n nze i c h n et, d a ss die Steuereinheit derart in (daten-)kommunikativer Verbindung mit dem zentralen Server, als wenigstens einem Teil des Speichermediums steht, dass eine Zuordbarkeit anhand des Bestimmens (20) eines Ähnlichkeitswertes zwischen der ersten Benutzereingabe und wenigstens einem auf dem zentralen Server gespeicherten Zuordnungsbefehl und/oder Stellbefehl ermittelbar ist. 10. System according to claim 9, dadu rc hge ke n nze ichn et, that ss the control unit is in (data) communicative connection with the central server, as at least part of the storage medium, that an assignability based on the determination (20) a similarity value between the first user input and at least one assignment command and / or setting command stored on the central server can be determined.
PCT/EP2021/064846 2020-06-23 2021-06-02 Method for individualizing a voice control, computer-readable storage medium and system WO2021259609A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102020116458.0 2020-06-23
DE102020116458.0A DE102020116458A1 (en) 2020-06-23 2020-06-23 Method for individualizing a voice control, computer-readable storage medium and system

Publications (1)

Publication Number Publication Date
WO2021259609A1 true WO2021259609A1 (en) 2021-12-30

Family

ID=76355478

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2021/064846 WO2021259609A1 (en) 2020-06-23 2021-06-02 Method for individualizing a voice control, computer-readable storage medium and system

Country Status (2)

Country Link
DE (1) DE102020116458A1 (en)
WO (1) WO2021259609A1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070192095A1 (en) * 2005-02-04 2007-08-16 Braho Keith P Methods and systems for adapting a model for a speech recognition system
US20160098992A1 (en) * 2014-10-01 2016-04-07 XBrain, Inc. Voice and Connection Platform

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070192095A1 (en) * 2005-02-04 2007-08-16 Braho Keith P Methods and systems for adapting a model for a speech recognition system
US20160098992A1 (en) * 2014-10-01 2016-04-07 XBrain, Inc. Voice and Connection Platform

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
WENG FULIANG ET AL: "Conversational In-Vehicle Dialog Systems: The past, present, and future", IEEE SIGNAL PROCES SING MAGAZINE, IEEE SERVICE CENTER, PISCATAWAY, NJ, US, vol. 33, no. 6, 1 November 2016 (2016-11-01), pages 49 - 60, XP011633440, ISSN: 1053-5888, [retrieved on 20161104], DOI: 10.1109/MSP.2016.2599201 *

Also Published As

Publication number Publication date
DE102020116458A1 (en) 2021-12-23

Similar Documents

Publication Publication Date Title
EP3652664A1 (en) Method for conducting dialog between human and computer
EP1926081A1 (en) Method for dialogue adaptation and dialogue system for this purpose
DE10051021A1 (en) Access provision method for web server, involves grouping web pages which contain static link addresses in accordance with unchanged web pages
WO2000025299A1 (en) Method and layout for forming classes for a language model based on linguistic classes
DE10131193A1 (en) Age-oriented natural language document search based on histories according to sessions for answering a user's questions in a computer system hits keywords in a selection while performing an evaluation.
DE19914326A1 (en) Procedure for using fractal semantic networks for all types of databank applications to enable fuzzy classifications to be used and much more flexible query procedures to be used than conventional databank structures
EP3335405B1 (en) Method for processing a user input and motor vehicle having a data-processing device
WO2021259609A1 (en) Method for individualizing a voice control, computer-readable storage medium and system
WO2021104608A1 (en) Method for producing an engineering proposal for a device or plant
DE10156945A1 (en) Method for operation of speech recognition dialogue system for provision of telephone information, etc., whereby navigation is improved as a user can jump straight to a point in a dialogue by giving a marker name
EP3576084B1 (en) Efficient dialog design
WO2020193294A1 (en) Method and device for compatibly controlling a device with a new program code
DE102018221712A1 (en) Method for operating an interactive information system for a vehicle, and a vehicle
DE102021129085B3 (en) Method for generating a model for the automated prediction of interactions of a user with a user interface of a motor vehicle, also data processing unit for a motor vehicle and motor vehicle
EP1251491A2 (en) Method for querying database records by speech input
DE10218680A1 (en) Method for operating control of electronic devices and electronic device therefor
DE10143940B4 (en) Method and device for determining relevant objects
DE112019007941T5 (en) Personality-based intelligent personal assistant system
DE102016217191A1 (en) Method for selecting and evaluating a plurality of data records from at least one data source
DE102022128334A1 (en) Device for operating an artificial intelligence for conducting a conversation with a user
DE102021208368A1 (en) Computer-implemented method for developing a product in a networked system and user system for computer-aided development of a product
DE102022213210A1 (en) Method for determining a vehicle domain and a voice recognition system for a vehicle
DE102024000267A1 (en) Method for creating at least one vehicle configuration of a vehicle
EP3989057A1 (en) Adaptive speech assistant operable by a user using a user terminal
DE102013019208A1 (en) Motor vehicle voice control

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21731094

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21731094

Country of ref document: EP

Kind code of ref document: A1