DE102017216513A1

DE102017216513A1 - A method of processing a voice input over which a user specifies a location on an operator terminal, and operating device and motor vehicle

Info

Publication number: DE102017216513A1
Application number: DE102017216513.8A
Authority: DE
Inventors: Andre Eisenmann; Christoph Voigt
Original assignee: Audi AG
Current assignee: Audi AG
Priority date: 2017-09-19
Filing date: 2017-09-19
Publication date: 2018-09-27

Abstract

Die Erfindung betrifft ein Verfahren zum Verarbeiten einer Spracheingabe (13), über welche ein Benutzer eine Ortsangabe (A) an einem Bedienterminal (11) vorgibt, wobei aus zumindest einer Spracherkennungseinrichtung (14) zu der Spracheingabe (13) eine Erkennungsliste (15) empfangen wird, in welcher mehrere, von der zumindest einen Spracherkennungseinrichtung (14) erkannte Ortsangaben (A,B,C) gemäß einer jeweiligen Erkennungskonfidenz (16) geordnet aufgelistet sind. Die Erfindung sieht vor, dass zu jeder erkannten Ortsangabe (A,B,C) jeweils eine Ortsinformation (23) ermittelt wird und in Abhängigkeit von der jeweils ermittelten Ortsinformation (23) ein jeweiliger Korrekturwert (24) für die Ortsangabe (A,B,C) ermittelt wird und die erkannten Ortsangaben (A,B,C) in der Erkennungsliste (18) in Abhängigkeit von den jeweils ermittelten Korrekturwerten (24) umsortiert werden.The invention relates to a method for processing a voice input (13), via which a user specifies a location (A) on an operator terminal (11), wherein from at least one voice recognition device (14) to the voice input (13) receive a recognition list (15) in which a plurality of location indications (A, B, C) recognized by the at least one voice recognition device (14) are listed according to a respective recognition confidence (16). The invention provides that for each recognized location (A, B, C) in each case a location information (23) is determined and depending on the respectively determined location information (23) a respective correction value (24) for the location (A, B, C) is determined and the recognized location information (A, B, C) in the recognition list (18) as a function of the respectively determined correction values (24) are resorted.

Description

Die Erfindung betrifft ein Verfahren zum Aufbereiten oder Verarbeiten einer Spracheingabe, über welche ein Benutzer eine Ortsangabe an einem Bedienterminal vorgibt. Die Ortsangabe kann beispielsweise ein Fahrtziel für eine Navigationsassistenz vorgeben. Zu der Erfindung gehören auch eine Bedienvorrichtung, die über das Terminal die Ortsangabe empfangen möchte, und ein Kraftfahrzeug mit der erfindungsgemäßen Bedienvorrichtung.The invention relates to a method for preparing or processing a voice input, via which a user specifies a location on an operating terminal. The location can specify, for example, a destination for a navigation assistant. The invention also includes an operating device which wishes to receive the location information via the terminal, and a motor vehicle with the operating device according to the invention.

Zum Festlegen eines Fahrtziels kann ein Benutzer eine Ortsangabe per Sprache eingeben oder vorgeben. Zum Empfangen der Spracheingabe kann ein Bedienterminal vorgesehen sein, das beispielsweise in einem mobilen Endgerät, wie zum Beispiel einem Smartphone, oder in einem Kraftfahrzeug bereitgestellt sein kann. Die Spracheingabe kann dann von einer Bedienvorrichtung verarbeitet werden, die beispielsweise ebenfalls in dem mobilen Endgerät oder in dem Kraftfahrzeug bereitgestellt sein kann, oder aber auch als sogenannter Online-Dienst durch einen Server des Internets realisiert sein kann. Die Bedienvorrichtung kann dabei die eigentliche automatische Spracherkennung (ASR - Automatic Speech Recognition) durch einen Online-Spracherkenner durchführen lassen, also einen Server des Internets, welcher das Sprachsignal der Spracheingabe empfängt und zu diesem Sprachsignal als Erkennungsergebnis eine Liste der erkannten Ortsangaben ausgibt. Diese Liste wird im Folgenden als Erkennungsliste bezeichnet. In der Bedienvorrichtung muss dann entschieden werden, in welcher Reihenfolge die Listeneinträge aus der Erkennungsliste, also die erkannten Ortsangaben, dem Benutzer zur Auswahl angeboten werden oder einem anderen Steuergerät zur Verfügung gestellt werden.To set a destination, a user can enter or specify a location by voice. For receiving the voice input, an operator terminal may be provided, which may be provided, for example, in a mobile terminal, such as a smartphone, or in a motor vehicle. The voice input can then be processed by an operating device, which may for example also be provided in the mobile terminal or in the motor vehicle, or may also be implemented as a so-called online service by a server of the Internet. In this case, the operating device can have the actual automatic speech recognition (ASR) performed by an online speech recognizer, ie a server of the Internet, which receives the speech signal of the speech input and outputs a list of the recognized location information as the recognition result for this speech signal. This list is referred to below as a recognition list. It must then be decided in the operating device in which order the list entries from the recognition list, that is to say the recognized location information, are offered to the user for selection or are made available to another control device.

Eine Herausforderung bei heutigen Spracherkennungseinrichtungen für die Eingabe einer Ortsangabe ist das Problem, dass die Ortsangabe nicht nur einen Ort im umgebenden Inland, sondern auch für mehrere Länder unterschiedlicher Sprachen möglich sein soll. Hierdurch ergibt sich bei der Spracherkennung ein sogenannter vergrößerter Suchraum, das heißt die Erkennungsliste kann mehrere mögliche Ortsangaben enthalten, die in unterschiedlichen Ländern oder Regionen sein können. Ein Benutzer ist unter Umständen nicht darauf gefasst, in der Erkennungsliste erkannte Ortsangaben zu finden, die augenscheinlich ohne jeglichen Bezug zu seiner aktuellen Fahrt stehen.A challenge in today's speech recognition devices for entering a location is the problem that the location is not only a location in the surrounding country, but also for several countries of different languages should be possible. This results in the speech recognition a so-called enlarged search space, that is, the recognition list may contain several possible location information that may be in different countries or regions. A user may not be prepared to find recognized locations in the recognition list, which are apparently unrelated to their current journey.

Eine Online-Spracherkennungseinrichtung ist beispielsweise aus der WO 2014/060054 A1 bekannt.An online speech recognition device is for example from WO 2014/060054 A1 known.

Aus der US 2006/0058947 A1 ist bekannt, dass durch eine Spracherkennungseinrichtung zusammen mit einer erkannten Ortsangabe jeweils auch ein Konfidenzwert ausgegeben werden kann, der angibt, wie groß die Übereinstimmung der Spracheingabe mit der erkannten Ortsangabe in Bezug auf die klangliche Ähnlichkeit ist.From the US 2006/0058947 A1 It is known that by a speech recognition device together with a recognized location information each also a confidence value can be output, indicating the size of the match of the speech input with the recognized location with respect to the tonal similarity.

Aus der DE 10 2015 212 650 A1 ist bekannt, dass man auf Grundlage einer erkannten Ortsangabe, die von einer Spracherkennungseinrichtung ausgegeben wurde, eine Suche in einer Datenbank durchgeführt werden kann.From the DE 10 2015 212 650 A1 It is known that a search in a database can be performed on the basis of a recognized location information output by a speech recognition device.

Der Erfindung liegt die Aufgabe zugrunde, unabhängig von einer Größe des eingangs beschriebenen Suchraums, also der möglichen, erkennbaren Ortsangaben, für einen Benutzer eine auf seine aktuelle oder geplante Fahrt bezogene Erkennungsliste an erkannten Ortsangaben bereitzustellen.The invention is based on the object, regardless of a size of the search space described at the beginning, ie the possible, recognizable location information, to provide a user with a recognition list of recognized location information related to his current or planned journey.

Die Aufgabe wird durch die Gegenstände der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausführungsformen der Erfindung sind durch die abhängigen Patentansprüche, die folgende Beschreibung sowie die Figur beschrieben.The object is solved by the subject matters of the independent claims. Advantageous embodiments of the invention are described by the dependent claims, the following description and the figure.

Durch die Erfindung ist ein Verfahren zum Verarbeiten einer Spracheingabe bereitgestellt. Das Verarbeiten betrifft das Erzeugen einer Erkennungsliste mit erkannten Ortsangaben. Über die Spracheingabe kann ein Benutzer eine Ortsangabe an einem Bedienterminal vorgeben. Das Bedienterminal kann beispielsweise hierzu zumindest ein Mikrofon zum Empfangen eines Sprachschalls des Benutzers aufweisen. Auf Grundlage der Spracheingabe kann eine automatische Spracherkennung durchführt werden. Das Verfahren setzt auf dem Erkennungsergebnis auf. Hierzu wird aus zumindest einer Spracherkennungseinrichtung zu der Spracheingabe eine Erkennungsliste empfangen, in welcher mehrere, von der zumindest einen Spracherkennungseinrichtung erkannte Ortsangaben gemäß einer jeweiligen Erkennungskonfidenz geordnet aufgelistet sind. Die Erkennungskonfidenz kann beispielsweise der eingangs beschriebene Konfidenzwert sein, wie er durch eine automatische Spracherkennung ausgegeben werden kann. Es kann sich beispielsweise um die Angabe der sogenannten Log-Likelihood handeln, also dem logarithmierten Wert der Übereinstimmungswahrscheinlichkeit.The invention provides a method for processing a voice input. The processing involves generating a recognition list with recognized locations. Using the voice input, a user can specify a location on an operator terminal. For example, the operator terminal may have at least one microphone for receiving a speech sound from the user. Based on the speech input, automatic speech recognition can be performed. The method is based on the recognition result. For this purpose, a recognition list is received from at least one speech recognition device for the speech input, in which a plurality of location information recognized by the at least one speech recognition device is listed according to a respective recognition confidence. The recognition confidence can be, for example, the confidence value described at the beginning, as it can be output by automatic speech recognition. It may, for example, be the specification of the so-called log likelihood, that is to say the logarithmized value of the match probability.

Um nun einen Bezug zur aktuellen oder geplanten Fahrt oder Reise des Benutzers herzustellen, ist erfindungsgemäß vorgesehen, dass zu jeder erkannten Ortsangabe, wie sie in der Erkennungsliste aufgelistet ist, jeweils eine Ortsinformation ermittelt wird. Die erkannte Ortsangabe kann beispielsweise einen sogenannten Interessenspunkt (POI - Point of Interest) oder eine Adresse angeben. Die Ortsinformation kann dann beispielsweise in der Geoposition des Interessenspunktes oder der Adresse bestehen. Die Ortsinformation kann aber auch lediglich besagen, ob eine Geoposition zu der Ortsangabe ermittelbar ist oder nicht, ob also eine Geoposition verfügbar ist. In Abhängigkeit von der jeweils ermittelten Ortsinformation wird ein jeweiliger Korrekturwert für die Ortsangabe ermittelt. Die erkannten Ortsangaben in der Erkennungsliste werden dann in Abhängigkeit von den jeweils ermittelten Korrekturwerten umsortiert. Während also aus der zumindest einen Spracherkennungseinrichtung eine Erkennungsliste empfangen wird, deren Sortierung nach der jeweiligen Erkennungskonfidenz der erkannten Ortsangaben erfolgt, werden erfindungsgemäß nun Ortsinformationen zu jeder erkannten Ortsangabe beschafft und das Ordnen oder Sortieren der erkannten Ortsangaben in der Erkennungsliste erfolgt in Abhängigkeit von den Ortsinformationen. Hierdurch ergibt sich der Vorteil, dass dem Benutzer die Erkennungsliste in einer Ordnung oder Reihenfolge oder Auflistungsfolge präsentiert werden kann, die von den Ortsinformationen abhängt und nicht ausschließlich von dem Vorgang der Spracherkennung selbst.In order to establish a connection to the user's current or planned journey or journey, it is provided according to the invention that a location information item is determined for each recognized location item as listed in the recognition list. The recognized location can, for example, specify a so-called POI (Point of Interest) or an address. The location information can then exist, for example, in the geoposition of the point of interest or the address. However, the location information can also only say whether a geo position can be determined to the location or not, so if a geo position is available. Depending on the respectively determined location information, a respective correction value for the location is determined. The recognized locations in the recognition list are then re-sorted depending on the respectively determined correction values. Thus, while a recognition list is received from the at least one speech recognition device, the sorting of which is performed according to the respective recognition confidence of the recognized location information, according to the invention location information for each recognized location information is obtained and the sorting or sorting of the recognized location information in the recognition list takes place as a function of the location information. This has the advantage that the recognition list can be presented to the user in an order or sequence or list sequence that depends on the location information and not exclusively on the process of speech recognition itself.

Zu der Erfindung gehören weiterführende Ausführungsformen, durch die sich zusätzliche Vorteile ergeben.The invention includes further embodiments which provide additional advantages.

Eine Ausführungsform sieht vor, dass die jeweilige Erkennungskonfidenz der erkannten Ortsangaben mit dem jeweiligen Korrekturwert der jeweiligen Ortsangabe zu einem Kombinationswert kombiniert wird und die Erkennungsliste gemäß den Kombinationswerten geordnet wird. Somit wird also beim Umsortieren oder Neubewerten der erkannten Ortsangaben beides berücksichtigt, nämlich die Konfidenz der Spracherkennungseinrichtung und die Ortsinformation. Der Korrekturwert kann beispielsweise jeweils als ein Aufschlag oder Abzug für die Erkennungskonfidenz verwendet werden, indem er beispielsweise auf den Wert der Erkennungskonfidenz aufaddiert wird.One embodiment provides that the respective recognition confidence of the recognized location information is combined with the respective correction value of the respective location information to form a combination value, and the recognition list is arranged according to the combination values. Thus, both the resorting or re-evaluating the recognized locations both considered, namely the confidence of the speech recognition device and the location information. For example, the correction value may each be used as a markup or subtraction for recognition confidence, for example, by adding it to the value of the recognition confidence.

Eine Ausführungsform sieht vor, dass die Ortsinformation ermittelt wird, indem für die jeweils erkannte Ortsangabe in einer Datenbank ein passender Ortseintrag gesucht wird. Durch Auswählen der Datenbank kann somit ausgewählt werden, für welche Länder oder Regionen Ortsinformationen gesucht werden.One embodiment provides that the location information is determined by searching for a suitable location entry for the respectively recognized location information in a database. By selecting the database, it is thus possible to select for which countries or regions location information is searched.

Gemäß einer Ausführungsform wird der Korrekturwert in Abhängigkeit davon eingestellt, dass die Ortsinformation besagt, ob ein Ortseintrag in der Datenbank auffindbar ist oder nicht. Somit können solche Listeneinträge der Erkennungsliste, also solche erkannten Ortsangaben, höher bewertet werden, für die in der Datenbank, beispielsweise einer Navigationsdaten, erfolgreich ein Datenbank-Eintrag gefunden wurde. Solche erkannten Ortsangaben, für welche in der Datenbank kein Datenbank-Eintrag gefunden wurde, werden niedriger bewertet und damit beim Umsortieren zum Listenende hin verschoben. Somit wird ein Benutzer in der Erkennungsliste nicht mit solchen erkannten Ortsangaben konfrontiert, für die keine Ortsinformation vorhanden ist.According to one embodiment, the correction value is set in dependence on the location information stating whether or not a location entry can be found in the database. Thus, such list entries of the recognition list, ie those recognized locations, can be rated higher, for which a database entry was successfully found in the database, for example a navigation data. Such recognized locations, for which no database entry was found in the database, are rated lower and thus shifted to the end of the list during resorting. Thus, a user in the recognition list is not confronted with such recognized location information for which location information is not available.

Eine Ausführungsform sieht vor, dass beim Ermitteln der jeweiligen Ortsinformation, also zum Beispiel beim Suchen in der Datenbank, zumindest einer erkannten Ortsangabe zumindest eine vorbestimmte alternative Schreibform der jeweiligen erkannten Ortsangabe berücksichtigt wird. Mit anderen Worten kann auch ein solcher Datenbank-Eintrag erkannt werden, der anders geschrieben ist als die erkannte Ortsangabe. Enthält die Erkennungsliste beispielsweise als erkannte Ortsangabe „Sorento“, steht aber in der Datenbank nur ein Datenbank-Eintrag zu einem Ort „Sorrento“, so kann dennoch die Ortsinformation dieses Datenbank-Eintrags genutzt werden. Eine unterschiedliche Schreibform kann beispielsweise durch Auswählen oder Einstellen der Vergleichsmethode für eine Datenbanksuche erreicht werden. Es kann eine Vergleichsmethode mit Toleranz genutzt werden, die also keine buchstabengenaue Übereinstimmung fordert, sondern einen vorbestimmten Prozentsatz an Unterschied dennoch als Übereinstimmung wertet. So kann beispielsweise eine falsche Aussprache oder ein Fehler in der phonetischen Transkription kompensiert werden.One embodiment provides that, when determining the respective location information, that is to say for example when searching in the database, at least one recognized location specification is taken into account at least one predetermined alternative writing form of the respective recognized location information. In other words, such a database entry can be recognized, which is written differently than the recognized location. Contains the recognition list, for example, as a recognized location "Sorento", but is in the database only a database entry to a place "Sorrento", so the location information of this database entry can still be used. A different writing form can be achieved, for example, by selecting or setting the comparison method for a database search. A tolerance comparison method can be used that does not require a literal match, but still takes a predetermined percentage of difference as a match. For example, a wrong pronunciation or an error in the phonetic transcription can be compensated.

Eine Ausführungsform sieht vor, dass für zumindest einen oder einige der erkannten Ortsangaben die jeweilige Ortsinformation eine Geoposition eines durch die Ortsangabe beschriebenen Orts angibt und dass eine aktuelle Geoposition des Bedienterminals ermittelt wird, also eine Geoposition des mobilen Endgeräts oder des Kraftfahrzeugs. Der Korrekturwert kann dann in Abhängigkeit von einem Abstand der Geoposition des jeweiligen Orts zu der Geoposition des Bedienterminals eingestellt werden. Bevorzugt wird hierbei der Korrekturwert derart eingestellt, dass der Rang der erkannten Ortsangabe in der Erkennungsliste umso höher ist, je näher sich der Ort an der aktuellen Geoposition des Bedienterminals befindet. Je näher zur aktuellen Geoposition der Ort liegt, desto höher in der Erkennungsliste ist somit die erkannte Ortsangabe angeordnet.One embodiment provides that, for at least one or some of the recognized location information, the respective location information indicates a geoposition of a location described by the location specification and that a current geoposition of the operator terminal is determined, ie a geoposition of the mobile terminal or of the motor vehicle. The correction value can then be set as a function of a distance of the geoposition of the respective location to the geoposition of the operator terminal. In this case, the correction value is preferably set such that the closer the location is to the current geoposition of the operator terminal, the higher the rank of the recognized location in the recognition list. The closer to the current geoposition the location is, the higher the recognition location thus determines the recognized location.

Es kann vorgesehen sein, dass eine aktuelle Bewegungsrichtung des Bedienterminals ermittelt wird und der Korrekturwert in Abhängigkeit von einem Winkel, den ein Vektor der Bewegungsrichtung und eine Verbindungslinie, welche die Geoposition des Bedienterminals und die Geoposition aus der Ortsinformation verbindet, einschließen, ermittelt wird. Mit anderen Worten wird also eine erkannte Ortsangabe in der Erkennungsliste umso höher angeordnet, je geringer die Abweichung der Bewegungsrichtung von derjenigen Richtung ist, in welche sich der zugehörige Ort ausgehend von der aktuellen Geoposition des Bedienterminals befindet. Hierdurch ergibt sich der Vorteil, dass die aktuelle Reiserichtung berücksichtigt wird.It can be provided that a current direction of movement of the operating terminal is determined and the correction value is determined as a function of an angle which includes a vector of the direction of movement and a connecting line which connects the geoposition of the operating terminal and the geoposition from the location information. In other words, therefore, a recognized location in the recognition list is arranged the higher the lower the deviation of the direction of movement from the direction in which the associated location is based on the current geoposition of the operator terminal. This has the advantage that the current travel direction is taken into account.

Eine Ausführungsform sieht vor, dass für zumindest eine oder einige der erkannten Ortsangaben die jeweilige Ortsinformation eine Geoposition eines durch die Ortsangabe beschriebenen Orts angibt, wie dies bereits beschrieben wurde, und dass aus einer Routenführung einer Navigationseinrichtung Routendaten einer aktiven oder geplanten Reiseroute oder kurz Route empfangen werden und dass der Korrekturwert in Abhängigkeit von einer Entfernung des Orts zur Route eingestellt wird. Mit anderen Worten wird der Abstand des Orts zur Route berücksichtigt. Die Route umfasst hierbei auch den Zielort, das heißt das Routenziel oder Routenende. Je näher der Ort zur Route liegt, desto höher wird sein Rang in der Erkennungsliste durch das Umsortieren eingestellt. Hierdurch ergibt sich der Vorteil, dass solche erkannten Ortsangaben bevorzugt werden, die einen Bezug zur aktuellen Route aufweisen.One embodiment provides that for at least one or some of the recognized location information, the respective location information indicates a geoposition of a location described by the location, as has already been described, and that from a route guidance of a navigation device, route data of an active or planned travel route or short route is received and that the correction value is adjusted in dependence on a distance of the location to the route. In other words, the distance of the location to the route is taken into account. The route here also includes the destination, that is the route destination or end of the route. The closer the place is to the route, the higher its rank in the recognition list is set by resorting. This results in the advantage that such recognized locations are preferred, which have a reference to the current route.

Eine Ausführungsform sieht vor, dass die umsortierte Erkennungsliste dem Benutzer zur Auswahl der vom Benutzer mittels der Spracheingabe vorgegebenen Ortsangabe ausgegeben wird. Der Benutzer kann also die umsortierte Erkennungsliste als eine Zieleliste ausgegeben bekommen, beispielsweise visuell angezeigt bekommen, und/oder akustisch vorgelesen bekommen. Der Benutzer kann dann aus dieser umsortierten Ergebnisliste diejenige Ortsangabe auswählen, die er mit der Spracheingabe gemeint hat.One embodiment provides that the reordered recognition list is output to the user for selecting the location specified by the user by means of the speech input. The user can thus get the re-sorted recognition list as a destination list, for example visually displayed, and / or be read acoustically. The user can then select from this sorted result list the location that he meant with the speech input.

Zu der Erfindung gehört auch eine Bedienvorrichtung zum Durchführen des Verfahrens. Die Bedienvorrichtung weist hierzu eine Prozessoreinrichtung auf, die dazu eingerichtet ist, die Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Die Prozessoreinrichtung kann hierzu zumindest einen Mikroprozessor und/oder zumindest einen Mikrocontroller aufweisen. Die Prozessoreinrichtung kann einen Programmcode aufweisen, der dazu eingerichtet ist, bei Ausführen durch die Prozessoreinrichtung die Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Die Bedienvorrichtung kann beispielsweise als ein Server des Internets ausgestaltet sein. Sie kann hierzu einen Computer oder einen Computerverbund umfassen. Die Bedienvorrichtung kann auch als ein Bestandteil eines Kraftfahrzeugs oder eines mobilen Endgeräts ausgestaltet sein. Die Bedienvorrichtung kann als verteilte Vorrichtung teilweise in einem mobilen Endgerät oder Kraftfahrzeug einerseits und einen Server des Internets des andererseits realisiert sein. Die Bedienvorrichtung kann beispielsweise als ein Infotainmentsystem des Kraftfahrzeugs oder als ein Bestandteil des mobilen Endgeräts ausgestaltet sein. Das beschriebene Bedienterminal kann mit der Bedienvorrichtung über eine Datenverbindung gekoppelt oder als Bestandteil der Bedienvorrichtung ausgestaltet sein.The invention also includes an operating device for carrying out the method. For this purpose, the operating device has a processor device which is set up to carry out the embodiment of the method according to the invention. For this purpose, the processor device can have at least one microprocessor and / or at least one microcontroller. The processor device may have a program code which is set up to execute the embodiment of the method according to the invention when executed by the processor device. The operating device can be designed, for example, as a server of the Internet. It may include a computer or a computer network for this purpose. The operating device can also be designed as a component of a motor vehicle or of a mobile terminal. The operating device can be implemented as a distributed device partly in a mobile terminal or motor vehicle on the one hand and a server of the Internet on the other hand. The operating device can be designed, for example, as an infotainment system of the motor vehicle or as a component of the mobile terminal. The operating terminal described can be coupled to the operating device via a data connection or designed as part of the operating device.

Im Zusammenhang mit einer Bedienvorrichtung, die in einem Kraftfahrzeug bereitgestellt ist, ist durch die Erfindung auch Kraftfahrzeug mit einer Ausführungsform der erfindungsgemäßen Bedienvorrichtung vorgesehen.In connection with an operating device, which is provided in a motor vehicle, motor vehicle with an embodiment of the operating device according to the invention is provided by the invention.

Im Folgenden sind Ausführungsbeispiele der Erfindung beschrieben. Hierzu zeigt:

1 eine schematische Darstellung einer Ausführungsform der erfindungsgemäßen Bedienvorrichtung;
2 eine Skizze zur Veranschaulichung der Bildung eines Korrekturwerts.

In the following, embodiments of the invention are described. This shows:

1 a schematic representation of an embodiment of the operating device according to the invention;
2 a sketch illustrating the formation of a correction value.

Bei den im Folgenden erläuterten Ausführungsbeispielen handelt es sich um bevorzugte Ausführungsformen der Erfindung. Bei den Ausführungsbeispielen stellen die beschriebenen Komponenten der Ausführungsformen jeweils einzelne, unabhängig voneinander zu betrachtende Merkmale der Erfindung dar, welche die Erfindung jeweils auch unabhängig voneinander weiterbilden und damit auch einzeln oder in einer anderen als der gezeigten Kombination als Bestandteil der Erfindung anzusehen sind. Des Weiteren sind die beschriebenen Ausführungsformen auch durch weitere der bereits beschriebenen Merkmale der Erfindung ergänzbar.The exemplary embodiments explained below are preferred embodiments of the invention. In the exemplary embodiments, the described components of the embodiments each represent individual features of the invention, which are to be considered independently of one another, which each further develop the invention independently of one another and thus also individually or in a different combination than the one shown as part of the invention. Furthermore, the described embodiments can also be supplemented by further features of the invention already described.

In den Figuren sind funktionsgleiche Elemente jeweils mit denselben Bezugszeichen versehen.In the figures, functionally identical elements are each provided with the same reference numerals.

1 zeigt in schematischer Darstellung ein Kraftfahrzeug 10, bei dem es sich beispielsweise um einen Kraftwagen, insbesondere einen Personenkraftwagen oder Lastkraftwagen, handeln kann. In dem Kraftfahrzeug 10 kann ein Bedienterminal 11 bereitgestellt sein, mittels welchem ein Sprachschall 12 einer Spracheingabe 13 erfasst werden kann. Die Spracheingabe 13 kann von einem (nicht dargestellten) Benutzer ausgesprochen worden sein. Der Benutzer kann mit der Spracheingabe 13 eine Ortsangabe A aussprechen, die beispielsweise den Zielort einer Reise angeben kann, die der Benutzer mit dem Kraftfahrzeug 10 unternehmen möchte. Mit der Spracheingabe 13 möchte der Benutzer beispielsweise ein Navigationssystem oder eine Navigationseinrichtung des Kraftfahrzeugs 10 konfigurieren. Die Spracheingabe 13 kann einer Spracherkennungseinrichtung 14 übergeben oder bereitgestellt werden, welche auf Grundlage des Sprachsignals der Spracheingabe 13 aus dem Bedienterminal 11 eine automatische Spracherkennung ASR durchführen kann. Als Resultat der automatischen Spracherkennung ASR kann die Spracherkennungseinrichtung 14 eine Erkennungsliste 15 ausgeben, nämlich eine sogenannte N-Best-Liste. In der Erkennungsliste 15 können mehrere erkannte Ortsangaben B, C, A in einer Reihenfolge aufgelistet sein, die durch eine jeweilige Erkennungskonfidenz 16 festgelegt sein kann, die ebenfalls zusammen mit der erkannten Ortsangabe B, C, A in der Erkennungsliste 15 angegeben sein kann. Die Erkennungsliste 15 kann an eine Bedienvorrichtung 17 übertragen werden, welche die erkannten Ortsangaben B, C, A der Erkennungsliste 15 umsortieren kann und eine umsortierte Erkennungsliste 18 ausgeben kann. Die umsortierte Erkennungsliste 18 kann durch eine Ausgabeeinrichtung 19 dem Benutzer visuell und/oder akustisch ausgegeben werden. Der Benutzer kann dann aus der umsortierten Erkennungsliste 18 diejenige erkannte Ortsangabe auswählen, die er gemeint hat, also im konkreten Beispiel die Ortsangabe A. 1 shows a schematic representation of a motor vehicle 10 , which may be, for example, a motor vehicle, especially a passenger car or truck. In the motor vehicle 10 can be an operator terminal 11 be provided, by means of which a speech sound 12 a voice input 13 can be detected. The voice input 13 may have been spoken by a user (not shown). The user can use the voice input 13 Write a location statement A, which may indicate, for example, the destination of a trip, which the user with the motor vehicle 10 want to do business. With the speech input 13, the user wants, for example, a navigation system or a navigation device of the motor vehicle 10 configure. The speech input 13 may be a speech recognition device 14 be handed over or provided, which on the basis of the speech signal of the speech input 13 from the control terminal 11 can perform an automatic speech recognition ASR. As a result of the automatic speech recognition ASR, the speech recognition device 14 output a recognition list 15, namely a so-called N-Best list. In the recognition list 15 can a plurality of recognized location indications B, C, A are listed in an order determined by a respective recognition confidence 16 can be fixed, which also together with the recognized location B, C, A in the recognition list 15 can be specified. The detection list 15 can be connected to an operating device 17 which are the recognized locations B, C, A of the recognition list 15 can re-sort and a resorted detection list 18 can spend. The resorted recognition list 18 may be replaced by an output device 19 the user visually and / or audibly output. The user can then remove from the reordered recognition list 18 select the recognized location that he meant, that is, in the specific example, the location A.

In 1 ist veranschaulicht, dass die Spracherkennungseinrichtung 14 und/oder die Bedienvorrichtung 17 jeweils fahrzeugexterne Online-Dienste 20 sein können, die mit dem Kraftfahrzeug 10 über eine Funkverbindung gekoppelt sein können, beispielsweise über eine Mobilfunkverbindung und/oder eine WLAN-Verbindung (WLAN - Wireless Local Area Network).In 1 is illustrated that the speech recognition device 14 and / or the operating device 17 in each case vehicle-external online services 20 can be with the motor vehicle 10 can be coupled via a radio link, for example via a mobile radio connection and / or a WLAN connection (WLAN - Wireless Local Area Network).

Die Bedienvorrichtung 17 kann zu jeder erkannten Ortsangabe B, C, A aus der Erkennungsliste 15 beispielsweise in eine Datenbank 21 eine Suchanfrage 22 durchführen, um aus der Datenbank 21 eine jeweilige Ortsinformation 23 bezüglich der Geoposition des jeweiligen durch die Ortsangabe B, C, A angegebenen Orts zu ermitteln. Die Ortsinformation 23 kann allerdings auch besagen, dass in der Datenbank 21 kein passender Datenbank-Eintrag gefunden wurde.The operating device 17 can be to every recognized location B, C, A from the recognition list 15 for example, in a database 21 do a search 22 to get out of the database 21 To determine a respective location information 23 with respect to the geoposition of the respective location indicated by the location B, C, A location. The location information 23 However, it can also say that in the database 21 no matching database entry was found.

2 veranschaulicht, wie durch die Bedienvorrichtung 17 ausgehend von jeder erkannten Ortsangabe B, C, A einen jeweiligen Korrekturwert 24 für jede erkannte Ortsangabe B, C, A ermitteln kann, auf deren Grundlage die Erkennungsliste 15 umsortiert werden kann, sodass sich die umsortierte Erkennungsliste 18 ergibt. 2 illustrated as by the operating device 17 starting from each detected location information B, C, A a respective correction value 24 for each recognized location information B, C, A can determine based on which the recognition list 15 can be re-sorted, so that the resorted recognition list 18 results.

2 veranschaulicht, wie zu einer aktuellen Geoposition 25, die das Kraftfahrzeug 10 und damit das Bedienterminal 11 aufweist, auch die aktuell geplante Route 26 beispielsweise aus der Navigationseinrichtung ausgelesen werden kann. Die Route 26 kann in einem Routenziel oder Fahrtziel 27 enden. Anhand der Ortsinformation 23 kann in dem vorliegenden Beispiel durch die Bedienvorrichtung 17 ermittelt worden sein, dass die jeweilige Geoposition für die Orte der Ortsangaben A, B ermittelt werden konnten. Diese können dann in einer digitalen Karte 28 zusammen mit der aktuellen Geoposition 25 des Kraftfahrzeugs 10 und der Route 26 eingetragen werden. Die Ortsinformation 23 zu der Ortsangabe C kann beispielsweise besagen, dass kein Ort gefunden werden konnte, der zu der Ortsangabe C passt. Dies führt dazu, dass der Rang der Ortsangabe C in der Erkennungsliste 18 im Vergleich zur Erkennungsliste 15 reduziert wird. Zu den Orten der Ortsangaben A, B kann jeweils ein Abstand 29 zur aktuellen Geoposition 25 des Kraftfahrzeugs und/oder ein Abstand 30 zur Route ermittelt werden. Die Abstände 29, 30 können als Maß dafür zugrundegelegt werden, welche der Ortsangaben A, B einen höheren Rang in der umsortierten Erkennungsliste 18 aufweisen soll. Je geringer der Abstand 29 zur aktuellen Geoposition ist, desto höher wird der Rang in der Erkennungsliste 18 durch den jeweils zugeordneten Korrekturwert 24 eingestellt. Je geringer der Abstand 30 zur aktuellen Route ist, desto höher wird der Rang in der Erkennungsliste 18 durch den jeweils ermittelten Korrekturwert 24 eingestellt. Beispielsweise kann mit größerem Korrekturwert ein höherer Rang assoziiert sein, sodass der Korrekturwert umso größer ist, je geringer der jeweilige Abstand 29, 30 ist. Es kann auch eine aktuelle Bewegungsrichtung 31 des Kraftfahrzeugs 10 oder des Bedienterminals 11 ermittelt werden und ein Winkel 32 zwischen dem Vektor der Bewegungsrichtung 31 und einer Verbindungslinie 33 zwischen dem jeweiligen Ort der Ortsangabe A, B einerseits und der aktuellen Geoposition 25 andererseits ermittelt werden. Je geringer der Wert des Winkels 32 ist, desto höher ist der Rang in der Erkennungsliste 18, das heißt desto größer wird der Erkennungswert eingestellt. Die ermittelten Erkennungswerte 24 können mit der im Wert der jeweiligen Erkennungskonfidenz 16 kombiniert werden, sodass weiterhin auch das ursprüngliche Erkennungsergebnis aus der Spracherkennungseinrichtung 14 weiter berücksichtigt wird. 2 illustrates how to a current geoposition 25 that the motor vehicle 10 and thus the operator terminal 11 including the currently planned route 26 for example, can be read from the navigation device. The route 26 can be in a route destination or destination 27 end up. Based on the location information 23 can in the present example by the operating device 17 determined that the respective geoposition could be determined for the locations of the locations A, B. These can then be in a digital map 28 together with the current geoposition 25 of the motor vehicle 10 and the route 26 be registered. The location information 23 For example, the location C may state that no location matching the location C could be found. This results in the rank of location C in the recognition list 18 compared to the recognition list 15 is reduced. To the locations of the locations A, B can each have a distance 29 to the current geoposition 25 of the motor vehicle and / or a distance 30 to the route. The distances 29 . 30 can be used as a measure of which of the locations A, B a higher rank in the resorted recognition list 18 should have. The smaller the distance 29 to the current geoposition, the higher the rank in the recognition list 18 by the respectively assigned correction value 24 set. The smaller the distance 30 to the current route, the higher the rank in the recognition list 18 by the respectively determined correction value 24 set. For example, a higher rank may be associated with a larger correction value, so that the smaller the distance, the greater the correction value 29 . 30 is. It can also be a current direction of movement 31 of the motor vehicle 10 or the control terminal 11 are determined and an angle 32 between the vector of the direction of movement 31 and a connecting line 33 between the respective location of the location information A, B on the one hand and the current geoposition 25 on the other hand. The lower the value of the angle 32 is, the higher the rank in the recognition list 18 that is, the larger the detection value is set. The determined recognition values 24 can match the value of each detection confidence 16 be combined, so that continues to receive the original recognition result from the speech recognition device 14 is further considered.

Somit ergibt sich bei der Bedienvorrichtung 17 ein Verfahren zum Behandeln oder Verarbeiten von Erkennungsergebnissen einer Erkennungsliste, die erkannte Ortsangaben enthält. Die Rangfolge oder Reihenfolge der erkannten Ortsangaben wird auf Grundlage von Ortsinformationen neu eingestellt oder bewertet, um hierdurch insgesamt das Spracherkennungsergebnis dahingehend zu verändern, dass es einen Ortsbezug zum Benutzer erhält. Dies beruht auf der Erkenntnis, dass ein Benutzer mit höherer Wahrscheinlichkeit eine Ortsangabe macht, die sich in seiner Nähe befindet, also dass eine erkannte Ortsangabe umso wahrscheinlicher die gemeinte oder richtige ist, je näher sie sich dem aktuellen Aufenthaltsort des Benutzers, das heißt seiner aktuellen Geoposition, und/oder entlang der bereits geplanten Route befindet, als ein Ort, der davon weiter entfernt ist.This results in the operating device 17 a method of treating or processing recognition results of a recognition list containing recognized locations. The rank order of the recognized location information is readjusted or evaluated based on location information to thereby overall change the voice recognition result to obtain a location reference to the user. This is based on the recognition that a user is more likely to make a location that is in its vicinity, so that a recognized location is the more likely the intended or correct the closer it is to the current location of the user, ie its current Geoposition, and / or along the already planned route, as a location further away from it.

Somit muss sich die Bedienvorrichtung nicht ausschließlich auf die Erkennungskonfidenz aus der Spracherkennungseinrichtung verlassen, sondern kann eine Erkennungsliste 18 bereitstellen, die auch die Ortsinformationen berücksichtigt. Hierdurch kann die Reihenfolge in Bezug auf das Zutreffen verbessert werden.Thus, the operating device need not rely solely on the recognition confidence from the speech recognition device, but may have a recognition list 18 provide that also takes into account the location information. hereby the order of application can be improved.

Es wird hierbei bevorzugt wie folgt vorgegangen:

1) Die Spracheingabe wird zur Spracherkennungseinrichtung 14 gesendet.
2) Die Spracherkennungseinrichtung 14 erzeugt die Erkennungsliste 15 mit ihren Erkennungshypothesen (erkannte Ortsangaben).
3) Die Liste der Erkennungsergebnisse (Erkennungsliste 15) wird zur Bedienvorrichtung 17 übertragen.
4) Die Bedienvorrichtung 17 versucht in der Datenbank 21 für jede erkannte Ortsangabe einen passenden Eintrag zu finden.
5) Es werden die aktuelle Bewegungsrichtung 31 und/oder (falls vorhanden) die aktive Route 26 berücksichtigt.
6) Die überarbeitete oder veränderte oder umsortierte Erkennungsliste 18 wird ausgegeben.

It is preferred to proceed as follows:

1) The speech input becomes the speech recognition device 14 Posted.
2) The speech recognition device 14 generates the recognition list 15 with their recognition hypotheses (recognized locations).
3) The list of recognition results (recognition list 15 ) is transmitted to the operating device 17.
4) The operating device 17 tried in the database 21 to find a matching entry for each recognized location.
5) It will be the current direction of movement 31 and / or (if available) the active route 26 considered.
6) The revised or modified or resorted detection list 18 is output.

Die Bedienvorrichtung 17 kann hierbei zunächst überprüfen, ob für jede erkannte Ortsangabe, die sich in der Erkennungsliste 15 befindet, in der Datenbank 21 gefunden werden kann. Alle Ergebnisse, die einen übereinstimmenden Datenbank-Eintrag finden, werden höher gelistet als solche Resultate ohne übereinstimmenden Datenbank-Eintrag. Bei der Suche in der Datenbank 21 können auch abweichende Schreibweisen und/oder Flexionen von Wörtern ausgeglichen werden.The operating device 17 In this case, you can first check whether, for each recognized location that is in the recognition list 15 can be found in the database 21. All results that find a matching database entry are listed higher than those results without a matching database entry. When searching in the database 21, different spellings and / or inflections of words can also be compensated.

Das Umsortieren der erkannten Ortsangaben in der Erkennungsliste 18 kann die Nähe des jeweiligen zugehörigen Orts der Ortsangabe zur aktuellen Geoposition 25 des Kraftfahrzeugs 10 berücksichtigen. Ortsangaben, die einen näheren Ort beschreiben, erhalten einen höheren Rang und werden entsprechend in der Erkennungsliste 18 näher zum Listenanfang angegeben.Sorting the recognized locations in the detection list 18 can the proximity of the respective associated location of the location to the current geoposition 25 of the motor vehicle 10 consider. Locations that describe a closer location get a higher rank and are listed accordingly in the recognition list 18 specified closer to the beginning of the list.

In einem weiteren Schritt kann die Bedienvorrichtung 17 solche erkannten Ortsangaben höher einstufen, die in eine Richtung liegen, die ausgehend von der aktuellen Geoposition 25 näher an der Bewegungsrichtung 21 liegen, also einen geringeren Winkel 32 aufweisen. Falls eine Routenführung aktiv ist, kann vorgesehen sein, erkannte Ortsangaben zu orten, die entlang der Route 26 liegen, höher zu bewerten oder im Rang höher einzustufen.In a further step, the operating device 17 rank such recognized locations higher in one direction, based on the current geoposition 25 closer to the direction of movement 21 lie, so a smaller angle 32 exhibit. If a route guidance is active, it may be provided to locate recognized location information along the route 26 are higher, higher, or higher in rank.

Insgesamt zeigen die Beispiele, wie durch die Erfindung eine ortsspezifische Spracherkennung bereitgestellt werden kann.Overall, the examples show how site-specific speech recognition can be provided by the invention.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

WO 2014/060054 A1 [0004]
US 2006/0058947 A1 [0005]
DE 102015212650 A1 [0006]

Claims

Method for processing a speech input (13), via which a user specifies a location (A) on an operator terminal (11), wherein from at least one speech recognition device (14) to the speech input (13) a recognition list (15) is received, in which a plurality of location indications (A, B, C) recognized by the at least one speech recognition device (14) are listed according to a respective recognition confidence (16), characterized in that a location information (23 ) is determined and in dependence on the respectively determined location information (23) a respective correction value (24) for the location (A, B, C) is determined and the recognized location information (A, B, C) in the recognition list (18) in Depending on the determined correction values (24) are resorted.

Method according to Claim 1 in which the respective recognition confidence (16) of the recognized location information (A, B, C) is combined with the respective correction value (24) of the respective location specification (A, B, C) to form a combination value and the recognition list (18) is arranged according to the combination values becomes.

Method according to one of the preceding claims, wherein the location information (23) is determined by searching for the respectively recognized location information (A, B, C) in a database (21) a suitable database entry.

Method according to Claim 3 in which the correction value (24) is set in dependence on the location information (23) indicating whether a database entry can be found in the database (21).

Method according to one of the preceding claims, wherein when determining the respective location information (23) at least one recognized location information (A, B, C) at least one predetermined alternative writing form of the respective recognized location information (A, B, C) is taken into account.

Method according to one of the preceding claims, wherein for at least one or some or each of the identified location indications (A, B) the respective location information (23) indicates a geoposition of a location described by the location specification (A, B) and wherein a current geoposition (25 ) of the operating terminal (11) is determined and wherein - the correction value (24) is adjusted in dependence on a distance (29) of the geoposition of the location to the geoposition (25) of the operating terminal (11) and / or - a current direction of movement (31) of the control terminal (11) is determined and the correction value (24) in dependence on an angle (32), a vector of the direction of movement (31) and a connecting line (33), the geoposition (25) of the operator terminal (11) and the Geoposition from the location information (23) connects, include, is determined.

Method according to one of the preceding claims, wherein for at least one or some or each of the recognized location information (A, B), the respective location information (23) indicates a geoposition of a location described by the location (A, B) location and wherein a route guidance of a navigation device Route data of an active or planned route (26) are received and the correction value (24) is set in dependence on a distance (30) of the location to the route (26).

Method according to one of the preceding claims, wherein the reordered recognition list (18) is output to the user for selecting the location information (A) specified by the user by means of the speech input (13).

Operating device (17) which has a processor device which is set up to carry out a method according to one of the preceding claims.

Motor vehicle (10) with an operating device (17) according to Claim 9 ,