DE102019113681A1 - Always listening and active voice assistant and vehicle operation - Google Patents

Always listening and active voice assistant and vehicle operation Download PDF

Info

Publication number
DE102019113681A1
DE102019113681A1 DE102019113681.4A DE102019113681A DE102019113681A1 DE 102019113681 A1 DE102019113681 A1 DE 102019113681A1 DE 102019113681 A DE102019113681 A DE 102019113681A DE 102019113681 A1 DE102019113681 A1 DE 102019113681A1
Authority
DE
Germany
Prior art keywords
vehicle
response
contexts
topics
topic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102019113681.4A
Other languages
German (de)
Inventor
Sandeep Raj Gandiga
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of DE102019113681A1 publication Critical patent/DE102019113681A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373Voice control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/004Artificial life, i.e. computing arrangements simulating life
    • G06N3/006Artificial life, i.e. computing arrangements simulating life based on simulated virtual individual or collective life forms, e.g. social simulations or particle swarm optimisation [PSO]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/205Parsing
    • G06F40/211Syntactic parsing, e.g. based on context-free grammar [CFG] or unification grammars
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/1815Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00Computing arrangements using knowledge-based models
    • G06N5/04Inference or reasoning models
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/228Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context

Abstract

Diese Offenbarung stellt einen stets zuhörenden und aktiven Sprachassistenten und einen Fahrzeugbetrieb bereit. Ein Fahrzeug beinhaltet eine Steuerung, die dazu konfiguriert ist, eine Gruppe von Themen zum Erzeugen einer Antwort auf eine Frage auszuwählen, die in die Gruppe eingebettet ist, und zwar auf Grundlage eines Betriebsparameters des Fahrzeugs und einer Syntax einer Formulierung. Die Auswahl erfolgt als Reaktion auf eine Eingabe, die von Äußerungen stammt, einschließlich eines vorhergehenden Themas und eines folgenden Themas mit einem Verweisobjekt dazwischen, das nur mit einem der Themen durch die Syntax assoziiert ist. Das Fahrzeug kann eine Schnittstelle betreiben, um die Antwort auszugeben.This disclosure provides an always-listening and active voice assistant and vehicle operation. A vehicle includes a controller configured to select a group of topics for generating a response to a question embedded in the group based on an operating parameter of the vehicle and a formulation syntax. The selection is in response to an input stemming from utterances, including a previous topic and a following topic with a reference object in between that is associated with only one of the topics through the syntax. The vehicle can operate an interface to issue the answer.

Description

TECHNISCHES GEBIETTECHNICAL AREA

Diese Offenbarung betrifft den Betrieb von Fahrzeugen durch aktive und stets zuhörende Sprachassistenz.This disclosure relates to the operation of vehicles by active and always listening voice assistance.

ALLGEMEINER STAND DER TECHNIKGENERAL PRIOR ART

Abfragesysteme geben Antworten auf Fragen, die nach dem Aufruf gefragt wurden. Zum Beispiel „Hey Ford®, wie wird das Wetter heute?“ Nach dem Aufruf „Hey Ford®“ werden natürliche Sprachverarbeitung und künstliche Verfahren verwendet, um eine Antwort auf die Frage zu finden. Diese Kadenz, bei der ein Aufruf vor der Frage erforderlich ist, kann mehr Aussagen als notwendig erfordern, um die Antwort bereitzustellen, da Unterhaltungen vor dem Aufruf ignoriert werden. Zusätzlich können Abfragesysteme, die eine rückwärts gerichtete Kadenzunterstützung bereitstellen, schlecht ausgestattet sein, um zwischen vorwärts gerichteter Kadenz und rückwärts gerichteter Kadenz zu unterscheiden.Query systems answer questions asked after the call. For example, "Hey Ford®, what's the weather like today?" After calling "Hey Ford®," natural language processing and artificial methods are used to find an answer to the question. This cadence, which requires a call before the question, may require more statements than necessary to provide the answer, since conversations prior to the call are ignored. In addition, interrogation systems that provide backward cadence support may be poorly equipped to distinguish between forward cadence and reverse cadence.

KURZDARSTELLUNGSUMMARY

Ein Fahrzeug beinhaltet eine Steuerung, die dazu konfiguriert ist, eine Gruppe von Themen zum Erzeugen einer Antwort auf eine Frage auszuwählen, die in die Gruppe eingebettet ist, und zwar auf Grundlage eines Betriebsparameters des Fahrzeugs und einer Syntax einer Formulierung. Die Auswahl erfolgt als Reaktion auf eine Eingabe, die von Äußerungen stammt, einschließlich eines vorhergehenden Themas und eines folgenden Themas mit einem Verweisobjekt dazwischen, das nur mit einem der Themen durch die Syntax assoziiert ist. Das Fahrzeug kann eine Schnittstelle betreiben, um die Antwort auszugeben.A vehicle includes a controller configured to select a group of topics for generating a response to a question embedded in the group based on an operating parameter of the vehicle and a formulation syntax. The selection is in response to an input stemming from utterances, including a previous topic and a following topic with a reference object in between that is associated with only one of the topics through the syntax. The vehicle can operate an interface to issue the answer.

Ein Fahrzeug beinhaltet eine Steuerung, die dazu konfiguriert ist, eine Gruppe von Themen zum Erzeugen einer Antwort auf eine Frage auszuwählen, die in die Gruppe eingebettet ist, und zwar auf Grundlage eines Betriebsparameters des Fahrzeugs und einer Syntax einer Formulierung. Die Auswahl erfolgt als Reaktion auf eine Eingabe, die von Äußerungen stammt, einschließlich eines vorhergehenden Themas und eines folgenden Themas mit einem Verweisobjekt dazwischen, das nur mit einem der Themen durch die Syntax assoziiert ist. Das Fahrzeug kann gemäß der Antwort betrieben werden.A vehicle includes a controller configured to select a group of topics for generating a response to a question embedded in the group based on an operating parameter of the vehicle and a formulation syntax. The selection is in response to an input stemming from utterances, including a previous topic and a following topic with a reference object in between that is associated with only one of the topics through the syntax. The vehicle can be operated according to the answer.

Ein Verfahren beinhaltet Erzeugen einer Antwort auf eine Frage durch eine Steuerung, die in einer Gruppe von Themen eingebettet ist, und zwar auf Grundlage einer Auswahl von einem der Themen und eines Betriebsparameters des Fahrzeugs und einer Syntax, und Betreiben des Fahrzeugs gemäß der Antwort. Die Erzeugung erfolgt als Reaktion auf eine Eingabe, die von Äußerungen stammt, die eine Gruppe von Formulierungen definieren, einschließlich eines vorhergehenden Themas und eines folgenden Themas mit einem Verweisobjekt dazwischen, das nur mit einem der Themen durch die Syntax assoziiert ist.A method includes generating a response to a question by a controller embedded in a group of topics based on a selection of one of the subjects and an operating parameter of the vehicle and a syntax, and operating the vehicle according to the answer. The rendering is in response to an input coming from utterances that define a group of phrases, including a previous topic and a following topic with a reference object in between that is associated with only one of the topics through the syntax.

Figurenlistelist of figures

  • 1 ist eine schematische Darstellung eines Fahrzeugs mit einem Infotainmentsystem und zugehörigen Kommunikationsfähigkeiten; 1 is a schematic representation of a vehicle with an infotainment system and associated communication capabilities;
  • 2 ist eine schematische Darstellung von Fahrzeugsteuersystemen und Peripherien; 2 is a schematic representation of vehicle control systems and peripherals;
  • 3A ist ein Algorithmus von stets zuhörenden Sprachsystemen; und 3A is an algorithm of always-listening speech systems; and
  • 3B ist ein Algorithmus zum Auswählen von Kontexten. 3B is an algorithm for selecting contexts.

DETAILLIERTE BESCHREIBUNGDETAILED DESCRIPTION

Ausführungsformen der vorliegenden Offenbarung werden hierin beschrieben. Es versteht sich jedoch, dass die offenbarten Ausführungsformen lediglich Beispiele sind und andere Ausführungsformen verschiedene und alternative Formen annehmen können. Die Figuren sind nicht unbedingt maßstabsgetreu; einige Merkmale könnten vergrößert oder verkleinert dargestellt sein, um Details bestimmter Komponenten zu zeigen. Demnach sind hierin offenbarte konkrete strukturelle und funktionelle Details nicht als einschränkend auszulegen, sondern lediglich als repräsentative Grundlage, um den Fachmann die vielfältige Verwendung der vorliegenden Erfindung zu lehren. Der Durchschnittsfachmann wird verstehen, dass verschiedene Merkmale, die unter Bezugnahme auf eine beliebige der Figuren veranschaulicht und beschrieben werden, mit Merkmalen kombiniert werden können, die in einer oder mehreren anderen Figuren veranschaulicht sind, um Ausführungsformen zu erzeugen, die nicht ausdrücklich veranschaulicht oder beschrieben sind. Die veranschaulichten Kombinationen von Merkmalen stellen repräsentative Ausführungsformen für typische Anwendungen bereit. Verschiedene Kombinationen und Modifikationen der Merkmale, die mit den Lehren dieser Offenbarung vereinbar sind, könnten jedoch für bestimmte Anwendungen oder Umsetzungen wünschenswert sein.Embodiments of the present disclosure are described herein. It should be understood, however, that the disclosed embodiments are merely examples and other embodiments may take various and alternative forms. The figures are not necessarily to scale; Some features may be enlarged or reduced to show details of particular components. Thus, specific structural and functional details disclosed herein are not to be construed as limiting, but merely as a representative basis for teaching one skilled in the art to variously employ the present invention. One of ordinary skill in the art will understand that various features illustrated and described with reference to any of the figures may be combined with features illustrated in one or more other figures to produce embodiments that are not expressly illustrated or described , The illustrated combinations of features provide representative embodiments for typical applications. However, various combinations and modifications of the features consistent with the teachings of this disclosure may be desirable for particular applications or implementations.

Fahrzeuginsassen führen Gespräche, bei denen Ereignisse, Umstände oder Probleme der Vergangenheit, Gegenwart und Zukunft besprochen werden. Anstatt einen vorwärts gerichteten Aufruf zu erfordern, ähnlich wie „Hey Ford®, wie ist die Temperatur draußen?“, kann ein Algorithmus umgesetzt werden, um zwischen vorwärts und rückwärts gerichteter Kadenz zu unterscheiden. Tatsächlich kann ein Fahrzeugabfragesystem Antworten und Lösungen in Bezug auf ein Fahrzeug auf Grundlage einer Kombination aus vorwärts gerichteter Kadenz, rückwärts gerichteter Kadenz, Fahrzeugbetriebsparametern und/oder stets zuhörenden Algorithmen bereitstellen. Fragen, die eine rückwärts gerichtete Kadenz verwenden, können eine Bestätigungsfrage oder eine Bestätigungsfragenformulierung beinhalten. Die Bestätigungsfragenformulierung kann isoliert sein, um die rückwärts gerichtete Kadenz zu ermitteln. Die Bestätigungsfragenformulierung würde im Allgemeinen Themen folgen, die den Antwortdienst erfordern (d. h. eine rückwärts gerichtete Kadenz), während andere Abfragevorrichtungen im Allgemeinen Themen vorangehen würden, die den Antwortdienst erfordern (d. h. vorwärts gerichtete Kadenz). Verbale Äußerungen können kontinuierlich aufgezeichnet und analysiert werden, um Themen zu isolieren und Kontexte bereitzustellen. Wenn die Themen von möglichen Fragen organisiert sind, wartet der Algorithmus auf einen Aufruf, wie etwa „Ford®, was denkst du?“. Eine Bestätigungsfrage ist eine beliebige Frage, die einer Aussage folgt, anstelle einer Aussage vorangeht. Eine Bestätigungsfragenformulierung kann ein Verweisobjekt beinhalten, von dem die Frage gestellt wird. Der stets zuhörende und auf Bestätigungsfragen antwortende Dienst stellt eine rückwärts gerichtete Kadenz bereit, bei der eine Aussage erfolgt, der Dienst aufgerufen wird und dann die Antwort bereitgestellt wird. Der stets zuhörende und auf Bestätigungsfragen antwortende Dienst stellt eine vorwärts gerichtete Kadenz bereit, bei der der Dienst aufgerufen wird, wobei die Aussage erfolgt und dann die Antwort bereitgestellt wird. Der stets zuhörende Dienst kann auch nach Antworten für jedes Thema suchen, sodass die Antwort leicht zur Darstellung für den Insassen verfügbar ist.Vehicle occupants conduct conversations in which events, circumstances or problems of the past, present and future are discussed. Rather than requiring a forward-looking call, similar to "Hey Ford®, what's the temperature outside?", An algorithm can be implemented to distinguish between forward and reverse cadence. In fact, can a vehicle interrogation system may provide responses and solutions to a vehicle based on a combination of forward cadence, reverse cadence, vehicle operating parameters, and / or algorithms that are constantly listening. Questions using a backward cadence may include a confirmation question or confirmation question formulation. The confirmation question formulation may be isolated to determine the backward cadence. The confirmation question formulation would generally follow topics requiring the response service (ie, a backward cadence), while other interrogators would generally precede topics requiring the response service (ie, forward cadence). Verbal utterances can be continuously recorded and analyzed to isolate topics and provide contexts. When the topics are organized by possible questions, the algorithm waits for a call, such as "Ford®, what do you think?". A confirmation question is any question that follows a statement instead of preceded by a statement. A confirmation question formulation may include a referral object from which the question is asked. The always-listening and answer-to-answer service provides a backward cadence, where a statement is made, the service invoked, and then the response provided. The always listening and answering service provides a forward cadence, at which the service is called, making the statement and then providing the answer. The always-listening service can also search for answers for each topic so that the answer is readily available for presentation to the occupant.

Ein inhärentes Problem bei dem Bereitstellen von vorwärts und rückwärts gerichteten Antwortdiensten ist, dass eine Unterhaltung mehrere beantwortbare Themen beinhalten kann und das Thema der Insassen, das beantwortet werden soll, nicht besonders eindeutig ist. Eine beispielhafte Unterhaltung ist nachfolgend bereitgestellt:

  • Suzy sagt: „Das Detroit Symphonieorchester spielt heute Abend in Detroit.“ „Ford®, was denkst du?“ „Ich sage, wir haben ausreichend Kraftstoff, um nach Detroit zu kommen, jedoch wird es sehr kalt.“ (Umgekehrte Kadenz)
  • Suzy sagt: „Das Detroit Symphonieorchester spielt heute Abend in Detroit.“ „Hey Ford®, ich sage, wir haben ausreichend Kraftstoff, um nach Detroit zu kommen, jedoch wird es sehr kalt.“ (vorwärts gerichtete Kadenz)
An inherent problem in providing forward and reverse response services is that a conversation may include multiple responsive topics and the subject of the occupant to be answered is not particularly clear. An exemplary conversation is provided below:
  • Suzy says, "The Detroit Symphony Orchestra is playing in Detroit tonight.""Ford®, what do you think?""I say we have enough fuel to get to Detroit, but it's getting very cold." (Reverse cadence)
  • Suzy says, "The Detroit Symphony Orchestra is playing in Detroit tonight.""Hey Ford®, I say we have enough fuel to get to Detroit, but it's getting very cold." (Cadence moving forward)

Die vorherige Unterhaltung enthielt mindestens drei Themen: 1) das Detroit Symphonieorchester spielt heute Abend in Detroit; 2) Ich sage, wir haben ausreichend Kraftstoff, um nach Detroit zu kommen; und 3) es wird sehr kalt. Die Themen können auf Grundlage von syntaktischen, kategorischen und anderen Verfahren isoliert werden. Im Laufe der Zeit können die Themen in bestimmte Kontexte getrennt und isoliert werden. Die Kontexte können große Kategorien von Themen sein, von denen Antworten erforderlich sein können. Die Kontexte können auch Fahrzeuginsassen zur Auswahl dargestellt werden. Die Auswahl kann auch über maschinelles Lernen bereitgestellt werden, sodass Themen gemäß vorher ausgewählten Themen ausgewählt werden. Dies bedeutet, dass der Insasse die erfolgte Themenauswahl auswählen kann und dann der maschinelle Lernalgorithmus die bevorzugten Kontexte automatisch aktualisieren würde. Nachdem das Thema auf Grundlage des Kontextes ausgewählt wurde, kann das Fahrzeug eine Antwort oder Angabe für den Insassen durch Betrieb des Fahrzeugs oder Anzeige der Antwort bereitstellen. Tatsächlich kann ein stets zuhörender Algorithmus verwendet werden, um Themen zu ermitteln, die einen Antwortdienst erfordern, und nach dem Aufruf durch eine Bestätigungsfragenformulierung automatisch eine Antwort auf das Thema bereitstellen.The previous conversation included at least three topics: 1) The Detroit Symphony Orchestra plays in Detroit tonight; 2) I say we have enough fuel to get to Detroit; and 3) it gets very cold. The topics can be isolated on the basis of syntactic, categorical and other methods. Over time, topics can be separated and isolated into specific contexts. The contexts can be large categories of topics that may require answers. The contexts can also be presented to vehicle occupants for selection. The selection may also be provided via machine learning so that topics are selected according to previously selected topics. This means that the occupant can select the topic selection that has taken place and then the machine learning algorithm would automatically update the preferred contexts. After the topic has been selected based on the context, the vehicle may provide an answer or indication to the occupant by operating the vehicle or displaying the response. In fact, an always-listening algorithm can be used to identify topics that require a response service and automatically provide a response to the topic after being called by a confirmation question formulation.

1 veranschaulicht ein beispielhaftes System 100, das ein Fahrzeug 102 beinhaltet, welches einen stets zuhörenden Antwortabfragealgorithmus umsetzt. Das Fahrzeug 102 kann ein Fahrzeugrechensystem (vehicle computing system - VCS) 106 beinhalten, welches dazu konfiguriert ist, über ein Weitbereichsnetzwerk unter Verwendung einer Telematiksteuereinheit (telematics control unit - TCU) 120A zu kommunizieren. Die TCU 120A kann verschiedene Modems 122 aufweisen, die dazu konfiguriert sind, über entsprechende Kommunikationswege und -protokolle zu kommunizieren. Wenngleich in 1 ein beispielhaftes System 100 gezeigt ist, sollen die dargestellten beispielhaften Komponenten nicht der Einschränkung dienen. Tatsächlich kann das System 100 mehr oder weniger Komponenten beinhalten und es können zusätzliche oder alternative Komponenten und/oder Umsetzungen verwendet werden. 1 illustrates an exemplary system 100 that a vehicle 102 which implements an always-listening answer-polling algorithm. The vehicle 102 can a vehicle computing system (vehicle computing system - VCS ) 106 which is configured to be used over a wide area network using a telematics control unit (telematics control unit). TCU ) 120A to communicate. The TCU 120A can use different modems 122 which are configured to communicate via respective communication paths and protocols. Although in 1 an exemplary system 100 is shown, the exemplary components shown are not intended to be limiting. In fact, the system can 100 contain more or less components and additional or alternative components and / or reactions may be used.

Bei dem Fahrzeug 102 kann es sich um verschiedene Arten von Automobilen, Softroadern (crossover utility vehicle - CUV), Geländelimousinen (sport utility vehicle - SUV), Trucks, Wohnmobilen (recreational vehicle - RV), Booten, Flugzeugen oder anderen mobilen Maschinen zum Befördern von Personen oder Gütern handeln. In vielen Fällen kann das Fahrzeug 102 durch eine Brennkraftmaschine angetrieben werden. Als eine andere Möglichkeit kann das Fahrzeug 102 ein Hybrid-Elektrofahrzeug (hybrid electric vehicle - HEV) sein, das sowohl durch eine Brennkraftmaschine als auch durch einen oder mehrere Elektromotoren angetrieben wird, wie etwa ein Serienhybrid-Elektrofahrzeug (SHEV), ein Parallelhybrid-Elektrofahrzeug (PHEV) oder ein Parallel/Serienhybrid-Elektrofahrzeug (PSHEV). Da die Art und Konfiguration des Fahrzeugs 102 variieren können, können entsprechend auch die Fähigkeiten des Fahrzeugs 102 variieren. Als einige weitere Möglichkeiten können die Fahrzeuge 102 unterschiedliche Fähigkeiten in Bezug auf die Fahrgastkapazität, die Anhängefähigkeit und -last und den Stauraum aufweisen.In the vehicle 102 can be different types of automobiles, softroaders (crossover utility vehicle - CUV ), SUVs (sport utility vehicle - SUV ), Trucks, recreational vehicles (RV), boats, airplanes or other mobile machines for transporting people or goods. In many cases, the vehicle can 102 be driven by an internal combustion engine. Another possibility is the vehicle 102 a hybrid electric vehicle (HEV) powered by both an internal combustion engine and one or more electric motors, such as a series hybrid electric vehicle (SHEV) Parallel hybrid electric vehicle (PHEV) or a parallel / series hybrid electric vehicle (PSHEV). Because the type and configuration of the vehicle 102 can also vary according to the capabilities of the vehicle 102 vary. As some other options, the vehicles can 102 different abilities in terms of passenger capacity, hitch and load and storage space.

Das VCS 106 kann dazu konfiguriert sein, Sprachbefehls- und BLUETOOTH-Schnittstellen zum Fahrer und Fahrermobilgeräten zu unterstützen, Benutzereingaben über verschiedene Tasten oder andere Steuerungen zu empfangen und einem Fahrer oder anderen Insassen des Fahrzeugs 102 Fahrzeugstatusinformationen bereitzustellen. Ein beispielhaftes VCS 106 kann das SYNC®-System sein, das durch die FORD MOTOR COMPANY aus Dearborn, Michigan, bereitgestellt wird.The VCS 106 may be configured to support voice command and BLUETOOTH interfaces to the driver and RVs, to receive user input via various buttons or other controls, and to a driver or other occupant of the vehicle 102 Provide vehicle status information. An exemplary VCS 106 may be the SYNC ® system, which is provided by the Ford Motor Company of Dearborn, Michigan.

Das VCS 106 kann ferner verschiedene Arten von Rechenvorrichtungen zur Unterstützung der Leistung der Funktionen des hier beschriebenen VCS 106 beinhalten. In einem Beispiel kann das VCS 106 einen oder mehrere Prozessoren, die dazu ausgelegt sind, Computeranweisungen auszuführen, und ein Speichermedium, auf dem die computerausführbaren Anweisungen und/oder Daten verwaltet werden können, beinhalten. Ein computerlesbares Speichermedium (auch als prozessorlesbares Medium oder Speicher bezeichnet) beinhaltet ein beliebiges nichtflüchtiges (z. B. physisches) Medium, das an der Bereitstellung von Daten (z. B. Anweisungen) beteiligt ist, die von einem Computer (z. B. von dem/den Prozessor(en)) gelesen werden können. Im Allgemeinen empfängt ein Prozessor Anweisungen und/oder Daten, z. B. vom Speicher usw., an einen Arbeitsspeicher und führt die Anweisungen unter Verwendung der Daten aus, wodurch sie einen oder mehrere Prozesse durchführen, darunter einen oder mehrere der hierin beschriebenen Prozesse. Computerausführbare Anweisungen können von Computerprogrammen zusammengestellt oder ausgewertet werden, die unter Verwendung einer Reihe von Programmiersprachen und/oder -technologien erstellt wurden, einschließlich unter anderem und entweder für sich oder in Kombination Java, C, C++, C#, Fortran, Pascal, Visual Basic, Python, Java Script, Perl, PL/SQL usw.The VCS 106 may also include various types of computing devices to support the performance of the functions described herein VCS 106 include. In one example, this can VCS 106 one or more processors adapted to execute computer instructions and a storage medium on which the computer-executable instructions and / or data may be managed. A computer-readable storage medium (also referred to as a processor-readable medium or storage) includes any nonvolatile (eg, physical) medium that participates in the provision of data (e.g., instructions) that may be provided by a computer (e.g. from the processor (s)). In general, a processor receives instructions and / or data, e.g. From memory, etc., to a memory and executes the instructions using the data, thereby performing one or more processes, including one or more of the processes described herein. Computer-executable instructions may be compiled or evaluated by computer programs constructed using a variety of programming languages and / or technologies including, but not limited to, and alone or in combination Java, C, C ++, C #, Fortran, Pascal, Visual Basic, Python, Java Script, Perl, PL / SQL, etc.

Das VCS 106 kann dazu konfiguriert sein, mit der TCU 120A zu kommunizieren. Die TCU 120A kann eine Vielzahl von Modems 122 beinhalten, die zur paketvermittelten oder leitungsvermittelten Signalisierung der Lage sind. Die TCU 120A kann den Betrieb der Modems 122 derart steuern, dass ein geeigneter Kommunikationsweg verwendet wird. Die Modems können dazu konfiguriert sein, über eine Vielfalt von Kommunikationswegen zu kommunizieren. Die Wege können mit leitungsvermittelter 130, paketvermittelter 132, 134 Signalisierung oder Kombinationen davon konfiguriert sein. Die Wege der paketvermittelten Kommunikation 132, 134 können auf Internetprotokoll (IP) beruhen oder paketbasierte Vermittlung verwenden, um Informationen zu übertragen. Zum Beispiel kann es sich bei der paketvermittelten Kommunikation um Long-Term-Evolution-(LTE-)Kommunikationen handeln. In einigen Fällen kann der Weg der leitungsvermittelten 130 Kommunikation SIGTRAN oder eine andere Umsetzung sein, die leitungsvermittelte Signalisierungsinformationen über IP trägt. Die zugrundeliegenden Signalisierungsinformationen sind jedoch noch immer unter dem leitungsvermittelten Protokoll formatiert.The VCS 106 can be configured with the TCU 120A to communicate. The TCU 120A Can a variety of modems 122 which are capable of packet-switched or circuit-switched signaling of the situation. The TCU 120A can the operation of the modems 122 control such that an appropriate communication path is used. The modems may be configured to communicate over a variety of communication paths. The paths can be circuit-switched 130 , packet-switched 132 . 134 Signaling or combinations thereof be configured. The ways of packet-switched communication 132 . 134 may be based on Internet Protocol (IP) or use packet-based arbitration to transmit information. For example, packet-switched communication may be long-term evolution (LTE) communications. In some cases, the route may be circuit-switched 130 Communication SIGTRAN or another implementation that carries circuit-switched signaling information over IP. However, the underlying signaling information is still formatted under the circuit switched protocol.

Das VCS 106 kann zudem Eingaben von Steuerungen 108 von Mensch-Maschine-Schnittstellen (human-machine interface - HMI) empfangen, die dazu konfiguriert sind, eine Interaktion der Insassen mit dem Fahrzeug 102 bereitzustellen. Zum Beispiel kann das VCS 106 mit einer oder mehreren Tasten oder anderen HMI-Steuerungen 108, die dazu konfiguriert sind, Funktionen auf dem VSC 106 aufzurufen (z. B. Audiotasten am Lenkrad, einer Sprechtaste, Steuerungen am Armaturenbrett usw.), eine Schnittstelle herstellen. Das VCS 106 kann zudem eine oder mehrere Anzeigen 110, die dazu konfiguriert sind, z. B. über eine Videosteuerung eine visuelle Ausgabe für Fahrzeuginsassen bereitzustellen, antreiben oder anderweitig damit kommunizieren. In einigen Fällen kann die Anzeige 110 ein Touchscreen sein, der ferner dazu konfiguriert ist, berührungsbasierte Eingaben des Benutzers über die Videosteuerung zu empfangen, wohingegen die Anzeige 110 in anderen Fällen lediglich eine Anzeige ohne berührungsbasierte Eingabefähigkeiten sein kann. In einem Beispiel kann die Anzeige 110 eine Kopfeinheitsanzeige sein, die in einem Mittelkonsolenbereich der Kabine des Fahrzeugs 102 beinhaltet ist. Bei einem anderen Beispiel kann die Anzeige 110 ein Bildschirm eines Kombi-Instruments des Fahrzeugs 102 sein.The VCS 106 can also input controls 108 receive human-machine interfaces (HMIs) configured to interact with the vehicle 102 provide. For example, that can VCS 106 with one or more keys or other HMI controllers 108 that are configured to work on the VSC 106 (eg audio buttons on the steering wheel, a PTT button, controls on the dashboard, etc.), establish an interface. The VCS 106 can also have one or more ads 110 that are configured to To provide, drive, or otherwise communicate with a visual output to vehicle occupants via a video controller. In some cases, the ad can 110 a touchscreen, which is further configured to receive user touch-based inputs via the video controller, whereas the display 110 in other cases, can only be an ad without touch-based input capabilities. In one example, the ad 110 a head unit display located in a center console area of the cabin of the vehicle 102 is included. In another example, the display may 110 a screen of a combination instrument of the vehicle 102 his.

Das VCS 106 kann ferner dazu konfiguriert sein, über ein oder mehrere fahrzeuginterne Netzwerke 112 oder Fahrzeugbusse 112 mit anderen Komponenten des Fahrzeugs 102 zu kommunizieren. Die fahrzeuginternen Netzwerke 112 können beispielsweise eines oder mehrere der Folgenden beinhalten: ein lokales Netzwerk der Fahrzeugsteuerung (CAN), ein Ethernet-Netzwerk oder eine mediengebundene Systemübertragung (MOST). Die fahrzeuginternen Netzwerke 112 können es dem VCS 106 ermöglichen, mit anderen Systemen des Fahrzeugs 102 zu kommunizieren, wie etwa einem Fahrzeugmodem der TCU 120A (das in einigen Konfigurationen unter Umständen nicht vorhanden ist), einem Modul 120B eines globalen Positionsbestimmungssystems (global positioning system - GPS), das dazu konfiguriert ist, Informationen zum/zur derzeitigen Standort und Richtung des Fahrzeugs 102 bereitzustellen, und verschiedenen anderen Fahrzeug-ECUs, die dazu konfiguriert sind, mit dem VCS 106 zusammenzuarbeiten. Unter anderem können zu den Fahrzeug-ECUs beispielsweise ein Antriebsstrangsteuermodul (Powertrain Control Module - PCM) 120C, welches konfiguriert ist, um die Betriebskomponenten des Motors zu steuern (z. B. Leerlaufregler, Komponenten der Kraftstoffzufuhr, Komponenten zur Schadstoffausstoßüberwachung usw.) und die Betriebskomponenten des Motors zu überwachen (z. B. Status von Diagnosecodes des Motors); ein Karosseriesteuermodul (Body Control Module - BCM) 120D, welches konfiguriert ist, um unterschiedliche Funktionen zur Leistungssteuerung zu verwalten, wie beispielsweise Außenbeleuchtung, Innenraumbeleuchtung, schlüsselloser Zugang, Fernstart, und den Status von Zugangspunkten überprüft (z. B. Schließstatus der Motorhaube, der Türen und/oder des Kofferraums des Fahrzeugs 102); eine Funksprechvorrichtung (Radio Transceiver Module - RCM) 120E, welche so konfiguriert ist, dass sie mit Schlüsselanhängern oder anderen lokalen Vorrichtungen des Fahrzeugs 102 kommuniziert; ein Modul zur Klimatisierungsverwaltung (Climate Control Management - CCM) 120F, welches konfiguriert ist, um die Heiz- und Kühlsystemkomponenten zu steuern und zu überwachen (z. B. Steuerung von Kompressorkupplung und Gebläselüfter, Temperatursensorinformationen usw.); und ein Batteriesteuermodul (Battery Control Module - BACM) 120G gehören, welches konfiguriert ist, um den Ladestatus oder andere Parameter der Batterie 104 des Fahrzeugs 102 zu überwachen.The VCS 106 may also be configured via one or more in-vehicle networks 112 or vehicle buses 112 with other components of the vehicle 102 to communicate. The in-vehicle networks 112 For example, one or more of the following may include: a local network of the vehicle controller ( CAN ), an Ethernet network or a media-based system transmission (MOST). The in-vehicle networks 112 can it VCS 106 enable with other systems of the vehicle 102 to communicate, such as a vehicle modem of TCU 120A (which may not be present in some configurations), a module 120B a global positioning system (global positioning system) GPS ) configured to provide information about the current location and direction of the vehicle 102 and various other vehicle ECUs configured to VCS 106 together. Among other things, the vehicle ECUs may include, for example, a powertrain control module (PCM). 120C configured to control engine operating components (eg, idle controllers, fueling components, pollution emission monitoring components, etc.) and to monitor engine operating components (eg, engine diagnostic status); a body control module (Body Control Module - BCM ) 120D , which is configured to manage various power control functions, such as exterior lighting, interior lighting, keyless entry, remote startup, and the status of access points (eg, closure status of the hood, doors, and / or trunk of the vehicle) 102 ); a radio transceiver module (RCM) 120E , which is configured to work with key fobs or other local devices of the vehicle 102 communicating; a module for Climate Control Management (CCM) 120F configured to control and monitor the heating and cooling system components (eg, compressor clutch and blower fan control, temperature sensor information, etc.); and a Battery Control Module (BACM) 120G which is configured to the charging status or other parameters of the battery 104 of the vehicle 102 to monitor.

In einem Beispiel kann das VCS 106 dazu konfiguriert sein, durch Kommunizieren mit der TCU 120A über einen Fahrzeugbus 112 auf die Kommunikationsmerkmale der TCU 120A zuzugreifen. Als einige Beispiele kann der Fahrzeugbus 112 einen Controller-Area-Network-(CAN-)Bus, einen Ethernet-Bus oder einen MOST-Bus beinhalten. In anderen Beispielen kann das VCS 106 mit dem Server 150 über ein Servermodem 152 unter Verwendung der Kommunikationsdienste der Modems 122 kommunizieren.In one example, this can VCS 106 be configured to communicate with the TCU 120A via a vehicle bus 112 on the communication features of the TCU 120A access. As some examples, the vehicle bus 112 a Controller Area Network (CAN) bus, an Ethernet bus or a MOST bus. In other examples, the VCS 106 with the server 150 via a server modem 152 using the communication services of the modems 122 communicate.

Unter Bezugnahme auf 2 kann das Fahrzeug 102 einen Verbrennungsmotor 113, einen Startgenerator 114, eine Batterie 116 und elektrische Verbraucher 118 beinhalten. Das Steuernetzwerk 112 kann sich mit allen dieser Fahrzeugsysteme durch Sensoren (z.B. Kraftstofffüllstandssensor 115, Ölsensor 117) oder Fahrzeugsystemsteuerungen (z. B. 120A, 120B, 120C, 120D, 120E, 120F 120G) verbunden. Beispielsweise kann das Steuernetzwerk 112 die Fahrzeugsysteme steuern, um eine autonome Steuerung bereitzustellen. Der Verbrennungsmotor 113 kann eine direkte mechanische Verbindung zum Startergenerator 114 aufweisen. Der Startergenerator 114 kann mit der Batterie 116 und den elektrischen Verbrauchern 118 elektrisch verbunden sein. Die Batterie 116 kann mit den elektrischen Verbrauchern 118 verbunden sein. Als Reaktion auf das Mithören der vorstehend erwähnten Unterhaltung kann das VCS 106 erkennen, dass die Fahrzeuginsassen nach Detroit fahren möchte, wenn sie ausreichend Kraftstoff haben. Das VCS 106 kann Daten von Fahrzeugsensoren beziehen (d. h. Kraftstofffüllstandssensor 115), um den übrigen Kraftstoff im Kraftstofftank zu bestimmen. Das VCS 106 kann den erwarteten Kraftstoffverbrauch für den aktuellen Standort des Fahrzeugs 102 zum Symphonieorchester anfordern. Tatsächlich kann das Fahrzeug 102 der Unterhaltung der Insassen zuhören und bei Aufforderung eine Antwort bereitstellen, ohne dass es erforderlich ist, die Frage erneut zu stellen oder zusätzliche Informationen bereitzustellen.With reference to 2 can the vehicle 102 an internal combustion engine 113 , a startup generator 114 , a battery 116 and electrical consumers 118 include. The control network 112 can with all of these vehicle systems through sensors (eg fuel level sensor 115 , Oil sensor 117 ) or vehicle system controls (eg 120A . 120B . 120C . 120D . 120E . 120F 120G ) connected. For example, the control network 112 control the vehicle systems to provide autonomous control. The internal combustion engine 113 can be a direct mechanical connection to the starter generator 114 respectively. The starter generator 114 can with the battery 116 and the electrical consumers 118 be electrically connected. The battery 116 can with the electrical consumers 118 be connected. In response to listening to the above-mentioned conversation, the VCS 106 Recognize that the vehicle occupants want to drive to Detroit, if they have enough fuel. The VCS 106 can obtain data from vehicle sensors (ie, fuel level sensor 115 ) to determine the remaining fuel in the fuel tank. The VCS 106 can estimate the expected fuel consumption for the current location of the vehicle 102 request to the symphony orchestra. In fact, the vehicle can 102 Listen to the conversation of the inmates and provide a response when prompted, without it being necessary to reconsider the question or provide additional information.

In Bezug auf die 3A-B ist ein Algorithmus 300 gezeigt. Der Algorithmus 300 beginnt in Schritt 302. Eine Umsetzung des Algorithmus 300 kann zusätzliche oder weniger Schritte beinhalten und die Schritte können in einer anderen Reihenfolge durchgeführt werden. Die Schritte können außerdem gleichzeitig, zu ähnlichen Zeitpunkten, oder nacheinander durchgeführt werden. In Schritt 304 sammelt das VCS 106 oder sammeln andere Prozessoren verbale Äußerungen. Die verbalen Äußerungen können Worte, Aussagen, geäußerte Wörter oder Unterhaltungen von den Insassen in oder nahe dem Fahrzeug sein, die zum Erfassen durch das Mikrofon oder eine Anordnung von Mikrofonen 124 verfügbar sind. In Schritt 306 werden die Themen innerhalb der verbalen Äußerungen ermittelt. Die Themen können auf Grundlage eines beliebigen Verarbeitungsalgorithmus von natürlicher Sprache ermittelt werden. Ein beliebiger Teil der Sprache - eine oder Kombination davon - kann verwendet werden, um die Themen zu bestimmen (z. B. Substantive, Verben). Die Themen werden ermittelt, um später mit der gestellten Frage assoziiert zu werden. Die Themen können Teile eines Satzes oder ein gesamter Satz sein. Die Themen können durch Verb-Substantiv-Assoziationen oder andere grammatikalische, syntaktische oder semantische Assoziationen gebildet werden.Regarding the 3A-B is an algorithm 300 shown. The algorithm 300 starts in step 302 , An implementation of the algorithm 300 may include additional or fewer steps, and the steps may be performed in a different order. The steps may also be performed simultaneously, at similar times, or in sequence. In step 304 collects the VCS 106 or other processors collect verbal utterances. The verbal utterances may be words, statements, uttered words, or conversations from the occupants in or near the vehicle that are detectable by the microphone or an array of microphones 124 Are available. In step 306 the topics are determined within the verbal utterances. The topics can be determined based on any natural language processing algorithm. Any part of the language - one or a combination thereof - can be used to determine the topics (eg nouns, verbs). The topics are determined to be later associated with the question asked. The topics can be parts of a sentence or an entire sentence. The topics can be formed by verb-noun associations or other grammatical, syntactic or semantic associations.

In Schritt 308 wartet das VCS 106 auf eine Erkennung eines Verweisobjekts. Ein Verweisobjekt kann ein beliebiges Wort oder Spruch sein, das/der mit dem Fahrzeug assoziiert ist (z. B. Hersteller, Modell, Software-Anbieter, Infotainmentsystem-Anbieter, Marke in Verbindung mit dem Fahrzeug oder dem Fahrzeughersteller). Das Verweisobjekt kann Teil einer Bestätigungsfragenformulierung oder einer Bestätigungsfrage sein.In step 308 wait that VCS 106 to a recognition of a reference object. A reference object may be any word or phrase associated with the vehicle (eg, manufacturer, model, software vendor, infotainment system vendor, brand associated with the vehicle or vehicle manufacturer). The reference object may be part of a confirmation question formulation or a confirmation question.

In Schritt 324 wird eine Kontextbewertung mit einer Syntaxbewertung verglichen. Die Kontextbewertung kann auf der Themenbewertung der in Schritt 306 ermittelten Themen beruhen. Dies bedeutet, dass das Vertrauen, dass eine bestimmte Aussage, eine bestimmte Formulierung oder ein bestimmtes Wort mit einem bestimmten Thema und Kontext assoziiert ist, auf Grundlage einer Vielfalt von Verfahren für das Erlernen natürlicher Sprache und maschinelle Lernen bestimmt werden kann. Zum Beispiel beinhaltet die Aussage „das Detroit Symphonieorchester spielt heute Abend in Detroit“ zwei Themen. Ein Thema in der Aussage kann das Detroit Symphonieorchester sein. Ein zweites Thema kann die Stadt Detroit sein. Bei dem Kontext der Aussage kann es sich um musikalische Ereignisse handeln. Da die Aussage direkt mit dem Kontext assoziiert wird, kann die Kontextvertrauensbewertung als hoch, qualitativ, oder über 75, quantitativ, gekennzeichnet werden. Gleichermaßen beinhaltet die Aussage „die Detroit Kunstgalerie richtet heute Abend eine Ausstellung in Detroit aus“ zwei ähnliche Themen, die eine gewisse Beziehung zu dem Kontext der musikalischen Ereignisse aufweisen können. Die Kontextbewertung in dieser Situation kann deutlich geringer sein, da das Thema nicht konkret musikalische Aufführung ist, denn stattdessen bezieht es sich auf künstlerische Aufführungen. Aus diesem Grund kann die Kontextvertrauensbewertung als mittelmäßig, qualitativ, oder über 50, quantitativ, gekennzeichnet werden. Die höchste Kontextbewertung kann mit der Syntaxbewertung verglichen werden.In step 324 a context evaluation is compared with a syntax evaluation. The contextual evaluation may be based on the topic evaluation of the step in 306 based on established topics. This means that the confidence that a particular statement, phrase, or word is associated with a particular theme and context can be determined based on a variety of methods for learning natural language and machine learning. For example, the statement "the Detroit Symphony Orchestra plays tonight in Detroit" includes two themes. One topic in the statement may be the Detroit Symphony Orchestra. A second topic may be the city of Detroit. The context of the statement can be musical events. Since the statement is directly associated with the context, the context confidence score can be considered high, qualitative, or about 75 , quantitatively. Similarly, the statement "The Detroit Art Gallery is hosting an exhibition in Detroit tonight" includes two similar themes that may have some relation to the context of musical events. The contextual evaluation in this situation can be significantly less, since the theme is not concrete musical performance, because instead it refers to artistic performances. For this reason, the context confidence rating may be considered mediocre, qualitative, or about 50 , quantitatively. The highest context score can be compared to the syntax score.

Die Syntaxbewertung kann syntaktisch bestimmen, ob eine Bestätigungsfragenformulierung vorhanden ist und das Verweisobjekt Teil der Bestätigungsfragenformulierung ist. Zum Beispiel kann die Bestätigungsfragenformulierung einfach Folgendes sein: „Ford®?“ Auch wenn Ford® am Ende einer Aussage als eine Bestätigungsfragenformulierung steht - was eine rückwärts gerichtete Kadenz anzeigt - kann es auch am Anfang einer vorwärts gerichteten Kadenz stehen. Der Algorithmus kann unter Verwendung bekannter und unbekannter Verfahren bestimmen, ob das Verweisobjekt Ford® syntaktisch am Anfang oder Ende der Frage steht. Die Vertrauensbewertung darüber, ob eine vorwärts gerichtete oder eine rückwärts gerichtete Kadenz verwendet wird, kann qualitativ oder quantitativ gekennzeichnet werden, wie vorstehend beschrieben. Eine Formulierung mit der höchsten Syntaxbewertung kann folgendermaßen lauten: „_(Thema)___. Was denkst du, Ford®?“ Während eine Formulierung mit einer geringen Bewertung folgendermaßen lauten kann: „Hey Ford® _(Thema)_.“ Der Grund dafür ist, dass eine rückwärts gerichtete Kadenz fast nie mit „Hey Ford®“ vor dem Thema assoziiert wird, und eine Formulierung wie „Was denkst du, Ford®?“ mehrdeutig dafür ist, ob das Thema vor oder hinter der Formulierung steht. Aus diesem Grund ist die Syntaxbewertung eine Darstellung dafür, ob die Kadenz vorwärts oder rückwärts gerichtet ist.The syntactic can syntactically determine if a confirmation question formulation exists and the reference object is part of the confirmation question formulation. For example, the confirmation question formulation may simply be "Ford®?" Even though Ford® stands at the end of a statement as a confirmation question formulation - indicating a backward cadence - it may also be at the beginning of a forward cadence. The algorithm may determine, using known and unknown methods, whether the reference object Ford® is syntactically at the beginning or end of the question. The confidence score as to whether a forward or backward cadence is being used may be qualitatively or quantitatively characterized as described above. A phrase with the highest syntax rating can be: "_ (topic) ___. What do you think Ford®? "While a formulation with a low rating may read," Hey Ford® _ (subject) _. "The reason for this is that a reverse cadence almost never ends with" Hey Ford® "in front of the Topic, and a phrase like "What do you think, Ford®?" Is ambiguous for whether the topic is in front of or behind the wording. For this reason, the syntax score is an indication of whether the cadence is forward or backward.

In Schritt 326 und Schritt 328 werden nicht abfragende Äußerungen von Verweisobjekten gefiltert, um unbeabsichtigte Aufforderungen zu verhindern. Wenn das Verweisobjekt nicht Teil einer Bestätigungsfragenformulierung (z. B. rückwärts gerichtete Kadenz) oder einer aktiven Aufforderung (z. B. vorwärts gerichtete Kadenz) ist, kehrt der Algorithmus zu Schritt 306 zurück. Wenn das Verweisobjekt Teil der Bestätigungsfragenformulierung gemäß einer syntaktischen Vertrauensbewertung über einem vorbestimmten Schwellenwert - oder über einem Schwellenwert, der relativ zur Kontextbewertung festgelegt wurde - ist, geht der Algorithmus zu Schritt 338 über. Wenn das Verweisobjekt nicht Teil der Bestätigungsfragenformulierung gemäß einer syntaktischen Vertrauensbewertung über einem vorbestimmten Schwellenwert - oder über einem Schwellenwert, der relativ zur Kontextbewertung festgelegt wurde - ist, geht der Algorithmus zu Schritt 328 über.In step 326 and step 328 Non-query utterances are filtered by reference objects to prevent inadvertent requests. If the reference object is not part of a confirmation question formulation (eg, backward cadence) or an active prompt (eg, forward cadence), the algorithm returns to step 306 back. If the referral object is part of the confirmation question formulation according to a syntactic confidence score above a predetermined threshold - or above a threshold set relative to the context score - the algorithm goes to step 338 about. If the referral object is not part of the confirmation query formulation according to a syntactic confidence score above a predetermined threshold - or above a threshold set relative to the context score - the algorithm goes to step 328 about.

Nachdem eine Bestätigungsfragenformulierung in Schritt 326 detektiert wurde, wählt der Algorithmus ein bereits erfasstes Thema aus den verbalen Äußerungen auf Grundlage von Kontexten aus, wie im Teilalgorithmus A 310 definiert. Der Teilalgorithmus A 310 sammelt Informationen, um Kontexte zu definieren. Kontexte können Kategorien von Themen oder andere logische Darstellungen sein, die dazu konfiguriert sind, Klassen der Fahrzeugbetriebsparameter darzustellen. Wie in Schritt 312 gezeigt, ermittelt der Teilalgorithmus A 310 Kontexte innerhalb von verbalen Äußerungen. Die Kontextermittlung kann im Allgemeinen Nährstoffinformationen beinhalten, während die Themenermittlung stärker auf eine Frage über Nährstoffe in einem Schokoriegel abgestimmt ist. Die Liste von Kontexten (z. B. Nährstoffe, Entfernung zum Ziel, Orte von Interesse, Wetter) kann stark auf das Fahrzeug in Schritt 314 abgestimmt werden, sodass generische Informationsanforderungen nicht verfügbar sind (z. B. Antworten auf Arithmetik, Betonung von Wörtern). Dies bedeutet, dass umfassende Fragenabruffähigkeiten unter der Annahme, dass das Fragen in Bezug auf das Fahrzeug oder die Fahrt vorhanden sind, gegebenenfalls von dem Hersteller oder Insassen eingeschränkt werden können.After a confirmation question formulation in step 326 has been detected, the algorithm selects an already-captured topic from the verbal utterances based on contexts, as in the sub-algorithm A 310 Are defined. The subalgorithm A 310 collects information to define contexts. Contexts can be categories of topics or other logical representations configured to represent classes of vehicle operating parameters. As in step 312 shown, determines the sub-algorithm A 310 Contexts within verbal utterances. Contextual determination may generally include nutritional information, while fact-finding is more focused on a question about nutrients in a candy bar. The list of contexts (such as nutrients, distance to the destination, places of interest, weather) can be highly responsive to the vehicle in step 314 so that generic information requirements are not available (eg answers to arithmetic, emphasis on words). This means that comprehensive question polling capabilities may be constrained by the manufacturer or occupants, assuming that questions related to the vehicle or the ride are present.

Gleichermaßen werden in Schritt 316 Fahrzeugbetriebsparameter analysiert, um Kontexte bereitzustellen. Zum Beispiel kann das Fahrzeug dazu konfiguriert sein, fahrzeugspezifische Parameterkontexte zu schaffen, die für den Frage-Antwort-Dienst verfügbar sind. Dies bedeutet, dass Kontexte in Verbindung mit der Öllebensdauer, dem Kraftstofffüllstand, dem Ladezustand, dem Klimastatus, der Motortemperatur oder anderen Fahrzeugparametern durch die Kontexte in Schritt 316 zur Verfügung gestellt werden können. Ein maschineller Algorithmus oder Hersteller kann in Schritt 318 die Betriebsparameter auswählen, die zum Abrufen der Antwort verfügbar sind. Zum Beispiel kann die Öltemperatur ein verfügbarer Fahrzeugparameter sein, jedoch kann ein maschineller Lernalgorithmus bestimmen, dass der Kontext nicht zur Verfügung gestellt werden sollte, da Fragen über die Motoröltemperatur selten gestellt werden. Fahrzeugparameterkontexte können eine stärkere Gewichtung erhalten als die Kontexte der sprachlichen Äußerung.Similarly, in step 316 Vehicle operating parameters analyzed to provide contexts. For example, the vehicle may be configured to provide vehicle-specific parameter contexts that are available to the question and answer service. This means that contexts related to oil life, fuel level, state of charge, air conditioning status, engine temperature, or other vehicle parameters are determined by the contexts in step 316 can be made available. A machine algorithm or manufacturer may step in 318 select the operating parameters needed to retrieve the answer Are available. For example, the oil temperature may be an available vehicle parameter, however, a machine learning algorithm may determine that the context should not be provided because questions about engine oil temperature are rarely provided. Vehicle parameter contexts may receive a stronger weighting than the contexts of the linguistic utterance.

In Schritt 320 werden die Kontexte dem Benutzer dargestellt. Dies bedeutet, dass der Benutzer ferner auswählen kann, welche Kontexte er durch den Antwortdienst beantwortet haben möchte. Die Kontexte können unter Verwendung der HMI-Steuerungen 108 oder des Anzeigebildschirms 110 dargestellt werden. Die Kontexte können von dem System den Insassen vorgelesen werden und die Insassen können die richtige Kontextauswahl bereitstellen. Beispielsweise kann das Fahrzeug Folgendes angeben: „Zeile 1: Wetter.“ Der Insasse kann dann verbal bestätigen, dass Zeile eins die richtige Auswahl ist, indem er „Eins“ sagt. Die Kontexte können derart dargestellt werden, dass die am häufigsten verwendeten Kontexte zuerst dargestellt werden. Die Kontexte können auch in einer Reihenfolge auf Grundlage der verbalen Äußerungen, die bereits empfangen wurde, und der Häufigkeit der zu erörternden Kontexte dargestellt werden. Wenn beispielsweise das Wetter in Detroit ein Thema ist, welches während einer Fahrt erörtert wurde, kann der Wetterkontext dem Benutzer als primäre Option dargestellt werden. In Schritt 322 werden die Kontextauswahlen durch den Benutzer zur Verwendung in Schritt 338 empfangen. Die Kontexte können Gewichtungen zugeordnet werden, um den Antwortdienst zu verbessern. Beispielsweise kann der stark erörterte Wetterkontext eine stärkere Gewichtung erhalten als die selten erörterte Öltemperatur. Während alle anderen Themen gleich sind, erhält der stärker gewichtete Kontext eine Themenauswahlpriorität gegenüber dem nicht gewichteten oder weniger gewichteten Kontext im Themenauswahlprozess von Schritt 338.In step 320 the contexts are presented to the user. This means that the user can further select which contexts he would like answered by the answering service. The contexts can be made using the HMI controllers 108 or the display screen 110 being represented. The contexts can be read by the system to the occupants and the occupants can provide the correct context selection. For example, the vehicle may indicate: "Line 1: Weather." The occupant may then verbally confirm that line one is the correct choice by saying "one." The contexts can be displayed in such a way that the most frequently used contexts are displayed first. The contexts may also be presented in an order based on the verbal utterances already received and the frequency of the contexts to be discussed. For example, if the weather in Detroit is an issue that has been discussed during a trip, the weather context may be presented to the user as a primary option. In step 322 The context selections are made by the user for use in step 338 receive. The contexts can be assigned weights to improve the response service. For example, the heavily discussed weather context may receive a heavier weighting than the rarely discussed oil temperature. While all other topics are the same, the more weighted context receives a topic selection priority over the unweighted or less weighted context in the topic selection process of step 338 ,

In Schritt 338 sind die ausgewählten Kontexte zusammen mit den ermittelten Themen bekannt. Der Algorithmus kann dann das zu bestimmende Thema auf Grundlage der Kontexte erkennen. Die Themenauswahl kann die Gewichtungen berücksichtigen, die auf die Kontexte angewandt werden, in dem sich jedes Thema befindet. Zum Beispiel können Themen innerhalb des Wetterkontextes eine Priorität gegenüber Themen im Öltemperaturkontext erhalten. Ferner können die syntaktische und semantische Stärke der Themen gewichtet werden. Zum Beispiel kann ein Vertrauenswert des Themas auf Grundlage der Bedingung der verbalen Äußerung bestimmt werden. Dies bedeutet, dass Formulierungen, die eine grammatikalische Übereinstimmung aufweisen, in den stärker gewichteten Kontext fallen, jedoch aufgrund der syntaktischen oder semantischen Bewertung unberücksichtigt gelassen werden. Zusätzlich kann die Nähe zur Bestätigungsfragenformulierung verwendet werden, um das Gewicht des Themas weiter zu gewichten. Zum Beispiel kann die Bewertung von Themen, die direkt vor der Bestätigungsfragenformulierung stehen, verdoppelt oder um einen Faktor multipliziert werden. Dies bedeutet, dass ein Kontext mit einer geringen Gewichtung gegenüber einem Kontext mit einer hohen Gewichtung ausgewählt werden kann, wenn das Thema unmittelbar vor der Bestätigungsfragenformulierung steht und die syntaktische und semantische Bewertung für das Wetterthema gering sind.In step 338 the selected contexts are known together with the identified topics. The algorithm can then recognize the topic to be determined based on the contexts. The topic selection can take into account the weights applied to the contexts in which each topic resides. For example, topics within the weather context may be given a priority over topics in the oil temperature context. Furthermore, the syntactic and semantic strength of the topics can be weighted. For example, a confidence score of the topic may be determined based on the condition of the verbal utterance. This means that formulations that have a grammatical match fall into the more weighted context, but are disregarded due to syntactic or semantic evaluation. In addition, proximity to the confirmation question formulation can be used to further weight the weight of the topic. For example, the rating of topics that are directly in front of the confirmation question formulation can be doubled or multiplied by a factor. This means that a context with a low weighting can be selected over a context with a high weighting if the topic is just before the confirmation question formulation and the syntactic and semantic score for the weather topic is low.

In Schritt 340 wird das ausgewählte Thema mit der höchsten Vertrauensbewertung zum Server 150 gesendet, um beantwortet zu werden. Der Server 150 stellt die wahrscheinlichste Antwort durch die statistischen und maschinellen Lernalgorithmen darin bereit. Ein beliebiger Antwortdienst kann die Antwort bereitstellen und die Antwort muss sich nicht auf ein Fahrzeug beziehen. Die Antwort kann zum Fahrzeug zurückgesendet und den Insassen in Schritt 342 dargestellt werden. Das Fahrzeug 102 kann dann in Schritt 344 das Fahrzeug auf Grundlage der Antwort automatisch betreiben oder den Benutzer auffordern, eine Vorgehensweise auszuwählen. Wenn beispielsweise das ausgewählte Thema Folgendes war: „Ich sage, wir haben ausreichend Kraftstoff, um nach Detroit zu kommen“, kann das Fahrzeug eine Strecke nach Detroit zur Symphonie vorbereiten und das Auto autonom zum Ziel navigieren.In step 340 becomes the selected topic with the highest trust rating for the server 150 sent to be answered. The server 150 Provides the most likely answer through the statistical and machine learning algorithms in it. Any answering service can provide the answer and the answer does not have to relate to a vehicle. The answer can be sent back to the vehicle and the occupants in step 342 being represented. The vehicle 102 can then in step 344 automatically operate the vehicle based on the answer or prompt the user to select a course of action. For example, if the selected topic was "I say we have enough fuel to get to Detroit," the vehicle can prepare for the symphony and drive the car autonomously to the destination.

In Schritt 328 bestimmt das VCS 106, ob das Verweisobjekt Teil einer vorwärts gerichteten Kadenz ist. Die Bestimmung der vorwärts gerichteten Kadenz kann auf dem Vergleich von Kontext- und syntaktischen Bewertungen beruhen. Zum Beispiel kann die syntaktische Bewertung hoch sein, wenn das Verweisobjekt von einer Begrüßung begleitet wird (z. B. „Hey Ford®“). Wenn das Verweisobjekt in Schritt 328 mit einer vorwärts gerichteten Kadenz assoziiert wird, ignoriert das VCS 106 alle Äußerungen vor dem Aufruf und speichert alle Äußerungen nach dem Aufruf in Schritt 330. In Schritt 332 sendet das VCS 106 die Abfrageaufforderung, die anhand der gespeicherten verbalen Äußerungen bestimmt wurden, zum Server 150. Der Server 150 stellt die wahrscheinlichste Antwort durch die statistischen und maschinellen Lernalgorithmen darin bereit. Ein beliebiger Antwortdienst kann die Antwort bereitstellen und die Antwort muss sich nicht auf ein Fahrzeug beziehen. Die Antwort kann zum Fahrzeug zurückgesendet und den Insassen in Schritt 334 dargestellt werden. Das Fahrzeug 102 kann dann in Schritt 336 das Fahrzeug auf Grundlage der Antwort automatisch betreiben oder den Benutzer auffordern, eine Vorgehensweise auszuwählen. Wenn die Aussage folgendermaßen lautete: „Hey Ford®, haben wir ausreichend Kraftstoff, um nach Detroit zu kommen“, kann das Fahrzeug bei einer bestätigenden Antwort eine Strecke nach Detroit zur Symphonie vorbereiten und das Auto autonom zum Ziel navigieren.In step 328 that determines VCS 106 whether the referenced object is part of a forward cadence. The determination of the forward cadence may be based on the comparison of contextual and syntactic evaluations. For example, the syntactic score may be high if accompanied by a greeting (eg, "Hey Ford®"). If the referral object in step 328 is associated with a forward cadence, ignoring that VCS 106 all utterances before the call and saves all utterances after the call in step 330 , In step 332 send that VCS 106 the query request determined from the stored verbal utterances to the server 150 , The server 150 Provides the most likely answer through the statistical and machine learning algorithms in it. Any answering service can provide the answer and the answer does not have to relate to a vehicle. The answer can be sent back to the vehicle and the occupants in step 334 being represented. The vehicle 102 can then in step 336 automatically operate the vehicle based on the answer or prompt the user to select a course of action. If the statement read, "Hey Ford®, we have enough fuel to get to Detroit," the vehicle can An affirmative answer prepare a route to Detroit to the symphony and navigate the car autonomously to the destination.

Bei den in der Beschreibung verwendeten Ausdrücken handelt es sich um beschreibende und nicht um einschränkende Ausdrücke, und es versteht sich, dass verschiedene Änderungen vorgenommen werden können, ohne vom Geist und Umfang der Offenbarung abzuweichen. Wie zuvor beschrieben, können die Merkmale verschiedener Ausführungsformen miteinander kombiniert werden, um weitere Ausführungsformen der Erfindung zu bilden, die unter Umständen nicht ausdrücklich beschrieben oder veranschaulicht sind. Zum Beispiel kann ein stets zuhörender Algorithmus verwendet werden, um Themen zu ermitteln, die einen Antwortdienst erfordern, und automatisch eine Antwort auf das Thema bereitzustellen, die unter Umständen nicht auf einem Betriebsparameter des Fahrzeugs beruht. Wenngleich verschiedene Ausführungsformen gegenüber anderen Ausführungsformen oder Umsetzungen nach dem Stand der Technik hinsichtlich einer oder mehrerer gewünschter Eigenschaften als vorteilhaft oder bevorzugt beschrieben worden sein könnten, erkennt der Durchschnittsfachmann, dass bei einem oder mehreren Merkmalen oder einer oder mehreren Eigenschaften Kompromisse eingegangen werden können, um die gewünschten Gesamtattribute des Systems zu erreichen, die von der konkreten Anwendung und Umsetzung abhängen. Diese Attribute können Kosten, Festigkeit, Lebensdauer, Lebenszykluskosten, Marktfähigkeit, Erscheinungsbild, Verpackung, Größe, Betriebsfähigkeit, Gewicht, Herstellbarkeit, einfache Montage usw. beinhalten, sind jedoch nicht auf diese beschränkt. Demnach liegen Ausführungsformen, die in Bezug auf eine oder mehrere Eigenschaften als weniger wünschenswert als andere Ausführungsformen oder Umsetzungen nach dem Stand der Technik beschrieben sind, nicht außerhalb des Schutzumfangs der Offenbarung und können für bestimmte Anwendungen wünschenswert sein.The terms used in the specification are words of description rather than limitation, and it is understood that various changes may be made without departing from the spirit and scope of the disclosure. As previously described, the features of various embodiments may be combined to form further embodiments of the invention, which may not be expressly described or illustrated. For example, an always-listening algorithm may be used to identify topics that require a response service and automatically provide a response to the topic, which may not be based on an operating parameter of the vehicle. While various embodiments may have been described as advantageous or preferred over other embodiments or prior art implementations with respect to one or more desired properties, one of ordinary skill in the art will recognize that one or more features or characteristics may be compromised in order to avoid such desired overall attributes of the system, depending on the specific application and implementation. These attributes may include, but are not limited to, cost, strength, life, life cycle cost, marketability, appearance, packaging, size, operability, weight, manufacturability, ease of assembly, and so forth. Accordingly, embodiments that are described as less desirable than other embodiments or prior art implementations with respect to one or more features are not outside the scope of the disclosure and may be desirable for particular applications.

Gemäß der vorliegenden Erfindung ist ein Fahrzeug bereitgestellt, aufweisend eine Steuerung, die dazu konfiguriert ist, als Reaktion auf eine Eingabe, die von verbalen Äußerungen stammt, die eine Gruppe von Formulierungen definieren, einschließlich eines vorhergehenden und folgenden Themas mit einem Verweisobjekt dazwischen, das mit nur einem der Themen durch Syntax assoziiert ist, eines der Themen zum Erzeugen einer Antwort auf eine Frage auszuwählen, die in der Gruppe eingebettet ist, und zwar auf Grundlage eines Betriebsparameters des Fahrzeugs und des Syntaxes, und eine Schnittstelle zu betreiben, um die Antwort auszugeben.According to the present invention, there is provided a vehicle comprising a controller configured to respond in response to an input originating from verbal utterances defining a group of phrases including a preceding and following topic having a reference object therebetween only one of the themes is syntactically selected to select one of the topics for generating a response to a query embedded in the group based on an operating parameter of the vehicle and the syntax, and to operate an interface to output the response ,

Gemäß einer Ausführungsform werden die Kontexte auf Grundlage von Aussagen erzeugt, die erfolgen, während ein Antwortalgorithmus nicht aufgerufen wird.According to one embodiment, the contexts are generated based on statements made while a response algorithm is not invoked.

Gemäß einer Ausführungsform werden das vorhergehende und das folgende Thema auf Grundlage der Kontexte bestimmt.According to one embodiment, the previous and following topics are determined based on the contexts.

Gemäß einer Ausführungsform werden eine Kontextbewertung von mindestens einem der Kontexte und eine Syntaxbewertung verglichen, um zu bestimmen, mit welchem Thema das Verweisobjekt assoziiert ist.According to one embodiment, a context score of at least one of the contexts and a syntax score are compared to determine which topic the referral object is associated with.

Gemäß einer Ausführungsform sind ein Kontext des Betriebsparameters und ein Kontext der verbalen Äußerungen gleich.According to one embodiment, a context of the operating parameter and a context of the verbal utterances are the same.

Gemäß einer Ausführungsform handelt es sich bei dem Betriebsparameter um einen Standort des Fahrzeugs.In one embodiment, the operating parameter is a location of the vehicle.

Gemäß einer Ausführungsform handelt es sich bei dem Betriebsparameter um die restliche Öllebensdauer.In one embodiment, the operating parameter is the remaining oil life.

Gemäß einer Ausführungsform handelt es sich bei dem Betriebsparameter um einen Kraftstofffüllstand des Fahrzeugs.In one embodiment, the operating parameter is a fuel level of the vehicle.

Gemäß einer Ausführungsform beruht die Antwort auf einer Schätzung des Kraftstofffüllstands für die Entfernung bis zu einem leeren Tank.In one embodiment, the response is based on an estimate of the fuel level for removal to an empty tank.

Gemäß einer Ausführungsform ist die Steuerung ferner dazu konfiguriert, ein Fahrzeugsteuersystem auf Grundlage der Antwort zu betreiben, sodass der Kraftstofffüllstand über null ist, bis ein Ziel erreicht ist.In one embodiment, the controller is further configured to operate a vehicle control system based on the response such that the fuel level is above zero until a destination is reached.

Gemäß einer Ausführungsform ist das Verweisobjekt ein Hersteller des Fahrzeugs.According to one embodiment, the reference object is a manufacturer of the vehicle.

Gemäß einer Ausführungsform ist die Steuerung ferner dazu konfiguriert, ein Fahrzeugsteuersystem auf Grundlage der Antwort zu betreiben.In one embodiment, the controller is further configured to operate a vehicle control system based on the response.

Gemäß einer Ausführungsform wird das Fahrzeugsteuersystem betrieben, um sicherzustellen, dass die Antwort zufriedenstellend ist, und zwar auf Grundlage des Betriebsparameters.In one embodiment, the vehicle control system is operated to ensure that the response is satisfactory based on the operating parameter.

Gemäß einer Ausführungsform werden die Kontexte auf Grundlage von Aussaugen erzeugt, während ein Antwortalgorithmus nicht aufgerufen wird, um die Themen zu bestimmen.According to one embodiment, the contexts are generated based on suction while a response algorithm is not called to determine the topics.

Gemäß einer Ausführungsform werden die Kontexte von einem Benutzer ausgewählt.According to one embodiment, the contexts are selected by a user.

Gemäß einer Ausführungsform wird die Antwort abgerufen, wenn das Thema ermittelt wurde.In one embodiment, the response is retrieved when the topic is discovered.

Gemäß der vorliegenden Erfindung ist ein Fahrzeug bereitgestellt, aufweisend eine Steuerung, die dazu konfiguriert ist, als Reaktion auf eine Eingabe, die von Äußerungen stammt, die eine Gruppe von Formulierungen definieren, einschließlich eines vorhergehenden und eines folgenden Themas mit einem Verweisobjekt dazwischen, das mit nur einem der Themen durch Syntax assoziiert ist, eines der Themen zum Erzeugen einer Antwort auf eine Frage auszuwählen, die in der Gruppe eingebettet ist, und zwar auf Grundlage eines Betriebsparameters des Fahrzeugs und des Syntaxes, und das Fahrzeug gemäß der Antwort zu betreiben.According to the present invention, there is provided a vehicle comprising a controller configured to respond in response to an input originating from utterances defining a group of phrases including a preceding and a subsequent topic having a reference object therebetween only one of the topics is syntactically selected to select one of the topics for generating a response to a question embedded in the group based on an operating parameter of the vehicle and the syntax, and operate the vehicle according to the answer.

Gemäß einer Ausführungsform werden die Kontexte auf Grundlage von Aussagen erzeugt, die erfolgen, während ein Antwortalgorithmus nicht aufgerufen wird.According to one embodiment, the contexts are generated based on statements made while a response algorithm is not invoked.

Gemäß einer Ausführungsform werden das vorhergehende Thema und das folgende Thema auf Grundlage der Kontexte bestimmt.According to one embodiment, the previous topic and the following topic are determined based on the contexts.

Gemäß der vorliegenden Erfindung beinhaltet ein Verfahren, als Reaktion auf eine Eingabe, die von Äußerungen stammt, die eine Gruppe von Formulierungen definieren, einschließlich eines vorhergehenden Themas und eines folgenden Themas mit einem Verweisobjekt dazwischen, das mit nur einem der Themen durch Syntax assoziiert ist, Erzeugen einer Antwort auf eine Frage, die in einer Gruppe aus Themen eingebettet ist, und zwar auf Grundlage einer Auswahl von einem der Themen und eines Betriebsparameters des Fahrzeugs und des Syntaxes, und Betreiben des Fahrzeugs gemäß der Antwort durch eine Steuerung.In accordance with the present invention, a method, in response to an input derived from utterances that define a group of phrases, including a previous topic and a subsequent topic having a reference object therebetween associated with only one of the topics by syntax, includes; Generating a response to a question embedded in a group of topics based on a selection of one of the topics and an operating parameter of the vehicle and the syntax, and operating the vehicle in accordance with the response by a controller.

Claims (15)

Fahrzeug, umfassend: eine Steuerung, die dazu konfiguriert ist, als Reaktion auf eine Eingabe, die von verbalen Äußerungen stammt, die eine Gruppe von Formulierungen definieren, einschließlich eines vorhergehenden und folgenden Themas mit einem Verweisobjekt dazwischen, das mit nur einem der Themen durch Syntax assoziiert ist, eines der Themen zum Erzeugen einer Antwort auf eine Frage auszuwählen, die in der Gruppe eingebettet ist, und zwar auf Grundlage eines Betriebsparameters des Fahrzeugs und des Syntaxes, und eine Schnittstelle zu betreiben, um die Antwort auszugeben.Vehicle comprising: a controller configured to respond in response to an input resulting from verbal utterances defining a group of phrases, including a preceding and following topic having a reference object therebetween associated with only one of the topics by syntax select the topics for generating a response to a question embedded in the group based on an operating parameter of the vehicle and the syntax, and operate an interface to output the answer. Fahrzeug nach Anspruch 1, wobei die Kontexte auf Grundlage von Aussagen erzeugt werden, die erfolgen, während ein Antwortalgorithmus nicht aufgerufen wird.Vehicle after Claim 1 where the contexts are generated based on statements made while a response algorithm is not invoked. Fahrzeug nach Anspruch 2, wobei das vorhergehende Thema und das folgende Thema auf Grundlage der Kontexte bestimmt werden.Vehicle after Claim 2 , whereby the previous topic and the following topic are determined on the basis of the contexts. Fahrzeug nach Anspruch 3, wobei eine Kontextbewertung von mindestens einem der Kontexte und eine Syntaxbewertung verglichen werden, um zu bestimmen, mit welchem Thema das Verweisobjekt assoziiert ist.Vehicle after Claim 3 in which a contextual evaluation of at least one of the contexts and a syntax score are compared to determine which topic the referenced object is associated with. Fahrzeug nach Anspruch 1, wobei ein Kontext des Betriebsparameters und ein Kontext der verbalen Äußerungen gleich sind.Vehicle after Claim 1 where a context of the operating parameter and a context of the verbal utterances are the same. Fahrzeug nach Anspruch 1, wobei der Betriebsparameter ein Standort des Fahrzeugs ist.Vehicle after Claim 1 wherein the operating parameter is a location of the vehicle. Fahrzeug nach Anspruch 1, wobei der Betriebsparameter eine restliche Öllebensdauer ist.Vehicle after Claim 1 , where the operating parameter is a residual oil life. Fahrzeug nach Anspruch 1, wobei der Betriebsparameter ein Kraftstofffüllstand des Fahrzeugs ist.Vehicle after Claim 1 , wherein the operating parameter is a fuel level of the vehicle. Fahrzeug nach Anspruch 8, wobei die Antwort auf einer Schätzung des Kraftstofffüllstands für die Entfernung bis zu einem leeren Tank beruht.Vehicle after Claim 8 where the answer is based on an estimate of the fuel level for removal up to an empty tank. Fahrzeug nach Anspruch 5, wobei die Steuerung ferner dazu konfiguriert ist, ein Fahrzeugsteuersystem auf Grundlage der Antwort zu betreiben, sodass der Kraftstofffüllstand über null ist, bis ein Ziel erreicht ist.Vehicle after Claim 5 wherein the controller is further configured to operate a vehicle control system based on the response such that the fuel level is above zero until a destination is reached. Fahrzeug nach Anspruch 1, wobei das Verweisobjekt ein Hersteller des Fahrzeugs ist.Vehicle after Claim 1 , wherein the reference object is a manufacturer of the vehicle. Fahrzeug nach Anspruch 1, wobei die Steuerung ferner dazu konfiguriert ist, ein Fahrzeugsteuersystem auf Grundlage der Antwort zu betreiben.Vehicle after Claim 1 The controller is further configured to operate a vehicle control system based on the response. Fahrzeug nach Anspruch 8, wobei das Fahrzeugsteuersystem betrieben wird, um sicherzustellen, dass die Antwort zufriedenstellend ist, und zwar auf Grundlage des Betriebsparameters.Vehicle after Claim 8 wherein the vehicle control system is operated to ensure that the response is satisfactory based on the operating parameter. Fahrzeug nach Anspruch 1, wobei die Kontexte auf Grundlage von Aussaugen erzeugt werden, während ein Antwortalgorithmus nicht aufgerufen wird, um die Themen zu bestimmen.Vehicle after Claim 1 where the contexts are generated based on sucking, while a response algorithm is not called to determine the topics. Fahrzeug nach Anspruch 10, wobei die Kontexte von einem Benutzer ausgewählt werden.Vehicle after Claim 10 , where the contexts are selected by a user.
DE102019113681.4A 2018-05-23 2019-05-22 Always listening and active voice assistant and vehicle operation Pending DE102019113681A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/987,175 US11704533B2 (en) 2018-05-23 2018-05-23 Always listening and active voice assistant and vehicle operation
US15/987175 2018-05-23

Publications (1)

Publication Number Publication Date
DE102019113681A1 true DE102019113681A1 (en) 2019-11-28

Family

ID=68499564

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019113681.4A Pending DE102019113681A1 (en) 2018-05-23 2019-05-22 Always listening and active voice assistant and vehicle operation

Country Status (3)

Country Link
US (1) US11704533B2 (en)
CN (1) CN110525363A (en)
DE (1) DE102019113681A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200072020A (en) * 2018-12-12 2020-06-22 현대자동차주식회사 Method for guiding conversation in speech recognition system
KR20220055213A (en) * 2020-10-26 2022-05-03 현대자동차주식회사 Vehicle and control method thereof

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8583427B2 (en) * 1999-11-18 2013-11-12 Broadcom Corporation Voice and data exchange over a packet based network with voice detection
US20020010604A1 (en) * 2000-06-09 2002-01-24 David Block Automated internet based interactive travel planning and reservation system
SE0303122D0 (en) * 2003-11-20 2003-11-20 Volvo Technology Corp Method and system for communication and / or interaction between a vehicle driver and a plurality of applications
TWI377478B (en) * 2008-10-07 2012-11-21 Mitac Int Corp Self-learning method for keyword based human machine interaction and portable navigation device using the method
US9104537B1 (en) * 2011-04-22 2015-08-11 Angel A. Penilla Methods and systems for generating setting recommendation to user accounts for registered vehicles via cloud systems and remotely applying settings
US9493130B2 (en) * 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US9418674B2 (en) * 2012-01-17 2016-08-16 GM Global Technology Operations LLC Method and system for using vehicle sound information to enhance audio prompting
US9798799B2 (en) * 2012-11-15 2017-10-24 Sri International Vehicle personal assistant that interprets spoken natural language input based upon vehicle context
US20140195663A1 (en) 2013-01-07 2014-07-10 Sirius Xm Connected Vehicle Services Inc. Method and System for Providing Cloud-Based Common Distribution Applications
US9396727B2 (en) * 2013-07-10 2016-07-19 GM Global Technology Operations LLC Systems and methods for spoken dialog service arbitration
CN104349291A (en) 2013-08-09 2015-02-11 富泰华工业(深圳)有限公司 Electronic device and system and method for surfing Internet
US20150046418A1 (en) * 2013-08-09 2015-02-12 Microsoft Corporation Personalized content tagging
DE102013114763A1 (en) * 2013-10-16 2015-04-16 Semvox Gmbh Speech control method and computer program product and device for carrying out the method
DE112014006542B4 (en) * 2014-03-31 2024-02-08 Mitsubishi Electric Corporation Setup and process for understanding user intent
US9250856B2 (en) * 2014-04-21 2016-02-02 Myine Electronics, Inc. In-vehicle web presentation
US9966065B2 (en) * 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
CN104363331A (en) 2014-10-13 2015-02-18 惠州市德赛西威汽车电子有限公司 Method and vehicular multimedia device allowing cellphone APP (application) startup by cellphone interconnection
KR101624191B1 (en) * 2014-12-08 2016-05-25 현대자동차주식회사 Vehicle and control mehtod thereof
US10366107B2 (en) * 2015-02-06 2019-07-30 International Business Machines Corporation Categorizing questions in a question answering system
US10331312B2 (en) * 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US9875583B2 (en) * 2015-10-19 2018-01-23 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicle operational data acquisition responsive to vehicle occupant voice inputs
US10089989B2 (en) * 2015-12-07 2018-10-02 Semiconductor Components Industries, Llc Method and apparatus for a low power voice trigger device
US20170262537A1 (en) 2016-03-14 2017-09-14 Amazon Technologies, Inc. Audio scripts for various content
US10102844B1 (en) * 2016-03-29 2018-10-16 Amazon Technologies, Inc. Systems and methods for providing natural responses to commands
US10489393B1 (en) * 2016-03-30 2019-11-26 Amazon Technologies, Inc. Quasi-semantic question answering
US10332513B1 (en) * 2016-06-27 2019-06-25 Amazon Technologies, Inc. Voice enablement and disablement of speech processing functionality
US9728188B1 (en) * 2016-06-28 2017-08-08 Amazon Technologies, Inc. Methods and devices for ignoring similar audio being received by a system
US10360910B2 (en) * 2016-08-29 2019-07-23 Garmin Switzerland Gmbh Automatic speech recognition (ASR) utilizing GPS and sensor data
US10297254B2 (en) * 2016-10-03 2019-05-21 Google Llc Task initiation using long-tail voice commands by weighting strength of association of the tasks and their respective commands based on user feedback
US10319375B2 (en) * 2016-12-28 2019-06-11 Amazon Technologies, Inc. Audio message extraction
US10467509B2 (en) * 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Computationally-efficient human-identifying smart assistant computer
US10789948B1 (en) * 2017-03-29 2020-09-29 Amazon Technologies, Inc. Accessory for a voice controlled device for output of supplementary content
KR102332826B1 (en) * 2017-05-30 2021-11-30 현대자동차주식회사 A vehicle-mounted voice recognition apparatus, a vehicle including the same, a vehicle-mounted voice recognition system and the method for the same
US10515625B1 (en) * 2017-08-31 2019-12-24 Amazon Technologies, Inc. Multi-modal natural language processing
US10847149B1 (en) * 2017-09-01 2020-11-24 Amazon Technologies, Inc. Speech-based attention span for voice user interface
US10733987B1 (en) * 2017-09-26 2020-08-04 Amazon Technologies, Inc. System and methods for providing unplayed content
US10762903B1 (en) * 2017-11-07 2020-09-01 Amazon Technologies, Inc. Conversational recovery for voice user interface
US20190146491A1 (en) * 2017-11-10 2019-05-16 GM Global Technology Operations LLC In-vehicle system to communicate with passengers
US10540970B2 (en) * 2017-12-12 2020-01-21 Amazon Technologies, Inc. Architectures and topologies for vehicle-based, voice-controlled devices
US10706846B1 (en) * 2018-01-12 2020-07-07 Amazon Technologies, Inc. Question answering for a voice user interface
US20190237067A1 (en) * 2018-01-31 2019-08-01 Toyota Motor Engineering & Manufacturing North America, Inc. Multi-channel voice recognition for a vehicle environment
US10978061B2 (en) * 2018-03-09 2021-04-13 International Business Machines Corporation Voice command processing without a wake word
US10819667B2 (en) * 2018-03-09 2020-10-27 Cisco Technology, Inc. Identification and logging of conversations using machine learning

Also Published As

Publication number Publication date
US20190362217A1 (en) 2019-11-28
CN110525363A (en) 2019-12-03
US11704533B2 (en) 2023-07-18

Similar Documents

Publication Publication Date Title
DE102018130755A1 (en) EXTERNAL INFORMATION PRESENTATION
DE102018116832A1 (en) LANGUAGE RECOGNIZING MAKROS TO IMPROVE VEHICLE GRAMMARKS
DE102016113955A1 (en) Electric vehicle display systems
DE102019101785A1 (en) Multilingual language assistant support
DE102014202304A1 (en) METHOD AND SYSTEM FOR SELECTION OF DRIVER PREFERENCES
DE102016106803B4 (en) Adaptive vehicle interface system
DE102017105885A1 (en) Method and device for predictive driver assistance
DE102019119171A1 (en) VOICE RECOGNITION FOR VEHICLE VOICE COMMANDS
DE102015101279A1 (en) Systems and methods for automating driver actions in a vehicle
DE102010038174A1 (en) Emotive device for transmitting information in a motor vehicle
DE102011002470A1 (en) Vehicle maintenance consultant for an emotive advisory system
DE102009017177A1 (en) Speech recognition arrangement for the acoustic operation of a function of a motor vehicle
DE102016106718A1 (en) Vehicle energy warning systems and methods
DE102019100567A1 (en) USE-BASED INSURANCE COMPANIES
DE102018125563A1 (en) PREVIEW APPLICATIONS BASED ON USER CONTEXT
DE102019113681A1 (en) Always listening and active voice assistant and vehicle operation
DE102018102545A1 (en) AUDIO EXTERNAL VEHICLE SPEAKERS BASED ON IGNITION SWITCH POSITIONS
DE102017203872A1 (en) Conflict resolution for vehicle seat area association
DE102017203865A1 (en) Passenger area detection with signal strength data supported by physical signal barriers
DE102018125564A1 (en) RESPONSE RAPID ACTIVATION OF A VEHICLE FEATURE
DE102012220131A1 (en) A method of activating voice interaction with an occupant of a vehicle and voice interaction system for a vehicle
DE102019113677A1 (en) ALWAYS CO-PAIRING AND ACTIVE LANGUAGE SUPPORT AND VEHICLE OPERATION
DE102020101777A1 (en) PRE-LOADING AND DELAYED CHARGING RESULTS OF DIGITAL AUXILIARY LANGUAGE SEARCH INSTALLED IN THE VEHICLE
DE102016212681A1 (en) Control device and method for voice-based operation of a motor vehicle
DE102020123234A1 (en) CLOUD STORAGE OF A DIGITAL KEY OF A VEHICLE

Legal Events

Date Code Title Description
R082 Change of representative

Representative=s name: LORENZ SEIDLER GOSSEL RECHTSANWAELTE PATENTANW, DE

R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: G06F0017280000

Ipc: G06F0040400000