WO2020025186A1 - Verfahren zum bestimmen eines digitalen assistenten zum ausführen einer fahrzeugfunktion aus einer vielzahl von digitalen assistenten in einem fahrzeug, computerlesbares medium, system, und fahrzeug - Google Patents

Verfahren zum bestimmen eines digitalen assistenten zum ausführen einer fahrzeugfunktion aus einer vielzahl von digitalen assistenten in einem fahrzeug, computerlesbares medium, system, und fahrzeug Download PDF

Info

Publication number
WO2020025186A1
WO2020025186A1 PCT/EP2019/063483 EP2019063483W WO2020025186A1 WO 2020025186 A1 WO2020025186 A1 WO 2020025186A1 EP 2019063483 W EP2019063483 W EP 2019063483W WO 2020025186 A1 WO2020025186 A1 WO 2020025186A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
digital assistant
voice message
digital
command
Prior art date
Application number
PCT/EP2019/063483
Other languages
English (en)
French (fr)
Inventor
Christian Suess
Nora BROY
Viviane GHADERI
Original Assignee
Bayerische Motoren Werke Aktiengesellschaft
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke Aktiengesellschaft filed Critical Bayerische Motoren Werke Aktiengesellschaft
Priority to CN201980033334.XA priority Critical patent/CN112135756B/zh
Priority to US17/261,448 priority patent/US11840184B2/en
Publication of WO2020025186A1 publication Critical patent/WO2020025186A1/de

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20—Means to switch the anti-theft system on or off
    • B60R25/25—Means to switch the anti-theft system on or off using biometry
    • B60R25/257—Voice recognition
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/30—Detection related to theft or to other events relevant to anti-theft systems
    • B60R25/31—Detection related to theft or to other events relevant to anti-theft systems of human presence inside or outside the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062—Adapting control system settings
    • B60W2050/0075—Automatic parameter input, automatic initialising or calibrating means
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Definitions

  • the invention relates to a method for determining a digital assistant for performing a vehicle function from a plurality of digital assistants in a vehicle.
  • the invention further relates to a computer-readable medium for determining a digital one
  • Assistants for performing a vehicle function from a plurality of digital assistants in a vehicle a system for determining a digital assistant for performing a vehicle function from a plurality of digital assistants in a vehicle, and a vehicle comprising the system for determining a digital assistant for
  • IPAs for short also called digital assistants, which are integrated in smartphones or loudspeakers and are controlled by voice.
  • An intelligent personal assistant, or IPA for short can receive a voice message and perform an action, e.g. Play music, place an order or answer a question, execute.
  • an action e.g. Play music
  • IPA e.g. Play music
  • one object of the invention is to efficiently improve the execution of commands for controlling vehicle functions by digital assistants in an interior of a vehicle.
  • the invention is characterized by a method for
  • a digital assistant can do one
  • a digital assistant can be executed on a mobile device, for example a smartphone, a smart watch, or another portable, mobile device, and / or a control device of the vehicle. Each digital assistant is preferably executed on a different mobile terminal or on a control unit of the vehicle.
  • the vehicle can be a partially, highly, or fully automated vehicle.
  • the vehicle can be a land vehicle, in particular a motor vehicle or a motorcycle.
  • the vehicle function can be a function of a driver assistance system and / or a function of an operator interface of the vehicle.
  • the method includes receiving a voice message from a vehicle occupant by a digital assistant from the plurality of digital assistants in the vehicle.
  • the vehicle occupant can be a driver, a co-driver, or a vehicle occupant in other, available places in the vehicle.
  • the large number of digital assistants in the vehicle can be carried out on various mobile terminals, a control device and / or a multimedia system or an infotainment system of the vehicle.
  • the method further comprises determining a command of the voice message by the digital assistant and determining an execution authorization of the vehicle occupant for the command of the voice message by the digital assistant.
  • the execution authorization for a command can be specified by a user of the vehicle, a vehicle manufacturer or a third party.
  • the execution authorization can include a software component that checks the execution authorization.
  • the execution authorization can include one or more rules and / or one or more logic components.
  • Execution permission can be stored in metadata associated with the command. Furthermore, the execution authorization can be stored in a database, a hash table, or another known storage unit. If the vehicle occupant has execution authorization for the command of the voice message, the method includes the digital assistant carrying out the command of the voice message to carry out the vehicle function in the vehicle.
  • the control of vehicle functions by digital assistants can be efficiently improved.
  • the security when using a large number of digital assistants in a vehicle can be increased efficiently by only one digital assistant being given execution authorization.
  • Voice message of the vehicle occupant by the digital assistant from the large number of digital assistants receiving the voice message of the vehicle occupant by several digital assistants from the large number of digital assistants, and checking whether the vehicle occupant is linked to a digital assistant from the large number of digital assistants who received the voice message. If the vehicle occupant is linked to a digital assistant from the plurality of digital assistants who received the voice message, receiving the voice message may further include receiving the vehicle occupant's voice message by the digital assistant associated with the vehicle occupant. If the vehicle occupant is not linked to a digital assistant from the plurality of digital assistants who has received the voice message, the method can reject the voice message of the vehicle occupant by the digital assistant and / or the method can delete the voice message from the
  • Vehicle occupants to a central, digital assistant which transmit the vehicle occupant's voice message to the digital assistant, which is linked to the vehicle occupant, and receive the vehicle occupant's voice message by the digital assistant, which is linked to the vehicle occupant.
  • the voice message can be efficiently assigned to a digital assistant, who is responsible for the voice message of the
  • Vehicle occupants can process.
  • the vehicle occupant can be uniquely linked to a digital assistant from the multitude of digital assistants, and / or a digital assistant can be uniquely linked from the multitude of digital assistants be identifiable.
  • a voice message from a vehicle occupant can simply be assigned to a digital assistant and a digital assistant can be clearly identified in the vehicle.
  • a digital assistant preferably all digital assistants, from the plurality of digital assistants can be registered with a central, digital assistant of the vehicle. This ensures that only digital assistants registered with the vehicle can perform vehicle functions.
  • the execution authorization can be determined based on a seating position of the vehicle occupant in the vehicle. This allows the execution authorization to be determined efficiently.
  • the execution authorization can be determined based on a ranking of the digital assistant with respect to a ranking of the plurality of digital assistants. This allows the execution authorization to be determined efficiently.
  • the execution authorization can be determined based on a type of command of the voice message. This allows the execution authorization to be determined efficiently.
  • the execution authorization can be determined on the basis of a predetermined access control list.
  • Execution authorization can be determined efficiently.
  • the execution authorization can be dependent on one or more personal preferences of the vehicle occupant, which are linked to the digital assistant of the vehicle occupant, and / or one or more personal preferences of vehicle occupants, which are associated with further digital assistants from the large number of digital assistants are linked.
  • Execution authorization can be determined efficiently.
  • the execution authorization can be determined by means of a context of the command, and / or the execution authorization can be determined by the central, digital assistant.
  • Execution authorization can be determined efficiently.
  • the method can also determine a further digital assistant from the large number of assistants in the vehicle, the further digital assistant being linked to a further vehicle occupant who can issue execute permission to the command. Furthermore, the method can include providing a voice message for determining the authorization to execute the command by the further digital assistant to the further vehicle occupant, who is linked to the further digital assistant. Furthermore, the method can send a response voice message from the further vehicle occupant through the further digital
  • the response voice message containing an execute permission of the command or no execute permission of the command. If the response voice message of the other vehicle occupant is a
  • the method can execute the command by the further digital assistant for executing the vehicle function in the vehicle.
  • an execution authorization for a command for executing a vehicle function can be efficiently provided by another vehicle occupant.
  • the method can furthermore include rejecting an execution of the command by the further digital assistant and / or by the digital assistant. With this, execution of the command by another vehicle occupant can be prevented efficiently.
  • the plurality of digital assistants can be carried out on different mobile terminals, and / or the central digital assistant can be carried out on a control device of the vehicle, and / or the plurality of digital assistants can include all digital assistants of vehicle occupants that with the vehicle are coupled. With this, digital assistants external to the vehicle can easily be used for performing vehicle functions.
  • each digital assistant from the large number of digital assistants can be linked to a seating position in the vehicle, and / or a hierarchy of digital assistants from the large number of digital ones
  • the invention is characterized by a computer-readable medium for determining a digital assistant for executing a vehicle function from a multiplicity of digital assistants in a vehicle, the computer-readable
  • Medium stores instructions that, when executed from a computer or a
  • Control unit perform the procedure described above.
  • the invention is characterized by a system for
  • Determining a digital assistant for performing a vehicle function from a plurality of digital assistants in a vehicle the system being designed to carry out the method described above.
  • the invention is characterized by a vehicle comprising the system described above for determining a digital assistant for executing a vehicle function from a multiplicity of digital assistants in the vehicle.
  • One aim of the invention is to identify and resolve possible conflicts in the execution of commands by various digital assistants or intelligent personal assistants in a vehicle. For example, a ranking of the digital assistants can be used to recognize a conflict when executing commands and to resolve this conflict using the ranking of the digital assistants.
  • a digital assistant can be assigned a role and / or execution permission for a command.
  • the digital assistant can be assigned the role of driver. This means that the digital assistant is the digital assistant of the driver of the vehicle and has execution authorization for commands that only the driver of the vehicle may issue. Examples of commands that only the driver of the vehicle may give are driving-specific commands that have an influence on driving dynamics and / or route guidance of the vehicle. Other digital assistants that are present in the vehicle are not authorized to execute driving-specific commands and reject the driving-specific commands. Furthermore, a digital assistant can have predetermined and / or user-specific locks of functions that prevent commands from the locked functions from being executed.
  • a digital assistant can be classified higher than one or more additional digital assistants in terms of a predetermined, vehicle-specific and / or user-specific order of priority.
  • a digital assistant with a higher ranking can do more
  • a digital assistant with a higher ranking can transfer execution rights of a command to one or more digital assistants which are arranged below the digital assistant with regard to the ranking. Additionally or alternatively, a digital assistant with a lower ranking may request execution rights for one or more commands from a digital assistant with a higher ranking. For example, a digital assistant of a parent in the vehicle can transfer execution rights for one or more commands and / or functions to a digital assistant of a child temporarily for a single execution of a command or permanently for each execution of the command. Furthermore, a digital assistant with a higher ranking can control microphones from digital assistants with a lower ranking, for example switch on or off.
  • the vehicle can have a central, digital assistant on a
  • Control unit or a computer of the vehicle is running, and all other digital assistants are registered in the vehicle.
  • the central, digital assistant of the vehicle preferably has the highest ranking.
  • the digital assistants in a vehicle can be used with one another and / or via a central, digital assistant of the vehicle via a communication channel
  • a command can be prioritized, for example, based on metadata from one or more digital assistants.
  • 1 shows a method for determining a digital assistant from a multiplicity of digital ones
  • the method 100 may receive 102 a voice message from a vehicle occupant through a digital assistant from the plurality of digital assistants.
  • Each digital assistant from the plurality of digital assistants may have a unique identifier, e.g. have a unique name.
  • the digital assistants in the vehicle can communicate with one another. If a digital assistant does not have a unique identifier, an identifier can also be used
  • Vehicle occupants associated with the digital assistant are used to uniquely identify the digital assistant. Additionally or alternatively, a digital assistant can be uniquely identified with regard to a function that is provided by the digital assistant and / or with regard to a vehicle occupant that was determined as the sender of the voice message. Each digital assistant is preferably uniquely assigned to a vehicle occupant, so that the vehicle occupant can be uniquely assigned to a digital assistant.
  • All digital assistants can be selected from the wide range of digital assistants
  • Received voice message or only the digital assistant that will process the voice message can. If a voice message is received by a digital assistant who cannot process the voice message, the receiving digital assistant can
  • a digital assistant who cannot process the voice message can discard the voice message.
  • the voice message can also be received by the digital assistant via a central digital assistant.
  • the central, digital assistant is a digital assistant that is provided by the vehicle and in which preferably all further digital assistants from the large number of digital assistants are registered.
  • the central, digital assistant can switch off one or more audio channels between one or more microphones and a digital assistant, preferably all registered digital assistants.
  • the voice message can then be received via the microphones of the central, digital assistant.
  • the method 100 may determine 104 one or more commands of the voice message by the digital assistant and / or the central digital assistant.
  • a command may control execution of a vehicle function.
  • the vehicle function can be provided via an interface of the vehicle.
  • the vehicle function can be a function of a driver assistance system, a function of an infotainment system, or a function that controls an actuator of the vehicle.
  • the method 100 can determine 106 an execution authorization of the vehicle occupant for the command of the voice message.
  • the execution authorization can be determined by the digital assistant who determined the command of the voice message and / or by the central digital assistant of the vehicle.
  • the method can execute 108 the command of the voice message to perform the vehicle function in the vehicle.
  • the command of the voice message can be carried out by the digital assistant that processes the voice message or the central digital one Assistants of the vehicle are running.
  • the digital assistant for performing the vehicle function can transmit the command for performing the vehicle function to the central, digital assistant of the vehicle.
  • the central, digital assistant of the Vehicle can receive the command from the digital assistant and execute the command to execute the vehicle function.
  • the method can determine a further digital assistant from the plurality of digital assistants in the vehicle, the further digital assistant being linked to a further vehicle occupant who issues the authorization to execute the command can.
  • the further digital assistant can preferably be determined by means of a ranking of all digital assistants in the vehicle.
  • the ranking of all digital assistants in the vehicle can be predetermined or determined dynamically. For example, the ranking can be determined dynamically by a seat of a vehicle occupant that is linked to a digital assistant.
  • the additional digital assistant can provide a voice message for determining the authorization to execute the command to the additional vehicle occupant, which is linked to the additional digital assistant. Furthermore, the further digital assistant can receive a response voice message from the further vehicle occupant in response to the provided voice message for determining the execution authorization of the command. The reply voice message may include execute permission on the command or no execute permission on the command. If the response voice message of the further vehicle occupant contains execution authorization of the command, the method can transmit the positive execution authorization to the digital assistant or the central digital assistant and the digital assistant or the central digital assistant can execute the command to execute the vehicle function in the vehicle.
  • a voice message may “turn left and music to maximum
  • volume can be received by a passenger through the digital assistant of the passenger.
  • the passenger's digital assistant can detect two commands in the voice message.
  • the execution authorization for the digital assistant of the passenger is determined for each of the two commands of the voice message.
  • each command is relevant to driving. This means that only the driver or the driver's digital assistant is authorized to execute the two commands. For this reason, the driver's consent must be requested so that the digital assistant of the passenger can
  • the digital assistant of the passenger can transmit a message to provide the driver with digital authorization to execute the two commands.
  • the driver's digital assistant can receive the message to provide execution authorization for the two commands and output a message to the driver as a voice message to request execution authorization for the two commands.
  • the driver's digital assistant can ask the driver whether the passenger is allowed to turn the vehicle to the left and set the music to maximum volume.
  • the driver's digital assistant can wait for a driver response voice message.
  • the driver's digital assistant can receive the response voice message with the content “no”.
  • the driver's digital assistant can then transmit a negative execution authorization for the two commands to the passenger's digital assistant.
  • the digital assistant of the passenger can receive the negative execution authorization for the two commands and can reject the two commands of the passenger.
  • the vehicle occupants are a child and the child's father.
  • the child's digital assistant receives a voice message that includes a command that refers to the father, who is also a passenger in the vehicle, or that requires authorization from the child's father.
  • the child's digital assistant can request the father's digital assistant regarding an execution authorization of the command.
  • the father can communicate positive or negative execution authorization to his digital assistant. Accordingly, the command can be executed or discarded by the child's digital assistant.
  • the vehicle occupants are at least two people, who each give a voice message with the same command at the same time, with time differences or in a short time sequence, for example within a second or a few seconds, and these are received by their respective digital assistants .
  • a marginal order of the digital assistants can be created.
  • the digital assistant who is higher in terms of ranking, receives the execution authorization for the command.
  • the ranking can be created, for example, based on the seating position of the vehicle occupants. The highest ranking is, for example, the driver's seating position, the second highest ranking is that of the driver
  • the ranking of the digital assistants can be created by means of a social ranking of the people, which is linked to the respective digital assistant. For example, is a professional
  • Authorization to execute the command is assigned to the digital assistant whose linked vehicle occupant has the higher professional ranking.
  • the ranking can be created based on technical features of the respective digital assistants. For example, if the command concerns a function for playing music in the vehicle, then the marginal order of the digital ones
  • access control lists can be defined by a user or vehicle occupant who specifies the execution authorizations of a digital assistant or a group of digital assistants in the vehicle.
  • a single digital assistant can be efficiently determined from a large number of the digital assistants in the vehicle, who can execute a command to perform a vehicle function. This increases the security of using digital

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Automation & Control Theory (AREA)
  • Lock And Its Accessories (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, das Verfahren umfassend: Empfangen einer Sprachnachricht eines Fahrzeuginsassen durch einen digitalen Assistenten aus der Vielzahl der digitalen Assistenten in dem Fahrzeug; Ermitteln eines Befehls der Sprachnachricht durch den digitalen Assistenten; Bestimmen einer Ausführungsberechtigung des Fahrzeuginsassen für den Befehl der Sprachnachricht durch den digitalen Assistenten; und, falls der Fahrzeuginsasse eine Ausführungsberechtigung für den Befehl der Sprachnachricht hat, Ausführen des Befehls der Sprachnachricht durch den digitalen Assistenten zum Ausführen der Fahrzeugfunktion in dem Fahrzeug.

Description

l
Verfahren zum Bestimmen eines digitalen Assistenten zum Ausführen einer
Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, computerlesbares Medium, System, und Fahrzeug
Die Erfindung betrifft ein Verfahren zum Bestimmen eines digitalen Assistenten zum Ausfuhren einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug. Die Erfindung betrifft ferner ein computerlesbares Medium zum Bestimmen eines digitalen
Assistenten zum Ausfuhren einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, ein System zum Bestimmen eines digitalen Assistenten zum Ausfuhren einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, sowie ein Fahrzeug umfassend das System zum Bestimmen eines digitalen Assistenten zum
Ausfuhren einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in dem
Fahrzeug.
Aus dem Stand der Technik bekannt sind Intelligente Persönliche Assistenten, kurz IPAs, auch digitale Assistenten genannt, die in Smartphones oder Lautsprechern integriert sind und mittels Sprache gesteuert werden. Ein Intelligenter Persönlicher Assistent, kurz IPA, kann eine Sprachnachricht empfangen und einen Aktion, z.B. Musik abspielen, eine Bestellung aufgeben oder eine Antwort auf eine Frage geben, ausführen. Wenn jedoch mehrere IPAs sich am gleichen Ort, z.B. in einem Innenraum eines Fahrzeugs, befinden, können Konflikte auftreten, welcher IPA durch die Sprache gesteuert werden soll. Aus dem Stand der Technik ist bekannt, mittels Stimmerkennung eine Person zu ermitteln, die einen IPA steuern darf. In dem
Innenraum eines Fahrzeugs können jedoch mehrere Personen berechtigt sein, einen IPA zu steuern. Bei gleichzeitiger Steuerung mehrerer IPAs durch verschiedene Personen in dem Innenraum eines Fahrzeugs mit beispielsweise sich widersprechenden Sprachbefehle zur Steuerung von Fahrzeugfunktionen kann es zu Gefahrensituationen bei der Steuerung eines Fahrzeugs kommen.
Es ist daher eine Aufgabe der Erfindung, ein Steuern von Fahrzeugfunktionen durch digitale Assistenten effizient zu verbessern. Insbesondere ist eines eine Aufgabe der Erfindung, ein Ausfuhren von Befehlen zum Steuern von Fahrzeugfunktionen durch digitale Assistenten in einem Innenraum eines Fahrzeugs effizient zu verbessern. Gelöst wird diese Aufgabe durch die Merkmale der unabhängigen Ansprüche. Vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den abhängigen Ansprüchen.
Gemäß einem ersten Aspekt zeichnet sich die Erfindung aus durch ein Verfahren zum
Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug. Ein digitaler Assistent kann ein
Intelligenter Persönlicher Assistent, kurz IPA, sein. Ein digitaler Assistent kann auf einem mobilen Endgerät, beispielsweise einem Smartphone, einer Smartwatch, oder einem anderen, tragbaren, mobilen Endgerät, und/oder einem Steuergerät des Fahrzeugs ausgeführt werden. Vorzugsweise wird jeder digitale Assistent auf einem unterschiedlichen mobilen Endgerät oder auf einem Steuergerät des Fahrzeugs ausgeführt. Das Fahrzeug kann ein teil-, hoch-, oder vollautomatisiert fahrendes Fahrzeug sein. Das Fahrzeug kann ein Landfahrzeug, insbesondere ein Kraftfahrzeug oder ein Motorrad sein. Die Fahrzeugfunktion kann eine Funktion eines Fahrerassistenzsystems und/oder eine Funktion einer Bedienschnittstelle des Fahrzeugs sein.
Das Verfahren umfasst ein Empfangen einer Sprachnachricht eines Fahrzeuginsassen durch einen digitalen Assistenten aus der Vielzahl der digitalen Assistenten in dem Fahrzeug. Der Fahrzeuginsasse kann ein Fahrer, ein Beifahrer, oder ein Fahrzeuginsasse auf weiteren, vorhandenen Plätzen in dem Fahrzeug sein. Die Vielzahl der digitalen Assistenten in dem Fahrzeug können auf verschiedenen mobilen Endgeräte, einem Steuergerät, und/oder einem Multimediasystem bzw. einem Infotainmentsystem des Fahrzeugs ausgeführt werden. Das Verfahren umfasst ferner ein Ermitteln eines Befehls der Sprachnachricht durch den digitalen Assistenten und ein Bestimmen einer Ausführungsberechtigung des Fahrzeuginsassen für den Befehl der Sprachnachricht durch den digitalen Assistenten. Die Ausführungsberechtigung für einen Befehl kann durch einen Nutzer des Fahrzeugs, einen Fahrzeughersteller oder einem Dritten vorgegeben sein. Die Ausführungsberechtigung kann eine Softwarekomponente umfassen, die die Ausführungsberechtigung überprüft. Die Ausführungsberechtigung kann eine oder mehrere Regeln, und/oder eine oder mehrere Logikkomponenten umfassen. Die
Ausführungsberechtigung kann in Metadaten gespeichert sein, die mit dem Befehl verknüpft sind. Ferner kann die Ausführungsberechtigung in einer Datenbank, einer Hashtabelle, oder einer anderen bekannten Speichereinheit gespeichert sein. Falls der Fahrzeuginsasse eine Ausführungsberechtigung für den Befehl der Sprachnachricht hat, umfasst das Verfahren ein Ausführen des Befehls der Sprachnachricht durch den digitalen Assistenten zum Ausführen der Fahrzeugfunktion in dem Fahrzeug.
Vorteilhafterweise kann durch das Bestimmen einer Ausführungsberechtigung für einen Befehl eines digitalen Assistenten in einem Fahrzeug das Steuern von Fahrzeugfunktionen durch digitale Assistenten effizient verbessert werden. Die Sicherheit bei der Nutzung von einer Vielzahl digitaler Assistenten in einem Fahrzeug kann effizient erhöht werden, indem nur ein einziger digitaler Assistent eine Ausführungsberechtigung erhält. Gleichzeit kann der
Missbrauch von digitalen Assistenten in einem Fahrzeug effizient verringert werden.
Gemäß einer vorteilhaften Ausgestaltung der Erfindung kann das Empfangen der
Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten aus der Vielzahl der digitalen Assistenten ein Empfangen der Sprachnachricht des Fahrzeuginsassen durch mehrere, digitale Assistenten aus der Vielzahl der digitalen Assistenten, und ein Prüfen, ob der Fahrzeuginsasse mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft ist, der die Sprachnachricht empfangen hat, umfassen. Falls der Fahrzeuginsasse mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten, der die Sprachnachricht empfangen hat, verknüpft ist, kann das Empfangen der Sprachnachricht weiter ein Empfangen der Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten, der mit dem Fahrzeuginsassen verknüpft ist, umfassen. Falls der Fahrzeuginsasse nicht mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft ist, der die Sprachnachricht empfangen hat, kann das Verfahren die Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten verwerfen, und/oder kann das Verfahren die Sprachnachricht der
Fahrzeuginsassen an einen zentralen, digitalen Assistenten, der die Sprachnachricht des Fahrzeuginsassen an den digitalen Assistenten übermitteln, der mit dem Fahrzeuginsassen verknüpft ist, und die Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten, der mit dem Fahrzeuginsassen verknüpft ist, empfangen. Hiermit kann die Sprachnachricht effizient einem digitalen Assistenten zugeordnet werden, der die Sprachnachricht des
Fahrzeuginsassen verarbeiten kann.
Gemäß einer weiteren, vorteilhaften Ausgestaltung der Erfindung kann der Fahrzeuginsasse, eindeutig mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft sein, und/oder kann ein digitaler Assistent aus der Vielzahl der digitalen Assistenten eindeutig identifizierbar sein. Hiermit kann eine Sprachnachricht eines Fahrzeuginsassen einfach einem digitalen Assistenten zugeordnet werden und ein digitaler Assistent in dem Fahrzeug eindeutig identifiziert werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann ein digitaler Assistent, vorzugsweise alle, digitale Assistenten, aus der Vielzahl der digitalen Assistenten bei einem zentralen, digitalen Assistenten des Fahrzeugs registriert sein. Hiermit kann sichergestellt werden, dass nur beim Fahrzeug registrierte digitale Assistenten Fahrzeugfunktionen ausführen können.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Ausführungsberechtigung basierend auf einer Sitzposition des Fahrzeuginsassen in dem Fahrzeug ermittelt werden. Hiermit kann die Ausführungsberechtigung effizient ermittelt werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Ausführungsberechtigung basierend auf einer Rangordnung des digitalen Assistenten bezüglich einer Rangordnung der Vielzahl der digitalen Assistenten ermittelt werden. Hiermit kann die Ausführungsberechtigung effizient ermittelt werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Ausführungsberechtigung basierend auf einer Art des Befehls der Sprachnachricht ermittelt werden. Hiermit kann die Ausführungsberechtigung effizient ermittelt werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Ausführungsberechtigung basierend einer vorgegebenen Zugangskontrollliste ermittelt werden. Hiermit kann die
Ausführungsberechtigung effizient ermittelt werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Ausführungsberechtigung in Abhängigkeit einer oder mehrerer persönlicher Präferenzen des Fahrzeuginsassen, die mit dem digitalen Assistenten des Fahrzeuginsassen verknüpft sind, und/oder einer oder mehrerer persönlicher Präferenzen von Fahrzeuginsassen, die mit weiteren, digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft sind, ermittelt werden. Hiermit kann die
Ausführungsberechtigung effizient ermittelt werden. Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Ausführungsberechtigung mittels eines Kontexts des Befehls ermittelt werden, und/oder kann die Ausführungsberechtigung durch den zentralen, digitalen Assistenten bestimmt werden. Hiermit kann die
Ausführungsberechtigung effizient ermittelt werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann das Verfahren weiterhin, falls der Fahrzeuginsasse keine Ausführungsberechtigung für den Befehl der Sprachnachricht hat, einen weiteren, digitalen Assistenten aus der Vielzahl von Assistenten in dem Fahrzeug ermitteln, wobei der weitere, digitale Assistent mit einem weiteren Fahrzeuginsassen verknüpft ist, der eine Ausführungsberechtigung des Befehls erteilen kann. Ferner kann das Verfahren ein Bereitstellen einer Sprachnachricht zum Ermitteln der Ausführungsberechtigung des Befehls durch den weiteren, digitalen Assistenten an den weiteren Fahrzeuginsassen, der mit dem weiteren, digitalen Assistenten verknüpft ist, umfassen. Ferner kann das Verfahren eine Antwortsprachnachricht des weiteren Fahrzeuginsassen durch den weiteren, digitalen
Assistenten in Antwort auf die bereitgestellte Sprachnachricht zum Ermitteln der
Ausführungsberechtigung des Befehls empfangen, wobei die Antwortsprachnachricht eine Ausführungsberechtigung des Befehls oder keine Ausführungsberechtigung des Befehls enthält. Falls die Antwortsprachnachricht des weiteren Fahrzeuginsassen eine
Ausführungsberechtigung des Befehls enthält, kann das Verfahren den Befehls durch den weiteren, digitalen Assistenten zum Ausführen der Fahrzeugfunktion in dem Fahrzeug ausführen. Hiermit kann eine Ausführungsberechtigung für einen Befehl zum Ausführen einer Fahrzeugfunktion effizient durch einen weiteren Fahrzeuginsassen bereitgestellt werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann das Verfahren weiterhin, falls die Antwortsprachnachricht des weiteren Fahrzeuginsassen keine Ausführungsberechtigung des Befehls enthält, ein Ablehnen einer Ausführung des Befehls durch den weiteren, digitalen Assistenten und/oder durch den digitalen Assistenten, umfassen. Hiermit kann ein Ausführen des Befehls effizient durch einen weiteren, Fahrzeuginsassen verhindert werden.
Gemäß einer weiteren, vorteilhaften Ausgestaltung kann die Vielzahl der digitalen Assistenten auf verschiedenen mobilen Endgeräten, und/oder der zentrale, digitale Assistent auf einem Steuergeräte des Fahrzeugs ausgeführt werden, und/oder kann die Vielzahl der digitalen Assistenten alle digitalen Assistenten von Fahrzeuginsassen umfasst, die mit dem Fahrzeug gekoppelt sind. Hiermit können fahrzeugexterne, digitale Assistenten einfach für das Ausfuhren von Fahrzeugfunktion verwendet werden.
Gemäß einer weiteren vorteilhaften Ausgestaltung der Erfindung kann jeder digitale Assistent aus der Vielzahl der digitalen Assistenten mit einer Sitzposition in dem Fahrzeug verknüpft sein, und/oder kann eine Hierarchie von digitalen Assistenten aus der Vielzahl der digitalen
Assistenten basierend auf der Sitzposition, mit der ein digitaler Assistent verknüpft ist, ermittelt werden. Hiermit kann eine sitzpositionsbasierte Ausführungsberechtigung effizient ermittelt werden.
Gemäß einem weiteren Aspekt zeichnet sich die Erfindung aus durch ein computerlesbares Medium zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, wobei das computerlesbare
Medium Instruktionen speichert, die, wenn ausgeführt aus einem Computer oder einem
Steuergerät, das oben beschriebene Verfahren ausführen.
Gemäß einem weiteren Aspekt zeichnet sich die Erfindung aus durch ein System zum
Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, wobei das System dazu ausgebildet ist das oben beschriebene Verfahren auszuführen.
Gemäß einem weiteren Aspekt zeichnet sich die Erfindung aus durch ein Fahrzeug umfassend das oben beschriebene System zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in dem Fahrzeug.
Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, den Figuren und der Figurenbeschreibung. Alle vorstehend in der Beschreibung genannten Merkmale und
Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren allein gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder aber in Alleinstellung verwendbar.
Die Erfindung beruht auf den nachfolgend dargelegten Überlegungen: Ein Ziel der Erfindung ist es, mögliche Konflikte bei der Ausführung von Befehlen durch verschiedene digitale Assistenten bzw. Intelligente Persönliche Assistenten in einem Fahrzeug zu erkennen und aufzulösen. Beispielsweise kann eine Rangordnung der digitalen Assistenten dazu dienen einen Konflikt bei der Ausführung von Befehlen zu erkennen und diesen Konflikt mithilfe der Rangordnung der digitalen Assistenten aufzulösen. Ein digitaler Assistent kann eine Rolle und/oder eine Ausführungsberechtigung für einen Befehl zugewiesen bekommen.
Beispielsweise kann der digitale Assistent die Rolle Fahrer zugewiesen bekommen. Dies bedeutet, dass der digitale Assistent der digitale Assistent des Fahrers des Fahrzeugs ist und eine Ausführungsberechtigung für Befehle hat, die nur der Fahrer des Fahrzeugs geben darf. Beispiele für Befehle, die nur der Fahrer des Fahrzeugs geben darf, sind fahrspezifische Befehle, die einen Einfluss auf eine Fahrdynamik und/oder eine Routenführung des Fahrzeugs haben. Weitere, digitale Assistenten, die in dem Fahrzeug vorhanden sind, haben keine Ausführungsberechtigung für fahrspezifische Befehle und verwerfen die fahrspezifischen Befehle. Ferner kann ein digitaler Assistent vorgegebene und/oder nutzerspezifische Sperren von Funktionen aufweisen, die ein Ausführen von Befehlen der gesperrten Funktionen verhindern.
Ein digitaler Assistent kann bezüglicher einer vorgegebenen, fahrzeugspezifischen, und/oder nutzerspezifischen Rangordnung höher als ein oder mehrere, weitere digitale Assistenten eingeordnet werden. Ein digitaler Assistent mit einer höheren Rangordnung kann mehr
Ausführungsrechte für Befehle haben. Ferner kann ein digitaler Assistent mit einer höheren Rangordnung Ausführungsrechte eines Befehls an einen oder mehrere digitale Assistenten übertragen, die bezüglich der Rangordnung unterhalb des digitalen Assistenten angeordnet sind. Zusätzlich oder alternativ kann ein digitaler Assistent mit einer niedrigeren Rangordnung Ausführungsrechte für einen oder mehrere Befehle von einem digitalen Assistenten mit einer höheren Rangordnung anfragen. Beispielsweise kann ein digitaler Assistent eines Elternteils in dem Fahrzeug Ausführungsrechte für einen oder mehrere Befehle und/oder Funktionen an einen digitalen Assistenten eines Kindes temporär für eine einzelne Ausführung eines Befehls oder permanent für jede Ausführung des Befehls übertragen. Ferner kann ein digitaler Assistent mit einer höheren Rangordnung Mikrophone von digitalen Assistent mit einer niedrigeren Rangordnung steuern, beispielsweise anschalten oder abschalten.
Das Fahrzeug kann einen zentralen, digitalen Assistenten aufweisen, der auf einem
Steuergerät oder einem Computer des Fahrzeugs ausgeführt wird, und bei dem alle weiteren digitalen Assistenten in dem Fahrzeug registriert sind. Vorzugsweise hat der zentrale, digitale Assistent des Fahrzeugs die höchste Rangordnung.
Die digitalen Assistenten in einem Fahrzeug können untereinander und/oder über einen zentralen, digitalen Assistenten des Fahrzeugs über einen Kommunikationskanal
kommunizieren, um einen Konflikt zu erkennen und/oder eine Priorisierung eines oder mehrerer Befehlen zwischen den digitalen Assistenten in dem Fahrzeug auszuführen. Die Priorisierung eines Befehls kann beispielsweise aus Basis von Metadaten einer oder mehrerer digitalen Assistenten erfolgen.
Im Folgenden wird anhand der beigefügten Zeichnungen ein bevorzugtes Ausführungsbeispiel der Erfindung beschrieben. Daraus ergeben sich weitere Details, bevorzugte Ausgestaltungen und Weiterbildungen der Erfindung. Im Einzelnen zeigt schematisch
Fig- 1 ein Verfahren zum Bestimmen eines digitalen Assistenten aus ein Vielzahl digitaler
Assistenten.
Im Detail zeigt Fig. 1 ein Verfahren 100 zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus ein Vielzahl digitaler Assistenten in einem Fahrzeug. Das Verfahren 100 kann eine Sprachnachricht eines Fahrzeuginsassen durch einen digitalen Assistenten aus der Vielzahl der digitalen Assistenten empfangen 102. Jeder digitale Assistent aus der Vielzahl der digitalen Assistenten kann einen eindeutigen Bezeichner, z.B. einen eindeutigen Namen, haben. Mithilfe des eindeutigen Bezeichners eines digitalen Assistenten können die digitalen Assistenten in dem Fahrzeug miteinander kommunizieren. Fall ein digitaler Assistent keinen eindeutigen Bezeichner hat, kann zusätzlich ein Identifikator eines
Fahrzeuginsassen, der mit dem digitalen Assistenten verknüpft ist, verwendet werden, um den digitalen Assistenten eindeutig zu identifizieren. Zusätzlich oder alternativ kann ein digitaler Assistent bezüglich einer Funktion, die durch den digitalen Assistenten bereitgestellt wird, und/oder bezüglich eines Fahrzeuginsassen, der als Sender der Sprachnachricht ermittelt wurde, eindeutig identifiziert werden. Vorzugsweise ist dabei jeder digitale Assistent eindeutig eines Fahrzeuginsassen zugeordnet, so dass durch die Identifikation des Fahrzeuginsassen eine eindeutige Zuordnung zu einem digitalen Assistenten möglich ist.
Es können alle digitalen Assistenten aus der Vielzahl der digitalen Assistent eine
Sprachnachricht empfangen oder nur der digitale Assistent, der die Sprachnachricht verarbeiten kann. Wenn eine Sprachnachricht von einem digitalen Assistenten empfangen wird, der die Sprachnachricht nicht verarbeiten kann, kann der empfangende digitale Assistent, die
Sprachnachricht an einen digitalen Assistenten weiterleiten, der die Sprachnachricht verarbeiten kann. Alternativ kann ein digitaler Assistent, der die Sprachnachricht nicht verarbeiten kann, die Sprachnachricht verwerfen.
Die Sprachnachricht kann ferner über einen zentralen digitalen Assistenten durch den digitalen Assistent empfangen werden. Der zentrale, digitale Assistent ist ein digitaler Assistent, der von dem Fahrzeug bereitgestellt wird und bei dem vorzugsweise alle weiteren digitalen Assistenten aus der Vielzahl der digitalen Assistenten registriert sind. Der zentrale, digitale Assistent kann einen oder mehrere Audiokanäle zwischen einem oder mehrere Mikrophone und einem digitalen Assistenten, vorzugsweise aller registrierten, digitalen Assistenten, ausschalten. Die Sprachnachricht kann dann über die Mikrophone des zentralen, digitalen Assistenten empfangen werden.
Das Verfahren 100 kann einen Befehl oder mehrere Befehle der Sprachnachricht durch den digitalen Assistenten und/oder den zentralen, digitalen Assistenten ermitteln 104. Ein Befehl kann ein Ausführen einer Fahrzeugfunktion steuern. Die Fahrzeugfunktion kann über eine Schnittstelle des Fahrzeugs bereitgestellt werden. Beispielsweise kann die Fahrzeugfunktion eine Funktion eines Fahrerassistenzsystems, eine Funktion eines Infotainmentsystems, oder eine Funktion sein, die einen Aktor des Fahrzeugs steuert.
Ferner kann das Verfahren 100 eine Ausführungsberechtigung des Fahrzeuginsassen für den Befehl der Sprachnachricht bestimmen 106. Die Ausführungsberechtigung kann durch den digitalen Assistenten, der den Befehl der Sprachnachricht ermittelt hat, und/oder durch den zentralen, digitalen Assistenten des Fahrzeugs bestimmt werden.
Falls der Fahrzeuginsasse eine Ausführungsberechtigung für den Befehl der Sprachnachricht hat, kann das Verfahren den Befehl der Sprachnachricht zum Ausführen der Fahrzeugfunktion in dem Fahrzeug ausführen 108. Vorzugsweise kann das der Befehl der Sprachnachricht durch den digitalen Assistent, der die Sprachnachricht verarbeitet oder den zentralen, digitalen Assistenten des Fahrzeugs ausgeführt werden. Beispielsweise kann der digitale Assistent zum Ausführen der Fahrzeugfunktion den Befehl zum Ausführen der Fahrzeugfunktion an den zentralen, digitalen Assistent des Fahrzeugs übermitteln. Der zentrale, digitale Assistent des Fahrzeugs kann den Befehl des digitalen Assistenten empfangen und zum Ausfuhren der Fahrzeugfunktion den Befehl ausführen.
Falls der Fahrzeuginsasse keine Ausführungsberechtigung für den Befehl der Sprachnachricht hat, kann das Verfahren einen weiteren, digitalen Assistenten aus der Vielzahl von digitalen Assistenten in dem Fahrzeug ermitteln, wobei der weitere, digitale Assistent mit einem weiteren Fahrzeuginsassen verknüpft ist, der eine Ausführungsberechtigung des Befehls erteilen kann. Vorzugsweise kann der weitere, digitale Assistent mittels einer Rangordnung aller digitalen Assistenten in dem Fahrzeug ermitteln werden. Die Rangordnung aller digitalen Assistenten in dem Fahrzeug kann vorgegeben sein oder dynamisch bestimmt werden. Beispielsweise kann die Rangordnung durch einen Sitzplatz eines Fahrzeuginsassen, der mit einem digitalen Assistenten verknüpft ist, dynamisch bestimmt werden.
Durch den weiteren, digitalen Assistenten kann eine Sprachnachricht zum Ermitteln der Ausführungsberechtigung des Befehls an den weiteren Fahrzeuginsassen, der mit dem weiteren, digitalen Assistenten verknüpft ist, bereitgestellt werden. Ferner kann der weitere, digitale Assistent eine Antwortsprachnachricht des weiteren Fahrzeuginsassen in Antwort auf die bereitgestellte Sprachnachricht zum Ermitteln der Ausführungsberechtigung des Befehls empfangen. Die Antwortsprachnachricht kann eine Ausführungsberechtigung des Befehls oder keine Ausführungsberechtigung des Befehls enthalten. Falls die Antwortsprachnachricht des weiteren Fahrzeuginsassen eine Ausführungsberechtigung des Befehls enthält, kann das Verfahren die positive Ausführungsberechtigung an den digitalen Assistenten oder den zentralen digitalen Assistenten übermitteln und der digitale Assistent oder der zentrale digitale Assistent kann den Befehl zum Ausführen der Fahrzeugfunktion in dem Fahrzeug ausführen.
Falls die Antwortsprachnachricht des weiteren Fahrzeuginsassen keine
Ausführungsberechtigung des Befehls enthält, kann das Verfahren die negative
Ausführungsberechtigung an den digitalen Assistenten oder den zentralen Assistenten übermitteln und der digitale Assistent oder der zentrale, digitale Assistent kann die Ausführung des Befehls ablehnen.
Im Folgenden werden Beispiele vorgestellt, wie das Verfahren 100 angewandt werden kann, um eine Ausführungsberechtigung für einen Befehl einer Sprachnachricht eines digitalen Assistenten aus der Vielzahl der digitalen Assistenten zu ermitteln. In einem Beispiel kann eine Sprachnachricht„links abbiegen und Musik auf maximale
Lautstärke“ von einem Beifahrer durch den digitalen Assistenten des Beifahrer empfangen werden. Der digitale Assistent des Beifahrers kann zwei Befehle in der Sprachnachricht ermitteln. Für jeden der zwei Befehle der Sprachnachricht wird die Ausführungsberechtigung für den digitalen Assistenten des Beifahrers bestimmt. Im oben genannten Beispiel ist jeder Befehl fahrrelevant. Dies bedeutet, dass nur der Fahrer bzw. der digitale Assistent des Fahrers die Ausführungsberechtigung für die zwei Befehle hat. Aus diesem Grund muss eine Zustimmung des Fahrers angefragt werden, damit der digitale Assistent des Beifahrers die
Ausführungsberechtigung für die zwei Befehle erhält. Dazu kann der digitale Assistent des Beifahrers eine Nachricht zum Bereitstellen einer Ausführungsberechtigung für die beiden Befehle an den digitalen Assistenten des Fahrers übermitteln. Der digitale Assistent des Fahrers kann die Nachricht zum Bereitstellen einer Ausführungsberechtigung für die beiden Befehle empfangen und eine Nachricht zum Abfragen der Ausführungsberechtigungen für die beiden Befehle als Sprachnachricht an den Fahrer ausgeben. Beispielsweise kann der digitale Assistent des Fahrers den Fahrer fragen, ob es dem Beifahrer erlaubt ist, das Fahrzeug links abbiegen zu lassen und die Musik auf die maximale Lautstärke zu stellen. Der digitale Assistent des Fahrers kann auf eine Antwortsprachnachricht des Fahrers warten. Beispielsweise kann der digitale Assistent des Fahrers die Antwortsprachnachricht mit dem Inhalt„nein“ empfangen. Der digitale Assistent des Fahrers kann daraufhin dem digitalen Assistent des Beifahrers eine negative Ausführungsberechtigung für die beiden Befehle übermitteln. Der digitale Assistent des Beifahrers kann die negative Ausführungsberechtigung für die beiden Befehle empfangen und die beiden Befehle des Beifahrers verwerfen.
In einem weiteren Beispiel sind die Fahrzeuginsassen ein Kind und der Vater des Kindes. Der digitale Assistent des Kindes empfängt eine Sprachnachricht, die einen Befehl enthält, der Bezug nimmt auf den Vater, der ebenfalls als Fahrzeuginsasse in dem Fahrzeug sitzt, oder eine Genehmigung durch den Vater des Kindes benötigt. Um eine Ausführungsberechtigung zu erhalten kann der digitale Assistent des Kindes den digitalen Assistenten des Vaters bezüglich einer Ausführungsberechtigung des Befehls anfragen. Wie bereits oben beschrieben kann der Vater eine positive oder eine negative Ausführungsberechtigung seinem digitalen Assistenten mitteilen. Dementsprechend kann der Befehl durch den digitalen Assistenten der Kindes ausgeführt oder verworfen werden. In einem weiteren Beispiel sind die Fahrzeuginsassen wenigstens zwei Personen, die jeweils eine Sprachnachricht mit dem gleichen Befehl zur gleichen Zeit, mit zeitlichen Überscheiden oder in kurzer zeitlicher Abfolge, beispielsweise innerhalb einer Sekunde oder weniger Sekunden, abgeben und diese von ihren jeweiligen digitalen Assistenten empfangen werden. Um zu bestimmen, welcher der beiden Befehle ausgeführt wird, kann eine Randordnung der digitalen Assistenten erstellt werden. Der bezüglich der Rangordnung höhere digitale Assistent erhält die Ausführungsberechtigung für den Befehl. Die Rangordnung kann beispielsweise aus Basis der Sitzposition der Fahrzeuginsassen erstellt werden. Die höchste Rangordnung ist beispielsweise mit der Sitzposition Fahrer, die zweithöchste Rangordnung mit der der
Sitzposition Beifahrer verknüpft sein. Zusätzlich oder alternativ kann die Rangordnung der digitalen Assistenten mittels einer sozialen Rangordnung der Personen erstellt werden, die mit dem jeweiligen digitalen Assistenten verknüpft ist. Ist beispielsweise eine berufliche
Rangordnung einer der beiden Fahrzeuginsassen höher, dann wird die
Ausführungsberechtigung für den Befehl dem digitalen Assistent zugewiesen, dessen verknüpfter Fahrzeuginsasse die höhere berufliche Rangordnung hat.
Zusätzlich oder alternativ kann die Rangordnung basierend auf technischen Merkmalen der jeweiligen digitalen Assistenten erstellt werden. Betrifft der Befehl beispielsweise eine Funktion zum Abspielen von Musik in dem Fahrzeug, dann kann die Randordnung der digitalen
Assistenten basierend auf der Datenbankgröße der verfügbaren Musiktitel der digitalen Assistenten erstellt werden. Der digitale Assistent mit der größeren Datenbankgröße erhält die Ausführungsberechtigung zum Ausführen des Befehls.
Ferner können Zugangskontrolllisten durch einen Nutzer oder Fahrzeuginsassen definiert werden, der die Ausführungsberechtigungen eines digitalen Assistenten oder einer Gruppe von digitalen Assistenten in dem Fahrzeug festlegt.
Vorteilhafterweise kann ein einzelner digitaler Assistent aus einer Vielzahl der digitalen Assistenten in dem Fahrzeug effizient bestimmt werden, der einen Befehl zum Ausführen einer Fahrzeugfunktion ausführen darf. Dies erhöht die Sicherheit der Nutzung von digitalen
Assistenten in dem Fahrzeug. Ferner kann der Missbrauch von digitalen Assistenten in dem Fahrzeug effizient verringert werden. Bezugszeichenliste
100 Verfahren
102 Empfangen einer Sprachnachricht
104 Ermitteln eines Befehls der Sprachnachricht
106 Bestimmen eines Ausführungsberechtigung
108 Ausfuhren eines Befehls

Claims

Patentansprüche
1. Verfahren zum Bestimmen eines digitalen Assistenten zum Ausfuhren einer
Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, das
Verfahren umfassend:
Empfangen einer Sprachnachricht eines Fahrzeuginsassen durch einen digitalen Assistenten aus der Vielzahl der digitalen Assistenten in dem Fahrzeug;
Ermitteln eines Befehls der Sprachnachricht durch den digitalen Assistenten;
Bestimmen einer Ausführungsberechtigung des Fahrzeuginsassen für den Befehl der Sprachnachricht durch den digitalen Assistenten; und
Falls der Fahrzeuginsasse eine Ausführungsberechtigung für den Befehl der
Sprachnachricht hat:
Ausführen des Befehls der Sprachnachricht durch den digitalen Assistenten zum Ausführen der Fahrzeugfunktion in dem Fahrzeug.
2. Verfahren nach Anspruch 1 , wobei das Empfangen der Sprachnachricht des
Fahrzeuginsassen durch den digitalen Assistenten aus der Vielzahl der digitalen Assistenten umfasst:
Empfangen der Sprachnachricht des Fahrzeuginsassen durch mehrere, digitale Assistenten aus der Vielzahl der digitalen Assistenten;
Prüfen, ob der Fahrzeuginsasse mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft ist, der die Sprachnachricht empfangen hat;
Falls der Fahrzeuginsasse mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft ist, der die Sprachnachricht empfangen hat:
Empfangen der Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten, der mit dem Fahrzeuginsassen verknüpft ist;
Falls der Fahrzeuginsasse nicht mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft ist, der die Sprachnachricht empfangen hat:
Verwerfen der Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten; und/oder
Übermitteln der Sprachnachricht der Fahrzeuginsassen an einen zentralen, digitalen Assistenten, der die Sprachnachricht des Fahrzeuginsassen an den digitalen Assistenten übermittelt, der mit dem Fahrzeuginsassen verknüpft ist; und Empfangen der Sprachnachricht des Fahrzeuginsassen durch den digitalen Assistenten, der mit dem Fahrzeuginsassen verknüpft ist.
3. Verfahren nach einem der vorhergehenden Ansprüche, wobei der Fahrzeuginsasse, eindeutig mit einem digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft ist; und/oder
wobei ein digitaler Assistent aus der Vielzahl der digitalen Assistenten eindeutig identifizierbar ist.
4. Verfahren nach einem der vorhergehenden Ansprüche, wobei ein digitaler Assistent, vorzugsweise alle, digitale Assistenten, aus der Vielzahl der digitalen Assistenten bei einem zentralen, digitalen Assistenten des Fahrzeugs registriert ist bzw. sind.
5. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Ausführungsberechtigung basierend auf einer Sitzposition des Fahrzeuginsassen in dem Fahrzeug ermittelt wird.
6. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Ausführungsberechtigung basierend auf einer Rangordnung des digitalen Assistenten bezüglich einer Rangordnung der Vielzahl der digitalen Assistenten ermittelt wird.
7. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Ausführungsberechtigung basierend auf einer Art des Befehls der Sprachnachricht ermittelt wird.
8. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Ausführungsberechtigung basierend einer vorgegebenen Zugangskontrollliste ermittelt wird.
9. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Ausführungsberechtigung in Abhängigkeit einer oder mehrerer persönlicher Präferenzen des Fahrzeuginsassen, die mit dem digitalen Assistenten des Fahrzeuginsassen verknüpft sind, und/oder einer oder mehrerer persönlicher Präferenzen von Fahrzeuginsassen, die mit weiteren, digitalen Assistenten aus der Vielzahl der digitalen Assistenten verknüpft sind, ermittelt wird.
10. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Ausführungsberechtigung mittels eines Kontexts des Befehls ermittelt wird; und/oder wobei die Ausführungsberechtigung durch den zentralen, digitalen Assistenten bestimmt wird.
1 1. Verfahren nach einem der vorhergehenden Ansprüche, das Verfahren weiterhin umfassend:
Falls der Fahrzeuginsasse keine Ausführungsberechtigung für den Befehl der
Sprachnachricht hat:
Ermitteln eines weiteren, digitalen Assistenten aus der Vielzahl der digitalen Assistenten in dem Fahrzeug, wobei der weitere, digitale Assistent mit einem weiteren Fahrzeuginsassen verknüpft ist, der eine Ausführungsberechtigung des Befehls erteilen kann;
Bereitstellen einer Sprachnachricht zum Ermitteln der Ausführungsberechtigung des Befehls durch den weiteren, digitalen Assistenten an den weiteren
Fahrzeuginsassen, der mit dem weiteren, digitalen Assistenten verknüpft ist;
Empfangen einer Antwortsprach nach rieht des weiteren Fahrzeuginsassen durch den weiteren, digitalen Assistenten in Antwort auf die bereitgestellte Sprachnachricht zum Ermitteln der Ausführungsberechtigung des Befehls, wobei die
Antwortsprachnachricht eine Ausführungsberechtigung des Befehls oder keine
Ausführungsberechtigung des Befehls enthält; und
Falls die Antwortsprachnachricht des weiteren Fahrzeuginsassen eine
Ausführungsberechtigung des Befehls enthält:
Ausführen des Befehls durch den digitalen Assistenten zum Ausführen der Fahrzeugfunktion in dem Fahrzeug.
12. Verfahren nach Anspruch 1 1 , das Verfahren weiterhin umfassend:
Falls die Antwortsprachnachricht des weiteren Fahrzeuginsassen keine
Ausführungsberechtigung des Befehls enthält:
Ablehnen einer Ausführung des Befehls durch den weiteren, digitalen Assistenten und/oder durch den digitalen Assistenten.
13. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Vielzahl der digitalen Assistenten auf verschiedenen mobilen Endgeräten, und/oder der zentrale, digitale Assistent auf einem Steuergeräte des Fahrzeugs ausgeführt werden; und/oder
wobei die Vielzahl der digitalen Assistenten alle digitalen Assistenten von
Fahrzeuginsassen umfasst, die mit dem Fahrzeug gekoppelt sind.
14. Verfahren nach einem der vorhergehenden Ansprüche, wobei jeder digitale Assistent aus der Vielzahl der digitalen Assistenten mit einer Sitzposition in dem Fahrzeug verknüpft ist; und/oder
wobei eine Hierarchie von digitalen Assistenten aus der Vielzahl der digitalen
Assistenten basierend auf der Sitzposition, mit der ein digitaler Assistent verknüpft ist, ermittelt wird.
15. Computerlesbares Medium zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, wobei das computerlesbare Medium Instruktionen speichert, die, wenn ausgeführt aus einem
Computer oder einem Steuergerät, das Verfahren nach einem der Ansprüche 1 bis 14 ausführen.
16. System zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, wobei das System dazu ausgebildet ist das Verfahren nach einem der Ansprüche 1 bis 14 auszuführen.
17. Fahrzeug umfassend das System zum Bestimmen eines digitalen Assistenten zum
Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in dem Fahrzeug nach Anspruch 16.
PCT/EP2019/063483 2018-08-02 2019-05-24 Verfahren zum bestimmen eines digitalen assistenten zum ausführen einer fahrzeugfunktion aus einer vielzahl von digitalen assistenten in einem fahrzeug, computerlesbares medium, system, und fahrzeug WO2020025186A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201980033334.XA CN112135756B (zh) 2018-08-02 2019-05-24 用于确定用于实施车辆功能的数字助理的方法和系统
US17/261,448 US11840184B2 (en) 2018-08-02 2019-05-24 Method for determining a digital assistant for carrying out a vehicle function from a plurality of digital assistants in a vehicle, computer-readable medium, system, and vehicle

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102018212902.9A DE102018212902A1 (de) 2018-08-02 2018-08-02 Verfahren zum Bestimmen eines digitalen Assistenten zum Ausführen einer Fahrzeugfunktion aus einer Vielzahl von digitalen Assistenten in einem Fahrzeug, computerlesbares Medium, System, und Fahrzeug
DE102018212902.9 2018-08-02

Publications (1)

Publication Number Publication Date
WO2020025186A1 true WO2020025186A1 (de) 2020-02-06

Family

ID=66668920

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2019/063483 WO2020025186A1 (de) 2018-08-02 2019-05-24 Verfahren zum bestimmen eines digitalen assistenten zum ausführen einer fahrzeugfunktion aus einer vielzahl von digitalen assistenten in einem fahrzeug, computerlesbares medium, system, und fahrzeug

Country Status (4)

Country Link
US (1) US11840184B2 (de)
CN (1) CN112135756B (de)
DE (1) DE102018212902A1 (de)
WO (1) WO2020025186A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7266418B2 (ja) * 2019-02-14 2023-04-28 本田技研工業株式会社 エージェント装置、エージェント装置の制御方法、およびプログラム
US20210050003A1 (en) * 2019-08-15 2021-02-18 Sameer Syed Zaheer Custom Wake Phrase Training

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2040208A2 (de) * 2007-07-23 2009-03-25 Denso Corporation Nutzerbequemlichkeitssystem für ein Fahrzeug
US20140309862A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc User profile exchange via vehicle supported communications protocol
WO2015030710A1 (en) * 2013-08-26 2015-03-05 Intel Corporation Configuring user customizable operational features of a vehicle
WO2015077662A1 (en) * 2013-11-22 2015-05-28 Qualcomm Incorporated System and method for configuring an interior of a vehicle based on preferences provided with multiple mobile computing devices within the vehicle
EP3264266A1 (de) * 2015-05-20 2018-01-03 Huawei Technologies Co. Ltd. Verfahren zur positionierung eines lotungsortes und endgerätevorrichtung
EP3330827A1 (de) * 2015-07-30 2018-06-06 Samsung Electronics Co., Ltd. Autonom fahrendes fahrzeug und steuerungsverfahren eines autonom fahrenden fahrzeugs
EP3348441A1 (de) * 2015-10-27 2018-07-18 Zhejiang Geely Holding Group Co., Ltd. Fahrzeugsteuerungssystem basierend auf gesichtserkennung

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5055939A (en) * 1987-12-15 1991-10-08 Karamon John J Method system & apparatus for synchronizing an auxiliary sound source containing multiple language channels with motion picture film video tape or other picture source containing a sound track
US6243683B1 (en) * 1998-12-29 2001-06-05 Intel Corporation Video control of speech recognition
US6567775B1 (en) * 2000-04-26 2003-05-20 International Business Machines Corporation Fusion of audio and video based speaker identification for multimedia information access
US6775603B2 (en) * 2001-10-18 2004-08-10 Ford Motor Company Method and system for maintaining personalization of user adjustable features
US20040215464A1 (en) * 2002-01-09 2004-10-28 Nelson Warren Fred Voice activated-automotive window display unit
US7472063B2 (en) * 2002-12-19 2008-12-30 Intel Corporation Audio-visual feature fusion and support vector machine useful for continuous speech recognition
US20040220705A1 (en) * 2003-03-13 2004-11-04 Otman Basir Visual classification and posture estimation of multiple vehicle occupants
KR101149571B1 (ko) * 2004-04-28 2012-05-29 코닌클리케 필립스 일렉트로닉스 엔.브이. 적응성 빔 형성기, 사이드로브 소거기, 핸즈프리 음성 통신 디바이스
JP5134876B2 (ja) * 2007-07-11 2013-01-30 株式会社日立製作所 音声通信装置及び音声通信方法並びにプログラム
US20090055180A1 (en) * 2007-08-23 2009-02-26 Coon Bradley S System and method for optimizing speech recognition in a vehicle
JP4926916B2 (ja) * 2007-11-07 2012-05-09 キヤノン株式会社 情報処理装置、情報処理方法、およびコンピュータプログラム
US8219387B2 (en) * 2007-12-10 2012-07-10 Microsoft Corporation Identifying far-end sound
US8624962B2 (en) * 2009-02-02 2014-01-07 Ydreams—Informatica, S.A. Ydreams Systems and methods for simulating three-dimensional virtual interactions from two-dimensional camera images
US8305189B2 (en) * 2009-11-24 2012-11-06 Ford Global Technologies, Llc System and method for changing key status in a vehicle based on driver status
JP2011186351A (ja) * 2010-03-11 2011-09-22 Sony Corp 情報処理装置、および情報処理方法、並びにプログラム
WO2011149558A2 (en) * 2010-05-28 2011-12-01 Abelow Daniel H Reality alternate
US9396385B2 (en) * 2010-08-26 2016-07-19 Blast Motion Inc. Integrated sensor and video motion analysis method
US8700392B1 (en) * 2010-09-10 2014-04-15 Amazon Technologies, Inc. Speech-inclusive device interfaces
FR2975561B1 (fr) * 2011-05-20 2015-11-13 Renault Sas Acces et personnalisation d'un vehicule automobile par telephone
US20130030811A1 (en) * 2011-07-29 2013-01-31 Panasonic Corporation Natural query interface for connected car
WO2013093565A1 (en) * 2011-12-22 2013-06-27 Nokia Corporation Spatial audio processing apparatus
KR101749143B1 (ko) * 2011-12-26 2017-06-20 인텔 코포레이션 탑승자 오디오 및 시각적 입력의 차량 기반 결정
US9432633B2 (en) * 2011-12-28 2016-08-30 Pelco, Inc. Visual command processing
US8913103B1 (en) * 2012-02-01 2014-12-16 Google Inc. Method and apparatus for focus-of-attention control
US9922646B1 (en) * 2012-09-21 2018-03-20 Amazon Technologies, Inc. Identifying a location of a voice-input device
US9008641B2 (en) * 2012-12-27 2015-04-14 Intel Corporation Detecting a user-to-wireless device association in a vehicle
US9747898B2 (en) * 2013-03-15 2017-08-29 Honda Motor Co., Ltd. Interpretation of ambiguous vehicle instructions
KR20140146965A (ko) * 2013-06-18 2014-12-29 삼성전자주식회사 디스플레이 장치, 서버를 포함하는 변환 시스템 및 디스플레이 장치의 제어 방법
US20150025705A1 (en) * 2013-07-16 2015-01-22 GM Global Technology Operations LLC Driver profile control system for motor vehicles
US9680934B2 (en) * 2013-07-17 2017-06-13 Ford Global Technologies, Llc Vehicle communication channel management
US9892745B2 (en) * 2013-08-23 2018-02-13 At&T Intellectual Property I, L.P. Augmented multi-tier classifier for multi-modal voice activity detection
JP6148163B2 (ja) * 2013-11-29 2017-06-14 本田技研工業株式会社 会話支援装置、会話支援装置の制御方法、及び会話支援装置のプログラム
US9582246B2 (en) * 2014-03-04 2017-02-28 Microsoft Technology Licensing, Llc Voice-command suggestions based on computer context
KR102216048B1 (ko) * 2014-05-20 2021-02-15 삼성전자주식회사 음성 명령 인식 장치 및 방법
JP6464449B2 (ja) * 2014-08-29 2019-02-06 本田技研工業株式会社 音源分離装置、及び音源分離方法
US20160100092A1 (en) * 2014-10-01 2016-04-07 Fortemedia, Inc. Object tracking device and tracking method thereof
US9741344B2 (en) * 2014-10-20 2017-08-22 Vocalzoom Systems Ltd. System and method for operating devices using voice commands
US9881610B2 (en) * 2014-11-13 2018-01-30 International Business Machines Corporation Speech recognition system adaptation based on non-acoustic attributes and face selection based on mouth motion using pixel intensities
US9741342B2 (en) * 2014-11-26 2017-08-22 Panasonic Intellectual Property Corporation Of America Method and apparatus for recognizing speech by lip reading
DE102015210430A1 (de) * 2015-06-08 2016-12-08 Robert Bosch Gmbh Verfahren zum Erkennen eines Sprachkontexts für eine Sprachsteuerung, Verfahren zum Ermitteln eines Sprachsteuersignals für eine Sprachsteuerung und Vorrichtung zum Ausführen der Verfahren
US9764694B2 (en) * 2015-10-27 2017-09-19 Thunder Power Hong Kong Ltd. Intelligent rear-view mirror system
US9832583B2 (en) * 2015-11-10 2017-11-28 Avaya Inc. Enhancement of audio captured by multiple microphones at unspecified positions
WO2017138934A1 (en) * 2016-02-10 2017-08-17 Nuance Communications, Inc. Techniques for spatially selective wake-up word recognition and related systems and methods
CN105774709A (zh) * 2016-04-18 2016-07-20 北京新能源汽车股份有限公司 车身控制装置及其控制方法和车身控制系统以及车辆
EP3239981B1 (de) * 2016-04-26 2018-12-12 Nokia Technologies Oy Verfahren, vorrichtungen und computerprogramme zur veränderung eines merkmals in verbindung mit einem getrennten audiosignal
US10089071B2 (en) * 2016-06-02 2018-10-02 Microsoft Technology Licensing, Llc Automatic audio attenuation on immersive display devices
US10152969B2 (en) * 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US10482899B2 (en) * 2016-08-01 2019-11-19 Apple Inc. Coordination of beamformers for noise estimation and noise suppression
JP6631445B2 (ja) * 2016-09-09 2020-01-15 トヨタ自動車株式会社 車両用情報提示装置
US10403279B2 (en) * 2016-12-21 2019-09-03 Avnera Corporation Low-power, always-listening, voice command detection and capture
WO2018132273A1 (en) * 2016-12-30 2018-07-19 Harman International Industries, Incorporated Voice recognition system
US20180190282A1 (en) * 2016-12-30 2018-07-05 Qualcomm Incorporated In-vehicle voice command control
WO2018147687A1 (en) * 2017-02-10 2018-08-16 Samsung Electronics Co., Ltd. Method and apparatus for managing voice-based interaction in internet of things network system
US10332515B2 (en) * 2017-03-14 2019-06-25 Google Llc Query endpointing based on lip detection
WO2018175959A1 (en) * 2017-03-23 2018-09-27 Joyson Safety Systems Acquisition Llc System and method of correlating mouth images to input commands
EP3461304A4 (de) * 2017-04-24 2019-05-22 Beijing Didi Infinity Technology And Development Co., Ltd. System und verfahren zur echtzeit-transkription eines audiosignals in texte
US20190037363A1 (en) * 2017-07-31 2019-01-31 GM Global Technology Operations LLC Vehicle based acoustic zoning system for smartphones
US10374816B1 (en) * 2017-12-13 2019-08-06 Amazon Technologies, Inc. Network conference management and arbitration via voice-capturing devices
US20190237067A1 (en) * 2018-01-31 2019-08-01 Toyota Motor Engineering & Manufacturing North America, Inc. Multi-channel voice recognition for a vehicle environment
US20190355352A1 (en) * 2018-05-18 2019-11-21 Honda Motor Co., Ltd. Voice and conversation recognition system
KR102226132B1 (ko) * 2019-07-23 2021-03-09 엘지전자 주식회사 헤드셋 및 그의 구동 방법
US11568873B2 (en) * 2020-04-16 2023-01-31 Bernard J. SCHWARTZ Privacy enhancement apparatuses for use with voice-activated devices and assistants
US20230228832A1 (en) * 2022-01-18 2023-07-20 Vera Kozyr Digital Monitoring Badge System

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2040208A2 (de) * 2007-07-23 2009-03-25 Denso Corporation Nutzerbequemlichkeitssystem für ein Fahrzeug
US20140309862A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc User profile exchange via vehicle supported communications protocol
WO2015030710A1 (en) * 2013-08-26 2015-03-05 Intel Corporation Configuring user customizable operational features of a vehicle
WO2015077662A1 (en) * 2013-11-22 2015-05-28 Qualcomm Incorporated System and method for configuring an interior of a vehicle based on preferences provided with multiple mobile computing devices within the vehicle
EP3264266A1 (de) * 2015-05-20 2018-01-03 Huawei Technologies Co. Ltd. Verfahren zur positionierung eines lotungsortes und endgerätevorrichtung
EP3330827A1 (de) * 2015-07-30 2018-06-06 Samsung Electronics Co., Ltd. Autonom fahrendes fahrzeug und steuerungsverfahren eines autonom fahrenden fahrzeugs
EP3348441A1 (de) * 2015-10-27 2018-07-18 Zhejiang Geely Holding Group Co., Ltd. Fahrzeugsteuerungssystem basierend auf gesichtserkennung

Also Published As

Publication number Publication date
CN112135756B (zh) 2023-08-18
DE102018212902A1 (de) 2020-02-06
US11840184B2 (en) 2023-12-12
US20210316682A1 (en) 2021-10-14
CN112135756A (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
DE102014114604B4 (de) Verfahren und Vorrichtung zur Verarbeitung mehrerer Audioströme in einem Bordrechensystem eines Fahrzeugs
DE102018119245A1 (de) Fahrzeugschlüsselverwaltung
DE102018103211B4 (de) Infotainmentsystem eines fahrzeugs zur eingabe von mehrfachabfragen durch spracheingabe
DE102018206717A1 (de) Verfahren zum fahrsituationsabhängigen Betreiben eines Kraftfahrzeugsystems eines Kraftfahrzeugs, Personalisierungseinrichtung und Kraftfahrzeug
DE102017121067A1 (de) Verwaltung der steuerung einer mobilen vorrichtungen von fahrzeugsystemen unter verwendung von richtlinien
DE112016007093T5 (de) Fahrzeugzugriffsautorisierung
DE102006028098A1 (de) Erweiterte Valet-Funktion für Fahrzeuge
DE102020123237A1 (de) Authentifizierungsschlüsselübergabe für autonomes fahrzeug
DE112016007107T5 (de) Fahrzeugbewegungsautorisierung
DE102013204882A1 (de) Verfahren und Vorrichtung zum Zuordnen eines Fahrers eines Fahrzeugs zu einer im Fahrzeug hinterlegten, ein spezifisches Fahrverhalten des Fahrers repräsentierenden, Fahrerklasse
DE102015010203A1 (de) Verfahren zum Betreiben eines Kraftfahrzeugs und System zum Betreiben eines Kraftfahrzeugs
DE102019122259A1 (de) Intelligente fahrzeugverbindung
DE102011106887A1 (de) Verfahren zum Bereitstellen nutzerspezifischer Einstellungen in einem Kraftfahrzeug sowie Verfahren zum Ermitteln einer Zuordnung eines mobilen Kommunikationsgeräts zu einem Kraftfahrzeug aus einer Mehrzahl von Kraftfahrzeugen
DE102013208506A1 (de) Hierarchische Erkennung von Fahrzeugfahrer und Auswahlaktivierung von Fahrzeugeinstellungen auf der Grundlage der Erkennung
WO2020025186A1 (de) Verfahren zum bestimmen eines digitalen assistenten zum ausführen einer fahrzeugfunktion aus einer vielzahl von digitalen assistenten in einem fahrzeug, computerlesbares medium, system, und fahrzeug
DE102019108641A1 (de) Vereinfachte authentifizierung einer mobilen vorrichtung durch ein fahrzeug für gemeinsam genutzte oder autonome fahrzeuge
DE112018001217T5 (de) Vorrichtung und Verfahren zum Speichern einer benutzerdefinierten Fahrzeugeinstellung
DE112014003311B4 (de) Kommunikationsvorrichtung
DE102017125655A1 (de) Anonymisierung von streaming-daten
DE102017208582A1 (de) Verfahren zum Betreiben eines Kraftfahrzeugs, Sicherheitssystem für ein Kraftfahrzeug und Kraftfahrzeug
EP3494015B1 (de) Verfahren zum betreiben mindestens einer funktion eines kraftfahrzeugs mittels einer tragbaren schlüsselvorrichtung
DE102019132403A1 (de) Verfahren zum selbsttätigen Auswählen eines Nutzerprofils in einem Fahrzeug
DE102013007256A1 (de) Verfahren zum personalisierten Betreiben einer graphischen Benutzeroberfläche eines Kraftwagens und Kraftwagen mit einer solchen graphischen Benutzeroberfläche
DE102019119052A1 (de) Verfahren und Vorrichtung zur Freigabe von Fahrzeugfunktionen eines Fahrzeugs, Fahrzeug und System
DE102015206334A1 (de) Steuern einer in einem Fahrzeug genutzten Funktion eines elektronischen Multifunktionsgeräts

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19726973

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19726973

Country of ref document: EP

Kind code of ref document: A1