DE102016125280A1 - System und verfahren zur funktionsaktivierung per gestenerkennung und sprachbefehl - Google Patents

System und verfahren zur funktionsaktivierung per gestenerkennung und sprachbefehl Download PDF

Info

Publication number
DE102016125280A1
DE102016125280A1 DE102016125280.8A DE102016125280A DE102016125280A1 DE 102016125280 A1 DE102016125280 A1 DE 102016125280A1 DE 102016125280 A DE102016125280 A DE 102016125280A DE 102016125280 A1 DE102016125280 A1 DE 102016125280A1
Authority
DE
Germany
Prior art keywords
vehicle
function
control system
user
gesture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102016125280.8A
Other languages
English (en)
Inventor
Brandon BEAUVAIS
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of DE102016125280A1 publication Critical patent/DE102016125280A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20Means to switch the anti-theft system on or off
    • B60R25/2045Means to switch the anti-theft system on or off by hand gestures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20Means to switch the anti-theft system on or off
    • B60R25/25Means to switch the anti-theft system on or off using biometry
    • B60R25/257Voice recognition
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • B62D15/0285Parking performed automatically
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0063Manual parameter input, manual setting means, manual initialising or calibrating means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54Audio sensitive means, e.g. ultrasound
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/043Identity of occupants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/21Voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/215Selection or confirmation of options
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0381Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G07C2009/00365Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks in combination with a wake-up circuit
    • G07C2009/00373Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks in combination with a wake-up circuit whereby the wake-up circuit is situated in the lock
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G07C2009/00507Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function
    • G07C2009/00515Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function opening and locking of all locks at the same time
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G07C2009/00507Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function
    • G07C2009/00523Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks keyless data carrier having more than one function opening of different locks separately

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Selective Calling Equipment (AREA)
  • Lock And Its Accessories (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Verschiedene Ausführungsformen der vorliegenden Offenbarung stellen ein System und Verfahren zur Aktivierung einer Fahrzeugfunktion per Gestenerkennung und Sprachbefehl durch einen autorisierten Benutzer bereit. Im Allgemeinen erhält ein Fahrzeugsteuerungssystem gemäß der vorliegenden Offenbarung Gestenbefehle und Sprachbefehle von einem autorisierten Benutzer und kommuniziert mit einem Karosseriesteuerungsmodul, um die Fahrzeugfunktion auszuführen. Spezieller ist in bestimmten Ausführungsformen ein Prozessor des Fahrzeugsteuerungssystems dafür ausgelegt, einen Funktionsaktivierungsmodus eines Fahrzeugsteuerungssystems anzustoßen, einen autorisierten Benutzer zu authentifizieren, einen Gestenbefehl und einen Sprachbefehl zu empfangen, eine dem empfangenen Gestenbefehl und Sprachbefehl zugeordnete Fahrzeugfunktion zu bestimmen und die bestimmte Funktion in Reaktion auf den erkannten Gestenbefehl und Sprachbefehl zu aktivieren.

Description

  • TECHNISCHES GEBIET
  • Die vorliegende Patentanmeldung betrifft allgemein eine ferngesteuerte Verriegelungsfreigabe bei einem Fahrzeug. Spezieller betrifft die Anmeldung eine ausgelöste Freigabe einer Verriegelung, etwa zum Entriegeln der Fahrzeugtüren oder des Kofferraumdeckels, wenn sich der Fahrzeugnutzer dem Fahrzeug nähert.
  • HINTERGRUND DER ERFINDUNG
  • Fahrzeuge weisen verschiedene Systeme auf, über die der Benutzer verschiedene Fahrzeugfunktionen anhand von Befehlen des Benutzers vom Fahrzeuginneren aus steuern kann. Viele Fahrzeuge weisen ein schlüsselloses Zugangssystem mit Fernbedienung (Remote Keyless System, RKS) auf, um die Steuerung verschiedener Fahrzeugfunktionen, etwa das Verriegeln und Entriegeln der Türen und das Lösen des Kofferraumdeckels, zu ermöglichen, ohne einen herkömmlichen Schlüssel oder eine andere mechanische Vorrichtung zu verwenden oder in anderer Weise in physischen Kontakt mit dem Fahrzeug zu treten. Typischerweise weisen schlüssellose Zugangssysteme mit Fernbedienung eine Fernbedienung auf, die Tasten oder Schalter umfasst, um die Steuerung von Fahrzeugfunktionen zu ermöglichen. Die Fernbedienung kann in Form eines vom Zündschlüssel des Fahrzeugs unabhängigen, separaten Schlüsselanhängers vorliegen oder ein in den Zündschlüsselgriff integrierter Schlüsselkopf sein.
  • Bei anderen Fahrzeugsteuerungssystemen hingegen, etwa Selbsteinpark- oder Ausparkfunktion, will ein Benutzer möglicherweise die betreffenden Funktionen aktivieren, ohne in das Fahrzeug einzusteigen. Weiterhin kann ein Benutzer feststellen, dass einige Funktionen bequemer von außerhalb des Fahrzeugs zu bedienen sind. Dementsprechend besteht in der Technik noch immer ein Bedarf an einem System und Verfahren zur Steuerung bestimmter Fahrzeugfunktionen von außerhalb des Fahrzeugs durch einen autorisierten Benutzer.
  • Gewisse Funktionen können bequemer von außerhalb des Fahrzeugs (Sichtlinie) ein- bzw. auszuschalten sein. Eine derartige Ausgestaltung gibt dem Benutzer die Möglichkeit, gewisse Funktionen des Fahrzeugs zu aktivieren, ohne in das Fahrzeug einzusteigen.
  • KURZFASSUNG
  • Verschiedene Ausführungsformen der vorliegenden Offenbarung stellen ein System und Verfahren zur Aktivierung einer Fahrzeugfunktion per Gestenerkennung und Sprachbefehl durch einen autorisierten Benutzer bereit. Im Allgemeinen erhält ein Fahrzeugsteuerungssystem gemäß der vorliegenden Offenbarung Gestenbefehle und Sprachbefehle von einem autorisierten Benutzer und kommuniziert mit einem Karosseriesteuerungsmodul, um die Fahrzeugfunktion auszuführen. Spezieller ist in bestimmten Ausführungsformen ein Prozessor des Fahrzeugsteuerungssystems dafür ausgelegt, einen Funktionsaktivierungsmodus eines Fahrzeugsteuerungssystems anzustoßen, einen autorisierten Benutzer zu authentifizieren, einen Gestenbefehl und einen Sprachbefehl zu empfangen, eine dem empfangenen Gestenbefehl und Sprachbefehl zugeordnete Fahrzeugfunktion zu bestimmen und die bestimmte Funktion in Reaktion auf den erkannten Gestenbefehl und Sprachbefehl zu aktivieren.
  • Wie ersichtlich ist, wird die vorliegende Offenbarung durch die beigefügten Patentansprüche definiert. Die Beschreibung fasst Aspekte der Ausführungsformen zusammen und soll nicht herangezogen werden, um die Patentansprüche einzuschränken. Andere Implementierungen werden in Übereinstimmung mit den hier beschriebenen Verfahren betrachtet, wie für den Durchschnittsfachmann auf diesem Gebiet der Technik bei Durchsicht der folgenden Zeichnungen und der ausführlichen Beschreibung erkennbar wird, und es ist beabsichtigt, dass derlei Implementierungen in den Schutzbereich der vorliegenden Patentanmeldung fallen sollen.
  • KURZE BESCHREIBUNG DER ZEICHNUNGEN
  • Zum besseren Verständnis der Erfindung kann nun auf Ausführungsformen Bezug genommen werden, die in den folgenden Zeichnungen dargestellt sind. Die Komponenten in den Zeichnungen sind nicht notwendigerweise maßstabsgetreu, und verwandte Elemente können weggelassen sein, oder in manchen Fällen können Proportionen übertrieben sein, um die hier beschriebenen neuartigen Merkmale hervorzuheben und deutlich zu veranschaulichen. Darüber hinaus können Systemkomponenten in verschiedener Weise angeordnet sein, wie in der Technik bekannt. Ferner bezeichnen in den Zeichnungen gleiche Bezugsnummern entsprechende Teile in mehreren Darstellungen.
  • 1 ist ein Flussdiagramm einer beispielhaften Ausführungsform des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung.
  • 2 ist ein Blockschaltbild einer beispielhaften Computervorrichtung, die in einer oder mehreren Komponenten des Systems der vorliegenden Offenbarung enthalten ist, gemäß bestimmten Ausführungsformen.
  • 3 ist ein Blockschaltbild eines beispielhaften Fahrzeugsteuerungssystems der vorliegenden Offenbarung gemäß bestimmten Ausführungsformen.
  • AUSFÜHRLICHE BESCHREIBUNG BEISPIELHAFTER AUSFÜHRUNGSFORMEN
  • Wenngleich die Erfindung in verschiedenen Formen ausgeführt werden kann, werden in den Zeichnungen einige beispielhafte und nicht einschränkende Ausführungsformen dargestellt und im Folgenden in dem Verständnis beschrieben, dass die vorliegende Offenbarung als beispielhafte Veranschaulichung der Erfindung zu betrachten ist und nicht beabsichtigt ist, die Erfindung auf die spezifischen veranschaulichten Ausführungsformen zu beschränken.
  • In der vorliegenden Patentanmeldung soll die Verwendung der disjunktiven Form die konjunktive Form mit einschließen. Die Verwendung des bestimmten oder unbestimmten Artikels soll keinerlei Kardinalität anzeigen. Insbesondere soll ein Verweis auf „das” bzw. „ein” Objekt auch eines einer möglichen Vielzahl derartiger Objekte bezeichnen.
  • Verschiedene Ausführungsformen der vorliegenden Offenbarung stellen ein System und Verfahren zur Aktivierung einer Fahrzeugfunktion per Gestenerkennung und Sprachbefehl durch einen autorisierten Benutzer bereit. Im Allgemeinen erhält ein Fahrzeugsteuerungssystem gemäß der vorliegenden Offenbarung Gestenbefehle und Sprachbefehle von einem autorisierten Benutzer und kommuniziert mit einem Karosseriesteuerungsmodul, um die Fahrzeugfunktion auszuführen. Spezieller ist in bestimmten Ausführungsformen ein Prozessor des Fahrzeugsteuerungssystems dafür ausgelegt, einen Funktionsaktivierungsmodus eines Fahrzeugsteuerungssystems anzustoßen, einen autorisierten Benutzer zu authentifizieren, einen Gestenbefehl und einen Sprachbefehl zu empfangen, eine dem empfangenen Gestenbefehl und Sprachbefehl zugeordnete Fahrzeugfunktion zu bestimmen und die bestimmte Funktion in Reaktion auf den erkannten Gestenbefehl und Sprachbefehl zu aktivieren.
  • Die Komponenten des Fahrzeugsteuerungssystems der vorliegenden Offenbarung (die nachstehend ausführlich beschrieben werden) können an oder in einem Fahrzeug vorhanden oder anderweitig mit diesem integriert sein. Eine oder mehrere der Komponenten des Fahrzeugsteuerungssystems können mit einer oder mehreren Komponenten des vorhandenen Fahrzeugsystems gemeinsam genutzt werden.
  • Das Fahrzeugsteuerungssystem kann in jedem geeigneten Fahrzeug vorhanden oder sonstwie zusammen damit nutzbar sein, etwa (jedoch nicht beschränkt auf): (1) ein nicht gewerbsmäßig genutzter Personenkraftwagen wie etwa eine Limousine oder ein Transporter; (2) ein gewerblich genutztes Fahrzeug wie etwa ein Sattelzug; oder (3) ein nicht ziviles Fahrzeug wie etwa ein von Ordnungskräften, Behörden, Notfalldiensten (z. B. Brandbekämpfungsdiensten) oder Diensten der medizinischen Notfallversorgung (z. B. Krankenhäuser) benutztes Fahrzeug. Diese Liste ist keinesfalls erschöpfend und wird lediglich beispielhalber angeführt.
  • Die hier unter Bezugnahme auf die Fähigkeiten des Fahrzeugsteuerungssystems beschriebenen Merkmale, Prozesse und Verfahren können durch ein Fahrzeugsteuerungs-Tool implementiert sein, das auf dem kamerabasierten Fahrzeugsteuerungssystem läuft. Das Fahrzeugsteuerungs-Tool kann ein Programm, eine Anwendung und/oder eine Kombination aus Software und Hardware sein, das/die in eine oder mehrere der Komponenten integriert ist/sind, aus denen das Fahrzeugsteuerungssystem besteht. Das Fahrzeugsteuerungs-Tool und das Fahrzeugsteuerungssystem werden nachstehend ausführlicher beschrieben (und der Kürze halber zusammenfassend als Fahrzeugsteuerungssystem bezeichnet).
  • Auch wenn das Fahrzeug und die dem Fahrzeugsteuerungssystem entsprechenden Funktionen wie hier beschrieben nachstehend in Situationen beschrieben werden, in denen das Fahrzeug in Bewegung ist, fällt in den Schutzumfang der vorliegenden Offenbarung auch, dass dieselben Funktionen Anwendung finden können, wenn das Fahrzeug im stationären Zustand ist (z. B. geparkt, an einer roten Ampel haltend oder im Verkehr angehalten).
  • 1 ist ein Ablaufdiagramm eines beispielhaften Prozesses oder Verfahrens 100 zum Betreiben des Fahrzeugsteuerungssystems der vorliegenden Offenbarung. In verschiedenen Ausführungsformen ist der Prozess 100 durch eine Reihe von Anweisungen dargestellt, die in einem oder mehreren Speichern gespeichert sind und von einem oder mehreren Prozessoren (etwa den nachstehend im Zusammenhang mit 3 beschriebenen) ausgeführt werden. Auch wenn der Prozess 100 unter Bezugnahme auf das in 1 gezeigte Flussdiagramm beschrieben wird, können zahlreiche andere Prozesse zum Durchführen der Schritte, die diesem veranschaulichten Prozess 100 zugeordnet sind, verwendet werden. Beispielsweise kann die Reihenfolge bestimmter dargestellter Blöcke und/oder Rauten verändert werden, bestimmte dargestellte Blöcke und/oder Rauten können optional sein und/oder bestimmte dargestellte Blöcke und/oder Rauten können nicht verwendet werden.
  • Im Betrieb dieser Ausführungsform beinhaltet der Prozess 100, einen Funktionsaktivierungsmodus im Fahrzeugsteuerungssystem anzustoßen wie in Schritt 102 angegeben. Spezieller muss in dieser Ausführungsform das Fahrzeugsteuerungssystem im Funktionsaktivierungsmodus sein, damit das Fahrzeugsteuerungssystem bestimmte Fahrzeugfunktionen per Gestenerkennung und Sprachbefehl durch einen Benutzer aktivieren kann. Wie nachstehend noch ausführlicher beschrieben wird, weist im Funktionsaktivierungsmodus das Fahrzeugsteuerungssystem die Fahrzeugkameras an, einen Befehl von einem autorisierten Benutzer zu detektieren.
  • Verschiedene Ausführungsformen der vorliegenden Offenbarung beinhalten mehrere Wege zum Anstoßen des Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems. In bestimmten Ausführungsformen befindet sich das Fahrzeug ständig im Funktionsaktivierungsmodus. Spezieller fragt in einer Ausführungsform das Fahrzeugsteuerungssystem ständig ab, ob von der Kamera eine neue Funktion erkannt wurde. In einer anderen Ausführungsform ermöglicht es das Fahrzeugsteuerungssystem einem Benutzer, den Funktionsaktivierungsmodus vom Fahrzeuginneren aus zu aktivieren.
  • In einer alternativen Ausführungsform beinhaltet der Prozess 100, einen Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems über eine Schlüsselanhängervorrichtung anzustoßen. Noch spezieller ist in einer beispielhaften Ausführungsform eine Schlüsselanhängervorrichtung (hier auch als „Schlüsselanhänger” bezeichnet) dafür ausgelegt, einem Benutzer die schlüssellose Fernbedienung verschiedener Operationen oder Funktionen des Fahrzeugs zu ermöglichen, einschließlich, jedoch nicht beschränkt auf, Verriegeln und Entriegeln des Fahrzeugs, Öffnen und/oder Schließen der Fenster, der Türen oder des Kofferraumdeckels des Fahrzeugs, Einschalten des Radios oder der Heizung oder der Klimaanlage, Anstoßen von automatischen Ausparkfunktionen etc. Wie ersichtlich ist, können weitere Fahrzeugfunktionen per Schlüsselanhänger steuerbar sein, und es ist beabsichtigt, dass die vorliegende Offenbarung alle diese Schlüsselanhängeroperationen unterstützt.
  • In bestimmten Ausführungsformen empfängt ein Fahrzeugsteuerungssystem ein Signal, um den Funktionsaktivierungsmodus zu aktivieren, wenn ein Benutzer eine Eingabevorrichtung am Schlüsselanhänger betätigt. Beispielsweise weist in einer Ausführungsform ein Schlüsselanhänger verschiedene Eingabevorrichtungen auf, einschließlich, jedoch nicht beschränkt auf, Tasten oder Drucktasten, Schieber, Schalter, Knöpfe, Einstellscheiben und/oder berührungsempfindliche Eingabevorrichtungen, die vom Benutzer betätigt werden können, um die verschiedenen Funktionen des Fahrzeugs zu steuern. In dieser beispielhaften Ausführungsform weist der Schlüsselanhänger eine Eingabevorrichtung auf, die dafür ausgelegt ist, bei Betätigung den Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems anzustoßen.
  • In einer anderen Ausführungsform stößt das Fahrzeugsteuerungssystem den Funktionsaktivierungsmodus an, indem die Nähe des Schlüsselanhängers erkannt wird. Spezieller kommuniziert in einer beispielhaften Ausführungsform der Schlüsselanhänger direkt mit dem Fahrzeug, um den Funktionsaktivierungsmodus anzustoßen, wenn sich ein Benutzer dem Fahrzeug nähert. In dieser beispielhaften Ausführungsform wird, wie nachstehend ausführlicher beschrieben wird, der Befehl des Benutzers an ein Karosseriesteuerungsmodul des Fahrzeugs 404 (wie in 3 dargestellt) übertragen, um die Suche nach dem Schlüsselanhänger in Gang zu setzen. Das Karosseriesteuerungsmodul des Fahrzeugs sucht mittels einer Antenne niedriger Leistung am Fahrzeug, die eine Reichweite von nur einigen Metern vom Fahrzeug weg hat, nach dem Schlüsselanhänger. Sobald der Benutzer in den Reichweitenbereich der Antenne eintritt, erkennt das Fahrzeug den Schlüsselanhänger, authentifiziert den Schlüsselanhänger und stößt, falls er authentifiziert wurde, den Funktionsaktivierungsmodus an.
  • Nachdem das Fahrzeugsteuerungssystem eine Eingabe vom Benutzer empfangen hat, den Funktionsaktivierungsmodus anzustoßen, authentifiziert das Fahrzeugsteuerungssystem den Benutzer wie in Block 104 angegeben. Spezieller authentifiziert, in bestimmten Ausführungsformen, in denen der Funktionsaktivierungsmodus durch einen Schlüsselanhänger angestoßen wird, falls die Antenne das Signal vom Schlüsselanhänger detektiert, die Antenne den Schlüsselanhänger, indem verifiziert wird, dass der erkannte Schlüsselanhänger dem Fahrzeug zuzuordnen ist. In einer anderen Ausführungsform, in der das Fahrzeugsteuerungssystem ständig im Funktionsaktivierungsmodus ist oder nachdem der Benutzer den Funktionsaktivierungsmodus vom Fahrzeuginneren aus aktiviert hat, authentifiziert das Fahrzeugsteuerungssystem einen Benutzer, bevor nach dem Gestenbefehl gesucht wird.
  • Einmal im Funktionsaktivierungsmodus, ist ein Fahrzeugsteuerungssystem dafür ausgelegt, auf ein Signal vom Benutzer zu warten, um eine Fahrzeugsteuerungsfunktion über Gestenbefehle und Sprachbefehle des Benutzers anzustoßen. Spezieller wartet das Fahrzeugsteuerungssystem, sobald es im Funktionsaktivierungsmodus ist, auf einen Gestenbefehl eines autorisierten Benutzers. Beispielsweise will in einer Ausführungsform ein Benutzer die Selbsteinparkfunktion eines Fahrzeugs aktivieren und das Fahrzeug an der rechten Seite einer Garage einparken. In dieser beispielhaften Ausführungsform stößt der Benutzer den Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems vom Fahrzeuginneren aus an. Einmal im Funktionsaktivierungsmodus, wartet das Fahrzeugsteuerungssystem auf einen Befehl des Benutzers.
  • In dieser beispielhaften Ausführungsform beinhaltet der Prozess 100, nachdem der Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems angestoßen ist, einen Gestenbefehl zu erkennen, wie in Schritt 106 angegeben. In einer Ausführungsform ist das Fahrzeugsteuerungssystem dafür ausgelegt, mit verschiedenen Kameras innerhalb des Fahrzeugs zusammenzuwirken, zur Erkennung von Funktionsbefehlen. Das bedeutet, dass eine Kamera Gesten von Füßen, Bilder oder Handgesten wie etwa eine Form der Zeichensprache erkennt. Beispielsweise kann die Kamera Gesten erkennen, die einen hochgestreckten Daumen, ein Klatschen, einen in einer bestimmten Richtung oder einem bestimmten Winkel angehobenen Arm beinhalten, ohne jedoch darauf beschränkt zu sein.
  • Das Fahrzeugsteuerungssystem erhält Gestenbefehle über ein Kamerasystem des Fahrzeugs. Spezieller erhält das Fahrzeugsteuerungssystem Bildinformationen, etwa digitale Standbilder, Streaming-Video und/oder Digital-Video, über eine oder mehrere geeignete Kameras (oder andere Bildgebungsvorrichtungen, etwa LIDAR- oder RADAR-System bei autonomen Fahrzeugen oder andere Formen topologieverarbeitender Systeme), die am Fahrzeug, in dieses integriert oder sonstwie damit verbunden sind. Wenigstens eine der Kameras ist so ausgerichtet, dass sie Bildinformationen eines Benutzers in der näheren Umgebung des Fahrzeugs erfasst. In bestimmten Ausführungsformen (und wie nachstehend ausführlich beschrieben) stehen die eine oder die mehreren Kameras in Kommunikationsverbindung mit dem Prozessor des Fahrzeugsteuerungssystems und sind dafür ausgelegt, die erhaltenen Bildinformationen an diesen zu übertragen, um den Prozessor in die Lage zu versetzen, die Bildinformationen zu analysieren. In anderen Ausführungsformen (und wie nachstehend ausführlich beschrieben) stehen die eine oder die mehreren Kameras in Kommunikationsverbindung mit einer Speichervorrichtung und sind dafür ausgelegt, die erhaltenen Bildinformationen an diese zu übertragen, die daraufhin die Bildinformationen speichert. Der Prozessor kann die Bildinformationen bearbeiten, indem er auf die Speichervorrichtung zugreift.
  • In bestimmten Ausführungsformen wartet das Kamerasystem eine vorgesehene Zeitdauer auf den Befehl. Falls die vorgesehene Zeitdauer abgelaufen ist und das Kamerasystem keinen Gestenbefehl erhält, läuft die Wartezeit des Fahrzeugsteuerungssystems ab (d. h., es beendet den Funktionsaktivierungsmodus). Spezieller muss in bestimmten Ausführungsformen das Kamerasystem eine vorbestimmte Mindestmenge an Bewegung empfangen, damit die Wartezeit nicht abläuft. Falls beispielsweise der Fahrzeugbenutzer den Funktionsaktivierungsmodus einschaltet und aus dem Fahrzeug aussteigt, kann der Benutzer danach die Funktion (d. h. Selbsteinparken) aktivieren, falls die Kamera eine minimale Bewegung innerhalb einer vorbestimmten Zeit empfängt. In dieser Ausführungsform verbleibt, falls das Kamerasystem die Bewegung innerhalb der vorbestimmten Zeitdauer empfängt, das Fahrzeugsteuerungssystem im Funktionsaktivierungsmodus. Falls die Kamera innerhalb der vorbestimmten Zeitdauer kein Anzeichen einer Bewegung empfängt, läuft die Wartezeit des Fahrzeugsteuerungssystems ab. Eine derartige Konfiguration ermöglicht es einem Benutzer, den Funktionsaktivierungsmodus anzustoßen, aus dem Fahrzeug auszusteigen, um einen Gegenstand aus dem Fahrweg des Fahrzeugs wegzuräumen, und eine Geste zu vollführen, um die Selbsteinparkfunktion zu aktivieren, ohne dass die Wartezeit des Fahrzeugsteuerungssystems abläuft.
  • Es ist ersichtlich, dass in bestimmten Ausführungsformen die vorgesehene Zeitdauer vorbestimmt ist. In anderen, alternativen Ausführungsformen ändert der Benutzer die vorgesehene Zeitdauer zu einer gewünschten Zeitdauer. Eine derartige Konfiguration verhindert, dass die Kamera ständig nach einem Gestenbefehl sucht.
  • Unter fortdauerndem Bezug auf das vorstehend beschriebene Beispiel würde ein Benutzer, der die Selbsteinparkfunktion des Fahrzeugs aktivieren und das Fahrzeug an der rechten Seite der Garage geparkt haben will, eine Geste vollführen, um die Selbsteinparkfunktion zu aktivieren. In dieser beispielhaften Ausführungsform zeigt der Benutzer eine Geste mit hochgestrecktem Daumen in eine Kamera des Fahrzeugs.
  • Nachdem die Kamera den Gestenbefehl des Benutzers erhalten hat, empfängt das Fahrzeugsteuerungssystem die erkannte Gesteninformation von der Kamera an einen Prozessor im Fahrzeugsteuerungssystem, um die Fahrzeugfunktion zu bestimmen, die der erkannten Geste entspricht, wie in Schritt 108 angegeben. Der Prozessor im Fahrzeugsteuerungssystem analysiert die Gestendaten, um zu bestimmen, mit welcher Fahrzeugfunktion die Geste verknüpft ist. Spezieller bestimmt in bestimmten Ausführungsformen der Prozessor die zugeordnete Fahrzeugfunktion, indem er einen Speicher im Fahrzeugsteuerungssystem durchsucht, in dem Gestenbefehle des Benutzers und die zugehörigen Fahrzeugfunktionen gespeichert sind. Es ist ersichtlich, dass in bestimmten Ausführungsformen die Gestenbefehle und die zugehörigen Fahrzeugfunktion werkseitig vorkonfiguriert sind. In anderen Ausführungsformen ermöglicht es das Fahrzeugsteuerungssystem einem Benutzer, bestimmte Gestenbefehle für bestimmte Fahrzeugfunktionen individuell anzupassen.
  • Es ist ersichtlich, dass zum Erfassen des Gestenbefehls in bestimmten Ausführungsformen das Kamerasystem des Fahrzeugs eine Kamera im Fahrzeuginneren aufweist. In einer solchen Ausführungsform zeigt ein Anzeigesystem im Fahrzeuginneren die Geste des Benutzers an, so dass der Benutzer überprüfen kann, ob die Kamera den Gestenbefehl exakt erfasst. In anderen Ausführungsformen weist das Kamerasystem des Fahrzeugs eine außen am Fahrzeug angebrachte Kamera auf. In einer derartigen Ausführungsform kann ein Benutzer eine mobile Vorrichtung benutzen, die in Kommunikationsverbindung mit dem Fahrzeugsteuerungssystem steht, um den erfassten Gestenbefehl anzuzeigen. In anderen Ausführungsformen weist das Fahrzeug verschiedene werkseitig vorgeschlagene Gesten auf, aus denen der Benutzer auswählen kann, welche Geste welcher Funktion zugeordnet wird, und diese verifizieren kann.
  • In einer alternativen Ausführungsform kann ein Benutzer eine Bluetooth-Verbindung zur mobilen Vorrichtung des Benutzers nutzen, um eine Geste aufzuzeichnen und die Geste zu aktivieren, indem er die mobile Vorrichtung des Benutzers in die Hand nimmt und die nötigen Bewegungen vollführt. Dies hätte den zusätzlichen Vorteil, dass der Benutzer eine Sprachinteraktion auch über eine größere Distanz führen kann. In bestimmten Ausführungsformen kann dieser mobile Gestenbefehl durch eine Anwendung direkt auf der mobilen Vorrichtung aktiviert werden. In anderen Ausführungsformen kann der mobile Gestenbefehl im Hintergrund laufend aktiviert werden, während Bluetooth (oder ein anderes Kommunikationsverfahren) in Reichweite des Fahrzeugs ist.
  • Es wird erneut Bezug genommen auf das vorstehend beschriebene Beispiel; das Fahrzeugsteuerungssystem empfängt die erkannte Gesteninformation. Spezieller empfängt ein Prozessor im Fahrzeugsteuerungssystem die Information, dass eine Kamera des Fahrzeugs eine „Daumen hoch”-Geste von einem autorisierten Benutzer empfangen hat. Der Prozessor des Fahrzeugsteuerungssystems bestimmt, dass für dieses Fahrzeug und diesen Benutzer die Geste des hochgestreckten Daumens der Selbsteinparkfunktion zugeordnet ist.
  • In dieser beispielhaften Ausführungsform beinhaltet der Prozess 100 nach dem Bestimmen der Fahrzeugfunktion, die der erkannten Geste zugeordnet ist, das Warten auf weitere Sprachbefehle, um die aktivierte Fahrzeugfunktion abzuschließen, wie bei Block 110 angegeben. Der Sprachbefehl in Kombination mit dem Gestenbefehl benachrichtigt das Fahrzeugsteuerungssystem über die zu aktivierende Funktion und die Art und Weise, wie die Funktion auszuführen ist. Spezieller wartet das Fahrzeugsteuerungssystem in der vorstehend beschriebenen beispielhaften Ausführungsform nach Empfangen des Gestenbefehls „Daumen hoch” und Bestimmen, dass der hochgestreckte Daumen der Selbsteinparkfunktion zugeordnet ist, auf Sprachbefehle, um das Fahrzeug anhand von Informationen zu führen, wo es selbstständig einparken soll. In diesem Beispiel kann der Benutzer Sprachkommandos wie etwa „rechts” einsprechen, um das Fahrzeugsteuerungssystem anzuweisen, das Fahrzeug an der rechten Seite der Garage einparken zu lassen.
  • Nach dem Analysieren des Gestenbefehls und des Sprachbefehls leitet das Fahrzeugsteuerungssystem den Befehl des Benutzers weiter an das Karosseriesteuerungsmodul des Fahrzeugs, um die dem Befehl des Benutzers zugeordnete Fahrzeugfunktion zu aktivieren, wie in Schritt 112 angegeben. Das Karosseriesteuerungsmodul des Fahrzeugs steuert die Fahrzeugfunktion. Spezieller führt das Karosseriesteuerungsmodul des Fahrzeugs, wenn der Benutzer einen Gestenbefehl und einen Sprachbefehl erteilt, die durch den Gestenbefehl aktivierte Fahrzeugfunktion aus. Eine derartige Ausgestaltung ermöglicht es dem Benutzer, bestimmte Fahrzeugfunktionen durch Gestenbefehle und Sprachbefehle zu steuern.
  • Es ist ersichtlich, dass es eine derartige Ausgestaltung dem Benutzer ermöglicht, bestimmte Fahrzeugfunktionen von außerhalb des Fahrzeugs zu aktivieren und zu steuern. In bestimmten Situationen lassen sich bestimmte Funktionen praktischer von außerhalb des Fahrzeugs aktivieren. Beispielsweise nähert sich in einer Ausführungsform ein Benutzer einem Fahrzeug des Benutzers auf einem Parkplatz, auf dem das Fahrzeug in einer engen Parklücke abgestellt ist. Der Benutzer kann den Schlüsselanhänger verwenden, um das Fahrzeug zu aktivieren und den Benutzer als zugelassenen Benutzer zu authentifizieren. Anschließend vollführt der Benutzer die nötige Geste zum Aktivieren der Funktion. In dieser beispielhaften Ausführungsform kann die Geste eine Reihe von Handgesten zu der seitlichen Kamera sein. Nach der Aktivierung der „Ausparken”-Funktion kann der Benutzer Sprachbefehle einsetzen, um das Fahrzeug von außen zu steuern. Beispielsweise kann der Benutzer durch Sprachbefehle angeben, in welche Richtung das Fahrzeug stehen soll, nachdem es aus der engen Parklücke herausgesetzt hat. Danach kann das Fahrzeug ausgeparkt werden, ohne dass der Benutzer einsteigen muss.
  • Es wird nun Bezug genommen auf 2, die eine beispielhafte Rechenvorrichtung 200 für die Verarbeitung von Daten oder anderen Eingaben im Zusammenhang mit dem System der vorliegenden Offenbarung darstellt, um die Software aufzunehmen und auszuführen, die zur Erleichterung des Fahrzeugsteuerungssystems 400 (wie in 3 dargestellt) der vorliegenden Offenbarung und des Prozesses 100 gemäß Ausführungsformen verwendet wird. Eine oder mehrere Instanzen der Rechenvorrichtung 200 können eingesetzt werden, um eine beliebige, einige oder alle Komponenten im Funktionsaktivierungssystem und -verfahren der vorliegenden Offenbarung zu implementieren. In einigen Ausführungsformen sind Teile des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung in Software als ausführbares Programm implementiert und werden von einem oder mehreren digitalen Spezial- oder Universalcomputer(n) ausgeführt, etwa Großrechner, Personal-Computer (Desktop-, Laptop- oder Tablet-Computer), Personal Digital Assistant, Arbeitsstation, Minicomputer, Computernetz, virtuelles Netz, Cloud-Computing-Einrichtung im Internet, Mobiltelefon oder Smartphone, Tablet oder eine andere tragbare Rechenvorrichtung. In solchen Fällen kann die Rechenvorrichtung 200 für jeden beliebigen Computer stehen, auf dem das System angesiedelt ist oder teilweise angesiedelt ist.
  • Als Beispiel kann die Rechenvorrichtung 200 einen in den Schlüsselanhänger integrierten Computer zum Empfangen von Fahrzeugbefehlseingaben und zur Kommunikation mit dem Fahrzeug repräsentieren. In einer Ausführungsform weist der Schlüsselanhänger ein Mikrofon auf, um Sprachbefehlseingaben in den Schlüsselanhänger zu empfangen, um Fahrzeugbedienfunktionen an das Fahrzeug zu kommunizieren. In gleicher Weise kann die Rechenvorrichtung 200 einen in das Fahrzeugsteuerungssystem 400 integrierten Computer zum Speichern und Ausführen von Anweisungen und Kommunizieren mit dem Schlüsselanhänger sowie zum Empfangen, Verarbeiten und Ausführen der von diesem empfangenen Fahrzeugbefehle repräsentieren.
  • Wie in 2 gezeigt, weist die Rechenvorrichtung 200 im Allgemeinen einen Prozessor 202, einen Speicher 204 und eine oder mehrere Ein- und/oder Ausgabe-(E/A-)Vorrichtungen 206 (oder Peripheriegeräte) auf, die über eine lokale Schnittstelle 208 in Kommunikationsverbindung stehen. Der Prozessor 202 ist eine Hardwarevorrichtung und kann ein beliebiger individuell angepasster oder handelsüblicher Prozessor, eine Zentraleinheit (Central Processing Unit, CPU), ein Hilfsprozessor unter mehreren dem Computer 200 zugeordneten Prozessoren, ein halbleiterbasierter Mikroprozessor (in Form eines Mikrochips oder -chipsatzes), eine andere Art von Mikroprozessor oder allgemein eine beliebige Vorrichtung zum Ausführen von Softwareanweisungen sein. Wenn die Rechenvorrichtung 200 in Betrieb ist, kann der Prozessor 202 dafür ausgelegt sein, die im Speicher 204 gespeicherte Software auszuführen, Daten an den Speicher 204 und aus diesem heraus zu übertragen und allgemein den Betrieb der Rechenvorrichtung 200 nach Maßgabe der Software zu steuern. Die Software kann vollständig oder teilweise, üblicherweise jedoch letzteres, durch den Prozessor 202 gelesen, im Prozessor 202 gepuffert und anschließend ausgeführt werden.
  • Der Speicher 204 kann ein computerlesbares Medium zum Speichern von Software für die Implementierung des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung und/oder Komponenten davon sowie zur Implementierung bestimmter Systemtransaktionen aufweisen. Beispielsweise kann der Speicher 204 dafür ausgelegt sein, ein oder mehrere separate Programme (z. B. Quellprogramm, ausführbares Programm (Objektcode) oder Skript) zu speichern, umfassend geordnete Listen ausführbarer Anweisungen zum Implementieren von logischen Funktionen, die dem System und Verfahren der vorliegenden Offenbarung zugeordnet sind. Weiterhin kann die Software als (a) objektorientierte Programmiersprache, die Klassen von Daten und Verfahren beinhaltet, oder (b) als prozedurale Programmiersprache, die Routinen, Unterroutinen und/oder Funktionen aufweist, geschrieben sein, beispielsweise, jedoch nicht beschränkt auf, C, C++, C#, Pascal, Basic, Fortran, Cobol, Perl, Java, Ada, Python und Lua. Komponenten des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung können auch in einer proprietären Sprache geschrieben sein, die für das Zusammenwirken mit diesen bekannten Sprachen entwickelt wurde. Im Zusammenhang dieses Dokuments kann ein „computerlesbares Medium” ein beliebiges Mittel sein, das Datenobjekte zur Verwendung durch oder in Verbindung mit dem drahtlosen System speichern, übertragen, weiterleiten oder transportieren kann, und kann sogar Papier mit darauf gedruckten Programmieranweisungen einschließen.
  • In einigen Fällen beinhaltet die Software im Speicher 204 eine oder mehrere Anwendungen 210, die dem Funktionsaktivierungssystem der vorliegenden Offenbarung zugeordnet sind. Als Beispiel kann der Speicher 204 des Fahrzeugsteuerungssystems 400 (nachstehend ausführlicher beschrieben) verwendet werden, um eine oder mehrere Datenbanken zu implementieren, beispielsweise etwa eine Fahrzeugdatenbank 214, die dafür ausgelegt ist, Information zum Fahrzeug zu speichern, darunter beispielsweise Gestenbefehls- und Sprachbefehlsinformationen, die bestimmten Fahrzeugfunktionen zugeordnet sind, von der TCU 408 empfangene Diagnoseinformationen, von einem GPS-Satelliten empfangene und dem Fahrzeug zugeordnete GPS-Informationen und dergleichen.
  • In Ausführungsformen beinhaltet der Speicher 204 ein beliebiges oder eine Kombination von flüchtigen Speicherelementen (z. B. Direktzugriffsspeicher (Random Access Memory, RAM, etwa DRAM, SRAM, SDRAM etc.)) und nichtflüchtigen Speicherelementen (z. B. ROM, Festplatte, Band, CD-ROM etc.). Darüber hinaus kann der Speicher 204 elektronische, magnetische, optische und/oder andere Arten von Speichermedien beinhalten. In einigen Fällen kann der Speicher 204 eine verteilte Architektur aufweisen, in der verschiedene Komponenten voneinander entfernt angeordnet sind, jedoch weiterhin im Zugriff des Prozessors 202 liegen.
  • Die lokale Schnittstelle 208 kann beispielsweise, ohne jedoch darauf beschränkt zu sein, aus einem oder mehreren Bussen oder anderen drahtgebundenen oder drahtlosen Verbindungen bestehen, wie in der Technik bekannt. Die lokale Schnittstelle 208 kann weitere Elemente aufweisen, die der Einfachheit halber weggelassen wurden, etwa Steuerungen, Puffer (Cache-Speicher), Treiber, Repeater und Empfänger, um eine Kommunikation zu ermöglichen. Ferner kann die lokale Schnittstelle 208 Adress-, Steuer- und/oder Datenverbindungen aufweisen, um eine geeignete Kommunikation zwischen den anderen Computerkomponenten zu ermöglichen.
  • Die E/A-Vorrichtungen 206 können interaktive Hardware, die in der Rechenvorrichtung 200 enthalten ist oder extern davon und drahtlos oder mittels Anschlusskabel damit verbunden ist, und/oder E/A-Ports aufweisen. Die Eingabevorrichtungen 216 können beliebige geeignete Eingabevorrichtungen beinhalten, die einen Fahrer oder Beifahrer des Fahrzeugs in die Lage versetzen, Modifikationen oder Aktualisierungen von Informationen einzugeben, auf die vom Fahrzeugsteuerungssystem 400 wie hier beschrieben zurückgegriffen wird. Die Eingabevorrichtungen 216 können beispielsweise einen Bedienknopf, eine Instrumententafel, eine Tastatur, einen Scanner, eine Digitalkamera zur Bilderfassung und/oder visuellen Befehlserkennung, einen Touchscreen, eine Audio-Eingabevorrichtung (z. B. ein Kabinenmikrofon), Tasten, eine Maus oder ein Touchpad, Eingabemodule für speicherprogrammierbare Steuerungen (Programmable Logic Controller, PLC), Hochfrequenz-Datenleser einschließen. Weiterhin können die E/A-Vorrichtungen 206 auch Ausgabevorrichtungen 218 einschließen, beispielsweise, jedoch nicht beschränkt auf, Ausgabemodule für PLCs, Anzeigen, haptische Vorrichtungen (z. B. Betätigungselemente), Leuchten (z. B. LEDs; beispielsweise etwa die Ausgabevorrichtungen 117), Audio-Ausgabevorrichtungen (z. B. Lautsprecher) etc.
  • Die E/A-Vorrichtungen 206 umfassen ferner Vorrichtungen, die sowohl mit Eingängen als auch mit Ausgängen kommunizieren, einschließlich, jedoch nicht beschränkt auf ein drahtloses Kommunikationsmodul 220. Das drahtlose Kommunikationsmodul 220 weist eine oder mehrere Antennen 222 auf, die dafür ausgelegt sind, drahtlos Signale an wenigstens andere Komponenten des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung zu senden und/oder von dort zu empfangen. Das drahtlose Kommunikationsmodul 220 weist ferner einen oder mehrere Empfänger, Sender und/oder Sendeempfänger (nicht dargestellt) auf, die in Kommunikationsverbindung mit einer oder mehreren Antennen 222 stehen, um die empfangenen Signale zu verarbeiten, die gesendeten Signale bereitzustellen oder auf andere Weise eine drahtlose Kommunikation mit anderen Komponenten des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung zu ermöglichen. Das drahtlose Kommunikationsmodul 220 kann außerdem einen Modulator/Demodulator (Modem; zum Zugriff auf eine andere Vorrichtung, ein anderes System oder Netz, z. B. etwa eine andere Komponente innerhalb des Funktionsaktivierungssystems und -verfahrens der vorliegenden Offenbarung), eine Bridge und/oder einen Router aufweisen.
  • Der genaue Typ der im drahtlosen Kommunikationsmodul 220 enthaltenen drahtlosen Kommunikationstechnologie kann je nach Rechenvorrichtung 200 variieren und kann wenigstens eines von einer drahtlosen Nahbereich-Kommunikationstechnologie (z. B. etwa Hochfrequenz-(HF-), Bluetooth-, Infrarot- und/oder NFC-Technologie) und einer drahtlosen, eine größere Reichweite aufweisenden oder breitbandigen Kommunikationstechnologie (z. B. etwa WiFi-, WiMax- oder Wireless-Ethernet-, Mobilfunk-, GPS- und/oder Satellitentechnologie) beinhalten. In einigen Fällen kann das drahtlose Kommunikationsmodul 220 mehr als eine Antenne und den entsprechenden Sendeempfänger aufweisen, um über verschiedene drahtlose Netze kommunizieren zu können.
  • In manchen Fällen kann die Rechenvorrichtung 200 auch Hardware zum Implementieren eines oder mehrerer Aspekte der hier beschriebenen Verfahren beinhalten. In solchen Fällen nutzt die Hardware eine der folgenden Technologien oder eine Kombination davon, die alle in der Technik wohl bekannt sind: (eine) diskrete Logikschaltung(en) mit Logikgattern zum Implementieren logischer Funktionen auf Datensignale hin, eine anwendungsspezifische integrierte Schaltung (Application Specific Integrated Circuit, ASIC) mit geeigneten kombinatorischen Logikgattern, (eine) programmierbare Gatteranordnung(en) (Programmable Gate Array(s), PGA), eine feldprogrammierbare Gatteranordnung (Field Programmable Gate Array, FPGA) etc.
  • Es wird nun Bezug genommen auf 3, die ein beispielhaftes Fahrzeugsteuerungssystem (Vehicle Control System, VCS) 400, das in ein Fahrzeug eingebaut sein kann, gemäß Ausführungsformen darstellt. Das VCS 400 weist verschiedene elektronische Steuerungseinheiten (Electronic Control Unit, ECUs) auf, die verantwortlich sind für die Überwachung und Steuerung der elektrischen Systeme oder Subsysteme des Fahrzeugs, wie nachstehend noch ausführlicher beschrieben. In Ausführungsformen sind die ECUs 414 des VCS 400 untereinander durch einen Fahrzeugbus 402 (z. B. etwa einen Steuerungsnetz-(Controller Area Network, CAN-)Datenbus), um Daten zu bzw. von den verschiedenen ECUs 414 weiterzuleiten, sowie weitere Fahrzeug- und/oder Zusatzkomponenten, die mit dem VCS 400 kommunizieren, verbunden. Jede ECU 414 kann beispielsweise einen oder mehrere Eingänge und Ausgänge zum Sammeln, Empfangen und/oder Senden von Daten, einen Speicher zum Speichern der Daten und einen Prozessor zum Verarbeiten der Daten und/oder Erzeugen neuer Informationen auf Basis davon aufweisen.
  • In der dargestellten Ausführungsform weist das VCS 400 eine Kamera zum Erfassen von Gestenbefehlen des Benutzers auf. Die Kamera 416 steht in Kommunikationsverbindung mit dem Prozessor 202 und dem Speicher 204 einer Rechenvorrichtung 200 im VCS (in 3 nicht dargestellt). Die Kamera 416 kommuniziert mit dem Prozessor 202 und dem Speicher 204 der Rechenvorrichtung 200 des VCS 400 über die lokale Schnittstelle 208.
  • In der dargestellten Ausführungsform weist das VCS 400 ein Karosseriesteuerungsmodul (BCM) 404 zum Steuern und Überwachen verschiedener elektronischer Zubehörteile in einer Karosserie des Fahrzeugs auf. In Ausführungsformen ist das BCM 404 eine ECU, die die Türen des Fahrzeugs steuert, einschließlich das Verriegeln, Entriegeln, Öffnen und/oder Schließen der Türen. In manchen Ausführungsformen steuert das BCM 404 auch die elektrisch betätigten Fenster, das elektrisch betätigte Dach (z. B. Glasdach, Schiebedach, Verdeck etc.) und die Innenbeleuchtung des Fahrzeugs. Das BCM kann auch für Fahrzeugfunktionen wie die Selbsteinpark- und Ausparkfunktion genutzt werden. Das BCM 404 kann außerdem andere elektronisch unterstützte Komponenten in der Karosserie des Fahrzeugs steuern, beispielsweise etwa Klimaanlagen, elektrisch einstellbare Spiegel und elektrisch verstellbare Sitze. Das BCM 404 kann dafür ausgelegt sein, die Fahrzeugbefehle des Benutzers zu implementieren, die es mittels Gestenbefehlen und Sprachbefehlen vom Benutzer empfängt und die die Türen, Fenster oder andere Karosseriekomponenten betreffen, welche vom BCM 404 gesteuert werden.
  • Wie in 3 gezeigt, kann das VCS 400 ferner ein Antriebsstrang-Steuerungsmodul (Power Train Control Module, PCM) 406 zum Steuern und Überwachen von Kraftmaschine und Getriebe des Fahrzeugs aufweisen. In manchen Ausführungsformen kann das PCM 406 in zwei getrennte ECUs unterteilt sein, nämlich eine Kraftmaschinensteuerungseinheit und eine Getriebesteuerungseinheit. In jedem Fall kann das PCM 406 dafür ausgelegt sein, das Starten und Anhalten der Kraftmaschine des Fahrzeugs zu steuern, einschließlich Empfangen von Befehlen zum Starten der Kraftmaschine anhand von Gestenbefehlen und Sprachbefehlen vom Benutzer.
  • Wie in 3 gezeigt, weist das VCS 400 ferner eine Telematiksteuerungseinheit (Telematics Control Unit, TCU) 408 auf, bei der es sich um eine ECU handelt, die es ermöglicht, das Fahrzeug mit verschiedenen drahtlosen Netzen zu verbinden, beispielsweise etwa GPS, WiFi, Mobilfunk, Bluetooth, NFC, RFID, Satellit und/oder Infrarot. In Ausführungsformen beinhaltet die TCU 408 (auch als „Fahrzeugtelematikeinheit” bezeichnet) ein drahtloses Kommunikationsmodul 410, das eine oder mehrere Antennen, Modems, Empfänger und/oder Sender (nicht dargestellt) umfasst, zum Verbinden mit den verschiedenen drahtlosen Netzen. Beispielsweise kann das drahtlose Kommunikationsmodul 410 eine Mobilkommunikationseinheit (nicht dargestellt) für die drahtlose Kommunikation über ein Mobilfunknetz (z. B. GSM, GPRS, LTE, 3G, 4G, CDMA etc.), ein 802.11-Netz (z. B. WiFi), ein WiMax-Netz und/oder ein Satellitennetz aufweisen. Die TCU 408 kann außerdem dafür ausgelegt sein, die Ortung des Fahrzeugs mithilfe von Breiten- und Längengradangaben zu steuern, die von einem GPS-Satelliten empfangen werden.
  • In Ausführungsformen empfängt die TCU 408 externe Daten, einschließlich Fahrzeugbefehle, über das drahtlose Kommunikationsmodul 410 und stellt die externen Daten an eine entsprechende ECU des VCS 400 bereit. Falls beispielsweise die TCU 408 einen Befehl zum Verriegeln der Tür empfängt, sendet die TCU 408 den Befehl über den Fahrzeugbus 402 an das BCM 404. In gleicher Weise sendet die TCU 408, falls sie einen Befehl zum Starten der Kraftmaschine empfängt, den Befehl über den Fahrzeugbus 402 an das PCM 406. In manchen Ausführungsformen empfängt die TCU 408 auch interne Daten von anderen ECUs des VCS 400 oder einem Prozessor (nicht dargestellt) des VCS 400 mit Anweisungen, die internen Daten an einen entfernten Server oder eine andere Komponente des drahtlosen Systems zu senden.
  • Das drahtlose Kommunikationsmodul 410 kann in der Lage sein, drahtlos über zwei oder mehr Netze zu kommunizieren, beispielsweise um die Kontinuität des Netzzugangs für den Fall zu gewährleisten, dass eines der Netze ausfällt oder außer Reichweite ist. Darüber hinaus können die Fahrzeugbefehle an verschiedenen Empfängern des drahtlosen Kommunikationsmoduls 410 empfangen werden, abhängig von der drahtlosen Kommunikationstechnologie, die zum Senden der Befehle verwendet wird. Beispielsweise können Befehle und/oder Daten, die vom Schlüsselanhänger an das Fahrzeug übertragen werden, an einem Bluetooth-Empfänger (nicht dargestellt) des drahtlosen Kommunikationsmoduls 410 empfangen werden. In ähnlicher Weise können von der TCU 408 Daten an den Schlüsselanhänger über einen Bluetooth-Sender (nicht dargestellt) gesendet werden, der in dem drahtlosen Kommunikationsmodul 410 vorhanden ist, und Daten können von der TCU 408 an einen entfernten Server über einen Mobilfunk- oder einen WiFi-Sender (nicht dargestellt) gesendet werden, der in dem drahtlosen Kommunikationsmodul 410 vorhanden ist.
  • Das VCS 400 kann ferner eine RKS-Einheit (Remote Keyless System, schlüsselloses Zugangssystem mit Fernbedienung) 412 zum Steuern und Überwachen von schlüssellosen Interaktionen per Fernzugriff zwischen dem Schlüsselanhänger und dem Fahrzeug aufweisen. Die RKS-Einheit 412 kann ein schlüsselloses Zugangssystem mit Fernbedienung und in manchen Fällen auch ein schlüsselloses Zündsystem mit Fernbedienung aufweisen. Im letzteren Fall kann die RKS-Einheit 412 auch als „passives Zugangs- und Startsystem” (Passive Entry Passive Start, PEPS) bezeichnet werden. In manchen Ausführungsformen ist die RKS-Einheit 412 eine separate, eigenständige ECU, die mit dem BCM 404, dem PCM 406, der TCU 408 und anderen ECUs 414 des Fahrzeugs über den Fahrzeugbus 402 verbunden ist, um die RKS/PEPS-Operationen auszuführen. Beispielsweise kann die RKS-Einheit 412 Fahrzeugbefehle vom Schlüsselanhänger über die TCU 408 empfangen, die Befehle verarbeiten, um die geeignete ECU zum Ausführen des Befehls zu identifizieren, den Befehl an die identifizierte ECU senden und die Ausführung des Befehls bestätigen. In anderen Ausführungsformen kann die RKS-Einheit 412 aus mehreren Segmenten bestehen, die in verschiedene ECUs des VCS 400 integriert sind, beispielsweise das BCM 404, das PCM 406 und/oder die TCU 408, um die an jeder ECU empfangenen RKS/PEPS-Befehle auszuführen. In noch anderen Ausführungsformen kann die RKS-Einheit 412 in genau einer ECU enthalten sein, beispielsweise etwa der TCU 408, um RKS/PEPS-Befehle abzuwickeln oder zu verarbeiten, wenn sie vom drahtlosen Kommunikationsmodul 410 der TCU 408 empfangen werden.
  • Es ist ersichtlich, dass jegliche Prozessbeschreibungen oder Blöcke in den Figuren Module, Segmente oder Teile von Code repräsentieren, die eine oder mehrere ausführbare Anweisungen aufweisen, um spezifische logische Funktionen oder Schritte im Prozess zu implementieren, und dass alternative Implementierungen in den Schutzbereich der hier beschriebenen Ausführungsformen fallen, indem Funktionen in einer anderen Reihenfolge als dargestellt oder erörtert ausgeführt werden können, einschließlich im Wesentlichen parallel oder in umgekehrter Reihenfolge, je nach der betreffenden Funktionalität, wie sich für den Durchschnittsfachmann auf diesem Gebiet der Technik von selbst versteht.
  • Es ist hervorzuheben, dass die vorstehend beschriebenen Ausführungsformen, insbesondere eventuelle „bevorzugte” Ausführungsformen, mögliche Beispiele für Implementierungen darstellen, die lediglich zum besseren Verständnis der Prinzipien der Erfindung dargestellt werden. Zahlreiche Variationen und Modifikationen können an den vorstehend beschriebenen Ausführungsformen vorgenommen werden, ohne wesentlich vom Wesen und den Prinzipien der hier beschriebenen Verfahren abzuweichen. Alle derartigen Modifikationen sollen in den Schutzbereich der vorliegenden Offenbarung fallen und durch die folgenden Patentansprüche abgedeckt sein.
  • Es ist hervorzuheben, dass die vorstehend beschriebenen Ausführungsformen, insbesondere eventuelle „bevorzugte” Ausführungsformen, mögliche Beispiele für Implementierungen darstellen, die lediglich zum besseren Verständnis der Prinzipien der Erfindung dargestellt werden. Zahlreiche Variationen und Modifikationen können an den vorstehend beschriebenen Ausführungsformen vorgenommen werden, ohne wesentlich vom Wesen und den Prinzipien der hier beschriebenen Verfahren abzuweichen. Alle derartigen Modifikationen sollen in den Schutzbereich der vorliegenden Offenbarung fallen und durch die folgenden Patentansprüche abgedeckt sein.

Claims (20)

  1. Funktionsaktivierungssystem eines Fahrzeugs, umfassend: eine Kamera und ein Mikrofon, um einen Gestenbefehl bzw. einen Sprachbefehl von einem Benutzer zum Aktivieren einer Fahrzeugfunktion zu empfangen; ein Fahrzeugsteuerungssystem, das dafür ausgelegt ist: Gesten- und Sprachbefehle von der Kamera bzw. vom Mikrofon zu empfangen; die dem Gestenbefehl und dem Sprachbefehl zugeordnete Fahrzeugfunktion zu bestimmen; und die bestimmte zugeordnete Fahrzeugfunktion zu aktivieren.
  2. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 1, wobei das Fahrzeugsteuerungssystem einen Funktionsaktivierungsmodus anstößt, um erhaltene Gestenbefehlsinformationen von der Kamera zu empfangen.
  3. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 2, wobei das Fahrzeugsteuerungssystem den Funktionsaktivierungsmodus anstößt, indem ein Schlüsselanhänger in der Nähe des Fahrzeugs detektiert wird.
  4. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 2, wobei ein Benutzer den Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems vom Fahrzeuginneren aus anstößt.
  5. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 1, wobei die Gestenbefehle Befehle von einem oder mehreren von Händen oder Füßen eines Benutzers, Bildern oder anhand von Zeichensprache einschließen.
  6. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 1, wobei die zugeordneten Fahrzeugfunktionen eine Selbsteinparkfunktion beinhalten.
  7. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 6, wobei die Sprachbefehle die aktivierte Selbsteinparkfunktion steuern.
  8. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 1, wobei das Fahrzeugsteuerungssystem vor der Aktivierung der Funktion, die dem erhaltenen Gestenbefehl und Sprachbefehl zugeordnet ist, überprüft, ob es sich bei dem Benutzer um einen autorisierten Benutzer handelt.
  9. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 1, wobei das Fahrzeugsteuerungssystem ferner ein Karosseriesteuerungsmodul umfasst.
  10. Funktionsaktivierungssystem eines Fahrzeugs nach Anspruch 9, wobei das Karosseriesteuerungsmodul die dem erhaltenen Gestenbefehl und Sprachbefehl zugeordnete Fahrzeugfunktion aktiviert.
  11. Verfahren zum Betreiben eines Funktionsaktivierungssystems eines Fahrzeugs, umfassend: Erhalten, von einem Benutzer zum Aktivieren einer Fahrzeugfunktion, eines Gestenbefehls von einer Kamera und eines Sprachbefehls von einem Mikrofon; Empfangen, durch ein Fahrzeugsteuerungssystem, des Gesten- und des Sprachbefehls von der Kamera bzw. vom Mikrofon; Bestimmen der dem Gestenbefehl und dem Sprachbefehl zugeordneten Fahrzeugfunktion; und Aktivieren der bestimmten zugeordneten Fahrzeugfunktion.
  12. Verfahren nach Anspruch 11, wobei das Fahrzeugsteuerungssystem einen Funktionsaktivierungsmodus anstößt, um erhaltene Gestenbefehlsinformationen von der Kamera zu empfangen.
  13. Verfahren nach Anspruch 12, wobei das Fahrzeugsteuerungssystem den Funktionsaktivierungsmodus anstößt, indem ein Schlüsselanhänger in der Nähe des Fahrzeugs detektiert wird.
  14. Verfahren nach Anspruch 12, wobei ein Benutzer den Funktionsaktivierungsmodus des Fahrzeugsteuerungssystems vom Fahrzeuginneren aus anstößt.
  15. Verfahren nach Anspruch 11, wobei die Gestenbefehle Befehle von einem oder mehreren von Händen oder Füßen eines Benutzers, Bildern oder anhand von Zeichensprache einschließen.
  16. Verfahren nach Anspruch 11, wobei die zugeordneten Fahrzeugfunktionen eine Selbsteinparkfunktion beinhalten.
  17. Verfahren nach Anspruch 16, wobei die Sprachbefehle die aktivierte Selbsteinparkfunktion steuern.
  18. Verfahren nach Anspruch 11, wobei das Fahrzeugsteuerungssystem vor der Aktivierung der Funktion, die dem erhaltenen Gestenbefehl und Sprachbefehl zugeordnet ist, verifiziert, dass es sich bei dem Benutzer um einen autorisierten Benutzer handelt.
  19. Verfahren nach Anspruch 11, wobei das Fahrzeugsteuerungssystem ferner ein Karosseriesteuerungsmodul umfasst.
  20. Verfahren nach Anspruch 19, wobei das Karosseriesteuerungsmodul die dem erhaltenen Gestenbefehl und Sprachbefehl zugeordnete Fahrzeugfunktion aktiviert.
DE102016125280.8A 2016-01-08 2016-12-21 System und verfahren zur funktionsaktivierung per gestenerkennung und sprachbefehl Withdrawn DE102016125280A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/991,523 2016-01-08
US14/991,523 US10166995B2 (en) 2016-01-08 2016-01-08 System and method for feature activation via gesture recognition and voice command

Publications (1)

Publication Number Publication Date
DE102016125280A1 true DE102016125280A1 (de) 2017-07-13

Family

ID=58463834

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102016125280.8A Withdrawn DE102016125280A1 (de) 2016-01-08 2016-12-21 System und verfahren zur funktionsaktivierung per gestenerkennung und sprachbefehl

Country Status (6)

Country Link
US (1) US10166995B2 (de)
CN (1) CN106960486B (de)
DE (1) DE102016125280A1 (de)
GB (1) GB2547980A (de)
MX (1) MX2017000356A (de)
RU (1) RU2016150852A (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019134812A1 (de) * 2018-01-08 2019-07-11 Audi Ag Verfahren zum durchführen einer interaktion
DE102018215293A1 (de) * 2018-09-07 2020-03-12 Bayerische Motoren Werke Aktiengesellschaft Multimodale Kommunikation mit einem Fahrzeug
DE102019210144A1 (de) * 2019-07-10 2021-01-14 Zf Friedrichshafen Ag Kombination von Sensorsystemen im Fahrzeug zum Verbessern des Erkennens von Nutzerbefehlen

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3050421B1 (fr) * 2016-04-21 2018-04-27 Valeo Systemes D'essuyage Dispositif de nettoyage d’un capteur d’un systeme de detection optique de vehicule automobile
US10950229B2 (en) * 2016-08-26 2021-03-16 Harman International Industries, Incorporated Configurable speech interface for vehicle infotainment systems
US10071730B2 (en) * 2016-08-30 2018-09-11 GM Global Technology Operations LLC Vehicle parking control
US11067667B2 (en) 2016-09-08 2021-07-20 Magna Closures Inc. Radar detection system for non-contact human activation of powered closure member
US10934764B2 (en) 2016-09-08 2021-03-02 Magna Closures Inc. Radar detection system for non-contact human activation of powered closure member
DE102016221564A1 (de) * 2016-10-13 2018-04-19 Bayerische Motoren Werke Aktiengesellschaft Multimodaler Dialog in einem Kraftfahrzeug
US10210866B2 (en) 2017-01-20 2019-02-19 Essential Products, Inc. Ambient assistant device
CN107685712A (zh) * 2017-07-31 2018-02-13 芜湖市振华戎科智能科技有限公司 电动汽车人车互联自动锁门系统
US11114186B2 (en) 2017-08-10 2021-09-07 Nuance Communications, Inc. Automated clinical documentation system and method
US11316865B2 (en) 2017-08-10 2022-04-26 Nuance Communications, Inc. Ambient cooperative intelligence system and method
US10647332B2 (en) * 2017-09-12 2020-05-12 Harman International Industries, Incorporated System and method for natural-language vehicle control
US20190126889A1 (en) * 2017-11-02 2019-05-02 Aptiv Technologies Limited Hands-free access method
US10296102B1 (en) 2018-01-31 2019-05-21 Piccolo Labs Inc. Gesture and motion recognition using skeleton tracking
US10241588B1 (en) 2018-01-31 2019-03-26 Piccolo Labs Inc. System for localizing devices in a room
CN111936836A (zh) * 2018-02-14 2020-11-13 魁普有限公司 车辆安全系统及方法
US11515020B2 (en) 2018-03-05 2022-11-29 Nuance Communications, Inc. Automated clinical documentation system and method
US11250382B2 (en) 2018-03-05 2022-02-15 Nuance Communications, Inc. Automated clinical documentation system and method
EP3762806A4 (de) 2018-03-05 2022-05-04 Nuance Communications, Inc. System und verfahren zur überprüfung von automatisierter klinischer dokumentation
JP2019164444A (ja) * 2018-03-19 2019-09-26 トヨタ自動車株式会社 駐車支援装置
US20190299849A1 (en) * 2018-03-30 2019-10-03 Jewel L. Dohan Voice-recognition/voice-activated vehicle signal system
US20200047687A1 (en) * 2018-08-10 2020-02-13 SF Motors Inc. Exterior speech interface for vehicle
CN109109857A (zh) * 2018-09-05 2019-01-01 深圳普思英察科技有限公司 一种无人驾驶售货车及其停车方法与装置
CN110920563A (zh) * 2018-09-18 2020-03-27 阿里巴巴集团控股有限公司 车辆解锁方法、装置及电子设备
CN109542219B (zh) * 2018-10-22 2021-07-30 广东精标科技股份有限公司 一种应用于智能教室的手势交互系统及方法
CN109785655B (zh) * 2018-12-11 2020-09-29 北京百度网讯科技有限公司 车辆控制方法、装置、设备、无人驾驶车辆及存储介质
JP2020152198A (ja) * 2019-03-19 2020-09-24 本田技研工業株式会社 車両制御システム、車両制御方法、及びプログラム
CN110065502A (zh) * 2019-04-02 2019-07-30 北京长城华冠汽车科技股份有限公司 车辆及其控制方法和装置
US11216480B2 (en) 2019-06-14 2022-01-04 Nuance Communications, Inc. System and method for querying data points from graph data structures
US11227679B2 (en) 2019-06-14 2022-01-18 Nuance Communications, Inc. Ambient clinical intelligence system and method
CN112109729B (zh) * 2019-06-19 2023-06-06 宝马股份公司 用于车载系统的人机交互方法、装置和系统
US11531807B2 (en) 2019-06-28 2022-12-20 Nuance Communications, Inc. System and method for customized text macros
US10820174B1 (en) * 2019-08-06 2020-10-27 Ford Global Technologies, Llc Identification of a vehicle based on gestures of a potential occupant of the vehicle
CN110727346B (zh) * 2019-09-24 2022-09-23 中国第一汽车股份有限公司 一种人机交互方法、装置、车辆及存储介质
US11670408B2 (en) 2019-09-30 2023-06-06 Nuance Communications, Inc. System and method for review of automated clinical documentation
CN110794819A (zh) * 2019-11-13 2020-02-14 深圳市路畅智能科技有限公司 一种手势按键融合的智能汽车无线驾驶控制系统
CN110816470B (zh) * 2019-11-18 2022-03-08 上海擎感智能科技有限公司 基于车载终端的用户授权添加方法、系统、介质及车载终端
JP7287258B2 (ja) * 2019-12-10 2023-06-06 トヨタ自動車株式会社 エージェント管理装置、プログラムおよびエージェント管理方法
CN110871792A (zh) * 2019-12-20 2020-03-10 奇瑞汽车股份有限公司 一种自动泊车控制系统及方法
FR3106328A1 (fr) * 2020-01-17 2021-07-23 Psa Automobiles Sa Procédé et système pour gérer une manœuvre d’un véhicule automobile en regard d’un emplacement de stationnement par force appliquée
US11567492B2 (en) 2020-01-17 2023-01-31 Zimeno, Inc. Vehicle control by a remote operator
US20210237715A1 (en) * 2020-01-30 2021-08-05 Ford Global Technologies, Llc Continuous input brain machine interface for automated driving features
US11657661B2 (en) * 2020-04-01 2023-05-23 Toyota Motor North America, Inc. Transport features based on driving characteristics
CN113119955A (zh) * 2020-08-31 2021-07-16 长城汽车股份有限公司 用于车辆的泊车方法和车辆
CN112158165B (zh) * 2020-09-30 2023-03-28 重庆长安汽车股份有限公司 车辆解闭锁与快速启动方法、系统、车辆及存储介质
JP7314898B2 (ja) * 2020-10-09 2023-07-26 トヨタ自動車株式会社 エージェント装置、エージェント方法及びエージェントプログラム
US11222103B1 (en) * 2020-10-29 2022-01-11 Nuance Communications, Inc. Ambient cooperative intelligence system and method
CN114013431B (zh) * 2022-01-06 2022-06-17 宁波均联智行科技股份有限公司 基于用户意向的自动泊车控制方法及系统
CN115158295A (zh) * 2022-06-29 2022-10-11 重庆长安汽车股份有限公司 车辆的泊车控制方法及装置
US11835008B1 (en) * 2023-01-12 2023-12-05 Ford Global Technologies, Llc Engine and engine exhaust control system
CN116279435B (zh) * 2023-05-17 2023-08-25 常州星宇车灯股份有限公司 一种新型停车辅助系统

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2648072A (en) 1951-03-30 1953-08-11 Blieux John D De Bed cushion for automobiles
US7489303B1 (en) * 2001-02-22 2009-02-10 Pryor Timothy R Reconfigurable instrument panels
US9513744B2 (en) * 1994-08-15 2016-12-06 Apple Inc. Control systems employing novel physical controls and touch screens
US7527288B2 (en) * 1995-06-07 2009-05-05 Automotive Technologies International, Inc. Vehicle with crash sensor coupled to data bus
US6614422B1 (en) * 1999-11-04 2003-09-02 Canesta, Inc. Method and apparatus for entering data using a virtual input device
US6545670B1 (en) * 1999-05-11 2003-04-08 Timothy R. Pryor Methods and apparatus for man machine interfaces and related activity
US6710770B2 (en) * 2000-02-11 2004-03-23 Canesta, Inc. Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device
US7920102B2 (en) * 1999-12-15 2011-04-05 Automotive Technologies International, Inc. Vehicular heads-up display system
US6498970B2 (en) * 2001-04-17 2002-12-24 Koninklijke Phillips Electronics N.V. Automatic access to an automobile via biometrics
JP4311190B2 (ja) * 2003-12-17 2009-08-12 株式会社デンソー 車載機器用インターフェース
JP2006015436A (ja) * 2004-06-30 2006-01-19 Honda Motor Co Ltd 監視ロボット
DE102006006362A1 (de) 2006-02-11 2007-05-24 Daimlerchrysler Ag Pneumatische Beinauflage für ein Kraftfahrzeug
JP4793118B2 (ja) * 2006-06-20 2011-10-12 トヨタ自動車株式会社 スマートエントリーシステム
JP4755556B2 (ja) * 2006-09-04 2011-08-24 クラリオン株式会社 車載装置
US7937667B2 (en) * 2006-09-27 2011-05-03 Donnelly Corporation Multimedia mirror assembly for vehicle
US7845718B1 (en) 2007-07-09 2010-12-07 Gerald Bosstick Bed formed from face to face chairs
JP5529844B2 (ja) * 2008-03-26 2014-06-25 イデント テクノロジー アーゲー ジェスチャ多次元分析のためのシステムおよび方法
US20100085147A1 (en) 2008-10-08 2010-04-08 Gm Global Technology Operations, Inc. Keyless entry using hand signals
US20100185341A1 (en) 2009-01-16 2010-07-22 Gm Global Technology Operations, Inc. Vehicle mode activation by gesture recognition
US20140058584A1 (en) * 2009-03-18 2014-02-27 Robert Bosch Gmbh System And Method For Multimodal Interaction With Reduced Distraction In Operating Vehicles
US10705794B2 (en) * 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8296151B2 (en) * 2010-06-18 2012-10-23 Microsoft Corporation Compound gesture-speech commands
CN102096956B (zh) * 2010-11-15 2013-02-06 王翔 汽车无钥匙远程控制系统的数据处理方法
US20140309876A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Universal vehicle voice command system
US9092394B2 (en) * 2012-06-15 2015-07-28 Honda Motor Co., Ltd. Depth based context identification
DE102012013503B4 (de) * 2012-07-06 2014-10-09 Audi Ag Verfahren und Steuerungssystem zum Betreiben eines Kraftwagens
DE102012216174A1 (de) 2012-09-12 2014-05-28 Bayerische Motoren Werke Aktiengesellschaft Steuerung einer Kraftfahrzeugbewegung von außen
US9656690B2 (en) * 2012-10-30 2017-05-23 Robert Bosch Gmbh System and method for using gestures in autonomous parking
CN104968532B (zh) * 2012-12-10 2017-10-27 伟创力汽车有限公司 基于图像识别和射频的车辆机电系统触发
GB2510849B (en) 2013-02-14 2015-04-29 Lunar Caravans Ltd Camper vehicle with inflatable mattress
US20140258880A1 (en) * 2013-03-07 2014-09-11 Nokia Corporation Method and apparatus for gesture-based interaction with devices and transferring of contents
KR101499101B1 (ko) * 2013-07-08 2015-03-06 체이시로보틱스(주) 차량의 자동주차 장치
US9102330B2 (en) * 2013-07-31 2015-08-11 Here Global B.V. Method and apparatus for causing an adjustment in parking position for vehicles
US9387824B2 (en) * 2013-09-17 2016-07-12 Toyota Motor Engineering & Manufacturing North America, Inc. Interactive vehicle window display system with user identification and image recording
US9340155B2 (en) 2013-09-17 2016-05-17 Toyota Motor Sales, U.S.A., Inc. Interactive vehicle window display system with user identification
CN104008635B (zh) * 2014-04-18 2017-10-10 小米科技有限责任公司 设备控制方法及装置
US20170176207A1 (en) * 2015-12-17 2017-06-22 Jaguar Land Rover Limited In vehicle system and method for providing information regarding points of interest

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019134812A1 (de) * 2018-01-08 2019-07-11 Audi Ag Verfahren zum durchführen einer interaktion
DE102018215293A1 (de) * 2018-09-07 2020-03-12 Bayerische Motoren Werke Aktiengesellschaft Multimodale Kommunikation mit einem Fahrzeug
DE102019210144A1 (de) * 2019-07-10 2021-01-14 Zf Friedrichshafen Ag Kombination von Sensorsystemen im Fahrzeug zum Verbessern des Erkennens von Nutzerbefehlen

Also Published As

Publication number Publication date
US10166995B2 (en) 2019-01-01
MX2017000356A (es) 2017-08-09
CN106960486A (zh) 2017-07-18
US20170197636A1 (en) 2017-07-13
GB201700264D0 (en) 2017-02-22
GB2547980A (en) 2017-09-06
CN106960486B (zh) 2021-08-31
RU2016150852A (ru) 2018-06-25

Similar Documents

Publication Publication Date Title
DE102016125280A1 (de) System und verfahren zur funktionsaktivierung per gestenerkennung und sprachbefehl
DE102016118359A1 (de) System und Verfahren für einen Schlüsselanhänger mit vergrösserter Reichweite
DE102016120414A1 (de) System und verfahren für getriggerte verschlussentriegelung
DE102019124631A1 (de) Systeme und verfahren zur ferneinparkhilfe für ein fahrzeug
DE102017108740A1 (de) Systeme und Verfahren zur Erweiterung der Reichweite eines als Schlüssel verwendeten Telefons
DE102018113078A1 (de) Fahrzeugfernparksysteme und -verfahren
DE102017105629A1 (de) Fahreridentifikation durch das verwenden von fahrzeugannäherungsvektoren
DE102017119435A1 (de) Fahrzeug-einparksteuerung
DE112014004664T5 (de) Anzeige-steuerung für fahrzeugfenster
DE102017121834A1 (de) System und verfahren zum bestimmen des standorts einer mobilvorrichtung relativ zur fahrzeugkabine
DE102017202122A1 (de) Fahrzeugsteuersystem
DE102016110215A1 (de) System und Verfahren zum Steuern von Fahrzeugkomponenten basierend auf von einer Kamera erhaltenen Bildinformationen
DE102018120145A1 (de) Kapazitive überwachung von fahrzeuganhängerkupplungen
DE102019108862A1 (de) Eingangssignalmanagement für fahrzeugeinparkunterstützung
DE102016120209A1 (de) System und verfahren zur deaktivierung des passivzugangs auf abruf
DE102017222108A1 (de) System zur überwachung des status eines fahrzeugs und fahrzeug
DE202016100239U1 (de) Verschlussverriegelungsstatusanzeigensystem
DE102019116747A1 (de) Systeme und verfahren für verriegelungs-/entriegelungsmeldungen eines fahrzeugs
DE112014001845T5 (de) Authentifizierung für Erkennungssysteme
DE102019108859A1 (de) Eingangssignalmanagement für Fahrzeugeinparkunterstützung
DE102018113907A1 (de) Fahrzeugzündsysteme und -verfahren
DE102017105459A1 (de) Interaktive anzeige auf grundlage der interpretation von fahrerhandlungen
DE102019124629A1 (de) Einparkhilfe auf grundlage von offenen fahrzeugtürpositionen
DE102008054851A1 (de) Überwachungssystem und Verfahren für einen Smart Key
DE102017124731A1 (de) Verfahren und vorrichtung zur erfassung des türzustandes

Legal Events

Date Code Title Description
R082 Change of representative

Representative=s name: ETL IP PATENT- UND RECHTSANWALTSGESELLSCHAFT M, DE

Representative=s name: ETL WABLAT & KOLLEGEN PATENT- UND RECHTSANWALT, DE

R082 Change of representative

Representative=s name: ETL IP PATENT- UND RECHTSANWALTSGESELLSCHAFT M, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee