DE102013223419A1 - Steuersystem und Verfahren, wobei eine Handgeste für ein Fahrzeug benutzt wird - Google Patents

Steuersystem und Verfahren, wobei eine Handgeste für ein Fahrzeug benutzt wird Download PDF

Info

Publication number
DE102013223419A1
DE102013223419A1 DE201310223419 DE102013223419A DE102013223419A1 DE 102013223419 A1 DE102013223419 A1 DE 102013223419A1 DE 201310223419 DE201310223419 DE 201310223419 DE 102013223419 A DE102013223419 A DE 102013223419A DE 102013223419 A1 DE102013223419 A1 DE 102013223419A1
Authority
DE
Germany
Prior art keywords
image
hand gesture
vehicle
program instructions
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE201310223419
Other languages
English (en)
Inventor
Sung-Un Kim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Motor Co
Original Assignee
Hyundai Motor Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Motor Co filed Critical Hyundai Motor Co
Publication of DE102013223419A1 publication Critical patent/DE102013223419A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/10—Interpretation of driver requests or demands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/40—Hardware adaptations for dashboards or instruments
    • B60K2360/48—Sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55—Remote control arrangements
    • B60K2360/56—Remote control arrangements using mobile devices
    • B60K2360/563—Vehicle displaying mobile device information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/782—Instrument locations other than the dashboard on the steering wheel

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Instrument Panels (AREA)

Abstract

Es werden ein Steuersystem und Verfahren, welche eine Handgeste für ein Fahrzeug benutzen, bereitgestellt. Das Verfahren beinhaltet das Extrahieren, durch einen Prozessor, eines Handgestenbildes aus einem aufgenommenen Handbild innerhalb des Fahrzeugs und das Repräsentieren des extrahierten Handgestenbildes durch Überlappen des Bildes auf einer Windschutzscheibe des Fahrzeugs. Zusätzlich beinhaltet das Verfahren das Repräsentieren eines graphischen Schirms auf der Windschutzscheibe und das Betreiben von Einrichtungen innerhalb des Fahrzeugs durch Manipulieren eines graphischen Schirms entsprechend dem Handgestenbild.

Description

  • HINTERGRUND
  • (a) Bereich der Erfindung
  • Die vorliegende Erfindung bezieht sich auf ein Steuersystem und ein Verfahren für ein Fahrzeug. Spezieller ausgedrückt bezieht sich die vorliegende Erfindung auf ein Steuersystem und Verfahren, welches eine Handgeste für ein Fahrzeug benutzt.
  • (b) Beschreibung des Standes der Technik
  • Im Allgemeinen ist eine Anzeigeeinheit innerhalb eines Fahrzeugs befestigt, um eine Navigationseinrichtung, ein Radio, einen Fernseher (TV) und ein Internet-System zu benutzen. Zusätzlich stellt eine Benutzerschnittstelle (UI), welche verschiedene Funktionen steuert, welche über die Anzeigeeinheit repräsentiert werden, ein direktes Steuerverfahren oder ein indirektes Steuerverfahren bereit.
  • Hier ist das direkte Steuerverfahren eine Art, bei welcher ein Benutzer direkt einen Bildschirm berührt, und das indirekte Steuerverfahren ist eine Art, bei welcher ein Benutzer einen Schirm über ein zusätzliches Steuerglied (z. B. eine Fernbedienung) steuert. Für das direkte Steuerverfahren, welches den Berührungsschirm benutzt, ist es möglich, dass ein Benutzer identisch das Steuern erkennt (z. B. basierend auf einem Abbild erkennt), während der Bildschirm direkt gesteuert wird. Jedoch kann ein Benutzer abgelenkt werden, wenn er den Bildschirm bei dem direkten Steuerverfahren betrachtet und gleichzeitig das Fahrzeug fährt. Für das indirekte Steuerverfahren kann ein Benutzer das zusätzliche Steuerglied durch Umfassen des Steuergliedes und durch Drücken einer Steuergliedtaste benutzen. Zusätzlich kann es bei dem indirekten Verfahren für den Benutzer schwierig sein, die Steuerfunktion zu erkennen, da der Bildschirm und das Steuerglied getrennt sind.
  • Die obige Information, welche in diesem Abschnitt veröffentlicht wird, dient nur der Verstärkung des Verständnisses des Hintergrunds der Erfindung, und sie kann deshalb Information beinhalten, welche nicht den Stand der Technik bildet, welcher bereits einem Fachmann in diesem Land bekannt ist.
  • ZUSAMMENFASSUNG
  • Die vorliegende Erfindung stellt ein Steuersystem und Verfahren bereit, welche eine Handgeste für ein Fahrzeug benutzt, welche die Vorteile des Bedienens einer Graphik besitzt, welche auf einer Windschutzscheibe repräsentiert wird, wobei ein Bild einer Handgeste des Benutzers benutzt wird.
  • Ein Steuersystem, welches eine Handgeste für ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt, kann eine Vielzahl von Einheiten beinhalten, welche von einem Prozessor ausgeführt werden. Die Vielzahl der Einheiten kann beinhalten: eine Bilderfassungseinheit, welche ein Handbild von innerhalb eines Fahrzeugs aufnimmt; eine Bildbearbeitungseinheit, welche ein Handgestenbild aus dem aufgenommenen Handbild extrahiert und das extrahierte Handgestenbild durch Überlappen des Bildes auf einer Windschutzscheibe des Fahrzeugs repräsentiert; eine graphische Anzeigeeinheit, welche einen graphischen Schirm auf der Windschutzscheibe ausgibt; und eine Benutzerschnittstelleneinheit, welche es gestattet, dass der graphische Bildschirm basierend auf dem Handgestenbild manipuliert wird.
  • Die Bildbearbeitungseinheit kann das Handgestenbild durch Überlappen des Bildes über die graphische Anzeigeeinheit repräsentieren, welche in Front eines Fahrers angeordnet ist, und die Benutzerschnittstelleneinheit kann den graphischen Bildschirm der graphischen Anzeigeeinheit bedienen, so dass er basierend auf dem Handgestenbild manipuliert wird.
  • Außerdem kann die graphische Anzeigeeinheit ein Head-up-Display bzw. eine Kopfraumanzeige (HUD) sein. Die graphische Anzeigeeinheit kann ein audiovisuelles Navigations-(AVN-)System sein. Die Benutzerschnittstelleneinheit kann die Manipulation ausführen, wie zum Beispiel das Auswählen eines Icons bzw. Bildzeichens, das Anklicken und das Ziehen auf dem graphischen Bildschirm, welcher auf der Windschutzscheibe durch das Handgestenbild repräsentiert wird.
  • KURZE BESCHREIBUNHG DER ZEICHNUNGEN
  • 1 ist eine beispielhafte Zeichnung eines Steuersystems, wobei eine Handgeste für ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt wird;
  • 2 ist ein beispielhaftes Ablaufdiagramm, welches einen Prozess zeigt, um ein Handgestenbild zu extrahieren und dann das Bild entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung zu repräsentieren;
  • 3 ist ein beispielhaftes Ablaufdiagramm eines Steuerverfahrens, wobei eine Handgeste für ein Fahrzeug entsprechend einer Ausführungsform der vorliegenden Erfindung benutzt wird;
  • 4 ist eine beispielhafte Ansicht, welche ein Handgestenbild zeigt, welches auf eine Fahrzeugwindschutzscheibe über ein Steuersystem projiziert wird, wobei eine Handgeste für ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt wird; und
  • 5 ist eine beispielhafte Ansicht, welche ein Icon, welches ausgewählt ist, und die Ziehbehandlung, welche auf einem Graphikschirm durch ein Handgestenbild ausgeführt wird, entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung zeigen.
  • Bezugszeichenliste
    • 110
    Bilderfassungseinheit
    120
    Bildbearbeitungseinheit
    122
    Bildextrahiereinheit
    124
    Bildanzeigeeinheit
    130
    graphische Anzeigeeinheit
    140
    Benutzerschnittstelleneinheit
  • DETAILLIERTE BESCHREIBUNG
  • Es ist davon auszugehen, dass der Term „Fahrzeug” oder „fahrzeugartig” oder ein anderer ähnlicher Term, wie er hier benutzt wird, inklusive für Motorfahrzeuge im Allgemeinen ist, wie zum Beispiel für Personenautomobile, wobei Fahrzeuge für den Sportgebrauch (SUV), Omnibusse, Lastwagen, verschiedene kommerzielle Fahrzeuge, Wasserkraftfahrzeuge beinhaltet sind, wobei eine Vielzahl von Booten und Schiffen, Flugzeuge und ähnliche und wobei Hybridfahrzeuge, Elektrofahrzeuge, Verbrennungs-, Einsteckhybridelektrische Fahrzeuge, Wasserstoff betriebene Fahrzeuge und andere Fahrzeuge mit alternativen Kraftstoff (z. B. Kraftstoffen, welche von Ressourcen anders als Öl abgeleitet sind) beinhaltet sind.
  • Obwohl eine beispielhafte Ausführungsform beschrieben wird, indem sie eine Vielzahl von Einheiten benutzt, um den beispielhaften Prozess durchzuführen, ist davon auszugehen, dass die beispielhaften Prozesse auch durch einen oder eine Vielzahl von Modulen durchgeführt werden können. Zusätzlich ist davon auszugehen, dass der Term Steuerglied sich auf eine Hardware-Einrichtung bezieht, welche einen Speicher und einen Prozessor beinhaltet. Der Speicher ist konfiguriert, um die Module zu speichern, und der Prozessor ist speziell konfiguriert, um diese Module auszuführen, um einen oder mehrere Prozesse durchzuführen, welche weiter unten beschrieben werden.
  • Außerdem kann die Steuerlogik der vorliegenden Erfindung als nicht-transitorische, von einem Computer lesbare Medien auf einem von einem Computer lesbaren Medium eingebettet sein, welcher ausführbare Programminstruktionen enthält, welche durch einen Prozessor, ein Steuerglied oder Ähnliches ausgeführt werden. Beispiele des von einem Computer lesbaren Mediums beinhalten, sind jedoch nicht begrenzt auf ROM, RAM, Compact Disc-(CD-)ROMs, Magnetbänder, Floppy Disks, Flash-Laufwerke, Smart-Karten und optische Datenspeichereinrichtungen. Das von einem Computer lesbare Aufzeichnungsmedium kann auch auf an ein Netz gekoppelte Computer-Systeme verteilt sein, so dass die vom Computer lesbaren Medien in einer verteilten Weise gespeichert und ausgeführt werden, z. B. durch einen Telematik-Server oder ein Steuerglied-Flächennetz (CAN).
  • Die hier benutzte Terminologie dient nur dem Zweck des Beschreibens einzelner Ausführungsformen und es ist nicht beabsichtigt, dass sie die Erfindung begrenzt. Wie sie hier benutzt werden, sollen die Singularformen „ein”, „eine”, „eines” und „der”, „die” „das” ebenso die Pluralformen einschließen, es sei denn, es wird im Kontext klar in anderer Weise angezeigt. Es ist ferner davon auszugehen, dass die Terme „weist auf” und/oder „aufweisend”, wenn sie in dieser Spezifikation benutzt werden, das Vorhandensein der aufgeführten Merkmale, Integer, Schritte, Operationen, Elemente und/oder Komponenten spezifizieren, jedoch nicht das Vorhandensein oder das Hinzufügen eines oder mehrerer anderer Merkmale, Integer, Schritte, Operationen, Elemente, Komponenten und/oder Gruppen davon ausschließen. Wie es hier benutzt wird, beinhaltet der Term „und/oder” jegliche und alle Kombinationen einer oder mehrerer zusammenhängender, aufgelisteter Begriffe.
  • In der folgenden detaillierten Beschreibung sind beispielhafte Ausführungsform der vorliegenden Erfindung gezeigt und beschrieben worden, einfach mit Hilfe der Erläuterung. Wie Fachleute realisieren werden, können die beschriebenen beispielhaften Ausführungsformen auf verschiedene unterschiedliche Weisen modifiziert werden, wobei alle nicht vom Geist oder Umfang der vorliegenden Erfindung abweichen. Entsprechend sind die Zeichnungen sind die Beschreibung in ihrer Art als erläuternd und nicht restriktiv anzusehen. Ähnliche Referenzziffern bezeichnen ähnliche Elemente über die Spezifikation hinweg.
  • Hier nachfolgend wird eine beispielhafte Ausführungsform der vorliegenden Erfindung im Detail mit Bezug auf die beigefügten 1 bis 5 beschrieben.
  • 1 ist eine beispielhafte Zeichnung eines Steuersystems, wobei eine Handgeste für ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt wird. Ein Steuersystem 100, bei welchem eine Handgeste für ein Fahrzeug entsprechend zu 1 benutzt wird, kann eine Vielzahl von Einheiten beinhalten, welche durch einen Prozessor ausgeführt werden. Die Vielzahl der Einheiten kann eine Bilderfassungseinheit bzw. Bildaufnahmeeinheit 110, eine Bildverarbeitungseinheit 120, eine graphische Anzeigeeinheit 130 und eine Benutzerschnittstelleneinheit 140 beinhalten.
  • Die Bilderfassungseinheit 110 kann innerhalb eines Fahrzeugs angeordnet sein und kann konfiguriert sein, ein Handbild innerhalb des Fahrzeugs aufzunehmen. Die Bilderfassungseinheit 110 kann entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung eine Kamera, eine Videoeinrichtung oder Ähnliches sein. Zusätzlich kann die Bilderfassungseinheit 110 eine Beleuchtungseinheit (nicht gezeigt) beinhalten, welche das Aufnehmen des Handbildes erleichtert, indem Licht in Richtung des aufzunehmenden Objektes ausgesendet wird.
  • Außerdem kann die Bildbearbeitungseinheit 120 konfiguriert sein, um nur das Handbild (hier nachfolgend Handgestenbild) aus dem durch die Bilderfassungseinheit 110 aufgenommenen Bild zu extrahieren. Außerdem kann die Bildbearbeitungseinheit 120 konfiguriert sein, das extrahierte Handgestenbild durch das Überlappen des Bildes an der Front (hier nachfolgend der Windschutzscheibe) eines Fahrzeugs zu repräsentieren. Die Bildbearbeitungseinheit 120 entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung kann eine Bildextrahiereinheit 122 und eine Bildanzeigeeinheit 124 beinhalten. Die Bildextrahiereinheit 122 kann eine Einrichtung sein, welche konfiguriert ist, das Handgestenbild von dem erfassten Handbild zu extrahieren. Zusätzlich kann die Anzeigeeinheit 124 eine Einrichtung sein, welche konfiguriert ist, das extrahierte Handgestenbild zu repräsentieren, um das Bild auf einer Windschutzscheibe eines Fahrzeugs zu überlappen.
  • Wie beschrieben, kann das Handgestenbild auf der Windschutzscheibe über die Bildbearbeitungseinheit 120 angezeigt werden, und damit kann ein Benutzer innerhalb eines Fahrzeugs identisch das Handgestenbild erkennen. Ferner kann die Bildbearbeitungseinheit 120 konfiguriert sein, das Handgestenbild über eine zusätzliche Einrichtung zu repräsentieren, welche in Front eines Fahrers für das Anzeigen von Graphiken angeordnet ist, und die Benutzerschnittstelleneinheit 140 kann betrieben werden, um zu gestatten, dass das Handgestenbild einen Graphikschirm der zusätzlichen Einrichtung steuert.
  • Die graphische Anzeigeeinheit 130 kann konfiguriert sein, um verschiedene Graphikschirme auf der Windschutzscheibe zu repräsentieren. Hier können die graphischen Schirme verschiedene Bildschirme sein, welche innerhalb eines Fahrzeugs angeordnet sind, wie zum Beispiel die Bildschirme einer Navigationseinrichtung, eines Radios, eines Fernsehers und eines Internets und so weiter. Die graphische Anzeigeeinheit 130 entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung kann ein Head-up-Display (HUD) sein. Zusätzlich kann das HUD das Handgestenbild repräsentieren, welches direkt aus der Bildextrahiereinheit 122 der Bildbearbeitungseinheit 120 bereitgestellt wird, um den graphischen Schirm zusammen mit dem Handgestenbild zu projizieren. Außerdem kann die graphische Anzeigeeinheit ein audiovisuelles Navigations-(AVN-)System sein.
  • Die Benutzerschnittstelleneinheit 140 kann konfiguriert sein, um simultan das Handgestenbild und den graphischen Schirm auf der Windschutzscheibe zu repräsentieren, und kann betrieben werden, um zu gestatten, dass der graphische Schirm über das Handgestenbild manipuliert wird. Mit anderen Worten, der graphische Schirm kann über die Benutzerschnittstelleneinheit 140 manipuliert werden. Hier kann das Handgestenbild die Manipulation, wie zum Beispiel das Auswählen eines Icons, das Anklicken und Ziehen in dem graphischen Schirm durchführen, welcher auf der Windschutzscheibe repräsentiert wird.
  • 2 ist ein beispielhaftes Ablaufdiagramm, welches einen Prozess für das Extrahieren eines Handgestenbildes und dann das Repräsentieren des Bildes entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung zeigt. Mit Bezug auf 2 kann die Bilderfassungseinheit 110 konfiguriert sein, ein Objekt im Schritt S110 zu fotografieren, und die Bildextrahiereinheit 122 kann konfiguriert sein, um das Handgestenbild aus dem aufgenommenen Bild im Schritt S120 zu extrahieren. Außerdem kann die Anzeigeeinheit 14 konfiguriert sein, um das Handgestenbild auf der Windschutzscheibe durch das Überlappen des Bildes im Schritt S130 zu repräsentieren.
  • 3 ist ein beispielhaftes Ablaufdiagramm eines Steuerverfahrens, wobei eine Handgeste für ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt wird. Mit Bezug auf 3 kann ein Steuerverfahren, bei welchem die Handgeste für ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt wird, das Aufnehmen, durch eine abbildende Einrichtung, eines Bildes im Schritt S210, das Behandeln, durch einen Prozessor, des Bildes in den Schritten S220 und S230 und das Betreiben im Schritt S240 beinhalten.
  • Speziell kann die Bilderfassungseinheit 110, wie zum Beispiel eine abbildende Einrichtung (z. B. eine Kamera, ein Videorecorder, etc.), konfiguriert sein, um ein Handbild innerhalb eines Fahrzeugs im Schritt S210 aufzunehmen. Hier, im Schritt S210, kann entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung das Objekt, welches in dem Bild aufgenommen wird, durch eine Beleuchtungseinheit beleuchtet werden. Das Handgestenbild kann aus dem aufgenommenen Handbild des Schritte S210 extrahiert werden, und das extrahierte Handgestenbild kann auf der Windschutzscheibe durch Überlappen des Bildes in den Schritten S220 und S230 repräsentiert werden.
  • Außerdem kann das Behandeln eines Bildes in den Schritten S220 und S230 entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung das Extrahieren des Bildes und das Repräsentieren des Bildes beinhalten. Als Erstes kann das Handgestenbild aus dem aufgenommenen Handbild im Schritt S220 extrahiert werden. Zusätzlich kann das Handgestenbild auf der Windschutzscheibe durch Überlappen des Bildes im Schritt S230 repräsentiert werden. Das Handgestenbild kann auf einem Graphikschirm repräsentiert werden, welcher von dem HUD oder dem AVN-System durch Überlappen des Bildes in dem Schritt S230 projiziert wird.
  • Der graphische Schirm, welcher auf der Windschutzscheibe repräsentiert wird, kann durch das Handgestenbild im Schritt S240 manipuliert werden. Im Schritt S240 kann das Handgestenbild den Graphikschirm manipulieren, um ein Icon auszuwählen und auf dem Schirm anzuklicken oder auf dem Schirm in dem graphischen Schirm zu ziehen, welcher auf der Windschutzscheibe durch das HUD oder das AVN-System repräsentiert wird. Zusätzlich kann beim Behandeln eines Bildes im Schritt S220 das Handgestenbild auf der zusätzlichen graphischen Anzeigeeinheit repräsentiert werden, welche in Front eines Fahrers angeordnet ist, und bei dem Betreiben im Schritt S240 kann das Handgestenbild den graphischen Schirm der graphischen Anzeigeeinheit manipulieren.
  • 4 ist eine beispielhafte Ansicht, welche ein Handgestenbild zeigt, welches auf einer Fahrzeugwindschutzscheibe über ein Steuersystem projiziert wird, wobei eine Handgeste über ein Fahrzeug entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung benutzt wird. Mit Bezug auf 4 kann ein Objekt (A) durch die Beleuchtungseinheit beleuchtet werden, und das Handbild kann durch die Bilderfassungseinheit 110 aufgenommen werden. Das aufgenommene Handbild kann extrahiert und in das Handgestenbild (B) durch die Bildbearbeitungseinheit 120 transformiert werden, und das extrahierte Handgestenbild (B) kann auf der Windschutzscheibe repräsentiert werden.
  • Zusätzlich kann das Handgestenbild (B) in Synchronisation mit der Bewegung einer Hand des Benutzers sein und kann frei basierend auf der Bewegung eines Handbildes verändert werden, welches durch die Kamera 110 aufgenommen ist. Das extrahierte Handgestenbild (B) kann zusammen mit dem graphischen Schirm (C) auf dem HUD auf der Windschutzscheiben durch Überlappen der Bilder repräsentiert werden, und die verschiedenen Manipulationen auf dem graphischen Schirm (C) können durch das Handgestenbild (B) durchgeführt werden.
  • 5 ist eine beispielhafte Ansicht, welche ein Icon, welches ausgewählt ist, und eine Ziehmanipulation zeigt, welche auf einem graphischen Schirm durch ein Handgestenbild entsprechend einer beispielhaften Ausführungsform der vorliegenden Erfindung durchgeführt wird. Mit Bezug auf 5 kann das Handgestenbild B1, welches über die Bildbehandlungseinheit 120 repräsentiert wird, die Auswahl eines Icons C1 des graphischen Bildschirms anzeigen, welcher auf der Windschutzscheibe über die graphische Anzeigeeinheit 130 repräsentiert wird. Das Handgestenbild kann ein Anklicken oder ein Ziehen eines Icons auf dem graphischen Schirm anzeigen, um verschiedene Funktionen des graphischen Bildschirms zu betreiben.
  • Deshalb kann ein Benutzer identisch verschiedene Anzeigeeinrichtungen und eine Graphik, welche auf der Windschutzscheibe über das Handgestenbild repräsentiert wird (z. B. über die Anzeige des Handgestenbildes), basierend auf der Bewegung der Hand des Benutzers betreiben, so dass die Augen des Benutzers auf die Straße in Front während des Fahrens fokussiert bleiben, um die Bequemlichkeit für den Fahrer und die Sicherheit sicherzustellen.
  • Die oben beschriebene beispielhafte Ausführungsform der vorliegenden Erfindung kann über ein Programm realisiert werden, um Funktionen zu realisieren, und zwar entsprechend zu der Konfiguration der beispielhaften Ausführungsformen oder über ein Aufzeichnungsmedium, um das Programm aufzuzeichnen, zusätzlich zu der oben beschriebenen Einrichtung und/oder dem Verfahren, welches leicht von einem Fachmann zu realisieren ist.
  • Während diese Erfindung in Verbindung mit dem beschrieben wurde, was gegenwärtig als beispielhafte Ausführungsformen betrachtet wird, ist davon auszugehen, dass die Erfindung nicht auf die offenbarten beispielhaften Ausführungsformen begrenzt ist, sondern es im Gegenteil beabsichtigt ist, verschiedene Modifikationen und äquivalente Anordnungen abzudecken, welche in den Geist und den Umfang der angehängten Ansprüche fallen.

Claims (15)

  1. Steuersystem, welches eine Handgeste für ein Fahrzeug benutzt, welches aufweist: einen Prozessor und einen Speicher, welcher konfiguriert ist, Programminstruktionen zu speichern, und der Prozessor konfiguriert ist, die Programminstruktionen auszuführen, wobei die Programminstruktionen, wenn sie ausgeführt werden, konfiguriert sind, um: ein Handbild innerhalb des Fahrzeugs aufzunehmen; ein Handgestenbild von einem aufgenommenen Handbild zu extrahieren; das extrahierte Handgestenbild durch Überlappen des Bildes auf einer Windschutzscheibe des Fahrzeugs zu repräsentieren; einen graphischen Bildschirm auf der Windschutzscheibe auszugeben; und Einrichtungen innerhalb des Fahrzeugs basierend auf einer Manipulation des graphischen Schirms entsprechend zu dem Handgestenbild zu betreiben.
  2. Steuersystem nach Anspruch 1, wobei das Handgestenbild durch Überlappen des Bildes über eine graphische Anzeige repräsentiert wird, welche in Front eines Fahrers angeordnet ist, und eine Benutzerschnittstelle den graphischen Bildschirm betreibt, so dass er basierend auf dem Handgestenbild zu manipulieren ist.
  3. Steuersystem nach Anspruch 2, wobei die graphische Anzeige ein Head-up-Display bzw. eine Kopfraumanzeige (HUD) ist.
  4. Steuersystem nach Anspruch 2, wobei die graphische Anzeige ein audiovisuelles Navigations-(AVN-)System ist.
  5. Steuersystem nach Anspruch 2, wobei die Benutzerschnittstelle die Manipulation ausführt, wie zum Beispiel das Auswählen eines Icons, das Anklicken und Ziehen in dem graphischen Schirm, welcher auf der Windschutzscheibe durch das Handgestenbild repräsentiert wird.
  6. Steuerverfahren, bei welchem eine Handgeste für ein Fahrzeug benutzt wird, welches aufweist: Extrahieren, durch einen Prozessor, eines Handgestenbildes aus einem aufgenommenen Handbild innerhalb des Fahrzeugs; Repräsentieren, durch den Prozessor, des extrahierten Handgestenbildes durch Überlappen des Bildes auf einer Windschutzscheibe des Fahrzeugs; Ausgeben, durch den Prozessor, eines graphischen Schirms auf der Windschutzscheibe; und Betreiben, durch den Prozessor, von Einrichtungen innerhalb des Fahrzeugs basierend auf einer Manipulation des graphischen Schirms entsprechend zu dem Handgestenbild.
  7. Verfahren nach Anspruch 6, welches ferner aufweist: Repräsentieren, durch den Prozessor, des Handgestenbildes durch Überlappen des Bildes über eine graphische Anzeige, welche in Front eines Fahrers angeordnet ist.
  8. Verfahren nach Anspruch 7, wobei die graphische Anzeige ein Head-up-Display (HUD) ist.
  9. Verfahren nach Anspruch 7, wobei die graphische Anzeige ein audiovisuelles Navigations-(AVN-)System ist.
  10. Verfahren nach Anspruch 6, welches ferner aufweist: Betreiben, durch den Prozessor, von Einrichtungen innerhalb des Fahrzeugs über eine Manipulation, wie zum Beispiel das Auswählen eines Icons, das Anklicken und das Ziehen in dem graphischen Schirm, welcher auf der Windschutzscheibe durch das Handgestenbild repräsentiert wird.
  11. Nicht-transitorisches, von einem Computer lesbares Medium, welches Programminstruktionen beinhaltet, welche durch einen Prozessor ausgeführt werden, wobei das vom Computer lesbare Medium aufweist: Programminstruktionen, welche ein Handgestenbild aus einem aufgenommenen Handbild innerhalb des Fahrzeuges extrahieren; Programminstruktionen, welche das extrahierte Handgestenbild durch Überlappen des Bildes auf einer Windschutzscheibe des Fahrzeugs repräsentieren; Programminstruktionen, welche einen graphischen Schirm auf der Windschutzscheibe ausgeben; und Programminstruktionen, welche Einrichtungen innerhalb des Fahrzeugs basierend auf einer Manipulation des graphischen Schirms entsprechend dem Handgestenbild betreiben.
  12. Nicht-transitorisches, von einem Computer lesbares Medium nach Anspruch 11, welches ferner aufweist: Programminstruktionen, welche das Handgestenbild durch Überlappen des Bildes über eine graphische Anzeige repräsentieren, welche in Front eines Fahrers angeordnet ist.
  13. Nicht-transitorisches, von einem Computer lesbares Medium nach Anspruch 12, wobei die graphische Anzeige ein Head-up-Display (HUD) ist.
  14. Nicht-transitorisches, von einem Computer lesbares Medium nach Anspruch 12, wobei die graphische Anzeige ein audiovisuelles Navigations-(AVN-)System ist.
  15. Nicht-transitorisches, von einem Computer lesbares Medium nach Anspruch 11, welches ferner aufweist: Programminstruktionen, welche Einrichtungen innerhalb des Fahrzeugs über Manipulation, wie zum Beispiel das Auswählen eines Icons, das Anklicken und das Ziehen in dem graphischen Schirm, betreiben, welcher auf der Windschutzscheibe durch das Handgestenbild repräsentiert wird.
DE201310223419 2012-12-20 2013-11-15 Steuersystem und Verfahren, wobei eine Handgeste für ein Fahrzeug benutzt wird Withdrawn DE102013223419A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120149951A KR20140080300A (ko) 2012-12-20 2012-12-20 핸드 제스처를 이용한 차량용 제어 시스템
KR10-2012-0149951 2012-12-20

Publications (1)

Publication Number Publication Date
DE102013223419A1 true DE102013223419A1 (de) 2014-06-26

Family

ID=50878962

Family Applications (1)

Application Number Title Priority Date Filing Date
DE201310223419 Withdrawn DE102013223419A1 (de) 2012-12-20 2013-11-15 Steuersystem und Verfahren, wobei eine Handgeste für ein Fahrzeug benutzt wird

Country Status (3)

Country Link
KR (1) KR20140080300A (de)
CN (1) CN103885580A (de)
DE (1) DE102013223419A1 (de)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105700671A (zh) * 2014-11-26 2016-06-22 熊兆王 手势控制方法及其系统
DE102015204280A1 (de) * 2015-03-10 2016-09-15 Robert Bosch Gmbh Verfahren zur Aktivierung eines Aktuators eines Kraftfahrzeugs, zur Ausführung des Verfahrens eingerichtete Vorrichtung und Computerprogrammprodukt
CN104866106A (zh) * 2015-06-03 2015-08-26 深圳市光晕网络科技有限公司 一种结合hud与红外识别的人机交互方法和系统
CN106250027A (zh) * 2016-07-22 2016-12-21 纳瓦电子（上海）有限公司 一种综合交互系统
CN112947761B (zh) * 2021-03-26 2023-07-28 芜湖汽车前瞻技术研究院有限公司 Ar-hud系统的虚像位置调整方法、装置及存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE60041840D1 (de) * 1999-05-27 2009-04-30 Clarion Co Ltd Schaltersteuerung im Fahrzeuginnenraum
GB0523512D0 (en) * 2005-11-18 2005-12-28 Applied Generics Ltd Enhancing traffic and navigation information with visual and audio data
JP4930716B2 (ja) * 2007-08-23 2012-05-16 株式会社デンソー 車両用遠隔操作装置
JP4626860B2 (ja) * 2009-01-30 2011-02-09 株式会社デンソー 操作装置
US8633979B2 (en) * 2010-12-29 2014-01-21 GM Global Technology Operations LLC Augmented road scene illustrator system on full windshield head-up display
US9057874B2 (en) * 2010-12-30 2015-06-16 GM Global Technology Operations LLC Virtual cursor for road scene object selection on full windshield head-up display

Also Published As

Publication number Publication date
CN103885580A (zh) 2014-06-25
KR20140080300A (ko) 2014-06-30

Similar Documents

Publication Publication Date Title
DE102010035232B4 (de) Verfahren und System zum Anzeigen von Fahrzeugrückfahrkamerabildern in verschiedenen Modi
DE102018207440A1 (de) Verfahren zur Berechnung einer "augmented reality"-Einblendung für die Darstellung einer Navigationsroute auf einer AR-Anzeigeeinheit, Vorrichtung zur Durchführung des Verfahrens sowie Kraftfahrzeug und Computerprogramm
EP2802476B1 (de) Verfahren und vorrichtung zum erzeugen einer 3d-darstellung einer benutzeroberfläche in einem fahrzeug
EP2608185B1 (de) Verfahren und Vorrichtung zum Bereitstellen einer Einparkhilfe in einem Fahrzeug
DE102013223419A1 (de) Steuersystem und Verfahren, wobei eine Handgeste für ein Fahrzeug benutzt wird
DE102018108060A1 (de) Fahrzeugseitenspiegel-automatisierung
DE102013221668A1 (de) System und Verfahren für das Bereitstellen einer Benutzerschnittstelle im Fahrzeug, wobei das Erkennen einer Handformspur benutzt wird
DE102011013760A1 (de) Verfahren, Vorrichtung und Computerprogrammprodukt zur Informationsvermittlung mittels erweiterter Realität im Zusammenhang mit einem Straßenfahrzeug
DE102015119556A1 (de) Anpassen einer anzeige auf einer transparenten elektronischen anzeige
DE112013007572T5 (de) Informations-Anzeigevorrichtung und Informations-Anzeigeverfahren
DE102014211342A1 (de) Anwenderschnittstelle und Verfahren zum Anpassen einer semantischen Skalierung einer Kachel
DE102019118604A1 (de) Systeme und verfahren zur steuerung von fahrzeugfunktionen über fahrer- und fahrgast-hud
DE102018104065A1 (de) Auslösen der steuerung einer zone unter verwendung einer zonenbildüberlagerung auf einer fahrzeuganzeige
DE102015120619A1 (de) Bildanzeigevorrichtung und Bildanzeigeverfahren
DE102014204800A1 (de) Verfahren und Vorrichtung zum Bereitstellen einer graphischen Nutzerschnittstelle in einem Fahrzeug
EP3007050A1 (de) Anwenderschnittstelle und Verfahren zur Anpassung einer Menüleiste auf einer Anwenderschnittstelle
EP2930603A1 (de) Verfahren und Vorrichtung zum Bereitstellen einer graphischen Benutzerschnittstelle in einem Fahrzeug
DE112020004921T5 (de) Vorausschauende virtuelle rekonstruktion physischer umgebungen
DE102015115362A1 (de) Erfassungsvorrichtung für ein Kraftfahrzeug sowie Kraftfahrzeug
DE102015217489B4 (de) Eingabeverfahren und Vorrichtung in einem Kraftfahrzeug zum Auswählen eines Zieles einer automatisierten Fahrt
EP3040808A1 (de) Fortbewegungsmittel, Anwenderschnittstelle und Verfahren zur Definition einer Kachel auf einer Anzeigeeinrichtung
DE102012204541B4 (de) Verfahren und Vorrichtung zur Bildverarbeitung von Bilddaten
EP3296795B1 (de) Verfahren zur darstellung eines bildobjekts in einem fahrzeug auf einer fahrzeugintern und einer fahrzeugextern wahrgenommenen anzeige
DE102019118189A1 (de) Koppelung von Benutzeroberflächen
WO2020088902A1 (de) Verfahren zur vermeidung einer sichtfeldstörung für eine bedienperson eines objektes, vorrichtung zur durchführung des verfahrens sowie fahrzeug und computerprogramm

Legal Events

Date Code Title Description
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee