DE102012108732A1

DE102012108732A1 - Fahrzeugsystem und Verfahren zum Bereitstellen von Informationen über ein den Fahrer interessierendes externes Element

Info

Publication number: DE102012108732A1
Application number: DE102012108732A
Authority: DE
Inventors: Dinu Petre Madau; Shadi Mere; Paul Morris
Original assignee: Visteon Global Technologies Inc
Current assignee: Visteon Global Technologies Inc
Priority date: 2011-09-23
Filing date: 2012-09-17
Publication date: 2013-03-28
Also published as: US20130076883A1; JP2013068620A; US9421866B2

Abstract

Ein System und Verfahren zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs umfassen: eine Bildaufnahmevorrichtung; einen Kopf- oder Blickverfolger; mindestens einen Prozessor; und eine Ausgabevorrichtung. Die Bildaufnahmevorrichtung nimmt ein Bild einer Umgebung außerhalb eines Fahrzeugs auf. Der Kopf- oder Blickverfolger bestimmt ein Element, das sich der Fahrer des Fahrzeugs ansieht. Der mindestens eine Prozessor verarbeitet das aufgenommene Bild. Der mindestens eine Prozessor übersetzt auch den Sprachgehalt, der in dem aufgenommenen Bild des Elements enthalten ist, das sich der Fahrer ansieht, in eine zweite Sprache oder bestimmt Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren. Die Ausgabevorrichtung gibt Informationen aus, die den zweiten übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, oder die bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren, enthalten.

Description

GEBIET DER ERFINDUNG
Die Offenbarung betrifft Systeme und Verfahren, um dem Fahrer eines Fahrzeugs Sprachübersetzungsinformationen oder Interessenpunktinformationen über ein Element außerhalb des Fahrzeugs, für das sich der Fahrer interessiert, bereitzustellen.
ALLGEMEINER STAND DER TECHNIK
Der Fahrer eines Fahrzeugs interessiert sich oft für ein Element außerhalb des Fahrzeugs, wie etwa für ein Zeichen, ein Verkehrsschild oder ein andersartiges Element, über das der Fahrer zusätzliche Informationen wünscht. Viele Fahrzeuge enthalten Navigationssysteme, die umständlich zu handhaben sind, um über das Element, das sich der Fahrer ansieht, zusätzliche Informationen zu erzielen. Beispielsweise kann sich der Fahrer des Fahrzeugs für ein Verkehrsschild interessieren, für das der Fahrer zusätzliche Interessenpunktinformationen wünscht, und muss dann die von ihm gewünschte Art der Interessenpunktinformationen in das Navigationssystem eingeben. Wenn der Fahrer diese Informationen erst einmal in das System eingegeben hat, kann es sein, dass der Fahrer die Ausfahrt bereits verpasst hat.
Wenn man im Ausland unterwegs ist, erscheint das Verkehrsschild, für das sich der Fahrer interessiert, wahrscheinlich in einer fremden Sprache, die für den Fahrer unverständlich ist. Dadurch kann die Fahrt im Ausland abenteuerlich sein. Viele existierende Systeme zum Übersetzen von Sprachen sind nicht dazu geeignet, um sich nur auf das Element zu konzentrieren, für das sich der Fahrer interessiert. Daher muss der Fahrer dem System sagen, in welche Sprache er die Übersetzung wünscht. Dies ist unwirksam und kann zu einem Sicherheitsproblem werden.
Es werden ein System und Verfahren zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs benötigt, um ein oder mehrere Probleme zu lösen, die mit den existierenden Systemen und Verfahren verbunden sind.
KURZDARSTELLUNG DER ERFINDUNG
Bei einer Ausführungsform wird ein System zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs offenbart. Das System umfasst: eine Bildaufnahmevorrichtung; einen Kopf- oder Blickverfolger; mindestens einen Prozessor; und eine Ausgabevorrichtung. Die Bildaufnahmevorrichtung dient zum Aufnehmen eines Bildes einer Umgebung außerhalb eines Fahrzeugs. Der Kopf- oder Blickverfolger dient zum Bestimmen eines Elements, das sich der Fahrer des Fahrzeugs ansieht. Der mindestens eine Prozessor dient zum Verarbeiten des aufgenommenen Bildes und mindestens einem von: (1) Übersetzen des Sprachgehalts, der in dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, enthalten ist, in eine zweite Sprache; oder (2) Bestimmen von Interessenpunktinformationen basierend auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht. Die Ausgabevorrichtung dient zum Ausgeben von Informationen, die mindestens eines umfassen von: (1) der zweiten Sprache, die den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, umfasst; oder (2) den bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren.
Bei einer anderen Ausführungsform wird ein Verfahren zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs offenbart. In einem Schritt wird ein Bild einer Umgebung außerhalb eines Fahrzeugs mit einer Bildaufnahmevorrichtung aufgenommen. In einem anderen Schritt wird ein Kopf- oder Blickverfolger verwendet, um ein Element zu bestimmen, das sich der Fahrer des Fahrzeugs ansieht. In noch einem anderen Schritt verarbeitet mindestens ein Prozessor das aufgenommene Bild und führt mindestens eines aus von: (1) Übersetzen des Sprachgehalts, der in dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, enthalten ist, in eine zweite Sprache; oder (2) Bestimmen von Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren. In einem zusätzlichen Schritt gibt eine Ausgabevorrichtung Informationen aus, die mindestens eines umfassen von: (1) der zweiten Sprache, die den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, umfasst; oder (2) den bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren.
Diese und andere Merkmale, Aspekte und Vorteile der Offenbarung werden mit Bezug auf die nachstehenden Zeichnungen, die Beschreibung und die Ansprüche besser verständlich werden.
KURZE BESCHREIBUNG DER ZEICHNUNGEN
Es zeigen:
1 ein Blockdiagramm eines Systems zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs;
2 eine Seitenansicht einer Ausführungsform eines Fahrers, der ein Fahrzeug fährt, welches das System aus 1 verwendet; und
3 ein Ablaufschema einer Ausführungsform eines Verfahrens zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs.
AUSFÜHRLICHE BESCHREIBUNG DER OFFENBARUNG
Die nachstehende ausführliche Beschreibung bezieht sich auf die besten derzeit in Betracht gezogenen Ausführungsformen der Offenbarung. Die Beschreibung ist nicht im einschränkenden Sinne auszulegen, sondern wird nur zur Erläuterung der allgemeinen Grundlagen der Offenbarung gegeben, da der Umfang der Offenbarung am besten durch die beiliegenden Ansprüche definiert wird. Es sei zu beachten, dass die Figuren rein beispielhaft und nicht maßstabsgetreu sind.
1 bildet ein Blockdiagramm eines Systems 10 zum Bereitstellen von Informationen für den Fahrer 12 eines Fahrzeugs 14 ab. Das System 10 umfasst: eine Eingabevorrichtung 16; eine Bildaufnahmevorrichtung 18; eine Verfolgungsvorrichtung 20; einen Prozessor 22; eine Kommunikationsvorrichtung 24; eine Ausgabevorrichtung 26; und ein Navigationssystem 27. Das System 10 ist im Fahrzeug eingebaut. Alle oben angegebenen Bestandteile des Systems 10 sind miteinander verkabelt oder stehen in drahtloser Verbindung miteinander.
Die Eingabevorrichtung 16 umfasst eine oder mehrere Eingabevorrichtungen, die es dem Fahrer ermöglichen, Informationen in das System 10 einzugeben oder das System 10 zu steuern. Beispielhafte Eingabevorrichtungen 16 umfassen ein Mikrofon, ein Bedienfeld oder eine andere Art von Eingabevorrichtung, die es dem Fahrerermöglicht, Informationen in das System 10 einzugeben. Der Fahrer 12 kann einen Befehl in ein Mikrofon sprechen, um das System 10 anzuweisen. Der Fahrer 12 kann unter Verwendung eines Bedienfeldes einen Befehl eintippen, durch Berührung oder visuell eingeben, um das System 10 anzuweisen. Bei anderen Ausführungsformen kann der Fahrer 12 Befehle unter Verwendung diverser Verfahren und Eingabevorrichtungen 16 eingeben.
Die Bildaufnahmevorrichtung 18 umfasst eine oder mehrere Bildaufnahmevorrichtungen zum Aufnehmen eines Bildes der Umgebung außerhalb des Fahrzeugs 14. Das aufgenommene Bild kann ein Zeichen, ein Verkehrsschild oder eine andere Art von Element in der Umgebung außerhalb des Fahrzeugs 14 enthalten. Bei einer Ausführungsform nimmt die Bildaufnahmevorrichtung 18 ohne Unterschied ein Bild der Umgebung außerhalb des Fahrzeugs 14 auf, ohne Eingabe von der Verfolgungsvorrichtung 20, um zu bestimmen, für welchen Teil der Umgebung außerhalb des Fahrzeugs 14 sich der Fahrer 12 interessiert. Bei einer anderen Ausführungsform nimmt die Bildaufnahmevorrichtung 18 nur das genaue Bild des Teils der Umgebung außerhalb des Fahrzeugs 14 auf, für den sich der Fahrer 12 interessiert, basierend. auf einer Eingabe von der Verfolgungsvorrichtung 20, ohne in dem Bild die Teile der Umgebung außerhalb des Fahrzeugs 14 aufzunehmen, für die sich der Fahrer 12 nicht interessiert. Das aufgenommene Bild kann ein Zeichen, ein Verkehrsschild oder eine andere Art von Element in der Umgebung außerhalb des Fahrzeugs, für das sich der Fahrer 12 des Fahrzeugs 14 interessiert, enthalten.
Beispielhafte Bildaufnahmevorrichtungen 18 umfassen eine Kamera, eine Videovorrichtung oder eine andere Art von Bildaufnahmevorrichtung zum Aufnehmen eines Bildes der Umgebung außerhalb des Fahrzeugs 14. Die Bildaufnahmevorrichtung 18 kann sich an einer beliebigen Stelle um das Fahrzeug 14 herum befinden, um das gewünschte Bild der Umgebung außerhalb des Fahrzeugs 14 aufzunehmen, wie etwa eine nach vorne gerichtete Bildaufnahmevorrichtung, eine zur Seite gerichtete Bildaufnahmevorrichtung, eine nach hinten gerichtete Bildaufnahmevorrichtung oder eine andere Art von Bildaufnahmevorrichtung. Die aufgenommenen Bilder können digital oder analog vorliegen. Falls die aufgenommenen Bilder digital sind, kann die Bildaufnahmevorrichtung 18 oder der Prozessor 22 ferner einen Analog-/Digital-Wandler zum Umwandeln der Bilder in digitale Bilder umfassen. Bei einer Ausführungsform kann die Bildaufnahmevorrichtung 18 ständig Bilder der Umgebung außerhalb des Fahrzeugs 14 aufnehmen. Bei einer anderen Ausführungsform kann die Bildaufnahmevorrichtung 18 nur Bilder der Umgebung außerhalb des Fahrzeugs 14 aufnehmen, wenn der Fahrer 12 des Fahrzeugs 14 das System 10 unter Verwendung der Eingabevorrichtung 16 dazu anweist. Dadurch werden Verarbeitung und Datenspeicherung des Systems 10 leistungsfähig.
Die Verfolgungsvorrichtung 20 umfasst eine oder mehrere Verfolgungsvorrichtungen, um zu bestimmen, für welchen Teil der Umgebung außerhalb des Fahrzeugs 14 sich der Fahrer 12 interessiert. Dazu kann ein Zeichen, ein Verkehrsschild oder ein anderes Element außerhalb des Fahrzeugs 14 gehören, für das sich der Fahrer 12 interessiert. Beispielhafte Verfolgungsvorrichtungen 20 umfassen einen Blickverfolger, um die Augenbewegungen des Fahrers 12 zu verfolgen, einen Kopfverfolger, um die Kopfbewegungen des Fahrers 12 zu verfolgen, oder eine andere Art von Verfolgungsvorrichtung, um zu verfolgen, für welchen Teil der Umgebung außerhalb des Fahrzeugs 14 sich der Fahrer 12 interessiert. Beispielhafte Verfolgungsvorrichtungen 20 können eine Kamera, um ein Bild von den Augen oder dem Kopf des Fahrers aufzunehmen, ein Licht emittierendes und Licht detektierendes System, um die Augen oder den Kopf des Fahrers zu verfolgen, und einen Prozessor, der einen Verfolgungsalgorithmus umsetzt, um die Positionen der Augen oder des Kopfes des Fahrers zu bestimmen, zu speichern und zu verfolgen, basierend auf Daten, die von der Infrarotkamera empfangen werden, basierend auf den Bildern, die von der Kamera aufgenommen werden, und basierend auf einer Positionskoordinateneinheit, die dazu beiträgt, die Koordinaten des Kopfes oder der Augen des Fahrers zu bestimmen, umfassen. Beispielhafte Verfolgungsvorrichtungen 20 umfassen alle Verfolgungsvorrichtungen, die von Smarteye Corporation hergestellt werden, und unter http://www.smarteyecorporation.com aufgeführt sind, die hiermit zur Bezugnahme übernommen werden. Die US-Patente Nr. 6,578,962 und 6,758,563 , die hiermit zur Bezugnahme übernommen werden, beschreiben zusätzliche beispielhafte Verfolgungsvorrichtungen 20, die von dem System 10 verwendet werden können. Zudem können auch andere Verfolgungsvorrichtungen, wie etwa diejenigen, die unter http://en.wikipedia.org/wiki/Eye_trackinq beschrieben werden, von dem System verwendet werden und werden hiermit ebenfalls zur Bezugnahme übernommen. Bei anderen Ausführungsformen können diverse Verfolgungsvorrichtungen 20 verwendet werden, um den Teil der Umgebung außerhalb des Fahrzeugs 14 zu bestimmen, für den sich der Fahrer 12 interessiert.
Der Prozessor 22 umfasst einen oder mehrere Prozessoren zum Verarbeiten des aufgenommenen Bildes. Der Prozessor 22 kann einen oder mehrere Computer umfassen. Bei einer Ausführungsform verarbeitet der Prozessor 22 das ohne Unterschied aufgenommene Bild, das von der Bildaufnahmevorrichtung 18 aufgenommen wird, von der Umgebung außerhalb des Fahrzeugs 14, um das ohne Unterschied aufgenommene Bild unter Verwendung der Verfolgungsvorrichtung 20 nur auf den Teil des Bildes einzuschränken, für den sich der Fahrer 12 des Fahrzeugs 14 interessierte, und dabei Teile des Bildes auszuschließen, für die sich der Fahrer 12 nicht interessierte. Bei einer anderen Ausführungsform verarbeitet der Prozessor 22 den Teil der Umgebung außerhalb des Fahrzeugs 14, für den sich der Fahrer 12 interessiert, unter Verwendung von Daten, die von der Verfolgungsvorrichtung 20 empfangen werden, und weist dann die Bildaufnahmevorrichtung 18 an, nur ein Bild des Teils der Umgebung außerhalb des Fahrzeugs 14 aufzunehmen, für den sich der Fahrer 12 interessiert, ohne Elemente in dem Bild aufzunehmen, für die sich der Fahrer 12 nicht interessiert. Bei einer Ausführungsform ist der Prozessor 22 konfiguriert, um den Sprachgehalt, der in dem aufgenommenen Bild enthalten ist, in eine zweite Sprache zu übersetzen. Beispielsweise kann der Prozessor 22 den Sprachgehalt, der in dem aufgenommenen Bild eines Zeichens, eines Verkehrsschildes oder eines anderen Elements, das sich der Fahrer 12 des Fahrzeugs 14 ansah, enthalten ist, in eine zweite Sprache übersetzen. Bei einer anderen Ausführungsform ist der Prozessor 22 konfiguriert, um Interessenpunktinformationen basierend auf dem aufgenommenen Bild zu bestimmen. Beispielsweise kann der Prozessor 22 Interessenpunktinformationen basierend auf dem aufgenommenen Bild eines Zeichens, eines Verkehrsschildes oder eines anderen Elements, das sich der Fahrer 12 des Fahrzeugs 14 ansah, bestimmen. Die Interessenpunktinformationen können eine Position eines Interessenpunktes, einen Namen eines Interessenpunktes, einen Abstand des Fahrzeugs 14 von einem Interessenpunkt, eine Art von Ort, Produkt oder Dienst, der bzw. das sich an einem Interessenpunkt befindet, oder eine andere Art von Interessenpunktinformationen umfassen.
Der Prozessor 22 umfasst eine Positionsbestimmungseinheit 28, eine Verarbeitungseinheit 30, eine Mustererkennungseinheit 32, eine Übersetzungseinheit 34, eine Datenbankeinheit 36 und eine Spracheinheit 38. Bei anderen Ausführungsformen kann der Prozessor 22 eventuell eine oder mehrere der oben aufgeführten Einheiten nicht enthalten, oder der Prozessor 22 kann zusätzliche Arten von Einheiten enthalten. Die aufgeführten Einheiten des Prozessors können in dem Prozessor 22 enthalten sein. Bei anderen Ausführungsformen können eine oder mehrere der aufgeführten Einheiten des Prozessors 22 außerhalb des Prozessors 22 enthalten sein, jedoch mit dem Prozessor 22 verkabelt sein oder in drahtloser Verbindung damit stehen.
Die Positionsbestimmungseinheit 28 umfasst eine oder mehrere Positionsbestimmungseinheiten, um eine Position, Richtung oder Geschwindigkeit des Fahrzeugs 14 zu bestimmen, und/oder um eine Position eines Elements außerhalb des Fahrzeugs 14 zu bestimmen, für das sich der Fahrer 12 interessiert, das in dem aufgenommenen Bild enthalten ist, wie etwa ein Zeichen, ein Verkehrsschild oder eine andere Art von Element, für das sich der Fahrer 12 des Fahrzeugs 14 interessiert. Die Positionsbestimmungseinheit 28 bestimmt die Position des Fahrzeugs 14 im Verhältnis zu dem Element, das in dem aufgenommenen Bild enthalten ist und für das sich der Fahrer 12 des Fahrzeugs 14 interessiert. Beispielhafte Positionsbestimmungseinheiten 28 umfassen ein globales Positionsbestimmungssystem, einen Kompass, einen Tachometer, einen Beschleunigungsmesser, ein Gyrometer oder eine andere Art von Positionsbestimmungseinheit, um eine Position, Richtung oder Geschwindigkeit des Fahrzeugs 14 zu bestimmen, und/oder um eine Position eines Elements zu bestimmen, das in dem aufgenommenen Bild enthalten ist und für das sich der Fahrer 12 des Fahrzeugs 14 interessiert.
Die Verarbeitungseinheit 30 umfasst eine oder mehrere Verarbeitungseinheiten, um die Informationen zu verarbeiten, die von dem System 10 gesammelt wurden, wozu das aufgenommene Bild gehört. Die Verarbeitungseinheit 30 führt die Anweisungen eines Prozessorprogramms aus, das im Speicher des Prozessors 22 gespeichert ist, um die arithmetischen, logischen oder Ein-/Ausgabe-Operationen des Systems 10 auszuführen.
Die Mustererkennungseinheit 32 umfasst eine oder mehrere Mustererkennungseinheiten, um ein Muster zu erkennen und zu bestimmen. Die Mustererkennungseinheit 32 kann ein Muster in dem aufgenommenen Bild erkennen. Die Mustererkennungseinheit 32 kann ein Muster erkennen, das ein Element, wie etwa ein Zeichen, ein Verkehrsschild oder eine andere Art von Element, das sich der Fahrer 12 des Fahrzeugs 14 ansieht, enthält. Die Mustererkennungseinheit 32 kann auch ein Muster erkennen, das einen Buchstaben, ein Symbol, eine Zahl, einen Sprachgehalt oder eine Art von Muster, das sich der Fahrer 12 des Fahrzeugs 14 ansieht, umfasst.
Die Übersetzungseinheit 34 umfasst eine oder mehrere Übersetzungseinheiten, um das Muster in dem Element, das sich der Fahrer 12 des Fahrzeugs 14 ansieht, von einer Sprache in eine zweite Sprache zu übersetzen. Die Übersetzungseinheit 34 tut dies, indem sie das Muster in dem aufgenommenen Bild des Elements, das sich der Fahrer 12 des Fahrzeugs 14 ansieht, analysiert. Beispielsweise kann die Übersetzungseinheit 34 bei einer Ausführungsform den Sprachgehalt, der in einem aufgenommenen Bild eines Zeichens, eines Verkehrsschildes oder eines anderen Elements, das sich der Fahrer 12 des Fahrzeugs 14 ansieht, enthalten ist, in eine zweite Sprache übersetzen. Die Übersetzungseinheit 34 kann konfiguriert sein, um automatisch die Sprache des Musters zu bestimmen, das in dem aufgenommenen Bild enthalten ist, basierend auf einer bestimmten Position des Elements, das sich der Fahrer 12 des Fahrzeugs 14 ansieht. Bei einer anderen Ausführungsform kann die Übersetzungseinheit 34 das Muster verarbeiten, das in dem aufgenommenen Bild enthalten ist, um zu bestimmen, um welche Sprache es sich dabei handelt. Die Übersetzungseinheit 34 kann konfiguriert sein, um das Muster, das in dem aufgenommenen Bild enthalten ist, automatisch in die zweite Sprache des Fahrers 12 des Fahrzeugs 14 zu übersetzen. Bei anderen Ausführungsformen kann der Fahrer 12 des Fahrzeugs 14 unter Verwendung der Eingabevorrichtung 16 in das System 10 eingeben, um welche Sprache es sich bei dem Muster des Bildes handelt, und/oder kann in das System 10 eingeben, welches die zweite Sprache des Fahrers 12 des Fahrzeugs 14 ist.
Die Datenbankeinheit 36 umfasst eine oder mehrere Datenbankeinheiten, um Daten zu empfangen, zu speichern oder an das System 10 zu senden. Die Datenbankeinheit 36 kann eine Datenbank umfassen, um das aufgenommene Bild des Elements, das sich der Fahrer 12 des Fahrzeugs 14 ansieht, zu speichern. Die Datenbankeinheit 36 kann eine Datenbank zur Mustererkennung umfassen, um die Mustererkennungseinheit 31 zu unterstützen, um das Muster des aufgenommenen Bildes zu bestimmen. Die Datenbankeinheit 36 kann eine Datenbank mit Interessenpunkten umfassen, die Interessenpunkte für das aufgenommene Bild enthält. Die Datenbankeinheit 36 kann eine Datenbank zur Spracherkennung umfassen, um das Sprechen des Fahrers 12 des Fahrzeugs 14 zu erkennen.
Die Spracheinheit 38 umfasst eine oder mehrere Spracheinheiten, um Text in Sprache umzusetzen oder um Sprache in Text umzusetzen. Die Spracheinheit 38 kann das übersetzte oder nicht übersetzte Muster des aufgenommenen Bildes in Sprache umsetzen. Die Spracheinheit 38 kann auch das Sprechen des Fahrers 12 des Fahrzeugs 14, das durch die Eingabevorrichtung 16 in das System 10 eingegeben wird, in Text umsetzen.
Die Kommunikationsvorrichtung 24 umfasst eine oder mehrere Kommunikationsvorrichtungen, um mit Vorrichtungen außerhalb des Fahrzeugs 14 zu kommunizieren, damit das System 10 oder der Prozessor 22 Informationen sendet oder empfängt. Die Kommunikationsvorrichtung 24 kann mit externen Vorrichtungen außerhalb des Fahrzeugs 14 kommunizieren, wie etwa mit dem Internet, einem Satelliten, einem externen Kommunikations- oder Informationssystem, um dem System 10 oder dem Prozessor 22 Informationen mitzuteilen, bereitzustellen oder von diesen zu empfangen, mit einer externen Datenbank, die Informationen umfasst, auf die das System 10 oder der Prozessor 22 zugreift oder die es bzw. er herunterlädt, oder mit einer anderen Art von externer Vorrichtung. Die Kommunikationsvorrichtung 24 kann eine beliebige Art von Signal für Kommunikationszwecke verwenden.
Die Ausgabevorrichtung 26 umfasst eine oder mehrere Ausgabevorrichtungen, um Informationen für den Fahrer 12 des Fahrzeugs 14 auszugeben. Bei einer Ausführungsform umfassen die ausgegebenen Informationen den übersetzten Sprachgehalt des aufgenommenen Bildes. Bei einer anderen Ausführungsform umfassen die ausgegebenen Informationen die bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild basieren. Die Ausgabevorrichtung 26 kann ein visuelles Display umfassen, um die an den Fahrer 12 des Fahrzeugs 14 ausgegebenen Informationen visuell anzuzeigen. Die Ausgabevorrichtung 26 kann ferner eine Audiovorrichtung, wie etwa einen Lautsprecher, umfassen, um die an den Fahrer 12 des Fahrzeugs 14 ausgegebenen Informationen hörbar auszugeben.
Das Navigationssystem 27 umfasst ein oder mehrere Navigationssysteme, um dem Fahrer 12 des Fahrzeugs 14 Navigationsinformationen bereitzustellen, um den Fahrer 12 dabei zu unterstützen, mit dem Fahrzeug 14 zu fahren. Das Navigationssystem 27 kann Teil des Prozessors 22 sein oder kann außerhalb des Prozessors 22 liegen, jedoch mit dem Prozessor 22 verkabelt sein oder in drahtloser Verbindung damit stehen. Das Navigationssystem 27 kann den Fahrer 12 dabei unterstützen, mit dem Fahrzeug 14 bis zu einer Position zu fahren, und zwar basierend auf dem übersetzten zweiten Sprachgehalt, der von dem System 10 ausgegeben wird. Das Navigationssystem 27 kann den Fahrer 12 auch dabei unterstützen, mit dem Fahrzeug 14 bis zu einem Interessenpunkt zu fahren, der von dem System 10 identifiziert wurde. Das Navigationssystem 27 kann unter Verwendung eines beliebigen Bestandteils des Systems 10 visuelle oder hörbare Anweisungen für den Fahrer 12 des Fahrzeugs 14 bereitstellen. Das Navigationssystem 27 kann ein globales Positionsbestimmungssystem oder eine andere Art von Navigationssystem umfassen, um den Fahrer 12 des Fahrzeugs 14 bis zu einer Position zu leiten.
2 bildet eine Seitenansicht einer Ausführungsform eines Fahrers 12 ab, der ein Fahrzeug 14 fährt, welches das System 10 aus 1 verwendet. Die Verfolgungsvorrichtung 20 verfolgt den Blickpunkt des Fahrers, um zu bestimmen, für welches Element 40 außerhalb des Fahrzeugs 14 auf der Sichtlinie 42 des Fahrers sich der Fahrer 12 interessiert. Die Bildaufnahmevorrichtung 18 nimmt ohne Unterschied ein Bild der Umgebung 44 außerhalb des Fahrzeugs 14 auf, wozu das Aufnehmen des Elements 40, für das sich der Fahrer 12 interessiert, gehört. Das System 10 verarbeitet das aufgenommene Bild und schneidet das aufgenommene Bild nur auf das Element 40, für das sich der Fahrer 12 interessiert, zu. Das System 10 bestimmt, wo sich das Element 40 im Verhältnis zum Fahrzeug 14 befindet. Das System 10 erkennt ein Muster in dem zugeschnittenen aufgenommenen Bild. Das System 10 nimmt eines vor von: (1) Übersetzen des Sprachgehalts, der in dem erkannten Muster enthalten ist, in eine zweite Sprache; oder (2) Bestimmen von Interessenpunktinformationen, die auf dem erkannten Muster basieren. Das System 10 gibt visuell oder hörbar für den Fahrer 12 eines aus von: (1) dem übersetzten zweiten Sprachgehalt des erkannten Musters; oder (2) den bestimmten Interessenpunktinformationen, die auf dem erkannten Muster basieren.
3 bildet ein Ablaufschema einer Ausführungsform eines Verfahrens 50 zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs ab. In Schritt 52 nimmt eine Bildaufnahmevorrichtung ein Bild einer Umgebung außerhalb eines Fahrzeugs auf. Das aufgenommene Bild umfasst ein Element, das sich der Fahrer des Fahrzeugs ansieht oder für das er sich interessiert. Dieses Element kann ein Zeichen, ein Verkehrsschild oder eine andere Art von Element außerhalb des Fahrzeugs umfassen. Bei einer Ausführungsform nimmt die Bildaufnahmevorrichtung in Schritt 52 ohne Unterschied das Bild der Umgebung außerhalb des Fahrzeugs auf.
In Schritt 54 bestimmt eine Verfolgungsvorrichtung das Element außerhalb des Fahrzeugs, das sich der Fahrer ansieht oder für das er sich interessiert. Bei einer anderen Ausführungsform erfolgt Schritt 54 vor Schritt 52, und die Bildaufnahmevorrichtung nimmt ein Bild nur von dem Element der Umgebung außerhalb des Fahrzeugs auf, das sich der Fahrer ansieht oder für das er sich interessiert, indem sie Daten verarbeitet, die von der Verfolgungsvorrichtung empfangen werden, ohne Teile der Umgebung aufzunehmen, die sich der Fahrer nicht ansieht oder für die er sich nicht interessiert.
In Schritt 56, verarbeitet mindestens ein Prozessor das aufgenommene Bild und führt mindestens eines aus von: (1) Übersetzen des Sprachgehalts, der in dem aufgenommenen Bild des Elements enthalten ist, das sich der Fahrer ansieht, in eine zweite Sprache; oder (2) Bestimmen von Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren. Die Interessenpunktinformationen können eine Position eines Interessenpunktes, einen Namen eines Interessenpunktes, einen Abstand des Fahrzeugs von einem Interessenpunkt, eine Art von Ort, Produkt oder Dienst, der bzw. das sich an einem Interessenpunkt befindet, oder eine andere Art von Interessenpunktinformationen umfassen. Schritt 56 kann das Erkennen des Elements in dem aufgenommenen Bild umfassen, das sich der Fahrer des Fahrzeugs ansieht, unter Verwendung einer Mustererkennungseinheit. Schritt 56 kann ferner das Bestimmen unter Verwendung einer Positionsbestimmungseinheit, wie etwa eines globalen Positionsbestimmungssystems oder einer anderen Art von Positionsbestimmungseinheit, mindestens einer Position des Elements in dem aufgenommenen Bild oder einer Position des Fahrzeugs umfassen. Bei einer Ausführungsform grenzt der mindestens eine Prozessor in Schritt 56 das aufgenommene Bild nur auf das Element ein, das sich der Fahrer ansieht oder für das er sich interessiert, und schließt andere Teile des aufgenommenen Bildes aus. Bei einer anderen Ausführungsform ist das aufgenommene Bild, wenn das Verfahren bei Schritt 56 ankommt, bereits nur auf das Element eingegrenzt, das sich der Fahrer ansieht oder für das er sich interessiert, da die Bildaufnahmevorrichtung anfänglich nur ein Bild des Elements der Umgebung außerhalb des Fahrzeugs aufnimmt, das sich der Fahrer ansieht oder für das er sich interessiert, indem sie Daten verarbeitet, die von der Verfolgungsvorrichtung empfangen werden.
In Schritt 58 gibt eine Ausgabevorrichtung mindestens eines aus von: (1) dem zweiten Sprachgehalt, der den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, umfasst; oder (2) die bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren. Schritt 58 kann umfassen, dass die Ausgabevorrichtung die Informationen auf einem visuellen Display ausgibt oder die Informationen unter Verwendung einer Audiovorrichtung ausgibt. In Schritt 60 wird ein Navigationssystem verwendet, um mit dem Fahrzeug zu fahren. Schritt 60 kann umfassen, dass das Navigationssystem das Fahrzeug basierend auf den ausgegebenen Informationen steuert.
Eine oder mehrere Ausführungsformen der Offenbarung kann bzw. können ein oder mehrere Probleme nach dem Stand der Technik beheben, indem sie sich automatisch auf ein Element außerhalb eines Fahrzeugs, für das sich ein Fahrer interessiert, konzentriert bzw. konzentrieren und für den Fahrer automatisch den übersetzten Sprachgehalt des Elements oder Interessenpunktinformationen über das Element ausgibt bzw. ausgeben. Dadurch kann das Fahren eines Fahrzeugs erleichtert werden, und zwar mit den entsprechenden Vorteilen im Hinblick auf Zeit und Sicherheit.
Es versteht sich natürlich, dass das oben Genannte beispielhafte Ausführungsformen der Offenbarung betrifft und dass Änderungen vorgenommen werden können, ohne Geist und Umfang der Offenbarung zu verlassen, wie sie in den nachstehenden Ansprüchen dargelegt wird.
ZITATE ENTHALTEN IN DER BESCHREIBUNG
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
Zitierte Patentliteratur

US 6578962 [0017]
US 6758563 [0017]

Zitierte Nicht-Patentliteratur

http://en.wikipedia.org/wiki/Eye_trackinq [0017]

Claims

System zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs, umfassend: eine Bildaufnahmevorrichtung zum Aufnehmen eines Bildes einer Umgebung außerhalb eines Fahrzeugs; einen Kopf- oder Blickverfolger zum Bestimmen eines Elements, das sich der Fahrer des Fahrzeugs ansieht; mindestens einen Prozessor zum Verarbeiten des aufgenommenen Bildes und mindestens eines von: (1) Übersetzen des Sprachgehalts, der in dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, enthalten ist, in eine zweite Sprache; oder (2) Bestimmen von Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren; und eine Ausgabevorrichtung zum Ausgeben von Informationen, umfassend mindestens eines von: (1) dem zweiten Sprachgehalt, der den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, umfasst; oder (2) die bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren.
System nach Anspruch 1, wobei der mindestens eine Prozessor zum Verarbeiten des aufgenommenen Bildes und zum Übersetzen des Sprachgehalts, der in dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, enthalten ist, in die zweite Sprache dient, und die Ausgabevorrichtung zum Ausgeben des zweiten Sprachgehalts, der den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements. das sich der Fahrer ansieht, umfasst.
System nach Anspruch 1, wobei der mindestens eine Prozessor zum Verarbeiten des aufgenommenen Bildes und zum Bestimmen der Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren, dient, und die Ausgabevorrichtung zum Ausgeben der bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren, dient.
System nach Anspruch 3, wobei die Interessenpunktinformationen mindestens eines von einer Position des Interessenpunktes, dem Namen des Interessenpunktes, einem Abstand des Fahrzeugs von dem Interessenpunkt oder einer Art von Ort, Produkt oder Dienst, der bzw. das sich an dem Interessenpunkt befindet, umfassen.
System nach Anspruch 1, ferner umfassend eine Positionsbestimmungseinheit, um mindestens eine von einer Position des Elements oder einer Position des Fahrzeugs zu bestimmen.
System nach Anspruch 5, wobei die Positionsbestimmungseinheit ein globales Positionsbestimmungssystem umfasst.
System nach Anspruch 1, ferner umfassend eine Mustererkennungseinheit zum Erkennen des Elements, das sich der Fahrer des Fahrzeugs ansieht.
System nach Anspruch 1, wobei die Ausgabevorrichtung ein Display umfasst, um die ausgegebenen Informationen visuell anzuzeigen.
System nach Anspruch 1, wobei die Ausgabevorrichtung eine Audiovorrichtung umfasst, um die ausgegebenen Informationen hörbar auszugeben.
System nach Anspruch 1, ferner umfassend ein Navigationssystem, um den Fahrer beim Fahren des Fahrzeugs zu unterstützen.
Verfahren zum Bereitstellen von Informationen für den Fahrer eines Fahrzeugs, umfassend folgende Schritte: Aufnehmen eines Bildes einer Umgebung außerhalb eines Fahrzeugs mit einer Bildaufnahmevorrichtung; Bestimmen mit einem Kopf- oder Blickverfolger eines Elements, das sich der Fahrer des Fahrzeugs ansieht; Verarbeiten des aufgenommenen Bildes mit mindestens einem Prozessor, und mindestens eines von: (1) Übersetzen des Sprachgehalts, der in dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, enthalten ist, in eine zweite Sprache; oder (2) Bestimmen von Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren; und Ausgeben mit einer Ausgabevorrichtung von Informationen, die mindestens eines umfassen von: (1) dem zweiten Sprachgehalt, der den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, umfasst; oder (2) den bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren.
Verfahren nach Anspruch 11, wobei der Schritt des Verarbeitens umfasst, dass der mindestens eine Prozessor das aufgenommene Bild verarbeitet und den Sprachgehalt, der in dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, enthalten ist, in die zweite Sprache übersetzt, und der Schritt des Ausgebens umfasst, dass die Ausgabevorrichtung den zweiten Sprachgehalt, der den übersetzten Sprachgehalt des aufgenommenen Bildes des Elements, das sich der Fahrer ansieht, umfasst, ausgibt.
Verfahren nach Anspruch 11, wobei der Schritt des Verarbeitens umfasst, dass der mindestens eine Prozessor das aufgenommene Bild verarbeitet und die Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren, bestimmt, und der Schritt des Ausgebens umfasst, dass die Ausgabevorrichtung die bestimmten Interessenpunktinformationen, die auf dem aufgenommenen Bild des Elements, das sich der Fahrer ansieht, basieren, ausgibt.
Verfahren nach Anspruch 13, wobei die Interessenpunktinformationen mindestens eines von einer Position des Interessenpunktes, dem Namen des Interessenpunktes, einem Abstand des Fahrzeugs vom Interessenpunkt oder eine Art von Ort, Produkt oder Dienst, der bzw. das sich an dem Interessenpunkt befindet, umfassen.
Verfahren nach Anspruch 11 ferner umfassend das Bestimmen unter Verwendung einer Positionsbestimmungseinheit mindestens einer von einer Position des Elements oder einer Position des Fahrzeugs.
Verfahren nach Anspruch 15, wobei die Positionsbestimmungseinheit ein globales Positionsbestimmungssystem umfasst.
Verfahren nach Anspruch 11, ferner umfassend das Erkennen des Elements, das sich der Fahrer des Fahrzeugs ansieht, unter Verwendung einer Mustererkennungseinheit.
Verfahren nach Anspruch 11, wobei die Ausgabevorrichtung ein Display umfasst, und das Ausgeben das visuelle Anzeigen der ausgegebenen Informationen auf dem Display umfasst.
Verfahren nach Anspruch 11, wobei die Ausgabevorrichtung eine Audiovorrichtung umfasst, und das Ausgeben das hörbare Ausgeben der ausgegebenen Informationen unter Verwendung der Audiovorrichtung umfasst.
Verfahren nach Anspruch 11, ferner umfassend das Verwenden eines Navigationssystems, um das Fahrzeug zu steuern.