DE102022127398A1 - Fahrspurposition in einemaugmented-reality-head-up-display-system - Google Patents

Fahrspurposition in einemaugmented-reality-head-up-display-system Download PDF

Info

Publication number
DE102022127398A1
DE102022127398A1 DE102022127398.9A DE102022127398A DE102022127398A1 DE 102022127398 A1 DE102022127398 A1 DE 102022127398A1 DE 102022127398 A DE102022127398 A DE 102022127398A DE 102022127398 A1 DE102022127398 A1 DE 102022127398A1
Authority
DE
Germany
Prior art keywords
vehicle
lane
objects
position message
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102022127398.9A
Other languages
English (en)
Inventor
John P. Weiss
Joseph F. Szczerba
Thomas A. Seder
Kai-Han Chang
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GM Global Technology Operations LLC
Original Assignee
GM Global Technology Operations LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GM Global Technology Operations LLC filed Critical GM Global Technology Operations LLC
Publication of DE102022127398A1 publication Critical patent/DE102022127398A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • B60K35/23
    • B60K35/28
    • B60K35/654
    • B60K35/81
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • B60K2360/168
    • B60K2360/178
    • B60K2360/179
    • B60K2360/188
    • B60K2360/21
    • B60K35/29
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30256Lane; Road marking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road

Abstract

Ein Head-up-Anzeigesystem für ein Fahrzeug umfasst mindestens eine Lichtquelle, die dazu ausgelegt ist, ein Bild auf eine innere Oberfläche einer Windschutzscheibe des Fahrzeugs zu projizieren, ein Fahrerüberwachungssystem, das dazu ausgelegt ist, eine Position der Augen eines Fahrers zu verfolgen, mindestens einen nichtvisuellen Sensor, der dazu ausgelegt ist, Objekte innerhalb einer Umgebung um das Fahrzeug zu erfassen, mindestens eine Bilderfassungsvorrichtung, die dazu ausgelegt ist, Bilder der Umgebung um das Fahrzeug zu erfassen, und eine Steuereinrichtung, die mit dem mindestens einen Laser, dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung in Kommunikationsverbindung steht, wobei die Steuereinheit dazu ausgelegt ist, Fahrspurmarkierungen und Objekte innerhalb der Umgebung um das Fahrzeug zu erkennen, die Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, zu bestimmen und mit der mindestens einen Lichtquelle eine Fahrspurpositionsmeldung anzuzeigen.

Description

  • EINLEITUNG
  • Die vorliegende Offenbarung betrifft ein Head-up-Display und insbesondere ein System und ein Verfahren zur Bereitstellung von Fahrspurpositionsmeldungen für den Fahrer eines Fahrzeugs.
  • Ein Head-up-Display (HUD) ist in modernen Kraftfahrzeugen inzwischen üblich. HUDs projizieren nützliche Informationen wie Geschwindigkeit und Navigationsdaten in das Sichtfeld des Fahrers. Dadurch ist der Fahrer nicht gezwungen, den Blick von der Straße abzuwenden, um die Anzeigen auf dem Armaturenbrett des Fahrzeugs abzulesen. Dies verringert die Ablenkung des Fahrers und sorgt dafür, dass er sich auf die Straße konzentrieren kann.
  • Bei der erweiterten Realität (Augmented Reality, AR) wird die reale Welt mit virtuellen Elementen angereichert, die im dreidimensionalen Raum dargestellt werden und eine Echtzeitinteraktion mit Benutzern ermöglichen. Ein Head-up-Display zeigt Informationen wie etwa die Fahrzeuggeschwindigkeit und Navigationsanweisungen direkt auf der Windschutzscheibe eines Fahrzeugs im vorderen Sichtfeld des Fahrers an. So stellt das Head-up-Display Informationen an Fahrer bereit, ohne dass diese den Blick von der Straße abwenden. Eine mögliche Implementierung von Augmented Reality ist ein Augmented-Reality-Head-up-Display (AR-HUD) für ein Fahrzeug. Durch Überlagern der Windschutzscheibe mit Bildern verbessern AR-HUDs die Sicht des Fahrers auf die Umgebung außerhalb des Fahrzeugs und schaffen ein größeres Umgebungsbewusstsein.
  • Obwohl die derzeitigen Augmented-Reality-Head-up-Displays ihren Zweck erfüllen, besteht ein Bedarf an einem neuen und verbesserten System und Verfahren, das Fahrspurpositionsmeldungen an einen Fahrer eines Fahrzeugs bereitstellt.
  • KURZDARSTELLUNG
  • Gemäß mehreren Aspekten der vorliegenden Offenbarung umfasst ein Verfahren zum Bereitstellen von Spurpositionsmeldungen an einen Fahrer eines Fahrzeugs mit einem Head-up-Display-System Erfassen von Objekten in der Umgebung um das Fahrzeug mit mindestens einem nichtvisuellen Sensor, Aufnehmen von Bildern der Umgebung um das Fahrzeug mit mindestens einer Bildaufnahmevorrichtung, Verfolgen der Position der Augen des Fahrers mit einem Fahrerüberwachungssystem, Erkennen von Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug mit einer Steuereinrichtung, die in elektronischer Kommunikationsverbindung mit dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung steht, Bestimmen der Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, mit der Steuereinrichtung, und Anzeigen einer Fahrspurpositionsmeldung mit mindestens einer Lichtquelle, die dazu ausgelegt ist, ein Bild auf eine Innenfläche einer Windschutzscheibe des Fahrzeugs zu projizieren, und in elektronischer Kommunikationsverbindung mit der Steuereinrichtung steht.
  • Gemäß einem weiteren Aspekt ist die Steuereinrichtung ferner dazu ausgelegt, kontinuierlich Fahrspurmarkierungen und Objekte in der Umgebung um das Fahrzeug zu erkennen und die Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, zu bestimmen, wobei das Verfahren ferner Aktualisieren der angezeigten Fahrspurpositionsmeldung umfasst, wenn sich die Position des Fahrzeugs innerhalb der Fahrspur, auf der das Fahrzeug fährt, ändert.
  • Gemäß einem weiteren Aspekt umfasst das Bestimmen der Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, ferner Bestimmen eines Abstands zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug.
  • Gemäß einem weiteren Aspekt umfasst, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug geringer ist als ein vorgegebener Abstand, das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung, die angibt, dass eine sofortige Korrekturmaßnahme durch den Fahrer erforderlich ist.
  • Gemäß einem weiteren Aspekt umfasst, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer ist als der vorgegebene Abstand und abnimmt, das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung, die angibt, dass sich das Fahrzeug von einer optimalen Position innerhalb der Fahrspur entfernt.
  • Gemäß einem weiteren Aspekt umfasst das Bestimmung der Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, ferner Bestimmen, ob ein Fahrstabilitätskriterium erfüllt ist.
  • Gemäß einem weiteren Aspekt umfasst, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug nicht abnimmt und der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer ist als der vorgegebene Abstand und die Fahrstabilitätskriterien nicht erfüllt sind, das Verfahren Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung, die ein unregelmäßiges Fahrverhalten angibt.
  • Gemäß einem weiteren Aspekt umfasst, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug nicht abnimmt und der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer als der vorgegebene Abstand ist und die Fahrstabilitätskriterien erfüllt sind, das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung, die angibt, dass das Fahrzeug optimal innerhalb der Fahrspur positioniert ist.
  • Gemäß einem weiteren Aspekt ist das System dazu ausgelegt, selektiv durch den Bediener betätigt zu werden und automatisch betätigt zu werden, wenn die Fahrstabilitätskriterien nicht erfüllt sind, wobei das Verfahren ferner automatisches Betätigen des Systems umfasst, wenn die Fahrstabilitätskriterien nicht erfüllt sind.
  • Gemäß einem weiteren Aspekt umfasst die Steuereinrichtung ein drahtloses Kommunikationsmodul und ist dazu ausgelegt, Informationen von externen Quellen zu empfangen, wobei das Verfahren ferner Empfangen von Informationen von externen Quellen mit dem drahtlosen Kommunikationsmodul in der Steuereinrichtung und Anzeigen einer Fahrspurpositionsmeldung umfasst, die den Zustand der Fahrbahn, auf der das Fahrzeug fährt, auf Grundlage der von den externen Quellen empfangenen Informationen angibt.
  • Gemäß einem weiteren Aspekt umfasst das Verfahren, wenn keine Fahrspurmarkierungen vorhanden sind, Schätzen, wo sich Fahrspurmarkierungen befinden sollten, mit Informationen von den externen Quellen, dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung, und Anzeigen einer Fahrspurpositionsmeldung mit Fahrspurmarkierungen.
  • Gemäß einem weiteren Aspekt ist die Lichtquelle dazu ausgelegt, Bilder innerhalb einer Nahbildebene der Windschutzscheibe und einer Fernbildebene der Windschutzscheibe zu projizieren, wobei das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen der Fahrspurpositionsmeldung innerhalb der Fernbildebene umfasst.
  • Gemäß mehreren Aspekten der vorliegenden Offenbarung umfasst ein Head-up-Anzeigesystem für ein Kraftfahrzeug mindestens eine Lichtquelle, die dazu ausgelegt ist, ein Bild auf eine innere Oberfläche einer Windschutzscheibe des Fahrzeugs zu projizieren, ein Fahrerüberwachungssystem, das dazu ausgelegt ist, eine Position der Augen eines Fahrers zu verfolgen, mindestens einen nichtvisuellen Sensor, der dazu ausgelegt ist, Objekte innerhalb einer Umgebung um das Fahrzeug zu erfassen, mindestens eine Bilderfassungsvorrichtung, die dazu ausgelegt ist, Bilder der Umgebung um das Fahrzeug zu erfassen, eine Steuereinrichtung, die mit dem mindestens einen Laser, dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung in elektronischer Kommunikationsverbindung steht, wobei die Steuereinheit dazu ausgelegt ist, mit dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung Fahrspurmarkierungen und Objekte innerhalb der Umgebung um das Fahrzeug zu erkennen, die Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, zu bestimmen und mit der mindestens einen Lichtquelle eine Fahrspurpositionsmeldung anzuzeigen.
  • Gemäß einem weiteren Aspekt ist die Steuereinrichtung ferner dazu ausgelegt, kontinuierlich Fahrspurmarkierungen und Objekte in der Umgebung um das Fahrzeug zu erkennen und die Position des Fahrzeugs innerhalb einer Fahrspur, auf der das Fahrzeug fährt, zu bestimmen und die angezeigte Fahrspurpositionsmeldung zu aktualisieren, wenn sich die Position des Fahrzeugs innerhalb der Fahrspur, auf der das Fahrzeug fährt, ändert.
  • Gemäß einem weiteren Aspekt ist die Steuereinrichtung beim Bestimmung der Position des Fahrzeugs in der Fahrspur, auf der das Fahrzeug fährt, dazu ausgelegt, einen Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug zu bestimmen, wobei das System dazu ausgelegt ist, eine Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung anzuzeigen, die angibt, dass eine sofortige Korrekturmaßnahme durch den Fahrer erforderlich ist, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug geringer ist als ein vorgegebener Abstand, und eine Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung anzuzeigen, die angibt, dass sich das Fahrzeug von einer optimalen Position innerhalb der Fahrspur entfernt, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer als der vorgegebene Abstand ist und abnimmt.
  • Gemäß einem weiteren Aspekt ist die Steuereinrichtung beim Bestimmen der Position des Fahrzeugs in der Fahrspur, auf der das Fahrzeug fährt, dazu ausgelegt, zu bestimmen, ob ein Fahrstabilitätskriterium erfüllt ist, wobei das System dazu ausgelegt ist, eine Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung anzuzeigen, die unregelmäßiges Fahrverhalten angibt, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug nicht abnimmt und der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer ist als der vorgegebene Abstand und das Fahrstabilitätskriterium nicht erfüllt ist.
  • Gemäß einem weiteren Aspekt ist, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug nicht abnimmt und der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer als der vorgegebene Abstand ist und die Fahrstabilitätskriterien erfüllt sind, das System dazu ausgelegt, eine Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung anzuzeigen, die angibt, dass das Fahrzeug optimal innerhalb der Fahrspur positioniert ist.
  • Gemäß einem weiteren Aspekt ist das System dazu ausgelegt, selektiv durch den Bediener betätigt zu werden und automatisch betätigt zu werden, wenn die Fahrstabilitätskriterien nicht erfüllt sind.
  • Gemäß einem weiteren Aspekt umfasst die Steuereinrichtung ein drahtloses Kommunikationsmodul und ist dazu ausgelegt, Informationen von externen Quellen zu empfangen, wobei das System ferner dazu ausgelegt ist, eine Fahrspurpositionsmeldung anzuzeigen, die den Zustand der Fahrbahn angibt, auf der das Fahrzeug fährt.
  • Gemäß einem weiteren Aspekt ist, wenn keine Fahrspurmarkierungen vorhanden sind, das System dazu ausgelegt, unter Verwendung von Informationen von den externen Quellen, dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung zu schätzen, wo Fahrspurmarkierungen sein sollten, und eine Fahrspurpositionsmeldung mit Fahrspurmarkierungen anzuzeigen.
  • Weitere Anwendungsbereiche ergeben sich aus der in dieser Schrift gegebenen Beschreibung. Es versteht sich, dass die Beschreibung und die spezifischen Beispiele nur der Veranschaulichung dienen und nicht dazu bestimmt sind, den Umfang der vorliegenden Offenbarung einzuschränken.
  • KURZBESCHREIBUNG DER ZEICHNUNGEN
  • Die in dieser Schrift beschriebenen Zeichnungen dienen nur zur Veranschaulichung und sind nicht dazu bestimmt, den Umfang der vorliegenden Offenbarung in irgendeiner Weise einzuschränken.
    • 1 ist eine schematische Darstellung eines Head-up-Display-Systems gemäß einem Ausführungsbeispiel;
    • 2 ist eine schematische Darstellung eines Fahrzeugs mit dem in 1 dargestellten System, das innerhalb einer Fahrspur auf einer Fahrbahn mit Fahrbahnmarkierungen und Objekten in der Umgebung um das Fahrzeug fährt;
    • 3 ist eine schematische Darstellung einer Windschutzscheibe eines Fahrzeugs, wobei die Fahrspur einer Fahrbahn vor dem Fahrzeug sichtbar ist und das HUD-System Cluster-Informationen in einer Nahbildebene anzeigt;
    • 4 ist eine schematische Darstellung ähnlich wie 2, die die Positionierung des Fahrzeugs innerhalb der Fahrspur veranschaulicht;
    • 5 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 3, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die einen ersten schattierten Bereich umfasst, der in einer Fernbildebene angezeigt wird;
    • 6 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 3, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die einen ersten schattierten Bereich und einen zweiten schattierten Bereich umfasst, die in einer Fernbildebene angezeigt werden;
    • 7 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 6, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die einen ersten schattierten Bereich und einen zweiten schattierten Bereich umfasst, die in einer Fernbildebene angezeigt werden und in Richtung einer Mittellinie der Fahrbahn abgewinkelt sind;
    • 8 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 6, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die einen ersten schattierten Bereich und einen zweiten schattierten Bereich umfasst, die in einer Fernbildebene angezeigt werden, wobei der zweite schattierte Bereich physische Verkehrshindernisse für den Fahrer des Fahrzeugs hervorhebt;
    • 9 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 6, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die eine in einer Fernfeldebene angezeigte grafische Meldung umfasst, die den Fahrer darüber informiert, dass das Fahrzeug in einer Einbahnstraße in die falsche Richtung fährt;
    • 10 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 6, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die eine in einer Fernfeldebene angezeigte grafische Meldung umfasst, die den Fahrer darüber informiert, dass das Fahrzeug auf einer gesperrten Straße fährt;
    • 11 ist eine schematische Darstellung einer Windschutzscheibe ähnlich wie 6, wobei das HUD-System eine Fahrspurpositionsmeldung anzeigt, die eine grafische Meldung umfasst, die in einer Fernbildebene angezeigt wird, welche Spurmarkierungen umfasst; und
    • 12 ist ein schematisches Flussdiagramm, das ein Verfahren gemäß einem Ausführungsbeispiel der vorliegenden Offenbarung veranschaulicht.
  • DETAILLIERTE BESCHREIBUNG
  • Die folgende Beschreibung hat lediglich beispielhaften Charakter und ist nicht dazu bestimmt, die vorliegende Offenbarung, die Anwendung oder den Gebrauch einzuschränken. Darüber hinaus besteht nicht die Absicht, durch die in dem vorangehenden technischen Gebiet, dem Hintergrund, der Kurzdarstellung oder der folgenden detaillierten Beschreibung dargelegten Theorien gebunden zu sein, weder ausdrücklich noch implizit. Es versteht sich, dass in den Zeichnungen entsprechende Bezugszeichen gleiche oder entsprechende Teile und Merkmale bezeichnen. Im hier verwendeten Sinne bezieht sich der Begriff Modul auf jede beliebige Hardware, Software, Firmware, elektronische Steuerkomponente, Verarbeitungslogik und/oder Prozessorvorrichtung, einzeln oder in beliebiger Kombination, darunter ohne Beschränkung eine anwendungsspezifische integrierte Schaltung (ASIC), eine elektronische Schaltung, einen Prozessor (gemeinsam, dediziert oder als Gruppe) und einen Speicher, der ein oder mehrere Software- oder Firmwareprogramme ausführt, eine kombinatorische Logikschaltung und/oder andere geeignete Komponenten, die die beschriebene Funktion bereitstellen. Obwohl die hier gezeigten Figuren ein Beispiel mit bestimmten Anordnungen von Elementen darstellen, können in tatsächlichen Ausführungsformen zusätzliche Zwischenelemente, Vorrichtungen, Merkmale oder Komponenten vorhanden sein. Die Figuren dienen lediglich der Veranschaulichung und sind möglicherweise nicht maßstabsgetreu gezeichnet.
  • Der Begriff „Fahrzeug“ im hier verwendeten Sinne ist nicht auf Kraftfahrzeuge beschränkt. Obwohl die vorliegende Technik hauptsächlich im Zusammenhang mit Kraftfahrzeugen, darunter autonomen oder halbautonomen Fahrzeugen, beschrieben wird, ist sie nicht auf Kraftfahrzeuge beschränkt. Die Konzepte können in einer Vielzahl von Anwendungen eingesetzt werden, so etwa in Verbindung mit Luftfahrzeugen, Wasserfahrzeugen, anderen Fahrzeugen und Komponenten der Unterhaltungselektronik.
  • Bezugnehmend auf 1 und 2 umfasst ein Head-up-Display-System 10 für ein Kraftfahrzeug 12 gemäß der vorliegenden Offenbarung ein Projektionsmodul 14, das mindestens eine Lichtquelle umfasst, die geeignet ist, ein Bild auf eine Innenfläche einer Windschutzscheibe 18 des Fahrzeugs 12 zu projizieren. Wie in dieser Schrift beschrieben, umfasst die mindestens eine Lichtquelle einen Laser 16, doch versteht es sich, dass es sich bei der mindestens eine Lichtquelle auch um andere bekannte Arten von Lichtquellen handeln kann, die in Head-up-Display-Systemen verwendet werden. In einem Ausführungsbeispiel ist das Projektionsmodul 14 ein holografisches Projektionsmodul und umfasst einen Austrittspupillenreplikator. Das holografische Bild wird in den Austrittspupillenreplikator projiziert, breitet sich dann innerhalb des Austrittspupillenreplikators aus und wird mehrfach extrahiert, bevor es nach oben auf eine Innenfläche einer Windschutzscheibe 18 projiziert wird. Durch die mehrmalige Zirkulation des Lichts innerhalb des Austrittspupillenreplikators wird die Pupille erweitert, sodass der Betrachter das holografische Bild aus einer erweiterten Augenbox sehen kann. Der Austrittspupillenreplikator erweitert nicht nur die Augenbox, sondern vergrößert auch das ursprüngliche, aus dem Laser 16 kommende Projektionsbild. Zwischen dem Laser 14 und dem Austrittspupillenreplikator ist ein räumlicher Lichtmodulator angeordnet. Der räumliche Lichtmodulator ist dazu ausgelegt, das Licht des Lasers 16 aufzunehmen, das Laserlicht mit einem kodierten Hologramm zu beugen und den gebeugten Laser an den Austrittspupillenreplikator weiterzuleiten. Wie in dieser Schrift gezeigt und beschrieben, handelt es sich bei dem Head-up-System um ein holografisches Head-up-System, doch versteht es sich, dass die neuartigen Merkmale der vorliegenden Offenbarung auch auf andere Head-up-Display-Konfigurationen anwendbar sind.
  • Das System 10 umfasst ferner ein Fahrerüberwachungssystem 20, das dazu ausgelegt ist, eine Position der Augen 22 des Fahrers zu verfolgen, mindestens einen nichtvisuellen Sensor 24, der dazu ausgelegt ist, Objekte 26 in einer Umgebung 28 um das Fahrzeug 12 zu erfassen, und mindestens eine Bilderfassungsvorrichtung 30, die dazu ausgelegt ist, Bilder der Umgebung 28 um das Fahrzeug 12 zu erfassen, und ein Steuereinrichtung 32.
  • Das Fahrerüberwachungssystem 20 umfasst einen oder mehrere Sensoren, wie etwa Kameras, zur Bestimmung der Position des Kopfes des Fahrers des Fahrzeugs sowie der Ausrichtung oder Blickposition der Augen 22 des Fahrers. Der mindestens eine nichtvisuelle Sensor 24 umfasst einen oder mehrere Sensoren, die dazu ausgelegt sind, eine Position, Geschwindigkeit und Bewegungsrichtung von Objekten 26 in der Umgebung 40 um das Fahrzeug 12 zu erfassen. Als nicht einschränkende Beispiele kann der mindestens eine nichtvisuelle Sensor einen oder mehrere Sensoren wie etwa Radar-, LiDAR- und Infrarotsensoren umfassen, doch versteht es sich, dass auch andere Sensoren, die nichtvisuelle Techniken zur Erfassung von Objekten einsetzen, verwendet werden können. Die mindestens eine Bilderfassungsvorrichtung 30 kann Kameras umfassen, die periodische oder sequenzielle Bilder der Umgebung 28 des Fahrzeugs 12 und der darin befindlichen Objekte 26 aufnehmen.
  • Die Steuereinrichtung 32 ist eine nicht generalisierte elektronische Steuereinrichtung mit einem vorprogrammierten Digitalcomputer oder Prozessor, einem Speicher oder einem nichttransitorischen, computerlesbaren Medium, das zum Speichern von Daten wie etwa Steuerlogik, Softwareanwendungen, Anweisungen, Computercode, Daten, Nachschlagetabellen usw. dient, und einem Sendeempfänger [oder Eingangs-/Ausgangsanschlüssen]. Computerlesbares Medium beinhaltet jede beliebige Art von Medium, auf das ein Computer zugreifen kann, wie etwa einen Festwertspeicher (ROM), einen Speicher mit dynamischem Zugriff (RAM), ein Festplattenlaufwerk, eine Compact Disc (CD), eine digitale Videodisc (DVD) oder jede beliebige andere Art von Speicher. Ein „nichttransitorisches“ computerlesbares Medium schließt verdrahtete, drahtlose, optische oder andere Kommunikationsverbindungen aus, die transitorische elektrische oder andere Signale transportieren. Ein nichttransitorisches computerlesbares Medium umfasst Medien, auf denen Daten dauerhaft gespeichert werden können, und Medien, auf denen Daten gespeichert und später überschrieben werden können, wie etwa eine wiederbeschreibbare optische Platte oder eine löschbare Speichervorrichtung. Computercode umfasst alle Arten von Programmcode, darunter Quellcode, Objektcode und ausführbarer Code.
  • Die Steuereinrichtung 32 steht in elektronischer Kommunikationsverbindung mit dem mindestens einen Laser 16, dem mindestens einen nichtvisuellen Sensor 24 und der mindestens einen Bildaufnahmevorrichtung 30. Die Steuereinrichtung 32 verwendet den mindestens einen nichtvisuellen Sensor 24 und die mindestens eine Bilderfassungsvorrichtung 30, um Fahrbahnmarkierungen 34 und Objekte 26 in der Umgebung 28 des Fahrzeugs 12 zu erkennen. Fahrspurmarkierungen 34 können unter anderem aufgemalte Fahrspurmarkierungen auf der Fahrbahn, Oberlichter und Schilder umfassen, die die Anordnung der Fahrspuren auf der Fahrbahn anzeigen. Die Objekte 26, die erfasst werden können, umfassen unter anderem andere Fahrzeuge, permanente und temporäre verkehrslenkende Objekte wie etwa Barrikaden, Kegel, Tonnen und Leitplanken sowie Fremdkörper wie umgestürzte Bäume, Fußgänger und Tiere, die sich auf der Fahrbahn befinden können.
  • Die Steuereinrichtung 32 ist ferner dazu ausgelegt, die Position des Fahrzeugs 12 innerhalb einer Fahrspur 36 einer Fahrbahn 38, auf der das Fahrzeug 12 fährt, zu bestimmen und mit dem mindestens einen Laser 16 eine Fahrspurpositionsmeldung 40 anzuzeigen. Nach der Identifizierung der relevanten Fahrspurmarkierungen 34 bestimmt die Steuereinrichtung 32 die Position des Fahrzeugs 12 relativ zu den erkannten Fahrspurmarkierungen 34, um die relative Position des Fahrzeugs innerhalb der von ihm befahrenen Fahrspur 36 zu ermitteln. Abhängig vom Fahrverhalten des Fahrzeugs 12 und der Position des Fahrzeugs 12 innerhalb der Fahrspur 36 zeigt die Steuereinrichtung 32 über den mindestens einen Laser 16 des holografischen Projektionsmoduls 14 dem Fahrer des Fahrzeugs 12 eine entsprechende Fahrspurpositionsmeldung 40 an.
  • Unter erneuter Bezugnahme auf 1 ist der mindestens eine Laser 16 des holografischen Projektionsmoduls 14 dazu ausgelegt, Bilder nach oben auf die Innenfläche der Windschutzscheibe 18 des Fahrzeugs 12 zu projizieren, wie durch Pfeil 42 angezeigt. Bezugnehmend auf 3 kann der Laser 16 Bilder projizieren, die für den Fahrer in einer Nahbildebene 44 erscheinen, und Bilder, die für den Fahrer in einer Fernbildebene 46 erscheinen. 3 ist eine beispielhafte Innenansicht der Windschutzscheibe 18, bei der die Umgebung 28 um das Fahrzeug 12 durch die Windschutzscheibe 18 sichtbar ist.
  • Die Steuereinrichtung 32 weist die holografische Projektionsvorrichtung 14 des Augmented-Reality-Head-up-Display-Systems 10 an, Cluster-Inhaltsinformationen 48 innerhalb der Nahfeldbildebene 44 auf die Windschutzscheibe 18 zu projizieren. Die Cluster-Inhaltsinformationen 48 informieren den Fahrer des Fahrzeugs 12 über Fahrbedingungen, wie etwa ohne Beschränkung Fahrzeuggeschwindigkeit, Geschwindigkeitsbegrenzungen, eingelegten Gang, Kraftstoffstand, aktuelle Position und Navigationsanweisungen. In dem in 3 gezeigten Beispiel umfassen die Cluster-Inhaltsinformationen 48 die Fahrzeuggeschwindigkeit und Navigationsanweisungen. In einem Ausführungsbeispiel projiziert das Augmented-Reality-Head-up-Display-System 10 innerhalb der Nahbildebene 44 andere relevante Informationen auf die Windschutzscheibe 18. Einige Beispiele für Informationen, die in der Nahebene 44 angezeigt werden, umfassen eine textliche Angabe der Fahrspurposition, wie etwa eine Warnung vor abgelenktem Fahren, unregelmäßigem Fahrverhalten usw.
  • Die Steuereinrichtung 32 weist das holografische Projektionsmodul 14 an, die Fahrspurpositionsmeldung 40 innerhalb der Fernbildebene 46 auf die Windschutzscheibe 18 zu projizieren, wobei die Fahrspurpositionsmeldung 40 über eine Position auf der Windschutzscheibe 18 gelagert wird, an der die Fahrspurpositionsmeldung 40 für den Fahrer so erscheint, als befände sie sich auf der Fahrbahnoberfläche vor dem Fahrzeug 12. Die Fernbildebene 46 enthält Bilder, die die Fahrbahn 38 überlagern und durch die Windschutzscheibe 18 hindurch sichtbar sind. In der in 3 gezeigten Ausführungsform deckt die Fernbildebene 46 nur einen Teil der gesamten Ebene der Windschutzscheibe 18 ab, doch versteht es sich, dass in einer anderen Umsetzung die Fernbildebene 46 die gesamte Ebene der Windschutzscheibe 18 abdecken kann, die nicht von der Nahbildebene 44 belegt ist. Obwohl zudem 3 zeigt, dass sich die Fernbildebene 46 nur über einen Teil der Fahrspuren 36, der Teil der Fahrbahn 38 sind, erstreckt, erstreckt sich die Fernbildebene 46 in Ausführungsformen vollständig über jede Fahrspur 36 der Fahrbahn 38.
  • In einem Ausführungsbeispiel ist die Steuereinrichtung 32 ferner dazu ausgelegt, kontinuierlich Fahrspurmarkierungen 34 und Objekte 26 in der Umgebung 28 um das Fahrzeug 12 zu erkennen und die Position des Fahrzeugs 12 innerhalb einer Fahrspur 36, auf der das Fahrzeug 12 fährt, zu bestimmen und die angezeigte Fahrspurpositionsmeldung 40 zu aktualisieren, wenn sich die Position des Fahrzeugs 12 innerhalb der Fahrspur 36, auf der das Fahrzeug 12 fährt, ändert. Die Steuereinrichtung 32 wiederholt diesen Vorgang kontinuierlich in regelmäßigen Abständen, beispielsweise alle 0,1 Sekunden. Jedes Mal, wenn das System 10 die Position des Fahrzeugs 12 innerhalb der Fahrspur 36 bestimmt, wird die angezeigte Fahrspurpositionsmeldung 40 entsprechend aktualisiert, wenn sich die Position des Fahrzeugs 12 geändert hat, oder angesichts neu erkannter oder geänderter Fahrspurmarkierungen 34 und Objekte 26 in der Umgebung 28 um das Fahrzeug 12.
  • Bezugnehmend auf 4 ist die Steuereinrichtung 32 beim Bestimmen der Position des Fahrzeugs 12 in der Fahrspur 36, auf der das Fahrzeug 12 fährt, dazu ausgelegt, einen Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 zu bestimmen. Die Steuereinrichtung 32 ist dazu ausgelegt, zu erkennen, ob der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrbahnmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 abnimmt, und ob der Abstand zwischen dem Fahrzeug 12 und erkannten Fahrbahnmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 geringer ist als ein vorgegebener Abstand 52A, 52B. Der vorgegebene Abstand 52A, 52B ist der Abstand, bei dem die Steuereinrichtung 32 bestimmt, dass sich das Fahrzeug 12 in einem unsicheren Abstand zu den erkannten Fahrbahnmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 befindet. Zum Beispiel kann der vorgegebene Abstand 52A, 52B drei Fuß betragen, wobei die Steuereinrichtung 32 bestimmt, dass das Fahrzeug 12 zu nahe an einem Objekt 26 ist, das sich innerhalb von drei Fuß vom Fahrzeug 12 befindet. Außerdem kann der vorgegebene Abstand von der Breite der Fahrspur 36 abhängen, auf der das Fahrzeug 12 fährt. Zum Beispiel wird auf 4 Bezug genommen, wobei ein Fahrzeug auf einer Fahrspur 36 fährt, die durch Fahrspurmarkierungen 34 auf der einen Seite und eine Betonbarriere 26A auf der anderen Seite begrenzt ist. Die Steuereinrichtung 32 erkennt die Fahrbahnmarkierungen 34 und die Betonbarriere 26A und bestimmt den vorgegebenen Abstand 52A, 52B, der das Fahrzeug 12 innerhalb der Fahrspur 36 zentriert. Der vorgegebene Abstand hängt von der Breite des Fahrzeugs 12 und der Gesamtbreite der Fahrspur 36 ab.
  • Darüber hinaus kann der vorgegebene Abstand 52A, 52B teilweise von der Art der Fahrbahnmarkierung 34 oder des Objekts 26 abhängen. Wiederum unter Bezugnahme auf 4 ist das Objekt 26 auf der rechten Seite des Fahrzeugs eine Betonbarriere 26A. Die Fahrbahnmarkierungen 34 auf der linken Seite des Fahrzeugs sind auf die Fahrbahn 38 gemalt. Die Betonbarriere 26A stellt eine unverrückbare, nicht ignorierbare Barriere dar. Wenn das Fahrzeug 12 zu nahe an die Betonbarriere 26A gerät, kann es zu Schäden am Fahrzeug 12 kommen. Die aufgemalten Fahrbahnmarkierungen 34 auf der linken Seite des Fahrzeugs 12 stellen keine physische Barriere für das Fahrzeug 12 dar. Das Steuereinrichtung 32 kann bestimmen, dass der vorgegebene Abstand 52A zwischen dem Fahrzeug 12 und der Betonbarriere 26A größer sein sollte als der vorgegebene Abstand 52B zwischen dem Fahrzeug 12 und den aufgemalten Fahrbahnmarkierungen 34, womit die optimale Platzierung des Fahrzeugs 12 auf der Fahrbahn 36 außermittig ist.
  • Solche Bestimmungen können auch von der Beschaffenheit der Fahrbahn 38 und dem Geschehen auf der anderen Seite der Fahrbahnmarkierungen abhängen. Es wird erneut auf das oben beschriebene Beispiel von 4 Bezug genommen. Obwohl die aufgemalten Fahrbahnmarkierungen 34 auf der linken Seite des Fahrzeugs 12 keine physische Barriere darstellen, wie es die Betonbarriere 26A tut, kann unmittelbar auf der anderen Seite der Fahrbahnmarkierungen 34 Hochgeschwindigkeitsverkehr in die entgegengesetzte Richtung fließen. Ein solcher Verkehr stellt ein mindestens ebenso großes Risiko dar wie die Betonbarriere 26A, und daher kann die Steuereinrichtung 32 bestimmen, dass der vorgegebene Abstand 52A zwischen dem Fahrzeug 12 und der Betonbarriere 26A gleich dem vorgegebenen Abstand 52B zwischen dem Fahrzeug 12 und den aufgemalten Fahrbahnmarkierungen 34 sein sollte, womit die optimale Platzierung des Fahrzeugs 12 auf der Fahrbahn 36 zentriert ist. Alternativ kann sich unmittelbar auf der anderen Seite der Fahrbahnmarkierungen 34 eine Abbiegespur befinden, die ein weitaus geringeres Risiko darstellt als der mit hoher Geschwindigkeit in die Gegenrichtung fahrende Verkehr. Unter diesen Umständen kann die Steuereinrichtung 32 erneut bestimmen, dass der vorgegebene Abstand 52A zwischen dem Fahrzeug 12 und der Betonbarriere 26A größer sein sollte als der vorgegebene Abstand 52B zwischen dem Fahrzeug 12 und den aufgemalten Fahrbahnmarkierungen 34, womit die optimale Platzierung des Fahrzeugs 12 auf der Fahrbahn 36 außermittig ist.
  • Letztlich bestimmt die Steuereinrichtung 32 die optimale Platzierung des Fahrzeugs 12 innerhalb der Fahrspur 36 auf Grundlage vieler Umgebungsfaktoren, wie etwa ohne Beschränkung der Art der Fahrspurmarkierungen 34 und der in der Umgebung 28 um das Fahrzeug 12 erkannten Objekte 26, des Wetters, der Verkehrsbedingungen (starkes Verkehrsaufkommen, geringes Verkehrsaufkommen, Vorhandensein von Unfällen usw.), der Fahrgeschwindigkeit des Fahrzeugs 12, Tag oder Nacht und der Art der Verkehrsaktivität auf benachbarten Fahrspuren.
  • Die Steuereinrichtung 32 ist auch dazu ausgelegt, zu erkennen, ob das Fahrzeug 12 Fahrstabilitätskriterien erfüllt. Wenn Fahrstabilitätskriterien erfüllt sind, befindet sich das Fahrzeug 12 in einer optimalen Position innerhalb der Fahrspur 36 und hält diese optimale Position konstant. Wenn zum Beispiel unter erneuter Bezugnahme auf 4 das Fahrzeug 12 innerhalb der Fahrspur 36 wiederholt ausbricht, wie bei 54 angegeben, so sind die Fahrstabilitätskriterien nicht erfüllt.
  • In einem Ausführungsbeispiel ist, wenn der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 nicht abnimmt und der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 größer als der vorgegebene Abstand 52A, 52B ist und die Fahrstabilitätskriterien erfüllt sind, das System 10 dazu ausgelegt, eine Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung 40 anzuzeigen, die angibt, dass das Fahrzeug 12 optimal innerhalb der Fahrspur positioniert ist. Bezug nehmend auf 5 wird die Fahrspurpositionsmeldung 40 in einem Ausführungsbeispiel in der Fernbildebene 46 angezeigt und umfasst einen ersten schattierten Bereich 56, der die befahrene Fahrspur 36 in der Fernbildebene 46 im Wesentlichen ausfüllt und innerhalb der Fahrspur 36 zentriert ist. Die Farbe der angezeigten Fahrspurpositionsmeldung 40 soll dem Fahrer vermitteln, dass sich das Fahrzeug 12 optimal auf der Fahrspur 36 befindet, wie etwa grün oder blau.
  • Wenn in einem Ausführungsbeispiel unter Bezugnahme auf 6 der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 innerhalb der Umgebung 28 um das Fahrzeug 12 größer ist als der vorgegebene Abstand 52A, 52B, aber abnimmt, zeigt das System eine Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung an, die angibt, dass sich das Fahrzeug 12 von einer optimalen Position innerhalb der Fahrspur 36 entfernt. Wie gezeigt, umfasst die Fahrspurpositionsmeldung 40 einen ersten schattierten Bereich 56, der die befahrene Fahrspur 36 in der Fernfeldebene 46 im Wesentlichen ausfüllt und innerhalb der Fahrspur 36 zentriert ist. Die Farbe des ersten schattierten Bereichs 56 bleibt eine Farbe, die dem Fahrer vermitteln soll, dass sich das Fahrzeug 12 korrekt auf der Fahrspur 36 befindet, wie etwa grün oder blau. Die Fahrspurpositionsmeldung 40 umfasst auch einen zweiten schattierten Bereich 58, der neben dem ersten schattierten Bereich 56 in der Fernbildebene 46 erscheint.
  • Der zweite schattierte Bereich 58 erscheint, wenn die Steuereinrichtung 32 erfasst, dass der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrbahnmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 abnimmt, und erscheint neben dem ersten schattierten Bereich 56 auf einer Seite, auf die sich das Fahrzeug 12 zubewegt. Wie in 6 gezeigt, befindet sich das Fahrzeug 12 immer noch auf dem Fahrstreifen 36, driftet aber nach links in Richtung des mittleren Fahrstreifens 34A der Fahrbahn 38. Der zweite schraffierte Bereich 58 erscheint links neben dem ersten schraffierten Bereich 56, um den Fahrer darauf hinzuweisen, dass das Fahrzeug 12 nach links driftet. Der zweite schraffierte Bereich 58 hat eine andere Farbe als der erste schraffierte Bereich 56, um die zu vermittelnde Botschaft zu unterstreichen. In einem Ausführungsbeispiel ist der zweite schattierte Bereich 58 gelb.
  • Wenn die Steuereinrichtung 32 zum ersten Mal erfasst, dass sich das Fahrzeug 12 auf die Mittellinie 34A zubewegt, erscheint der zweite schattierte Bereich 58. In einem Ausführungsbeispiel wird der zweite schattierte Bereich 58 größer, wenn sich das Fahrzeug 12 weiterhin in Richtung der Mittellinie 34A bewegt, und er wird noch größer, wenn das Fahrzeug 12 weiter in Richtung der Mittellinie 34A driftet. Die Farbintensität des zweiten schattierten Bereichs kann sich ebenfalls ändern. Wenn sich das Fahrzeug 12 beispielsweise weiterhin auf die Mittellinie 34A zubewegt, wird der zweite schattierte Bereich 58 ein immer helleres Gelb, wenn das Fahrzeug 12 weiterhin auf die Mittellinie 34A zu driftet.
  • Wenn in einem Ausführungsbeispiel unter Bezugnahme auf 7 der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 innerhalb der Umgebung 28 um das Fahrzeug 12 kleiner ist als der vorgegebene Abstand 52A, 52B, zeigt das System 10 eine Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung an, die angibt, dass eine sofortige Korrekturmaßnahme durch den Fahrer erforderlich ist.
  • In diesem Fall ändert sich die Farbe des ersten und des zweiten schattierten Bereichs 56, 58, um dem Fahrer anzuzeigen, dass sich das Fahrzeug 12 in einem unsicheren Abstand zu umgebenden Objekten 26 und Fahrbahnmarkierungen 34 befindet. Beispielsweise wechselt die Farbe des ersten und zweiten schattierten Bereichs 56, 58 zu Rot. In einem Ausführungsbeispiel ändert sich auch die Position des ersten und zweiten schattierten Bereichs 56, 58 der Fahrspurpositionsmeldung 40, um die Botschaft an den Fahrer des Fahrzeugs 12, dass Korrekturmaßnahmen ergriffen werden sollten, zu unterstreichen. Wie in 7 gezeigt, erfasst die Steuereinrichtung 32, dass das Fahrzeug 12 in Richtung der Mittellinie 34A der Fahrbahn 38 driftet und weniger als den vorgegebenen Abstand 52A, 52B von der Mittellinie 34A hat. Die Position des ersten und zweiten schraffierten Bereichs 56, 58 ändert sich durch Abwinkeln in Richtung der Mittellinie 34A, um dem Fahrer anzuzeigen, dass das Fahrzeug 12 in Richtung der Mittellinie 34A driftet, und die Farbe des ersten und zweiten schraffierten Bereichs ändert sich zu Rot.
  • Wenn das Fahrzeug 12 in einem geringeren als dem vorgegebenen Abstand 52A, 52B von der Mittellinie 34A bleibt, gehen der erste und der zweite schattierte Bereich 56, 58 in einen helleren Rotton über und werden noch heller, wenn das Fahrzeug 12 in einem geringeren als dem vorgegebenen Abstand 52A, 52B von der Mittellinie 34A bleibt. In anderen Ausführungsbeispielen können der erste und der zweite schattierte Bereich 56, 58 animierte Eigenschaften aufweisen, wie etwa Verblassen oder Pulsieren, um die Aufmerksamkeit des Fahrers besser zu erregen und die Botschaft zu unterstreichen, dass Korrekturmaßnahmen ergriffen werden sollten. Wenn das Fahrzeug 12 mit einem automatischen Fahrspurhalteassistenten ausgestattet ist, kann die Fahrspurpositionsmeldung 40 außerdem Animationsmerkmale umfassen, die dem Fahrer anzeigen, dass das Fahrzeug 12 sich automatisch in eine optimale Position innerhalb der Fahrspur 36 zurücklenkt.
  • In einem anderen Ausführungsbeispiel ist das System 10 dazu ausgelegt, eine Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung anzuzeigen, die auf unregelmäßiges Fahrverhalten hinweist, wenn das Steuereinrichtung 32 bestimmt, dass die Fahrstabilitätskriterien nicht erfüllt sind. Erneut Bezug nehmend auf 6 zeigt das System 10 den ersten und den zweiten schattierten Bereich 56, 58 innerhalb der Fernfeldebene 46 auch dann an, wenn der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 nicht abnimmt und größer als der vorgegebene Abstand 52A, 52B ist, falls das System 10 bestimmt, dass das Verhalten des Fahrzeugs 12 die Fahrstabilitätskriterien nicht erfüllt.
  • Wenn das Fahrzeug 12 beispielsweise seine Position innerhalb der Fahrspur 36 beibehält und nicht in den vorgegebenen Abstand 52A, 52B von erkannten Fahrspurmarkierungen 34 oder Objekten 26 in der Nähe des Fahrzeugs 12 gelangt, aber das Fahrzeug 12 wiederholt ausbricht, wie bei 54 in 4 angegeben, zeigt das System 10 den ersten schraffierten Bereich 56 und zweite schraffierte Bereiche 58 auf einer oder beiden Seiten des ersten schraffierten Bereichs 56 an, um den Fahrer zu warnen, was dazu führt, dass der Fahrer aufmerksamer ist und weniger unregelmäßig fährt. Wenn das Fahrverhalten leicht unregelmäßig ist, kann das System 10 den ersten und den zweiten schattierten Bereich 56, 58 der Fahrspurpositionsmeldung 40 in gelber Farbe mit für den Fall eines fortgesetzten unregelmäßigen Fahrverhaltens zunehmender Helligkeit anzeigen, und wenn das Fahrverhalten stark unregelmäßig ist, kann das System 10 den ersten und den zweiten schattierten Bereich 56, 58 der Fahrspurpositionsmeldung 40 in roter Farbe mit zunehmender Helligkeit und Animationseigenschaften anzeigen, falls das Verhalten nicht korrigiert wird.
  • In einem Ausführungsbeispiel ist das System 10 dazu ausgelegt, selektiv durch den Fahrer betätigt zu werden und automatisch betätigt zu werden, wenn die Fahrstabilitätskriterien nicht erfüllt sind. So kann der Fahrer des Fahrzeugs 12 beschließen, das System 10 nicht zu betätigen, sodass das System 10 keine Fahrspurpositionsmeldungen 40 anzeigt, doch wenn das im Hintergrund laufende System 10 bestimmt, dass das Fahrzeug 12 unregelmäßig gefahren wird, kann das System 10 dem Fahrer des Fahrzeugs 12 automatisch entsprechende Fahrspurpositionsmeldungen 40 anzeigen.
  • In anderen Ausführungsformen kann das System 10 so ausgelegt sein, dass es automatisch nach vorgegebenen oder benutzerdefinierten Einstellungen aktiviert wird. Das System 10 kann beispielsweise automatisch aktiviert werden, wenn sich die Wetterbedingungen verschlechtern, wenn sich das Fahrzeug 12 einer Unfallstelle oder einer Baustelle nähert, wenn das Fahrerüberwachungssystem 20 abgelenktes Fahren erfasst, oder bei Nachtfahrten.
  • Bezugnehmend auf 7 ist das System 10 in einem anderen Ausführungsbeispiel dazu ausgelegt, das Vorhandensein von physischen Verkehrshindernissen 26B zu erfassen und eine Fahrspurpositionsmeldung 40 auszugeben, die das Vorhandensein solcher physischen Verkehrshindernisse 26B angibt. Wie dargestellt, wird das Fahrzeug 12 innerhalb der Fahrspur 36 an der optimalen Position gefahren, sodass das System 10 eine Fahrspurpositionsmeldung 40 anzeigt, die den in einer neutralen Farbe, etwa in Blau oder Grün, dargestellten ersten schattierten Bereich 56 enthält, um dem Fahrer anzuzeigen, dass sich das Fahrzeug 12 derzeit korrekt innerhalb der Fahrspur 36A befindet. Das System 10 hat jedoch auch das Vorhandensein physischer Verkehrshindernisse 26B auf der angrenzenden Fahrspur 36B erfasst, die dem Fahrzeug 12 ansonsten zur Verfügung stehen würde. Um das Vorhandensein solcher physischen Verkehrshindernisse 26B für den Fahrer zu unterstreichen, zeigt das System 10 einen zweiten schattierten Bereich 58A an, der die angrenzende Fahrspur 36B überlagert und rot eingefärbt ist, um das Vorhandensein der physischen Verkehrshindernisse 26B für den Fahrer zu unterstreichen.
  • Erneut Bezug nehmend auf 1 umfasst die Steuereinrichtung 32 ein drahtloses Kommunikationsmodul 60, das die drahtlose Kommunikation zwischen dem Fahrzeug 12 und anderen Fahrzeugen oder anderen externen Quellen ermöglicht. Die Steuereinrichtung 32 kann mittels eines drahtlosen Datenkommunikationsnetzes 62 über drahtlose Kommunikationskanäle wie etwa ein WLAN, 4G/LTE- oder 5G-Netz oder dergleichen Informationen aus Datenbanken sammeln . Mit solchen Datenbanken kann direkt über das Internet kommuniziert werden, oder es kann sich um cloudbasierte Datenbanken handeln. Zu den Informationen, die von der Steuereinrichtung 32 aus solchen externen Quellen gesammelt werden können, gehören unter anderem Straßen- und Autobahndatenbanken, die vom Verkehrsministerium unterhalten werden, ein globales Positionsbestimmungssystem, das Internet, andere Fahrzeuge über V2V-Kommunikationsnetzwerke, Verkehrsinformationsquellen, fahrzeugbasierte Unterstützungssysteme wie OnStar usw. Die Steuereinrichtung 32 ist dazu ausgelegt, über das drahtlose Kommunikationsmodul 60 Informationen von externen Quellen zu empfangen und eine Fahrspurpositionsmeldung 40 anzuzeigen, die den Zustand der Fahrbahn 38 angibt, auf der das Fahrzeug 12 fährt.
  • In einem Ausführungsbeispiel kann das System 10 von externen Quellen Informationen darüber empfangen, dass das Fahrzeug 12 in einer Einbahnstraße in die falsche Richtung fährt, und eine Fahrspurpositionsmeldung 40 in der Fernfeldebene 46 ausgeben, die den Fahrer darüber informiert, dass er in die falsche Richtung fährt, wie in 9 gezeigt, oder das System 10 kann Informationen von externen Quellen empfangen, dass das Fahrzeug 12 auf einer Straße 38 fährt, die wegen Bauarbeiten gesperrt ist, und eine Fahrspurpositionsmeldung 40 in der Fernfeldebene 46 ausgeben, die den Fahrer darüber informiert, dass die Straße gesperrt ist, wie in 10 gezeigt. Dies liefert dem Fahrer zusätzliche Informationen, die von entscheidender Bedeutung sein können, wenn der Fahrer die entsprechende Beschilderung übersehen hat oder wenn die richtige Beschilderung/Absperrung beschädigt wurde oder nicht vorhanden ist. In einem anderen Ausführungsbeispiel kann das System 10 Informationen von externen Quellen, wie GPS, Verkehrsdatenbanken oder V2V-Kommunikation, empfangen, dass der Verkehr aufgrund eines Unfalls oder einer Baustelle umgeleitet wurde. In solchen Fällen beendet das System die Fahrspurpositionsmeldungen 40, die auf den vorhandenen Fahrspurmarkierungen beruhen. Alternativ kann der Fahrer des Fahrzeugs 12 beim Erkennen einer bevorstehenden Verkehrsumleitung die angezeigten Fahrspurpositionsmeldungen 40 manuell oder durch einen verbalen Befehl ausschalten.
  • Bezugnehmend auf 11 ist, wenn keine Fahrspurmarkierungen 34 vorhanden sind, das System 10 dazu ausgelegt, unter Verwendung von Informationen von den externen Quellen, dem mindestens einen nichtvisuellen Sensor 24 und der mindestens einen Bilderfassungsvorrichtung 30 zu schätzen, wo Fahrspurmarkierungen 34 sein sollten, und eine Fahrspurpositionsmeldung 40 mit Fahrspurmarkierungen 34C anzuzeigen. Wie in 11 gezeigt, sind auf der Fahrbahn 38 drei Fahrspuren 36 für den abbiegenden Verkehr vorgesehen, doch enthält die Fahrbahn 38 keine Fahrbahnmarkierungen 34, die dies für die Fahrzeuge deutlich machen. Das System 10 verwendet relevante Informationen, die von den Fahrzeugsensoren und -kameras gesammelt wurden, sowie Informationen von externen Quellen, um die richtige Position der drei Fahrspuren 36 zu schätzen und eine Fahrspurpositionsmeldung 40 mit Fahrspurmarkierungen 34C bereitzustellen.
  • Das System 10 erlangt Informationen über die Position der Augen 22 eines Fahrers des Fahrzeugs 12 von einer Kamera des Fahrerüberwachungssystems 20 innerhalb des Fahrzeugs 12. Das Fahrerüberwachungssystem 20 nutzt die Kamera, um die Gesichtszüge des Fahrers zu erkennen, und übermittelt Informationen über die vertikale Position der Augen 22 des Fahrers an die Steuereinrichtung 32. Der Laser 16 des holografischen Projektionsmoduls 14 ist dazu ausgelegt, ein Bild nach oben auf die Windschutzscheibe 18 im Fahrzeug 12 zu projizieren. Das projizierte Bild wird von einer Innenfläche der Windschutzscheibe 18 auf eine Augenbox reflektiert. Die Augenboxist der dreidimensionale Bereich, in dem ein Fahrer des Fahrzeugs 12 das gesamte projizierte Bild des HUD-Systems sehen kann. Der Abwärtsblickwinkel (LDA, look down angle) ist der Winkel, in dem die Augen 22 des Fahrers relativ zum virtuellen Bild, das auf die Augen 22 des Fahrers projiziert wird, ausgerichtet sind. Die virtuelle Bilddistanz (VID, virtual image distance) ist der Abstand von den Augen des Fahrers, in dem der Fahrer das virtuelle Bild wahrnimmt. Um den unterschiedlichen Körpergrößen der Fahrer Rechnung zu tragen, sind der LDA und die VID einstellbar, damit das vom holografischen Projektionsmodul 14 projizierte Bild von allen Fahrern an der richtigen Position wahrgenommen wird.
  • Die Steuereinrichtung 32 ist dazu ausgestaltet, die Strecke zu bestimmen, um die die vertikale Position der Augen 22 des Fahrers von der vorgegebenen vertikalen Nennposition abweicht. Basierend auf der Strecke, um die die Augen des Fahrers 22 entweder höher oder niedriger als die vertikale Sollposition liegen, kann das holografische Projektionsmodul 14 die LDA des vom Laser 16 projizierten holografischen Bildes anpassen, um die angezeigte Fahrspurpositionsmeldung 40 für den Fahrer des Fahrzeugs 12 richtig zu positionieren.
  • Bezugnehmend auf 11 umfasst ein Verfahren 100 zur Bereitstellung von Fahrspurpositionsmeldungen 40 für einen Fahrer eines Fahrzeugs 12 mit einem Head-up-System 10 beginnend bei Block 102, Erfassen von Objekten 26 in einer Umgebung 28 um das Fahrzeug 12 mit mindestens einem nichtvisuellen Sensor 24, übergehend zu Block 104, Aufnehmen von Bildern der Umgebung 28 des Fahrzeugs 12 mit mindestens einer Bildaufnahmevorrichtung 30, übergehend zu Block 106, Verfolgen der Position der Augen 22 des Fahrers mit einem Fahrerüberwachungssystem 20, übergehend zu Block 108, Erkennen von Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 mit einer Steuereinrichtung 32, die in elektronischer Kommunikationsverbindung mit dem mindestens einen nichtvisuellen Sensor 24 und der mindestens einen Bilderfassungsvorrichtung 30 steht, übergehend zu Block 110, Bestimmen der Position des Fahrzeugs 12 innerhalb einer Fahrspur 36 einer Fahrbahn 38, auf der das Fahrzeug 12 fährt, mit der Steuereinrichtung 32; und, übergehend zu Block 112, Anzeigen einer Fahrspurpositionsmeldung 40 mit mindestens einem Laser 16 eines holografischen Projektionsmoduls, der dazu ausgelegt ist, ein holografisches Bild auf eine Innenfläche einer Windschutzscheibe 18 des Fahrzeugs 12 zu projizieren, und in elektronischer Kommunikationsverbindung mit der Steuereinrichtung 32 steht.
  • In einem Ausführungsbeispiel ist der Laser 16 dazu ausgelegt, holografische Bilder innerhalb einer Nahbildebene 44 der Windschutzscheibe 18 und einer Fernbildebene 46 der Windschutzscheibe 18 zu projizieren, wobei das Anzeigen einer Fahrspurpositionsmeldung 40 in Block 112 ferner Anzeigen der Fahrspurpositionsmeldung 40 innerhalb der Fernbildebene 46 umfasst.
  • In einem Ausführungsbeispiel ist die Steuereinrichtung 32 ferner dazu ausgelegt, kontinuierlich Fahrspurmarkierungen 34 und Objekte 26 in der Umgebung 28 um das Fahrzeug 12 zu erkennen und die Position des Fahrzeugs 12 innerhalb einer Fahrspur 36 einer Fahrbahn 38, auf der das Fahrzeug 12 fährt, zu bestimmen, wobei das Verfahren 100 ferner Aktualisieren der angezeigten Fahrspurpositionsmeldung 40 umfasst, wenn sich die Position des Fahrzeugs 12 innerhalb der Fahrspur 36, auf der das Fahrzeug fährt, ändert, indem die in den Blöcken 102, 104, 106, 108, 110 und 112 beschriebenen Schritte periodisch wiederholt werden, wie durch die Linien 118 angezeigt.
  • In einem Ausführungsbeispiel umfasst das Bestimmen der Position des Fahrzeugs 12 innerhalb einer Fahrspur 36 einer Fahrbahn 38, auf der das Fahrzeug 12 fährt, in Block 110 außerdem Bestimmen eines Abstands 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12. Wenn, übergehend zu Block 114, der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 geringer ist als ein vorgegebener Abstand 52A, 52B, umfasst das Anzeigen einer Fahrspurpositionsmeldung 40 übergehend zu Block 116 ferner Anzeigen einer Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung, die angibt, dass eine sofortige Korrekturmaßnahme durch den Fahrer erforderlich ist.
  • Wenn, erneut übergehend zu Block 114, der Abstand 50 zwischen dem Fahrzeug 12 und den erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 größer ist als der vorgegebene Abstand 52A, 52B, erfolgt ein Übergang zu Block 120, und wenn der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 abnimmt, erfolgt ein Übergang zu Block 122, wobei das Anzeigen einer Fahrspurpositionsmeldung 40 ferner Anzeigen einer Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung umfasst, die angibt, dass sich das Fahrzeug 12 von einer optimalen Position innerhalb der Fahrspur 36 entfernt.
  • In einem anderen Ausführungsbeispiel umfasst das Bestimmen der Position des Fahrzeugs 12 innerhalb einer Fahrspur 36 einer Fahrbahn 38, auf der das Fahrzeug 12 fährt, in Block 110 außerdem das Bestimmen, ob ein Fahrstabilitätskriterium erfüllt ist. Wenn, erneut übergehend zu Block 114, der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 größer ist als der vorgegebene Abstand 52A, 52B, und wenn, übergehend zu Block 120, der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 nicht abnimmt und wenn, übergehend zu Block 124, die Fahrstabilitätskriterien nicht erfüllt sind, dann umfasst das Verfahren 100, übergehend zu Block 126, Anzeigen einer Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung 40, die unregelmäßiges Fahrverhalten angibt.
  • Wenn, erneut übergehend zu Block 114, in einem anderen Ausführungsbeispiel der Abstand 50 zwischen dem Fahrzeug 12 und den erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 größer ist als der vorgegebene Abstand 52A, 52B, und wenn, übergehend zu Block 120, der Abstand 50 zwischen dem Fahrzeug 12 und erkannten Fahrspurmarkierungen 34 und Objekten 26 in der Umgebung 28 um das Fahrzeug 12 nicht abnimmt, und wenn, übergehend zu Block 124, die Fahrstabilitätskriterien erfüllt sind, dann umfasst übergehend zu Block 128 das Anzeigen einer Fahrspurpositionsmeldung 40 ferner Anzeigen einer Fahrspurpositionsmeldung 40 mit einer farbcodierten grafischen Fahrspurpositionsmeldung, die angibt, dass das Fahrzeug 12 optimal innerhalb der Fahrspur 36 positioniert ist.
  • In einem Ausführungsbeispiel ist das System 10 dazu ausgelegt, selektiv durch den Bediener betätigt zu werden und automatisch betätigt zu werden, wenn die Fahrstabilitätskriterien nicht erfüllt sind, wobei das Verfahren 100 ferner, übergehend zu Block 130, automatisches Betätigen des Systems 10 umfasst, wenn die Fahrstabilitätskriterien an Block 124 nicht erfüllt sind.
  • In einem anderen Ausführungsbeispiel umfasst die Steuereinrichtung 32 ein drahtloses Kommunikationsmodul 60 und ist dazu ausgelegt, Informationen von externen Quellen zu empfangen, wobei das Verfahren 100 ferner nach dem Bestimmen der Position des Fahrzeugs 12 innerhalb einer Fahrspur 36 einer Fahrbahn 38, auf der das Fahrzeug 12 fährt, in Block 110, übergehend zu Block 130, Empfangen von Informationen von externen Quellen mit dem drahtlosen Kommunikationsmodul 60 in der Steuereinrichtung 32 und, übergehend zu Block 132, Anzeigen einer Fahrspurpositionsmeldung 40, die Bedingungen der Fahrbahn 38 angibt, auf der das Fahrzeug 12 fährt, basierend auf Informationen, die von den externen Quellen empfangen werden, wie in 9 und 10 gezeigt.
  • In einem anderen Ausführungsbeispiel umfasst das Verfahren 100 nach dem Empfang von Informationen von externen Quellen mit dem drahtlosen Kommunikationsmodul 60 innerhalb der Steuereinrichtung 32 in Block 130 übergehend zu Block 134, wenn keine Fahrspurmarkierungen 34 vorhanden sind, Schätzen, wo sich die Fahrspurmarkierungen 34 befinden sollten, mit Informationen von den externen Quellen, dem mindestens einen nichtvisuellen Sensor 24 und der mindestens einen Bilderfassungsvorrichtung 30, und Anzeigen einer Fahrspurpositionsmeldung 40 mit Fahrspurmarkierungen 34C.
  • Die Beschreibung der vorliegenden Offenbarung ist lediglich beispielhaft, und Abwandlungen, die nicht vom Kern der vorliegenden Offenbarung abweichen, sollen in den Umfang der vorliegenden Offenbarung fallen. Solche Abwandlungen sind nicht als Abweichung von dem Geist und Umfang der vorliegenden Offenbarung aufzufassen.

Claims (10)

  1. Verfahren zum Bereitstellen von Fahrspurpositionsmeldungen für einen Fahrer eines Fahrzeugs mit einem Head-up-Anzeigesystem, umfassend: Erfassen von Objekten in der Umgebung um das Fahrzeug mit mindestens einem nichtvisuellen Sensor; Aufnehmen von Bildern der Umgebung um das Fahrzeug mit mindestens einer Bildaufnahmevorrichtung; Verfolgen der Position der Augen des Fahrers mit einem Fahrerüberwachungssystem; Erkennen von Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug mit einer Steuereinrichtung, die in elektronischer Kommunikationsverbindung mit dem mindestens einen nichtvisuellen Sensor und der mindestens einen Bilderfassungsvorrichtung steht; Bestimmen der Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, mit der Steuereinrichtung; und Anzeigen einer Fahrspurpositionsmeldung mit mindestens einer Lichtquelle, die dazu ausgelegt ist, ein Bild auf eine Innenfläche einer Windschutzscheibe des Fahrzeugs zu projizieren, und in elektronischer Kommunikationsverbindung mit der Steuereinrichtung steht.
  2. Verfahren nach Anspruch 1, wobei die Steuereinrichtung ferner dazu ausgelegt ist, kontinuierlich Fahrspurmarkierungen und Objekte in der Umgebung um das Fahrzeug zu erkennen und die Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, zu bestimmen, wobei das Verfahren ferner Aktualisieren der angezeigten Fahrspurpositionsmeldung umfasst, wenn sich die Position des Fahrzeugs innerhalb der Fahrspur, auf der das Fahrzeug fährt, ändert.
  3. Verfahren nach Anspruch 2, wobei das Bestimmen der Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, ferner Bestimmen eines Abstands zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug umfasst.
  4. Verfahren nach Anspruch 3, wobei, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug geringer ist als ein vorgegebener Abstand, das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung umfasst, die angibt, dass eine sofortige Korrekturmaßnahme durch den Fahrer erforderlich ist.
  5. Verfahren nach Anspruch 4, wobei, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer ist als der vorgegebene Abstand und abnimmt, das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung umfasst, die angibt, dass sich das Fahrzeug von einer optimalen Position innerhalb der Fahrspur entfernt.
  6. Verfahren nach Anspruch 5, wobei das Bestimmung der Position des Fahrzeugs innerhalb einer Fahrspur einer Fahrbahn, auf der das Fahrzeug fährt, ferner Bestimmen umfasst, ob ein Fahrstabilitätskriterium erfüllt ist.
  7. Verfahren nach Anspruch 6, wobei, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug nicht abnimmt und der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer ist als der vorgegebene Abstand und die Fahrstabilitätskriterien nicht erfüllt sind, das Verfahren Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung umfasst, die ein unregelmäßiges Fahrverhalten angibt.
  8. Verfahren nach Anspruch 7, wobei, wenn der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug nicht abnimmt und der Abstand zwischen dem Fahrzeug und erkannten Fahrspurmarkierungen und Objekten in der Umgebung um das Fahrzeug größer als der vorgegebene Abstand ist und die Fahrstabilitätskriterien erfüllt sind, das Anzeigen einer Fahrspurpositionsmeldung ferner Anzeigen einer Fahrspurpositionsmeldung mit einer farbcodierten grafischen Fahrspurpositionsmeldung umfasst, die angibt, dass das Fahrzeug optimal innerhalb der Fahrspur positioniert ist.
  9. Verfahren nach Anspruch 8, wobei das System dazu ausgelegt ist, selektiv durch den Bediener betätigt zu werden und automatisch betätigt zu werden, wenn die Fahrstabilitätskriterien nicht erfüllt sind, wobei das Verfahren ferner automatisches Betätigen des Systems umfasst, wenn die Fahrstabilitätskriterien nicht erfüllt sind.
  10. Verfahren nach Anspruch 9, wobei die Steuereinrichtung ein drahtloses Kommunikationsmodul umfasst und dazu ausgelegt ist, Informationen von externen Quellen zu empfangen, wobei das Verfahren ferner umfasst: Empfangen von Informationen von externen Quellen mit dem drahtlosen Kommunikationsmodul in der Steuereinrichtung; und Anzeigen einer Fahrspurpositionsmeldung umfasst, die den Zustand der Fahrbahn, auf der das Fahrzeug fährt, auf Grundlage der von den externen Quellen empfangenen Informationen angibt.
DE102022127398.9A 2022-03-29 2022-10-19 Fahrspurposition in einemaugmented-reality-head-up-display-system Pending DE102022127398A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17/707,239 2022-03-29
US17/707,239 US11697346B1 (en) 2022-03-29 2022-03-29 Lane position in augmented reality head-up display system

Publications (1)

Publication Number Publication Date
DE102022127398A1 true DE102022127398A1 (de) 2023-10-05

Family

ID=87070618

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102022127398.9A Pending DE102022127398A1 (de) 2022-03-29 2022-10-19 Fahrspurposition in einemaugmented-reality-head-up-display-system

Country Status (3)

Country Link
US (1) US11697346B1 (de)
CN (1) CN116923094A (de)
DE (1) DE102022127398A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7273839B2 (ja) * 2018-09-28 2023-05-15 株式会社小糸製作所 灯具システム
JP2022184350A (ja) * 2021-06-01 2022-12-13 マツダ株式会社 ヘッドアップディスプレイ装置

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8384531B2 (en) * 2009-04-02 2013-02-26 GM Global Technology Operations LLC Recommended following distance on full-windshield head-up display
US8384532B2 (en) * 2009-04-02 2013-02-26 GM Global Technology Operations LLC Lane of travel on windshield head-up display
US20110301813A1 (en) * 2010-06-07 2011-12-08 Denso International America, Inc. Customizable virtual lane mark display
US20170253182A1 (en) * 2014-08-27 2017-09-07 Honda Motor Co., Ltd. Drive assistance device and drive assistance method
US10189405B2 (en) * 2015-01-14 2019-01-29 Yazaki North America, Inc. Vehicular multi-purpose warning head-up display
JP6520668B2 (ja) * 2015-02-09 2019-05-29 株式会社デンソー 車両用表示制御装置及び車両用表示ユニット
JP6661883B2 (ja) * 2015-02-09 2020-03-11 株式会社デンソー 車両用表示制御装置及び車両用表示制御方法
CN106405836A (zh) * 2015-07-28 2017-02-15 本田技研工业株式会社 车辆显示装置以及车辆显示方法
WO2017221945A1 (ja) * 2016-06-20 2017-12-28 京セラ株式会社 表示装置、表示システム、移動体、および表示方法
JP6750523B2 (ja) * 2017-02-01 2020-09-02 株式会社デンソー 車載装置
US10723351B1 (en) * 2017-09-30 2020-07-28 Physician Electronic Networks, L.L.C. Collision prevention system
CN112074770B (zh) * 2018-05-04 2023-08-22 哈曼国际工业有限公司 可调整的三维增强现实平视显示器
US10955685B2 (en) * 2018-12-28 2021-03-23 Lightspace Technologies, SIA Volumetric display arrangement and a method for representing content of an image
US11554775B2 (en) * 2019-03-18 2023-01-17 Arnold Chase Passive infra-red guidance system
JP6856085B2 (ja) * 2019-03-28 2021-04-07 トヨタ自動車株式会社 車両用表示制御装置、方法及びプログラム
US20220348217A1 (en) * 2019-08-23 2022-11-03 Lg Electronics Inc. Electronic apparatus for vehicles and operation method thereof
JP7284053B2 (ja) * 2019-09-25 2023-05-30 京セラ株式会社 ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、移動体及びヘッドアップディスプレイの設計方法
US20210108926A1 (en) * 2019-10-12 2021-04-15 Ha Q. Tran Smart vehicle
KR20210062143A (ko) * 2019-11-20 2021-05-31 현대자동차주식회사 선행 차량의 조향 정보를 표시하는 장치 및 그 방법
KR20210100241A (ko) * 2020-02-05 2021-08-17 현대모비스 주식회사 내비게이션 연동을 이용한 차선 표시용 램프 시스템 및 이에 의한 차선 표시 방법
KR20210131129A (ko) * 2020-04-23 2021-11-02 현대자동차주식회사 이동 수단용 ui 생성 장치 및 ui 생성 방법
US20220144304A1 (en) * 2020-11-09 2022-05-12 Nvidia Corporation Safety decomposition for path determination in autonomous systems
JP2022175877A (ja) * 2021-05-14 2022-11-25 トヨタ自動車株式会社 車両用表示装置、表示方法及びプログラム
US11467415B1 (en) * 2021-07-21 2022-10-11 GM Global Technology Operations LLC Viewer input-based control in a multi-image augmented reality head up display system in a vehicle
US11639181B2 (en) * 2021-09-29 2023-05-02 Nissan North America, Inc. Lead vehicle braking warning system

Also Published As

Publication number Publication date
CN116923094A (zh) 2023-10-24
US11697346B1 (en) 2023-07-11

Similar Documents

Publication Publication Date Title
DE102017202115B4 (de) Fahrzeugeigene vorrichtung, verfahren zum steuern einer fahrzeugeigenen vorrichtung und computerlesbares speichermedium
DE112015006458B4 (de) Anzeigesteuervorrichtung, Anzeigesystem, Anzeigesteuerverfahren und Anzeigesteuerprogramm
EP2617022B1 (de) Visuelles fahrerinformations- und warnsystem für einen fahrer eines kraftfahrzeugs
DE102022127398A1 (de) Fahrspurposition in einemaugmented-reality-head-up-display-system
DE112012007236B4 (de) Sichtbarkeitsschätzungsgerät, Sichtbarkeitsschätzungsverfahren und Fahrsicherheitsunterstützungssystem
DE102010034853A1 (de) Kraftfahrzeug mit Digitalprojektoren
DE102017103287A1 (de) Anzeigesteuerung für ein fahrzeug
DE102018112234A1 (de) Verkehrssituationswahrnehmung für ein autonomes fahrzeug
DE102016108812A1 (de) Umstellen von Betriebsmodi eines Kraftfahrzeugs
DE112018000479T5 (de) Ereignisvorhersagesystem, Ereignisvorhersageverfahren, Aufzeichnungsmedium und sich bewegender Körper
DE102017103282A1 (de) Anzeigesteuerung für ein fahrzeug
DE112018007027T5 (de) Abbiegewegvisualisierung zum verbessern von räumlichem und situativem bewusstsein bei abbiegemanövern
EP3717954B1 (de) Verfahren zur anzeige des verlaufs einer trajektorie vor einem fahrzeug oder einem objekt mit einer anzeigeeinheit, vorrichtung zur durchführung des verfahrens
DE102019208663B4 (de) Verfahren zur Unterstützung eines Fahrers hinsichtlich für eine Verkehrssituation relevanter Objekte und Kraftfahrzeug
DE112016002268T5 (de) Bildverarbeitungsvorrichtung, elektronisches spiegelsystem und bildverarbeitungsverfahren
EP2289058B1 (de) Verfahren zur kombinierten ausgabe eines bildes und einer lokalinformation, sowie kraftfahrzeug hierfür
DE112018000477B4 (de) Ereignisvorhersagesystem, Ereignisvorhersageverfahren, Programm und Aufzeichnungsmedium, auf dem dieses aufgezeichnet ist
DE112016007121T5 (de) Betriebsbefugnismanagementvorrichtung und Betriebsbefugnismanagementverfahren
DE102015116043A1 (de) Sichtlinien-Führungsvorrichtung für Fahrzeuge
DE102007058295A1 (de) Anzeigeeinrichtung für Kraftfahrzeug
EP3931029B1 (de) Verfahren zum betreiben eines fahrerinformationssystems in einem ego-fahrzeug und fahrerinformationssystem
DE112018007063T5 (de) Anzeigesteuervorrichtung, Anzeigevorrichtung und Anzeigesteuerverfahren
WO2013113500A1 (de) Fahrerassistenzsystem und verfahren zur virtuellen darstellung eines strassenverlaufs bei verdeckung und/oder schlechten sichtverhältnissen
DE102009019702A1 (de) Verfahren und Vorrichtung zur Übergabeaufforderung an den Fahrzeugführer
DE102018210226A1 (de) Verfahrung und vorrichtung für die verwendung mit fahrzeugen mit autonomem fahrmodus

Legal Events

Date Code Title Description
R012 Request for examination validly filed