DE102011053002A1 - Fahrspurliniebeurteilungsvorrichtung - Google Patents

Fahrspurliniebeurteilungsvorrichtung Download PDF

Info

Publication number
DE102011053002A1
DE102011053002A1 DE102011053002A DE102011053002A DE102011053002A1 DE 102011053002 A1 DE102011053002 A1 DE 102011053002A1 DE 102011053002 A DE102011053002 A DE 102011053002A DE 102011053002 A DE102011053002 A DE 102011053002A DE 102011053002 A1 DE102011053002 A1 DE 102011053002A1
Authority
DE
Germany
Prior art keywords
lane
lane line
line
lines
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE102011053002A
Other languages
English (en)
Other versions
DE102011053002B4 (de
Inventor
Hajime Oyama
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Fuji Jukogyo KK
Fuji Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Jukogyo KK, Fuji Heavy Industries Ltd filed Critical Fuji Jukogyo KK
Publication of DE102011053002A1 publication Critical patent/DE102011053002A1/de
Application granted granted Critical
Publication of DE102011053002B4 publication Critical patent/DE102011053002B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

Ein Festdatenspeicher 9d speichert Daten einer normalen Fahrspurbreite W1 zwischen Fahrspurlinien 21L und 21R und Daten einer engen Fahrspurbreite W2 zwischen inneren Führungslinien 22 von doppelten weißen Linien. Ein Fahrspurliniekandidatsetzabschnitt 9a detektiert Fahrspurliniedetektionspunkte P aspur, basierend auf dem Bild, das von einer Abbildeeinheit 1 aufgenommen wird, und setzt Fahrspurliniekandidatenpunkte G1 bis G3 auf die Fahrspurbreiten W1 und W2 und zwischen die Position der Fahrspurbreite W1 und die Position der Fahrspurbreite W2 auf der gegenüberliegenden Fahrspurlinie, wobei dirwendet werden. Ein Kurvenannäherungsprozessabschnitt 9b setzt virtuelle Linien Ls auf der linken Seite und auf der rechten Seite der Fahrspur von einer Kurvenannäherungsgleichung, die erhalten wird basierend auf den Fahrspurliniedetektionspunkten P und den Fahrspurkandidatenpunkten G1 bis G3. Ein Fahrspurliniepositionsetzabschnitt 9c erhält Streuungen der Fahrspurliniekandidatenpunkte G1 bis G3 bezüglich der linken und rechten virtuellen Linien Ls, beurteilt den Fahrspurlinientyp von zumindest einer der linken und rechten virtuellen Linien gemäß dem Fahrspurlinientyp entsprechend der virtuellen Linie Ls, die die geringste Streuung aufweist, und bestimmt die Positionen der Fahrspurlinien basierend auf dem Fahrspurlinientyp.

Description

  • Die vorliegende Erfindung betrifft eine Fahrspurliniebeurteilungsvorrichtung, die eine virtuelle Linie auf einer Fahrspur ansetzt beziehungsweise festlegt entsprechend einer Fahrspurlinie, die auf einer vorausliegenden externen Umgebung basiert, die von einer Bildeinheit aufgenommen wird, welche an dem Fahrzeug angeordnet ist.
  • Aus dem Stand der Technik sind Fahrunterstützungsvorrichtungen bekannt, welche verschiedenartige Steuerungen während der Fahrt auf einer Schnellstraße oder Autobahn durchführen. Eine derartige Fahrunterstützungsvorrichtung führt eine Fahrsteuerung durch, bei der eine vor dem Fahrzeug liegende Fahrtumgebung detektiert wird, Fahrspurlinien, die die linke Seite und die rechte Seite einer Fahrspur, auf der sich das Fahrzeug bewegt, definieren, detektiert werden, basierend auf den detektierten Fahrtumgebungsdaten, und dem Fahrzeug erlaubt wird, automatisch längs der Fahrspurlinien zu fahren. Eine andere derartige Fahrunterstützungsvorrichtung führt eine Fahrspurbeibehaltungssteuerung durch, in der ein Alarm ausgelöst wird, um einen Fahrer zu warnen, wenn vorausgesagt wird, dass das Fahrzeug von den erkannten Fahrspurlinienpositionen abweicht.
  • Es ist erforderlich, die Positionen der Fahrspurlinien exakt anzusetzen beziehungsweise zu bestimmen, um das Fahrzeug korrekt längs der Fahrspurlinien zu fahren. Als eine Einheit zum Ansetzen beziehungsweise Berechnen der Position einer Fahrspurlinie ist eine Technik zum Detektieren eines Randes einer weißen Linie anhand einer Helligkeitsdifferenz zwischen einer Straßenoberfläche und der weißen Linie bekannt, die auf einem Bild basiert, das von einer Kamera, die an dem Fahrzeug angebracht ist (im Folgenden als „Fahrzeugkamera” bezeichnet) von einem Bereich vor dem Fahrzeug aufgenommen wurde, so dass die Position der Fahrspurlinie anhand des Randes der weißen Linie ermittelt wird.
  • Auf einer Schnellstraße oder Autobahn können jedoch nicht nur die rechte und linke Linie vorhanden sein, welche eine Fahrspur definieren, sondern es können doppelte weiße Linien einschließlich einer Fahrspurlinie und einer Führungslinie (so genannte Punktlinie) innerhalb der Fahrspurlinie in einer Kurve ausgebildet sein. Bei der Technik des Detektierens eines Randes einer weißen Linie von einer Helligkeitsdifferenz beziehungsweise einem Helligkeitsunterschied zwischen dem Rand der weißen Linie und einer Straßenoberfläche besteht die Möglichkeit, dass eine innere Führungslinie einer doppelten weißen Linie irrtümlicherweise als eine Fahrspurlinie erkannt wird, da der Helligkeitsunterschied deutlicher erscheint im Falle der weißen Linie auf der Innenseite der Straße als im Falle der weißen Linie auf der äußeren Seite der Straße. Zudem kann ein Fall gegeben sein, dass eine Fahrbahn parallel zu einer Fahrspur ausgebildet ist. Wenn sich eine Pfütze auf dieser Fahrbahn gebildet hat, wird hochintensives Licht in Folge der Reflexion des Lichtes von der Wasseroberfläche aufgenommen. Diese Fahrbahn kann daher irrtümlicherweise als eine Fahrspur erkannt werden.
  • Als eine Gegenmaßnahme beschreibt das japanische Patent Nr. 3733875 eine Technik, bei der, wenn eine weiße Linie detektiert wird, basierend auf einem Bild, das von einer Fahrzeugkamera aufgenommen ist, als eine pseudo weiße Linie wie beispielsweise eine Pfütze auf einer Fahrbahn oder eine doppelte weiße Linie bestimmt wird, ein Straßenparameter gesetzt wird, der eine seitliche Position des Fahrzeugs bezüglich der Fahrspurlinie ausschließt, so dass verhindert wird, dass die pseudo weiße Linie irrtümlicherweise als eine weiße Linie erkannt wird.
  • Das japanische Patent Nr. 3603836 beschreibt die nachfolgend erläuterte Technik. Bei dieser Technik werden rechte und linke Weiße-Linien-Kandidatenpunkte, die gepaart sind, detektiert auf der Basis eines Bildes, das von einer Fahrzeugkamera aufgenommen wird. Unter den detektierten, gepaarten beziehungsweise paarweisen rechten und linken Weiße-Linie-Kandidatenpunkten werden Paare von Kandidatenpunkten, die die gleiche Position in der vertikalen Richtung haben, detektiert. Eine Gerade-Linie-Annäherungsgleichung wird erhalten aus dem Verhältnis zwischen der horizontalen Entfernung und der vertikalen Position jedes der Paare der Kandidatenpunkte. Echte Weiße-Linie-Kandidatenpunkte werden extrahiert von den entsprechenden Paaren der Kandidatenpunkte, basierend auf der Differenz zwischen einem horizontalen Abstand, berechnet aus der Gerade-Linie-Annäherungsgleichung basierend auf der Position der Kandidatenpunktepaare in der vertikalen Richtung und einem horizontalen Abstand der Kandidatenpunktepaare, die aus dem Bild erhalten werden. Daraufhin wird ein Straßenparameter gesetzt, basierend auf den echten Weiße-Linie-Kandidatenpunkten, wodurch die Präzision beim Detektieren der echten Weiße-Linie-Kandidatenpunkte erhöht wird.
  • Die in dem japanischen Patent Nr. 3603836 beschriebene Technik fokussiert auf den Punkt, bei dem die Fahrspurlinien auf der linken Seite und auf der rechten Seite parallel zueinander sind, und wenn die rechten und linken Fahrspurlinien, die von der Kamera aufgenommen werden, einer Gerade-Linie-Annäherung unterzogen werden, wird die Breite der Fahrspuren (Fahrspurbreite) null an den Punkten des Verschwindens. Genauer gesagt, in dem Fall, bei dem die Punkte des Verschwindens miteinander übereinstimmen bei der Gerade-Linie-Annäherung, selbst wenn mehrere Gerade-Linie-Kandidaten auf der rechten und linken Seite vorhanden sind, können bei dieser Technik die Gerade-Linie-Kandidaten als eine doppelte weiße Linie bestimmt werden.
  • Bei der in dem japanischen Patent Nr. 3733875 beschriebenen Technik wird, wenn die pseudo weiße Linie detektiert wird, der Straßenparameter gewählt beziehungsweise festgesetzt, der die seitliche Position ausschließt. Wenn daher ein Fahrer beabsichtigt, das Fahrzeug in eine optimale Position zu steuern, beispielsweise in die Mitte der Fahrspur, kann der Fahrer die Fahrspurlinie des Fahrzeugs nicht in der Mitte der Fahrspur festlegen, da keine Daten bezüglich der seitlichen Position involviert sind.
  • Demzufolge wird die Fahrsteuerung unstabil.
  • Reifen eines bewegten Fahrzeugs fahren häufig auf der inneren Führungslinie (punktierten Linie) der doppelten weißen Linie, die auf der Straßenoberfläche einer Schnellstraße oder einer Autobahn aufgebracht sind, so dass die innere Führungslinie häufig und in vielen Fällen abgeschwächt beziehungsweise verblasst ist. Der Helligkeitsunterschied zwischen dem Rand der inneren Führungslinie und der Straßenoberfläche ist daher gering, was dazu führt, dass es schwierig sein kann, die innere Führungslinie zu detektieren. In diesem Fall können die Kandidatenpunkte der echten weißen Linie an der Außenseite und der Kandidatenpunkte der inneren Führungslinie nicht klar identifiziert werden in der Nähe des Punktes des Verschwindens. Bei der in dem japanischen Patent Nr. 3603836 beschriebenen Technik wird die Präzision der Detektion der echten weißen Linie daher schlecht.
  • Die vorliegende Erfindung wurde gemacht im Hinblick auf die zuvor erläuterten Umstände und zielt darauf ab, eine Fahrspurliniebeurteilungsvorrichtung bereit zu stellen, die mit hoher Präzision Positionen von Fahrspurlinien ansetzt beziehungsweise berechnet auf der linken Seite und der rechten Seite, die eine Fahrspur definieren, selbst wenn eine Fahrspurlinie auf einer Straße eine doppelte weiße Linie ist, oder selbst unter solchen Bedingungen, bei denen eine Fahrbahn ausgebildet ist und diese Fahrbahn die Möglichkeit beinhaltet, irrtümlicherweise als eine weiße Linie erkannt zu werden in Folge einer Lichtreflektion von einer Pfütze auf der Fahrbahn.
  • Um diese Aufgabe zu lösen beinhaltet eine Fahrspurliniebeurteilungsvorrichtung gemäß der vorliegenden Erfindung: eine Abbildeeinheit, die an einem Fahrzeug angeordnet ist und dazu konfiguriert ist, eine äußere Umgebung des Fahrzeugs abzubilden, eine Speichereinheit, die dahingehend konfiguriert ist, Daten einer Fahrspurlinienbreite für jeden Typ von einer Vielzahl vorbestimmter Fahrspurlinientypen zu speichern, eine Fahrspurliniekandidatpunktsetzeinheit, die dahingehend konfiguriert ist, linksseitige und rechtsseitige Fahrspurliniedetektionspunkte auf einer Fahrspur zu detektieren, auf der das Fahrzeug fährt, basierend auf einem Bild der externen Umgebung, die von der Abbildeeinheit abgebildet wird, und zum Setzen beziehungsweise Festlegen von Fahrspurliniekandidatenpunkten auf der gegenüberliegenden Fahrspurlinie mit einem Zwischenraum der Fahrspurlinienbreite, wobei die linksseitigen und rechtsseitigen Fahrspurliniedetektionspunkte als Startpunkte beziehungsweise Ausgangspunkte verwendet werden, eine Kurvenannäherungsprozesseinheit, die dahingehend konfiguriert ist, eine Kurvenannäherungsgleichung zu erhalten, basierend auf Fahrspurliniedetektionspunkten gegenüber denjenigen Fahrspurliniedetektionspunkten, die von der Detektionseinheit detektiert werden, und den Fahrspurliniekandidatpunkten, die von der Fahrspurliniekandidatpunktsetzeinheit gesetzt werden, um virtuelle Linien auf der linken Seite und der rechten Seite der Fahrspur von der Kurvenannäherungsgleichung zu setzen, und eine Fahrspurlinietypbeurteilungseinheit, die dahingehend konfiguriert ist, die Dispersion beziehungsweise Streuung der virtuellen Linien, die von der Kurvenannäherungsprozesseinheit gesetzt wurden, zu erhalten, so dass der Fahrspurlinientyp von zumindest einer der linken und rechten virtuellen Linien von dem Paar von linken und rechten virtuellen Linien angesetzt wird, welche die geringste Streuung zeigt.
  • Gemäß der vorliegenden Erfindung werden Fahrspurliniedetektionspunkte detektiert auf der linken Seite und auf der rechten Seite der Fahrspur, Fahrspurliniekandidatenpunkte werden gesetzt auf den Positionen der Fahrspurlinienbreite für jede der vorbestimmten Fahrspurlinientypen auf der gegenüberliegenden Fahrspurlinie, wobei die Fahrspurliniedetektionspunkte als Startpunkte verwendet werden. Die virtuellen Linien werden gesetzt auf der linken Seite und auf der rechten Seite der Fahrspur von der Kurvenannäherungsgleichung, die angesetzt wird basierend auf den Fahrspurliniedetektionspunkten und den Fahrspurliniekandidatenpunkten, und die Streuung der Fahrspurliniekandidatenpunkte für jede der Fahrspurlinienbreite bezüglich der virtuellen Linien wird erhalten, um so die Fahrspurlinientypen der linken Seite und der rechten Seite anzusetzen, entsprechend der Fahrspurlinienbreite, die die geringste Streuung anzeigt, als ein Fahrspurlinientyp der virtuellen Linien. Somit kann eine Fahrspurlinie mit hoher Präzision angesetzt werden, selbst wenn eine Fahrspurlinie auf einer Straße eine doppelte weiße Linie ist, oder selbst bei einer Situation, in der eine Fahrbahn ausgebildet ist und diese Fahrbahn leicht irrtümlicherweise erkannt werden kann als eine weiße Linie in Folge einer Reflexion von Licht von einer Pfütze auf der Fahrbahn.
  • Die Erfindung wird nachfolgend anhand von Ausführungsbeispielen unter Hinweis auf die beigefügten Zeichnungen erläutert.
  • 1 ist ein funktionales Blockdiagramm, das eine Konfiguration einer Fahrsteuerungsvorrichtung zeigt.
  • 2 ist ein funktionales Blockdiagramm, das eine Fahrspurliniebeurteilungsvorrichtung zeigt.
  • 3 ist ein Flussdiagramm (1), das ein Straße-Weiße-Linie-Erkennungsverfahren-Programm zeigt.
  • 4 ist ein Flussdiagramm (2), das ein Straße-Weiße-Linie-Erkennungsverfahren-Programm zeigt.
  • 5 ist ein Flussdiagramm (3), das ein Straße-Weiße-Linie-Erkennungsverfahren-Programm zeigt.
  • 6 ist eine beispielhafte Ansicht eines Zustandes, in dem Fahrspurliniedetektionspunkte auf Fahrspurlinien detektiert werden von einer Abbildung beziehungsweise einem Bild, die beziehungsweise das von einer Abbildeeinheit aufgenommen wurde.
  • 7 ist eine beispielhafte Ansicht eines Zustands, in dem Fahrspurliniedetektionspunkte auf inneren Führungslinien von doppelten weißen Linien detektiert werden von einem Bild, das von einer Abbildeinheit aufgenommen wurde.
  • 8 ist eine beispielhafte Ansicht eines Zustandes, in dem Fahrspurliniedetektionspunkte auf Fahrbahnen detektiert werden von einem Bild, das von einer Abbildeeinheit aufgenommen wurde.
  • 9 ist eine beispielhafte Ansicht, die einen Zustand zeigt, in dem ein die Lage betreffendes Verhältnis zwischen einem Fahrzeug und Fahrspurlinien während des Fahrens einer Kurve auf einer virtuellen Ebene dargestellt ist.
  • 10 ist eine beispielhafte Ansicht, die Fahrspurbreiten zwischen Fahrspurlinien und zwischen Führungslinien darstellt.
  • 11 ist eine beispielhafte Ansicht, die einen Zustand darstellt, in dem Kandidatenpunkte auf einer linksseitigen weißen Linie aufgetragen sind, wobei Detektionspunkte auf einer rechtsseitigen Fahrspurlinie als Startpunkte verwendet werden.
  • 12 ist eine beispielhafte Ansicht, die einen Zustand zeigt, in dem Kandidatenpunkte auf einer linksseitigen weißen Linie aufgezeichnet sind, wobei Detektionspunkte auf einer rechtsseitigen Führungslinie einer doppelten weißen Linie als Startpunkte verwendet werden.
  • Die 13A bis 13C sind beispielhafte Ansichten einer Situation, in der eine Fahrbahn auf der linken Seite der Straße ausgebildet ist. 13A ist eine beispielhafte Ansicht, die einen Zustand zeigt, bei dem linksseitige Kandidatenpunkte aufgezeichnet sind, wobei rechtsseitige Detektionspunkte als Startpunkte verwendet werden. 13B ist eine beispielhafte Ansicht, die einen Zustand zeigt, in dem rechtsseitige Kandidatenpunkte aufgezeichnet werden, wobei linksseitige Detektionspunkte als Startpunkte verwendet werden. 13C ist eine beispielhafte Ansicht, die eine Situation zeigt, in der linksseitige Detektionspunkte festgelegt werden als ein Rand der Fahrbahn.
  • Im Folgenden wird eine Ausführungsform der vorliegenden Erfindung beschrieben unter Bezug auf die Zeichnungen. Eine in 1 gezeigte Fahrsteuervorrichtung weist auf ein Bildverarbeitungssystem A und ein Lenksteuerungssystem B, wobei das Bildverarbeitungssystem A eine Abbildeeinheit 1, eine Bildverarbeitungseinheit 2 und eine Fahrspurliniebeurteilungsvorrichtung 9 aufweist, während das Lenksteuerungssystem B eine Lenksteuerungseinheit 10 und eine Lenkbetätigungsvorrichtung 11 aufweist. In der vorliegenden Erfindung sind das Bildverarbeitungssystem A und die Lenksteuereinheit 10 an einer Kameraeinheit angebracht. Beispiele der Lenkbetätigungsvorrichtung 11 beinhalten einen Elektromotor und einen Hydraulikmotor.
  • Die Lenksteuerungseinheit 10 besteht hauptsächlich aus einem Mikrocomputer. Die Lenksteuerungseinheit 10 ist verbunden mit einer Lenkbetätigungsvorrichtung 11 über eine fahrzeugseitige Kommunikationsleitung 12, beispielsweise ein CAN (Controller Area Network), so dass eine Zweiwegkommunikation ermöglicht ist. Die Lenksteuereinheit 10 wählt beziehungsweise setzt an einen Lenkwinkel so, dass das Fahrzeug entlang rechtsseitiger und linksseitiger Fahrspurlinien, die auf einer Fahrspur aufgebracht sind, fährt, basierend auf Fahrspurliniendaten, die von dem Bildverarbeitungssystem A übertragen werden, und gibt ein korrespondierendes Lenkmoment an die Lenkbetätigungsvorrichtung 11 ab. Die Lenkbetätigungsvorrichtung 11 führt einen Lenkvorgang durch mit dem Lenkmoment, basierend auf dem Lenkwinkel von der Lenksteuereinheit 10, um so die Fahrtrichtung des Fahrzeugs anzupassen.
  • Wie in 2 gezeigt, weist die Abbildeeinheit 1 in dem Bildverarbeitungssystem A eine Stereokamera auf mit einer Hauptkamera 1a und einer Hilfskamera 1b. Beide Kameras 1a und 1b sind beispielsweise horizontal mit einem vorbestimmten Abstand zwischen einander oberhalb eines Rückspiegels und in der Mitte einer Stelle nahe einer Windschutzscheibe in der Breitenrichtung des Fahrzeugs montiert. Eine Abbildevorrichtung wie beispielsweise ein CCD oder CMOS ist sowohl bei der Kamera 1a als auch bei der Kamera 1b vorgesehen, wobei die Abbildevorrichtungen eine Außenumgebung vor dem Fahrzeug einschließlich einer Fahrspur, auf der das Fahrzeug fährt, aufnehmen.
  • Ein paar analoger Bilder, die mit beiden Kameras 1a und 1b aufgenommen werden, werden an die Bildverarbeitungseinheit 2 abgegeben. Die Bildverarbeitungseinheit 2 beinhaltet eine A/D Wandlereinheit 3, eine Bildkorrektureinheit 4, einen Bilddatenspeicher 5 und die Fahrspurliniebeurteilungsvorrichtung 9. Jedes der analogen Bilder, das von den entsprechenden Kameras 1a und 1b aufgenommen wurde, wird umgewandelt in ein digitales Bild, das eine vorbestimmte Helligkeit und Gradation aufweist, mittels eines entsprechenden A/D Wandlers 3a oder 3b, der der A/D Wandlereinheit 3 zur Verfügung steht, und daraufhin an die Bildkorrektureinheit 4 ausgegeben.
  • Die Bildkorrektureinheit 4 führt eine Bildkorrektur durch wie beispielsweise eine Korrektur eines Helligkeitswertes einschließlich der Elimination von Abweichungen oder Rauschen, verursacht durch einen Fehler in der Montageposition der Kameras 1a und 1b. Dementsprechend werden Referenzbilddaten erzeugt von einem Ausgabesignal von der Hauptkamera 1a, während Vergleichsbilder erzeugt werden von einem Ausgabesignal von der Hilfskamera 1b, wobei die Daten eine Länge in der vertikalen Richtung haben, die die gleiche ist wie das Referenzbild, und eine Länge in der horizontalen Richtung, die größer ist als diejenige des Referenzbildes. Die Referenzbilddaten und die Vergleichsbilddaten werden in dem Bilddatenspeicher 5 gespeichert und an die Bildverarbeitungseinheit 6 ausgegeben.
  • Die Bildverarbeitungseinheit 6 weist auf einen Bildprozessor 7 und einen Entfernungsdatenspeicher 8. Der Bildprozessor 7 berechnet Entfernungsdaten von einem gleichen Subjekt (eine Entfernung von dem Fahrzeug zu einem Subjekt) in beiden Bildern, basierend auf der Parallaxe zwischen den Referenzbilddaten und den Entfernungsbilddaten durch Verwendung des Prinzips der Triangulation, und speichert dann das Ergebnis in dem Entfernungsdatenspeicher 8.
  • Die Fahrspurliniebeurteilungsvorrichtung 9 beinhaltet einen Fahrspurliniekandidatenpunktsetzabschnitt 9a, der als Fahrspurliniekandidatenpunktsetzeinheit dient, einen Kurvenannäherungsprozessabschnitt 9b, der als Kurvenannäherungsprozesseinheit dient, einen Fahrspurliniepositionsetzabschnitt 9c, der als Fahrspurliniepositionsetzeinheit dient, und einen festen Datenspeicher 9d, der als Speichereinheit dient. Wie in 10 gezeigt, speichert der feste Datenspeicher 9d eine Fahrspurlinienbreite (im Folgenden als „normale Fahrspurbreite” bezeichnet) W1 zwischen einer linken und einer rechten Fahrspurlinie 21L und 21R, die die Fahrspur begrenzen, und eine Fahrspurbreite (im Folgenden als „schmale Fahrspurbreite” bezeichnet) W2 zwischen inneren Führungslinien 22 von doppelten weißen Linien, und Fahrspurlinientypbestimmungsdatenstücken T1 und T2, die später in den Tabellen 1 und 2 beschrieben werden.
  • Auf der Fahrspur einer Schnellstraße oder Autobahn ist eine Fahrspurlinie 21L auf der linken Seite und eine Fahrspurlinie 21R auf der rechten Seite aufgebracht beziehungsweise aufgemalt. Auf einer Straße, beispielsweise einer Kurve, bei der ein Fahrzeug leicht von der Fahrspur abweichen kann, sind doppelte weiße Linien aufgetragen beziehungsweise aufgemalt, jede mit einer gestrichelten Führungslinie (punktierte Linie) 22 an der Innenseite der Fahrspurlinien 21L oder 21R. Die Breite zwischen den Fahrspurlinien 21L und 21R und die Breite zwischen den inneren Führungslinien 22 werden dahingehend festgelegt, innerhalb eines vorab bestimmten Bereiches zu fallen. Beispielsweise ist die Breite zwischen den Fahrspurlinien 21L und 21R etwa 3,25–3,5 m und die Breite zwischen den inneren Führungslinien 22 ist ungefähr 2,8–3,05 m. Wenn der Abstand zwischen den Fahrspurlinien identifiziert werden kann, kann die Art der Fahrspurlinie daher aus diesem Abstand bestimmt werden.
  • Der Fahrspurliniekandidatenpunktsetzabschnitt 9a liest die Referenzbilddaten und die Vergleichsbilddaten, die während einer laufenden Detektion aufgenommen und in dem Bilddatenspeicher 5 gespeichert wurden, und liest die Abstandsdaten, die in dem Abstandsdatenspeicher 8 gespeichert wurden. Dann detektiert der Fahrspurliniekandidatenpunktsetzabschnitt 9a Detektionspunkte (im Folgenden als „Fahrspurliniedetektionspunkt” bezeichnet) P in den Referenzbilddaten auf den Fahrspurlinien auf beiden Seiten der Fahrspur, auf der das Fahrzeug fährt, basierend auf den Datenstücken, und wählt normale Kandidatenpunkte G1 und enge Kandidatenpunkte G2 auf der Seite der gegenüberliegenden Fahrspurdetektionspunkte P, basierend auf den Fahrspurdetektionspunkten P und der normalen Fahrspurbreite W1 und der engen Fahrspurbreite W2, die in den Festdatenspeicher 9d gespeichert sind.
  • Genauer gesagt, der Fahrspurliniekandidatenpunktsetzabschnitt 9a sucht sequenziell einen Pixel, wobei er eine Pixelbreite um eine Pixelbreite von unten (von der nahe gelegenen Seite des Fahrzeugs) nach oben (zu der vom Fahrzeug entfernten Seite) versetzt auf einer horizontalen Linie von einer Pixelbreite auf den Referenzbilddaten von einem Datenübertragungsblock beziehungsweise Einzelbild, das bei der aktuellen Detektion aufgenommen wurde, wobei es hierbei ein Pixel detektiert, das eine Bedingung erfüllt, in dem ein Helligkeitsableitungswert des Pixels, i. e. eine Kantenintensität (Helligkeitsdifferenz), signifikant verändert ist, so dass es nicht geringer ist als ein Grenzwert, basierend auf dem Helligkeitswert jedes Pixels in den Referenzbilddaten. Die Kantenintensität erscheint stärker auf der inneren Kante als auf der äußeren Kante. Daher, wenn eine Fahrspurlinie 21L auf der linken Seite aufgebracht ist und eine Fahrspurlinie 21R auf der rechten Seite der Fahrspur aufgebracht ist, wie in 6 gezeigt, werden die inneren Ränder der Fahrspurlinien 21L und 21R als die Fahrspurliniedetektionspunkte P detektiert. Im Fall einer doppelten weißen Linie, wie in 7 dargestellt, werden die inneren Ränder der inneren Führungslinien 22 als der Fahrspurliniedetektionspunkt P detektiert. Wie in 8 gezeigt, wenn Spurrillen 25 längs einer der Fahrbahnlinien (in der vorliegenden Ausführungsform die linke Fahrbahnlinie 21L) der Fahrspur ausgebildet sind und eine Pfütze in einem der Spurrillen 25 gebildet ist, wobei reflektierendes Licht von der Pfütze wie beispielsweise Sonnenlicht oder Bestrahlungslicht von den zwei Kameras 1a und 1b mit einer hohen Intensität aufgenommen wird, steigt die Intensität der Kante zwischen den Spurrillen 25 und der Straßenoberfläche an. Dementsprechend wird der Fahrspurliniedetektionspunkt P auf dem Randbereich zwischen der Innenseite der Spurrille 25 und der Straßenoberfläche detektiert. Hinsichtlich der linken und rechten Fahrspurliniedetektionspunkte P nimmt der Abstand von einem Pixel zu, wenn die Abtastung von unten (von der nahen Seite des Fahrzeugs) nach oben auf dem Bild (zu der entfernten Seite) fortläuft, so dass die Detektionspräzision auf der linken Seite und der rechten Seite der Fahrspurliniedetektionspunkte P auf der entfernten Seite relativ geringer ist als die linken und rechten Fahrspurliniedetektionspunkte P auf der nahegelegenen Seite.
  • Dann werden, wie in 9 gezeigt, die linken und rechten Fahrspurliniedetektionspunkte P berechnet basierend auf den Entfernungsdaten, wiederaufgezeichnet auf einer Ebene einer virtuellen Straße, die erzeugt wird basierend auf den Referenzbilddaten und den Vergleichsbilddaten. Ein Fahrzeug M wird auf der Ebene der virtuellen Straße angezeigt. Eine im Folgenden beschriebene Koordinate wird gewählt. Genauer gesagt, in der Koordinate wird ein Punkt auf der Straßenoberfläche unmittelbar unterhalb des Bereichs zwischen den Kameras 1a und 1b, die der Abbildeinheit 1 zugeordnet sind, in der Mitte der Breitenrichtung des Fahrzeugs als Ursprung definiert, wobei die Breitenrichtung des Fahrzeugs M als y-Achse definiert ist und die Längsrichtung des Fahrzeugs M als x-Achse definiert ist. Ein Referenzsymbol zeigt einen Winkel (Gierwinkel) zwischen der Fahrspurlinie und dem Fahrzeug M an, was weiter unten beschrieben wird. In der Zeichnung sind die linken und rechten Fahrspurliniedetektionspunkte P nur vereinzelt aufgezeichnet. Tatsächlich werden diese in größerer Dichte aufgezeichnet.
  • Wie in den 11 bis 13 gezeigt, sind die Kandidatenpunkte G1, G2 und G3, die unter Verwendung der Fahrspurliniedetektionspunkte P als Startpunkte gesetzt werden, auf der Ebene der virtuellen Straße dargestellt. In den 11 bis 13 ist die Fahrspur als gerade Straße zum Zwecke der Beschreibung dargestellt. Die 11 bis 13 zeigen Zustände, in denen die Fahrspurliniedetektionspunkte P und die Kandidatenpunkte G1 bis G3 nur auf einer Seite der Fahrspur aufgebracht sind. Die Fahrspurliniedetektionspunkte P und die Kandidatenpunkte G1 bis G3 sind jedoch tatsächlich auf beiden Seiten der Fahrspur aufgebracht.
  • Der Kurvenannäherungsprozessabschnitt 9b setzt eine virtuelle Linie Ls, die eine angenäherte Kurve ist, welche erhalten wird durch die Methode der kleinsten Quadrate, basierend auf den Fahrspurliniedetektionspunkten P und den Fahrspurliniekandidatenpunkten G1 und G2, detektiert von dem Fahrspurliniekandidatenpunktsetzabschnitt 9a und detektiert auf dem Referenzbild, für jede der rechten und linken Fahrspurlinien. Der Fahrspurliniepositionsetzabschnitt 9c berechnet den Fahrspurlinientyp der virtuellen Linie Ls, die von dem Kurvenannäherungsprozessabschnitt 9b gesetzt wird, und bestätigt die Positionen der linken und rechten Fahrspurlinien, die die Fahrspur definieren, auf der das Fahrzeug M fährt, basierend auf dem berechneten beziehungsweise angesetzten Fahrspurlinientyp. Die Funktion des Ansetzens beziehungsweise Berechnens des Fahrspurlinientyps der virtuellen Linie Ls entspricht der Fahrspurliniebeurteilungsvorrichtung gemäß der vorliegenden Erfindung.
  • Die Vorgänge in den Prozessabschnitten 9a bis 9c werden insbesondere ausgeführt in Übereinstimmung mit einem Straße-Weiße-Linie-Erkennungsverfahren-Programm, das in den 3 bis 5 dargestellt ist. In der nachfolgenden Beschreibung wird davon ausgegangen, dass das Fahrzeug M auf einer Schnellstraße oder einer Autobahn fährt.
  • Das Programm wird ausgeführt für jeden Datenübertragungsblock beziehungsweise jedes Einzelbild eines Bildes, das von der Abbildeeinheit 1 aufgenommen wird. In Schritt S1 werden paarweise beziehungsweise gepaarte linke und rechte Fahrspurliniedetektionspunkte P zunächst gelesen und auf der Ebene der virtuellen Straße abgebildet, wobei eine Punktsequenz der Fahrspurliniedetektionspunkte P erzeugt wird (siehe 9). Anschließend schreitet das Programm zu Schritt S2 weiter, wo die normale Fahrspurbreite W1 und die enge Fahrspurbreite W2 in dem Festdatenspeicher 9d gelesen werden. In Schritt S3, unter Verwendung der Fahrspurliniedetektionspunkte P als Startpunkte, werden normale Kandidatenpunkte G1 und enge Kandidatenpunkte G2 auf gegenüberliegenden Fahrspurlinien jeweils mit einem Abstand der normalen Fahrspurbreite W1 und mit einem Abstand der engen Fahrspurbreite W2 aufgezeichnet. Jedes der normalen engen Kandidatenpunkte G3 wird zudem an der vorbestimmten Position zwischen einem Paar normaler Kandidatenpunkte G1 und der engen Kandidatenpunkte G2 aufgezeichnet, d. h. an der Mittelposition zwischen zwei Kandidatenpunkten G1 und G2 (siehe 11 bis 13). In den 11 bis 13 sind die normalen Kandidatenpunkte G1 mit Kreisen, die engen Kandidatenpunkte G2 mit Quadraten und die normalen engen Kandidatenpunkte G3 mit Dreiecken dargestellt. Die Kandidatenpunkte G1 bis G3 sind aufgezeichnet auf der linken Seite und der rechten Seite, basierend auf den Fahrspurliniedetektionspunkten P, die auf der linken Seite und rechten Seite der Fahrspur detektiert wurden. Die Vorgänge in den Schritten S1 bis S3 entsprechen dem Prozess des Fahrspurliniekandidatenpunktsetzabschnitts 9a.
  • Das Programm schreitet dann zu Schritt S4 weiter, wo eine quadratische Kurvenannäherungsgleichung von y = ax2 + bx + c, welche die beste Kurvenannäherung ergibt, erhalten wird durch die Methode der kleinsten Quadrate, basierend auf den Koordinaten (x, y) der Punktsequenz der Fahrspurliniedetektionspunkte P und der Kandidatenpunkte G1 bis G3, die für jeden Datenblock beziehungsweise jedes Einzelbild auf der linken Seite und der rechten Seite der Fahrspur aufgetragen werden. Von der quadratischen Kurvenannäherungsgleichung wird die virtuelle Linie Ls für jeden der Kandidatenpunkte G1, G2 und G3 gesetzt. Hierbei steht die Konstante a für einen Parameter, in dem eine Krümmung der Fahrspurlinie eingeht, die Konstante b repräsentiert einen Winkelparameter, der mit einer Neigung (Gierwinkel) des Fahrzeugs bezüglich der virtuellen Linie im Zusammenhang steht, und die Konstante c repräsentiert einen Schnitt der y-Achse.
  • Dementsprechend werden die linken und rechten paarweisen virtuellen Linien Ls gesetzt durch die Konstanten a, b und c, die in der vorstehenden Gleichung beschrieben wurden, wobei das Fahrezug M definiert ist als eine Referenz. Der Vorgang in Schritt S4 entspricht dem Vorgang in dem Kurvenannäherungsprozessabschnitt 9b.
  • Anschließend geht das Programm weiter zu Schritt S5, wo die Streuung der Kandidatenpunkte G1 bis G3 bezüglich der virtuellen Linien Ls analysiert wird. In Schritt S6 und den folgenden Schritten wird bestimmt, ob die virtuellen Linien Ls eines von einer beidseitigen echten Fahrspurlinie, einer einseitigen echten Fahrspurlinie oder einer beidseitigen echten Führungslinie sind, basierend auf Kandidatenpunkten, deren Streuung die kleinste beziehungsweise geringste ist. Die virtuellen Linien Ls werden in der Breitenrichtung verschoben, basierend auf dem Ergebnis der Bestimmung, wobei die Positionen der echten Fahrspurlinien, die den linken und rechten Fahrspurlinien 21L und 21R entsprechen, welche die Fahrspur definieren, bestätigt werden.
  • Genauer gesagt, in Schritt S6 wird zunächst untersucht, ob die Streuung der normalen Kandidatenpunkte G1 die kleinste ist oder nicht. Wenn in Schritt S6 festgestellt wird, dass die Streuung der normalen Kandidatenpunkte G1 die kleinste ist, geht das Verfahren zu Schritt S21 weiter. Wenn nicht festgestellt wird, dass die Streuung der normalen Kandidatenpunkte G1 die kleinste ist, d. h., wenn festgestellt wird, dass die Streuung von entweder den engen Kandidatenpunkten G2 oder den normal engen Kandidatenpunkten G3 kleiner ist, geht das Verfahren zu Schritt S7 weiter.
  • Wenn festgestellt wird, dass die Streuung der normalen Kandidatenpunkte G1 die kleinste ist und das Programm zu Schritt S21 weitergeht, wird die Position der virtuellen Linien Ls der vorliegenden Detektion festgelegt als die Positionen der echten Fahrspurlinien, d. h. die inneren Ränder der tatsächlichen Fahrspurlinien 21L und 21R werden als zu detektieren festgelegt. Daraufhin wird das Programm verlassen.
  • Zum Beispiel ist auf einer Schnellstraße beziehungsweise einer Autobahn, bei der eine Fahrspurlinie 21L auf einer Seite und eine Fahrspurlinie 21R auf der anderen Seite einer Fahrspur aufgebracht ist, wie in 6 gezeigt, die Fahrspurbreite zwischen den linken Fahrspurliniedetektionspunkten P und den rechten Fahrspurliniedetektionspunkten P im Wesentlich gleich der normalen Fahrspurbreite W1. Daher werden, wie in 11 gezeigt, beispielsweise die Fahrspurliniedetektionspunkte P auf der rechten Seite der Fahrspur zuerst detektiert und dann werden die normalen Kandidatenpunkte G1 und die engen Kandidatenpunkte G2 auf der linken Seite der Fahrspur aufgezeichnet unter Verwendung der Fahrspurliniedetektionspunkte P als Startpunkte, jeweils mit einem Abstand der normalen Fahrspurbreite W1 und mit einem Abstand der engen Fahrspurbreite W2. Zudem werden die normalen engen Kandidatenpunkte G3 aufgezeichnet zwischen den Fahrspurbreiten W1 und W2 (beispielsweise an den Positionen mit einem Zwischenraum von [(W1 + W2)/2]).
  • Obwohl in den Figuren nicht dargestellt, werden die Fahrspurliniedetektionspunkte P an dem inneren Rand der Fahrspurlinie 21L auf der linken Seite der Fahrspur gesetzt. Die Fahrspurliniedetektionspunkte P sind daher dargestellt als eine Punktabfolge auf den Positionen nahe der entsprechenden normalen Kandidatenpunkte G1.
  • Dementsprechend ist die Streuung der normalen Kandidatenpunkte G1, unter den entsprechenden Kandidatenpunkten G1, G2 und G3 bezüglich der virtuellen Linie Ls die kleinste, wodurch festgestellt wird, dass die virtuellen Linien Ls der vorliegenden Detektion gebildet werden durch Detektion des inneren Randes der Fahrspurlinien 21L und 21R. Daher werden die Positionen der virtuellen Linien Ls als die Positionen der echten Fahrspurlinien bestätigt.
  • Andererseits, wenn das Programm von Schritt S6 zu Schritt S7 verzweigt, wird geprüft, ob die Streuung der engen Kandidatenpunkte G2 bezüglich der virtuellen Linie Ls die kleinste ist oder nicht. Wenn die Streuung der engen Kandidatenpunkte G2 als die kleinste bestimmt wird, geht das Programm zu Schritt S8 weiter. Wenn nicht festgestellt wird, dass die Streuung der engen Kandidatenpunkte G2 die geringste ist, d. h. die Streuung der normalen engen Kandidatenpunkte G3 die geringste ist, springt das Programm zu Schritt S14.
  • Wenn die Streuung der engen Kandidatenpunkte G2 als die geringste ermittelt wird und das Programm zu Schritt S8 weitergeht, werden die Fahrspurlinientypenbestimmungsdaten T1 (siehe Tabelle 1), die in dem Festdatenspeicher 9d gespeichert sind, gelesen. Tabelle 1 (Beide Seiten: Führungslinien)
    Linke Spur Linienzustand Rechte Spur Linienzustand Bestimmung
    Dick - Links: Führungslinie (oder Spurrille)/ Rechts: echte Fahrspurlinie
    - Dick Links: echte Fahrspurlinie/ Rechts: Führunglinie (oder Spurrille)
    Dick Dick Beide Seiten: Führungslinien (oder Spurrillen)
  • Eine mögliche Situation, in der die Dispersion beziehungsweise Streuung der engen Kandidatenpunkte G2 als die kleinste festgestellt wird, anders als bei doppelten weißen Linien bei denen die Führungslinien 22 innerhalb der Fahrspurlinien 21L und 21R aufgebracht sind, wie in 12 gezeigt, ist dann gegeben, wenn eine Spurrille 25 längs einer Fahrspurlinie (in der vorliegenden Ausführungsform längs der linken Fahrspurlinie 21L) ausgebildet ist und die innere Kante aufgrund der Helligkeitsunterschiede des reflektierten Lichtes von einer Pfütze in der Spurrille 25 detektiert wird, wie in den 13A bis 13C gezeigt. Genauer gesagt, wie in 13A gezeigt, wenn beispielsweise eine Spurrille 25, auch Spurrinne genannt, an der Innenseite der linken Fahrspurlinie 21L längs der linken Fahrspurlinie 21L ausgebildet ist und die innere Kante der Spurrille 25 als die Position lokalisiert wird, von wo der Abstand des inneren Randes der rechten Fahrspurlinie 21R die enge Fahrspurbreite W2 wird, wird die Punktsequenz der engen Kandidatenpunkte G2 naturgemäß längs der Nähe der inneren Kante der Spurrille 25 aufgezeichnet.
  • Andererseits, wenn die Pfütze in der Spurrille 25 ausgebildet ist und das Reflektionslicht von der Wasseroberfläche von beiden Kameras 1a und 1b empfangen wird, werden die Fahrspurliniedetektionspunkte P an der inneren Kante der Spurrille 25 gesetzt, wie in 13B gezeigt, da der Helligkeitsunterschied zwischen der inneren Kante der Spurrille 25 und der Straßenoberfläche groß ist. Als Ergebnis hiervon werden auf der rechten Fahrspurlinie 21R die normalen Kandidatenpunkte G1 und die engen Kandidatenpunkte G2 aufgezeichnet unter Verwendung der Fahrspurliniedetektionspunkte P, die in der Nähe der inneren Kante der Spurrille 25 als Startpunkte gesetzt sind, mit einem Abstand der normalen Fahrspurbreite W1 und einem Abstand der engen Fahrspurbreite W2. Zudem werden die normal engen Kandidatenpunkte G3 aufgezeichnet an vorbestimmten Positionen zwischen beiden Kandidatenpunkten G1 und G2.
  • Demzufolge, wenn eine Kurvenannäherungsgleichung erhalten wird durch die Methode der kleinsten Quadrate, basierend auf den Fahrspurliniedetektionspunkten P und den Kandidatenpunkten G1 bis G3, aufgezeichnet auf der rechten Seite und auf der linken Seite der Fahrspur, und die virtuellen Linien Ls gesetzt werden für jeden der Kandidatenpunkte G1, G2 und G3 anhand der Kurvenannäherungsgleichung, wird eine Punktsequenz der engen Kandidatenpunkte G2 aufgezeichnet in der Nähe der Fahrspurliniedetektionspunkte P auf der Fahrspurlinie 21R (siehe 13A), wie in 13C gezeigt. Daher wird die Streuung der engen Kandidatenpunkte G2 die kleinste bezüglich der virtuellen Linie Ls. Andererseits jedoch, auf der Fahrspurlinie 21L werden die Fahrspurliniedetektionspunkte P auf der inneren Kante der Spurrille 25 gesetzt und eine Punktsequenz der engen Kandidatenpunkte G2 wird in der Nähe der Fahrspurliniedetektionspunkte P aufgezeichnet (siehe 13A). Daher wird die Verteilung der engen Kandidatenpunkte G2 die kleinste bezüglich der virtuellen Linie Ls. Wenn die Spurrille 25 an der Innenseite der rechten Fahrspurlinie 21R ausgebildet ist, entsteht eine symmetrische Situation.
  • Demzufolge ist eine mögliche Situation, in der die Streuung beziehungsweise Verteilung der engen Kandidatenpunkte G2 die kleinste für jedes der linken virtuellen Linie Ls und der rechten virtuellen Linie Ls ist, eine andere als die zuvor beschriebene mit zwei weißen Linien, wie in 12 dargestellt ist, nämlich diejenige, dass eine Spurrille 25 auf einer Seite der Fahrspur irrtümlicherweise als weiße Linie erkannt wird. In Schritt S8 wird auf die zuvor erwähnten Fahrspurlinientypbestimmungsdaten T1 Bezug genommen, um zu bestimmen, ob die virtuellen Linien Ls, die auf der linken Seite und auf der rechten Seite der Fahrspur gesetzt sind, erhalten werden durch Detektieren der inneren Führungslinien 22 von doppelten weißen Linien, oder ob sie erhalten werden in einer solchen Art und Weise, dass eine der virtuellen Linien Ls detektiert wurde als die Fahrspurlinie 21L (oder 21R) und die andere erkannt wurde als die innere Kante der Spurrille 25. Bei dieser Bestimmung werden Detektionspunkte (äußere Fahrspurliniedetektionspunkte) U an dem äußeren Rand der Fahrspurlinie 21L und 21R gesetzt (siehe 13C) aus den Helligkeitsunterschieden zwischen den äußeren Rändern der Fahrspurlinien 21L und 21R auf beiden Seiten der Fahrspur und der Straßenoberfläche. Auf jeder Seite der Fahrspur wird eine Kurvenannäherungsgleichung erhalten durch die Methode der kleinsten Quadrate, basierend auf einer Punktsequenz der äußeren Fahrspurliniedetektionspunkte U, und eine Annäherungskurve Lu wird gesetzt auf der Kurvenannäherungsgleichung, um so einen Abstand (Linie-zu-Linie-Abstand) Y zwischen der Annäherungskurve Lu und der virtuellen Linie Ls zu erhalten.
  • Der Linie-zu-Linie-Abstand Y wird verglichen mit einem gesetzten Grenzwert. Wenn der Linie-zu-Linie-Abstand Y größer ist als der gesetzte Grenzwert, wird festgesetzt, dass die Linie dick ist. Der vorbestimmte Wert wird so gesetzt, dass er kürzer ist als der Abstand zwischen den äußeren Rändern der Fahrspurlinien 21L und 21R der doppelten weißen Linien und dem inneren Rand der entsprechenden inneren Führungslinie 22, und länger als die Linienbreite der Fahrspurlinie 21L (oder 21R). In dem Fall, in dem lediglich die Fahrspurlinien 21L und 21R auf der linken Seite und der rechten Seite der Fahrspur aufgebracht sind, wie in 11 gezeigt, ist der Linie-zu-Linie-Abstand Y klein. Andererseits, in dem Fall, in dem doppelte weiße Linien aufgebracht sind, wie in 12 gezeigt, oder eine Spurrille 25 ausgebildet ist, wie in 13 gezeigt, ist der Linie-zu-Linie-Abstand Y groß.
  • Dementsprechend wird in den Schritten S9 und S10 festgelegt, unter Bezug auf die Fahrspurlinientypbestimmungsdaten T1, ob eine der Linien auf der linken Seite und auf der rechten Seite der Fahrspur eine Spurrille 25 ist oder eine innere Führungslinie 22 einer doppelten weißen Linie. Wenn die linke Fahrspurlinie dick ist, wird festgelegt, dass die Linie auf der linken Seite der Fahrspur eine Spurrille 25 ist, und die Linie auf der rechten Seite die echte Fahrspurlinie ist. Dann schreitet das Programm von Schritt S9 zu Schritt S11, um die linke virtuelle Linie Ls zu einer normalen Position zu verschieben um einen größten Betrag, d. h. um den Betrag, der der Differenz zwischen der normalen Fahrspurbreite W1 und der engen Fahrspurbreite W2 (W1 – W2) entspricht. Dann schreitet das Programm zu Schritt S21, wo die Positionen der linken und rechten virtuellen Linien Ls in der vorliegenden Detektion festgelegt werden, so dass sie die Positionen der echten Fahrspurlinien sind. Dann wird das Programm verlassen. Die normale Position bedeutet hier die Position der inneren Ränder der Fahrspurlinie 21L (oder 21R).
  • Als Ergebnis wird, wie in 13C dargestellt, die virtuelle Linie Ls, die auf der inneren Kante der Spurrille 25 gesetzt ist, auf den inneren Rand der linken Fahrspurlinie 21L gesetzt, welche die echte Fahrspurlinie ist, oder an eine Stelle nahe des inneren Randes. Somit werden, selbst wenn die Spurrille 25 an einer Stelle ausgebildet ist, die im Wesentlichen gleich der Position der inneren Führungslinie 22 auf einer Seite der Fahrspur ist, die virtuellen Linien Ls präzise an den Stellen der linken und rechten Fahrspurlinien gesetzt, die die Fahrspur festlegen, und die virtuellen Linien Ls können als die echten Fahrspurlinien bestimmt werden.
  • Andererseits, wenn die rechte Fahrspurlinie dick ist, wird festgelegt, dass die Linie auf der rechten Seite der Fahrspur eine Spurrille 25 ist, und die Linie auf der linken Seite die echte Fahrspurlinie ist. Daher schreitet das Programm von Schritt S10 zu Schritt S12, um die rechte virtuelle Linie Ls auf die normale Position zu schieben um den größten Betrag (W1 – W2). Daraufhin schreitet das Verfahren zu Schritt S21, wo die Positionen der linken und rechten virtuellen Linien Ls in der vorliegenden Detektion festgelegt werden als die Positionen der echten Fahrspurlinien. Daraufhin wird das Programm verlassen.
  • Wenn sowohl die linke Fahrspurlinie als auch die rechte Fahrspurlinie dick sind, wird festgestellt, dass beide Fahrspurlinien echte Fahrspurlinien sind und doppelte weiße Linien, deren innere Führungslinien 22 detektiert werden. Daher schreitet das Programm von Schritt S10 zu Schritt S13, um die virtuellen Linien Ls auf beiden Seiten zu den normalen Positionen um einen kleinsten Betrag zu verschieben, d. h. um den Betrag entsprechend einer Hälfte der Differenz zwischen der normalen Fahrspurbreite W1 und der engen Fahrspurbreite W2 ((W1 – W2)/2). Daraufhin schreitet das Programm zu Schritt S21, wo die Positionen der linken und rechten virtuellen Linien Ls in der vorliegenden Detektion als die Positionen der echten Fahrspurlinien festgelegt werden.
  • Daraufhin wird das Programm verlassen. Als Ergebnis können die virtuellen Linien Ls präzise gesetzt werden auf den Positionen der linken und rechten Fahrspurlinien, die die Fahrspur festlegen, selbst wenn doppelte weiße Linien auf der Fahrspur aufgebracht sind, wie in 12 gezeigt, und die virtuellen Linien Ls werden in der Nähe der inneren Ränder der inneren Führungslinien 22 gesetzt.
  • Andererseits, wenn das Programm von Schritt S7 zu Schritt S14 verzweigt, werden die Fahrspurlinientypbestimmungsdaten T2 (siehe Tabelle 2), die in dem Festdatenspeicher 9d gespeichert sind, gelesen. Tabelle 2 (Eine Seite: Echte Fahrspurlinie)
    Zustand Linke Fahrspurlinie Zustand Rechte Fahrspurlinie Bestimmung
    Dick - Links: Spurrille/ Rechts: echte Fahrspurlinie
    - Dick Links: echte Fahrspurlinie/ Rechts: Spurrille
    Mäßig Dick Mäßig Dick Beide Seiten: enge Führungslinien
  • Wenn eine innere Kante der Spurrille 25, die auf einer Seite der Fahrspur ausgebildet ist, genau zwischen dem inneren Rand der Fahrspurlinie 21 und dem inneren Rand der inneren Führungslinie 22 ausgebildet ist, wird die Streuung beziehungsweise Verteilung der normalen engen Kandidatenpunkte G3 die kleinste als die Kandidatenpunkte nahe der virtuellen Linie Ls. Eine mögliche Situation, in der die Verteilung der normalen engen Kandidatenpunkte G3 als die kleinste festgelegt wird, anders als die Ausbildung der inneren Kante der Spurrille 25 zwischen der Fahrspurlinie 21 und dem inneren Rand der inneren Führungslinie 22, ist, dass die Fahrspurbreite abnimmt.
  • In Schritt S14 wird auf die zuvor erwähnten Fahrspurlinietypbestimmungsdaten T2 Bezug genommen, um zu bestimmen, ob eine der virtuellen Linien Ls, die auf der linken Seite und auf der rechten Seite der Fahrspur gesetzt sind, durch Detektieren der inneren Kante der Spurrille 25 erhalten wurde, oder ob sie erhalten wurde in Folge des Umstands, dass die Breite der Fahrspur selbst abnimmt. Hierbei werden, obwohl nicht dargestellt, so wie im Fall gemäß 13C, äußere Fahrspurliniedetektionspunkte U auf dem äußeren Rand der Fahrspurlinien 21L und 21R gesetzt anhand der Helligkeitsunterschiede zwischen den äußeren Rändern der Fahrspurlinien 21L und 21R auf beiden Seiten der Fahrspur und der Straßenoberfläche. Auf jeder Seite der Fahrspur wird eine Kurvenannäherungsgleichung erhalten aus der Methode der kleinsten Quadrate, basierend auf einer Punktsequenz der äußeren Fahrspurliniedetektionspunkte U, und eine Näherungskurve Lu wird gesetzt aus der Kurvenannäherungsgleichung, um einen Abstand (Linie-zu-Linie-Abstand) Y zwischen der Annäherungskurve Lu und der virtuellen Linie Ls zu erhalten.
  • Der Linie-zu-Linie-Abstand Y wird verglichen mit einem gesetzten Grenzwert. Wenn der Linie-zu-Linie-Abstand Y größer ist als der gesetzte Grenzwert, wird festgelegt, dass die Linie dick ist. Der vorbestimmte Wert wird so gesetzt, dass er kleiner ist als der Abstand zwischen den äußeren Rändern der Fahrspurlinien 21L und 21R und dem äußeren Rand der entsprechenden inneren Führungslinie 22, und größer als die Linienbreite der Fahrspurlinie 21L (oder 21R).
  • Wenn die linke Fahrspurlinie dick ist, wird festgelegt, dass die Linie auf der linken Seite der Fahrspur eine innere Führungslinie 22 (oder eine Spurrille 25) ist und die Linie auf der rechten Seite ist eine echte Fahrspurlinie. Somit schreitet das Programm von Schritt S15 zu Schritt S17, um die linke virtuelle Linie Ls zu der normalen Position um einen kleinsten Betrag, d. h. um den Betrag entsprechend einer Hälfte der Differenz zwischen der normalen Fahrspurbreite W1 und der engen Fahrspurbreite W2 ((W1 – W2)/2) zu verschieben. Daraufhin schreitet das Programm zu Schritt S21, wo die Positionen der linken und rechten virtuellen Linien Ls in der vorliegenden Detektion festgelegt werden als die Positionen der echten Fahrspurlinien, und das Programm wird daraufhin verlassen. Als Ergebnis können die virtuellen Linien Ls auf die linken und rechten Fahrspurlinien, die die Fahrspur festlegen, gesetzt werden, oder auf Positionen nahe den Fahrspurlinien, selbst wenn die Spurrille 25 auf der linken Seite der Fahrspur ausgebildet ist und zwischen der zuvor erwähnten inneren Führungslinie 22 und dem inneren Rand der Fahrspurlinie 21.
  • Andererseits, wenn die rechte Fahrspurlinie dick ist, wird festgelegt, dass die Linie auf der rechten Seite der Fahrspur eine innere Führungslinie 22 ist (oder eine Spurrille 25), und die Linie auf der linken Seite eine echte Fahrspurlinie ist. Das Programm schreitet daher von Schritt S16 zu Schritt S18, um die rechte virtuelle Linie Ls auf die normale Position um den kleinsten Betrag ((W1 – W2)/2) zu verschieben. Daraufhin schreitet das Programm zu Schritt S21, wo die Positionen der linken und rechten virtuellen Linien Ls in der vorliegenden Detektion festgelegt werden als die Positionen der echten Fahrspurlinien und das Programm wird daraufhin verlassen. Als Ergebnis können selbst in diesem Fall die virtuellen Linien Ls auf die inneren Ränder der linken und rechten Fahrspurlinien 21, die die Fahrspur festlegen, gesetzt werden oder auf die Position nahe der inneren Ränder, und entsprechend festgelegt werden.
  • Wenn die Fahrspurlinien auf beiden Seiten nicht dick sind, so wird festgestellt, dass die Breite der Fahrspur selbst abnimmt, d. h. die virtuellen Linien Ls auf beiden Seiten werden auf die inneren Ränder der Fahrspurlinien 21 gesetzt, welche echte Fahrspurlinien sind, oder auf Positionen nahe der Fahrspurlinien. Das Programm schreitet daher von Schritt S16 zu Schritt S19, wo geprüft wird, ob die Fahrspurlinien auf beiden Seiten mäßig dick sind oder nicht. Wenn die Fahrspurlinien mäßig dick sind, wird festgelegt, dass die Linien die engen inneren Führungslinien 22 sind. Daraufhin schreitet das Programm zu Schritt S20, wo die virtuellen Linien Ls auf der rechten Seite und auf der linken Seite verschoben werden zu der normalen Position um einen sehr kleinen Betrag, d. h. verschoben werden um einen Betrag entsprechend einem Viertel der Differenz zwischen der normalen Fahrspurbreite W1 und der engen Fahrspurbreite W2 ((W1 – W2)/4). Daraufhin schreitet das Programm zu Schritt S21, um die Positionen der virtuellen Linien Ls auf der linken Seite und der rechten Seite als die Positionen der echten Fahrspurlinien zu bestätigen, und das Programm wird daraufhin verlassen. Wenn nicht festgestellt wird, dass die Fahrspurlinien auf beiden Seiten mäßig dick sind, schreitet das Programm zu Schritt S21, um die Positionen der virtuellen Linien Ls auf der linken Seite und auf der rechten Seite als die Positionen der echten Fahrspurlinien zu bestätigen. Daraufhin wird das Programm verlassen.
  • Als ein Ergebnis können selbst in diesem Fall die virtuellen Linien Ls auf die inneren Ränder der linken und rechten Fahrspurlinien 21, die die Fahrspur definieren, gesetzt werden oder auf Positionen nahe der inneren Ränder, und können bestätigt werden. Die Verfahren in den Schritten S5 bis S19 entsprechen dem Verfahren des Fahrspurliniepositionsetzabschnitts 9c.
  • Wenn ein Fahrer beabsichtigt, das Fahrzeug M auf der Mitte der Fahrspur zu fahren, erhält die Lenksteuereinheit 10 in dem Lenksteuersystem B eine Kurvenannäherungsgleichung (y = ax2 + bx + c) an der Mitte auf einer quadratischen Kurvenannäherungsgleichung zum Erhalten der virtuellen Linien Ls auf der linken Seite und auf der rechten Seite, wobei hierdurch ein Lenkwinkel gesteuert wird, um das Fahrzeug M längs einer virtuellen Linie Lo, die von der Kurvenannäherungsgleichung erhalten wird, in der Mitte zu fahren, d. h. längs einer Krümmung a, wie in 9 gezeigt. Die Konstante c ist ein Versatzbetrag (in der seitlichen Richtung vom Ursprung aus) in der y-Achse bezüglich der Mitte des Fahrzeugs M (genau der Mittelpunkt beider Kameras 1a und 1b), der als der Ursprung definiert ist. In der vorliegenden Ausführungsform ist die linke Seite als positiv (+) spezifiziert, während die rechte Seite als negativ (–) spezifiziert ist. Wenn der Fahrer daher eine Auswahl dahingehend trifft, dass das Fahrzeug M auf der Mitte der Fahrspur fährt, ist c = 0, da die Mitte der Ursprung ist.
  • Die vorliegende Erfindung ist nicht auf die zuvor erläuterte Ausführungsform beschränkt. Beispielsweise kann die Fahrspurliniebeurteilungsvorrichtung angewandt werden auf eine Fahrspurbeibehaltungssteuerung, die einen Alarm auslöst, wenn das Fahrzeug M dabei ist, von der Fahrspur abzuweichen. Die Abbildeeinheit 1 muss nicht notwendigerweise eine Stereokamera mit einer Hauptkamera 1a und einer Hilfskamera 1b sein. Die Abbildeeinheit 1 kann auch eine monokulare Kamera sein. Wenn eine monokulare Kamera als Abbildeeinheit verwendet wird, ist eine drei-dimensionale Information erforderlich, beispielsweise mittels eines bekannten Bewegungsstereoverfahrens. Die Kurvenannäherungsgleichung, die in dem Kurvenannäherungsprozessabschnitt 9b erhalten wird, ist nicht auf einen quadratischen Ausdruck begrenzt, sondern kann auch ein kubischer Ausdruck sein.
  • ZUSAMMENFASSUNG DER OFFENBARUNG
  • Ein Festdatenspeicher 9d speichert Daten einer normalen Fahrspurbreite W1 zwischen Fahrspurlinien 21L und 21R und Daten einer engen Fahrspurbreite W2 zwischen inneren Führungslinien 22 von doppelten weißen Linien. Ein Fahrspurliniekandidatsetzabschnitt 9a detektiert Fahrspurliniedetektionspunkte P auf der linken Seite und der rechten Seite der Fahrspur, basierend auf dem Bild, das von einer Abbildeeinheit 1 aufgenommen wird, und setzt Fahrspurliniekandidatenpunkte G1 bis G3 auf die Fahrspurbreiten W1 und W2 und zwischen die Position der Fahrspurbreite W1 und die Position der Fahrspurbreite W2 auf der gegenüberliegenden Fahrspurlinie, wobei die Fahrspurliniedetektionspunkte als Startpunkte verwendet werden. Ein Kurvenannäherungsprozessabschnitt 9b setzt virtuelle Linien Ls auf der linken Seite und auf der rechten Seite der Fahrspur von einer Kurvenannäherungsgleichung, die erhalten wird basierend auf den Fahrspurliniedetektionspunkten P und den Fahrspurkandidatenpunkten G1 bis G3. Ein Fahrspurliniepositionsetzabschnitt 9c erhält Streuungen der Fahrspurliniekandidatenpunkte G1 bis G3 bezüglich der linken und rechten virtuellen Linien Ls, beurteilt den Fahrspurlinientyp von zumindest einer der linken und rechten virtuellen Linien gemäß dem Fahrspurlinientyp entsprechend der virtuellen Linie Ls, die die geringste Streuung aufweist, und bestimmt die Positionen der Fahrspurlinien basierend auf dem Fahrspurlinientyp.
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • JP 3733875 [0005, 0008]
    • JP 3603836 [0006, 0007, 0010]

Claims (6)

  1. Fahrspurliniebeurteilungsvorrichtung, umfassend: eine Abbildeeinheit, die an einem Fahrzeug montiert und dahingehend konfiguriert ist, ein Bild einer Außenumgebung des Fahrzeugs aufzunehmen; eine Speichereinheit, die dahingehend konfiguriert ist, Daten einer Fahrspurlinienbreite für jede von einer Vielzahl vorbestimmter Fahrspurlinientypen zu speichern; eine Fahrspurliniekandidatpunktsetzeinheit, die dahingehend konfiguriert ist, linke und rechte Fahrspurliniedetektionspunkte auf einer Fahrspur zu detektieren, auf der das Fahrzeug fährt, basierend auf einem Bild der Außenumgebung, das von der Abbildeeinheit aufgenommen wurde, und Fahrspurliniekandidatenpunkte auf der gegenüberliegenden Fahrspurlinie zu setzen in einem Abstand der Fahrspurlinienbreite, wobei die linken und rechten Fahrspurliniedetektionspunkte als Startpunkte verwendet werden; eine Kurvenannäherungsprozesseinheit, die dahingehend konfiguriert ist, eine Kurvenannäherungsgleichung zu erhalten, basierend auf Fahrspurliniedetektionspunkten gegenüber den Fahrspurliniedetektionspunkten, die von der Detektionseinheit detektiert wurden, und den Fahrspurliniekandidatenpunkten, die durch die Fahrspurliniekandidatenpunktsetzeinheit gesetzt wurden, um virtuelle Linien auf der linken Seite und der rechten Seite der Fahrspur zu setzen aus der Kurvenannäherungsgleichung; und eine Fahrspurlinientypbeurteilungseinheit, die dahingehend konfiguriert ist, die Streuung der virtuellen Linien, die von der Kurvenannäherungsprozesseinheit gesetzt wurden, zu erhalten, um so den Fahrspurlinientyp von zumindest einer der linken und rechten virtuellen Linien des Paars von linken und rechten virtuellen Linien, das die kleinste Streuung anzeigt, zu beurteilen.
  2. Fahrspurliniebeurteilungsvorrichtung nach Anspruch 1, wobei die in der Speichereinheit gespeicherten Daten der Fahrspurlinienbreite Daten einer normalen Breite aufweisen, die eine Breite zwischen inneren Rändern von Fahrspurlinien, die die Fahrspur auf der linken Seite und der rechten Seite begrenzen, anzeigt, und Daten einer engen Breite, die eine Breite zwischen inneren Rändern von inneren Führungslinien von doppelten weißen Linien anzeigt; und wobei der Fahrspurlinientyp, der von der Fahrspurlinientypbeurteilungseinheit beurteilt wird, zumindest beidseitige echte Fahrspurlinien, die den Fahrspurlinien auf der linken Seite und der rechten Seite der Fahrspur entsprechen, eine einseitige echte Fahrspurlinie, die der Fahrspurlinie auf einer Seite entspricht, und zweiseitige Führungslinien, die den inneren Führungslinien auf der linken Seite und der rechten Seite entsprechen, umfasst.
  3. Fahrspurliniebeurteilungsvorrichtung nach Anspruch 2, weiterhin umfassend eine Fahrspurliniepositionsetzeinheit, dahingehend konfiguriert, die Positionen der virtuellen Linien zu bestätigen als die Positionen der echten Fahrspurlinien, wenn die Fahrspurlinietypbeurteilungseinheit dahingehend beurteilt, dass der Fahrspurlinientyp die beidseitigen echten Fahrspurlinien ist.
  4. Fahrspurliniebeurteilungsvorrichtung nach Anspruch 2, wobei in dem Fall, in dem die Fahrspurlinientypbeurteilungseinheit beurteilt, dass der Fahrspurlinientyp die einseitige echte Fahrspurlinie ist, die Fahrspurliniepositionsetzeinheit festlegt, ob eine der virtuellen Linien die Fahrspurlinie ist oder die Führungslinie, basierend auf einem Abstand zwischen einem äußeren Rand der Fahrspurlinie und der virtuellen Linie, wobei, wenn die Fahrspurlinienpositionssetzeinheit ermittelt, dass die virtuelle Linie die Fahrspurlinie ist, die Fahrspurliniepositionsetzeinheit bestätigt, dass die Position der virtuellen Linie die Position der echten Fahrspurlinie ist und die Position bestätigt, wo die andere virtuelle Linie zur Außenseite der Fahrspurlinie verschoben wird um einen Betrag, der einer Hälfte der Differenz zwischen der normalen Breite und der engen Breite der Position der echten Fahrspurlinie entspricht, und wobei, wenn die Fahrspurliniepositionsetzeinheit ermittelt, dass die virtuelle Linie eine Führungslinie ist, die Fahrspurliniepositionsetzeinheit die Position der anderen virtuellen Linie als die Position der echten Fahrspurlinie bestätigt und die Position bestätigt, wo die virtuelle Linie verschoben wird zur Außenseite der Fahrspurlinie um einen Betrag, der einer Hälfte der Differenz zwischen der normalen Breite und der engen Breite als die Position der echten Fahrspurlinie entspricht.
  5. Fahrspurliniebeurteilungsvorrichtung nach Anspruch 2, wobei in dem Fall, in dem die Fahrspurlinientypbeurteilungsvorrichtung ermittelt, dass der Fahrspurlinientyp der virtuellen Linien die beidseitigen Führungslinien ist, die Fahrspurliniepositionsetzeinheit ermittelt, ob eine der virtuellen Linien die Fahrspurlinie ist oder die Führungslinie, basierend auf dem Abstand zwischen einem äußeren Rand der Fahrspurlinie und der virtuellen Linie, wobei, wenn die Fahrspurliniepositionsetzeinheit ermittelt, dass die virtuelle Linie die Fahrspurlinie ist, die Fahrspurliniepositionsetzeinheit die Position der virtuellen Linie als die Position der echten Fahrspurlinie bestätigt und die Position bestimmt, wo die andere virtuelle Linie verschoben wird zu der Außenseite der Fahrspur hin um einen Betrag entsprechend der Differenz zwischen der normalen Breite und der engen Breite als die Position der echten Fahrspurlinie; und wobei, wenn die Fahrspurliniepositionsetzeinheit ermittelt, dass die virtuelle Linie die Führungslinie ist, die Fahrspurliniepositionsetzeinheit ermittelt, ob die andere virtuelle Linie die Fahrspurlinie ist oder die Führungslinie, basierend auf dem Abstand zwischen dem äußeren Rand der anderen Fahrspurlinie und der anderen virtuellen Linie, und, wenn die Fahrspurliniepositionsetzeinheit ermittelt, dass die andere virtuelle Linie die Fahrspurlinie ist, die Fahrspurliniepositionsetzeinheit die Position der anderen virtuellen Linie als die Position der echten Fahrspurlinie bestätigt und die Position bestätigt, wo die virtuelle Linie verschoben wird zu der Außenseite der Fahrspurlinie um einen Betrag entsprechend der Differenz zwischen der normalen Breite und der engen Breite als die Position der echten Fahrspurlinie; und wenn die Fahrspurliniepositionsetzeinheit ermittelt, dass die virtuellen Linien auf beiden Seiten Führungslinien sind, die Fahrspurliniepositionsetzeinheit die Positionen bestätigt, wo die virtuellen Linien auf der linken Seite und auf der rechten Seite entsprechend verschoben werden zu der Außenseite der Fahrspur um einen Betrag entsprechend einer Hälfte der Differenz zwischen der normalen Breite und der engen Breite als die Position der echten Fahrspurlinien.
  6. Fahrspurliniebeurteilungsvorrichtung nach Anspruch 2, wobei, wenn die Fahrspurlinientypbeurteilungseinheit beurteilt, dass der Fahrspurlinientyp der virtuellen Linien auf der linken Seite und auf der rechten Seite die einseitige echte Fahrspurlinie ist, die Fahrspurliniepositionsetzeinheit ermittelt, ob die einseitige echte Fahrspurlinie die Fahrspurlinie ist, die Führungslinie oder eine Linie, die sich zwischen der Fahrspurlinie und der Führungslinie befindet, basierend auf dem Abstand zwischen der virtuellen Linie und dem äußeren Rand der Fahrspurlinie der virtuellen Linienseite, und wenn die Fahrspurliniepositionsetzeinheit ermittelt, dass die virtuellen Linien auf beiden Seiten die Linien zwischen den entsprechenden Fahrspurlinien und den korrespondierenden Führungslinien sind, die Fahrspurliniepositionsetzeinheit die Positionen bestätigt, wo die virtuellen Linien auf der linken Seite und auf der rechten Seite entsprechend verschoben werden nach links und nach rechts der Fahrspur um einen Betrag entsprechend einem Viertel der Differenz zwischen der normalen Breite und der engen Breite als die Positionen der echten Fahrspurlinien.
DE102011053002.9A 2010-09-08 2011-08-26 Fahrspurliniebeurteilungsvorrichtung Active DE102011053002B4 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010201204A JP5276637B2 (ja) 2010-09-08 2010-09-08 車線推定装置
JP2010-201204 2010-09-08

Publications (2)

Publication Number Publication Date
DE102011053002A1 true DE102011053002A1 (de) 2012-03-08
DE102011053002B4 DE102011053002B4 (de) 2023-10-12

Family

ID=45595545

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102011053002.9A Active DE102011053002B4 (de) 2010-09-08 2011-08-26 Fahrspurliniebeurteilungsvorrichtung

Country Status (4)

Country Link
US (1) US8611609B2 (de)
JP (1) JP5276637B2 (de)
CN (1) CN102442307B (de)
DE (1) DE102011053002B4 (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014205127A1 (de) 2013-04-17 2014-10-23 Ford Global Technologies, Llc Steuerung der Fahrdynamik eines Fahrzeugs mit Spurrillenausgleich
CN110803162A (zh) * 2018-08-03 2020-02-18 杭州海康机器人技术有限公司 车道保持方法及装置
CN112654997A (zh) * 2020-10-22 2021-04-13 华为技术有限公司 一种车道线检测方法和装置

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112011103834T8 (de) 2010-11-19 2013-09-12 Magna Electronics, Inc. Spurhalteassistent und Spurzentrierung
JP5799784B2 (ja) * 2011-12-06 2015-10-28 富士通株式会社 道路形状推定装置及びプログラム
KR20140019571A (ko) * 2012-08-06 2014-02-17 주식회사 만도 후측방 경보 시스템 및 방법
WO2014027478A1 (ja) * 2012-08-13 2014-02-20 本田技研工業株式会社 道路環境認識装置
JP6376429B2 (ja) * 2012-11-13 2018-08-22 株式会社リコー 対象地点到達検知装置、対象地点到達検知用プログラム、移動体機器制御システム及び移動体
US9063548B1 (en) 2012-12-19 2015-06-23 Google Inc. Use of previous detections for lane marker detection
US9081385B1 (en) * 2012-12-21 2015-07-14 Google Inc. Lane boundary detection using images
US10002433B2 (en) 2012-12-26 2018-06-19 Nippon Soken, Inc. Boundary line recognition apparatus and branch road determination apparatus
JP5805619B2 (ja) * 2012-12-26 2015-11-04 株式会社日本自動車部品総合研究所 境界線認識装置
JP6344638B2 (ja) * 2013-03-06 2018-06-20 株式会社リコー 物体検出装置、移動体機器制御システム及び物体検出用プログラム
JP6171612B2 (ja) * 2013-06-20 2017-08-02 株式会社豊田中央研究所 仮想レーン生成装置及びプログラム
KR101470189B1 (ko) * 2013-07-09 2014-12-05 현대자동차주식회사 차량의 주행제어 장치 및 방법
DE102013217860A1 (de) * 2013-09-06 2015-03-12 Robert Bosch Gmbh Verfahren und Vorrichtung zum Bestimmen eines Fahrbahnverlaufs einer Fahrbahn eines Fahrzeugs
JP6259239B2 (ja) * 2013-09-27 2018-01-10 株式会社Subaru 車両用白線認識装置
JP6259238B2 (ja) * 2013-09-27 2018-01-10 株式会社Subaru 車両用白線認識装置
KR20150042417A (ko) * 2013-10-11 2015-04-21 주식회사 만도 촬영부를 이용한 차선검출방법 및 차선검출시스템
KR101502511B1 (ko) * 2013-11-28 2015-03-13 현대모비스 주식회사 가상 차선 생성 장치와 방법 및 상기 장치를 구비하는 차선 유지 제어 시스템
KR101906951B1 (ko) 2013-12-11 2018-10-11 한화지상방산 주식회사 차선 검출 시스템 및 차선 검출 방법
JP5895955B2 (ja) * 2014-02-07 2016-03-30 トヨタ自動車株式会社 車線境界線検出装置
JP6185418B2 (ja) * 2014-03-27 2017-08-23 トヨタ自動車株式会社 走路境界区画線検出装置
CN103927754B (zh) * 2014-04-21 2016-08-31 大连理工大学 一种车载摄像机的标定方法
JP6389119B2 (ja) * 2014-12-25 2018-09-12 株式会社デンソー 車線境界線認識装置
JP6483446B2 (ja) * 2015-01-15 2019-03-13 トヨタ自動車株式会社 複合線判定装置及び複合線判定方法
JP6408935B2 (ja) * 2015-03-04 2018-10-17 株式会社Soken 走行区画線認識装置
JP2017024538A (ja) * 2015-07-22 2017-02-02 修一 田山 自動車接近警告システム
US10055651B2 (en) 2016-03-08 2018-08-21 Magna Electronics Inc. Vehicle vision system with enhanced lane tracking
WO2017158973A1 (ja) * 2016-03-17 2017-09-21 本田技研工業株式会社 自動搬送車
KR102455835B1 (ko) * 2016-07-20 2022-10-18 현대모비스 주식회사 차량의 휠 얼라인먼트 틀어짐 판단 장치 및 방법
DE102016009304A1 (de) * 2016-08-01 2018-02-01 Lucas Automotive Gmbh Steuerungs-System und Steuerungs-Verfahren zum Bestimmen einer Fahrbahn
JP6637399B2 (ja) * 2016-09-30 2020-01-29 株式会社デンソー 領域認識装置及び領域認識方法
JP6844235B2 (ja) * 2016-12-08 2021-03-17 富士通株式会社 距離測定装置および距離測定方法
TWI621073B (zh) * 2016-12-08 2018-04-11 Road lane detection system and method thereof
KR102383426B1 (ko) * 2016-12-15 2022-04-07 현대자동차주식회사 톨게이트 구간 판단 장치 및 방법
JP6450413B2 (ja) * 2017-03-31 2019-01-09 本田技研工業株式会社 車両制御装置
CN109029438B (zh) * 2017-06-12 2023-05-05 广州英卓电子科技有限公司 一种在有限区域内的车辆定位方法
JP6627152B2 (ja) * 2017-09-08 2020-01-08 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
US10446027B1 (en) 2017-12-11 2019-10-15 Waymo Llc Differentiating roadways by elevation
TWI641516B (zh) * 2018-03-06 2018-11-21 國立交通大學 車道線偵測方法
EP3784989B1 (de) * 2018-05-15 2024-02-14 Mobileye Vision Technologies Ltd. Systeme und verfahren zur autonomen fahrzeugnavigation
CN110867131A (zh) * 2019-11-20 2020-03-06 北京百度网讯科技有限公司 用于更新地图的方法、装置、设备和存储介质
US10867190B1 (en) * 2019-11-27 2020-12-15 Aimotive Kft. Method and system for lane detection
CN113327456A (zh) * 2020-02-28 2021-08-31 华为技术有限公司 一种车道结构检测方法及装置
JP7342807B2 (ja) * 2020-06-30 2023-09-12 トヨタ自動車株式会社 走行予定経路設定装置及び走行予定経路設定方法
JP2022060079A (ja) * 2020-10-02 2022-04-14 株式会社Subaru 車両の車線区画線認識装置
CN115049994A (zh) * 2021-02-25 2022-09-13 广州汽车集团股份有限公司 一种车道线检测方法及系统、计算机可读存储介质
CN115116019B (zh) * 2022-07-13 2023-08-01 阿波罗智能技术(北京)有限公司 车道线处理方法、装置、设备以及存储介质
CN116594409B (zh) * 2023-07-17 2023-10-13 青岛能征智能装备有限公司 一种无人驾驶控制系统及其无人驾驶战车

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3603836B2 (ja) 2001-11-20 2004-12-22 日産自動車株式会社 道路白線認識装置
JP3733875B2 (ja) 2000-09-29 2006-01-11 日産自動車株式会社 道路白線認識装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5487116A (en) * 1993-05-25 1996-01-23 Matsushita Electric Industrial Co., Ltd. Vehicle recognition apparatus
US5987174A (en) * 1995-04-26 1999-11-16 Hitachi, Ltd. Image processing apparatus for vehicles
EP1383100A3 (de) * 1996-08-28 2005-02-02 Matsushita Electric Industrial Co., Ltd. Lokales Positionierungsgerät und Verfahren dafür
JP3516856B2 (ja) * 1998-01-30 2004-04-05 富士重工業株式会社 車外監視装置
JP3319383B2 (ja) * 1998-03-11 2002-08-26 株式会社豊田中央研究所 走行路認識装置
US6819779B1 (en) * 2000-11-22 2004-11-16 Cognex Corporation Lane detection system and apparatus
JP3890928B2 (ja) * 2001-07-26 2007-03-07 日産自動車株式会社 仕切線認識装置
JP4016735B2 (ja) * 2001-11-30 2007-12-05 株式会社日立製作所 レーンマーク認識方法
JP2005301603A (ja) 2004-04-09 2005-10-27 Denso Corp 走行車線検出装置
JP3898709B2 (ja) * 2004-05-19 2007-03-28 本田技研工業株式会社 車両用走行区分線認識装置
JP4437714B2 (ja) * 2004-07-15 2010-03-24 三菱電機株式会社 車線認識画像処理装置
JP3912416B2 (ja) * 2005-05-31 2007-05-09 トヨタ自動車株式会社 車両逸脱防止制御装置
JP4950858B2 (ja) * 2007-11-29 2012-06-13 アイシン・エィ・ダブリュ株式会社 画像認識装置及び画像認識プログラム
JP5411284B2 (ja) * 2008-11-06 2014-02-12 ボルボ テクノロジー コーポレイション 実際の軌道を進行している車両の横方向のずれを、推定された仮想道路に基づいて決定し、横方向のずれに基づき運転者の横方向制御能力を決定するための方法、システム及びコンピュータプログラム製品

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3733875B2 (ja) 2000-09-29 2006-01-11 日産自動車株式会社 道路白線認識装置
JP3603836B2 (ja) 2001-11-20 2004-12-22 日産自動車株式会社 道路白線認識装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014205127A1 (de) 2013-04-17 2014-10-23 Ford Global Technologies, Llc Steuerung der Fahrdynamik eines Fahrzeugs mit Spurrillenausgleich
CN110803162A (zh) * 2018-08-03 2020-02-18 杭州海康机器人技术有限公司 车道保持方法及装置
CN110803162B (zh) * 2018-08-03 2021-05-11 杭州海康机器人技术有限公司 车道保持方法及装置
CN112654997A (zh) * 2020-10-22 2021-04-13 华为技术有限公司 一种车道线检测方法和装置
CN112654997B (zh) * 2020-10-22 2022-04-29 华为技术有限公司 一种车道线检测方法和装置

Also Published As

Publication number Publication date
JP2012058983A (ja) 2012-03-22
US8611609B2 (en) 2013-12-17
DE102011053002B4 (de) 2023-10-12
JP5276637B2 (ja) 2013-08-28
CN102442307B (zh) 2015-01-21
CN102442307A (zh) 2012-05-09
US20120057757A1 (en) 2012-03-08

Similar Documents

Publication Publication Date Title
DE102011053002B4 (de) Fahrspurliniebeurteilungsvorrichtung
DE102015104453B4 (de) Stereobildverarbeitungsvorrichtung für ein Fahrzeug
DE102014116140B4 (de) Einparkhilfsvorrichtung und Einparkhilfsverfahren für ein Fahrzeug
EP1928687B1 (de) Verfahren und fahrerassistenzsystem zur sensorbasierten anfahrtsteuerung eines kraftfahrzeugs
DE102005015837B4 (de) Fahrspurerfassungsvorrichtung
DE102008006375B4 (de) Überwachungssystem
DE102015213701A1 (de) Sensorsystem für ein Fahrzeug zum Erkennen von Brücken oder Tunneleinfahrten
DE102019106375B4 (de) Fahrzeugsteuervorrichtung
EP1589484A1 (de) Verfahren zur Erkennung und/oder Verfolgung von Objekten
DE102013207575A1 (de) Objekterkennungsvorrichtung
DE102014112797A1 (de) Fahrzeugaußenumgebungerkennungsvorrichtung
DE102015111907B4 (de) Algorithmus zum Erweitern des Erkennungsbereichs für eine AVM-Haltelinienerkennung
DE112017005447T5 (de) Objekterfassungsvorrichtung
DE102006005512A1 (de) System und Verfahren zur Messung der Entfernung eines vorausfahrenden Fahrzeugs
DE102014112820A1 (de) Fahrzeugaußenumgebungerkennungsvorrichtung
DE102014215372A1 (de) Fahrerassistenzsystem
DE102006036402A1 (de) System und Verfahren zur Messung der Entfernung eines vorausfahrenden Fahrzeugs
DE102012005851A1 (de) Verfahren zum Warnen des Fahrers eines Kraftfahrzeugs vor der Anwesenheit einesObjekts in der Umgebung des Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102013012930A1 (de) Verfahren zum Bestimmen eines aktuellen Abstands und/oder einer aktuellen Geschwindigkeit eines Zielobjekts anhand eines Referenzpunkts in einem Kamerabild, Kamerasystem und Kraftfahrzeug
EP2856390A1 (de) Verfahren und vorrichtung zur verarbeitung stereoskopischer daten
DE102018100909A1 (de) Verfahren zum Rekonstruieren von Bildern einer Szene, die durch ein multifokales Kamerasystem aufgenommen werden
DE102012024878A1 (de) Verfahren zum Detektieren eines Zielobjekts anhand eines Kamerabilds durch Clusterbildung aus mehreren benachbarten Bildzellen, Kameraeinrichtung und Kraftfahrzeug
DE102014113359B4 (de) Filtervorrichtung und Umgebungserkennungssystem
DE102013103952A1 (de) Spurerkennung bei voller Fahrt mit einem Rundumsichtsystem
DE102013103953B4 (de) Spurerkennung bei voller Fahrt unter Verwendung mehrerer Kameras

Legal Events

Date Code Title Description
R081 Change of applicant/patentee

Owner name: SUBARU CORPORATION, JP

Free format text: FORMER OWNER: FUJI JUKOGYO KABUSHIKI KAISHA, TOKYO, JP

R082 Change of representative

Representative=s name: BITTNER & PARTNER, 85049 INGOLSTADT, DE

Representative=s name: BITTNER & PARTNER RECHTS- UND PATENTANWAELTE, DE

Representative=s name: STAUDT IP LAW, DE

Representative=s name: BITTNER & PARTNER, DE

R082 Change of representative

Representative=s name: STAUDT IP LAW, DE

R081 Change of applicant/patentee

Owner name: SUBARU CORPORATION, JP

Free format text: FORMER OWNER: FUJI JUKOGYO KABUSHIKI KAISHA, TOKYO, JP

R082 Change of representative

Representative=s name: STAUDT IP LAW, DE

R012 Request for examination validly filed
R084 Declaration of willingness to licence
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R082 Change of representative

Representative=s name: SONNENBERG HARRISON PARTNERSCHAFT MBB PATENT- , DE