DE102014116362B3 - Rundumsicht-Überwachungsvorrichtung und Verfahren dafür - Google Patents

Rundumsicht-Überwachungsvorrichtung und Verfahren dafür Download PDF

Info

Publication number
DE102014116362B3
DE102014116362B3 DE102014116362.1A DE102014116362A DE102014116362B3 DE 102014116362 B3 DE102014116362 B3 DE 102014116362B3 DE 102014116362 A DE102014116362 A DE 102014116362A DE 102014116362 B3 DE102014116362 B3 DE 102014116362B3
Authority
DE
Germany
Prior art keywords
line
parking
video
park
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102014116362.1A
Other languages
English (en)
Inventor
Seong Soo Lee
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Mobis Co Ltd
Original Assignee
Hyundai Mobis Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Mobis Co Ltd filed Critical Hyundai Mobis Co Ltd
Application granted granted Critical
Publication of DE102014116362B3 publication Critical patent/DE102014116362B3/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/102Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30264Parking

Abstract

Die vorliegende Erfindung stellt eine Rundumsicht-(AVM)-Überwachungsvorrichtung bereit, die ein Kameramodul aufweist, das eine Vielzahl von Videos um ein Fahrzeug herum erzielt, eine Displayeinheit, die ein Rundumsichtvideo anzeigt, eine Steuereinheit, die die Vielzahl von Videos zusammengefügt, um ein Rundumsichtvideo zu erzeugen, eine erste Parklinie und eine zweite Parklinie aus dem Rundumsichtvideo erfasst, die erfasste erste und zweite Parklinie mitverfolgt und eine imaginäre Parklinie erzeugt, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, um die Displayeinheit zu steuern, um das Rundumsichtvideo auszugeben.

Description

  • Querverweis zu verwandten Anmeldungen
  • Die vorliegende Anmeldung beansprucht die Priorität der koreanischen Patentanmeldung Nummer 10-2014-0100002 , eingereicht am 04. August 2014, deren gesamter Inhalt vorliegend für alle Zwecke durch diesen Verweis aufgenommen wird.
  • Technisches Gebiet
  • Die vorliegende Erfindung betrifft eine Rundumsicht-(AVM)-Überwachungsvorrichtung, die ein Video um ein Fahrzeug anzeigt, und ein Verfahren dafür, und insbesondere eine AVM-Vorrichtung, die eine AVM-Anzeige anzeigt, die eine imaginäre Parklinie aufweist, und ein Verfahren dafür.
  • Stand der Technik
  • In jüngerer Zeit, in Übereinstimmung mit der Verbesserung und der Multi-Funktionalisierung eines Fahrzeugs, wird ein Rundumsicht-Überwachungssystem (Around View Monitoring, (abgekürzt ein AVM) in dem Fahrzeug installiert.
  • Das AVM-System ist ein System, das Videos um das Fahrzeug herum über Kameras, die in vier Richtungen des Fahrzeugs installiert sind, erfasst und es einem Fahrer erlaubt, die Umgebung des Fahrzeugs durch ein Anzeigegerät, das innerhalb des Fahrzeugs installiert ist, zu prüfen, ohne absichtlich rückwärts zu blicken oder die Umgebung in einem Zeitpunkt des Einparkens eines Fahrzeugs zu prüfen. Ferner setzt das AVM-System die Videos der Umgebung zusammen, um eine Rundumsicht bereitzustellen, so als würde von einer Oberseite des Fahrzeugs her betrachtet. Der Fahrer kann dann eine Situation um das Fahrzeug auf einen Blick bestimmen, um das Fahrzeug sicher einzuparken oder auf einer schmalen Straße unter Verwendung des AVM-Systems zu fahren.
  • Wenn jedoch ein Teil der Parklinie durch ein anderes Fahrzeug blockiert ist, kann das AVM-System des Stands der Technik eventuell keine klare Parklinie in dem Zeitpunkt des Unterstützens beim Einparken anzeigen.
  • Patentliteratur: Ungeprüfte koreanische Patentanmeldung KR 10 2012 0 028 230 A . Die DE 10 2013 204 079 A1 offenbart eine Rundumsicht-(AVM)-Überwachungsvorrichtung umfassend ein Kameramodul, das eine Vielzahl von Videos um ein Fahrzeug herum erzielt, eine Displayeinheit, die ein Rundumsichtvideo anzeigt, und eine Steuereinheit, die die Vielzahl von Videos zusammenfügt, um ein Rundumsichtvideo (AVM) zu erzeugen, und eine erste Parklinie und eine zweite Parklinie aus dem Rundumsichtvideo erfasst.
  • Kurzdarstellung
  • Die vorliegende Erfindung erfolgte in einer Bemühung, eine AVM-Vorrichtung bereitzustellen, die eine AVM-Anzeige anzeigt, die eine imaginäre Parklinie enthält, und ein Verfahren dafür.
  • Aufgaben der vorliegenden Erfindung sind nicht auf die oben beschriebenen Aufgaben beschränkt, und der Fachmann versteht aufgrund der folgenden Beschreibung klar andere Aufgaben, die nicht erwähnt sind.
  • Eine beispielhafte Ausführungsform der vorliegenden Erfindung stellt eine Rundumsicht-(AVM)-Vorrichtung bereit, die Folgendes aufweist: ein Kameramodul, das eine Vielzahl von Videos um ein Fahrzeug herum erzielt, eine Displayeinheit, die ein AVM-Video anzeigt, und eine Steuereinheit, die die Vielzahl von Videos zusammenfügt, um ein AVM-Video zu erzeugen, eine erste Parklinie und eine zweite Parklinie aus dem AVM-Video erfasst, die erfasste erste und zweite Parklinie mitverfolgt und eine imaginäre Parklinie erzeugt, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, um die Displayeinheit zum Ausgeben des AVM-Videos zu steuern.
  • Die AVM-Vorrichtung kann ferner einen Speicher aufweisen, der eine Nachschlagetabelle speichert, und die Steuereinheit kann das AVM-Video unter Verwendung der Nachschlagetabelle erzeugen.
  • Die Steuereinheit kann Folgendes aufweisen: eine Videozusammenfügeeinheit, die die Vielzahl von Videos zusammengefügt, um ein AVM-Video zu erzeugen, eine Erfassungseinheit, die eine erste Parklinie und eine zweite Parklinie aus dem AVM Video erfasst, eine Mitverfolgungseinheit, die die erste Parklinie und die zweite Parklinie mitverfolgt, und eine Vorhersageeinheit, die eine imaginäre Parklinie erzeugt, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird.
  • Die Erfassungseinheit kann Folgendes aufweisen: eine Videoumwandlungseinheit, die das AVM-Video in ein Graustufenvideo umwandelt, eine Haubenfiltereinheit, die eine Vielzahl von Merkmalspunkten unter Verwendung einer Beleuchtungsablenkung des Graustufenvideos extrahiert, und eine Parklinienerkennungseinheit, die Linienbestandteile für die Vielzahl von Merkmalspunkten extrahiert, um die erste und zweite Parklinie zu erkennen.
  • Die Erfassungseinheit kann Folgendes aufweisen: eine Zwischenlinienabstand-Bestimmungseinheit, die einen Zwischenlinienabstand der ersten und zweiten Parklinie bestimmt.
  • Die Vorhersageeinheit kann eine Parklinienerzeugungseinheit aufweisen, die, wenn die erste oder die zweite Linie nicht mitverfolgt wird, eine imaginäre Parklinie erzeugt, die nicht mitverfolgt wird, und eine Videoanwendungseinheit, die die imaginäre Parklinie, die von der Parklinienerzeugungseinheit erzeugt wird, auf das AVM-Video anwendet.
  • Die Erfassungseinheit kann Folgendes aufweisen: eine Zwischenlinienabstand-Bestimmungseinheit, die einen Zwischenlinienabstand zwischen der ersten und der zweiten Parklinie bestimmt und wobei die Vorhersageeinheit die erste Parklinie basierend auf der zweiten Parklinie und dem Zwischenlinienabstand vorhersagen kann, wenn die erste Parklinie nicht mitverfolgt wird.
  • Die Erfassungseinheit kann Folgendes aufweisen: eine Zwischenlinienabstand-Bestimmungseinheit, die einen Zwischenlinienabstand der ersten und zweiten Parklinie bestimmt,
    wobei die Vorhersageeinheit die zweite Parklinie basierend auf der ersten Parklinie und dem Zwischenlinienabstand vorhersagen kann, wenn die zweite Parklinie nicht mitverfolgt wird.
  • Die Mitverfolgungseinheit kann die erste und die zweite Parklinie basierend auf dem Unterschied von Winkeln oder Entfernungen der ersten und der zweiten Parklinie in einem vorhergehenden und einem aktuellen Video mitverfolgen.
  • Das Kameramodul kann Folgendes aufweisen: eine erste Kamera, die an der Frontseite des Fahrzeugs angeordnet ist, um ein Frontumgebungsvideo zu erzielen, eine zweite Kamera, die an der Heckseite des Fahrzeugs angeordnet ist, um ein Heckumgebungsvideo zu erzielen, eine dritte Kamera, die an der linken Seite des Fahrzeugs angeordnet ist, um ein Video um die linke Seite herum zu erzielen, und eine vierte Kamera, die an der rechten Seite des Fahrzeugs angeordnet ist, um ein Video um die rechte Seite herum zu erzielen.
  • Die Displayeinheit kann ein audiovisuelles Navigations-(AVN)-Modul, das in dem Fahrzeug installiert ist, sein.
  • Eine andere beispielhafte Ausführungsform der vorliegenden Erfindung stellt ein Verfahren zum Betreiben einer AVM-Vorrichtung bereit, wobei das Verfahren Folgendes aufweist: Einholen einer Vielzahl von Videos um ein Fahrzeug, Erzeugen eines AVM-Videos durch Zusammenfügen der Vielzahl von Videos, Erfassen einer ersten und einer zweiten Parklinie aus dem AVM-Video, Mitverfolgen der ersten und zweiten Parklinie, Vorhersagen einer imaginären Parklinie, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, und Anzeigen eines AVM, das die imaginäre Parklinie aufweist.
  • Das Erzeugen kann das Erzeugen des AVM-Videos unter Verwendung einer Nachschlagetabelle, die in einem Speicher gespeichert ist, aufweisen.
  • Das Erfassen kann das Umwandeln des AVM-Videos in ein Graustufenvideo, das Extrahieren einer Vielzahl von Merkmalspunkten unter Verwendung einer Beleuchtungsabweichung des Graustufenvideos und das Extrahieren von Linienbestandteilen der Vielzahl von Merkmalspunkten zum Erkennen der ersten und zweiten Parklinie aufweisen.
  • Das Erfassen kann ferner das Bestimmen eines Zwischenlinienabstands der ersten und der zweiten Parklinie aufweisen.
  • Das Vorhersagen kann das Erzeugen einer imaginären Parklinie, die nicht mitverfolgt wird, aufweisen, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, und das Anwenden der erzeugten imaginären Parklinie auf das AVM-Video.
  • Das Verfahren kann ferner das Bestimmen eines Zwischenlinienabstands der ersten und zweiten Parklinie aufweisen, und das Vorhersagen kann das Vorhersagen der ersten Parklinie basierend auf der zweiten Parklinie und dem Zwischenlinienabstand aufweisen, wenn die erste Parklinie nicht mitverfolgt wird.
  • Das Verfahren kann ferner das Bestimmen eines Zwischenlinienabstands der ersten und zweiten Parklinie aufweisen, und das Vorhersagen kann das Vorhersagen der zweiten Parklinie basierend auf der ersten Parklinie und dem Zwischenlinienabstand aufweisen, wenn die zweite Parklinie nicht mitverfolgt wird.
  • Die Mitverfolgungseinheit kann die erste und die zweite Parklinie basierend auf einem Unterschied von Winkeln oder einem Unterschied von Entfernungen der ersten und der zweiten Parklinie in einem vorhergehenden und einem aktuellen Video mitverfolgen.
  • Ausführliche Elemente anderer beispielhafter Ausführungsformen sind in der ausführlichen Beschreibung und in den Zeichnungen enthalten.
  • Gemäß der beispielhaften Ausführungsform der vorliegenden Erfindung, gibt es einen oder mehrere Vorteile wie folgt.
  • Die Steuereinheit 200 gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung und einem Betriebsverfahren dafür zeigt ein zusammengesetztes AVM-Video an, in dem eine imaginäre Parklinie basierend auf Videos um das Fahrzeug in einem Zielparkabschnitt eingestellt wird, in dem keine Parklinie bereitgestellt wird, um es einem Benutzer zu erlauben, den Zielparkabschnitt des Fahrzeugs zu erkennen, um das Fahrzeug leicht einzuparken, wodurch die Bequemlichkeit für den Benutzer erhöht wird.
  • Die Effekte der vorliegenden Erfindung sind nicht auf die oben genannten Effekte beschränkt, und andere Effekte, die oben nicht erwähnt sind, können vom Fachmann dank der Ansprüche klar verstanden werden.
  • Kurze Beschreibung der Zeichnungen
  • 1 ist eine Ansicht, die schematisch ein Fahrzeug veranschaulicht, das eine AVM-Vorrichtung gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung aufweist.
  • 2 ist ein Blockschaltbild einer AVM-Vorrichtung gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung.
  • 3 ist ein spezifisches Blockschaltbild einer Steuereinheit gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung.
  • 4 ist ein Flussdiagramm, das einen Betrieb einer AVM-Vorrichtung gemäß einer ersten beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • 5 ist eine Ansicht, die einen Betrieb des Extrahierens eines Merkmalspunktes einer Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • 6 ist eine Ansicht, die einen Vorgang des Erkennens einer Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • 7 ist eine Ansicht, die einen Vorgang des Erkennens einer ersten Parklinie und des Vorhersagens einer zweiten Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • 8 ist ein Flussdiagramm, das einen Betrieb einer AVM-Vorrichtung gemäß einer zweiten beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • 9 ist eine Ansicht, die einen Betrieb des Bestimmens eines Zwischenlinienabstands gemäß einer zweiten beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • 10 ist eine Ansicht, die einen Vorgang des Erkennens einer zweiten Parklinie und des Vorhersagens einer zweiten Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Ausführliche Beschreibung der Erfindung
  • Vorteile und Merkmale der vorliegenden Erfindung und ein Verfahren zum Erzielen der Vorteile und Merkmale ergeben sich klar unter Bezugnahme auf beispielhafte Ausführungsformen, die unten ausführlich gemeinsam mit den begleitenden Zeichnungen beschrieben sind. Die vorliegende Erfindung ist jedoch nicht auf beispielhafte Ausführungsformen, die hier offenbart sind, beschränkt, sondern wird in unterschiedlichen Formen umgesetzt. Die beispielhaften Ausführungsformen, die hier eingeführt werden, werden bereitgestellt, um den offenbarten Inhalt der vorliegenden Erfindung für den Fachmann gründlich, vollständig und ausreichend zu vermitteln. Gleiche Bezugszeichen zeigen in der gesamten Patentschrift gleiche Elemente an.
  • Ein Begriff, der eine Ordnungsnummer enthält, wie zum Beispiel erster oder zweiter, der in der vorliegenden Erfindung verwendet wird, kann verwendet werden, um Bauteile zu erklären, aber die Bauteile sind nicht durch die Begriffe begrenzt. Die oben stehenden Begriffe werden nur zum Unterscheiden eines Bauteils von einem anderen Bauteil verwendet.
  • In der folgenden Beschreibung weist eine linke Seite des Fahrzeugs auf eine linke Seite einer Fahrrichtung des Fahrzeugs hin, das heißt eine Fahrersitzseite, und eine rechte Seite des Fahrzeugs weist auf eine rechte Seite der Fahrrichtung des Fahrzeugs hin, das heißt eine Beifahrersitzseite.
  • 1 ist eine Ansicht, die schematisch ein Fahrzeug veranschaulicht, das eine AVM-Vorrichtung gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung aufweist.
  • Unter Bezugnahme auf 1, weist eine AVM-Vorrichtung 100, die in einem Fahrzeug 10 installiert ist, ein Kameramodul 110 auf. Hier werden wünschenswert vier Kameramodule 110 bereitgestellt, um Videos von einer Frontseite, einer Heckseite, einer linken Seite und einer rechten Seite des Fahrzeugs 10 zu erfassen. Das Kameramodul 110 weist eine erste Kamera 111, eine zweite Kamera 112, eine dritte Kamera 113 und eine vierte Kamera 114 auf.
  • Das Kameramodul 110 ist an der Außenseite des Fahrzeugs 10 vorgesehen, um Videos um das Fahrzeug 10 herum zu erfassen. Hier ist die Kamera, die in dem Kameramodul 110 enthalten ist, wünschenswert eine Superweitwinkelkamera, die einen Blickwinkel von 180 Grad oder größer hat.
  • Indes wird angenommen, dass das Kameramodul 110 in dieser Patentschrift vier Kameras 111, 112, 113 und 114 aufweist, aber die vorliegende Erfindung ist darauf nicht beschränkt.
  • Die erste Kamera 111 kann zum Beispiel an der Frontseite des Fahrzeugs 10 vorgesehen sein, um ein Video um die Frontseite des Fahrzeugs 10 herum zu erfassen. Die erste Kamera 110 kann auf einem Abschnitt eines vorderen Stoßfängers installiert sein.
  • Die zweite Kamera 112 ist an der Heckseite des Fahrzeugs vorgesehen, um ein Video um die Heckseite des Fahrzeugs 10 zu erfassen. Die zweite Kamera 112 kann auf einem Abschnitt eines hinteren Stoßfängers, nämlich einer Oberseite oder Unterseite eines Kfz-Kennzeichens installiert sein.
  • Die dritte Kamera 113 ist an der linken Seite des Fahrzeugs vorgesehen, um ein Video um die linke Seite des Fahrzeugs 10 herum zu erfassen. Die dritte Kamera 113 kann an einem Abschnitt eines linken Seitenspiegels des Fahrzeugs oder an einem Abschnitt eines vorderen Stoßfängers installiert sein.
  • Die vierte Kamera 114 ist an der rechten Seite des Fahrzeugs 10 vorgesehen, um ein Video um die rechte Seite des Fahrzeugs 10 herum zu erfassen. Die vierte Kamera 114 kann an einem Abschnitt eines rechten Seitenspiegels des Fahrzeugs 10 oder an einem Abschnitt eines vorderen Stoßfängers installiert sein.
  • 2 ist ein Blockschaltbild einer AVM-Vorrichtung gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung.
  • Unter Bezugnahme auf 2, weist die AVM-Vorrichtung 100 gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung das Kameramodul 110, einen Speicher 120, eine Displayeinheit 130 und eine Steuereinheit 200 auf.
  • Das Kameramodul 110 erfasst Videos um das Fahrzeug 10. In diesem Fall kann eine Vielzahl von Videos um das Fahrzeug herum erfasst werden. Das Kameramodul 110 kann zum Beispiel eine Mehrzahl von Kameras 111, 112, 113 und 114 aufweisen und eine Vielzahl von Videos aus jeder einzelnen Kamera erfassen.
  • Indes ist bei der vorliegenden beispielhaften Ausführungsform beschrieben, dass die erste der vier Kameras 111, 112, 113 und 114 die erfassten Videos zu der Steuereinheit 200 überträgt, aber die vorliegende Erfindung ist nicht darauf beschränkt. Die AVM-Vorrichtung 100 gemäß der beispielhaften Ausführungsform der vorliegenden Erfindung kann ferner eine getrennte Kamerasteuereinheit (nichtveranschaulicht) aufweisen, und die Videos, die von der ersten bis vierten Kamera 111, 112, 113 und 114 erfasst werden, werden zu der Kamerasteuereinheit (nichtveranschaulicht) übertragen und dann zu der Steuereinheit 200 übertragen.
  • Der Speicher 120 kann grundlegende Daten für eine Einheit, Steuerdaten zum Steuern eines Betriebs der Einheit und Eingangs/Ausgangsdaten speichern. Der Speicher 120 kann eine von unterschiedlichen Speichereinheiten sein, wie zum Beispiel ein ROM, ein RAM, ein EEPROM, ein Flash-Laufwerk oder eine Festplatte. Der Speicher 120 kann Videos um das Fahrzeug, die von dem Kameramodul 110 erfasst werden, speichern. Der Speicher 120 kann ein AVM-Video, das in der Steuereinheit 200 erzeugt wird, speichern. Der Speicher 120 kann eine Nachschlagetabelle speichern. Hier wird die Nachschlagetabelle verwendet, um Videos, die von dem Kameramodul 110 erfasst werden, zusammenzufügen. Die Nachschlagetabelle ist eine Tabelle, die eine Beziehung speichert, die anzeigt, dass ein Pixel eines zusammengefügten Videos irgendeinem Pixel von vier Originalvideos (erstes bis viertes Video) entspricht.
  • Die Displayeinheit 130 empfängt ein Rundumsichtvideo und zeigt es an. Die Displayeinheit 130 kann mindestens eine Anzeige aufweisen, um das Rundumsichtvideo anzuzeigen. Wenn das Rundumsichtvideo angezeigt wird, können verschiedene Benutzeroberflächen bereitgestellt sein oder ein Berührungssensor, der Berührungseingabe für die bereitgestellte Benutzeroberfläche erlaubt, kann vorgesehen sein. Ferner kann die Displayeinheit ein audiovisuelles Navigations-(AVN)-Modul, das in dem Fahrzeug installiert ist, sein.
  • Die Steuereinheit 200 setzt die Vielzahl von Videos zusammen, die von dem Kameramodul 110 übertragen wird, um ein Rundumsichtvideo zu erzeugen. Die Erfassungseinheit 180 kann eine erste Parklinie und eine zweite Parklinie aus dem Rundumsichtvideo erfassen. In diesem Fall können die erste Parklinie und die zweite Parklinie Parklinien an der linken Seite und der rechten Seite des Fahrzeugs 10 sein. Die erste Parklinie und die zweite Parklinie können daher Parklinien in einer Längsrichtung des Fahrzeugs 10 sein. Die Steuereinheit 200 verfolgt die erste und die zweite Parklinie mit. Während das Kameramodul 110 Videos um das Fahrzeug 10 erfasst, kann sich das Fahrzeug 10 ständig bewegen. In diesem Fall können sich die Positionen der ersten und der zweiten Parklinie in dem Rundumsichtvideo in Übereinstimmung mit der Bewegung des Fahrzeugs bewegen. In diesem Fall verfolgt die Steuereinheit 200 die erste und die zweite Parklinie mit. Wenn eine der ersten und zweiten Parklinien nicht mitverfolgt wird, erzeugt die Steuereinheit 200 eine imaginäre Parklinie. Die Steuereinheit 200 steuert die Displayeinheit 130, um ein Rundumsichtvideo auszugeben, das die imaginäre Parklinie enthält.
  • 3 ist ein spezifisches Blockschaltbild einer Steuereinheit gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung.
  • Unter Bezugnahme auf 3, weist die Steuereinheit 200 eine Videozusammenfügeeinheit 210, eine Erfassungseinheit 220, eine Mitverfolgungseinheit 230 und eine Vorhersageeinheit 240 auf.
  • Die Videozusammenfügeeinheit 210 setzt die Vielzahl von Videos zusammen, die von dem Kameramodul 110 übertragen wird, um ein Rundumsichtvideo zu erzeugen. Hier kann das Rundumsichtvideo ein Draufsichtvideo, in dem das Fahrzeug 10 in der Mitte angeordnet ist, sein. Die Videozusammenfügeeinheit 210 kann die Mehrzahl von Videos unter Verwendung der Nachschlagetabelle LUT zusammenfügen. Die Nachschlagetabelle ist eine Tabelle, die eine Beziehung speichert, die anzeigt, dass ein Pixel eines zusammengefügten Videos irgendeinem Pixel von vier Originalvideos (erstes bis viertes Video) entspricht.
  • Die Erfassungseinheit 220 erfasst die erste Parklinie und die zweite Parklinie aus dem Rundumsichtvideo, das in der Videozusammenfügeeinheit 210 erzeugt wird. Um die erste Parklinie und die zweite Parklinie zu erfassen, kann die Erfassungseinheit 220 eine Videoumwandlungseinheit 221, eine Haubenfiltereinheit 222, eine Parklinienerkennungseinheit 223 und eine Zwischenlinienabstand-Bestimmungseinheit 224 aufweisen.
  • Die Videoumwandlungseinheit 221 wandelt das Rundumsichtvideo in ein Graustufenvideo in Übereinstimmung mit einem vorbestimmten Videoumwandlungssystem um.
  • Die Haubenfiltereinheit 222 kann aus dem Graustufenvideo die Vielzahl von Merkmalspunkten, die Punkten entsprechen, an welchen eine Beleuchtungsabweichung erzeugt wird, extrahieren.
  • Die Haubenfiltereinheit 222 misst zum Beispiel allgemein eine Beleuchtungsabweichung zwischen einer weißen Parklinie und einer normalen Straße, um als den Merkmalpunkt einen Mittenpunkt eines Abschnitts zu extrahieren, an dem die Beleuchtungsabweichung erzeugt wird.
  • Die Parklinienerkennungseinheit 223 extrahiert einen Linienbestandteil aus der Mehrzahl von Merkmalpunkten, um die erste und die zweite Parklinie zu erkennen. Die Parklinienerkennungseinheit 223 vergleicht Fehler von Winkeln der erkannten ersten und zweiten Parklinie. Die Parklinienerkennungseinheit 223 bestimmt daher, ob die erkannte erste und zweite Parklinie zueinander parallel sind. Wenn ein Winkel, der von Linien gebildet wird, die sich von der ersten und zweiten Parklinie erstrecken, 5 Grad oder weniger beträgt, werden die erste und die zweite Parklinie als verfügbar bestimmt. In diesem Fall können die erste Parklinie und die zweite Parklinie Parklinien an der linken Seite und der rechten Seite des Fahrzeugs 10 sein. Die erste Parklinie und die zweite Parklinie können daher Parklinien in einer Längsrichtung des Fahrzeugs 10 sein.
  • Die Zwischenlinienabstand-Bestimmungseinheit 224 bestimmt einen Zwischenlinienabstand zwischen der ersten und zweiten Parklinie. Die Zwischenlinienabstand-Bestimmungseinheit 224 berechnet daher einen Zwischenlinienabstand zwischen der ersten und zweiten Parklinie aus dem Rundumsichtvideo. In aufeinanderfolgenden Videos, wenn der Zwischenlinienabstand zwischen der ersten Parklinie und der zweiten Parklinie innerhalb eines Schwellenwerts liegt, bestimmt die Zwischenlinienabstand-Bestimmungseinheit 224 den Zwischenlinienabstand durch einen Durchschnitt einer Mehrzahl von Zwischenlinienabständen zwischen der ersten Parklinie und der zweiten Parklinie des Videos.
  • Die Mitverfolgungseinheit 230 verfolgt die erste Parklinie und die zweite Parklinie aus den aufeinanderfolgenden Rundumsichtvideos mit. Während das Kameramodul 110 Videos um das Fahrzeug 10 erfasst, kann sich das Fahrzeug 10 ständig bewegen. In diesem Fall können sich die Positionen der ersten und der zweiten Parklinie in dem Rundumsichtvideo in Übereinstimmung mit der Bewegung des Fahrzeugs bewegen. In diesem Fall verfolgt die Steuereinheit 200 die erste und die zweite Parklinie mit. Die Mitverfolgungseinheit 230 kann die erste und die zweite Parklinie basierend auf dem Unterschied von Winkeln oder Entfernungen der ersten und der zweiten Parklinie in einem vorhergehenden und einem aktuellen Video mitverfolgen.
  • Wenn zum Beispiel ein linkes oberes Ende des Rundumsichtvideos als ein Ausgangspunkt betrachtet wird, wird eine horizontale Richtung als eine X-Achse angenommen, und eine vertikale Richtung wird als eine Y-Achse angenommen. In diesem Fall kann ein Winkel der Parklinie ein Winkel sein, der von der X-Achse und einer imaginären Linie gebildet wird, wenn eine imaginäre Linie, die zu der Parklinie senkrecht ist, von einem Ausgangspunkt gezogen wird. Ferner kann sich die Entfernung zwischen der ersten und zweiten Parklinie auf eine Länge der imaginären Linie beziehen. Wenn in diesem Fall das aktuelle Video und ein Video eines vorbestimmten Zeitpunkts davor verglichen werden, wenn der Unterschied der Winkel und der Unterschied der Entfernungen in einem Video, das sich im Laufe der Zeit ändert, innerhalb der Schwellenwerte liegen, bestimmt die Mitverfolgungseinheit 230, dass die erfassten Parklinien dieselben sind und verfolgt die Parklinie mit.
  • Wenn eine der ersten und zweiten Parklinien nicht mitverfolgt wird, erzeugt die Steuereinheit 240 eine imaginäre Parklinie. Die Vorhersageeinheit 240 ersetzt daher die Parklinie, die nicht mitverfolgt wird, durch die imaginäre Parklinie.
  • Die Vorhersageeinheit 240 weist eine Parklinienerzeugungseinheit 241 und eine Videoanwendungseinheit 242 auf.
  • Wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, erzeugt die Parklinienerzeugungseinheit 241 eine imaginäre Parklinie, die nicht mitverfolgt wird.
  • Wenn die erste Parklinie zum Beispiel nicht mitverfolgt wird, kann die Parklinienerzeugungseinheit 241 die erste Parklinie basierend auf der zweiten Parklinie und dem Zwischenlinienabstand vorhersagen.
  • Wenn die zweite Parklinie zum Beispiel nicht mitverfolgt wird, kann die Parklinienerzeugungseinheit 241 die erste Parklinie basierend auf der ersten Parklinie und dem Zwischenlinienabstand vorhersagen.
  • Die Videoanwendungseinheit 242 wendet die imaginäre Parklinie, die von der Parklinienerzeugungseinheit erzeugt wird, an ein Rundumsichtvideo an.
  • Indes kann die AVM-Vorrichtung 100 gemäß der beispielhaften Ausführungsform der vorliegenden Erfindung in unterschiedlichen Fahrzeugen enthalten sein.
  • 4 ist ein Flussdiagramm, das einen Betrieb einer AVM-Vorrichtung gemäß einer ersten beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Unter Bezugnahme auf 4, wenn das Fahrzeug in einen Zielparkabschnitt eintritt, erzeugt die Steuereinheit 200 ein AVM-Video, in dem eine Ansicht für ein Umgebungsvideo des Fahrzeugs in Schritt S110 umgewandelt wird, wandelt das AVM-Video in ein Graustufenvideo in Schritt S120 um, und extrahiert eine Mehrzahl von Merkmalpunkten unter Verwendung einer Beleuchtungsabweichung des Graustufenvideos in Schritt S130.
  • In diesem Fall extrahiert die Steuereinheit 200 Linienbestandteile für die Mehrzahl von Merkmalpunkten, um die Parklinie in Schritt S140 zu erkennen.
  • Hier bestimmt die Steuereinheit 200 in Schritt S150, ob sowohl die erste als auch die zweite Parklinie der Parklinie in Schritt S140 erkannt werden, und wenn sowohl die erste als auch die zweite Parklinie erkannt werden, fügt sie die erste und die zweite Parklinie mit dem Rundumsichtvideo mit derselben Farbe zusammen, um in Schritt S160 ein zusammengefügtes Rundumsichtvideo zu erzeugen.
  • Wenn nur die erste Parklinie der ersten und zweiten Parklinie in Schritt S150 erkannt wird, berechnet die Steuereinheit 200 einen Parklinienabstand des Zielparkabschnitts in Schritt S170 und erzeugt in Schritt S180 die zweite Parklinie, die von der ersten Parklinie parallel zueinander um den Parklinienabstand beabstandet ist.
  • Dann erzeugt die Steuereinheit 200 das zusammengefügte Rundumsichtvideo, das durch Zusammenfügen der ersten und zweiten Parklinie, die unterschiedliche Farben haben, mit dem Rundumsichtvideo in Schritt S190 erzielt wird.
  • Die Steuereinheit 200 zeigt in Schritt S200 das zusammengefügte Rundumsichtvideo an, das in einem der Schritte S160 und S190 erzeugt wird.
  • 5 ist eine Ansicht, die einen Betrieb des Extrahierens eines Merkmalpunktes einer Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Unter Bezugnahme auf 5, kann die Haubenfiltereinheit 222 die Mehrzahl von Merkmalpunkten, die Punkten entsprechen, an welchen eine Beleuchtungsabweichung erzeugt wird, aus dem Graustufenvideo, das von der Videoumwandlungseinheit 221 umgewandelt wurde, extrahieren. Die Haubenfiltereinheit 222 misst die Beleuchtungsabweichung der weißen Parklinie und einer normalen Straße, um als den Merkmalpunkt einen Abschnitt zu extrahieren, in dem die Beleuchtungsabweichung erzeugt wird. Die Haubenfiltereinheit 222 erfasst einen Mittenpunkt zwischen den Merkmalpunkten.
  • 6 ist eine Ansicht, die einen Vorgang des Erkennens einer Parklinie gemäß der beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Unter Bezugnahme auf 6, verbindet die Parklinienerkennungseinheit 223 die Merkmalpunkte, die in 5 extrahiert werden, oder den Mittenpunkt, um den Linienbestandteil zu erfassen. In diesem Fall kann die Parklinienerkennungseinheit 223 zwei parallele Parklinienbestandteile aus der Mehrzahl erfasster Parklinienbestandteile als die erste und die zweite Parklinie erkennen. In diesem Fall kann die Parklinienerkennungseinheit 223 basierend auf einem Fehler eines Winkels zwischen der ersten und der zweiten Parklinie, der innerhalb eines vorbestimmten Bereichs liegt, die Parallelität bestimmen. Wenn zum Beispiel ein Winkel, der von zwei sich erstreckenden Linien gebildet wird, 5 Grad oder weniger beträgt, kann die Parklinienerkennungseinheit 223 die zwei Linien als die erste und die zweite Parklinie erkennen.
  • 6A veranschaulicht eine Mehrzahl von Parklinien-Kandidatengruppen durch Extrahieren der Linienbestandteile für die Mehrzahl von Merkmalpunkten, die in 5 extrahiert werden, und den Mittenpunkt, und 6B veranschaulicht eine erste und eine zweite Parklinie, die dem Zielparkabschnitt entsprechen, die aus der Mehrzahl von Parklinien-Kandidatengruppen, die in 6A veranschaulicht ist, erkannt werden.
  • 7 ist eine Ansicht, die einen Vorgang des Erkennens einer ersten Parklinie und des Vorhersagens einer zweiten Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Wie in 7A veranschaulicht, kann die Steuereinheit 200 den Abstand der Parklinien basierend auf mindestens einer Breite des Fahrzeugs, einer Entfernung α von der ersten Parklinie und einem Lenkwinkel berechnen.
  • Wenn hier eine aktuelle Position des Fahrzeugs als an der Mitte des Zielparkabschnitts positioniert eingestellt wird, kann die Steuereinheit 200 den Abstand der Parklinien unter Verwendung der Breite des Fahrzeugs und der Entfernung α von der ersten Parklinie, die nicht spezifisch beschränkt ist, berechnen.
  • Dann setzt die Steuereinheit 200 die zweite Parklinie zusammen, die sich um den Abstand der Parklinien bewegt, um zu der ersten Parklinie basierend auf dem berechneten Abstand der Parklinien mit dem Rundumsichtvideo parallel zu sein, um das zusammengefügte Rundumsichtvideo zu erzeugen.
  • Indes, wie in 7B veranschaulicht, zeigt die Steuereinheit 160 die erste und die zweite Parklinie mit unterschiedlichen Farben auf einem Displaymodul 120 an, um es dem Fahrer zu erlauben, die zweite Parklinie als eine imaginäre Parklinie zu erkennen.
  • 8 ist ein Flussdiagramm, das einen Betrieb eines AVM-Geräts gemäß einer zweiten beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Unter Bezugnahme auf 8, erfasst ein Kameramodul 110 Videos um das Fahrzeug 10 in Schritt S805. Eine Mehrzahl von Videos kann um das Fahrzeug erfasst werden. Das Kameramodul 110 kann zum Beispiel eine Mehrzahl von Kameras 111, 112, 113 und 114 aufweisen und eine Mehrzahl von Videos aus jeder einzelnen Kamera erfassen.
  • In einem Zustand, wenn die Mehrzahl von Videos empfangen wird, empfängt die Steuereinheit 200 die Mehrzahl von Videos von dem Kameramodul 110 und setzt die Mehrzahl von Videos zusammen, um in Schritt S810 ein Rundumsichtvideo zu erzeugen. Hier kann das Rundumsichtvideo ein Draufsichtvideo, in dem das Fahrzeug 10 in der Mitte angeordnet ist, sein. Die Videozusammenfügeeinheit 210 kann die Mehrzahl von Videos unter Verwendung der Nachschlagetabelle LUT, die in dem Speicher 120 gespeichert ist, zusammenfügen. Die Nachschlagetabelle ist eine Tabelle, die eine Beziehung speichert, die anzeigt, dass ein Pixel eines zusammengefügten Videos irgendeinem Pixel von vier Originalvideos (erstes bis viertes Video) entspricht.
  • In einem Zustand, wenn das Rundumsichtvideo erzeugt ist, erfasst die Steuereinheit 200 eine erste Parklinie und eine zweite Parklinie in den Schritten S185, S820, S825 und S830.
  • Insbesondere wandelt die Steuereinheit 200 in einem Zustand, wenn das Rundumsichtvideo erzeugt ist, das Rundumsichtvideo in Schritt S815 in ein Graustufenvideo um. In einem Zustand, wenn das Rundumsichtvideo in das Graustufenvideo umgewandelt ist, extrahiert die Steuereinheit 200 in Schritt S820 eine Mehrzahl von Merkmalpunkten unter Verwendung einer Beleuchtungsabweichung des Graustufenvideos. Die Steuereinheit extrahiert Linienbestandteile der Mehrzahl von Merkmalpunkten, um in Schritt S825 die erste und die zweite Parklinie zu erkennen. In diesem Fall können die erste Parklinie und die zweite Parklinie Parklinien an der linken Seite und der rechten Seite des Fahrzeugs 10 sein. Die erste Parklinie und die zweite Parklinie können daher Parklinien in eine Längsrichtung des Fahrzeugs 10 sein. Die Steuereinheit bestimmt in Schritt S830 einen Zwischenlinienabstand zwischen der erkannten ersten und zweiten Parklinie. Die Steuereinheit 200 berechnet daher einen Zwischenlinienabstand zwischen der ersten und zweiten Parklinie in dem Rundumsichtvideo. In aufeinanderfolgenden Videos, wenn der Zwischenlinienabstand zwischen der ersten Parklinie und der zweiten Parklinie innerhalb eines Schwellenwerts liegt, bestimmt die Steuereinheit 200 den Zwischenlinienabstand durch einen Durchschnitt der Mehrzahl der Zwischenlinienabstände der ersten Parklinie und der zweiten Parklinie des Videos.
  • Dann verfolgt die Steuereinheit 200 in Schritt S835 die erste und die zweite Parklinie aus den darauf folgenden Rundumsichtvideos mit. Während das Kameramodul 110 Videos um das Fahrzeug 10 erfasst, kann sich das Fahrzeug 10 ständig bewegen. In diesem Fall können sich die Positionen der ersten und der zweiten Parklinie in dem Rundumsichtvideo in Übereinstimmung mit der Bewegung des Fahrzeugs bewegen. In diesem Fall verfolgt die Steuereinheit 200 die erste und die zweite Parklinie mit. Die Mitverfolgungseinheit 200 kann die erste und die zweite Parklinie basierend auf dem Unterschied von Winkeln und dem Unterschied von Entfernungen der ersten und der zweiten Parklinie in dem vorhergehenden und dem aktuellen Video mitverfolgen.
  • Wenn zum Beispiel ein linkes oberes Ende des Rundumsichtvideos als der Ausgangspunkt betrachtet wird, wird eine horizontale Richtung als eine X-Achse angenommen, und eine vertikale Richtung wird als eine Y-Achse angenommen. In diesem Fall kann der Winkel der Parklinie ein Winkel sein, der von der X-Achse und einer imaginären Linie gebildet wird, wenn eine imaginäre Linie, die zu der Parklinie senkrecht ist, von dem Ausgangspunkt gezogen wird. Ferner kann sich die Entfernung zwischen der ersten und zweiten Parklinie auf eine Länge der imaginären Linie beziehen. Wenn in diesem Fall das aktuelle Video und ein Video eines vorbestimmten Zeitpunkts davor verglichen werden, wenn der Unterschied der Winkel und der Unterschied der Entfernungen in einem Video, das sich im Laufe der Zeit ändert, innerhalb der Schwellenwerte liegen, bestimmt die Mitverfolgungseinheit 230, dass die erfassten Parklinien dieselben sind und verfolgt die Parklinien mit.
  • Falls die erste Parklinie in Schritt S840 mitverfolgt wird und die zweite Parklinie in Schritt S845 mitverfolgt wird, steuert die Steuereinheit 200 die Displayeinheit 130, um in Schritt S850 das Rundumsichtvideo anzuzeigen.
  • Falls die erste Parklinie in Schritt S840 mitverfolgt wird, die zweite Parklinie aber in Schritt S845 nicht mitverfolgt wird, erzeugt die Steuereinheit 200 eine zweite imaginäre Parklinie, um die zweite imaginäre Parklinie in Schritt S855 auf das Rundumsichtvideo anzuwenden. In diesem Fall kann die Steuereinheit 200 die zweite Parklinie basierend auf der ersten Parklinie und dem Zwischenlinienabstand, der in Schritt S830 bestimmt wurde, erzeugen. In einem Zustand, in dem die zweite imaginäre Parklinie erzeugt wird, steuert die Steuereinheit 200 die Displayeinheit 130, um in Schritt S850 ein Rundumsichtvideo, das die zweite imaginäre Parklinie enthält, anzuzeigen.
  • Falls die erste Parklinie in Schritt S840 nicht mitverfolgt wird, die zweite Parklinie aber in Schritt S860 mitverfolgt wird, erzeugt die Steuereinheit 200 eine erste imaginäre Parklinie, um die erste imaginäre Parklinie in Schritt S865 auf das Rundumsichtvideo anzuwenden. In diesem Fall erzeugt die Steuereinheit 200 die erste Parklinie basierend auf der zweiten Parklinie und dem Zwischenlinienabstand, der in Schritt S830 bestimmt wurde. In einem Zustand, in dem die erste imaginäre Parklinie erzeugt wird, steuert die Steuereinheit 200 die Displayeinheit 130, um in Schritt S850 ein Rundumsichtvideo, das die erste imaginäre Parklinie enthält, anzuzeigen.
  • Falls die erste Parklinie in Schritt S840 nicht mitverfolgt wird und die zweite Parklinie in Schritt S860 nicht mitverfolgt wird, verfolgt die Steuereinheit 200 die erste und die zweite Parklinie in Schritt S835 laufend mit.
  • 9 ist eine Ansicht, die einen Betrieb des Bestimmens eines Zwischenlinienabstands gemäß einer zweiten beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Unter Bezugnahme auf 9, in einem Zustand, in dem die erste und die zweite Parklinie erkannt werden, bestimmt die Zwischenlinienabstand-Bestimmungseinheit einen Zwischenlinienabstand zwischen der ersten Parklinie und der zweiten Parklinie. Die Zwischenlinienabstand-Bestimmungseinheit 224 berechnet daher einen Zwischenlinienabstand zwischen der ersten und zweiten Parklinie aus dem Rundumsichtvideo. In einem darauffolgenden Video bestimmt die Zwischenlinienabstand-Bestimmungseinheit 224, ob der Zwischenlinienabstand zwischen der ersten Parklinie und der zweiten Parklinie innerhalb eines Schwellenwerts liegt und bestimmt einen Zielparkabschnittabstand. Ein endgültiger Parkabschnittabstand wird durch einen Durchschnitt eingestellt.
  • 10 ist eine Ansicht, die einen Vorgang des Erkennens einer ersten Parklinie und des Vorhersagens einer zweiten Parklinie gemäß einer beispielhaften Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Wie in den 10A und 10B veranschaulicht, verfolgt die Mitverfolgungseinheit 230, wenn ein Fahrzeug geparkt ist, falls sich das Fahrzeug auf der ersten Parklinie befindet, die erste Parklinien nicht mit, sondern verfolgt nur die zweite Parklinien mit. Die Mitverfolgungseinheit 230 kann hier die erste und die zweite Parklinie basierend auf einem Unterschied von Winkeln oder einem Unterschied von Entfernungen zwischen der ersten und der zweiten Parklinie in einem vorhergehenden und einem aktuellen Video mitverfolgen.
  • Ein Rundumsichtvideo der 10A geht daher einem Rundumsichtvideo der 10B voraus. Wenn zum Beispiel ein linkes oberes Ende des Rundumsichtvideos als ein Ausgangspunkt betrachtet wird, wird eine horizontale Richtung als eine X-Achse angenommen, und eine vertikale Richtung wird als eine Y-Achse angenommen. In diesem Fall, wenn ein Winkel θ1, der von der X-Achse und der imaginären Linie gebildet wird, wenn eine imaginäre Linie, die zu der Parklinie senkrecht ist, von dem Ausgangspunkt in dem Video der 10A gezogen wird, und ein Winkel θ2, der von der X-Achse und der imaginären Linie gebildet wird, wenn eine imaginäre Linie, die zu der Parklinie senkrecht ist, von dem Ausgangspunkt in dem Video der 10B gezogen wird, verglichen werden, und bestimmt wird, dass der Unterschied zwischen den Winkeln innerhalb eines Schwellenwerts liegt, bestimmt die Mitverfolgungseinheit 230, dass die Parklinien dieselben sind.
  • Alternativ, wenn eine Länge r1 einer imaginären Linie, die zu der zweiten Parklinie in Bezug auf den Ausgangspunkt in dem Video der 10A senkrecht ist, und eine Länge r2 einer imaginären Linie, die zu der zweiten Parklinie in Bezug auf den Ausgangspunkt in dem Video der 10B senkrecht ist, verglichen werden und bestimmt wird, dass der Unterschied zwischen den Längen innerhalb eines Schwellenwerts liegt, bestimmt die Mitverfolgungseinheit 230, dass die Parklinien dieselben sind.
  • Wie in 10C veranschaulicht, kann die Mitverfolgungseinheit die Entfernung r zu der zweiten Parklinie und den Winkel θ der Parklinie in dem Rundumsichtvideo erzielen. Wie oben beschrieben, kann die Mitverfolgungseinheit 230 den Winkel θ der zweiten Parklinie durch einen Winkel erzielen, der von der X-Achse und der imaginären Linie gebildet wird, wenn eine imaginäre Linie, die zu der Parklinie senkrecht ist, ab dem Ausgangspunkt gezogen wird. Ferner kann die Mitverfolgungseinheit 230 die Länge der imaginären Linie zum Berechnen einer Entfernung r zu der zweiten Parklinie erzielen. In diesem Fall wird eine Gleichung r = Xcos(θ) + Ysin(θ) ermittelt, und r wird durch Verwenden der Gleichung erzielt.
  • Wie in 10D veranschaulicht, kann die Parklinienerzeugungseinheit 241, wenn die erste Parklinie durch das Fahrzeug derart blockiert wird, dass die erste Parklinie nicht mitverfolgt wird, sondern nur die zweite Parklinie mitverfolgt wird, die erste Parklinie basierend auf dem Zwischenlinienabstand, der durch die Zwischenlinienabstand-Bestimmungseinheit 224 bestimmt wird, und dem Winkel θ der Parklinie erzeugen. Die erste Parklinie und die zweite Parklinie sind zum Beispiel zueinander parallel, so dass die Parklinienerzeugungseinheit 241 den Winkel θb der zweiten Parklinie als den Winkel θa betrachten kann. Die Parklinienerzeugungseinheit 241 kann eine Entfernung ra zu der ersten Parklinie durch Subtrahieren des Zwischenlinienabstands von der Entfernung rb zu der zweiten Parklinie erzielen. Die Parklinienerzeugungseinheit 241 kann die erste imaginäre Parklinie basierend auf dem Winkel θa der ersten Parklinie und der Entfernung ra zu der zweiten Parklinie erzeugen. Die Videoanwendungseinheit 242 wendet die erste imaginäre Parklinie auf die Rundumsichtansicht an.
  • Bei der vorliegenden beispielhaften Ausführungsform und obwohl eine Vorgehensweise des Vorhersagens der ersten Parklinie basierend auf der zweiten Parklinie beschrieben wurde, kann ein Vorgang des Vorhersehens der zweiten Parklinie basierend auf der ersten Parklinie durch dasselbe Konzept ausgeführt werden.
  • Die Wörter „umfassen”, „konfigurieren” oder „haben”, die in der oben stehenden Beschreibung verwendet werden, sind als die genannten Elemente enthaltend zu verstehen, außer wenn ausdrücklich Gegenteiliges beschrieben wird, so dass die Wörter als die genannten Elemente enthaltend auszulegen sind, ohne jedoch irgendwelche andere Elemente auszuschließen.
  • Obwohl beispielhafte Ausführungsform der vorliegenden Erfindung oben veranschaulicht und beschrieben wurden, ist die vorliegende Erfindung nicht auf die oben beschriebenen spezifischen beispielhaften Ausführungsformen beschränkt, sondern es ist offensichtlich, dass verschiedene Änderungen vom Fachmann ausgeführt werden können, ohne den Sinn der vorliegenden Erfindung, der in den Ansprüchen beansprucht ist, zu verlassen, und die Änderungen dürfen nicht unabhängig von dem technischen Sinn oder den Aussichten der vorliegenden Erfindung betrachtet werden.

Claims (20)

  1. Rundumsicht-(AVM)-Überwachungsvorrichtung, aufweisend: ein Kameramodul, das eine Vielzahl von Videos um ein Fahrzeug herum erzielt, eine Displayeinheit, die ein Rundumsichtvideo anzeigt, und eine Steuereinheit, die die Vielzahl von Videos zusammenfügt, um ein Rundumsichtvideo zu erzeugen, und eine erste Parklinie und eine zweite Parklinie aus dem Rundumsichtvideo erfasst, die erfasste erste und zweite Parklinie mitverfolgt und eine imaginäre Parklinie erzeugt, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, um die Displayeinheit zu steuern, um das Rundumsichtvideo auszugeben.
  2. AVM-Vorrichtung nach Anspruch 1, zusätzlich aufweisend: einen Speicher, der eine Nachschlagetabelle speichert, wobei die Steuereinheit ein Rundumsichtvideo unter Verwendung der Nachschlagetabelle erzeugt.
  3. AVM-Vorrichtung nach Anspruch 1, wobei: die Steuereinheit Folgendes aufweist: eine Videozusammenfügeeinheit, die die Vielzahl von Videos zusammenfügt, um ein Rundumsichtvideo zu erzeugen, eine Erfassungseinheit, die eine erste Parklinie und eine zweite Parklinie aus dem Rundumsichtvideo erfasst, eine Mitverfolgungseinheit, die die erste Parklinie und die zweite Parklinie mitverfolgt, und eine Vorhersageeinheit, die eine imaginäre Parklinie erzeugt, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird.
  4. AVM-Vorrichtung nach Anspruch 3, wobei die Erfassungseinheit Folgendes aufweist: eine Videoumwandlungseinheit, die das Rundumsichtvideo in ein Graustufenvideo umwandelt, eine Haubenfiltereinheit, die eine Vielzahl von Merkmalspunkten unter Verwendung einer Beleuchtungsabweichung des Graustufenvideos extrahiert, und eine Parklinienerkennungseinheit, die Linienbestandteile für die Vielzahl von Merkmalspunkten extrahiert, um die erste und die zweite Parklinie zu erkennen.
  5. AVM-Vorrichtung nach Anspruch 3, wobei die Erfassungseinheit Folgendes aufweist: eine Zwischenlinienabstand-Bestimmungseinheit, die einen Zwischenlinienabstand der ersten und zweiten Parklinie bestimmt.
  6. AVM-Vorrichtung nach Anspruch 3, wobei die Vorhersageeinheit Folgendes aufweist: eine Parklinienerzeugungseinheit, die, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, eine imaginäre Parklinie erzeugt, die nicht mitverfolgt wird, und eine Videoanwendungseinheit, die die imaginäre Parklinie, die von der Parklinienerzeugungseinheit erzeugt wird, an einem Rundumsichtvideo anwendet.
  7. AVM-Vorrichtung nach Anspruch 3, wobei die Erfassungseinheit Folgendes aufweist: eine Zwischenlinienabstand-Bestimmungseinheit, die einen Zwischenlinienabstand der ersten und zweiten Parklinie bestimmt, und wobei die Vorhersageeinheit die erste Parklinie basierend auf der zweiten Parklinie und dem Zwischenlinienabstand vorhersagt, wenn die erste Parklinie nicht mitverfolgt wird.
  8. AVM-Vorrichtung nach Anspruch 3, wobei die Erfassungseinheit Folgendes aufweist: eine Zwischenlinienabstand-Bestimmungseinheit, die einen Zwischenlinienabstand der ersten und zweiten Parklinie bestimmt, und wobei die Vorhersageeinheit die zweite Parklinie basierend auf der ersten Parklinie und dem Zwischenlinienabstand vorhersagt, wenn die zweite Parklinie nicht mitverfolgt wird.
  9. AVM-Vorrichtung nach Anspruch 3, wobei die Mitverfolgungseinheit die erste und die zweite Parklinie basierend auf dem Unterschied von Winkeln oder Entfernungen der ersten und der zweiten Parklinie in einem vorhergehenden und einem aktuellen Video mitverfolgt.
  10. AVM-Vorrichtung nach Anspruch 1, wobei: das Kameramodul Folgendes aufweist: eine erste Kamera, die auf der Frontseite des Fahrzeugs angeordnet ist, um ein Frontumgebungsvideo zu erzielen, eine zweite Kamera, die auf der Heckseite des Fahrzeugs angeordnet ist, um ein Heckseitenumgebungsvideo zu erzielen, eine dritte Kamera, die auf der linken Seite des Fahrzeugs angeordnet ist, um ein Video um die linke Seite herum zu erzielen, und eine vierte Kamera, die auf der rechten Seite des Fahrzeugs angeordnet ist, um ein Video um die rechte Seite herum zu erzielen.
  11. AVM-Vorrichtung nach Anspruch 1, wobei die Displayeinheit ein audiovisuelles Navigations-(AVN)-Modul ist, das auf dem Fahrzeug installiert ist.
  12. Fahrzeug, das die AVM-Vorrichtung gemäß den Ansprüchen 1 bis 11 aufweist.
  13. Verfahren zum Betreiben einer AVM-Vorrichtung, umfassend: Einholen einer Vielzahl von Videos rund um ein Fahrzeug, Erzeugen eines Rundumsichtvideos durch Zusammenfügen der Vielzahl von Videos, Erfassen einer ersten Parklinie und einer zweiten Parklinie aus dem Rundumsichtvideo, Mitverfolgen der ersten und der zweiten Parklinie, Vorhersagen einer imaginären Parklinie, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, und Anzeigen eines AVM, das die imaginäre Parklinie enthält.
  14. Verfahren nach Anspruch 13, wobei das Erzeugen Folgendes aufweist: Erzeugen eines Rundumsichtvideos unter Verwendung einer Nachschlagetabelle, die in einem Speicher gespeichert ist.
  15. Verfahren nach Anspruch 13, wobei das Erfassen Folgendes aufweist: Umwandeln des Rundumsichtvideos in ein Graustufenvideo, Extrahieren einer Vielzahl von Merkmalspunkten unter Verwendung einer Beleuchtungsabweichung des Graustufenvideos, und Extrahieren von Linienbestandteilen für die Vielzahl von Merkmalspunkten, um die erste und die zweite Parklinie zu erkennen.
  16. Verfahren nach Anspruch 13, wobei das Erfassen ferner Folgendes aufweist: Bestimmen eines Zwischenlinienabstands der ersten und zweiten Parklinie.
  17. Verfahren nach Anspruch 13, wobei das Vorhersagen Folgendes aufweist: Erzeugen einer imaginären Parklinie, die nicht mitverfolgt wird, wenn die erste oder die zweite Parklinie nicht mitverfolgt wird, und Anwenden der erzeugten imaginären Parklinie auf das Rundumsichtvideo.
  18. Verfahren nach Anspruch 13, bei dem das Erfassen das Bestimmen eines Zwischenlinienabstands zwischen der ersten und zweiten Parklinie aufweist, und das Vorhersagen das Vorhersagen der ersten Parklinie basierend auf der zweiten Parklinie und dem Zwischenlinienabstand aufweist, wenn die erste Parklinie nicht mitverfolgt wird.
  19. Verfahren nach Anspruch 13, bei dem das Erfassen das Bestimmen eines Zwischenlinienabstands zwischen der ersten und zweiten Parklinie aufweist, und das Vorhersagen das Vorhersagen der zweiten Parklinie basierend auf der ersten Parklinie und dem Zwischenlinienabstand aufweist, wenn die zweite Parklinie nicht mitverfolgt wird.
  20. Verfahren nach Anspruch 13, wobei das Mitverfolgen das Mitverfolgen der ersten und zweiten Parklinie basierend auf einem Unterschied von Winkeln oder einem Unterschied von Entfernungen der ersten und zweiten Parklinie in einem vorhergehenden und einem aktuellen Video aufweist.
DE102014116362.1A 2014-08-04 2014-11-10 Rundumsicht-Überwachungsvorrichtung und Verfahren dafür Active DE102014116362B3 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0100002 2014-08-04
KR1020140100002A KR101566912B1 (ko) 2014-08-04 2014-08-04 Avm 장치 및 방법

Publications (1)

Publication Number Publication Date
DE102014116362B3 true DE102014116362B3 (de) 2015-11-26

Family

ID=54432039

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102014116362.1A Active DE102014116362B3 (de) 2014-08-04 2014-11-10 Rundumsicht-Überwachungsvorrichtung und Verfahren dafür

Country Status (4)

Country Link
US (1) US9864915B2 (de)
KR (1) KR101566912B1 (de)
CN (1) CN105313775B (de)
DE (1) DE102014116362B3 (de)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9902426B2 (en) * 2014-10-17 2018-02-27 Hyundai Mobis Co., Ltd. Apparatus and method for driver assistance
JP6545108B2 (ja) * 2016-01-14 2019-07-17 アルパイン株式会社 駐車支援装置および駐車支援方法
KR102485480B1 (ko) * 2016-05-02 2023-01-05 현대모비스 주식회사 가상 주차선 생성에 의한 주차 지원 장치 및 그 방법
CN105922936A (zh) * 2016-05-16 2016-09-07 乐视控股(北京)有限公司 一种车载摄像装置及车辆
CN105922937A (zh) * 2016-05-16 2016-09-07 乐视控股(北京)有限公司 一种车载摄像装置及车辆
CN106314441A (zh) * 2016-09-29 2017-01-11 陆睿得 一种基于全景地图的导航系统设备
CN107745677A (zh) * 2017-09-30 2018-03-02 东南(福建)汽车工业有限公司 一种基于3d全景影像系统的4d车底透明系统的方法
KR102177878B1 (ko) * 2019-03-11 2020-11-12 현대모비스 주식회사 영상 처리 장치 및 방법
US10867192B1 (en) * 2019-08-06 2020-12-15 Black Sesame International Holding Limited Real-time robust surround view parking space detection and tracking
JP7466324B2 (ja) 2020-02-12 2024-04-12 フォルシアクラリオン・エレクトロニクス株式会社 画像処理装置及び画像処理方法
KR102406320B1 (ko) * 2020-11-25 2022-06-10 현대모비스 주식회사 자율 주차를 위한 주차 영역을 인식하기 위한 장치 및 그에 관한 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013204079A1 (de) * 2012-12-11 2014-06-12 Hyundai Motor Company Vorrichtung und Verfahren zum Bereitstellen einer Einparkhilfe

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100566406C (zh) * 2005-02-15 2009-12-02 松下电器产业株式会社 周边监视装置和周边监视方法
JP4769625B2 (ja) * 2006-04-25 2011-09-07 トヨタ自動車株式会社 駐車支援装置及び駐車支援方法
KR101143176B1 (ko) 2006-09-14 2012-05-08 주식회사 만도 조감도를 이용한 주차구획 인식 방법, 장치 및 그를 이용한주차 보조 시스템
JP5294638B2 (ja) * 2008-01-08 2013-09-18 アルパイン株式会社 車載用電子システム
JP2009292339A (ja) * 2008-06-05 2009-12-17 Aisin Seiki Co Ltd 駐車支援装置
JP5068779B2 (ja) 2009-02-27 2012-11-07 現代自動車株式会社 車両周囲俯瞰画像表示装置及び方法
JP5491235B2 (ja) * 2010-03-02 2014-05-14 東芝アルパイン・オートモティブテクノロジー株式会社 カメラキャリブレーション装置
KR101763775B1 (ko) 2011-09-09 2017-08-01 현대모비스 주식회사 Avm시스템 정보와 avn시스템 정보의 표시 방법
KR20130050682A (ko) 2011-11-08 2013-05-16 현대자동차주식회사 주차 지원 장치
JP6328369B2 (ja) * 2012-11-27 2018-05-23 クラリオン株式会社 車載用制御装置
JP6045888B2 (ja) * 2012-11-27 2016-12-14 クラリオン株式会社 車載画像処理装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013204079A1 (de) * 2012-12-11 2014-06-12 Hyundai Motor Company Vorrichtung und Verfahren zum Bereitstellen einer Einparkhilfe

Also Published As

Publication number Publication date
CN105313775B (zh) 2018-01-30
KR101566912B1 (ko) 2015-11-13
CN105313775A (zh) 2016-02-10
US20160034768A1 (en) 2016-02-04
US9864915B2 (en) 2018-01-09

Similar Documents

Publication Publication Date Title
DE102014116362B3 (de) Rundumsicht-Überwachungsvorrichtung und Verfahren dafür
DE102014116140B4 (de) Einparkhilfsvorrichtung und Einparkhilfsverfahren für ein Fahrzeug
DE102006003538B3 (de) Verfahren zum Zusammenfügen mehrerer Bildaufnahmen zu einem Gesamtbild in der Vogelperspektive
DE10033599B4 (de) Positionserfassungsvorrichtung
DE10292327B4 (de) Fahrzeugumgebungsbildverarbeitungsvorrichtung und Aufzeichnungsmedium
DE102014115399B4 (de) Vorrichtung und Verfahren zur Einparkhilfe
DE102014108684B4 (de) Fahrzeug mit Umfeldüberwachungseinrichtung sowie Verfahren zum Betreiben einer solchen Überwachungseinrichtung
DE102015121387B4 (de) Hinderniserkennungseinrichtung und Hinderniserkennungsverfahren
EP2753533A1 (de) Bestimmung der stellung von bauelementen eines fahrzeugs
DE112017000816T5 (de) Fahrerassistenzsystem mit variabler Bildauflösung
DE102015108955B4 (de) Rundsichtsystem und Betriebsverfahren davon
DE112007000371T5 (de) Objekterkennungssystem und -Verfahren
EP2805183A1 (de) Verfahren und vorrichtung zum visualisieren der umgebung eines fahrzeugs
DE10030421A1 (de) Fahrzeugumgebungsüberwachungssystem
DE102012001554A1 (de) Verfahren zum Betreiben einer Fahrerassistenzeinrichtung eines Kraftfahrzeugs,Fahrerassistenzeinrichtung und Kraftfahrzeug
DE102014112820A1 (de) Fahrzeugaußenumgebungerkennungsvorrichtung
DE102012005851A1 (de) Verfahren zum Warnen des Fahrers eines Kraftfahrzeugs vor der Anwesenheit einesObjekts in der Umgebung des Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102012215026A1 (de) Verfahren und Vorrichtung zum Betreiben eines Fahrzeugs
EP3520024A1 (de) Detektion und validierung von objekten aus sequentiellen bildern einer kamera mittels homographien
DE102017117518A1 (de) Bild-Konvertierungs-Vorrichtung
DE102012023060A1 (de) Verfahren zum Detektieren eines beweglichen Objekts mithilfe eines Histogramms anhand von Bildern einer Kamera und Kamerasystem für ein Kraftfahrzeug
DE102016218853A1 (de) Detektion und Validierung von Objekten aus Bildern einer Kamera
DE102011077398A1 (de) Fahrzeugkamerasystem zur Bereitstellung eines lückenlosen Bildes der Fahrzeugumgebung und entsprechendes Verfahren
DE102014012250A1 (de) Verfahren zur Bilderverarbeitung und -darstellung
DE102014201409B4 (de) Parkplatz - trackinggerät und verfahren desselben

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final