DE102016116820A1 - Vorrichtung zur Korrektur einer Bildverzerrung einer Linse - Google Patents

Vorrichtung zur Korrektur einer Bildverzerrung einer Linse Download PDF

Info

Publication number
DE102016116820A1
DE102016116820A1 DE102016116820.3A DE102016116820A DE102016116820A1 DE 102016116820 A1 DE102016116820 A1 DE 102016116820A1 DE 102016116820 A DE102016116820 A DE 102016116820A DE 102016116820 A1 DE102016116820 A1 DE 102016116820A1
Authority
DE
Germany
Prior art keywords
image
units
unit
image information
subdivision
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102016116820.3A
Other languages
English (en)
Inventor
Kee-Beom KIM
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Mobis Co Ltd
Original Assignee
Hyundai Autron Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Autron Co Ltd filed Critical Hyundai Autron Co Ltd
Publication of DE102016116820A1 publication Critical patent/DE102016116820A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/18Image warping, e.g. rearranging pixels individually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map
    • G06T3/047Fisheye or wide-angle transformations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Geometry (AREA)

Abstract

Es ist hier eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse offenbart, enthaltend eine Eingabeeinheit zum Empfangen von Bildinformationen, eine Segmentierungseinheit zum Segmentieren der Bildinformationen in eine oder mehrere Bilduntergliederungseinheit(en), eine Einstellungseinheit zum Einstellen eines Mittelpunkts der Bildinformationen, eine Steuerung zum Verschieben jeder der einen oder mehreren Bilduntergliederungseinheit(en) um ein Variationsverhältnis in Bezug auf den Mittelpunkt der Bildinformationen, eine Interpolationseinheit zum Einsetzen einer oder mehrerer Bilduntergliederungseinheit(en) entsprechend den verschobenen Bilduntergliederungseinheiten in einen Interpolationsraum, der zwischen den verschobenen Bilduntergliederungseinheiten entsteht, und eine Ausgabeeinheit zum Ausgeben korrigierter Bildinformationen. Gemäß einer Ausführungsform der vorliegenden Erfindung können die Betriebslogik zur Koordinatenberechnung und interne Speicherlogik durch Verschieben einer oder mehrerer Bilduntergliederungseinheit(en) um ein Variationsverhältnis minimiert werden und die Komplexität einer Implementierung kann gesenkt werden.

Description

  • HINTERGRUND
  • 1. Technisches Gebiet
  • Die vorliegende Erfindung betrifft eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse und insbesondere eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse, die Bilder von Bilduntergliederungseinheiten um ein Variationsverhältnis verschiebt.
  • 2. Beschreibung des Standes der Technik
  • Die Technologie zur Korrektur einer Bildverzerrung einer Linse betrifft eine Korrektur einer Bildverzerrung einer Linse mit einem weiten Blickwinkel und wird allgemein in den Bereichen von Endoskopen und Kraftfahrzeugen angewendet.
  • Im Speziellen kann im Kraftfahrzeugbereich die Umgebung eines Fahrzeugs mit den Augen oder durch Seitenspiegel überprüft werden. Bei einigen Kraftfahrzeugmodellen ist es leicht, die Umgebung der Kraftfahrzeuge mit den Augen oder durch Seitenspiegel zu überprüfen. Bei anderen Kraftfahrzeugmodellen ist es jedoch nicht einfach, die Umgebung der Kraftfahrzeuge mit den Augen oder durch Seitenspiegel zu überprüfen. Im Speziellen weisen große Fahrzeuge verglichen mit kleinen Fahrzeugen eine relativ große Anzahl von Bereichen auf, die nicht einfach mit den Augen oder durch Seitenspiegel überprüft werden können.
  • In dieser Hinsicht wurde eine Technologie zum Aufnehmen von Bildern der Umgebung eines Fahrzeugs unter Verwendung einer hinteren Kamera, die am Fahrzeug montiert ist, oder von Kameras, die an der Vorderseite, Rückseite, linken Seite und rechten Seite des Fahrzeugs installiert sind und ein Rundumsichtbild durch Kombinieren der aufgenommenen Bilder ausgeben, entwickelt. Die Kameras, die an der Vorderseite, Rückseite, linken Seite und rechten Seite des Fahrzeugs installiert sind, verwenden üblicherweise Weitwinkellinsen mit einem weiten Blickwinkel und sogar eine Fischaugenlinse, deren Blickwinkel größer als 180° ist. Bilder, die unter Verwendung von Linsen mit einem weiten Blickwinkel aufgenommen werden, wie einer Weitwinkellinse und einer Fischaugenlinse, bieten weite Aussichten, aber ein Lichtbrechungsfaktor nimmt zu den Rändern der Bilder hin zu, was zu stark verzerrten Bildern führt. Daher besteht ein Bedarf an einem Verfahren zur Korrektur einer Verzerrung von Bildern, die unter Verwendung von Linsen mit einem weiten Blickwinkel, wie einer Weitwinkellinse und Fischaugenlinse aufgenommen wurden.
  • 1 zeigt eine Prozedur einer Korrektur eines Bildes in einer herkömmlichen Vorrichtung zur Korrektur einer Bildverzerrung einer Linse.
  • Unter Bezugnahme auf 1 enthalten Verfahren zur Korrektur verzerrter Bilder in einer herkömmlichen Vorrichtung zur Korrektur einer Bildverzerrung einer Linse eine Verzerrungskorrektur, die ein mathematisches Modell verwendet, und eine Verzerrungskorrektur, die ein kartesisches Koordinatenmuster verwendet. Wenn das kartesische Koordinatenmuster verwendet wird, wird ein verzerrtes Bild 110 durch Verschieben jedes Pixels 111 korrigiert.
  • Wenn das mathematische Modell verwendet wird, werden Koordinaten von Pixeln 121 nach Korrektur erhalten, indem die Koordinaten jedes Pixels 111 in eine vorgegebene Gleichung eingesetzt werden und ein korrigiertes Bild 120 durch Anordnen der Pixel 121 gewonnen wird. Da in diesem Fall dieselbe Gleichung bei allen Pixeln angewendet wird, ist es schwierig, den Verzerrungsgrad zu berücksichtigen. Da zusätzlich eine Berechnung für alle Pixel durchgeführt werden muss, ist die Komplexität der Implementierung hoch und es ist ein Speicher großer Kapazität erforderlich.
  • 2 zeigt eine Prozedur einer Korrektur eines verzerrten Bildes unter Verwendung eines herkömmlichen kartesischen Koordinatenmusters.
  • Unter Bezugnahme auf 2 werden gemäß dem Verfahren zur Korrektur eines verzerrten Bildes unter Verwendung des kartesischen Koordinatenmusters Beziehungsinformationen 230 bezüglich der Beziehung zwischen den Koordinaten einiger Pixel vor der Verzerrungskorrektur und den Koordinaten einiger entsprechender Pixels nach Korrektur gewonnen. Da in diesem Fall die Beziehungsinformationen 230 unter Verwendung nur einiger Pixel gewonnen werden, ist die Leistungsfähigkeit einer Verzerrungskorrektur gering. Da ferner alle Pixelwerte vor und nach einer Korrektur gespeichert werden müssen, ist ein Speicher großer Kapazität erforderlich.
  • KURZDARSTELLUNG
  • Es ist ein Aspekt der vorliegenden Erfindung, eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse bereitzustellen, die eine Betriebslogik und interne Speicherlogik minimieren und die Komplexität einer Implementierung senken kann.
  • Es sollte festgehalten werden, dass Aufgaben der vorliegenden Erfindung nicht auf die obengenannte Aufgabe beschränkt sind und andere Aufgaben der vorliegenden Erfindung für Fachleute auf dem Gebiet aus den folgenden Beschreibungen hervorgehen. Zusätzlich ist klar, dass die Aufgaben und Vorteile der vorliegenden Erfindung durch Mittel, die in den beigefügten Ansprüchen genannt sind, und deren Kombination erreicht werden können.
  • Gemäß einem Aspekt der vorliegenden Erfindung enthält eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse eine Eingabeeinheit zum Empfangen von Bildinformationen, eine Segmentierungseinheit zum Segmentieren der Bildinformationen in eine oder mehrere Bilduntergliederungseinheit(en), eine Einstellungseinheit zum Einstellen eines Mittelpunkts der Bildinformationen, eine Steuerung zum Verschieben jeder der einen oder mehreren Bilduntergliederungseinheit(en) um ein Variationsverhältnis in Bezug auf den Mittelpunkt der Bildinformationen, eine Interpolationseinheit zum Einsetzen einer oder mehrerer Bilduntergliederungseinheit(en) entsprechend den verschobenen Bilduntergliederungseinheiten in einen Interpolationsraum, der zwischen den verschobenen Bilduntergliederungseinheiten entsteht, und eine Ausgabeeinheit zum Ausgeben korrigierter Bildinformationen.
  • Gemäß einem anderen Aspekt der vorliegenden Erfindung enthält eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse eine Eingabeeinheit zum Empfangen von Bildinformationen, eine Einstellungseinheit zum Einstellen eines Mittelpunkts der Bildinformationen, eine Segmentierungseinheit zum Segmentieren der Bildinformationen in vorgegebene Einheiten in Bezug auf den Mittelpunkt, eine Steuerung zur Korrektur einer Verzerrung jeder der segmentierten vorgegebenen Einheiten der Bildinformationen und eine Ausgabeeinheit zum Ausgeben korrigierter Bildinformationen.
  • Gemäß einer Ausführungsform der vorliegenden Erfindung können durch Verschieben einer oder mehrerer Bilduntergliederungseinheit(en) um ein Variationsverhältnis eine Betriebslogik zur Koordinatenberechnung und eine interne Speicherlogik minimiert werden und die Komplexität einer Implementierung kann gesenkt werden.
  • Gemäß einer Ausführungsform der vorliegenden Erfindung können durch Einsetzen von Bilduntergliederungseinheiten in einen Interpolationsraum, der zwischen verschobenen Bilduntergliederungseinheiten entsteht, hochauflösende Bilder verarbeitet werden.
  • Gemäß einer Ausführungsform der vorliegenden Erfindung, kann die Kapazität einer Verzerrungskorrektur durch Ändern des Variationsverhältnisses maximiert werden.
  • Gemäß einer Ausführungsform der vorliegenden Erfindung können die Bildinformationen durch Bewegen des Mittelpunkts von Bildinformationen oder Segmentieren der Bildinformationen in vorgegebene Einheiten gemäß dem Verzerrungsgrad korrigiert werden.
  • KURZE BESCHREIBUNG DER ZEICHNUNGEN
  • 1 zeigt eine Prozedur zur Korrektur eines Bildes in einer herkömmlichen Vorrichtung zur Korrektur einer Bildverzerrung einer Linse.
  • 2 zeigt eine Prozedur zur Korrektur eines verzerrten Bildes unter Verwendung eines herkömmlichen kartesischen Koordinatenmusters.
  • 3 ist eine Darstellung, die schematisch eine Konfiguration einer Vorrichtung zur Korrektur einer Bildverzerrung einer Linse gemäß einer Ausführungsform der vorliegenden Erfindung zeigt.
  • 4A, 4B und 4C zeigen eine Prozedur zur Korrektur eines verzerrten Bildes in einer Vorrichtung zur Korrektur einer Bildverzerrung einer Linse gemäß einer Ausführungsform der vorliegenden Erfindung.
  • 5 zeigt schematisch Bilduntergliederungseinheiten und den Mittelpunkt von Bildinformationen, der vor einer Verzerrungskorrektur gegeben ist.
  • 6 zeigt eine Prozedur zum Einsetzen von Bilduntergliederungseinheiten in horizontal verschobene Bilduntergliederungseinheiten.
  • 7 zeigt eine Prozedur zum Einsetzen von Bilduntergliederungseinheiten in vertikal verschobene Bilduntergliederungseinheiten.
  • 8 zeigt eine Prozedur zur Korrektur eines verzerrten Bildes in einer Vorrichtung zur Korrektur einer Bildverzerrung einer Linse gemäß einer anderen Ausführungsform der vorliegenden Erfindung.
  • AUSFÜHRLICHE BESCHREIBUNG
  • Die obengenannten Aufgaben, Vorteile und Merkmale der Erfindung werden ausführlich unter Bezugnahme auf die beiliegenden Zeichnungen dargelegt, sodass Fachleuchte auf dem Gebiet die vorliegende Erfindung leicht ausführen können. Bei der Beschreibung von Ausführungsformen, die in dieser Patentschrift offenbart sind, können relevante, allgemein bekannte Technologien nicht ausführlich beschrieben sein, um den Gegenstand der vorliegenden Erfindung nicht zu verschleiern. In der Folge werden Ausführungsformen der vorliegenden Erfindung ausführlich unter Bezugnahme auf die beiliegenden Zeichnungen beschrieben. In allen Zeichnungen werden gleiche Bezugszeichen zur Bezugnahme auf dieselben oder ähnliche Elemente verwendet.
  • 3 ist eine Darstellung, die schematisch eine Konfiguration einer Vorrichtung zur Korrektur einer Bildverzerrung einer Linse gemäß einer Ausführungsform der vorliegenden Erfindung zeigt.
  • Unter Bezugnahme auf 3 kann eine Vorrichtung 300 zur Korrektur einer Bildverzerrung einer Linse gemäß einer Ausführungsform der vorliegenden Erfindung eine Eingabeeinheit 310, eine Segmentierungseinheit 320, eine Einstellungseinheit 330, eine Steuerung 340, eine Interpolationseinheit 350 und eine Ausgabeeinheit 360 enthalten.
  • Die Vorrichtung 300 zur Korrektur einer Bildverzerrung, die in 3 dargestellt ist, ist einfach eine Ausführungsform und deren Elemente sind nicht auf die in 3 dargestellte Ausführungsform beschränkt. Falls notwendig, können einige Elemente hinzugefügt, geändert oder weggelassen werden.
  • 4A, 4B und 4C zeigen eine Prozedur zur Korrektur eines verzerrten Bildes in der Vorrichtung 300 zur Korrektur einer Bildverzerrung einer Linse gemäß einer Ausführungsform der vorliegenden Erfindung und 5 zeigt schematisch Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 und den Mittelpunkt 502 von Bildinformationen 501, der vor einer Verzerrungskorrektur gegeben ist.
  • 6 zeigt eine Prozedur zum Einsetzen von Bilduntergliederungseinheiten in horizontal verschobene Bilduntergliederungseinheiten und 7 zeigt eine Prozedur zum Einsetzen von Bilduntergliederungseinheiten in vertikal verschobene Bilduntergliederungseinheiten.
  • In der Folge wird die Vorrichtung 300 zur Korrektur einer Bildverzerrung einer Linse gemäß einer Ausführungsform der vorliegenden Erfindung unter Bezugnahme auf 3 bis 7 beschrieben.
  • Die Eingabeeinheit 310 kann Bildinformationen (410 von 4A, 501 von 5) generieren oder empfangen. Die Eingabeeinheit 310 kann eine Vorrichtung oder ein Mechanismus, wie eine Kamera oder CCTV, sein, die bzw. der imstande ist, Bilder aufzunehmen, aber Ausführungsformen der vorliegenden Erfindung sind nicht darauf beschränkt. Die Bildinformationen 410, 501 sind Informationen, die von der Eingabeeinheit 310 aufgenommen werden. Zum Beispiel können die Bildinformationen 410, 501 eine Fotografie oder ein bewegtes Bild sein.
  • Die Segmentierungseinheit 320 kann die Bildinformationen 501 (siehe 5) in eine oder mehrere Bilduntergliederungseinheit(en) 510 bis 519 und 520 bis 529 segmentieren (siehe 5). Die Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 sind Einheiten zum Teilen der Bildinformationen 501 in Teile mit einer bestimmten Größe. Zum Beispiel können die Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 Pixel sein. Ein Teilen der Bildinformationen 501 in eine oder mehrere Bilduntergliederungseinheit(en) 510 bis 519 und 520 bis 529 soll die Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 einzeln verschieben.
  • Die Einstellungseinheit 330 kann den Mittelpunkt (421 von 4B, 502 von 5) der Bildinformationen (420 von 4B, 501 von 5) einstellen. Die Einstellungseinheit 330 kann den Mittelpunkt bei der Bilduntergliederungseinheit 502 einstellen, welcher der Mittelpunkt sowohl der horizontalen als auch vertikalen Anordnung ist.
  • Alternativ kann die Einstellungseinheit 330 den Mittelpunkt an einer Bilduntergliederungseinheit in dem am stärksten verzerrten Teil der Bildinformationen einstellen.
  • Die Einstellungseinheit 330 kann den Mittelpunkt an einer Grenze zwischen Bilduntergliederungseinheiten einstellen, aber Ausführungsformen der vorliegenden Erfindung sind nicht darauf beschränkt.
  • Die Steuerung 340 kann eine oder mehrere Bilduntergliederungseinheit(en) 510 bis 519 und 520 bis 529 um Variationsverhältnisse 610, 620, 710 und 720 in Bezug auf die Bilduntergliederungseinheit 502 der Bildinformationen 501 verschieben.
  • In einer Ausführungsform kann die Steuerung 340 die Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 horizontal oder vertikal verschieben. Die Steuerung 340 kann die Bilduntergliederungseinheiten diagonal verschieben. Die Richtungen, in welche die Steuerung 340 die Bilduntergliederungseinheiten verschiebt, sind nicht auf die horizontale Richtung, vertikale Richtung und diagonale Richtung beschränkt.
  • Ein Pixelwert kann die Farbe jeder der Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 darstellen. Zum Beispiel kann der Pixelwert ein RGB-Wert, YCbCr-Wert, HSB-Wert oder CMY-Wert sein. Zum Beispiel können in 5 die Pixelwerte der Bilduntergliederungseinheiten 502 und 515 50 und 60 sein. Die Variationsverhältnisse 610, 620, 710 und 720 können Abstände zwischen den verschobenen Bilduntergliederungseinheiten sein.
  • Die Variationsverhältnisse 610, 620, 710 und 720 können für die entsprechenden Bilduntergliederungseinheiten 510 bis 519 und 520 bis 529 unterschiedlich eingestellt sein.
  • Wie zum Beispiel in 6 und 7 dargestellt, können die Variationsverhältnisse 610, 620, 710 und 720 mit zunehmendem Abstand von der Bilduntergliederungseinheit 502 der Bildinformationen 501 größer werden. Das heißt, ein höheres Variationsverhältnis kann bei einer Bilduntergliederungseinheit angewendet werden, die von der Bilduntergliederungseinheit 502 der Bildinformationen 501 weiter entfernt ist.
  • Alternativ, wenn auch in den Figuren nicht dargestellt, kann das Variationsverhältnis mit zunehmendem Abstand von der Bilduntergliederungseinheit 502 der Bildinformationen 501 geringer werden. Das heißt, ein niedrigeres Variationsverhältnis kann bei einer Bilduntergliederungseinheit angewendet werden, die von der Bilduntergliederungseinheit 502 der Bildinformationen 501 weiter entfernt ist.
  • Alternativ kann dasselbe Variationsverhältnis bei den Bilduntergliederungseinheiten angewendet werden, die in einer Teilregion der Bildinformationen 501 angeordnet sind.
  • Alternativ kann das Variationsverhältnis vom Anwender festgelegt werden. Interpolationsräume 630, 640, 730 und 740 entstehen zwischen den verschobenen Bilduntergliederungseinheiten und die Interpolationseinheit 350 kann eine oder mehrere Bilduntergliederungseinheit(en) entsprechend den verschobenen Bilduntergliederungseinheiten in die Interpolationsräume 630, 640, 730 und 740 einsetzen.
  • Unter Bezugnahme auf 4 bis 6 verschiebt die Steuerung 340 die Bilduntergliederungseinheiten 510 bis 519 horizontal und die Interpolationseinheit 350 setzt Bilduntergliederungseinheiten 531, 532 und 533 in die verschobenen Bilduntergliederungseinheiten 515, 516 und 517 ein. In der Folge wird diese Prozedur ausführlich beschrieben.
  • Zuerst verschiebt die Steuerung 340 die Bilduntergliederungseinheit 515 zur Position der Bilduntergliederungseinheit 516 in Bezug auf die Bilduntergliederungseinheit 502. Die Bilduntergliederungseinheit 516 wird zur Position der Bilduntergliederungseinheit 519 verschoben. Auf diese Weise werden die Bilduntergliederungseinheiten 510 bis 519 verschoben. Gemäß der in 6 dargestellten Ausführungsform vergrößert sich das Variationsverhältnis 610, 620, um das die Bilduntergliederungseinheiten 510 bis 519 verschoben werden, wenn der Abstand zwischen dem Mittelpunkt 502 und den Bilduntergliederungseinheiten 510 bis 519 zunimmt.
  • Im Gegensatz zu der Ausführungsform von 6 kann die Steuerung 340 die Bilduntergliederungseinheiten 510 bis 519 um dasselbe Variationsverhältnis verschieben. Alternativ kann, wenn der Abstand zwischen dem Mittelpunkt und den Bilduntergliederungseinheiten 510 bis 519 zunimmt, das Variationsverhältnis, um welches die Bilduntergliederungseinheiten 510 bis 519 verschoben werden, kleiner werden.
  • Die Steuerung 340 kann die Bilduntergliederungseinheit 515 zu einer Position zwischen der Bilduntergliederungseinheit 515 und der Bilduntergliederungseinheit 516 verschieben. In diesem Fall kann die Bilduntergliederungseinheit 515 an der Position der Bilduntergliederungseinheit 516 regeneriert werden.
  • Wenn die Bilduntergliederungseinheiten 515, 516 und 517 verschoben werden, entstehen die Interpolationsräume 630 und 640. Die Interpolationsräume 630 und 640 beziehen sich auf Räume, wo nach Verschiebung der Bilduntergliederungseinheiten keine Bilduntergliederungseinheit mehr vorhanden ist.
  • In 6 sind die leeren Räume, die gemäß der Verschiebung der Bilduntergliederungseinheiten 515, 516 und 517 erzeugt werden, die Interpolationsräume 630 und 640. Die Interpolationseinheit 350 setzt die Bilduntergliederungseinheiten 531, 532 und 533 in die Interpolationsräume 630 und 640 ein.
  • In 6 kann die Interpolationseinheit 350 eine Bilduntergliederungseinheit 531 mit 55 als Pixelwert in den Interpolationsraum 630 und die Bilduntergliederungseinheiten 532 und 533 mit 63 und 66 als Pixelwerte in den Interpolationsraum 640 einsetzen. Die eingesetzten Bilduntergliederungseinheiten 531, 532 und 533 haben Pixelwerte entsprechend den verschobenen Bilduntergliederungseinheiten 515, 516 und 517. Zum Beispiel können in 6 die Pixelwerte der Bilduntergliederungseinheiten 532 und 533 innerhalb der Pixelwerte der Bilduntergliederungseinheit 515 und Bilduntergliederungseinheit 516 liegen. Durch Einsetzen von Bilduntergliederungseinheiten mit Pixelwerten, die den Pixelwerten der verschobenen der Bilduntergliederungseinheiten entsprechen, können hochauflösende Bildinformationen korrigiert werden und die Bildqualität kann verbessert werden.
  • Übrigens kann die Steuerung 340 Bilduntergliederungseinheiten entfernen, die nicht zu den Positionen von anderen Bilduntergliederungseinheiten verschoben werden können. In 4B kann die Steuerung die Bilduntergliederungseinheiten in den Bereichen 422 und 423 entfernen. Da in 6 die Bilduntergliederungseinheit 517 nicht zu der Position einer anderen Bilduntergliederungseinheit verschoben werden kann, kann die Steuerung 340 die Bilduntergliederungseinheit 517 entfernen.
  • Unter Bezugnahme auf 4 bis 7 verschiebt die Steuerung 340 die Bilduntergliederungseinheiten 520 bis 529 vertikal und die Interpolationseinheit 350 setzt Bilduntergliederungseinheiten 541, 542 und 543 in die Räume zwischen den verschobenen Bilduntergliederungseinheiten 515, 516 und 517. In der Folge wird diese Prozedur ausführlich beschrieben.
  • Zuerst verschiebt die Steuerung 340 die Bilduntergliederungseinheit 524 zur Position der Bilduntergliederungseinheit 523 in Bezug auf die Bilduntergliederungseinheit 502. Die Bilduntergliederungseinheit 523 wird zur Position der Bilduntergliederungseinheit 520 verschoben. Auf diese Weise werden die Bilduntergliederungseinheiten 520 bis 529 verschoben. Da gemäß der in 7 dargestellten Ausführungsform der Abstand vom Mittelpunkt 502 größer wird, wird das Variationsverhältnis 710, 720 größer. Im Gegensatz zur Ausführungsform von 7 kann die Steuerung 340 die Bilduntergliederungseinheiten 520 bis 529 um dasselbe Variationsverhältnis verschieben. Alternativ kann mit zunehmendem Abstand vom Mittelpunkt das Variationsverhältnis, um das die Bilduntergliederungseinheiten 520 bis 529 verschoben werden, abnehmen.
  • Die Steuerung 340 kann die Bilduntergliederungseinheit 524 zu einer Position zwischen der Bilduntergliederungseinheit 524 und der Bilduntergliederungseinheit 523 verschieben. In diesem Fall kann die Bilduntergliederungseinheit 524 an der Position der Bilduntergliederungseinheit 523 regeneriert werden.
  • Wenn die Bilduntergliederungseinheiten 522, 523 und 524 verschoben werden, entstehen Interpolationsräume 730 und 740. In 7 sind die leeren Räume, die der Verschiebung der Bilduntergliederungseinheiten 522, 523 und 524 gemäß entstehen, die Interpolationsräume 730 und 740. Die Interpolationseinheit 350 setzt die Bilduntergliederungseinheiten 541, 542 und 543 in die Interpolationsräume 730 und 740 ein.
  • In 7 kann die Interpolationseinheit 350 eine Bilduntergliederungseinheit 541 mit 45 als Pixelwert in den Interpolationsraum 730 und die Bilduntergliederungseinheiten 543 und 542 mit 33 und 36 als Pixelwerte in den Interpolationsraum 740 einsetzen. Die eingesetzten Bilduntergliederungseinheiten 541, 542 und 543 haben Pixelwerte entsprechend den verschobenen Bilduntergliederungseinheiten 522, 523 und 524. Zum Beispiel können in 7 die Pixelwerte der Bilduntergliederungseinheiten 542 und 543 innerhalb der Pixelwerte der Bilduntergliederungseinheit 523 und 524 sein. Durch Einsetzen der Bilduntergliederungseinheiten mit Pixelwerten entsprechend den Pixelwerten der verschobenen der Bilduntergliederungseinheiten können hochauflösende Bildinformationen korrigiert werden und die Bildqualität kann verbessert werden.
  • Übrigens kann die Steuerung 340 Bilduntergliederungseinheiten entfernen, die nicht zu Positionen anderer Bilduntergliederungseinheiten verschoben werden können. In 4B kann die Steuerung die Bilduntergliederungseinheiten in den Bereichen 422 und 423 entfernen. Da in 7 die Bilduntergliederungseinheiten 522 nicht zur Position einer anderen Bilduntergliederungseinheit verschoben werden können, kann die Steuerung 340 die Bilduntergliederungseinheiten 522 entfernen.
  • Die Ausgabeeinheit 360 kann korrigierte Bildinformationen ausgeben. Die Ausgabeeinheit 360 ist eine Vorrichtung, die imstande ist, Bildinformationen auszugeben. Zum Beispiel kann die Ausgabeeinheit 360 eine Anzeige, ein Monitor oder ein TV-Gerät sein. Unter Bezugnahme auf 4C kann die Ausgabeeinheit die Bildinformationen 430 nach Korrektur ausgeben.
  • 8 zeigt eine Prozedur zur Korrektur eines verzerrten Bildes in einer Vorrichtung zur Korrektur einer Bildverzerrung einer Linse gemäß einer anderen Ausführungsform der vorliegenden Erfindung. Es folgt eine Beschreibung einer Vorrichtung zur Korrektur einer Bildverzerrung einer Linse gemäß einer anderen Ausführungsform der vorliegenden Erfindung, unter Bezugnahme auf 8.
  • Gemäß einer anderen Ausführungsform kann eine Vorrichtung zur Korrektur einer Bildverzerrung einer Linse eine Eingabeeinheit, eine Einstellungseinheit, eine Segmentierungseinheit, eine Steuerung und eine Ausgabeeinheit und eine Interpolationseinheit enthalten. Die Eingabeeinheit, Ausgabeeinheit und Interpolationseinheit der Vorrichtung zur Korrektur einer Bildverzerrung gemäß dieser Ausführungsform haben dieselben Konfigurationen, Funktionen und Wirkungen wie die Eingabeeinheit, Ausgabeeinheit und Interpolationseinheit, die in 3 bis 7 beschrieben sind und somit wird auf deren Beschreibung verzichtet.
  • Die Einstellungseinheit kann den Mittelpunkt 810 von Bildinformationen einstellen und die Segmentierungseinheit kann die Bildinformationen in vorgegebene Einheiten auf der Basis des Mittelpunkts 810 segmentieren. Das Verfahren, das von der Einstellungseinheit zum Einstellen des Mittelpunkts 810 der Bildinformationen verwendet wird, ist dasselbe wie das in 3 bis 7 beschrieben Verfahren und somit wird auf dessen Beschreibung verzichtet.
  • Die vorgegebenen Einheiten können Viertel sein, die in der horizontalen und vertikalen Richtung in Bezug auf den Mittelpunkt 810 der Bildinformationen angeordnet sind. Dies ist jedoch einfach ein Beispiel und die vorgegebenen Einheiten können vom Anwender anders als in Vierteln festgelegt werden.
  • Zur Korrektur der Bildinformationen gemäß dem Verzerrungsgrad segmentiert die Segmentierungseinheit die Bildinformationen in vorgegebene Einheiten, wodurch Bildinformationssegmente 820, 830, 840 und 850 erhalten werden. Das heißt, die Bildinformationen werden durch Teilen der Bildinformationssegmente 820, 830, 840 und 850 in einen Teil, der eine starke Verzerrung erfahren hat, und einen Teil, der keine starke Verzerrung erfahren hat, korrigiert. Dadurch kann die Wirksamkeit einer Korrektur markant sein.
  • Gemäß einer Ausführungsform kann die Einstellungseinheit kann Mittelpunkte 821, 831, 841 und 851 der Bildinformationssegmente 820, 830, 840 und 850, geteilt in vorgegebene Einheiten einstellen. Die Segmentierungseinheit kann jedes der Bildinformationssegmente 820, 830, 840 und 850 in eine oder mehrere Bilduntergliederungseinheit(en) segmentieren.
  • Das Verfahren, das von der Einstellungseinheit zum Einstellen der Mittelpunkte 821, 831, 841 und 851 der Bildinformationssegmente 820, 830, 840 und 850 verwendet wird, ist dasselbe wie das in 3 bis 7 dargestellte Verfahren und somit wird auf dessen Beschreibung verzichtet. Das Verfahren, das von der Segmentierungseinheit zum Segmentiere der Bildinformationssegmente 820, 830, 840 und 850 verwendet wird, ist dasselbe wie das in 3 bis 7 dargestellte Verfahren und somit wird auch auf dessen Beschreibung verzichtet.
  • Die Steuerung kann eine Verzerrung jedes der Bildinformationssegmente 820, 830, 840 und 850, geteilt in vorgegebene Einheiten korrigieren. In einer Ausführungsform kann die Steuerung eine oder mehrere Bilduntergliederungseinheit(en) jedes der Bildinformationssegmente 820, 830, 840 und 850 um ein entsprechendes Variationsverhältnis in Bezug auf die Mittelpunkte 821, 831, 841 und 851 verschieben. Das Verfahren, das von der Steuerung zum Verschieben der Bilduntergliederungseinheiten jedes der Bildinformationssegmente 820, 830, 840 und 850 um ein entsprechendes Variationsverhältnis in Bezug auf die Mittelpunkte 821, 831, 841 und 851 verwendet wird, ist dasselbe wie das in 3 bis 7 dargestellte Verfahren und somit wird auf dessen Beschreibung verzichtet.
  • Gemäß einer anderen Ausführungsform der vorliegenden Erfindung, dargestellt in 8, kann die Einstellungseinheit die Mittelpunkte 821, 831, 841 und 851 der Bildinformationssegmente 820, 830, 840 und 850 auf den Mittelpunkt 810 einstellen. Wenn die Mittelpunkte 821, 831, 841 und 851 der vorgegebene Einheiten 820, 830, 840 und 850 auf den Mittelpunkt 810 der Bildinformationen eingestellt sind, können die vorgegebene Einheiten in der horizontalen und vertikalen Richtung geviertelt werden, um die Verzerrung zu korrigieren. Wenn zusätzlich die Mittelpunkte 821, 831, 841 und 851 der vorgegebenen Einheiten 820, 830, 840 und 850 auf den Mittelpunkt 810 der Bildinformationen eingestellt werden, können die Bildinformationen in der horizontalen und vertikalen Richtung geviertelt werden und eine Verzerrung jedes der Viertel kann korrigiert werden.
  • Fachleute auf dem Gebiet ist klar, dass verschiedene Substitutionen, Modifizierungen, Variationen an der vorliegenden Erfindung vorgenommen werden können, ohne vom technischen Wesen der Erfindung abzuweichen, und dass die vorliegende Erfindung nicht auf die oben beschriebenen Ausführungsformen und die beiliegenden Zeichnungen beschränkt ist.

Claims (9)

  1. Vorrichtung zur Korrektur einer Bildverzerrung einer Linse, umfassend: eine Eingabeeinheit zum Empfangen von Bildinformationen; eine Segmentierungseinheit zum Segmentieren der Bildinformationen in eine oder mehrere Bilduntergliederungseinheit(en); eine Einstellungseinheit zum Einstellen eines Mittelpunkts der Bildinformationen; eine Steuerung zum Verschieben jeder der einen oder mehreren Bilduntergliederungseinheit(en) um ein Variationsverhältnis in Bezug auf den Mittelpunkt der Bildinformationen; eine Interpolationseinheit zum Einsetzen einer oder mehrerer Bilduntergliederungseinheit(en) entsprechend den verschobenen Bilduntergliederungseinheiten in einen Interpolationsraum, der zwischen den verschobenen Bilduntergliederungseinheiten entsteht; und eine Ausgabeeinheit zum Ausgeben korrigierter Bildinformationen.
  2. Vorrichtung nach Anspruch 1, wobei das Variationsverhältnis eingestellt ist, mit zunehmendem Abstand vom Mittelpunkt der Bildinformationen größer zu erden.
  3. Vorrichtung nach Anspruch 1, wobei die Steuerung die eine oder mehreren Bilduntergliederungseinheit(en) horizontal oder vertikal verschiebt.
  4. Vorrichtung zur Korrektur einer Bildverzerrung einer Linse, umfassend: eine Eingabeeinheit zum Empfangen von Bildinformationen; eine Einstellungseinheit zum Einstellen eines Mittelpunkts der Bildinformationen; eine Segmentierungseinheit zum Segmentieren der Bildinformationen in vorgegebene Einheiten in Bezug auf den Mittelpunkt; eine Steuerung zur Korrektur einer Verzerrung jeder der segmentierten vorgegebenen Einheiten der Bildinformationen; und eine Ausgabeeinheit zum Ausgeben korrigierter Bildinformationen.
  5. Vorrichtung nach Anspruch 4, wobei die Segmentierungseinheit jede der segmentierten vorgegebenen Einheiten der Bildinformationen in eine oder mehrere Bilduntergliederungseinheit(en) segmentiert.
  6. Vorrichtung nach Anspruch 5, wobei die Einstellungseinheit einen Mittelpunkt jeder der segmentierten vorgegebenen Einheiten der Bildinformationen einstellt, wobei die Steuerung eine oder mehrere Bilduntergliederungseinheit(en), die in jeder der segmentierten, vorgegebenen Einheiten der Bildinformationen enthalten ist, um ein Variationsverhältnis in Bezug auf den Mittelpunkt jeder der segmentierten vorgegebenen Einheiten verschiebt.
  7. Vorrichtung nach Anspruch 6, ferner umfassend: eine Interpolationseinheit zum Einsetzen einer oder mehrerer Bilduntergliederungseinheit(en) entsprechend den verschobenen Bilduntergliederungseinheiten in einen Interpolationsraum, der zwischen den verschobenen Bilduntergliederungseinheiten entsteht.
  8. Vorrichtung nach Anspruch 6, wobei das Variationsverhältnis eingestellt ist, mit zunehmendem Abstand vom Mittelpunkt jeder der segmentierten vorgegebenen Einheiten der Bildinformationen größer zu werden.
  9. Vorrichtung nach Anspruch 6, wobei die Steuerung die eine oder mehreren Bilduntergliederungseinheit(en) horizontal oder vertikal verschiebt.
DE102016116820.3A 2015-09-09 2016-09-08 Vorrichtung zur Korrektur einer Bildverzerrung einer Linse Pending DE102016116820A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150127931A KR101714213B1 (ko) 2015-09-09 2015-09-09 렌즈 영상 왜곡 보정 장치
KR10-2015-0127931 2015-09-09

Publications (1)

Publication Number Publication Date
DE102016116820A1 true DE102016116820A1 (de) 2017-05-04

Family

ID=58189685

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102016116820.3A Pending DE102016116820A1 (de) 2015-09-09 2016-09-08 Vorrichtung zur Korrektur einer Bildverzerrung einer Linse

Country Status (4)

Country Link
US (1) US9984444B2 (de)
KR (1) KR101714213B1 (de)
CN (1) CN106530212B (de)
DE (1) DE102016116820A1 (de)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101807090B1 (ko) 2016-06-20 2017-12-08 현대오트론 주식회사 영상 왜곡 보정 장치 및 방법
JP6472864B1 (ja) * 2017-11-29 2019-02-20 株式会社近江デジタルファブリケーションズ 画像配信システム、及び配信画像生成方法
KR102053099B1 (ko) 2018-06-07 2019-12-06 현대오트론 주식회사 어라운드 뷰 모니터링 시스템 및 그것의 동작 방법
CN109388455B (zh) * 2018-09-14 2022-05-10 浩云科技股份有限公司 一种基于Opengl es支持多平台的鱼眼图像展开监控方法
US11891067B2 (en) * 2019-12-11 2024-02-06 Electronics And Telecommunications Research Institute Vehicle control apparatus and operating method thereof
CN111539880B (zh) * 2020-04-15 2023-09-08 上海摩象网络科技有限公司 图像处理方法、设备及手持相机

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3104327B2 (ja) * 1991-10-18 2000-10-30 松下電器産業株式会社 歪曲収差補正装置および画像合成装置
JP2005267457A (ja) * 2004-03-19 2005-09-29 Casio Comput Co Ltd 画像処理装置、撮影装置、画像処理方法及びプログラム
JP4310645B2 (ja) * 2004-12-28 2009-08-12 ソニー株式会社 撮像画像信号の歪み補正方法および撮像画像信号の歪み補正装置
KR20060080945A (ko) * 2005-01-06 2006-07-12 (주)이프러스 이미지센서의 신호보상방법
KR100744937B1 (ko) * 2006-06-29 2007-08-01 삼성전기주식회사 렌즈 왜곡 보정 방법
CN101072288A (zh) * 2007-06-15 2007-11-14 林进灯 取得鱼眼影像校正关系与鱼眼校正的方法
KR101014572B1 (ko) * 2007-08-27 2011-02-16 주식회사 코아로직 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치
US20090087115A1 (en) * 2007-10-02 2009-04-02 Ping Wah Wong Correction for geometric distortion in images in pipelined hardware
EP2197018A1 (de) * 2008-12-12 2010-06-16 FEI Company Verfahren zur Bestimmung von Verzeichnungen in einer teilchenoptischen Vorrichtung
JP2011044801A (ja) * 2009-08-19 2011-03-03 Toshiba Corp 画像処理装置
TWI423659B (zh) * 2010-11-09 2014-01-11 Avisonic Technology Corp 影像校正方法與相關影像校正系統
US9280810B2 (en) * 2012-07-03 2016-03-08 Fotonation Limited Method and system for correcting a distorted input image
TW201403553A (zh) * 2012-07-03 2014-01-16 Automotive Res & Testing Ct 自動校正鳥瞰影像方法

Also Published As

Publication number Publication date
CN106530212B (zh) 2019-08-27
US9984444B2 (en) 2018-05-29
CN106530212A (zh) 2017-03-22
KR101714213B1 (ko) 2017-03-09
US20170070650A1 (en) 2017-03-09

Similar Documents

Publication Publication Date Title
DE102016116820A1 (de) Vorrichtung zur Korrektur einer Bildverzerrung einer Linse
DE102020201787A1 (de) Erzeugen von blickkorrigierten bildern unter verwendung eines bidirektional trainierten netzwerks
DE69730565T2 (de) Gerät zur Erzeugung eines stereoskopischen bewegenden Bildes mittels Computergraphik
DE102013223039A1 (de) Vorrichtung und Verfahren zum Bereitstellen eines AVM-Bildes
DE102017123452A1 (de) Verfahren zum Erzeugen eines ein Kraftfahrzeug und einen Umgebungsbereich des Kraftfahrzeugs in einer vorbestimmten Zielansicht zeigenden Ausgangsbildes, Kamerasystem sowie Kraftfahrzeug
DE60303316T2 (de) Für einen zuschauer mit zwei blickpunkten optimierter werbedruck
DE112011105371T5 (de) Vorrichtung zum Synthetisieren von dreidimensionalen Bildern zum Visualisieren der Fahrzeugumgebung und zugehöriges Verfahren
DE102014117888A1 (de) Online-Kalibrierung eines Kraftfahrzeug-Kamerasystems
DE102011056972A1 (de) Vorrichtung und Verfahren zur digitalen Bildstabilisierung
EP3117399B1 (de) Verfahren zum zusammenfügen von einzelbildern, die von einem kamerasystem aus unterschiedlichen positionen aufgenommen wurden, zu einem gemeinsamen bild
EP3281178A1 (de) Verfahren zur darstellung einer fahrzeugumgebung eines fahrzeuges
DE102014117120A1 (de) Bildverarbeitungsvorrichtung
DE102012223373A1 (de) Vorrichtung und Verfahren zum Korrigieren einer Bildverzerrung von einer Heckkamera
DE102017201286A1 (de) Vorrichtung, system und verfahren zum steuern der belichtung einer mehrsicht-kamera
DE102014114565A1 (de) Vogelperspektiveansichtsbildgenerierungsvorrichtung
DE102016101515A1 (de) Bildanzeigeverfahren und -system
DE102019110871A1 (de) Sichtsystem für ein Fahrzeug
DE102019208338A1 (de) Rundumsicht-überwachungssystem und verfahren zum betrieb davon
EP3073446B1 (de) Verfahren zum darstellen einer fahrzeugumgebung eines fahrzeuges
EP3427224B1 (de) Verfahren, head-up-display und ausgabesystem zum perspektivischen transformieren und ausgeben eines bildinhalts sowie fahrzeug
DE112020004987T5 (de) Bildverarbeitungsvorrichtung und Bildverarbeitungsprogramm
DE102017210258A1 (de) Vorrichtung und Verfahren zum Kompensieren einer Bildstörung
DE102018118996B4 (de) Verfahren zum Bestimmen eines Farbkorrekturwerts, Bildverarbeitungseinrichtung,Kamerasystem und Kraftfahrzeug
DE69814482T2 (de) Verfahren und Vorrichtung zur Darstellung von Oberflächen aus volumetrischen Daten
DE102013012780A1 (de) Verfahren zum Detektieren eines Zielobjekts durch Clusterbildung aus charakteristischen Merkmalen eines Bilds, Kamerasystem und Kraftfahrzeug

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R081 Change of applicant/patentee

Owner name: HYUNDAI MOBIS CO., LTD., KR

Free format text: FORMER OWNER: HYUNDAI AUTRON CO., LTD., SEONGNAM-SI, GYEONGGI-DO, KR

R082 Change of representative

Representative=s name: LS-MP VON PUTTKAMER BERNGRUBER LOTH SPUHLER PA, DE

R016 Response to examination communication