DE102006019726A1

DE102006019726A1 - Image sensor for use in e.g. rear view camera, has processing device producing one image data set, which is assigned to image from another image data set by combining signals of image points with appropriate correction signals

Info

Publication number: DE102006019726A1
Application number: DE102006019726A
Authority: DE
Inventors: Alexander Brandhuber; Stephan Voltz; Ulrich Wagner
Original assignee: Siemens AG
Current assignee: Continental Automotive GmbH
Priority date: 2006-04-27
Filing date: 2006-04-27
Publication date: 2007-10-31

Abstract

The sensor (2) has a photographic surface (3) for producing an image data set, which is assigned to an image with a set of image points, and a digital interface (5) for feeding a correction data set. The correction data set has correction signals that are assigned to the points of the image. A processing device (4) produces another image data set, which is assigned to another image from the former image data set by combining signals of the points with appropriate correction signals. An output (8) is provided for outputting the latter image.

Description

Die Erfindung betrifft einen Bildsensor, eine digitale Kamera mit einem solchen Bildsensor und ein Fahrzeug mit einer solchen digitalen Kamera.The The invention relates to an image sensor, a digital camera with a such image sensor and a vehicle with such a digital Camera.

Bei bestimmten Anwendungen ist es vorgesehen, zusätzliche Informationen in ein Bild einzublenden. Ein Beispiel einer solchen Anwendung ist eine Rückfahrkamera eines Fahrzeugs, die Bilder von der Umgebung hinter dem Fahrzeug aufnimmt und dieses Bild mit einer eingeblendeten Information auf einer Anzeigevorrichtung, z.B. einem am Armaturenbrett des Fahrzeugs befestigten Bildschirm, anzeigt. Eine eingeblendete Information ist beispielsweise der Abstand des Fahrzeugs zu einem Objekt oder Hindernis.at Certain applications are intended to provide additional information in one Picture. An example of such an application is one backup camera a vehicle taking pictures of the environment behind the vehicle takes up and displays this image with an overlay information a display device, e.g. one on the dashboard of the vehicle attached screen, displays. A displayed information For example, is the distance of the vehicle to an object or Obstacle.

Wird das Bild mit einer digitalen Kamera aufgenommen, so umfasst diese einen Bildsensor und das Bild eine Mehrzahl von gewöhnlich matrixförmig angeordneten Bildpunkten. Insbesondere mit CMOS- oder CCD-Bildsensoren aufgenommene Bilder können ein so genanntes Fixed-Pattern-Noise aufweisen. Das Fixed-Pattern-Noise ist ein im Wesentlichen konstantes, den einzelnen Bildpunkten des Bildes zugeordnetes Rauschen, das durch produktionsbedingte kleine Unterschiede innerhalb der lichtempfindlichen Fläche des Bildsensors entsteht. Das durch das Fixed-Pattern-Noise entstehende Rauschen der einzelnen Bildpunkte kann zumindest teilweise kompensiert werden, indem die Signale jedes einzelnen Bildpunktes individuell mit einem verstärkungsabhängigen Offset-Wert korrigiert wird.Becomes the picture taken with a digital camera, this includes this an image sensor and the image a plurality of usually arranged in a matrix Pixels. Recorded especially with CMOS or CCD image sensors Pictures can have a so-called fixed pattern noise. The fixed pattern noise is a substantially constant, associated with the individual pixels of the image Noise caused by production-related small differences within the photosensitive surface the image sensor is created. The result of the fixed pattern noise Noise of the individual pixels can be at least partially compensated be by the signals of each individual pixel individually with a gain-dependent offset value is corrected.

Für die Korrektur des Fixed-Pattern-Noise aber auch für das Einblenden der Information werden üblicherweise Steuergeräte mit relativ teuren Videoprozessoren verwendet, die jeweils wenigstens einen Videoein- und einen Videoausgang haben. Dafür muss ein von der digitalen Kamera stammendes und im analogen Videoformat vorliegendes Bildsignal zunächst digitali siert werden. Danach wird die Korrektur für das Fixed-Pattern-Noise und die Verrechnung mit den der einzublendenden Information zugeordneten Signalen durchgeführt. Der daraus entstehende Bilddatensatz wird analog gewandelt, um das entsprechende Bild mit den überlagerten Informationen mit der Anzeigevorrichtung anzuzeigen. Nachteilig bei diesem Verfahren ist die mehrfache AD/DA-Wandlung, die eine Verschlechterung der Bildqualität zur Folge hat.For the correction Fixed-pattern noise but also for fading in the information become common ECUs used with relatively expensive video processors, each at least have a video input and a video output. For that one has to from the digital camera and in analog video format present picture signal first digitized. After that, the correction for the fixed pattern noise and the clearing with the information associated with the information to be displayed carried out. The resulting image data set is converted analogously to the corresponding image with the superimposed To display information with the display device. adversely In this method, the multiple AD / DA conversion is a Deterioration of image quality entails.

Bei Verwendung eines Bildsensors mit einer digitalen Ausgabeschnittstelle spart man sich zwar die Analog/Digital-Wandlung vor der Korrektur des Fixed-Pattern-Noise. Der teuere Videoprozessor ist trotzdem nötig. Außerdem benötigt das Steuergerät relativ viel Platz und die Verlustleistung ist relativ groß.at Using an image sensor with a digital output interface Although you save the analog / digital conversion before the correction of the fixed pattern noise. The expensive video processor is still necessary. In addition, the controller requires relatively a lot of space and the power loss is relatively large.

Die Aufgabe der Erfindung ist es daher, einen Bildsensor derart auszuführen, dass mit diesem vereinfacht einem Bild Informationen überlagert und/oder das Fixed-Pattern-Noise korrigiert werden kann.The The object of the invention is therefore to carry out an image sensor such that With this simplifies an image overlay information and / or the fixed-pattern noise can be corrected.

Erfindungsgemäß wird diese Aufgabe gelöst durch einen Bildsensor mit den Merkmalen des Patentanspruchs 1 und/oder durch eine digitale Kamera mit den Merkmalen des Patentanspruchs 9 und/oder durch ein Fahrzeug mit den Merkmalen des Patentanspruchs 12.According to the invention this Task solved by an image sensor with the features of claim 1 and / or by a digital camera having the features of the claim 9 and / or by a vehicle having the features of the claim 12th

Demgemäß ist ein Bildsensor vorgesehen, aufweisend eine lichtempfindliche Fläche zum Erzeugen eines ersten Bilddatensatzes, dem ein eine erste Mehrzahl erster Bildpunkte aufweisendes erstes Bild zugeordnet ist, eine digitale Schnittstelle zum Einspeisen eines Korrekturdatensatzes, der Korrektursignale aufweist, die wenigstens einigen der ersten Bildpunkte des ersten Bildes zugeordnet sind, eine Verarbeitungsvorrichtung zum Erzeugen eines zweiten Bilddatensatzes, dem ein eine Mehrzahl zweiter Bildpunkte aufweisendes zweites Bild zugeordnet ist, wobei die Verarbeitungsvorrichtung den zweiten Bilddatensatz aus dem ersten Bilddatensatz erzeugt, indem sie Signale erster Bildpunkte mit entsprechenden Korrektursignalen kombiniert, und einen Ausgang, der das zweite Bild ausgibt.Accordingly, a Image sensor provided, comprising a photosensitive surface for Generating a first image data set, which is a first plurality associated with first pixels having first image, a digital interface for feeding in a correction data record, the correction signals, the at least some of the first pixels associated with the first image, a processing device for generating a second image data set, the one of a plurality second image having exhibiting second image, wherein the processing device selects the second image data set from the first one Image data set generated by matching first pixel signals with corresponding ones Correction signals combined, and an output, the second Picture is output.

Der erfindungsgemäße Bildsensor umfasst demnach zwei Schnittstellen, und zwar einmal die digitale Schnittstelle, über die die Korrektursignale der Verarbeitungsvorrichtung zugeführt werden, und den Ausgang, der das zweite Bild ausgibt. Der Ausgang ist insbesondere ein analoger Videoausgang in einem Standard Videoformat. Dies ist vor allem dann vorteilhaft, wenn das zweite Bild auf einer Standard-Anzeigevorrichtung, z.B. einem Bildschirm oder einer TFT-Anzeige, dargestellt werden soll.Of the Image sensor according to the invention thus includes two interfaces, one digital one Interface, over the correction signals are supplied to the processing device, and the output that outputs the second image. The output is particular an analog video output in a standard video format. This is especially advantageous when the second image is on a standard display device, e.g. a screen or a TFT display should.

Die digitale Schnittstelle ist beispielsweise ein 8 bis 10 Bit Bus und ist dafür vorgesehen, die Korrekturdaten zu empfangen, die dann von der Verarbeitungsvorrichtung weiter verarbeitet werden.The digital interface is for example an 8 to 10 bit bus and is for that provided to receive the correction data, which is then received by the processing device be further processed.

Die Korrektursignale umfassen nach einer Variante des erfindungsgemäßen Bildsensors Signale zum Korrigieren des Fixed-Pattern-Noise der Signale der entsprechenden ersten Bildpunkte des ersten Bildes. Die Korrektursignale sind den einzelnen ersten Bildpunkten des ersten Bildes zugeordnet und umfassen z.B. einen individuellen Offset-Wert mit eventuell einer individuellen Skalierung.The Correction signals comprise according to a variant of the image sensor according to the invention Signals for correcting the fixed pattern noise of the signals of the corresponding ones first pixels of the first image. The correction signals are the associated with individual first pixels of the first image and include e.g. an individual offset value with possibly an individual one Scaling.

Gemäß einer bevorzugten Ausführungsform des erfindungsgemäßen Bildsensors umfassen die Korrektursignale des Korrekturdatensatzes Signale zum Einblenden einer Information in das dem ersten Bilddatensatz zugeordnete erste Bild. Unter Einblenden einer Information wird in diesem Zusammenhang insbesondere ein Überlagern von Buchstaben, Zahlen, Symbolen oder anderen Bildinhalten mit dem ersten Bild verstanden, sodass die eingeblendeten Informationen im ersten Bild erscheinen. Die eingeblendeten Informationen sollen an bestimmten Stellen des ersten Bildes erscheinen, sodass die diesen Stellen zugeordneten ersten Bildpunkte des ersten Bildes mit den entspre chenden Korrektursignalen verrechnet werden. Diese Verrechnung kann besonders einfach ausgeführt werden, wenn nach einer Variante des erfindungsgemäßen Bildsensors die Verarbeitungsvorrichtung Signale erster Bildpunkte durch entsprechende Signale zum Einblenden der Information ersetzt.According to a preferred embodiment of the image sensor according to the invention, the correction signals of the correction data set comprise signals for fading information into the first image associated with the first image data set. Under Einblen In this context, information is understood to mean, in particular, a superposition of letters, numbers, symbols or other image contents with the first image, so that the information displayed appears in the first image. The information displayed should appear at certain points of the first image, so that the first pixels associated with these points of the first image are offset with the corre sponding correction signals. This clearing can be carried out particularly simply if, according to a variant of the image sensor according to the invention, the processing device replaces signals of first pixels with corresponding signals for fading in the information.

Der erfindungsgemäße Bildsensor kann insbesondere auch derart ausgeführt sein, dass er eine Serie erster Bilddatensätze aufnimmt. Dann ist die Verarbeitungsvorrichtung derart ausgeführt, dass sie eine Serie zweiter Bilddatensätze aus der Serie erster Bilddatensätze erzeugt und ihr Vorteilhafterweise eine mit der Serie erster Bilddatensätze synchronisierte Serie von Korrekturdatensätzen zugeführt wird, sodass der Ausgang eine der Serie zweiter Bilddatensätze zugeordnete Serie zweiter Bilder ausgibt. Die Synchronisation mit der Serie von Korrekturdatensätzen ist insbesondere dann nötig, wenn in das erste Bild aktuelle Informationen, z.B. ein aktueller Abstand zu einem Objekt, eingeblendet werden soll. Vorteilhafterweise wird die Serie erster Bilddatensätze mit der Serie von Korrekturdatensätzen über die digitale Schnittstelle synchronisiert. Dabei kann entweder der erfindungsgemäße Bildsensor insbesondere über die digitale Schnittstelle ein Synchronisierungssignal zum Synchronisieren der Serie von Korrekturdatensätze mit der Serie erster Bilddatensätze erzeugen oder dieses erhalten.Of the Image sensor according to the invention may in particular also be designed such that it is a series first image data sets receives. Then, the processing device is designed such that It generates a series of second image data sets from the series of first image data records and, advantageously, one synchronized with the series of first image data sets Series of correction records is fed so that the output is assigned to one of the series of second image data sets Series of second images outputs. The synchronization with the series of correction records is especially necessary if in the first image current information, e.g. a current distance to an object, to be displayed. Advantageously the series of first image data sets with the series of correction data sets via the digital interface synchronized. In this case, either the image sensor according to the invention especially about the digital interface a synchronization signal for synchronization the series of correction records create with the series of first image data records or receive this.

Die digitale Schnittstelle des erfindungsgemäßen Bildsensors kann auch derart eingerichtet sein, dass sie den ersten Bilddatensatz ausgibt. Dann stellt der erfindungsgemäße Bildsensor nicht nur ein analoges Bildsignal, sondern auch ein digitales Bildsignal zur Verfügung. Die Wahl, ob die digitale Schnittstelle als Eingang für die Korrektursignale oder als Ausgang für den ersten Bilddatensatz verwendet wird, kann z.B. über ein Register im Bildsensor oder über zusätzliche Pins erfolgen.The digital interface of the image sensor according to the invention can also be such be set up to output the first image data set. Then represents the image sensor according to the invention not just an analog picture signal, but also a digital picture signal to disposal. The choice of whether the digital interface as input for the correction signals or as an exit for the first image data set is used, e.g. about one Register in the image sensor or via additional Pins done.

Der erfindungsgemäße Bildsensor kann insbesondere für eine digitale Kamera verwendet werden. Eine solche erfindungsgemä ße digitale Kamera weist neben dem erfindungsgemäßen Bildsensor Vorteilhafterweise eine Rechenvorrichtung mit einer Schnittstelle und einem Eingang auf. Der Eingang ist beispielsweise ein CAN-Bus und die Schnittstelle der Rechenvorrichtung kommuniziert mit der digitalen Schnittstelle des erfindungsgemäßen Bildsensors. Die Rechenvorrichtung ist z.B. ein DSP oder ein FPGA, die relativ preisgünstig sind, und deren Schnittstelle ist z.B. ein Videoport oder eine Videoausgabeschnittstelle. Die Rechenvorrichtung ist insbesondere dafür vorgesehen, die Korrektursignale vorzuhalten. Sie kann aber auch derart eingerichtet sein, dass sie die Serie von Korrekturdatensätzen mit der Serie erster Bilddatensätze über die digitale Schnittstelle des Bildsensors und der Schnittstelle der Rechenvorrichtung synchronisiert.Of the Image sensor according to the invention especially for a digital camera can be used. Such a digital according to the invention In addition to the image sensor according to the invention, the camera advantageously has a computing device with an interface and an input on. The input is, for example, a CAN bus and the interface The computing device communicates with the digital interface of the image sensor according to the invention. The Computing device is e.g. a DSP or a FPGA that are relatively inexpensive, and its interface is e.g. a video port or a video output interface. The computing device is provided in particular for the correction signals reproach. But it can also be set up so that they Series of correction records with the series of first image data sets over the digital interface of the image sensor and the interface of the Computer synchronized.

Die erfindungsgemäße digitale Kamera kann insbesondere in einem Fahrzeug, vorzugsweise in einem als PKW ausgebildeten Kraftfahrzeug, verwendet werden. In dem Fahrzeug kann die die digitale Kamera vorzugsweise Bestandteil eines Einparkhilfesystems des Fahrzeugs ist. Zusätzlich oder alternativ kann auch vorgesehen sein, dass die digitale Kamera als Rückfahrkamera ausgebildet ist, welche von einem Fahrzeugheck weg gerichtet ist und somit dazu ausgelegt ist den Bereich hinter dem Fahrzeug aufzunehmen und zu überwachen.The inventive digital In particular, in a vehicle, preferably in a camera be used as a car trained motor vehicle. In the vehicle the digital camera may preferably be part of a parking aid system of the vehicle. additionally or alternatively it can also be provided that the digital camera as a rear view camera is formed, which is directed away from a vehicle rear and thus adapted to receive the area behind the vehicle and monitor.

Ein Ausführungsbeispiel der Erfindung ist exemplarisch in den beigefügten schematischen Zeichnungen dargestellt. Es zeigen:One embodiment The invention is exemplified in the accompanying schematic drawings shown. Show it:

1 ein Blockdiagramm einer digitalen Kamera, 1 a block diagram of a digital camera,

2 zwei Fahrzeuge, 2 two vehicles,

3 ein Bild, 3 a picture,

4 ein aus dem Bild der 3 erzeugtes Bild mit eingeblendeten Informationen und 4 a from the picture of 3 generated image with displayed information and

5 eine die eingeblendeten Informationen erläuternde Darstellung. 5 a presentation explaining the information displayed.

In allen Figuren der Zeichnung sind gleiche bzw. funktionsgleiche Elemente und Merkmale – sofern nichts Anderes angegeben ist – mit gleichen Bezugszeichen versehen worden.In all figures of the drawing are the same or functionally identical elements and characteristics - if nothing else is indicated - with the same reference numerals have been provided.

Die 1 zeigt ein Blockdiagramm einer digitalen Kamera 1, die im Falle des vorliegenden Ausführungsbeispiels im Heck eines in der 2 dargestellten Fahrzeugs 20 eingebaut ist und Bilder von Objekten, die sich hinter dem Fahrzeug 20 befinden, aufnimmt. Als Beispiel eines solchen Objekts ist in der 2 ein weiteres Fahrzeug 21 gezeigt.The 1 shows a block diagram of a digital camera 1 , which in the case of the present embodiment in the rear of a in the 2 shown vehicle 20 is built and images of objects that are behind the vehicle 20 are located. As an example of such an object is in the 2 another vehicle 21 shown.

Im Falle des vorliegenden Ausführungsbeispiels umfasst das Fahrzeug 20 ferner einen im Heck des Fahrzeugs 20 eingebauten Ultraschallsensor 22, der mit einer elektrischen Leitung 23 mit einem im Fahrzeug 20 eingebauten Steuergerät 24 verbunden ist. Der Ultraschallsensor 22 übermittelt elektrische Signale an das Steuergerät 24, das wiederum aus diesen Signalen den Abstand zwischen dem Fahrzeug 20 und einem hinter dem Fahrzeug 20 befindlichen Objekten ermittelt. Im Falle des vorliegend Ausführungsbeispiels ermittelt das Steuergerät 24 den Abstand zwischen dem Fahrzeug 20 und dem Fahrzeug 21.In the case of the present embodiment, the vehicle includes 20 also one in the rear of the vehicle 20 built-in ultrasonic sensor 22 that with an electric wire 23 with one in the vehicle 20 built-in control unit 24 connected is. The ultrasonic sensor 22 transmits electrical signals to the control unit 24 , in turn, from these signals the distance between the driving stuff 20 and one behind the vehicle 20 determined objects. In the case of the present embodiment, the control unit determines 24 the distance between the vehicle 20 and the vehicle 21 ,

Im Falle des vorliegenden Ausführungsbeispiels erhält das Steuergerät 24 noch eine Information über den Einschlagwinkel der Vorderräder 25 des Fahrzeugs 20. Aus dieser Information berechnet das Steuergerät 24 einen Fahrschlauch des Fahrzeugs 20, wenn dieses rückwärts fährt. Der Fahrschlauch ist eine prognostizierte Fahrbahn des Fahrzeugs 20 und kann insbesondere eine das Fahrzeug 20 lenkende und in den Figuren nicht dargestellte Person beim Einparken des Fahrzeugs 20 in eine Parklücke unterstützen. Aus dem Fahrschlauch und dem Abstand zwischen dem Fahrzeug 20 und dem Fahrzeug 21 erstellt das Steuergerät 24 einen Datensatz, der der digitalen Kamera 1 im Falle des vorliegenden Ausführungsbeispiels über einen CAN-Bus 9 übermittelt wird.In the case of the present embodiment receives the control unit 24 another information about the steering angle of the front wheels 25 of the vehicle 20 , From this information, the controller calculates 24 a driving tube of the vehicle 20 when driving backwards. The driving lane is a predicted roadway of the vehicle 20 and in particular, the vehicle 20 directing and not shown in the figures person when parking the vehicle 20 to assist in a parking space. From the driving tube and the distance between the vehicle 20 and the vehicle 21 creates the control unit 24 a record of the digital camera 1 in the case of the present embodiment via a CAN bus 9 is transmitted.

Die digitale Kamera 1 umfasst im Falle des vorliegenden Ausführungsbeispiels ein nicht näher dargestelltes Objektiv und einen dem Objektiv nachgeschalteten Bildsensor 2. Der Bildsensor 2 weist eine lichtempfindliche Fläche 3 auf, auf die eine mit dem Objektiv gebündelte Lichtverteilung für eine bestimmte Zeitdauer auftrifft. Der Bildsensor 2 erzeugt aus der auf die lichtempfindliche Fläche 3 auftreffenden Lichtverteilung entsprechende elektrische Signale, die einen ersten Bilddatensatz ergeben. Dem ersten Bilddatensatz ist wiederum ein erstes Bild zugeordnet, das in allgemein bekannter Weise mit einer Anzeigevorrichtung, z.B. einem Bildschirm, dargestellt werden kann. Im Falle des vorliegenden Ausführungsbeispiels nimmt der Bildsensor 2 ein in der 3 gezeigtes erstes Bild 30 vom Fahrzeug 21 auf. Das erste Bild 30 umfasst in allgemein bekannter Weise eine Mehrzahl von im Falle des vorliegenden Ausführungsbeispiels matrixförmig angeordneten Bildpunkten 31, die auch als Pixel bezeichnet werden.The digital camera 1 comprises in the case of the present embodiment, a non-illustrated lens and a lens connected downstream of the image sensor 2 , The image sensor 2 has a photosensitive surface 3 on which a light distribution bundled with the objective impinges for a certain period of time. The image sensor 2 generated from the on the photosensitive surface 3 incident light distribution corresponding electrical signals that yield a first image data set. The first image data set is in turn associated with a first image which can be displayed in a generally known manner with a display device, eg a screen. In the case of the present embodiment, the image sensor takes 2 an Indian 3 shown first picture 30 from the vehicle 21 on. The first picture 30 comprises in a generally known manner a plurality of pixels arranged in the form of a matrix in the case of the present exemplary embodiment 31 which are also referred to as pixels.

Der Bildsensor 2 umfasst ferner eine Rechenvorrichtung 4, der der erste Bilddatensatz zugeführt wird. Im Falle des vorliegenden Ausführungsbeispiels nimmt die Kamera 1 bzw. der Bildsensor 3 kontinuierlich Bilder auf, sodass der Rechenvorrichtung 4 kontinuierlich in einem vorbestimmten Zeitabstand ein neuer erster Bilddatensatz zugeführt wird.The image sensor 2 further comprises a computing device 4 to which the first image data set is supplied. In the case of the present embodiment, the camera takes 1 or the image sensor 3 continuously take pictures, so the computing device 4 a new first image data set is continuously supplied at a predetermined time interval.

Der Bildsensor 2 umfasst ferner eine digitale Schnittstelle 5, die mit der Rechenvorrichtung 4 elektrische verbunden ist.The image sensor 2 also includes a digital interface 5 that with the computing device 4 electrical is connected.

Die digitale Kamera 1 weist einen Mikrokontroller 6 mit einer Videoausgabeschnittstelle 7 auf. Der Mikrocontroller 6 ist z.B. ein digitaler Signalprozessor (DSP) und kommuniziert über den CAN-Bus 9 mit dem Steuergerät 24. Dem Mikrokontroller 6 wird der vom Steuergerät 24 erzeugte Datensatz, der eine Information über den Fahrschlauch des Fahrzeugs 20 und den Abstand zwischen den Fahrzeugen 20, 21 aufweist, zugeführt. Aufgrund der Information dieses Datensatzes soll die Rechenvorrichtung 4 aus dem erste Bilddatensatz einen zweiten Bild datensatz erzeugen, dessen zugeordnetes zweites Bild 40 in der 4 dargestellt ist. Das in der 4 gezeigte zweite Bild 40 umfasst im Falle des vorliegenden Ausführungsbeispiels matrixförmig angeordnete Bildpunkte 41 und entspricht dem ersten Bild 30 mit zusätzlich eingeblendetem Fahrschlauch 42 und einer Angabe 43 über den Abstand zwischen den beiden Fahrzeugen 20, 21. Der zweite Bilddatensatz wird ferner einem analogen Videoausgang 8 des Bildsensors 2 zugeführt, sodass das zweite Bild 40 auf einem Bildschirm 10 angezeigt werden kann. Der Bildschirm 10 ist beispielsweise am Armaturenbrett des Fahrzeugs 20 angeordnet.The digital camera 1 has a microcontroller 6 with a video output interface 7 on. The microcontroller 6 is eg a digital signal processor (DSP) and communicates via the CAN bus 9 with the control unit 24 , The microcontroller 6 gets the from the controller 24 generated record containing information about the travel tube of the vehicle 20 and the distance between the vehicles 20 . 21 has supplied. Due to the information of this record, the computing device 4 from the first image data set generate a second image record, its associated second image 40 in the 4 is shown. That in the 4 shown second picture 40 in the case of the present exemplary embodiment comprises pixels arranged in matrix form 41 and corresponds to the first picture 30 with additionally inserted driving tube 42 and an indication 43 about the distance between the two vehicles 20 . 21 , The second image data set is also an analog video output 8th of the image sensor 2 fed, so the second picture 40 on a screen 10 can be displayed. The screen 10 is for example on the dashboard of the vehicle 20 arranged.

Um den zweiten Bilddatensatz aus dem ersten Bilddatensatz zu erzeugen, erzeugt im Falle des vorliegenden Ausführungsbeispiels der Mikrokontroller 6 zunächst einen Korrekturdatensatz aus dem vom Steuergerät 24 stammenden Datensatz. Der Korrekturdatensatz entspricht im Wesentlichen einem in der 5 dargestellten dritten Bild 50 mit matrixförmig angeordneten Bildpunkten 51, die jeweils Bildpunkten 31 des ersten Bildes 30 zugeordnet sind. Das dritte Bild 50 gibt im Wesentlichen den Fahrschlauch 42 und die Angabe 43 über den Abstand wieder. Im Falle des vorliegenden Ausführungsbeispiels ist es vorgesehen, dass die Rechenvorrichtung 4 diejenigen Bildpunkte 31 des dem ersten Bild 30 zugeordneten ersten Bilddatensatzes durch diejenigen Bildpunkte 51 des Korrekturdatensatzes ersetzt, die dem Fahrschlauch 42 und der Angabe 43 über den Abstand zugeordnet sind. Die restlichen Bildpunkte 41 des zweiten Bildes 40 entsprechend den entsprechenden Bildpunkten 31 des ersten Bildes 30.In order to generate the second image data set from the first image data set, in the case of the present exemplary embodiment, the microcontroller generates 6 First, a correction data record from the control unit 24 originating record. The correction data set essentially corresponds to one in the 5 illustrated third picture 50 with matrix-shaped pixels 51 , each pixel 31 of the first picture 30 assigned. The third picture 50 essentially gives the travel tube 42 and the indication 43 over the distance again. In the case of the present embodiment, it is provided that the computing device 4 those pixels 31 of the first picture 30 associated first image data set by those pixels 51 of the correction data set that replaces the travel tube 42 and the indication 43 are assigned over the distance. The remaining pixels 41 of the second picture 40 according to the corresponding pixels 31 of the first picture 30 ,

Im Falle des vorliegenden Ausführungsbeispiels ist es vorgesehen, dass die lichtempfindliche Fläche 3 kontinuierlich erste Bilddatensätze, also eine Serie erster Bilddatensätze erzeugt, aus der wiederum die Rechenvorrichtung 4 eine Serie zweiter Bilddatensätze erzeugt. Der Mikrokontroller 6 ist daher im Falle des vorliegenden Ausführungsbeispiels derart eingerichtet, dass er ebenfalls eine Serie von Korrekturdatensätzen erzeugt, die für die entsprechenden Bilddatensätze der Serie zweiter Bilddatensätze nötig ist. Eine für das Synchronisieren der Serie erster Bilddatensätze mit der Serie von Korrekturdatensätzen notwendige Synchronisation erfolgt im Falle des vorliegenden Ausführungsbeispiels über die digitale Schnittstelle 5 und der Videoausgabeschnittstelle 7 des Mikrocontrollers 6, indem dieser ein entsprechendes Synchronisationssignal erzeugt und über die Videoausgabeschnittstelle 7 und der digitalen Schnittstelle 5 an den Bildsensor 2 weiter leitet.In the case of the present embodiment, it is provided that the photosensitive surface 3 continuously generates first image data sets, that is to say a series of first image data sets, from which in turn the computing device 4 created a series of second image data sets. The microcontroller 6 In the case of the present exemplary embodiment, therefore, it is set up such that it likewise generates a series of correction data sets which is necessary for the corresponding image data sets of the series of second image data records. A synchronization necessary for synchronizing the series of first image data records with the series of correction data records takes place in the case of the present exemplary embodiment via the digital interface 5 and the video output interface 7 of the microcontroller 6 by doing this generates a corresponding synchronization signal and via the video output interface 7 and the digital interface 5 to the image sensor 2 continues to lead.

Zusätzlich kann der Mikrocontroller 6 auch noch derart ausgeführt werden, dass der Korrekturdatensatz eine Information über eine Korrektur des so genannten Fixed-Pattern-Noise umfasst. Das Fixed-Pattern-Noise ist ein im Wesentlichen konstantes, den einzelnen Bildpunkten 31 des ersten Bildes 30 zugeordnetes Rauschen, das durch produktionsbedingte kleine Unterschiede der den jeweiligen Bildpunkten 31 des ersten Bildes 30 zugeordneten Teilflächen der lichtempfindlichen Fläche 3 entsteht. Um das Fixed-Pattern-Noise des ersten Bildes 30 zumindest zu verringern, kann jeder Bildpunkt 31 des ersten Bildes 30 mit einem individuellen Offset-Wert und eventuell mit einer individuellen Skalierung nachbearbeitet werden. Die individuellen Offset-Werte und Skalierungen sind konstant und abhängig von der jeweiligen lichtempfindlichen Fläche. Im Falle des vorliegenden Ausführensbeispiels sind die individuellen Offset-Werte und Skalierungen im Mikrokontroller 6 gespeichert und werden der Rechenvorrichtung 4 mit dem Korrekturdatensatz übermittelt. Die Rechnervorrichtung 4 ersetzt dann für das Erzeugen des zweiten Bilddatensatzes nicht nur die dem Fahrschlauch 42 und dem Abstand 43 zugeordnete Bildpunkte 31 des ersten Bildes 30, sondern führt auch die Korrektur des Fixed-Pattern-Noise durch.In addition, the microcontroller 6 also be executed such that the correction data set includes information about a correction of the so-called fixed pattern noise. The fixed pattern noise is a substantially constant, the individual pixels 31 of the first picture 30 associated noise due to production-related small differences in the respective pixels 31 of the first picture 30 associated sub-areas of the photosensitive surface 3 arises. To the fixed pattern noise of the first picture 30 At least, every pixel can diminish 31 of the first picture 30 be reworked with an individual offset value and possibly with an individual scaling. The individual offset values and scalings are constant and dependent on the respective photosensitive surface. In the case of the present embodiment, the individual offset values and scalings are in the microcontroller 6 stored and become the computing device 4 transmitted with the correction data record. The computing device 4 then substitutes for the production of the second image data set not only the the driving tube 42 and the distance 43 assigned pixels 31 of the first picture 30 but also corrects the fixed pattern noise.

Im Falle des vorliegenden Ausführungsbeispiels ist es noch vorgesehen, dass die digitale Schnittstelle 5 wahlweise auch dafür verwendet werden kann, den ersten Bilddatensatz auszugeben. Dafür umfasst der Bildsensor 2 eine Schaltvorrichtung in Form von Pins 11, sodass bei entsprechender Pinbele gung die digitale Schnittstelle 5 entweder einen digitalen Ausgang darstellt oder den Korrekturdatensatz vom Mikrokontroller 6 entgegennimmt.In the case of the present embodiment, it is still provided that the digital interface 5 optionally also be used to output the first image data set. This includes the image sensor 2 a switching device in the form of pins 11 so that with appropriate Pinbele the digital interface 5 either represents a digital output or the correction data set from the microcontroller 6 answers.

Im Falle des vorliegenden Ausführungsbeispiels werden die dem Fahrschlauch 42 und dem Abstand 43 zugeordnete Bildpunkte 31 des ersten Bildes 30 lediglich durch die entsprechenden Signale des Korrekturdatensatzes ersetzt. Allgemein ist auch eine Kombination, z.B. eine Verrechnung der Signale entsprechender Bildpunkte 31 des ersten Bildes 30 mit den entsprechenden Signalen des Korrekturdatensatzes möglich.In the case of the present embodiment, the the driving tube 42 and the distance 43 assigned pixels 31 of the first picture 30 only replaced by the corresponding signals of the correction data set. General is also a combination, such as a calculation of the signals corresponding pixels 31 of the first picture 30 possible with the corresponding signals of the correction data set.

Obgleich die vorliegende Erfindung vorstehend anhand eines bevorzugten Ausführungsbeispiels beschrieben wurde, ist sie darauf nicht beschränkt, sondern auf vielfältige Art und Weise modifizierbar.Although the present invention above based on a preferred embodiment It is not limited to this, but in many ways and modifiable.

11: digitale Kameradigital camera
22: Bildsensorimage sensor
33: lichtempfindliche Flächephotosensitive area
44: Rechenvorrichtungcomputing device
55: digitale Schnittstelledigital interface
66: Mikrokontrollermicrocontroller
77: VideoausgabeschnittstelleVideo output interface
88th: analoger Videoausganganalog video output
99: CAN-BusCAN bus
1010: Bildschirmscreen
1111: Pinspins
2020: Fahrzeugvehicle
2121: Fahrzeugvehicle
2222: Ultraschallsensorultrasonic sensor
2323: elektrischen Leitungelectrical management
2424: Steuergerätcontrol unit
2525: Vorderräderfront wheels
3030: Bildimage
3131: Bildpunktepixels
4040: Bildimage
4141: Bildpunktepixels
4242: Fahrschlauchdriving tube
4343: Angabespecification
5050: Bildimage
5151: Bildpunktepixels

Claims

Image sensor, comprising - a photosensitive surface ( 3 ) for generating a first image data set which has a first plurality of first pixels ( 31 ) first image ( 30 ), - a digital interface ( 5 ) for inputting a correction data set having correction signals which at least some of the first pixels ( 31 ) of the first image ( 30 ), - a processing device ( 4 ) for generating a second image data set which has a plurality of second pixels ( 41 ) second image ( 40 ), wherein the processing device ( 4 ) generates the second image data set from the first image data set by generating signals of first pixels ( 31 ) are combined with corresponding correction signals, and - an output ( 8th ), the second image ( 40 ).

Image sensor according to claim 1, characterized in that the correction signals of the correction data set signals for correcting the fixed pattern noise of the signals of the corresponding first pixels ( 31 ) of the first image ( 30 ).

Image sensor according to at least one of the preceding claims, characterized in that the correction signals of the correction data set comprise signals for fading in information into the first image (1) associated with the first image data set ( 30 ) around believe it.

Image sensor according to claim 3, characterized in that its processing device ( 4 ) for generating the second image data set signals of first pixels ( 31 ) replaced by corresponding signals for fading in the information.

Image sensor according to at least one of the preceding claims, characterized in that its photosensitive surface ( 3 ) receives a series of first image data sets whose processing device ( 4 ) generates a series of second image data sets from the series of first image data sets and which is set up to synchronize a series of correction data sets with the series of first image data sets, and whose output ( 8th ) a series of second images associated with the series of second image data sets ( 40 ).

Image sensor according to one of claims 5, characterized in that its digital interface ( 5 ) is arranged to synchronize the series of correction data sets with the series of first image data sets.

Image sensor according to claim 5 or 6, characterized that the image sensor is a synchronization signal for synchronization the series of correction records with the series of first image data sets generated or the image sensor is adapted to such a synchronization signal to receive and process.

Image sensor according to at least one of the preceding claims, characterized in that its digital interface ( 5 ) is adapted to output the first image data set.

Digital camera in or for a vehicle, comprising - an image sensor ( 2 ) according to at least one of claims 1 to 8 and - a computing device ( 6 ) with an interface ( 7 ) and an entrance ( 9 ), wherein the computing device ( 6 ) with the digital interface ( 5 ) of the image sensor ( 2 ) and the image sensor ( 2 ) transmits the correction data record.

Digital camera according to claim 9, characterized in that the series of correction data sets with the series of first image data sets via the digital interface ( 5 ) of the image sensor ( 2 ) and the interface ( 7 ) of the computing device ( 6 ) is synchronized.

Digital camera according to claim 9 or 10, characterized in that its input ( 9 ) is designed as a CAN bus.

Vehicle, in particular motor vehicle, with a Digital camera according to one of claims 9 to 11.

Vehicle according to claim 12, characterized in that that the digital camera is part of a parking aid system of the Vehicle is and / or as a rear view camera, which is directed away from a vehicle rear, formed in the vehicle is.