WO1999014938A1 - Bildsensorelement und anordnung von bildsensorelementen - Google Patents

Bildsensorelement und anordnung von bildsensorelementen Download PDF

Info

Publication number
WO1999014938A1
WO1999014938A1 PCT/DE1998/002490 DE9802490W WO9914938A1 WO 1999014938 A1 WO1999014938 A1 WO 1999014938A1 DE 9802490 W DE9802490 W DE 9802490W WO 9914938 A1 WO9914938 A1 WO 9914938A1
Authority
WO
WIPO (PCT)
Prior art keywords
image sensor
light
sensor element
wiring
image
Prior art date
Application number
PCT/DE1998/002490
Other languages
English (en)
French (fr)
Inventor
Hans Bloss
Heino MÖLLER
Original Assignee
Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DE19740612A external-priority patent/DE19740612B4/de
Application filed by Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. filed Critical Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V.
Priority to EP98951210A priority Critical patent/EP1013076B1/de
Priority to US09/508,072 priority patent/US6437307B1/en
Publication of WO1999014938A1 publication Critical patent/WO1999014938A1/de

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N3/00—Scanning details of television systems; Combination thereof with generation of supply voltages
    • H04N3/10—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical
    • H04N3/14—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices
    • H04N3/15—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices for picture signal generation
    • H04N3/1575—Picture signal readout register, e.g. shift registers, interline shift registers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/713—Transfer or readout registers; Split readout registers or multiple readout registers

Definitions

  • the present invention relates to an improved image sensor element with the features of the preamble of claim 1 and an improved arrangement of image sensor elements with the features of the preamble of claim 6
  • the photodiode array is the older technology, but in its original form has some technological disadvantages, which led to lower sensitivity, higher noise, lower speed, etc., which is why it has been largely replaced by the CCD sensors
  • CCD sensors on the other hand, have the disadvantage that they cannot easily be integrated with CMOS circuits due to the additional complexity of the manufacturing process and the increased manufacturing costs.
  • CCD sensors are also devices with a high capacitance, so that an on-chip CMOS
  • Control electronics for arrangements with a large area a very high power was consumed (2 to 3 W)
  • many different voltage levels are required for CCD sensors in order to ensure high efficiency of the charge transfer
  • the known CCD sensors have the disadvantage that the CCD technology offers little degrees of freedom with regard to the shape and arrangement of the pixels.
  • the CCD technology offers little degrees of freedom with regard to the shape and arrangement of the pixels.
  • only rectangular shapes of image sensor elements are used, which form a regular Cartesian matrix be put together, of importance
  • US Patent No. 3,971,065 describes an image sensor in which three different types of image sensor elements, each consisting of CCD sensors, are arranged such that the same types of image sensor elements are each arranged in the form of gratings the different types of image sensor elements each represent a first color, for example green, a second color, for example red, and the general brightness.
  • the image sensor elements for the general brightness are arranged in the form of a checkerboard pattern, while the image sensor elements for the first color show the gaps in a first checkerboard pattern row, the image sensor elements for the second color fill the gaps in the second checkerboard pattern row and so on.
  • CMOS Active Pixel Image Sensors for Highly Integrated Imaging Systems Sunetra K. Mendis et al., IEEE Journal of Solid-State Circuits, Vol. 32, No. 2, February 1997
  • a single sensor element essentially consists of three components, which are arranged as shown in FIG. 4a: 1 .
  • a photosensitive surface 101 in the form of a photodiode or a phototransistor;
  • circuit part 100 which comprises, for example, several CMOS transistors and is generally not usable for light detection, for generating a signal corresponding to the incident light and processing the signal;
  • the sensor elements are then arranged according to FIG. 4b to form a matrix or other structures.
  • image sharpness and resolution can be increased by increasing the number of image sensors and increasing the ratio of light-sensitive area to image sensor surface. 2.
  • cost and speed of the resulting image sensor depend on the number of sensor elements. That is, the more sensor elements, the slower and more expensive the resulting image sensor becomes.
  • the present invention is therefore based on the object of improving the known image sensor element and the known arrangement of image sensor elements in such a way that the costs of the image sensor resulting from the image sensor elements are reduced, its speed is increased and that the image sharpness and resolution of the image sensor are not impaired at the same time become.
  • the object is solved by the characterizing features of claim 1.
  • an arrangement of image sensor elements according to claim 6, an image sensor according to claim 9 and its use according to claim 10 is also provided.
  • the present invention is essentially based on the finding that the performance of an image sensor can be increased in that the focal points of the light-sensitive surfaces of the individual image sensor elements are arranged in the form of two or more square gratings arranged offset from one another, the grating lines in each case parallel to the Are rows or columns of the image to be captured.
  • the focus is on the light-sensitive areas of the individual
  • Image sensor elements are preferably arranged in a grid line such that they fall on half the distance between two focal points of light-sensitive surfaces of the individual image sensor elements of the preceding grid line, as shown in FIG. 5.
  • a type of checkerboard pattern as shown in FIG. 2 is realized.
  • the image information of the areas of the respective image sensor elements lying between the light-sensitive areas can then be obtained by known interpolation methods, such as the one described for example from the contribution by Kris S. Balch "Replacing 16 mm Film Calmeras with High Definition Digital Cameras” in “Ultrahigh- and High-Speed Photography, Videography, and Photonics '94", Proceedings of SPIE - The International Society for Optcial Engineering, 27-28 July 1994, Vol. 2273, are known
  • Such a grating can expediently be implemented by arranging individual image sensor elements, which are configured as defined in claim 1, to form any size sensor
  • the fact that only a part of the sensor surface is available for light detection in a known CMOS sensor in APS technology is used according to the present invention in a targeted manner by arranging photosensitive and non-photosensitive parts in such a way that with the aid of Interpolation method an image can be reconstructed which is of higher quality than an image with the same number of image sensor elements but a different shape and arrangement of the image sensor elements.
  • known interpolation methods can be used for the interpolation
  • the interpolation process can be implemented directly in the hardware, so that the interpolation process is not time-critical, i.e. it leads to a delay in the image acquisition process.
  • the interpolation process can be postponed so that it does not run during image acquisition but only during image processing
  • the computing unit for interpolating the data obtained can also be contained in the circuit location of each individual image sensor element
  • Image sensor element surface for the light-sensitive elements or surfaces are available (full factor «100%, since the circuit in each image sensor element Space required), is used in a targeted manner Structures are realized which enable the use of simple, very effective interpolation methods.
  • the effectiveness of these interpolation methods is based on the fact that not the entire sensor surface or image sensor element surface is occupied by light-sensitive elements, but light-sensitive and light-insensitive regions are arranged accordingly
  • FIG. 1 shows an exemplary embodiment of an image sensor element according to the invention
  • FIG. 2 shows an exemplary arrangement of image sensor elements according to the invention, as shown for example in FIG. 1
  • FIG. 3 shows an image sensor according to the invention with the arrangement of image sensor elements shown in FIG. 2
  • Fig. 4a shows a conventional image sensor element
  • Fig. 4b shows a conventional image sensor 5 shows an exemplary arrangement of the focal points of the light-sensitive areas of the individual image sensor elements according to a preferred embodiment of the present invention
  • FIG. 6a shows a further image sensor element which is not according to the invention and which can be arranged according to FIG. 6b to form an arrangement according to the invention
  • FIG. 6c shows an arrangement according to the invention of the image sensor elements shown in FIG. 4a
  • An image sensor element according to the present invention as shown in FIG. 1 a is rectangular and has a predetermined length and a predetermined width. According to a preferred embodiment, the ratio between length and width is 2 to 1, but other suitably selected ratios are also conceivable
  • Part (201) of the image sensor element is provided for the light-sensitive element, for example a photodiode or a phototransistor, while another part (200) is provided for the light-insensitive circuit part
  • the photosensitive square area is preferably trimmed at the corners in order to make space for the wiring. This creates an octagonal shape of the photodiode or the phototransistor 202.
  • the photosensitive element is arranged so that the photosensitive surface covers a section of the image sensor element substantially over its entire width.
  • the photosensitive surface can have any shape, for example a hexagonal, square or circular shape, or else any irregular shape It is only important for the present invention that it covers a portion of the image sensor element essentially over its entire width.
  • the known or inventive image sensor elements are arranged in such a way that the focal points of the light-sensitive surfaces of the individual image sensor elements are arranged in the form of two or more square grids arranged offset from one another, the grid lines being parallel to the rows or columns of the image to be recorded That is, depending on the orientation in which the image sensor is viewed, the individual grid lines represent either the rows or the columns of the image to be recorded
  • the centers of gravity of the light-sensitive areas of the individual image sensor elements in a grid are never preferably arranged such that they fall on half the distance between two centers of gravity of the light-sensitive areas of the individual image sensor elements of the preceding grid line, as shown in FIG. 5, according to a particularly preferred embodiment of the In the present invention, a kind of checkerboard pattern as shown in Fig. 2 is realized
  • the image sensor elements are wired according to FIG. 3.
  • the size of the cut corners is selected just as large as is required for the wiring (400)
  • FIGS. 6b and 6c show arrangements of image sensor elements which are each constructed as in FIGS. 4a or 6a .
  • the image signals of the light-insensitive parts of the image sensor elements are obtained in the computing unit, not shown, by known interpolation methods.
  • the resolution can be increased for a fixed number of image sensor elements, i.e. doubled if the light-sensitive surface takes up half of the image sensor element, or reduced for a fixed resolution, the number of image sensor elements, ie if the light-sensitive surface in each case half of the image sensor element takes in half, reducing costs and increasing the speed of the image sensor.
  • the image sensor element according to the invention can also have a length-to-width ratio of 3: 1 or more, the light-sensitive surface being arranged on a third or less of the image sensor element. It is also conceivable that the image sensor element according to the invention has a length-to-width ratio of 4: 1, the light-sensitive area filling half of the image sensor element and being arranged centrally on the image sensor element.
  • the image sensor according to the invention can advantageously be used in high-speed cameras, for example for high-speed video recordings.
  • an image sensor 512 with 2 conventional sensor elements can be used for a camera at 1000 frames / second.
  • an image sensor with 256 x 512 sensor elements 512 according to the invention supplies 2 pixels with comparable image quality in a camera with 2000 images / second.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

Die vorliegende Erfindung betrifft ein rechteckig ausgebildetes Bildsensorelement mit einer vorbestimmten Länge und einer vorbestimmten Breite mit einer lichtempfindlichen Fläche, einem lichtunempfindlichen Schaltungsteil und einem Verdrahtungsteil zum Verbinden des Schaltungsteils nach außen, wobei die lichtempfindliche Fläche einen Abschnitt des Bildsensorelements im wesentlichen auf seiner ganzen Breite bedeckt. Beispielsweise ist die lichtempfindliche Fläche als Achteck ausgebildet und auf einer Hälfte des Bildsensorelements angeordnet. Die vorliegende Erfindung betrifft weiterhin eine Anordnung von Bildsensorelementen, wobei jeweils die Schwerpunkte der lichtempfindlichen Flächen der einzelnen Bildsensorelemente in Form von zwei oder mehr zueinander versetzt angeordneten quadratischen Gittern angerodnet sind, wobei die Gitterlinien jeweils parallel zu den Zeilen bzw. Spalten des aufzunehmenden Bildes sind. Vorzugsweise sind die Schwerpunkte der lichtempfindlichen Flächen in der Form eines Schachbrettmusters angeordnet. Ferner betrifft die vorliegende Erfindung einen Bildsensor mit solch einer Anordnung, Verdrahtungselementen zur Verbindung der Verdrahtungsteile der einzelnen Bildsensorelemente nach außen und einer mit den Verdrahtungselementen verbundenen Recheneinheit zur Interpolation der gewonnenen Daten. Solch ein Bildsensor kann vorteilhafterweise in einer Hochgeschwindigkeitskamera verwendet werden.

Description

Bildsensorelement und Anordnung von Bildsensorelementen
Die vorliegende Erfindung betrifft ein verbessertes Bildsensorelement mit den Merkmalen des Oberbegriffs von Anspruch 1 sowie eine verbesserte Anordnung von Bildsensorelementen mit den Merkmalen des Oberbegriffs von Anspruch 6
Zur Aufnahme von Stand- oder Bewegtbildern in der Videotechnik haben sich in den letzten Jahren im wesentlichen zwei Techniken etabliert, die Photodiodenarrays und die CCD-Sensoren Zur Zeit sind über 90% aller verwendeten Sensoren in CCD- Technik realisiert
Das Photodiodenarray ist die altere Technik, hat aber in seiner ursprunglichen Form einige technologisch bedingte Nachteile, die zu geringerer Empfindlichkeit, höherem Rauschen, niedrigerer Geschwindigkeit etc führten, weshalb es von den CCD- Sensoren weitgehend verdrangt worden ist
CCD-Sensoren haben hingegen den Nachteil, daß sie aufgrund der zusätzlichen Komplexität des Herstellungsverfahrens und der erhöhten Herstellungskosten nicht leicht mit CMOS-Schaltkreisen integriert werden können Auch sind CCD-Sensoren Vorrichtungen mit einer hohen Kapazität, so daß eine on-chip CMOS-
Ansteuerelektronik für Anordnungen mit großer Flache eine sehr hohe Leistung verbrauchen wurde (2 bis 3 W) Darüber hinaus sind für CCD-Sensoren viele verschiedene Spannungsniveaus notwendig, um eine hohe Effizienz der Ladungsubertragung sicherzustellen
Dagegen haben die Fortschritte in der Siliziumtechnologie es ermöglicht, bei einem Photodiodenarray jedem Bildaufnahmeelement eine eigene aktive Verarbeitungseinheit (z B Verstarker etc ) hinzuzufügen und so die bestehenden Nachteile der Photodiodenarrays zu beseitigen und insbesondere sogar neue Möglichkeiten der Bildaufnahme zu schaffen Diese Technik ist unter dem Begriff „APS" („Active Pixel Sensor") bekannt Die APS-Technik wird derzeit als für die Zukunft technologisch sehr bedeutsam angesehen Verbesserungen der bekannten Systeme sind gemacht worden, um die Bildschärfe und die Auflosung zu erhöhen, damit ein scharfes, gut aufgelöstes und kontrastreiches Bild bei einer vorgegebenen Anzahl von Bildelementen dargestellt werden kann In diesem Zusammenhang ist beispielsweise festgestellt worden, daß eine hexagonale Anordnung sechseckiger Elemente, wie sie auch in der Retina von Mensch und Tier vorhanden ist, sehr vorteilhaft ist Mit einer solchen Anordnung ist aber das Problem verbunden, daß eine numerische Bildverarbeitung deutlich erschwert ist, da die einzelnen Bildsensorelemente nicht in einer Anordnung von Spalten und Reihen angeordnet sind
In Hinblick auf eine Optimierung der Anordnung von Bildsensorelementen haben die bekannten CCD-Sensoren jedoch den Nachteil, daß die CCD-Technik hinsichtlich der Formgebung und Anordnung der Bildpunkte wenig Freiheitsgrade bietet In der Praxis sind nur rechteckige Formen von Bildsensorelementen, die zu einer regulären kartesischen Matrix zusammengefugt werden, von Bedeutung
In der US-Patentschrift Nr 3 971 065 wird ein Bildsensor beschrieben, bei dem drei verschiedene Typen von Bildsensorelementen, die jeweils aus CCD-Sensoren bestehen, dergestalt angeordnet sind, daß gleiche Typen von Bildsensorelementen jeweils in der Form von Gittern angeordnet sind Genauer gesagt stellen die verschiedenen Typen von Bildsensorelementen jeweils eine erste Farbe, beispielsweise grün, eine zweite Farbe, beispielsweise rot, sowie die allgemeine Helligkeit dar Die Bildsensorelemente für die allgemeine Helligkeit sind dabei in der Form eines Schachbrettmusters angeordnet, wahrend die Bildsensorelemente für die erste Farbe die Zwischenräume in einer ersten Schachbrettmusterreihe, die Bildsensorelemente für die zweite Farbe die Zwischenräume in der zweiten Schachbrettmusterreihe und so weiter auffüllen Dadurch sollen einerseits die hohe Komplexität der optischen Konstruktion und andererseits die mit den herkömmlichen Verfahren verbundenen Probleme der Bild-Lagegenauigkeit bei hintereinander angeordneten Filtern für verschiedene Farben vermieden werden Im Vergleich zu den CCD-Sensoren ist bei APS-CMOS-Sensoren dagegen prinzipiell fast jede beliebige Form mit beliebiger Gesamtanordnung realisierbar.
Bei einem bekannten AP-Sensor, wie er beispielsweise aus „CMOS Active Pixel Image Sensors for Highly Integrated Imaging Systems", Sunetra K. Mendis et al., IEEE Journal of Solid-State Circuits, Vol. 32, No. 2, February 1997, oder „Smar Image Sensors for Optical Microsystems", Peter Seitz et al., Laser und Optoelektronik 28(6)/1996, bekannt ist, besteht ein einzelnes Sensorelement im wesentlichen aus drei Komponenten, die wie in Fig. 4a gezeigt angeordnet sind: 1 . aus einer lichtempfindlichen Fläche 101 in Form einer Photodiode oder eines Phototransistors;
2. aus einem Schaltungsteil 100, der beispielsweise mehrere CMOS-Transistoren umfaßt und im allgemeinen für den Lichtnachweis nicht verwendbar ist, zum Erzeugen eines dem einfallenden Licht entsprechenden Signals und Verarbeiten des Signals;
3. aus einem Verdrahtungteil 102, der die einzelnen Sensorbildelemente zu einem Gesamtsensor verbindet.
Die Anordnung der Komponenten der einzelnen Sensorelemente erfolgt nach schaltungs- und layouttechnischer Notwendigkeit und ist für eine spätere
Weiterverarbeitung der Bildinformation nicht unbedingt optimal. Die Sensorelemente werden dann gemäß Fig. 4b zu einer Matrix oder zu anderen Strukturen angeordnet.
Bei der Optimierung der bekannten Bildsensorelemente und Bildsensoren findet sich der Fachmann im Spannungsfeld der folgenden gegenläufigen Tendenzen wieder.
1 . Einerseits lassen sich Bildschärfe und Auflösung erhöhen, indem man die Anzahl der Bildsensoren erhöht und das Verhältnis lichtempfindliche Fläche zu Bildsensoroberfläche vergrößert. 2. Andererseits hängen Kosten und Schnelligkeit des sich ergebenden Bildsensors von der Anzahl der Sensorelemente ab. D.h. je mehr Sensorelemente, desto langsamer und teurer wird der sich ergebende Bildsensor.
Der vorliegenden Erfindung liegt somit die Aufgabe zugrunde, das bekannte Bildsensorelement sowie die bekannte Anordnung von Bildsensorelementen dahingehend zu verbessern, daß die Kosten des sich aus den Bildsensorelementen ergebenden Bildsensors verringert werden, seine Schnelligkeit erhöht wird und daß gleichzeitig die Bildschärfe und Auflösung des Bildsensors nicht beeinträchtigt werden.
Gemäß der vorliegenden Erfindung wird die Aufgabe durch die kennzeichnenden Merkmale von Patentanspruch 1 gelöst. Gemäß der vorliegenden Erfindung wird darüber hinaus auch noch eine Anordnung von Bildsensorelementen nach Anspruch 6, ein Bildsensor nach Anspruch 9 sowie dessen Verwendung nach Anspruch 10 bereitgestellt.
Die vorliegende Erfindung beruht im wesentlichen auf der Erkenntnis, daß die Leistungsfähigkeit eines Bildsensors dadurch erhöht werden kann, daß die Schwerpunkte der lichtempfindlichen Flächen der einzelnen Bildsensorelemente in Form von zwei oder mehr zueinander versetzt angeordneten quadratischen Gittern angeordnet sind, wobei die Gitterlinien jeweils parallel zu den Zeilen bzw. Spalten des aufzunehmenden Bildes sind.
Dabei sind die Schwerpunkte der lichtempfindlichen Flächen der einzelnen
Bildsensorelemente in einer Gitterlinie vorzugsweise derart angeordnet, daß sie auf die Hälfte des Abstands zwischen zwei Schwerpunkten von lichtempfindlichen Flächen der einzelnen Bildsensorelementen der vorangehenden Gitterlinie fallen, wie in Fig. 5 gezeigt. Gemäß einer besonders bevorzugten Ausführungsform wird eine Art Schachbrettmuster, wie in Fig. 2 gezeigt, realisiert. Die Bildinformation der zwischen den lichtempfindlichen Flächen liegenden Bereiche der jeweiligen Bildsensorelemente kann dann durch bekannte Interpolationsverfahren, wie sie beispielsweise aus dem Beitrag von Kris S. Balch „Replacing 16 mm Film Calmeras with High Definition Digital Cameras" in „Ultrahigh- and High-Speed Photography, Videography, and Photonics '94", Proceedings of SPIE - The International Society for Optcial Engineering, 27-28 July 1994, Vol. 2273, bekannt sind, gewonnen werden
Dabei kann solch ein Gitter zweckmäßigerweise realisiert werden, indem man einzelne Bildsensorelemente, die wie in Patentanspruch 1 definiert ausgestaltet sind, zu einem beliebig großen Sensor anordnet
Somit wird die Tatsache, daß bei einem bekannten CMOS-Sensor in APS-Technik nur ein Teil der Sensorflache für den Lichtnachweis zur Verfugung steht, gemäß der vorliegenden Erfindung gezielt ausgenutzt, indem lichtempfindliche und nicht- lichtempfindliche Teile so angeordnet werden, daß mit Hilfe von Interpolationsverfahren ein Bild rekonstruiert werden kann, das qualitativ hochwertiger als ein Bild mit gleicher Anzahl von Bildsensorelementen aber anderer Form und Anordnung der Bildsensorelemente ist Gemäß der vorliegenden Erfindung können für die Interpolation bekannte Interpolationsverfahren verwendet werden
Das Interpolationsverfahren kann direkt in die Hardware implementiert werden, so daß das Interpolationsverfahren nicht zeitkritisch ist, d h zu einer Verzögerung des Bildaufnahmeverfahrens fuhrt Darüber hinaus kann das Interpolationsverfahren zeitlich nach hinten verschoben werden, so daß es nicht wahrend der Bildaufnahme sondern erst wahrend der Bildverarbeitung ablauft
Die Recheneinheit zur Interpolation der gewonnenen Daten kann auch in dem Schaltungstell von jedem einzelnen Bildsensorelement enthalten sein
Gemäß der vorliegenden Erfindung werden die folgenden Vorteile erzielt
1 Die technologische Randbedingung, daß nicht die ganze
Bildsensorelementoberflache für die lichtempfindlichen Elemente bzw Flachen zur Verfugung stehen (Fullfaktor « 100%, da die Schaltung in jedem Bildsensorelement Platz benötigt), wird gezielt ausgenutzt Es werden Strukturen realisiert, welche die Anwendung einfacher, sehr wirkungsvoller Interpolationsverfahren ermöglichen Die Effektivität dieser Interpolationsverfahren beruht darauf, daß nicht die vollständige Sensorflache bzw Bildsensorelementflache mit lichtempfindlichen Elementen belegt ist, sondern lichtempfindliche und lichtunempfindliche Regionen entsprechend angeordnet sind
2 Einfachste Umrechnung der gewonnenen Bildpunkte in ein Bildformat in Form einer regulären kartesischen Matrix zur Weiterverwendung in der Bildverarbeitung Die „blinden Felder" der Schachbrettstruktur können leicht durch Interpolation gewonnen werden, und man erhalt somit ein Bild mit quadratischen Bildpunkten
3 Da für ein qualitativ gleichwertiges Bild durch die erfindungsgemaße Vorrichtung effektiv weniger Bildpunkte im Bildsensor erforderlich sind, können schnellere und kostengünstigere Kameras realisiert werden
Die vorliegende Erfindung wird nun unter Bezugnahme auf die begleitenden Zeichnungen detaillierter beschrieben
Fig 1 zeigt eine beispielhafte Ausfuhrungsform eines erfindungsgemaßen Bildsensorelements
Fig 2 zeigt eine beispielhafte Anordnung von erfindungsgemaßen Bildsensorelementen, wie sie beispielsweise in Fig 1 gezeigt sind
Fig 3 zeigt einen erfindungsgemaßen Bildsensor mit der in Fig 2 gezeigten Anordnung von Bildsensorelementen
Fig 4a zeigt ein herkömmliches Bildsensorelement, und Fig 4b zeigt einen herkömmlichen Bildsensor Fig 5 zeigt eine beispielhafte Anordnung der Schwerpunkte der lichtempfindlichen Flachen der einzelnen Bildsensorelemente gemäß einer bevorzugten Ausfuhrungsform der vorliegenden Erfindung
Fig 6a zeigt ein weiteres, nicht erfindungsgemaßes Bildsensorelement, das gemäß Fig 6b zu einer erfindungsgemaßen Anordnung angeordnet werden kann
Fig 6c zeigt eine erfindungsgemaße Anordnung der in Fig 4a gezeigten Bildsensorelemente
Ein wie in Fig 1 a gezeigtes Bildsensorelement gemäß der vorliegenden Erfindung ist rechteckig ausgebildet und weist eine vorbestimmte Lange und eine vorbestimmte Breite auf Gemäß einer bevorzugten Ausfuhrungsform betragt das Verhältnis zwischen Lange und Breite 2 zu 1 , aber es sind auch andere geeignet ausgewählte Verhaltnisse denkbar Ein Teil (201 ) des Bildsensorelements ist dabei für das lichtempfindliche Element, beispielsweise eine Photodiode oder einen Phototransistor vorgesehen, wahrend ein weiterer Teil (200) für den lichtunempfindlichen Schaltungsteil vorgesehen ist
Wie in Fig 1 b gezeigt, wird gemäß der vorliegenden Erfindung vorzugsweise die lichtempfindliche quadratische Flache an den Ecken beschnitten, um Platz für die Verdrahtung zu schaffen Dadurch entsteht eine achteckige Form der Photodiode bzw des Phototransistors 202 Somit ist, wie in Fig 1 b gezeigt, das lichtempfindliche Element so angeordnet, daß die lichtempfindliche Flache einen Abschnitt des Bildsensorelements im wesentlichen auf seiner ganzen Breite bedeckt Dabei kann jedoch gemäß der vorliegenden Erfindung die lichtempfindliche Flache jede beliebige Form aufweisen, beispielsweise eine sechseckige, viereckige oder Kreisform oder aber auch eine beliebige unregelmäßige Form Für die vorliegende Erfindung ist lediglich wichtig, daß sie einen Abschnitt des Bildsensorelements im wesentlichen auf seiner ganzen Breite bedeckt Dabei heißt „im wesentlichen auf seiner ganzen Breite" vollständig bis auf kleinere Bereiche, die zum Bereitstellen von Verdrahtungstellen ausgespart worden sind Gemäß der vorliegenden Erfindung werden die bekannten oder erfindungsgemaßen Bildsensorelemente so angeordnet, daß die Schwerpunkte der lichtempfindlichen Flachen der einzelnen Bildsensorelemente in Form von zwei oder mehr zueinander versetzt angeordneten quadratischen Gittern angeordnet sind, wobei die Gitterlinien jeweils parallel zu den Zeilen bzw Spalten des aufzunehmenden Bildes sind Das heißt, je nachdem, in welcher Orientierung man den Bildsensor betrachtet, stellen die einzelnen Gitterlinien entweder die Reihen oder die Spalten des aufzunehmenden Bildes dar
Dabei sind die Schwerpunkte der lichtempfindlichen Flachen der einzelnen Bildsensorelemente in einer Gitter nie vorzugsweise derart angeordnet, daß sie auf die Hälfte des Abstands zwischen zwei Schwerpunkten von lichtempfindlichen Flachen der einzelnen Bildsensorelementen der vorangehenden Gitterhnie fallen, wie in Fig 5 gezeigt Gemäß einer besonders bevorzugten Ausfuhrungsform der vorliegenden Erfindung wird eine Art Schachbrettmuster, wie in Fig 2 gezeigt, realisiert
Die Verdrahtung der Bildsensorelemente erfolgt dabei gemäß Fig 3 Die Große der abgeschnittenen Ecken wird dabei gerade so groß ausgewählt, wie es für die Verdrahtung (400) erforderlich ist
Obwohl für die erfindungsgemaße Anordnung von Bildsensorelemente die Ausgestaltung der einzelnen Bildsensorelement gemäß Anspruch 1 zweckmäßig ist, ist die vorliegende Erfindung keineswegs darauf beschrankt, daß nur derartige Bildsensorelemente für die erfindungsgemaße Anordnung verwendet werden können Bei einer erfindungsgemaßen Anordnung gemäß Anspruch 6 können die einzelnen Bildsensorelemente auch wie in Fig 6a oder auch Fig 4a gezeigt aufgebaut sein Die Fig 6b und 6c zeigen Anordnungen von Bildsensorelementen, die jeweils wie in Fig 4a oder 6a aufgebaut sind Bei Betrieb des Bildsensors wird in den lichtempfindlichen Flächen der einzelnen Bildsensorelementen durch das einfallende Licht ein Photostrom erzeugt, der räumlich über die Größe des Bildsensorelements und zeitlich über die Belichtungszeit in einer nicht gezeigten Verarbeitungseinrichtung aufintegriert wird, so daß sich ein der jeweiligen Graustufe ergebendes Bildsignal ergibt. Die Bildsignale der lichtunempfindlichen Teile der Bildsensorelemente werden in der nicht gezeigten Recheneinheit durch bekannte Interpolationsverfahren gewonnen. Durch diese Technik läßt sich bei einer festliegenden Anzahl von Bildsensorelementen die Auflösung erhöhen, d.h. wenn die lichtempfindliche Fläche jeweils die Hälfte des Bildsensorelements einnimmt, verdoppeln, beziehungsweise bei einer festgelegten Auflösung die Anzahl an Bildsensorelementen verringern, d.h. wenn die lichtempfindliche Fläche jeweils die Hälfte des Bildsensorelements einnimmt, halbieren, wodurch die Kosten verringert und die Schnelligkeit des Bildsensors erhöht wird.
Das erfindungsgemäße Bildsensorelement kann auch ein Längen-Breiten-Verhältnis von 3:1 oder mehr aufweisen, wobei die lichtempfindliche Fläche auf einem Drittel oder weniger des Bildsensorelements angeordnet ist. Ebenso ist denkbar, daß das erfindungsgemäße Bildsensorelement ein Längen-Breiten-Verhältnis von 4: 1 aufweist, wobei die lichtempfindliche Fläche die Hälfte des Bildsensorelements ausfüllt und mittig auf dem Bildsensorelement angeordnet ist.
Der erfindungsgemäße Bildsensor kann aufgrund seiner erhöhten Schnelligkeit vorteilhafterweise in Hochgeschwindigkeitskameras, beispielsweise für Hochgeschwindigkeitsvideoauf nahmen, verwendet werden. Beispielsweise kann für eine Kamera mit 1000 Bildern/Sekunde ein Bildsensor mit 5122 herkömmlichen Sensorelementen verwendet werden. Gemäß der vorliegenden Erfindung liefert ein Bildsensor mit 256 x 512 erfindungsgemäßen Sensorelementen 5122 Bildpunkte bei vergleichbarer Bildqualität in einer Kamera mit 2000 Bildern/Sekunde.

Claims

Patentansprüche
1 Rechteckig ausgebildetes Bildsensorelement mit einer vorbestimmten Lange und einer vorbestimmten Breite mit
- einer lichtempfindlichen Flache (201 , 202),
- einem Schaltungsteil (200) und
- einem Verdrahtungstell (400) zum Verbinden des Schaltungsteils nach außen, wobei Schaltungsteil (200) und Verdrahtungstell (400) jeweils einen Teil der
Oberflache der Bildsensorelementoberflache belegen, dadurch gekennzeichnet, daß die lichtempfindliche Flache (201 , 202) einen Abschnitt des Bildsensorelements im wesentlichen auf seiner ganzen Breite bedeckt
2 Bildsensorelement nach Anspruch 1 , dadurch gekennzeichnet, daß das Langen- Breiten-Verhaltnis 2 1 betragt
3 Bildsensorelement nach Anspruch 1 oder 2, dadurch gekennzeichnet, daß die lichtempfindliche Flache (202) in Form eines Achtecks ausgebildet ist
4 Bildsensorelement nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, daß die lichtempfindliche Flache (201 , 202) auf einer Hälfte des Bildsensorelements angeordnet ist
5 Bildsensorelement nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, daß die lichtempfindliche Flache (201 , 202) eine Photodiode, ein Phototransistor oder ein Photowiderstand ist
6 Anordnung von Bildsensorelementen jeweils mit
- einer lichtempfindlichen Flache (201 , 202),
- einem Schaltungsteil (200) und - einem Verdrahtungsteil (400) zum Verbinden des Schaltungsteils (200) nach außen, wobei Schaltungsteil (200) und Verdrahtungsteil (400) jeweils einen Teil der Oberfläche der Bildsensorelementoberfläche belegen, dadurch gekennzeichnet, daß jeweils die Schwerpunkte der lichtempfindlichen Flächen (201 , 202) der einzelnen Bildsensorelemente in Form von zwei oder mehr zueinander versetzt angeordneten quadratischen Gittern angeordnet sind, wobei die Gitterlinien jeweils parallel zu den Zeilen bzw. Spalten des aufzunehmenden Bildes sind.
7 Anordnung nach Anspruch 6, dadurch gekennzeichnet, daß die Schwerpunkte der lichtempfindlichen Flächen (201 , 202) der einzelnen Bildsensorelemente in einer Gitterhnie auf die Hälfte des Abstands zwischen zwei Schwerpunkten von lichtempfindlichen Flachen der einzelnen Bildsensorelementen der vorangehenden Gitterhnie fallen
8 Anordnung nach Anspruch 6 oder 7, wobei die Bildsensorelemente wie in einem der Ansprüche 1 bis 5 definiert sind
9 Bildsensor mit einer Anordnung nach einem der Ansprüche 6 bis 8, Verdrahtungselementen zur Verbindung der Verdrahtungsteile der einzelnen Bildsensorelemente nach außen und einer mit den Verdrahtungselementen verbundenen Recheneinheit zur Interpolation der gewonnenen Daten.
10 Verwendung des Bildsensors nach Anspruch 8 in einer Hochgeschwindigkeitskamera
PCT/DE1998/002490 1997-09-12 1998-08-19 Bildsensorelement und anordnung von bildsensorelementen WO1999014938A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP98951210A EP1013076B1 (de) 1997-09-12 1998-08-19 Bildsensorelemente
US09/508,072 US6437307B1 (en) 1997-09-12 1998-08-19 Image detection member and assembly of image detection members

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE19740612.2 1997-09-12
DE19740612A DE19740612B4 (de) 1997-08-30 1997-09-12 Anordnung von Bildsensorelementen

Publications (1)

Publication Number Publication Date
WO1999014938A1 true WO1999014938A1 (de) 1999-03-25

Family

ID=7842461

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE1998/002490 WO1999014938A1 (de) 1997-09-12 1998-08-19 Bildsensorelement und anordnung von bildsensorelementen

Country Status (3)

Country Link
US (1) US6437307B1 (de)
EP (1) EP1013076B1 (de)
WO (1) WO1999014938A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7043316B2 (en) 2003-02-14 2006-05-09 Rockwell Automation Technologies Inc. Location based programming and data management in an automated environment

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001203969A (ja) * 2000-01-21 2001-07-27 Fuji Photo Film Co Ltd 撮像装置およびその動作制御方法
JP3706817B2 (ja) * 2000-06-27 2005-10-19 キヤノン株式会社 画像処理装置及びその処理方法
US20040031904A1 (en) * 2002-08-13 2004-02-19 Umax Data Systems Inc. Apparatus of linear staggered sensors
JP2004336469A (ja) * 2003-05-08 2004-11-25 Fuji Film Microdevices Co Ltd 固体撮像素子、撮像装置、及び画像処理方法
KR100871687B1 (ko) 2004-02-11 2008-12-05 삼성전자주식회사 서브 샘플링 모드에서 디스플레이 품질을 개선한 고체촬상 소자 및 그 구동 방법
JP4324502B2 (ja) * 2004-03-29 2009-09-02 富士フイルム株式会社 Ｃｃｄ型固体撮像素子及びデジタルカメラ
US7564629B1 (en) * 2004-12-02 2009-07-21 Crosstek Capital, LLC Microlens alignment procedures in CMOS image sensor design
US7763918B1 (en) 2004-12-02 2010-07-27 Chen Feng Image pixel design to enhance the uniformity of intensity distribution on digital image sensors
US7450161B1 (en) 2004-12-02 2008-11-11 Magnachip Semiconductor Ltd. System and method to enhance the uniformity of intensity distribution on digital imaging sensors
JP4630200B2 (ja) * 2005-03-07 2011-02-09 富士フイルム株式会社 固体撮像素子および撮像装置
CN101257034B (zh) * 2008-04-10 2011-05-18 中国科学院长春光学精密机械与物理研究所 可提高分辨率的ccd像元
US20150146054A1 (en) * 2013-11-27 2015-05-28 Aptina Imaging Corporation Image sensors with color filter elements of different sizes
KR20200108735A (ko) 2019-03-11 2020-09-21 엘지이노텍 주식회사 카메라 장치
KR20200108736A (ko) 2019-03-11 2020-09-21 엘지이노텍 주식회사 카메라 모듈

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4242700A (en) * 1979-01-22 1980-12-30 Rca Corporation Line transfer CCD imagers
WO1994021998A1 (en) * 1993-03-18 1994-09-29 General Imaging Corporation X-ray imaging system and solid state detector therefor
WO1996031976A1 (en) * 1995-04-07 1996-10-10 Litton Systems Canada Limited Read-out circuit for active matrix imaging arrays
WO1997028558A2 (en) * 1996-01-22 1997-08-07 California Institute Of Technology Active pixel sensor array with electronic shuttering

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3971065A (en) 1975-03-05 1976-07-20 Eastman Kodak Company Color imaging array
JPS59108460A (ja) 1982-12-14 1984-06-22 Olympus Optical Co Ltd 固体撮像装置
US4558365A (en) 1983-06-06 1985-12-10 Fuji Photo Film Co., Ltd. High-resolution high-sensitivity solid-state imaging sensor
KR960000223B1 (ko) 1990-11-16 1996-01-03 가부시키가이샤 도시바 고체촬상장치 및 그 제조방법
JP2711038B2 (ja) 1991-11-20 1998-02-10 富士通株式会社 光検知装置
JP3356816B2 (ja) 1992-03-24 2002-12-16 セイコーインスツルメンツ株式会社 半導体光電気変換装置
JP2541470B2 (ja) 1993-08-26 1996-10-09 日本電気株式会社 固体撮像素子
US5471515A (en) * 1994-01-28 1995-11-28 California Institute Of Technology Active pixel sensor with intra-pixel charge transfer
US5581084A (en) 1995-06-07 1996-12-03 Santa Barbara Research Center Simultaneous two color IR detector having common middle layer metallic contact
US5587596A (en) * 1995-09-20 1996-12-24 National Semiconductor Corporation Single MOS transistor active pixel sensor cell with automatic anti-blooming and wide dynamic range
US6046466A (en) * 1997-09-12 2000-04-04 Nikon Corporation Solid-state imaging device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4242700A (en) * 1979-01-22 1980-12-30 Rca Corporation Line transfer CCD imagers
WO1994021998A1 (en) * 1993-03-18 1994-09-29 General Imaging Corporation X-ray imaging system and solid state detector therefor
WO1996031976A1 (en) * 1995-04-07 1996-10-10 Litton Systems Canada Limited Read-out circuit for active matrix imaging arrays
WO1997028558A2 (en) * 1996-01-22 1997-08-07 California Institute Of Technology Active pixel sensor array with electronic shuttering

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7043316B2 (en) 2003-02-14 2006-05-09 Rockwell Automation Technologies Inc. Location based programming and data management in an automated environment

Also Published As

Publication number Publication date
US6437307B1 (en) 2002-08-20
EP1013076B1 (de) 2001-02-28
EP1013076A1 (de) 2000-06-28

Similar Documents

Publication Publication Date Title
DE69736621T2 (de) Aktiver Farbpixelsensor mit elektronischen Verschlusseigenschaften, mit Überstrahungsschutzsteuerung und geringem Übersprechen
EP1013076B1 (de) Bildsensorelemente
DE69729648T2 (de) Aktivpixelsensormatrix mit mehrfachauflösungsausgabe
DE60104632T2 (de) Verfahren und System zur Rauschbeseitigung für ein spärlich abgetastetes Bild mit erweitertem Dynamikbereich
DE60312297T2 (de) Festkörper-Bildaufnahmevorrichtung mit breitem optischem Dynamikbereich
EP0878091B1 (de) Farbbildsensor für kurzzeitbelichtung
DE60104508T2 (de) Verfahren und vorrichtung zum erzeugen eines bildes geringer auflösung aus einem spärlich abgetasteten bild mit erweitertem dynamikbereich
EP2596642B1 (de) Bildaufnahmevorrichtung und verfahren zum aufnehmen eines bildes
DE69005991T2 (de) Verfahren und anordnung zur erzeugung eines hochauflösenden elektronischen signals von der zeilenabtastung einer farbvorlage.
DE60318168T2 (de) Bildsensor mit größeren Mikrolinsen in den Randbereichen
DE69117737T2 (de) Spectrumsabhängiger dither und farbfiltermaske zur erhöhung der blauempfindlichkeit des bildsensors
DE102012213189A1 (de) Bildgebungs-Array mit Fotodioden unterschiedlicher Lichtempfindlichkeiten und zugehörige Bildwiederherstellungsverfahren
DE102014214750B3 (de) Bildaufnahmesystem mit schnell vibrierendem Global-Shutter-CMOS-Sensor
DE2729107A1 (de) Verfahren zur erzeugung von farbinformationssignalen und anordnung zur durchfuehrung des verfahrens
DE3417385C2 (de)
DE3230552C2 (de) Festkörper-Farbbildaufnahmesystem
DE102011081405B4 (de) Bildsensor, Abbildungsvorrichtung und Verfahren für einen Bildsensor
DE3442647A1 (de) Ccd-bildwandler
DE60102411T2 (de) Gerät zur Bestimmung des besten Bildes von einem Photosensor mit zwei Auflösungen
DE19740612B4 (de) Anordnung von Bildsensorelementen
DE60013622T2 (de) Bildaufnahemvorrichtung
DE3223861C2 (de)
DE3111300C2 (de)
EP1397002B1 (de) Gradientengestütztes Verfahren zur Bildpunktinterpolation
DE19836138A1 (de) Verfahren zur Berechnung von Farbwerten

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

121 Ep: the epo has been informed by wipo that ep was designated in this application
DFPE Request for preliminary examination filed prior to expiration of 19th month from priority date (pct application filed before 20040101)
WWE Wipo information: entry into national phase

Ref document number: 1998951210

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 09508072

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 1998951210

Country of ref document: EP

WWG Wipo information: grant in national office

Ref document number: 1998951210

Country of ref document: EP