DE102014105222A1 - Camera with integrated spectrometer - Google Patents
Camera with integrated spectrometer Download PDFInfo
- Publication number
- DE102014105222A1 DE102014105222A1 DE102014105222.6A DE102014105222A DE102014105222A1 DE 102014105222 A1 DE102014105222 A1 DE 102014105222A1 DE 102014105222 A DE102014105222 A DE 102014105222A DE 102014105222 A1 DE102014105222 A1 DE 102014105222A1
- Authority
- DE
- Germany
- Prior art keywords
- image
- spectrometer
- plane
- detector
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
- 238000001228 spectrum Methods 0.000 claims abstract description 18
- 230000005855 radiation Effects 0.000 claims description 32
- 230000003287 optical effect Effects 0.000 claims description 23
- 238000012545 processing Methods 0.000 claims description 4
- 238000006073 displacement reaction Methods 0.000 claims description 2
- 230000003595 spectral effect Effects 0.000 description 27
- 238000000034 method Methods 0.000 description 14
- 230000010354 integration Effects 0.000 description 12
- 238000000701 chemical imaging Methods 0.000 description 10
- 238000001931 thermography Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 238000012552 review Methods 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 239000011248 coating agent Substances 0.000 description 3
- 238000000576 coating method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000007935 neutral effect Effects 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000011144 upstream manufacturing Methods 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- JBRZTFJDHDCESZ-UHFFFAOYSA-N AsGa Chemical compound [As]#[Ga] JBRZTFJDHDCESZ-UHFFFAOYSA-N 0.000 description 1
- 229910001218 Gallium arsenide Inorganic materials 0.000 description 1
- 229910000661 Mercury cadmium telluride Inorganic materials 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- MCMSPRNYOJJPIZ-UHFFFAOYSA-N cadmium;mercury;tellurium Chemical compound [Cd]=[Te]=[Hg] MCMSPRNYOJJPIZ-UHFFFAOYSA-N 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 239000007789 gas Substances 0.000 description 1
- 238000004868 gas analysis Methods 0.000 description 1
- WPYVAWXEWQSOGY-UHFFFAOYSA-N indium antimonide Chemical compound [Sb]#[In] WPYVAWXEWQSOGY-UHFFFAOYSA-N 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003530 single readout Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/021—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using plane or convex mirrors, parallel phase plates, or particular reflectors
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0237—Adjustable, e.g. focussing
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0248—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using a sighting port, e.g. camera or human eye
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0264—Electrical interface; User interface
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0289—Field-of-view determination; Aiming or pointing of a spectrometer; Adjusting alignment; Encoding angular position; Size of measurement area; Position tracking
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
- G01J3/26—Generating the spectrum; Monochromators using multiple reflection, e.g. Fabry-Perot interferometer, variable interference filters
Abstract
Kamera mit einer matrixförmigen Anordnung von Detektorflächen (5.1) eines Detektorarrays (5) zur Erzeugung eines pixelbasierten Bildes und einem Spektrometer (4) mit einer Sensorfläche (4.1), die wenigstens der Position einer Detektorfläche (5.1) des Detektorarrays (5) und damit einem Pixel des Bildes und maximal der Position einer zusammenhängenden Gruppe von Detektorflächen (5.1), die kleiner als das Detektorarray (5) ist, und damit einer zusammenhängenden Gruppe von Pixeln des Bildes zugeordnet werden kann, womit ein mit dem Spektrometer (4) erzeugbares Spektrum einem Bildausschnitt des Bildes zugeordnet werden kann.Camera with a matrix-like arrangement of detector surfaces (5.1) of a detector array (5) for generating a pixel-based image and a spectrometer (4) with a sensor surface (4.1), at least the position of a detector surface (5.1) of the detector array (5) and thus a Pixels of the image and at most the position of a contiguous group of detector surfaces (5.1), which is smaller than the detector array (5), and thus a contiguous group of pixels of the image can be assigned, whereby a spectrometer (4) can be generated with a spectrum Image section of the image can be assigned.
Description
Die Erfindung betrifft eine Kamera mit einem Detektorarray zur Erzeugung eines pixelbasierten ortsaufgelösten Bildes und einem in der Kamera integrierten Spektrometer zur Erzeugung eines Spektrums, welches wenigstens einem Pixel und maximal einer zusammenhängenden Pixelgruppe und damit einem Bildausschnitt zugeordnet werden kann. The invention relates to a camera having a detector array for generating a pixel-based spatially resolved image and a spectrometer integrated in the camera for generating a spectrum which can be assigned to at least one pixel and at most one contiguous pixel group and thus an image detail.
Vorteilhafte Anwendungen ergeben sich insbesondere, wenn sehr hohe Frameraten erreicht werden sollen, zum Beispiel bei der Beobachtung sich schnell bewegender Objekte, gleichzeitig aber auch spektrale Informationen von dem beobachteten Objekt gewonnen werden sollen. Advantageous applications arise in particular if very high frame rates are to be achieved, for example when observing fast moving objects, but at the same time also spectral information is to be obtained from the observed object.
Im Vergleich zu Spektralkameras, die ein orts- und wellenlängenaufgelöstes Bild, nachfolgend spektrales Bild, liefern, sind durch klassische Kameras, die ein ortsaufgelöstes, jedoch nicht spektral aufgelöstes Bild, nachfolgend klassisches Bild, liefern, deutlich höhere Frameraten erzielbar. Sie liefern jedoch keine spektralen Informationen. In comparison to spectral cameras which provide a spatially and wavelength resolved image, hereinafter spectral image, significantly higher frame rates are achievable by classical cameras providing a spatially resolved but not spectrally resolved image, subsequently classical image. However, they do not provide spectral information.
Eine klassische Kamera kann für eine Bandbreite in einem beliebigen Spektralbereich optischer Strahlung (z. B. Röntgenstrahlung, visuell sichtbares Licht, Infrarotlicht) ausgelegt sein. A classical camera can be designed for a bandwidth in any spectral range of optical radiation (eg X-ray radiation, visually visible light, infrared light).
In vielen Fällen sind solche klassischen Kameras Wärmebildkameras. In many cases, such classic cameras are thermal imaging cameras.
Wärmebildkameras werden von einer Reihe von Herstellern in unterschiedlichen Ausführungen angeboten. Technisch lässt sich damit ein klassisches Bild, hier konkret ein Wärmebild, z. B. im nahen Infrarotbereich durch die für sichtbares Licht gängigen Technologien wie CCD- oder CMOS-Sensoren erzeugen. Ein Wärmebild im mittelwelligen und langwelligen Infrarotbereich lässt sich durch ein Mikrobolometerarray aus matrixförmig angeordneten Mikrobolometern erzeugen. Anstelle von Mikrobolometern kommen im mittelwelligen Infrarotbereich insbesondere Cadmium-Quecksilber-Tellurid-Detektoren (MCT) oder Indium-Antimonid-Detektoren und im langwelligen Infrarotbereich insbesondere Gallium-Arsenid-Quantentopf-Detektoren (QWIP) zum Einsatz. Thermal imaging cameras are offered by a number of manufacturers in various designs. Technically, this can be a classic image, specifically a thermal image, z. B. in the near infrared range through the common visible light technologies such as CCD or CMOS sensors. A thermal image in the medium-wave and long-wave infrared range can be generated by a Mikrobolometerarray of matrix-arranged microbolometers. Cadmium mercury telluride detectors (MCT) or indium antimonide detectors are used instead of microbolometers in the medium-wave infrared range, and in particular gallium arsenide quantum well detectors (QWIP) in the long-wave infrared range.
So wie dem Fachmann die für eine Wärmebildkamera geeigneten Detektorarrays bekannt sind, sind sie ihm auch für andere klassische Kameras bekannt, die für andere als Infrarotspektralbereiche ausgelegt sind. Just as the person skilled in the art is familiar with the detector arrays suitable for a thermal imaging camera, they are also known to him for other classical cameras designed for areas other than infrared spectral ranges.
Mit diesen Detektorarrays können, über eine Optik belichtet, pixelbasierte klassische Bilder erzeugt werden. Pixelbasiert heißt hier, dass das klassische Bild mit einer bestimmten Anzahl und Anordnung von Positionen diskretisiert ist, an denen die Strahlungsintensitäten von auftreffender Strahlung innerhalb des spektralen Empfindlichkeitsbereiches der Detektorelemente des Detektorarrays aufintegriert werden. Die örtlich unterschiedlichen Intensitätswerte werden in einem sichtbar gemachten klassischen Bild in unterschiedlichen Graustufen oder für eine bessere Differenzierung durch das menschliche Auge in verschiedenen Falschfarben dargestellt. With these detector arrays, pixel-based classical images can be generated using an optical system. Pixel-based here means that the classical image is discretized with a certain number and arrangement of positions at which the radiation intensities of incident radiation are integrated within the spectral sensitivity range of the detector elements of the detector array. The locally different intensity values are displayed in a visualized classical image in different gray levels or for a better differentiation by the human eye in different false colors.
Gleichzeitig kann das klassische Bild elektronisch als sogenannter Frame abgespeichert werden. At the same time, the classic image can be stored electronically as a so-called frame.
Unter einem Frame wird ein Datensatz verstanden, gebildet aus den für ein Bild, sowohl für ein klassisches Bild als auch ein spektrales Bild, erfassten Pixelintensitätswerten des matrixförmigen Detektorarrays. A frame is understood to mean a data record formed from the pixel intensity values of the matrix-shaped detector array acquired for an image, both for a classical image and for a spectral image.
Das heißt, für ein klassisches Bild entsteht ein Frame üblicherweise im Ergebnis eines einzelnen Auslesevorgangs der gesamten Matrixanordnung des Detektorarrays und stellt entsprechend eine Matrix der Pixelintensitäten eines kompletten Auslesevorgang dar, wobei die einzelnen Pixelintensitäten jeweils der Position eines Pixels und damit einer Position eines Detektorelementes in der Matrix des Detektorarrays zugeordnet werden können. Ein Frame lässt sich als zweidimensionale Anordnung von Pixeln in Zeilen (x-Richtung) und Spalten (y-Richtung) in Form eines Informationsrechtecks darstellen, wobei jedem Pixel ein Intensitätswert zugeordnet ist (
Für ein spektrales Bild stellt ein Frame, wie es für das klassische Bild beschrieben wurde, nur ein Teilframe dar. Zeitgleich oder zeitlich nacheinander werden die einzelnen Teilframes als Datensätze für jeweils ein Teilbild, das mit der Strahlung eines schmalen spektralen Wellenlängenbereiches, nachfolgend nur Wellenlänge genannt, erzeugt wird, gebildet. Der Frame für das Gesamtbild wird anschließend aus allen Teilframes zusammengesetzt. For a spectral image, a frame, as described for the classical image, represents only a partial frame. At the same time or in succession, the individual partial frames are called data sets for one partial image each, which with the radiation of a narrow spectral wavelength range, hereafter only wavelength , is generated. The frame for the overall picture is then assembled from all subframes.
Die dem Detektorarray in Einfallsrichtung der Strahlung vorgeordnete Optik ist optimal so gerechnet und konstruiert, dass sie für eine Strahlung mit einer Bandbreite innerhalb des spektralen Empfindlichkeitsbereiches des Detektorarray gut durchlässig ist. The optical system arranged upstream of the detector array in the direction of incidence of the radiation is optimally calculated and constructed such that it is well permeable to radiation with a bandwidth within the spectral sensitivity range of the detector array.
Da die Strahlungsintensität des gesamten auf ein Detektorelement auftreffenden Anteils der Strahlung aufintegriert wird, vorausgesetzt die Bandbreite der Strahlung liegt innerhalb des spektralen Empfindlichkeitsbereiches der Detektorelemente, ist die Integrationszeit vergleichsweise zu einer spektralen Kamera, wo pro Belichtung nur die Strahlungsintensität eines monochromatischen Anteils der Strahlung aufintegriert wird, verhältnismäßig kurz. Selbst wenn alle Teilframes für ein spektrales Bild zeitgleich gebildet werden, sind die erreichbaren Frameraten aufgrund der notwendigen längeren Integrationszeiten vergleichsweise geringer als bei klassischen Kameras. Since the radiation intensity of the total incident on a detector element portion of the radiation is integrated, provided that the bandwidth of the radiation is within the spectral sensitivity range of the detector elements, the integration time is comparable to a spectral camera, where per exposure only the Radiation intensity of a monochromatic portion of the radiation is integrated, relatively short. Even if all partial frames for a spectral image are formed at the same time, the achievable frame rates are comparatively lower due to the necessary longer integration times than with conventional cameras.
Es ist bekannt, zur Veränderung der Größe des Sehfeldes (field of view = FOV) einer Kamera ein Zoom-Objektiv zu verwenden, welches eine für alle Zoom-Stellungen ortsfeste Bildebene aufweist. Im Falle, dass die abzubildende Szene im Unendlichen liegt, fällt diese Bildebene mit der Brennebene des Zoom-Objektives zusammen. Bei vielen Kameras, oder im speziellen Fall bei Wärmebildkameras, die mit einem ungekühlten Detektorarray ausgestattet sind, ist üblicherweise das Detektorarray in dieser Bildebene angeordnet. It is known to use a zoom lens for changing the size of the field of view (FOV) of a camera, which has a fixed image position for all zoom positions. In the case that the scene to be imaged lies at infinity, this image plane coincides with the focal plane of the zoom lens. In many cameras, or in the special case of thermal imaging cameras equipped with an uncooled detector array, usually the detector array is arranged in this image plane.
Es ist auch bekannt, z. B. bei Wärmebildkameras mit einem gekühlten Detektorarray, welches folglich einen größeren Bauraum benötigt, dass die Bildebene des Zoom-Objektives lediglich eine Zwischenbildebene darstellt, die über eine Zusatzoptik, einen sogenannten Re-Imager, in eine Bildebene abgebildet wird, in der dann das Detektorarray steht. Um die Baulänge der Kamera zu reduzieren, wird diese oft nicht als ein gestrecktes optisches System ausgeführt, sondern über die Einbringung wenigstens eines Umlenkspiegels gefaltet, wobei ein Umlenkspiegel zwischen dem Zoom-Objektiv und der Zusatzoptik möglichst fern von der Zwischenbildebene angeordnet wird. It is also known, for. B. in thermal imaging cameras with a cooled detector array, which consequently requires a larger space that the image plane of the zoom lens only represents an intermediate image plane, which is imaged via an additional optics, a so-called re-imager, in an image plane in which then the detector array stands. To reduce the overall length of the camera, this is often not designed as a stretched optical system, but folded over the introduction of at least one deflection mirror, wherein a deflection mirror between the zoom lens and the additional optics is arranged as far as possible from the intermediate image plane.
Für verschiedene Anwendungen ist ein klassisches Bild allein oft nicht ausreichend, um eine gewünschte ausreichende Information von der beobachteten Szenerie zu erhalten. For a variety of applications, a classic image alone is often not sufficient to obtain desired, sufficient information from the observed scenery.
Aus der Astronomie sind seit Ende des 19. Jahrhunderts, insbesondere mit den Arbeiten von Fabry und Pérot, erste Verfahren der abbildenden Spektroskopie bekannt (sogenanntes „Hyperspectral Imaging“ oder „Spectral Imaging“), mit denen spektrale Bilder (sogenannte. „spectral images“ oder „hyperspectral images“) erzeugt werden. Since the end of the 19th century, especially with the works of Fabry and Pérot, astronomy has been the first method of imaging spectroscopy (so-called "hyperspectral imaging" or "spectral imaging") with which spectral images (so-called "spectral images") are known. or "hyperspectral images").
Diese Verfahren und folglich auf diesen Verfahren basierende Kameras werden in sogenannte scannende Verfahren und sogenannte Snapshot-Verfahren unterteilt. These methods and, consequently, cameras based on this method are subdivided into so-called scanning methods and so-called snapshot methods.
Wie bereits erwähnt, wird ein Frame für ein spektrales Bild aus Teilframes gebildet. Dabei werden die Teilframes im scannenden Verfahren nacheinander gewonnen, indem ein Detektorarray zeitlich nacheinander mit Strahlung unterschiedlicher Wellenlänge belichtet wird. Eine hierfür geeignete Kamera kann z. B. in ihrem Strahlengang vor dem Detektorarray einen Fabry-Pérot-Filter aufweisen. Dieser wird durch zwei Platten gebildet, deren Abstand verändert, das heißt durchgestimmt wird, womit sich die transmittierende Wellenlänge ändert. As already mentioned, a frame for a spectral image is formed from subframes. In the process, the subframes are obtained successively by scanning a detector array with radiation of different wavelengths in succession. A suitable camera for z. B. in their beam path in front of the detector array have a Fabry-Pérot filter. This is formed by two plates whose spacing is changed, that is to say tuned, with which the transmitting wavelength changes.
In sogenannten Snapshot-Verfahren werden mit mehreren Detektorarrays zeitgleich die Teilframes gewonnen. Die einfallende Strahlung muss also auf mehrere Kamerakanäle aufgeteilt werden. Damit wird die auf ein Detektorelement auftreffende Intensität noch einmal herabgesetzt, was zu einer weiteren Steigerung der Integrationszeit führt, um durch die Detektorelemente eine oberhalb des Eigenrauschens liegende Intensität detektieren zu können. In so-called snapshot methods, the subframes are simultaneously obtained with a plurality of detector arrays. The incident radiation must therefore be divided into several camera channels. Thus, the incident on a detector element intensity is reduced again, which leads to a further increase in the integration time to detect by the detector elements lying above the intrinsic noise intensity can.
Eine im Snapshot-Verfahren arbeitende Kamera ist also im Vergleich zu einer Kamera, die im scannenden Verfahren arbeitet, noch lichtschwächer. A snapshot camera is even weaker compared to a camera using the scanning method.
Im Unterschied zu den Informationen eines klassischen Bildes, welches durch den ortsaufgelösten Empfang von Strahlungsintensitäten als 2D-Bild bzw. als Informationsrechteck (
Im einfachsten Fall könnte die Auflösung in der dritten Dimension (λ-Achse) 3 betragen und der Informationsquader z. B. aus 640 × 480 × 3 Punkten bestehen. Dabei entspräche 640 × 480 der örtlichen Bildauflösung, da das Detektorarray aus 640 Detektoren in x-Richtung und 480 Detektoren in y-Richtung besteht, und 3 der spektralen Bildauflösung, die durch den RGB-Filter eines Standard-CCD- oder CMOS-Sensors zu Stande kommt. In the simplest case, the resolution in the third dimension (λ-axis) could be 3 and the information cuboid z. B. consist of 640 × 480 × 3 points. Here, 640 × 480 would correspond to the local image resolution, since the detector array consists of 640 detectors in the x-direction and 480 detectors in the y-direction, and 3 the spectral image resolution allowed by the RGB filter of a standard CCD or CMOS sensor Come.
Ab einer Wellenlängenabtastung von größer 3 wird in der Regel von einem hyperspektralen Bild (sogenanntes „hyperspectral image“) gesprochen. From a wavelength scan greater than 3, a hyperspectral image (so-called "hyperspectral image") is generally used.
In dem
Ein konkretes Beispiel für eine Hyperspektral-Kamera, mit der ein hyperspektrales Bild erzeugt werden kann, ist die Nahinfrarot-Kamera mit Spektrometer (Near-Infrared Camera and Multi-Object Spectrometer – NICMOS) des Hubble-Space-Teleskops (HST). A concrete example of a hyperspectral camera capable of producing a hyperspectral image is the Near Infrared Camera and Multi-Object Spectrometer (NICMOS) near-infrared camera of the Hubble Space Telescope (HST).
Der Informationsgehalt eines solchen hyperspektralen Bildes ist beeindruckend, bringt aber Nachteile mit sich. The information content of such a hyperspectral image is impressive but has disadvantages.
Der größte Nachteil entsteht durch die geringe Lichtstärke der hyperspektralen Kameras. Eine Framerate (Bildwiederholrate) von größer 10 Bilder/Sekunde zur Verfolgung von Objekten im freien Gelände ist damit kaum zu erreichen. The biggest disadvantage is the low light intensity of the hyperspectral cameras. A frame rate (refresh rate) of greater than 10 frames / second for tracking objects in open terrain is thus hardly achievable.
Ein weiterer Nachteil besteht in der erforderlichen hohen Speicherkapazität zur Abspeicherung jeweils eines Informationsquaders pro Frame, die bei gewünschten hohen Frameraten erheblich sein kann. Another disadvantage is the required high storage capacity for storing one information quad per frame, which can be considerable at desired high frame rates.
Auch ist, wie erläutert, die erreichbare Framerate bei der Erzeugung von spektralen Bildern im Vergleich zur Framerate bei der Erzeugung von klassischen Bildern gering. Also, as explained, the achievable frame rate is low in the generation of spectral images as compared to the frame rate in classical image generation.
Der Erfindung liegt die Aufgabe zugrunde, eine kompakte Kamera zu schaffen, die Frameraten größer 10, das heißt mehr als 10 Bilder pro Sekunde erlaubt und ein ortsaufgelöstes Bild sowie spektrale Informationen (Spektraldaten) liefert. The invention has for its object to provide a compact camera that allows frame rates greater than 10, that is, more than 10 frames per second and provides a spatially resolved image and spectral information (spectral data).
Erfindungsgemäß wird diese Aufgabe für eine Kamera mit einer optischen Achse, entlang derer ein Zoom-Objektiv mit einem Zoomantrieb und eine Zusatzoptik angeordnet sind, mit einem ebenen Umlenkspiegel und einer feststehenden Zwischenbildebene zwischen dem Zoom-Objektiv und der Zusatzoptik sowie einer Bildebene hinter der Zusatzoptik, in der eine matrixförmige Anordnung von Detektorflächen eines Detektorarrays zur Erzeugung eines pixelbasierten Bildes, bestehend aus einer matrixförmigen Anordnung von Pixeln, angeordnet ist, sowie einer Steuer- und Recheneinheit gelöst. Dazu ist der Umlenkspiegel vor der Zwischenbildebene angeordnet und für ein durch das Zoom-Objektiv einfallendes Strahlenbündel permanent oder wenigstens zeitweise teilweise durchlässig. Von dem Strahlenbündel
Für Anwendungen, in denen z. B. ein sich von der Kamera entfernendes Objekt verfolgt werden soll, ist das Spektrometer vorteilhaft auf der optischen Achse angeordnet. For applications in which z. B. an object to be followed by the camera to be followed, the spectrometer is advantageously arranged on the optical axis.
Für Anwendungen, in denen z. B. ein statisches Objekt aufgenommen werden soll, kann das Spektrometer vorteilhaft außerhalb der optischen Achse angeordnet sein. For applications in which z. B. a static object is to be recorded, the spectrometer can be advantageously arranged outside the optical axis.
Vorteilhaft ist das Spektrometer innerhalb der Sensorebene verschiebbar, um wahlweise ein Spektrum von verschiedenen Bildausschnitten zu erhalten. Advantageously, the spectrometer is displaceable within the sensor plane in order to optionally obtain a spectrum of different image sections.
Für eine automatisierte Verschiebung des Spektrometers auch während der Verfolgung eines Objektes ist vorteilhaft ein Antrieb vorhanden, der mit der Steuer- und Recheneinheit verbunden ist. For an automated displacement of the spectrometer also during the tracking of an object, a drive is advantageously present, which is connected to the control and computing unit.
Es ist von Vorteil, wenn der Antrieb synchron zum Zoom-Antrieb ansteuerbar ist. It is advantageous if the drive can be controlled synchronously with the zoom drive.
Für eine kompakte Bauweise ist es vorteilhaft, wenn das Spektrometer ein Mikrospektrometer ist. For a compact design, it is advantageous if the spectrometer is a microspectrometer.
Erste Wahl ist hier ein Spektrometer mit einem Fabry-Pérot-Filter. The first choice here is a spectrometer with a Fabry-Pérot filter.
Für eine einfache Bedienung kann ein Touchbedienfeld vorhanden sein, das mit der Steuer- und Recheneinheit verbunden ist, wobei die Steuer- und Recheneinheit so ausgelegt ist, dass durch lokale Berührung des Touchbedienfeldes der Bildausschnitt ausgewählt werden kann. For ease of operation, a touch panel may be present, which is connected to the control and computing unit, wherein the control and computing unit is designed so that by local touch of the touch panel of the image can be selected.
Die Erfindung basiert auf der Grundüberlegung, bei einer bekannten klassischen Kamera, nachfolgend nur Kamera, mit einem Zoom-Objektiv und einer Zusatzoptik einen dazwischen angeordneten Umlenkspiegel teildurchlässig auszuführen, um aus dem in die Kamera einfallenden Strahlenbündel ein erstes Teilstrahlenbündel auszukoppeln, welches nicht in die Zusatzoptik umgelenkt wird, sondern durch den Umlenkspiegel hindurch auf die Sensorfläche eines Spektrometers auftrifft. Diese Sensorfläche ist in einer Sensorebene an einer ausgewählten Position angeordnet oder innerhalb der Sensorebene bei einer festen Zoom-Stellung oder auch synchron mit der Änderung der Zoom-Stellung des Zoom-Objektives verschiebbar. Da die Sensorebene in einer durch Strahlteilung zur Zwischenbildebene konjugierten Ebene liegt, die durch Strahlabbildung in einer zur Bildebene der Wärmebildkamera konjugierten Ebene liegt, kann die in der Sensorebene angeordnete Sensorfläche des Spektrometers einer Position in einem in der Bildebene stehenden Detektorarray zugeordnet werden, womit ein mittels des Spektrometers erhaltenes Spektrum einem Bildausschnitt des Bildes zugeordnet werden kann. The invention is based on the basic idea, in a known classic camera, hereafter only camera, with a zoom lens and additional optics to perform a partially interposed deflecting mirror to decouple from the incident into the camera beam a first partial beam, which is not in the additional optics is deflected, but incident through the deflection mirror on the sensor surface of a spectrometer. This sensor surface is arranged in a sensor plane at a selected position or displaceable within the sensor plane at a fixed zoom position or synchronously with the change in the zoom position of the zoom lens. Since the sensor plane is located in a plane conjugate to the intermediate image plane by beam imaging in a plane conjugate to the image plane of the thermal imaging camera, the sensor plane arranged in the sensor surface of the spectrometer can be assigned to a position in a standing in the image plane detector array, which means a Spectrum obtained spectrum can be assigned to an image section of the image.
Die Erfindung soll nachstehend anhand von Ausführungsbeispielen näher erläutert werden. Hierzu zeigen die Zeichnungen: The invention will be explained below with reference to exemplary embodiments. The drawings show:
In
Die Kamera umfasst im Wesentlichen ein Zoom-Objektiv
Wie aus dem Optikschema in
Der teildurchlässige ebene Umlenkspiegel
Infolge der Teildurchlässigkeit des Umlenkspiegels
Zwei zueinander konjugierte Ebenen zeichnen sich dadurch aus, das jedem Punkt in einer Ebene exakt ein Punkt in der anderen Ebene und umgekehrt zugeordnet werden kann. Konjugierte Ebenen können über eine Strahlabbildung, aber auch durch eine Strahlteilung entstehen. Bei den durch Strahlteilung gebildeten, zueinander konjugierten Ebenen SE und ZBE ist kein Abbildungsmaßstab bei der Zuordnung zu beachten. Hingegen ist bei den durch Strahlabbildung gebildeten konjugierten Ebenen ZBE und BE der Abbildungsmaßstab der Zusatzoptik
So wird z. B. bei einer Größe der Sensorfläche
Praktisch wird man allerdings bevorzugt für eine hohe Bildauflösung ein Detektorarray
Hingegen wird man bevorzugt ein Spektrometer
Um für die Abbildung auf dem Detektorarray
Wird nun von dem ersten Teilstrahlenbündel
Die Größe des Sehfeldes der Kamera wird durch den Bildwinkel bestimmt, welcher sich aus der Brennweite der Kamera und der Diagonale des Detektorarrays
Mit der Änderung der Zoom-Stellung des Zoom-Objektives
Das Sehfeld wird vollständig auf dem Detektorarray
Nur ein Ausschnitt aus diesem Sehfeld ist die Basis für ein mittels des Spektrometers
Als Spektrometer
Die üblichen Größen der Detektorflächen
Ein mit einer Sensorfläche
Der teildurchlässige Umlenkspiegel
Die geometrische Strahlteilung erfolgt, indem in dem Umlenkspiegel
Nachteilig an der geometrischen Strahlteilung ist, dass ein lokal begrenzter Strahlungsanteil des Strahlenbündels
Dieser Informationsverlust entsteht nicht mit einer neutralen Strahlteilung, bei der dann allerdings auch Strahlungsanteile ausgekoppelt werden, die nicht auf das Spektrometer
Der Umlenkspiegel
Das hat den Vorteil, dass das Spektrometer
Auch kann die Verwendung eines verspiegelten Shutters als teildurchlässiger Umlenkspiegel
Eine Alternative für einen teildurchlässigen Umlenkspiegel
Die Lage des Ausschnittes aus dem Sehfeld und damit die Lage des Bildausschnittes im Bild wird vorgegeben, indem das Spektrometer
Insbesondere für eine Anwendung, bei welcher die Kamera bei der Erstellung von Bildern in einer zeitlichen Abfolge gezoomt wird, z. B. bei der Verfolgung sich entfernender oder annähernder Objekte, ist es von Vorteil, wenn das Spektrometer
Für Anwendungsfälle, in denen nicht die Sehfeldmitte der Bereich des Interesses ist, sondern zum Beispiel ein örtlicher Bereich, der sich z. B. im Sehfeld rechts oberhalb der Sehfeldmitte befindet, kann das Spektrometer
Wie aus dem Blockschaltbild in
Für den Fall, dass das Spektrometer
Die dargestellten Strichlinien stellen den optischen Fluss in der Kamera dar. The dashed lines represent the optical flow in the camera.
Als Spektrometer
Das heißt, grundsätzlich könnte das Spektrometer
Für eine erfindungsgemäße Kamera soll daher ein nach einem scannenden Verfahren arbeitendes Spektrometer
Je geringer die Integrationszeit des Detektorarrays
Besonders vorteilhaft wird als Spektrometer
Eine erfindungsgemäße Kamera kann beispielsweise vorteilhaft für die Überwachung von Industrie- und Produktionsanlagen eingesetzt werden, um z. B. die Anteilsmengen diverser Gase zu überwachen (Gasanalyse). Beispielsweise hat CO2 eine typische Absorptionsbande bei 4,25 µm, während N2O bei 4,66 µm stark absorbiert. A camera according to the invention can be used, for example, advantageous for the monitoring of industrial and production equipment to z. B. to monitor the proportions of various gases (gas analysis). For example, CO 2 has a typical absorption band at 4.25 μm while N 2 O strongly absorbs at 4.66 μm.
Der Vorteil besteht in den Zuordnungen eines Spektrums (Spektraldaten) zu einem bestimmten Bildausschnitt, d. h. man kann die Kamera entsprechend der Bildinformation auf einen interessierenden Bildausschnitt richten, zu dem ein Spektrum bestimmt werden soll. Das kann bei der Gerichtsverwertbarkeit vorteilhaft sein, weil mit dem Spektrum auch ein Bild fest verknüpft ist. The advantage consists in the assignments of a spectrum (spectral data) to a certain image detail, i. H. You can direct the camera according to the image information on a section of interest, to which a spectrum is to be determined. This can be advantageous in the case of legal usability because a spectrum is linked to a picture.
Aus dem Spektrum kann dann weitere gewinnbringende Information abgeleitet werden, die durch die ortsaufgelöste Kopplung an die Bildinformation zu einem Informationsgewinn führt. From the spectrum then further profitable information can be derived, which leads to an information gain by the spatially resolved coupling to the image information.
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 0 0
- optische Achse optical axis
- 1 1
- Zoom-Objektiv Zoom lens
- 1.1 1.1
- Zoom-Antrieb Zoom drive
- 2 2
- Zusatzoptik additional optics
- 3 3
- Umlenkspiegel deflecting
- 4 4
- Spektrometer spectrometer
- 4.1 4.1
-
Sensorfläche (des Spektrometers
4 ) Sensor surface (of the spectrometer4 ) - 5 5
- Detektorarray detector array
- 5.1 5.1
-
Detektorfläche (eines Detektorelementes des Detektorarrays
5 ) Detector surface (a detector element of the detector array5 ) - 6 6
- Strahlenbündel ray beam
- 6.1 6.1
- erstes Teilstrahlenbündel first partial beam
- 6.2 6.2
- zweites Teilstrahlenbündel second partial beam
- 7 7
- Steuer- und Recheneinheit Control and computing unit
- 8 8th
-
Antrieb (zur Verschiebung des Spektrometers
4 ) Drive (to shift the spectrometer4 ) - 9 9
- Touchbedienfeld touch panel
- ZBE DBE
- Zwischenbildebene Intermediate image plane
- SE SE
- Sensorebene sensor level
- BE BE
- Bildebene image plane
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte Nicht-PatentliteraturCited non-patent literature
- Artikel “Review of snapshot spectral imaging technologies” (Hagen and Kudenov; Optical Engineering 52 (9), 090901 (September 2013)) [0026] Article "Review of snapshot spectral imaging technologies" (Hagen and Kudenov, Optical Engineering 52 (9), 090901 (September 2013)) [0026]
- Artikel “Review of snapshot spectral imaging technologies” (Hagen and Kudenov; Optical Engineering 52 (9), 090901 (September 2013)) [0081] Article "Review of snapshot spectral imaging technologies" (Hagen and Kudenov, Optical Engineering 52 (9), 090901 (September 2013)) [0081]
Claims (9)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102014105222.6A DE102014105222A1 (en) | 2014-04-11 | 2014-04-11 | Camera with integrated spectrometer |
PCT/EP2015/000747 WO2015154875A1 (en) | 2014-04-11 | 2015-04-09 | Camera with integrated spectrometer |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102014105222.6A DE102014105222A1 (en) | 2014-04-11 | 2014-04-11 | Camera with integrated spectrometer |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102014105222A1 true DE102014105222A1 (en) | 2015-10-15 |
Family
ID=52823590
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102014105222.6A Ceased DE102014105222A1 (en) | 2014-04-11 | 2014-04-11 | Camera with integrated spectrometer |
Country Status (2)
Country | Link |
---|---|
DE (1) | DE102014105222A1 (en) |
WO (1) | WO2015154875A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015112769A1 (en) * | 2015-08-04 | 2017-02-09 | Carl Zeiss Ag | Apparatus and method for optical sample examination |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050030533A1 (en) * | 2003-07-18 | 2005-02-10 | Treado Patrick J. | Method and apparatus for compact dispersive imaging spectrometer |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4844617A (en) * | 1988-01-20 | 1989-07-04 | Tencor Instruments | Confocal measuring microscope with automatic focusing |
JP2713838B2 (en) * | 1992-10-15 | 1998-02-16 | 浜松ホトニクス株式会社 | Spectral imaging sensor |
US5550373A (en) * | 1994-12-30 | 1996-08-27 | Honeywell Inc. | Fabry-Perot micro filter-detector |
DE69730030T2 (en) * | 1997-11-17 | 2005-07-21 | MAX-PLANCK-Gesellschaft zur Förderung der Wissenschaften e.V. | Confocal spectroscopy system and method |
EP2106536B1 (en) * | 2007-01-05 | 2015-08-12 | Malvern Instruments Incorporated | Spectrometric investigation of heterogeneity |
CN101813520B (en) * | 2009-12-23 | 2013-01-09 | 杭州远方光电信息股份有限公司 | Two-dimensional spectrum measuring device |
JP2012098050A (en) * | 2010-10-29 | 2012-05-24 | Mitaka Koki Co Ltd | Monitorable spectrometer |
-
2014
- 2014-04-11 DE DE102014105222.6A patent/DE102014105222A1/en not_active Ceased
-
2015
- 2015-04-09 WO PCT/EP2015/000747 patent/WO2015154875A1/en active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050030533A1 (en) * | 2003-07-18 | 2005-02-10 | Treado Patrick J. | Method and apparatus for compact dispersive imaging spectrometer |
Non-Patent Citations (1)
Title |
---|
Artikel "Review of snapshot spectral imaging technologies" (Hagen and Kudenov; Optical Engineering 52 (9), 090901 (September 2013)) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015112769A1 (en) * | 2015-08-04 | 2017-02-09 | Carl Zeiss Ag | Apparatus and method for optical sample examination |
DE102015112769B4 (en) | 2015-08-04 | 2022-09-08 | Carl Zeiss Ag | Device and method for optical sample examination |
Also Published As
Publication number | Publication date |
---|---|
WO2015154875A1 (en) | 2015-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2825908B1 (en) | High-resolution scanning microscopy | |
DE602005002630T2 (en) | TWIN BAND SENSOR SYSTEM WITH A WAVELENGTHELECTIVE BEAM SPREADER | |
EP2786696B1 (en) | Dental camera system | |
WO2012034852A1 (en) | Optical imaging system for multispectral imaging | |
DE102013015931A1 (en) | High-resolution scanning microscopy | |
DE102014106974A1 (en) | Spatially and spectrally resolving hyperspectral camera and method | |
DE102010045364A1 (en) | Method for generating high-quality fundus image of eye of patient, involves obtaining color intensity distribution for correcting color composition of resultant color fundus image based on dark image representing noise of sensor | |
DE102013208415A1 (en) | Microscope and method for 3D high-resolution localization microscopy | |
DE202009003286U1 (en) | Apparatus for capturing an image of an object | |
DE102014214750B3 (en) | Image acquisition system with fast-vibrating global shutter CMOS sensor | |
DE102011083718A1 (en) | Confocal spectrometer and method of imaging in a confocal spectrometer | |
DE102005042672B4 (en) | Photosensor chip, laser microscope with photosensor chip and method for reading out a photosensor chip | |
WO2012084531A1 (en) | Camera with a colour image sensor and recording method with such a camera | |
EP3610307A1 (en) | Monocentric reception arrangement | |
DE102011015478B4 (en) | Apparatus and method for detecting and analyzing laser radiation | |
EP2907105A2 (en) | Image processing method and method for tracking missiles | |
DE102014105222A1 (en) | Camera with integrated spectrometer | |
DE102017221797A1 (en) | Lidar system for environment detection and method for operating a lidar system | |
DE102016008884B4 (en) | Spectroscopy apparatus and method | |
DE102013112376B4 (en) | spectrometer system | |
DE102012020922A1 (en) | Laser scanner for panorama image pick-up application, has single-channels provided in optical receiving section, where spectral single sensitivities are adapted selectively to single-spectrums of laser light source | |
DE102017118437A1 (en) | Receiver unit for a laser scanner, laser scanner, vehicle and method for detecting light | |
DE102020127964B4 (en) | Method and apparatus for rapidly capturing a hyperspectral cube of an object or scene | |
DE102005045036A1 (en) | Multi-spectral camera e.g. satellite camera, for e.g. microscope, has image processing unit that normalizes intensity of image signals in detected spectral area corresponding to channel according to specific mathematical relationship | |
DE1953352C (en) | Aiming and observation device with two electro-optical observation devices |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication | ||
R016 | Response to examination communication | ||
R002 | Refusal decision in examination/registration proceedings | ||
R082 | Change of representative |
Representative=s name: GLEIM PETRI PATENT- UND RECHTSANWALTSPARTNERSC, DE Representative=s name: GLEIM PETRI OEHMKE PATENT- UND RECHTSANWALTSPA, DE |
|
R003 | Refusal decision now final |