DE102008055168A1 - Device for a motor vehicle - Google Patents

Device for a motor vehicle Download PDF

Info

Publication number
DE102008055168A1
DE102008055168A1 DE102008055168A DE102008055168A DE102008055168A1 DE 102008055168 A1 DE102008055168 A1 DE 102008055168A1 DE 102008055168 A DE102008055168 A DE 102008055168A DE 102008055168 A DE102008055168 A DE 102008055168A DE 102008055168 A1 DE102008055168 A1 DE 102008055168A1
Authority
DE
Germany
Prior art keywords
camera
sensitive
near infrared
motor vehicle
infrared spectral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102008055168A
Other languages
German (de)
Inventor
Alexander Wuerz-Wessel
Werner Knee
Andreas Reppich
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102008055168A priority Critical patent/DE102008055168A1/en
Priority to PCT/EP2009/064417 priority patent/WO2010076060A1/en
Publication of DE102008055168A1 publication Critical patent/DE102008055168A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/30—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/46—Indirect determination of position data
    • G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/106—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using night vision cameras

Abstract

Es wird eine Vorrichtung für ein Kraftfahrzeug mit einer im nahen infraroten Spektralbereich empfindlichen Kamera und einer Wärmebildkamera vorgeschlagen, wobei die im nahen infraroten Spektralbereich empfindliche Kamera und die Wärmebildkamera vorzugsweise im Wesentlichen dieselbe Szene erfassen und ein Stereokamerasystem bilden. Ferner werden ein Kraftfahrzeug und ein Verfahren zur Erzeugung von Bildsignalen in einem Kraftfahrzeug vorgeschlagen.A device for a motor vehicle with a camera sensitive in the near infrared spectral region and a thermal imaging camera is proposed, wherein the camera sensitive in the near infrared spectral range and the thermal imaging camera preferably capture substantially the same scene and form a stereo camera system. Furthermore, a motor vehicle and a method for generating image signals in a motor vehicle are proposed.

Description

Stand der TechnikState of the art

Die Erfindung betrifft eine Vorrichtung für ein Kraftfahrzeug mit einer im nahen infraroten Spektralbereich empfindlichen Kamera, sowie ein Kraftfahrzeug mit einer erfindungsgemäßen Vorrichtung. Gegenstand der Erfindung ist auch ein Verfahren zur Erzeugung von Bildsignalen in einem Kraftfahrzeug.The The invention relates to a device for a motor vehicle with a camera sensitive in the near infrared spectral region, as well as a motor vehicle with an inventive Contraption. The invention also provides a method for Generation of image signals in a motor vehicle.

Aus der Deutschen Patentschrift DE 40 32 927 C2 ist bereits eine Vorrichtung zur Verbesserung der Sichtverhältnisse in einem Kraftfahrzeug bekannt. Diese Vorrichtung umfasst eine infrarotempfindliche Kamera zur Erfassung des Sichtbereiches des Fahrers und einer Anzeigevorrichtung, auf der das Bild der Kamera als virtuelles Bild der äußeren Landschaft visuell überlagert wird. Ferner umfasst die Vorrichtung eine Strahlungsquelle, die einen Infrarotstrahlungsanteil aufweist, wobei die Strahlungsquelle den von der infrarotempfindlichen Kamera erfassten Sichtbereich ausleuchtet.From the German patent DE 40 32 927 C2 already a device for improving the visibility in a motor vehicle is known. This device comprises an infrared-sensitive camera for detecting the field of vision of the driver and a display device, on which the image of the camera is visually superimposed as a virtual image of the outer landscape. Furthermore, the device comprises a radiation source which has an infrared radiation component, wherein the radiation source illuminates the field of view detected by the infrared-sensitive camera.

Offenbarung der ErfindungDisclosure of the invention

Vorteile der ErfindungAdvantages of the invention

Die Vorrichtung der vorliegenden Erfindung mit den Merkmalen des unabhängigen Anspruchs hat den Vorteil, dass sich mit dieser Vorrichtung eine Vielzahl unterschiedlicher Funktionen realisieren lassen. Wärmebildkameras haben den Vorteil, dass damit warme Objekte, insbesondere Lebewesen wie Fußgänger, Fahrradfahrer oder Tiere, gut erkannt werden. In vorteilhafter Weise lassen sich anhand dieser Erkennung Funktionen realisieren, die in kritischen Situationen mit Lebewesen Warnsignale abgeben oder Bremsen-, Lenk- oder ähnliche Stell-Eingriffe auslösen. Andererseits haben im nahen infraroten Spektralbereich empfindliche Kameras den Vorteil einer guten und natürlichen Bildwiedergabe.The Device of the present invention having the features of the independent Claim has the advantage that with this device a variety different functions can be realized. Thermal imaging cameras have the advantage of making warm objects, especially living things like pedestrians, cyclists or animals, are well recognized. Advantageously, functions can be determined on the basis of this recognition realize in critical situations with sentient beings warning signs or braking, steering or similar manipulation trigger. On the other hand, in the near infrared spectral range sensitive cameras have the advantage of a good and natural Image reproduction.

Besonders vorteilhaft ist, dass die im nahen infraroten Spektralbereich empfindliche Kamera und die Wärmebildkamera im Wesentlichen dieselbe Szene erfassen. Dies ermöglicht eine kostengünstige Realisierung der Messung von Abständen zu Objekten, da der Einsatz von zusätzlichen, weiteren Sensoren zur Entfernungsmessung, wie Radar- oder Lidarsysteme, nicht erforderlich ist.Especially It is advantageous that the sensitive in the near infrared spectral range Camera and the thermal imaging camera essentially the same scene to capture. This allows a cost-effective implementation the measurement of distances to objects, since the use of additional, additional sensors for distance measurement, as radar or lidar systems, is not required.

Vorteilhaft ist die Ermittlung des Abstandes des Objektes zum Kraftfahrzeug mittels eines Triangulationsverfahrens in Abhängigkeit von Bildsignalen der im nahen infraroten Spektralbereich empfindlichen Kamera und von Bildsignalen der Wärmebildkamera, da das Triangulationsverfahren ein besonders robustes und damit zuverlässiges Verfahren zur Ermittlung des Abstandes darstellt.Advantageous is the determination of the distance of the object to the motor vehicle by means of a triangulation method in dependence of image signals sensitive in the near infrared spectral range Camera and image signals of the thermal imaging camera, as the Triangulation a particularly robust and therefore reliable Represents method for determining the distance.

Besonders vorteilhaft ist die Verwendung eines Scheinwerfers, der die von der im nahen infraroten Spektralbereich empfindlichen Kamera erfassten Szene mit Licht im nahen infraroten Spektralbereich beleuchtet, da dies zu einer Steigerung der Bildaufnahmeleistung der im nahen infraroten Spektralbereich empfindlichen Kamera beiträgt.Especially advantageous is the use of a headlamp, the of the scene detected in the near infrared spectral range illuminated with light in the near infrared spectral range, as this to increase the imaging power of the near infrared Spectral range sensitive camera contributes.

Die vorstehend beschriebenen Vorteile der Vorrichtung gelten entsprechend auch für ein Kraftfahrzeug mit einer derartigen Vorrichtung und für ein Verfahren zur Erzeugung von Bildsignalen in einem Kraftfahrzeug, wobei eine im nahen infraroten Spektralbereich empfindlichen Kamera und eine Wärmebildkamera Bildsignale erzeugen.The The advantages of the device described above apply accordingly also for a motor vehicle with such a device and for a method of generating image signals in a motor vehicle, one in the near infrared spectral range sensitive camera and a thermal imaging camera image signals produce.

Weitere Vorteile ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen mit Bezug auf die Figuren und aus den abhängigen Patentansprüchen.Further Advantages will become apparent from the following description of exemplary embodiments Reference to the figures and from the dependent claims.

Zeichnungendrawings

Ausführungsbeispiele der Erfindung sind in den Zeichnungen dargestellt und in der nachfolgenden Beschreibung näher erläutert. Es zeigt:embodiments The invention is illustrated in the drawings and in the following Description explained in more detail. It shows:

1 ein Blockdiagramm der Vorrichtung, 1 a block diagram of the device,

2 ein Kraftfahrzeug, 2 a motor vehicle,

3 ein Ablaufdiagramm. 3 a flowchart.

Beschreibung von AusführungsbeispielenDescription of exemplary embodiments

Nachfolgend wird eine Vorrichtung für ein Kraftfahrzeug mit einer im nahen infraroten Spektralbereich empfindlichen Kamera und einer Wärmebildkamera beschrieben, wobei die im nahen infraroten Spektralbereich empfindliche Kamera und die Wärmebildkamera im Wesentlichen dieselbe Szene erfassen und ein Stereokamerasystem bilden. Ferner werden ein Kraftfahrzeug und ein Verfahren zur Erzeugung von Bildsignalen in einem Kraftfahrzeug beschrieben.following is a device for a motor vehicle with an im near infrared spectral sensitive camera and one Thermal imager described, where in the near infrared spectral range delicate camera and the thermal imaging camera in essence capture the same scene and form a stereo camera system. Further will be a motor vehicle and a method for generating image signals described in a motor vehicle.

1 zeigt ein Blockdiagramm der Vorrichtung, umfassend eine im nahen infraroten Spektralbereich empfindliche Kamera 12 und eine Wärmebildkamera 10. Ferner umfasst die Vorrichtung eine Auswerteeinheit 14 und einen Scheinwerfer 16. Die Vorrichtung ist in einem Kraftfahrzeug angeordnet. Die im nahen infraroten Spektralbereich empfindliche Kamera 12 ist für Licht im nahen Infrarot (near infrared, NIR), also für Licht im Wellenlängenbereich zwischen 780 nm und 3000 nm empfindlich. Demgegenüber ist die Wärmebildkamera 10 für Licht im mittleren Infrarot (mid infrared, MIR) und/oder im fernen Infrarot (far infrared, FIR) empfindlich. Im bevorzugten Ausführungsbeispiel ist die Wärmebildkamera 10 für Infrarotstrahlung im Wellenlängenbereich zwischen 5 μm und 15 μm empfindlich. Die Wärmebildkamera 10 zeichnet sich dadurch aus, dass warme Objekte, beispielsweise Lebewesen wie Fußgänger, Fahrradfahrer oder Tiere, gut erkannt werden. Die im nahen infraroten Spektralbereich empfindliche Kamera 12 und die Wärmebildkamera 10 sind derart angeordnet und ausgerichtet, dass sie im Wesentlichen dieselbe Szene erfassen. Im bevorzugten Ausführungsbeispiel wird eine Kombination von einer im nahen infraroten Spektralbereich empfindlichen Kamera 12 (NIR-Kamera) mit einer Wärmebildkamera 10 (FIR-Kamera) in der Weise vorgeschlagen, dass die im nahen infraroten Spektralbereich empfindlichen Kamera 12 und die Wärmebildkamera 10 als Stereokamerasystem arbeiten. Dies ermöglicht es, dass Abstände zu Zielen, also zu Objekten in der Umgebung des Kraftfahrzeuges, über das Triangulationsverfahren gemessen werden können. Hierzu erzeugen die im nahen infraroten Spektralbereich empfindliche Kamera 12 und die Wärmebildkamera 10 Bilddaten der Szene. Diese Bilddaten werden an die nachfolgende Auswerteeinheit 14 als Bildsignale übertragen. Die Auswerteeinheit 14 umfasst einen Prozessor und einen Speicher, wobei der Prozessor durch Ausführung eines im Speicher gespeicherten Programms das nachfolgend und in Bezug zu 3 beschriebene Verfahren ausführt. In Abhängigkeit der Bildsignale der im nahen infraroten Spektralbereich empfindlichen Kamera 12 und der Bildsignale der Wärmebildkamera 10 ermittelt die Auswerteeinheit 14 den Abstand eines Objektes zum Kraftfahrzeug, wobei die Auswerteeinheit 14 den Abstand des Objektes zum Kraftfahrzeug mittels eines Triangulationsverfahrens ermittelt. Hierzu ordnet die Auswerteeinheit 14 Bilder der im nahen infraroten Spektralbereichen empfindlichen Kamera 12 Bildern der Wärmebildkamera 10 zu. Nach der Zuordnung ermittelt die Auswerteeinheit 14 über das Triangulationsverfahren den Abstand des Objektes. Der Scheinwerfer 16 beleuchtet die von der im nahen infraroten Spektralbereich empfindlichen Kamera 12 erfasste Szene mit Licht im nahen infraroten Spektralbereich. Ferner umfasst die Vorrichtung eine Anzeigeeinheit 15 zur Anzeige von Bildern der im nahen infraroten Spektralbereich empfindlichen Kamera 12. Im bevorzugten Ausführungsbeispiel umfasst die Vorrichtung zusätzlich eine Warneinrichtung 17 zur Warnung des Fahrers, beispielsweise vor Objekten in der Umgebung, die eine Gefahr für das Kraftfahrzeug darstellen. Bevorzugt ist die Warneinrichtung 17 als akustische und/oder optische und/oder haptische Warneinrichtung ausgebildet. 1 Fig. 12 shows a block diagram of the apparatus comprising a near infrared spectral sensitive camera 12 and a thermal imaging camera 10 , Furthermore, the device comprises an evaluation unit 14 and a headlight 16 , The device is arranged in a motor vehicle. The camera sensitive in the near infrared spectral range 12 is sensitive to light in the near infrared (near infrared, NIR), ie to light in the wavelength range between 780 nm and 3000 nm. In contrast, the thermal imaging camera 10 sensitive to mid-infrared (mid-infrared, MIR) and / or far-infrared (far infrared, FIR) light. In the preferred embodiment, the thermal imager is 10 For Infrared radiation in the wavelength range between 5 microns and 15 microns sensitive. The thermal imager 10 is characterized by the fact that warm objects, such as living things such as pedestrians, cyclists or animals, are well recognized. The camera sensitive in the near infrared spectral range 12 and the thermal imager 10 are arranged and aligned so that they capture substantially the same scene. In the preferred embodiment, a combination of a near-infrared spectral sensitive camera 12 (NIR camera) with a thermal imaging camera 10 (FIR camera) in the way suggested that the camera sensitive in the near infrared spectral range 12 and the thermal imager 10 work as a stereo camera system. This makes it possible to measure distances to targets, ie to objects in the surroundings of the motor vehicle, via the triangulation method. For this purpose, the sensitive in the near infrared spectral camera produce 12 and the thermal imager 10 Image data of the scene. These image data are sent to the following evaluation unit 14 transmitted as image signals. The evaluation unit 14 comprises a processor and a memory, wherein the processor, by executing a program stored in the memory, the following and with reference to 3 performs described method. Depending on the image signals of the sensitive in the near infrared spectral camera 12 and the image signals of the thermal imager 10 determines the evaluation unit 14 the distance of an object to the motor vehicle, wherein the evaluation unit 14 determines the distance of the object to the motor vehicle by means of a triangulation method. The evaluation unit assigns to this 14 Images of the camera sensitive in the near infrared spectral range 12 Pictures of the thermal imager 10 to. After the assignment, the evaluation unit determines 14 using the triangulation method the distance of the object. The headlight 16 illuminates the camera sensitive in the near infrared spectral range 12 recorded scene with light in the near infrared spectral range. Furthermore, the device comprises a display unit 15 for displaying images of the near infrared spectral sensitive camera 12 , In the preferred embodiment, the device additionally comprises a warning device 17 to warn the driver, for example, of objects in the area that pose a danger to the motor vehicle. The warning device is preferred 17 designed as an acoustic and / or optical and / or haptic warning device.

2 zeigt ein Kraftfahrzeug 18 mit einer Vorrichtung gemäß 1. Die im nahen infraroten Spektralbereich empfindliche Kamera 12 ist hinter der Windschutzscheibe 19 des Kraftfahrzeugs 18 derart angeordnet, dass die im nahen infraroten Spektralbereich empfindliche Kamera 12 die Szene vor dem Kraftfahrzeug 18 erfasst. Der zugehörige Scheinwerfer 16, der die von der im nahen infraroten Spektralbereich empfindlichen Kamera 12 erfassten Szene mit Licht im nahen infraroten Spektralbereich beleuchtet, ist im Bereich der Stoßfänger angeordnet. Ebenfalls im Bereich der Stoßfänger ist die Wärmbildkamera 10 angeordnet. Die Anzeigeeinheit 15 ist derart im Kraftfahrzeug 18 angeordnet, dass der Fahrer des Kraftfahrzeugs 18 die auf der Anzeigeeinheit 15 wiedergegebenen Bildsignale der im nahen infraroten Spektralbereich empfindlichen Kamera 12 sieht. Entsprechend ist die Warneinrichtung 17 derart im Bereich des Fahrers angeordnet, dass der Fahrer die von der Warneinrichtung 17 erzeugte Warnung wahrnimmt. Die Wärmebildkamera 10, die im nahen infraroten Spektralbereich empfindliche Kamera 12, die Anzeigeeinrichtung 15, der Scheinwerfer 16 und die Warneinrichtung 17 sind über Signalleitungen mit der Auswerteeinheit 14 verbunden. Im bevorzugten Ausführungsbeispiel sind die Signalleitungen als Bus ausgeführt. 2 shows a motor vehicle 18 with a device according to 1 , The camera sensitive in the near infrared spectral range 12 is behind the windshield 19 of the motor vehicle 18 arranged such that the sensitive in the near infrared spectral camera 12 the scene in front of the motor vehicle 18 detected. The associated headlight 16 that of the camera sensitive in the near infrared spectral range 12 Illuminated scene illuminated with light in the near infrared spectral range, is located in the bumper area. Also in the bumper area is the thermal imaging camera 10 arranged. The display unit 15 is so in the vehicle 18 arranged that the driver of the motor vehicle 18 the on the display unit 15 reproduced image signals of the sensitive in the near infrared spectral camera 12 sees. Accordingly, the warning device 17 arranged in the area of the driver that the driver of the warning device 17 perceived generated warning. The thermal imager 10 , in the near infrared spectral sensitive camera 12 , the display device 15 , the headlight 16 and the warning device 17 are via signal lines to the evaluation unit 14 connected. In the preferred embodiment, the signal lines are implemented as a bus.

3 zeigt ein Ablaufdiagramm des erfindungsgemäßen Verfahrens. Von der im nahen infraroten Spektralbereich empfindlichen Kamera erzeugte erste Bildsignale 20 und von der Wärmbildkamera erzeugte zweite Bildsignale 22 werden im Verfahrensschritt 24 verarbeitet. In diesem Verfahrensschritt wird in Abhängigkeit der ersten Bildsignale 20 der im nahen infraroten Spektralbereich empfindlichen Kamera und der zweiten Bildsignale 22 der Wärmebildkamera der Abstand 26 eines Objektes zum Kraftfahrzeug ermittelt. Die Ermittlung des Abstandes 26 eines Objektes zum Kraftfahrzeug erfolgt mittels eines Triangulationsverfahrens, wobei der Umstand verwendet wird, dass die im nahen infraroten Spektralbereich empfindliche Kamera und die Wärmebildkamera im Wesentlichen dieselbe Szene erfassen. 3 shows a flowchart of the method according to the invention. From the sensitive in the near infrared spectral range camera generated first image signals 20 and second image signals generated by the thermal imaging camera 22 be in the process step 24 processed. In this method step, depending on the first image signals 20 the sensitive in the near infrared spectral camera and the second image signals 22 the thermal imager the distance 26 determined an object to the motor vehicle. The determination of the distance 26 an object to the motor vehicle is carried out by means of a triangulation method, wherein the circumstance is used that the camera sensitive in the near infrared spectral region and the thermal imaging camera capture substantially the same scene.

Im bevorzugten Ausführungsbeispiel stellen die im nahen infraroten Spektralbereich empfindliche Kamera, die Wärmbildkamera und die Auswerteeinheit einzelne Komponenten dar, die an jeweils unterschiedlichen Orten des Kraftfahrzeugs angeordnet sind. In einer Variante des bevorzugten Ausführungsbeispiels sind sowohl die nahen infraroten Spektralbereich empfindliche Kamera, die Wärmbildkamera als auch die Auswerteeinheit in einer einzelnen Einheit integriert und an einem Ort des Kraftfahrzeuges, vorzugesweise hinter der Windschutzscheibe oder im Stoßfänger, angeordnet. Es sind alle Varianten denkbar, so dass die Varianten von drei vollständig getrennten Komponenten bis zu einer einzelnen kompakten Einheit reichen.in the preferred embodiment, the in the near infrared Spectral range sensitive camera, the thermal imaging camera and the evaluation unit is a single component connected to each are arranged in different places of the motor vehicle. In a Variant of the preferred embodiment are both the near infrared spectral range sensitive camera, the thermal imaging camera as also the evaluation unit integrated in a single unit and in a place of the motor vehicle, preferably behind the windshield or in the bumper. All variants are conceivable so that the variants of three completely separate components to a single compact unit.

In einer Variante des bevorzugten Ausführungsbeispiels umfasst die Vorrichtung zusätzlich zur im nahen infraroten Spektralbereich empfindlichen Kamera und der Wärmebildkamera eine im sichtbaren Spektralbereich empfindliche Kamera. Vorzugsweise erfasst die im sichtbaren Spektralbereich empfindliche Kamera im Wesentlichen dieselbe Szene wie die im nahen infraroten Spektralbereich empfindlichen Kamera und/oder die Wärmebildkamera. Alternativ zur Anzeige von Bildern der im nahen infraroten Spektralbereich empfindlichen Kamera werden Bilder der im sichtbaren Spektralbereich empfindlichen Kamera über die Anzeigeeinheit angezeigt. In einer weiteren Variante werden auf den angezeigten Bildern Objekte, die vom eigenen Kraftfahrzeug gefährdet werden oder die eine Gefahr für den Fahrer oder das Kraftfahrzeug darstellen, entsprechend gekennzeichnet.In a variant of the preferred embodiment, in addition to the camera which is sensitive in the near infrared spectral region and the thermal imaging camera, the device also comprises a visible light spectral sensitive camera. Preferably, the sensitive in the visible spectral range camera captures substantially the same scene as the sensitive in the near infrared spectral range camera and / or the thermal imaging camera. As an alternative to displaying images of the camera sensitive in the near infrared spectral range, images of the camera sensitive in the visible spectral range are displayed via the display unit. In a further variant, objects which are endangered by one's own motor vehicle or which represent a danger to the driver or the motor vehicle are identified accordingly on the displayed images.

Zusätzlich ist vorgesehen, dass nicht nur der Abstand des Objekts zum Kraftfahrzeug sondern auch die Zeit bis zum Aufprall des Objektes auf das Kraftfahrzeug ermittelt wird. In Abhängigkeit der ermittelten Zeit bis zum Aufprall des Objektes auf das Kraftfahrzeug wird eine Warnung an den Fahrer ausgegeben und/oder entsprechende Stellbefehle, beispielsweise zum Verzögern des Kraftfahrzeuges, erzeugt.additionally It is envisaged that not only the distance of the object to the motor vehicle but also the time until the impact of the object on the motor vehicle is determined. Depending on the determined time to the impact of the object on the vehicle is a warning issued to the driver and / or corresponding control commands, for example for decelerating the motor vehicle generated.

In einer weiteren Variante ist zusätzlich vorgesehen, dass die Auswerteeinheit Signale von weiteren Kraftfahrzeugsensoren, beispielsweise von Inertialsensoren und/oder von Geschwindigkeitssensoren, erhält und auswertet.In a further variant is additionally provided that the evaluation unit signals from further motor vehicle sensors, for example, inertial sensors and / or speed sensors, receives and evaluates.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list The documents listed by the applicant have been automated generated and is solely for better information recorded by the reader. The list is not part of the German Patent or utility model application. The DPMA takes over no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • - DE 4032927 C2 [0002] - DE 4032927 C2 [0002]

Claims (12)

Vorrichtung für ein Kraftfahrzeug (18) mit einer im nahen infraroten Spektralbereich empfindlichen Kamera (12), gekennzeichnet durch eine Wärmebildkamera (10).Device for a motor vehicle ( 18 ) with a camera sensitive in the near infrared spectral region ( 12 ), characterized by a thermal imaging camera ( 10 ). Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass die im nahen infraroten Spektralbereich empfindliche Kamera (12) und die Wärmebildkamera (10) im Wesentlichen dieselbe Szene erfassen, insbesondere dass die im nahen infraroten Spektralbereich empfindliche Kamera (12) und die Wärmebildkamera (10) ein Stereokamerasystem bilden.Device according to Claim 1, characterized in that the camera sensitive in the near-infrared spectral range ( 12 ) and the thermal imager ( 10 ) capture substantially the same scene, in particular that the camera sensitive in the near infrared spectral range ( 12 ) and the thermal imager ( 10 ) form a stereo camera system. Vorrichtung nach einem der vorherigen Ansprüche, gekennzeichnet durch eine Auswerteeinheit (14), wobei die Auswerteeinheit (14) in Abhängigkeit von ersten Bildsignalen (20) der im nahen infraroten Spektralbereich empfindlichen Kamera (12) und von zweiten Bildsignalen (22) der Wärmebildkamera (10) den Abstand (26) eines Objektes zum Kraftfahrzeug (18) ermittelt.Device according to one of the preceding claims, characterized by an evaluation unit ( 14 ), whereby the evaluation unit ( 14 ) in response to first image signals ( 20 ) of the near infrared spectral sensitive camera ( 12 ) and second image signals ( 22 ) of the thermal imager ( 10 ) the distance ( 26 ) of an object to the motor vehicle ( 18 ). Vorrichtung nach Anspruch 3, dadurch gekennzeichnet, dass die Auswerteeinheit (14) den Abstand (26) des Objektes zum Kraftfahrzeugs (18) mittels eines Triangulationsverfahrens ermittelt.Apparatus according to claim 3, characterized in that the evaluation unit ( 14 ) the distance ( 26 ) of the object to the motor vehicle ( 18 ) determined by means of a triangulation method. Vorrichtung nach einem der vorherigen Ansprüche, gekennzeichnet durch eine im sichtbaren Spektralbereich empfindliche Kamera, wobei die im sichtbaren Spektralbereich empfindliche Kamera vorzugsweise im wesentlichen dieselbe Szene erfasst wie die im nahen infraroten Spektralbereich empfindliche Kamera (12) und/oder die Wärmebildkamera (10).Device according to one of the preceding claims, characterized by a sensitive in the visible spectral range camera, the sensitive in the visible spectral range camera preferably captures substantially the same scene as the sensitive in the near infrared spectral camera ( 12 ) and / or the thermal imager ( 10 ). Vorrichtung nach einem der vorherigen Ansprüche, gekennzeichnet durch eine Anzeigeeinheit (15), wobei die Anzeigeeinheit (15) zur Anzeige von Bilder der im nahen infraroten Spektralbereich empfindlichen Kamera (12) und/oder von Bilder der Wärmebildkamera (10) und/oder von Bildern der im sichtbaren Spektralbereich empfindlichen Kamera ausgebildet ist.Device according to one of the preceding claims, characterized by a display unit ( 15 ), wherein the display unit ( 15 ) for displaying images of the near infrared spectral sensitive camera ( 12 ) and / or images of the thermal imager ( 10 ) and / or images of the sensitive in the visible spectral range camera is formed. Vorrichtung nach einem der vorherigen Ansprüche, gekennzeichnet durch einen Scheinwerfer (16), der die von der im nahen infraroten Spektralbereich empfindlichen Kamera (12) erfasste Szene mit Licht im nahen infraroten Spektralbereich beleuchtet.Device according to one of the preceding claims, characterized by a headlight ( 16 ), which detects the camera (in the near infrared spectral range) ( 12 ) scene illuminated with light in the near infrared spectral range. Kraftfahrzeug (18) mit einer Vorrichtung nach einem der vorhergehenden Ansprüche.Motor vehicle ( 18 ) with a device according to one of the preceding claims. Kraftfahrzeug (18) nach Anspruch 8, dadurch gekennzeichnet, dass die im nahen infraroten Spektralbereich empfindliche Kamera (12) hinter einer Scheibe des Kraftfahrzeugs (18), vorzugsweise hinter der Windschutzscheibe (19), derart angeordnet ist, dass die im nahen infraroten Spektralbereich empfindliche Kamera (12) die Szene vor dem Kraftfahrzeug (18) oder die Szene hinter dem Kraftfahrzeug (18) erfasst.Motor vehicle ( 18 ) according to claim 8, characterized in that the sensitive in the near infrared spectral range camera ( 12 ) behind a window of the motor vehicle ( 18 ), preferably behind the windshield ( 19 ), is arranged such that the camera sensitive in the near infrared spectral range ( 12 ) the scene in front of the motor vehicle ( 18 ) or the scene behind the motor vehicle ( 18 ) detected. Verfahren zur Erzeugung von Bildsignalen in einem Kraftfahrzeug (18), wobei eine im nahen infraroten Spektralbereich empfindlichen Kamera (12) erste Bildsignale (20) erzeugt, dadurch gekennzeichnet, dass eine Wärmebildkamera (10) zweite Bildsignale (22) erzeugt.Method for generating image signals in a motor vehicle ( 18 ), where a camera sensitive in the near infrared spectral range ( 12 ) first image signals ( 20 ), characterized in that a thermal imaging camera ( 10 ) second image signals ( 22 ) generated. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass die im nahen infraroten Spektralbereich empfindliche Kamera (12) und die Wärmebildkamera (10) im Wesentlichen dieselbe Szene erfassen.Method according to Claim 10, characterized in that the camera sensitive in the near infrared spectral range ( 12 ) and the thermal imager ( 10 ) capture substantially the same scene. Verfahren nach einem der Ansprüche 10 oder 11, dadurch gekennzeichnet, dass eine Auswerteeinheit (14) in Abhängigkeit der ersten Bildsignale (20) der im nahen infraroten Spektralbereich empfindlichen Kamera (12) und der zweiten Bildsignale (22) der Wärmebildkamera (10) den Abstand (26) eines Objektes zum Kraftfahrzeug (18) ermittelt.Method according to one of claims 10 or 11, characterized in that an evaluation unit ( 14 ) in dependence of the first image signals ( 20 ) of the near infrared spectral sensitive camera ( 12 ) and the second image signals ( 22 ) of the thermal imager ( 10 ) the distance ( 26 ) of an object to the motor vehicle ( 18 ).
DE102008055168A 2008-12-29 2008-12-29 Device for a motor vehicle Withdrawn DE102008055168A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102008055168A DE102008055168A1 (en) 2008-12-29 2008-12-29 Device for a motor vehicle
PCT/EP2009/064417 WO2010076060A1 (en) 2008-12-29 2009-11-02 Device for a motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102008055168A DE102008055168A1 (en) 2008-12-29 2008-12-29 Device for a motor vehicle

Publications (1)

Publication Number Publication Date
DE102008055168A1 true DE102008055168A1 (en) 2010-07-01

Family

ID=41546193

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102008055168A Withdrawn DE102008055168A1 (en) 2008-12-29 2008-12-29 Device for a motor vehicle

Country Status (2)

Country Link
DE (1) DE102008055168A1 (en)
WO (1) WO2010076060A1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4032927C2 (en) 1990-10-17 1993-04-15 Robert Bosch Gmbh, 7000 Stuttgart, De

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6281806B1 (en) * 2000-10-12 2001-08-28 Ford Global Technologies, Inc. Driver road hazard warning and illumination system
JP2003123520A (en) * 2001-10-18 2003-04-25 Koito Mfg Co Ltd Projection type headlamp used for infrared light irradiating lamp
DE102005041241A1 (en) * 2005-08-31 2007-04-19 Valeo Schalter Und Sensoren Gmbh Method and system for operating a camera system of a vehicle
US7786898B2 (en) * 2006-05-31 2010-08-31 Mobileye Technologies Ltd. Fusion of far infrared and visible images in enhanced obstacle detection in automotive applications

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4032927C2 (en) 1990-10-17 1993-04-15 Robert Bosch Gmbh, 7000 Stuttgart, De

Also Published As

Publication number Publication date
WO2010076060A1 (en) 2010-07-08

Similar Documents

Publication Publication Date Title
DE102006010295B4 (en) Camera system with at least two image recorders
EP2289044B1 (en) Image data visualization
DE102009029439A1 (en) Method and device for representing obstacles in a parking assistance system of motor vehicles
DE102015206200A1 (en) Method and device for attention recognition of a driver
DE102013219909A1 (en) Method and device for detecting traffic signs
WO2012152475A1 (en) Method and device for calibrating a projection device of a vehicle
EP3044727B1 (en) Method and device for detecting objects from depth-resolved image data
DE102018212655A1 (en) Detection of the intention to move a pedestrian from camera images
DE102011105074A1 (en) Method for determining visual range for vehicle, involves determining surrounding of vehicle by camera, where contrast dimensions are determined for object depicted in images, where visual range is determined from contrast dimensions
DE102014206202A1 (en) Sun visor with an electronic image display device and method for its operation
EP2888623B1 (en) Operating a head-up display of a vehicle and image determining system for the head-up display
DE102009014437A1 (en) Object e.g. pedestrian, recognition system i.e. stereoscopic system, for motor vehicle, has validation device checking whether object and/or preset character e.g. contour, of object is detected in image region in image
EP1491978B1 (en) System for identification of collision objects
DE102011010860A1 (en) Method and driver assistance system for displaying images in a motor vehicle and motor vehicle
DE102011121473A1 (en) A method for displaying images on a display device of a motor vehicle, driver assistance device, motor vehicle and computer program
DE102009003220B4 (en) Procedure for collision warning and collision warning device
DE102012010156A1 (en) Method for generating and displaying virtual image of environment of motor vehicle, involves combining data of environment at front and behind vehicle to generate virtual image, and presenting virtual image to driver of vehicle
DE102015015676A1 (en) A method for automatically connecting an environmental image on a display unit of a vehicle
DE102013222304A1 (en) Method for determining object distances with a camera installed in a motor vehicle
DE102011083232A1 (en) Image capture device for a vehicle
DE102019200099A1 (en) Sensor device for an ego vehicle, driver assistance device and vehicle with such a sensor device
DE102014209863A1 (en) Method and device for operating a stereo camera for a vehicle and stereo camera for a vehicle
DE102008055168A1 (en) Device for a motor vehicle
DE102007042966A1 (en) Parking aid information representing device for use in motor vehicle i.e. car, represents distance of motor vehicle to barrier by head-up displays, and represents information of sensor of front region of vehicle on displays
DE10300612A1 (en) Night vision system for motor vehicles

Legal Events

Date Code Title Description
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee

Effective date: 20110701