DE102020007064B4 - Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung - Google Patents

Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung Download PDF

Info

Publication number
DE102020007064B4
DE102020007064B4 DE102020007064.7A DE102020007064A DE102020007064B4 DE 102020007064 B4 DE102020007064 B4 DE 102020007064B4 DE 102020007064 A DE102020007064 A DE 102020007064A DE 102020007064 B4 DE102020007064 B4 DE 102020007064B4
Authority
DE
Germany
Prior art keywords
recording
lighting device
optical sensor
illumination
lighting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102020007064.7A
Other languages
English (en)
Other versions
DE102020007064A1 (de
Inventor
Fridtjof Stein
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daimler Truck Holding AG
Original Assignee
Daimler Truck AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler Truck AG filed Critical Daimler Truck AG
Priority to DE102020007064.7A priority Critical patent/DE102020007064B4/de
Priority to CN202180077494.1A priority patent/CN116670541A/zh
Priority to PCT/EP2021/077683 priority patent/WO2022106116A1/de
Publication of DE102020007064A1 publication Critical patent/DE102020007064A1/de
Application granted granted Critical
Publication of DE102020007064B4 publication Critical patent/DE102020007064B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • G01C11/06Interpretation of pictures by comparison of two or more pictures of the same area
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/02Testing optical properties
    • G01M11/06Testing the alignment of vehicle headlight devices
    • G01M11/064Testing the alignment of vehicle headlight devices by using camera or other imaging system for the light analysis
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/02Testing optical properties
    • G01M11/06Testing the alignment of vehicle headlight devices
    • G01M11/068Testing the alignment of vehicle headlight devices with part of the measurements done from inside the vehicle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497Means for monitoring or calibrating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497Means for monitoring or calibrating
    • G01S2007/4975Means for monitoring or calibrating of sensor obstruction by, e.g. dirt- or ice-coating, e.g. by reflection measurement on front-screen
    • G01S2007/4977Means for monitoring or calibrating of sensor obstruction by, e.g. dirt- or ice-coating, e.g. by reflection measurement on front-screen including means to prevent or remove the obstruction

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)

Abstract

Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung (5.1), einer zweiten Beleuchtungseinrichtung (5.2) und eines optischen Sensors (7), wobei- eine Ansteuerung der ersten Beleuchtungseinrichtung (5.1), der zweiten Beleuchtungseinrichtung (5.2) und des optischen Sensors (7) zeitlich aufeinander abgestimmt werden, wobei- der abgestimmten Ansteuerung ein sichtbarer Abstandsbereich (15) zugeordnet wird, wobei- eine erste Aufnahme bei einer Beleuchtung mittels der ersten Beleuchtungseinrichtung (5.1) mit dem optischen Sensor (7) mittels der abgestimmten Ansteuerung aufgenommen wird, wobei- eine zweite Aufnahme bei einer Beleuchtung mittels der zweiten Beleuchtungseinrichtung (5.2) mit dem optischen Sensor (7) mittels der abgestimmten Ansteuerung aufgenommen wird, wobei- eine Differenz-Aufnahme (17) als Differenz der ersten Aufnahme und der zweiten Aufnahme gebildet wird, wobei- die abgestimmte Ansteuerung und/oder die erste Beleuchtungseinrichtung (5.1) und/ohne die zweite Beleuchtungseinrichtung (5.2) auf Grundlage der Differenz-Aufnahme (17) bewertet und/oder verändert wird.

Description

  • Die Erfindung betrifft ein Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, eine Steuereinrichtung zur Durchführung eines solchen Verfahrens, eine Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und ein Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung.
  • Ein Verfahren zum Kalibrieren einer Beleuchtungseinrichtung geht aus der europäischen Patentanmeldung mit der Veröffentlichungsnummer EP 3 308 193 B1 hervor. Bei diesem Verfahren werden mittels der Beleuchtungseinrichtung Lichtimpulse ausgesendet. Diese ausgesendeten Lichtimpulse werden mit einem Referenz-Lichtimpuls verglichen, und basierend auf diesen Vergleich wird die Beleuchtungseinrichtung kalibriert.
  • Die Druckschriften US 5 034 810 A und DE 102 50 705 A1 zeigen darüber hinaus ein Verfahren in welchem mittels, durch eine Beleuchtungseinrichtung, ausgesendeter Lichtimpulse und einer Gated-Kamera mindestens zwei Bildaufnahmen erstellt und mittels einer Steuereinrichtung eine Differenzaufnahme aus diesen beiden Bildaufnahmen erstellt wird. Bei diesen Verfahren wird allerdings das Zusammenspiel von Beleuchtungseinrichtung und optischem Sensor nicht betrachtet.
  • Eine zeitliche Abstimmung der Ansteuerung eines optischen Sensors und einer Beleuchtungseinrichtung ist darüber hinaus aus den Druckschriften US 20180113200 A1 und DE 102020003199 A1 bekannt.
  • Weiterhin ist ein Verfahren zur Kalibrierung einer Beleuchtungseinrichtung und eines optischen Sensors in der Druckschrift DE 10 2020 004 989 A1 offenbart.
  • Diesen Verfahren mangelt es jedoch an der Bezugnahme auf eine zweite Beleuchtungseinrichtung.
  • Ein Verfahren zur Objekterkennung in Aufnahmen nutzt den Schattenwurf von zu erkennenden Objekten, welcher aufgrund von mindestens zwei räumlich voneinander beabstandeten Beleuchtungseinrichtung entsteht. Um eine zuverlässige und robuste Extraktion der jeweiligen Schattenwürfe durchführen zu können, müssen die mindestens zwei Beleuchtungseinrichtungen und der optische Sensor exakt kalibriert sein.
  • Ein Grundsatz beim Kalibrieren eines technischen Systems besteht darin, dass die Dimension der Umgebung, in welcher die Kalibrierung vorgenommen wird, und die Dimension der Umgebung, in welcher das technische System betrieben wird, möglichst identisch sind. Bei einer Objekterkennung in Entfernungen von bis zu 200 m ist dies nur sehr schwer kosten- und platzsparend zu wirklichen.
  • Der Erfindung liegt daher die Aufgabe zugrunde, ein Verfahren zum Kalibrieren von einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, eine Steuereinrichtung zur Durchführung eines solchen Verfahrens, eine Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und ein Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung zu schaffen, wobei die genannten Nachteile zumindest teilweise behoben, vorzugsweise vermieden sind.
  • Die Aufgabe wird gelöst, indem die vorliegende technische Lehre bereitgestellt wird, insbesondere die Lehre der unabhängigen Ansprüche sowie der in den abhängigen Ansprüchen und der Beschreibung offenbarten Ausführungsformen.
  • Die Aufgabe wird insbesondere gelöst, indem ein Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors geschaffen wird, wobei eine Ansteuerung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors zeitlich aufeinander abgestimmt werden und der abgestimmten Ansteuerung ein sichtbarer Abstandsbereich zugeordnet wird. Mittels der abgestimmten Ansteuerung wird eine erste Aufnahme bei einer Beleuchtung mittels der ersten Beleuchtungseinrichtung mit dem optischen Sensor aufgenommen. Mittels der abgestimmten Ansteuerung wird eine zweite Aufnahme bei einer Beleuchtung mittels der zweiten Beleuchtungseinrichtung mit dem optischen Sensor aufgenommen. Weiterhin wird eine Differenz-Aufnahme als Differenz der ersten Aufnahme und der zweiten Aufnahme gebildet, wobei die abgestimmte Ansteuerung und/oder die erste Beleuchtungseinrichtung und/oder die zweite Beleuchtungseinrichtung auf Grundlage der Differenz-Aufnahme bewertet und/oder verändert wird.
  • Mithilfe des Verfahrens ist es vorteilhaft möglich, basierend auf wenigen Aufnahmen, vorzugsweise zwei Aufnahmen, die Ansteuerung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors zu kalibrieren. Die Kalibrierung umfasst insbesondere die Orchestrierung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors.
  • Darüber hinaus ist es mit dem Verfahren vorteilhaft möglich, Alterungseffekte bei den Komponenten der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors zu erkennen und zu kompensieren. Vorzugsweise wird außerdem ein möglicher zukünftiger Ausfall einer Komponente aufgrund von Alterungseffekten frühzeitig erkannt, worauf ein Austausch der jeweiligen Komponente initiiert werden kann.
  • Außerdem erfolgt die Kalibrierung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors vorteilhaft während der Fahrt eines Kraftfahrzeugs, welches die erste Beleuchtungseinrichtung, die zweite Beleuchtungseinrichtung und den optischen Sensor aufweist, insbesondere bevorzugt während einer Fahrt unter realen Bedingungen auf einer realen Straße, besonders bevorzugt einer öffentlichen Straße, wie beispielsweise einer Landstraße oder einer Autobahn. Damit ist die Dimension der Umgebung, in welcher die Kalibrierung vorgenommen wird, und die Dimension der Umgebung, in welcher die erste Beleuchtungseinrichtung, die zweite Beleuchtungseinrichtung und der optische Sensor betrieben werden, identisch.
  • Die Kalibrierung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors stellt sicher, dass Alterungseffekte und/oder Verschmutzungen der ersten Beleuchtungseinrichtung und/oder der zweiten Beleuchtungseinrichtung und/oder des optischen Sensors nicht die Abstandsmessung verfälschen.
  • Das Verfahren zur Erzeugung von Aufnahmen mittels einer zeitlich aufeinander abgestimmten Ansteuerung mindestens einer Beleuchtungseinrichtung und eines optischen Sensors ist insbesondere ein als Gated-Imaging-Verfahren bekanntes Verfahren; insbesondere ist der optische Sensor eine Kamera, die nur in einem bestimmten, eingeschränkten Zeitbereich empfindlich geschaltet wird, was als „Gated-Ansteuerung“ bezeichnet wird, die Kamera ist also eine Gated-Kamera. Auch die mindestens eine Beleuchtungseinrichtung wird entsprechend zeitlich nur in einem bestimmten, ausgewählten Zeitintervall angesteuert, um eine objektseitige Szenerie auszuleuchten.
  • Insbesondere werden durch die erste Beleuchtungseinrichtung und die zweite Beleuchtungseinrichtung eine vordefinierte Anzahl von Lichtimpulsen ausgesandt, vorzugsweise jeweils mit einer Dauer zwischen 5 ns und 20 ns. Der Beginn und das Ende der Belichtung des optischen Sensors wird an die Anzahl und Dauer der abgegebenen Lichtimpulse gekoppelt. Daraus resultierend kann ein bestimmter sichtbarer Abstandsbereich durch die zeitliche Ansteuerung einerseits der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und andererseits des optischen Sensors mit entsprechend definierter örtlicher Lage, das heißt insbesondere bestimmten Abständen einer nahen und einer entfernten Grenze des sichtbaren Abstandsbereichs von dem optischen Sensor, durch den optischen Sensor erfasst werden.
  • Der sichtbare Abstandsbereich ist dabei derjenige - objektseitige - Bereich im dreidimensionalen Raum, welche durch die Anzahl und Dauer der Lichtimpulse der ersten Beleuchtungseinrichtung und/oder der zweiten Beleuchtungseinrichtung in Verbindung mit dem Start und dem Ende der Belichtung des optischen Sensors in einer zweidimensionalen Aufnahme auf einer Bildebene des optischen Sensors abgebildet wird.
  • Soweit hier und im Folgenden von „objektseitig“ die Rede ist, ist ein Bereich im realen Raum angesprochen. Soweit hier und im Folgenden von „bildseitig“ die Rede ist, ist ein Bereich auf der Bildebene des optischen Sensors angesprochen. Der sichtbarere Abstandsbereich ist dabei objektseitig gegeben. Dieser entspricht einem durch die Abbildungsgesetze sowie die zeitliche Ansteuerung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors zugeordneten bildseitigen Bereich auf der Bildebene.
  • Abhängig von dem Start und dem Ende der Belichtung des optischen Sensors nach dem Beginn der Beleuchtung durch die erste Beleuchtungseinrichtung und/oder die zweite Beleuchtungseinrichtung treffen Lichtimpulsphotonen auf den optischen Sensor. Je weiter der sichtbare Abstandsbereich von der ersten Beleuchtungseinrichtung und/oder der zweiten Beleuchtungseinrichtung und dem optischen Sensor entfernt ist, desto länger ist die zeitliche Dauer, bis ein Photon, welches in diesem Abstandsbereich reflektiert wird, auf den optischen Sensor trifft. Daher verlängert sich der zeitliche Abstand zwischen einem Ende der Beleuchtung und einem Beginn der Belichtung, je weiter der sichtbare Abstandsbereich von der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und von dem optischen Sensor entfernt ist.
  • Es ist also gemäß einer Ausgestaltung des Verfahrens insbesondere möglich, durch eine entsprechend geeignete Wahl der zeitlichen Ansteuerung der ersten Beleuchtungseinrichtung und/oder der zweiten Beleuchtungseinrichtung einerseits und des optischen Sensors andererseits, die Lage und die räumliche Breite des sichtbaren Abstandsbereiches, insbesondere einen Abstand zwischen der nahen Grenze und der entfernten Grenze des sichtbaren Abstandsbereichs, zu definieren.
  • In einer bevorzugten Ausgestaltung des Verfahrens wird der sichtbare Abstandsbereich vorgegeben, wobei daraus die zeitliche Abstimmung der ersten Beleuchtungseinrichtung und/oder der zweiten Beleuchtungseinrichtung einerseits und des optischen Sensors andererseits bestimmt und entsprechend vorgegeben wird.
  • Die Beleuchtungseinrichtung weist in einer bevorzugten Ausgestaltung mindestens einen Oberflächenemitter, insbesondere einen sogenannten VCSE-Laser, auf. Alternativ oder zusätzlich ist der optische Sensor bevorzugt eine Kamera.
  • Vorzugsweise wird die abgestimmte Ansteuerung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors derart bewertet und/oder verändert, dass ein erster bildseitig sichtbarer Abstandbereich in der ersten Aufnahme und ein zweiter bildseitig sichtbarer Abstandbereich in der zweiten Aufnahme einen identischen Bereich des objektseitigen Beobachtungsbereichs darstellen. Alternativ oder zusätzlich wird die abgestimmte Ansteuerung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors derart bewertet und/oder verändert, dass die Beleuchtungsstärke in der ersten Aufnahme und die Beleuchtungsstärke in der zweiten Aufnahme identisch sind.
  • In einer bevorzugten Ausführungsform des Verfahrens wird bei der ersten Aufnahme und der zweiten Aufnahme vor Bildung der Differenz-Aufnahme eine Bildregistrierung durchgeführt. Vorteilhafterweise kann in der Differenz-Aufnahme in einfacher Weise festgestellt werden, ob der erste bildseitig sichtbare Abstandsbereich in der ersten Aufnahme und der zweite bildseitig sichtbare Abstandsbereich in der zweiten Aufnahme den identischen Bereich des objektseitigen Beobachtungsbereichs darstellen und/oder die identische Beleuchtungsstärke aufweisen.
  • In einer weiteren bevorzugten Ausführungsform des Verfahrens wird eine erste Helligkeitsverteilung in der ersten Aufnahme mit einer zweiten Helligkeitsverteilung der zweiten Aufnahme verglichen. Vorteilhafterweise ist eine Bewertung und/oder eine Veränderung der abgestimmten Ansteuerung basierend auf einem Vergleich der ersten Helligkeitsverteilung und der zweiten Helligkeitsverteilung in einfacher Weise möglich.
  • Im Kontext der vorliegenden technischen Lehre ordnet eine Helligkeitsverteilung jeder Bildzeile des optischen Sensors, und damit allen Punkten des Beobachtungsbereichs, die einen identischen Abstand zu dem optischen Sensor aufweisen, eine Beleuchtungsstärke zu. Vorzugsweise ergibt sich die Beleuchtungsstärke einer Bildzeile als die Summe der Beleuchtungsstärken aller Bildpunkte der jeweiligen Bildzeile. Alternativ ergibt sich die Beleuchtungsstärke einer Bildzeile als Mittelwert der Beleuchtungsstärken aller Bildpunkte der jeweiligen Bildzeile.
  • In einer weiteren bevorzugten Ausführungsform des Verfahrens werden die erste Aufnahme und die zweite Aufnahme in einem zeitlichen Abstand von weniger als 0,01 Sekunden, vorzugsweise weniger als 0,001 Sekunden, aufgenommen.
  • Gemäß einer Weiterbildung der Erfindung ist vorgesehen, dass eine Mehrzahl von ersten Aufnahmen und eine Mehrzahl von zweiten Aufnahmen abwechselnd aufgenommen werden. Weiterhin wird eine gemittelte erste Aufnahme aus der Mehrzahl der ersten Aufnahmen und eine gemittelte zweite Aufnahme aus der Mehrzahl der zweiten Aufnahmen bestimmt. Die Differenz-Aufnahme wird dann als Differenz der gemittelten ersten Aufnahme und der gemittelten zweiten Aufnahme gebildet. Vorteilhafterweise ist damit gewährleistet, dass kurzzeitige Störsignale herausgefiltert werden, um tatsächlich bestehende Unterschiede der bildseitig sichtbaren Abstandsbereiche und der Beleuchtungsstärken zu detektieren.
  • In einer bevorzugten Ausführungsform des Verfahrens wird für eine erste erste Aufnahme der Mehrzahl von ersten Aufnahmen und eine darauffolgende erste zweite Aufnahme der Mehrzahl von zweiten Aufnahmen eine Bildregistrierung durchgeführt.
  • Gemäß einer Weiterbildung der Erfindung ist vorgesehen, dass eine dritte Aufnahme mit dem optischen Sensor ohne Beleuchtung mittels der ersten Beleuchtungseinrichtung oder der zweiten Beleuchtungseinrichtung aufgenommen wird. Weiterhin wird die Differenz-Aufnahme aus der ersten Aufnahme, der zweiten Aufnahme und der dritten Aufnahme gebildet. Insbesondere entspricht die dritte Aufnahme einer Tageslicht-Aufnahme. Vorteilhafterweise wird mittels Subtraktion der dritten Aufnahme der Einfluss des Tageslichts bei der Kalibrierung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors herausgerechnet.
  • In einer Ausführungsform des Verfahrens wird nach der ersten Aufnahme, beispielsweise der ersten ersten Aufnahme, und nach einer auf die erste Aufnahme folgenden zweiten Aufnahme, beispielsweise der ersten zweiten Aufnahme, die dritte Aufnahme aufgenommen.
  • In einer weiteren Ausführungsform des Verfahrens wird nach der ersten Aufnahme, beispielsweise der ersten ersten Aufnahme, die dritte Aufnahme aufgenommen. Nach der dritten Aufnahme wird eine zweite Aufnahme, beispielsweise die erste zweite Aufnahme, aufgenommen.
  • In einer weiteren Ausführungsform des Verfahrens wird die dritte Aufnahme vor der ersten Aufnahme, beispielsweise der ersten ersten Aufnahme, und vor einer zweiten Aufnahme, beispielsweise der ersten zweiten Aufnahme, aufgenommen.
  • In einer bevorzugten Ausführungsform des Verfahrens wird die Differenz-Aufnahme als Gesamt-Differenz einer ersten Differenz der ersten Aufnahme und der dritten Aufnahme und einer zweiten Differenz der zweiten Aufnahme und der dritten Aufnahme gebildet.
  • Gemäß einer Weiterbildung der Erfindung ist vorgesehen, dass mindestens eine Aufnahme, aus welcher die Differenz-Aufnahme gebildet wird, mit einem Beleuchtungsfaktor kalibriert wird. Der Beleuchtungsfaktor wird basierend auf einem Unterschied der Beleuchtungsstärke zwischen der ersten Beleuchtungseinrichtung und der zweiten Beleuchtungseinrichtung bestimmt. Vorteilhafterweise wird damit ein bekannter Unterschied der Beleuchtungsstärke zwischen der ersten Beleuchtungseinrichtung und der zweiten Beleuchtungseinrichtung kompensiert, bevor die Differenz-Aufnahme bestimmt wird.
  • Im Kontext der vorliegenden technischen Lehre ist der Beleuchtungsfaktor ein Korrekturfaktor, um die Beleuchtungsstärke einer Aufnahme bevorzugt global und homogen zu skalieren.
  • In einer Ausführungsform des Verfahrens wird mit dem Beleuchtungsfaktor ein Ausfall von einzelnen Beleuchtungselementen der ersten Beleuchtungseinrichtung und/oder der zweiten Beleuchtungseinrichtung kompensiert.
  • Gemäß einer Weiterbildung der Erfindung ist vorgesehen, dass mindestens eine Aufnahme, aus welcher die Differenz-Aufnahme gebildet wird, mit einer Randlichtabfall-Korrektur kalibriert wird. Die Randlichtabfall-Korrektur wird basierend auf dem Randlichtabfall des optischen Sensors bestimmt. Vorteilhafterweise wird damit eine Verdunkelung der Aufnahme oder Abnahme der Helligkeit zum Bildrand hin korrigiert. In einer bevorzugten Ausführungsform ist der Randlichtabfall des optischen Sensors und damit auch die Randlichtabfall-Korrektur bekannt.
  • Gemäß einer Weiterbildung der Erfindung ist vorgesehen, dass in die abgestimmte Ansteuerung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors die Eigengeschwindigkeit eines Kraftfahrzeugs, welches die erste Beleuchtungseinrichtung, die zweite Beleuchtungseinrichtung und den optischen Sensor aufweist, mit einbezogen wird. Vorteilhafterweise wird damit die abgestimmte Ansteuerung auf Grundlage der aktuellen Eigengeschwindigkeit des Kraftfahrzeugs bewertet und/oder verändert.
  • Eine Betrachtung der aktuellen Eigengeschwindigkeit ist vorteilhaft, da sich der Abstand von dem Kraftfahrzeug zu einem gewünschten sichtbaren Abstandsbereich zwischen der ersten Aufnahme und der zweiten Aufnahme je nach Geschwindigkeit ändert. Bei einer Eigengeschwindigkeit von 50 km/h und einem zeitlichen Abstand von 0,01 Sekunden zwischen der ersten Aufnahme und der zweiten Aufnahme verringert sich der Abstand von dem Kraftfahrzeug zu dem gewünschten sichtbaren Abstandsbereich um ca. 14 cm. Damit muss ein zeitlicher Abstand zwischen einem Start der Beleuchtung mittels der zweiten Beleuchtungseinrichtung und einem Start der Belichtung des optischen Sensors um ca. 1 ns kürzer gewählt werden als die Beleuchtung mittels der ersten Beleuchtungseinrichtung, um den identischen gewünschten sichtbaren Abstandsbereich aufzunehmen. Bei einer Eigengeschwindigkeit von 100 km/h und einem zeitlichen Abstand von 0,01 Sekunden zwischen der ersten Aufnahme und der zweiten Aufnahme verdoppeln sich die vorhergehenden Werte auf ca. 28 cm und ca. 2 ns.
  • In einer Ausführungsform des Verfahrens wird eine Kalibrierung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors anhand eines ersten sichtbaren Abstandsbereichs und eines zweiten sichtbaren Abstandsbereichs, welcher von dem ersten sichtbaren Abstandsbereich verschieden ist, durchgeführt.
  • Die Aufgabe wird auch gelöst, indem eine Steuereinrichtung geschaffen wird, die eingerichtet ist, um ein erfindungsgemäßes Verfahren oder ein Verfahren nach einer oder mehreren der zuvor beschriebenen Ausführungsformen durchzuführen. Die Steuereinrichtung ist vorzugsweise als Recheneinrichtung, besonders bevorzugt als Computer, oder als Steuergerät, insbesondere als Steuergerät eines Kraftfahrzeugs, ausgebildet. In Zusammenhang mit der Steuereinrichtung ergeben sich insbesondere die Vorteile, die bereits in Zusammenhang mit dem Verfahren erläutert wurden.
  • Die Aufgabe wird auch gelöst, indem eine Kalibrierungsvorrichtung geschaffen wird, die eine erste Beleuchtungseinrichtung, eine zweite Beleuchtungseinrichtung, einen optischen Sensor und eine erfindungsgemäße Steuereinrichtung oder eine Steuereinrichtung nach einem oder mehreren der zuvor beschriebenen Ausführungsbeispiele aufweist. Die Steuereinrichtung ist bevorzugt mit der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und dem optischen Sensor wirkverbunden und eingerichtet zu deren jeweiliger Ansteuerung. In Zusammenhang mit der Kalibrierungsvorrichtung ergeben sich insbesondere die Vorteile, die bereits in Zusammenhang mit dem Verfahren und der Steuereinrichtung erläutert wurden.
  • In einem bevorzugten Ausführungsbeispiel ist ein erster Abstand zwischen der ersten Beleuchtungseinrichtung und dem optischen Sensor kleiner als ein zweiter Abstand zwischen der zweiten Beleuchtungseinrichtung und dem optischen Sensor. Besonders bevorzugt beträgt der erste Abstand weniger als 50 cm, bevorzugt weniger als 20 cm, bevorzugt weniger als 10 cm. Besonders bevorzugt beträgt außerdem der zweite Abstand mehr als 50 cm, bevorzugt mehr als 100 cm, bevorzugt mehr als 150 cm.
  • Gemäß einer Weiterbildung der Erfindung ist vorgesehen, dass die Kalibrierungsvorrichtung eine Vorrichtung aufweist, ausgewählt aus einer Gruppe, bestehend aus einer Kommunikationseinrichtung, einer ersten Reinigungsvorrichtung für die erste Beleuchtungseinrichtung, und einer zweiten Reinigungsvorrichtung für die zweite Beleuchtungseinrichtung.
  • In einem Ausführungsbeispiel weist die Kalibrierungsvorrichtung eine Kommunikationseinrichtung auf. Vorzugsweise ist die Kommunikationseinrichtung eingerichtet, um den Status der Kalibrierung und/oder eine erfolgreiche oder nicht erfolgreiche Kalibrierung der ersten Beleuchtungseinrichtung, der zweiten Beleuchtungseinrichtung und des optischen Sensors an einen Empfänger, vorzugsweise einen Fahrer eines die Kalibrierungsvorrichtung aufweisenden Kraftfahrzeugs, zu übermitteln. Alternativ oder zusätzlich ist die Kommunikationseinrichtung eingerichtet, um Informationen über eine Kalibrierung der ersten Beleuchtungseinrichtung, der zweiten Bildungseinrichtung und des optischen Sensors an ein Rechenzentrum und/oder an eine Werkstatt zu übermitteln.
  • In einem weiteren Ausführungsbeispiel weist die Kalibrierungsvorrichtung eine erste Reinigungsvorrichtung für die erste Beleuchtungseinrichtung auf. Alternativ oder zusätzlich weist die Kalibrierungsvorrichtung eine zweite Reinigungsvorrichtung für die zweite Beleuchtungseinrichtung auf. Mittels einer solchen Reinigungsvorrichtung ist es vorteilhaft möglich, die der Reinigungseinrichtung zugeordnete Beleuchtungseinrichtung zu reinigen, insbesondere Schmutzablagerungen zu beseitigen, und damit eine optimale Beleuchtung zu ermöglichen.
  • In einem bevorzugten Ausführungsbeispiel weist die Kalibrierungsvorrichtung eine Kommunikationseinrichtung, eine erste Reinigungsvorrichtung für die erste Beleuchtungseinrichtung und eine zweite Reinigungsvorrichtung für die zweite Beleuchtungseinrichtung auf.
  • Die Aufgabe wird schließlich auch gelöst, indem ein Kraftfahrzeug mit einer erfindungsgemäßen Kalibrierungsvorrichtung oder einer Kalibrierungsvorrichtung nach einem oder mehreren der zuvor beschriebenen Ausführungsbeispiele geschaffen wird. In Zusammenhang mit dem Kraftfahrzeug ergeben sich insbesondere die Vorteile, die bereits in Zusammenhang mit dem Verfahren, der Steuereinrichtung und der Kalibrierungsvorrichtung erläutert wurden.
  • In vorteilhafter Ausgestaltung ist das Kraftfahrzeug als Lastkraftwagen ausgebildet. Es ist aber auch möglich, dass das Kraftfahrzeug ein Personenkraftwagen, ein Nutzfahrzeug, oder anderes Kraftfahrzeug ist.
  • In einem bevorzugten Ausführungsbeispiel ist das Kraftfahrzeug ein Lastkraftwagen. Der optische Sensor und die erste Beleuchtungseinrichtung sind oberhalb der Windschutzscheibe angeordnet und weisen einen Abstand voneinander - den ersten Abstand - von weniger als 50 cm, vorzugsweise weniger 20 cm, vorzugsweise weniger als 10 cm, auf. Die zweite Beleuchtungseinrichtung ist vorzugsweise im Bereich der Stoßstange angeordnet.
  • Die Erfindung wird im Folgenden anhand der Zeichnung näher erläutert.
  • Dabei zeigen:
    • 1 eine schematische Darstellung eines Ausführungsbeispiels eines Kraftfahrzeugs mit einem Ausführungsbeispiel einer Kalibrierungsvorrichtung,
    • 2 eine schematische Darstellung einer ersten Differenz-Aufnahme und eines ersten Beispiels einer ersten Helligkeitsverteilung und einer zweiten Helligkeitsverteilung,
    • 3 eine schematische Darstellung einer zweiten Differenz-Aufnahme und eines zweiten Beispiels einer ersten Helligkeitsverteilung und einer zweiten Helligkeitsverteilung, und
    • 4 eine schematische Darstellung eines dritten Beispiels einer ersten Helligkeitsverteilung und einer zweiten Helligkeitsverteilung.
  • 1 zeigt eine schematische Darstellung eines Ausführungsbeispiels eines Kraftfahrzeugs 1 mit einem Ausführungsbeispiel einer Kalibrierungsvorrichtung 3. Die Kalibrierungsvorrichtung 3 weist eine erste Beleuchtungseinrichtung 5.1, eine zweite Beleuchtungseinrichtung 5.2, einen optischen Sensor 7, insbesondere eine Kamera, und eine Steuereinrichtung 9 auf. Die Steuereinrichtung 9 ist in nicht explizit dargestellter Weise mit der ersten Beleuchtungseinrichtung 5.1, der zweiten Beleuchtungseinrichtung 5.2 und dem optischen Sensor 7 wirkverbunden und eingerichtet zu deren jeweiliger Ansteuerung.
  • Vorzugsweise ist ein erster Abstand zwischen der ersten Beleuchtungseinrichtung 5.1 und dem optischen Sensor 7 kleiner als ein zweiter Abstand zwischen der zweiten Beleuchtungseinrichtung 5.2 und dem optischen Sensor 7. Besonders bevorzugt beträgt der erste Abstand weniger als 50 cm, bevorzugt weniger als 20 cm, bevorzugt weniger als 10 cm. Besonders bevorzugt beträgt außerdem der zweite Abstand mehr als 50 cm, bevorzugt mehr als 100 cm, bevorzugt mehr als 150 cm.
  • Die erste Beleuchtungseinrichtung 5.1 und die zweite Beleuchtungseinrichtung 5.2 weisen vorzugsweise mindestens einen Oberflächenemitter, insbesondere einen sogenannten VCSE-Laser, auf.
  • Dargestellt in 1 ist insbesondere ein erstes Beleuchtungs-Frustum 11.1 der ersten Beleuchtungseinrichtung 5.1, ein zweites Beleuchtungs-Frustum 11.2 der zweiten Beleuchtungseinrichtung 5.2 und ein Beobachtungsbereich 13 des optischen Sensors 7. Schraffiert dargestellt ist außerdem ein sichtbarer Abstandsbereich 15, der sich als Teilmenge des ersten Beleuchtungs-Frustums 11.1 der ersten Beleuchtungseinrichtung 5.1, des zweiten Beleuchtungs-Frustums 11.2 der zweiten Beleuchtungseinrichtung 5.2 und des Beobachtungsbereichs 13 des optischen Sensors 7 ergibt.
  • Vorzugsweise weist die Kalibrierungsvorrichtung 3 eine Kommunikationseinrichtung 16 auf, die eingerichtet ist, um Informationen bezüglich einer Kalibrierung der ersten Beleuchtungseinrichtung 5.1, der zweiten Beleuchtungseinrichtung 5.2 und des optischen Sensors 7 von der Steuereinrichtung 9 an einen Fahrer des Kraftfahrzeugs 1 und/oder an ein Rechenzentrum und/oder an eine Werkstatt zu übermitteln. Alternativ oder zusätzlich weist die Kalibrierungsvorrichtung 3 eine erste Reinigungsvorrichtung für die erste Beleuchtungseinrichtung 5.1 auf. Alternativ oder zusätzlich weist die Kalibrierungsvorrichtung 3 eine zweite Reinigungsvorrichtung für die zweite Beleuchtungseinrichtung 5.2 auf.
  • Die Steuereinrichtung 9 ist insbesondere eingerichtet zur Durchführung einer im Folgenden näher beschriebenen Ausführungsform eines Verfahrens zum Kalibrieren der ersten Beleuchtungseinrichtung 5.1, der zweiten Beleuchtungseinrichtung 5.2 und des optischen Sensors 7.
  • Eine Ansteuerung der ersten Beleuchtungseinrichtung 5.1, der zweiten Beleuchtungseinrichtung 5.2 und des optischen Sensors 7 werden zeitlich aufeinander abgestimmt, und der abgestimmten Ansteuerung wird der sichtbare Abstandsbereich 15 zugeordnet. Mittels der abgestimmten Ansteuerung wird eine erste Aufnahme bei einer Beleuchtung mittels der ersten Beleuchtungseinrichtung 5.1 mit dem optischen Sensor 7 aufgenommen. Mittels der abgestimmten Ansteuerung wird weiterhin eine zweite Aufnahme bei einer Beleuchtung mittels der zweiten Beleuchtungseinrichtung 5.2 mit dem optischen Sensor 7 aufgenommen. Aus der Differenz der ersten Aufnahme und der zweiten Aufnahme wird eine Differenz-Aufnahme 17 gebildet. Die abgestimmte Ansteuerung wird auf Grundlage der Differenz-Aufnahme 17 bewertet und/oder verändert. Alternativ oder zusätzlich wird die erste Beleuchtungseinrichtung 5.1, insbesondere die Ansteuerung und/oder die Leuchtstärke der ersten Beleuchtungseinrichtung 5.1, auf Grundlage der Differenz-Aufnahme 17 bewertet und/oder verändert. Alternativ oder zusätzlich wird die zweite Beleuchtungseinrichtung 5.2, insbesondere die Ansteuerung und/oder die Leuchtstärke der zweiten Beleuchtungseinrichtung 5.2, auf Grundlage der Differenz-Aufnahme 17 bewertet und/oder verändert. Alternativ oder zusätzlich wird die erste Beleuchtungseinrichtung 5.1 und/oder die zweite Beleuchtungseinrichtung 5.2 auf Grundlage der Bewertung der Differenz-Aufnahme 17 gereinigt.
  • Vorzugsweise wird die abgestimmte Ansteuerung der ersten Beleuchtungseinrichtung 5.1, der zweiten Beleuchtungseinrichtung 5.2 und des optischen Sensors 7 derart bewertet und/oder verändert, dass ein erster bildseitig sichtbarer Abstandbereich in der ersten Aufnahme und ein zweiter bildseitig sichtbarer Abstandbereich in der zweiten Aufnahme einen identischen Bereich des objektseitigen Beobachtungsbereichs 13, insbesondere des sichtbaren Abstandsbereichs 15, darstellen. Alternativ oder zusätzlich wird eine erste Helligkeitsverteilung 21.1 in der ersten Aufnahme mit einer zweiten Helligkeitsverteilung 21.2 der zweiten Aufnahme verglichen.
  • Vorzugsweise wird bei der ersten Aufnahme und der zweiten Aufnahme vor Bildung der Differenz-Aufnahme 17 eine Bildregistrierung durchgeführt.
  • Vorzugsweise werden die erste Aufnahme und die zweite Aufnahme in einem zeitlichen Abstand von weniger als 0,01 Sekunden, vorzugsweise in einem zeitlichen Abstand von weniger als 0,001 Sekunden, aufgenommen.
  • Vorzugsweise wird eine Mehrzahl von ersten Aufnahmen und eine Mehrzahl von zweiten Aufnahmen abwechselnd aufgenommen. Weiterhin wird eine gemittelte erste Aufnahme aus der Mehrzahl der ersten Aufnahmen und eine gemittelte zweite Aufnahme aus der Mehrzahl der zweiten Aufnahmen bestimmt. Die Differenz-Aufnahme 17 wird dann als Differenz der gemittelten ersten Aufnahme und der gemittelten zweiten Aufnahme gebildet.
  • Vorzugsweise wird eine dritte Aufnahme mit dem optischen Sensor ohne Beleuchtung mittels der ersten Beleuchtungseinrichtung 5.1 oder der zweiten Beleuchtungseinrichtung 5.2 aufgenommen. Weiterhin wird die Differenz-Aufnahme 17 aus der ersten Aufnahme, der zweiten Aufnahme und der dritten Aufnahme gebildet. Insbesondere entspricht die dritte Aufnahme einer Tageslicht-Aufnahme.
  • Vorzugsweise wird mindestens eine Aufnahme, aus welcher die Differenz-Aufnahme 17 gebildet wird, mit einem Beleuchtungsfaktor kalibriert. Der Beleuchtungsfaktor wird basierend auf einem Unterschied, insbesondere einem vorab bekannten Unterscheid, der Beleuchtungsstärke zwischen der ersten Beleuchtungseinrichtung 5.1 und der zweiten Beleuchtungseinrichtung 5.2 bestimmt.
  • Vorzugsweise wird mindestens eine Aufnahme, aus welcher die Differenz-Aufnahme 17 gebildet wird, mit einer Randlichtabfall-Korrektur kalibriert. Die Randlichtabfall-Korrektur wird basierend auf dem Randlichtabfall des optischen Sensors 7 bestimmt. Vorteilhafterweise wird damit eine Verdunkelung der Aufnahme oder Abnahme der Helligkeit zum Bildrand hin korrigiert.
  • Vorzugsweise wird in die abgestimmte Ansteuerung der ersten Beleuchtungseinrichtung 5.1, der zweiten Beleuchtungseinrichtung 5.2 und des optischen Sensors 7 die Eigengeschwindigkeit des Kraftfahrzeugs 1 mit einbezogen.
  • 2 a) zeigt eine schematische Darstellung einer ersten Differenz-Aufnahme 17 als Differenz einer ersten Aufnahme und einer zweiten Aufnahme. Die Differenz-Aufnahme 17 kann in fünf Abschnitte 19 unterteilt werden. In einem ersten Abschnitt 19.1, einem dritten Abschnitt 19.3 und einem fünften Abschnitt 19.5 ist nichts dargestellt. Daher kann daraus geschlossen werden, dass die erste Aufnahme und die zweite Aufnahme in dem ersten Abschnitt 19.1, dem dritten Abschnitt 19.3 und dem fünften Abschnitt 19.5 identisch sind und somit bei einer Differenz-Bildung der beiden Aufnahmen keine Bildinformation übrigbleibt. In einem zweiten Abschnitt 19.2 und in einem vierten Abschnitt 19.4 sind Objekte in der ersten Aufnahme und/oder der zweiten Aufnahme zu erkennen. Daher kann daraus geschlossen werden, dass die erste Aufnahme und die zweite Aufnahme in dem zweiten Abschnitt 19.2 und in dem vierten Abschnitt 19.4 nicht identisch sind. Eine solche Abfolge von Abschnitten, welche die komplette horizontale Abmessung der Differenz-Aufnahme 17 umfassen, deutet darauf hin, dass der erste bildseitig sichtbare Abstandsbereich oder der zweite bildseitig sichtbare Abstandsbereich nicht dem zugeordneten sichtbaren Abstandsbereich 15 entspricht. Somit werden bei einer Differenz-Bildung der beiden Aufnahmen nicht alle Bildinformationen gelöscht.
  • Der erste Abschnitt 19.1 und der fünfte Abschnitt 19.5 sind sowohl in der Differenz-Aufnahme 17 als auch in der ersten Aufnahme und der zweiten Aufnahme dunkel. In diesen Abschnitten 19.1, 19.5 findet auf Grund der Ansteuerung der Beleuchtungseinrichtungen 5 und des optischen Sensors 7 keine Belichtung statt.
  • 2 b) zeigt eine schematische Darstellung eines ersten Beispiels einer ersten Helligkeitsverteilung 21.1 und einer zweiten Helligkeitsverteilung 21.2. Eine Helligkeitsverteilung 21.1, 21.2 ordnet jeder Bildzeile eine Beleuchtungsstärke zu. Vorzugsweise ergibt sich die Beleuchtungsstärke einer Bildzeile als die Summe der Beleuchtungsstärken aller Bildpunkte der jeweiligen Bildzeile. Alternativ ergibt sich die Beleuchtungsstärke einer Bildzeile als Mittelwert der Beleuchtungsstärken aller Bildpunkte der jeweiligen Bildzeile.
  • Die erste Helligkeitsverteilung 21.1 ist die Helligkeitsverteilung der ersten Aufnahme, welche zur Bildung der Differenz-Aufnahme 17 aus 2 a) genutzt wird. Die zweite Helligkeitsverteilung 21.2 ist die Helligkeitsverteilung der zweiten Aufnahme, welche zur Bildung der Differenz-Aufnahme 17 aus 2 b) genutzt wird.
  • Die horizontale Achse der vertikalen Helligkeitsverteilungen 21.1, 21.2 kann ebenfalls in die fünf vertikalen Abschnitte 19 unterteilt werden. Auch hier ist deutlich zu sehen, dass die erste Helligkeitsverteilung 21.1 und die zweite Helligkeitsverteilung 21.2 in dem ersten Abschnitt 19.1, dem dritten Abschnitt 19.3 und dem fünften Abschnitt 19.5 übereinstimmen. In dem zweiten Abschnitt 19.2 und in dem vierten Abschnitt 19.4 unterscheiden sich die erste Helligkeitsverteilung 21.1 und die zweite Helligkeitsverteilung 21.2 deutlich voneinander. Damit zeigt auch der Vergleich der ersten Helligkeitsverteilung 21.1 und der zweiten Helligkeitsverteilung 21.2, dass der erste bildseitig sichtbare Abstandsbereich oder der zweite bildseitig sichtbare Abstandsbereich nicht dem zugeordneten sichtbaren Abstandsbereich 15 entspricht.
  • 3 a) zeigt eine schematische Darstellung einer zweiten Differenz-Aufnahme 17 als Differenz einer ersten Aufnahme und einer zweiten Aufnahme. Die Differenz-Aufnahme 17 kann in drei Abschnitte 19 unterteilt werden. In dem ersten Abschnitt 19.1 und dem dritten Abschnitt 19.3 ist nichts dargestellt. Daher kann daraus geschlossen werden, dass die erste Aufnahme und die zweite Aufnahme in dem ersten Abschnitt 19.1 und dem dritten Abschnitt 19.3 identisch sind. In dem zweiten Abschnitt 19.2 sind Objekte in der ersten Aufnahme und/oder der zweiten Aufnahme zu erkennen. Daher kann daraus geschlossen werden, dass die erste Aufnahme und die zweite Aufnahme in dem zweiten Abschnitt 19.2 nicht identisch sind. Diese Abfolge von drei Abschnitten, welche die komplette horizontale Abmessung der Differenz-Aufnahme 17 umfassen, deutet darauf hin, dass die erste Beleuchtungsstärke der ersten Aufnahme und die zweite Beleuchtungsstärke der zweiten Aufnahme unterschiedlich sind.
  • Der erste Abschnitt 19.1 und der dritte Abschnitt 19.3 sind sowohl in der Differenz-Aufnahme 17 als auch in der ersten Aufnahme und der zweiten Aufnahme dunkel. In diesen Abschnitten 19.1, 19.3 findet, analog zu 2 a). auf Grund der Ansteuerung der Beleuchtungseinrichtungen 5 und des optischen Sensors 7 keine Belichtung statt.
  • Eine mögliche Ursache für den Unterschied zwischen der ersten Beleuchtungsstärke und der zweiten Beleuchtungsstärke ist eine unterschiedliche Ansteuerung der ersten Beleuchtungseinrichtung 5.1 und der zweiten Beleuchtungseinrichtung 5.2. Eine weitere mögliche Ursache ist eine Verschmutzung der ersten Beleuchtungseinrichtung 5.1 und/oder der zweiten Beleuchtungseinrichtung 5.2. Eine weitere mögliche Ursache ist ein Defekt, insbesondere ein Ausfall eines Teils der Leuchtmittel, insbesondere eines Teils der Oberflächenemitter, der ersten Beleuchtungseinrichtung 5.1 und/oder der zweiten Beleuchtungseinrichtung 5.2.
  • 3 b) zeigt eine schematische Darstellung eines zweiten Beispiels einer ersten Helligkeitsverteilung 21.1 und einer zweiten Helligkeitsverteilung 21.2. Die erste \ Helligkeitsverteilung 21.1 ist die Helligkeitsverteilung der ersten Aufnahme, welche zur Bildung der Differenz-Aufnahme 17 aus 3 a) genutzt wird. Die zweite Helligkeitsverteilung 21.2 ist die Helligkeitsverteilung der zweiten Aufnahme, welche zur Bildung der Differenz-Aufnahme 17 aus 3 b) genutzt wird.
  • Die horizontale Achse der vertikalen Helligkeitsverteilungen 21.1, 21.2 kann ebenfalls in die drei vertikalen Abschnitte 19 unterteilt werden. Auch hier ist deutlich zu sehen, dass die erste Helligkeitsverteilung 21.1 und die zweite Helligkeitsverteilung 21.2 in dem ersten Abschnitt 19.1 und dem dritten Abschnitt 19.3 übereinstimmen. In dem zweiten Abschnitt 19.2 weisen die erste Helligkeitsverteilung 21.1 und die zweite Helligkeitsverteilung 21.2 einen ähnlichen Verlauf auf, sind aber in der Höhe oder Intensität zueinander verschoben. Damit zeigt auch der Vergleich der ersten Helligkeitsverteilung 21.1 und der zweiten Helligkeitsverteilung 21.2, dass die erste Beleuchtungsstärke der ersten Aufnahme und die zweite Beleuchtungsstärke der zweiten Aufnahme deutlich voneinander abweichen.
  • 4 zeigt eine schematische Darstellung eines dritten Beispiels einer ersten Helligkeitsverteilung 19.1 und einer zweiten Helligkeitsverteilung 19.2. Die horizontale Achse der Helligkeitsverteilungen 21.1, 21.2 kann in fünf Abschnitte 19 unterteilt werden. In dem ersten Abschnitt 19.1 und in der fünften Abschnitt 19.5 sind die erste Helligkeitsverteilung 21.1 und die zweite Helligkeitsverteilung 21.2 identisch. In dem zweiten Abschnitt 19.2 und in den vierten Abschnitt 19.4 weist genau eine Helligkeitsverteilung 21.1, 21.2 eine von Null verschiedene Beleuchtungsstärke auf. Damit ist klar, dass sich der erste bildseitig sichtbare Abstandsbereich und der zweite bildseitig sichtbare Abstandsbereich unterscheiden und zumindest einer der bildseitig sichtbaren Abstandsbereiche nicht dem zugeordneten sichtbaren Abstandsbereich 15 entspricht. In dem dritten Abschnitt 19.3 weisen die erste Helligkeitsverteilung 21.1 und die zweite Helligkeitsverteilung 21.2 einen ähnlichen Verlauf auf, sind aber in der Höhe oder Intensität zueinander verschoben, wie zuvor in 3 b). Somit ist weiterhin klar, dass die erste Beleuchtungsstärke ersten Aufnahme und die zweite Beleuchtungsstärke der zweiten Aufnahme deutlich voneinander abweichen.

Claims (10)

  1. Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung (5.1), einer zweiten Beleuchtungseinrichtung (5.2) und eines optischen Sensors (7), wobei - eine Ansteuerung der ersten Beleuchtungseinrichtung (5.1), der zweiten Beleuchtungseinrichtung (5.2) und des optischen Sensors (7) zeitlich aufeinander abgestimmt werden, wobei - der abgestimmten Ansteuerung ein sichtbarer Abstandsbereich (15) zugeordnet wird, wobei - eine erste Aufnahme bei einer Beleuchtung mittels der ersten Beleuchtungseinrichtung (5.1) mit dem optischen Sensor (7) mittels der abgestimmten Ansteuerung aufgenommen wird, wobei - eine zweite Aufnahme bei einer Beleuchtung mittels der zweiten Beleuchtungseinrichtung (5.2) mit dem optischen Sensor (7) mittels der abgestimmten Ansteuerung aufgenommen wird, wobei - eine Differenz-Aufnahme (17) als Differenz der ersten Aufnahme und der zweiten Aufnahme gebildet wird, wobei - die abgestimmte Ansteuerung und/oder die erste Beleuchtungseinrichtung (5.1) und/ohne die zweite Beleuchtungseinrichtung (5.2) auf Grundlage der Differenz-Aufnahme (17) bewertet und/oder verändert wird.
  2. Verfahren nach Anspruch 1, wobei - eine Mehrzahl von ersten Aufnahmen und eine Mehrzahl von zweiten Aufnahmen abwechselnd aufgenommen werden, wobei - eine gemittelte erste Aufnahme aus der Mehrzahl der ersten Aufnahmen bestimmt wird, wobei - eine gemittelte zweite Aufnahme aus der Mehrzahl der zweiten Aufnahmen bestimmt wird, wobei - die Differenz-Aufnahme (17) als Differenz der gemittelten ersten Aufnahme und der gemittelten zweiten Aufnahme gebildet wird.
  3. Verfahren nach einem der vorhergehenden Ansprüche, wobei eine dritte Aufnahme mit dem optischen Sensor (7) ohne Beleuchtung mittels der ersten Beleuchtungseinrichtung (5.1) oder der zweiten Beleuchtungseinrichtung (5.2) aufgenommen wird, wobei die Differenz-Aufnahme (17) aus der ersten Aufnahme, der zweiten Aufnahme und der dritten Aufnahme gebildet wird.
  4. Verfahren nach einem der vorhergehenden Ansprüche, wobei mindestens eine Aufnahme, aus welcher die Differenz-Aufnahme (17) gebildet wird, mit einem Beleuchtungsfaktor kalibriert wird, wobei der Beleuchtungsfaktor basierend auf einem Unterschied der Beleuchtungsstärke zwischen der ersten Beleuchtungseinrichtung (5.1) und der zweiten Beleuchtungseinrichtung (5.2) bestimmt wird.
  5. Verfahren nach einem der vorhergehenden Ansprüche, wobei mindestens eine Aufnahme, aus welcher die Differenz-Aufnahme (17) gebildet, mit einer Randlichtabfall-Korrektur kalibriert wird, wobei die Randlichtabfall-Korrektur basierend auf dem Randlichtabfall des optischen Sensors (7) bestimmt wird.
  6. Verfahren nach einem der vorhergehenden Ansprüche, wobei in die abgestimmte Ansteuerung der ersten Beleuchtungseinrichtung (5.1), der zweiten Beleuchtungseinrichtung (5.2) und des optischen Sensors (7) die Eigengeschwindigkeit eines Kraftfahrzeugs (1), welches die erste Beleuchtungseinrichtung (5.1), die zweite Beleuchtungseinrichtungen (5.2) und den optischen Sensor (7) aufweist, mit einbezogen wird.
  7. Steuereinrichtung (9), eingerichtet zur Durchführung eines Verfahrens zum Kalibrieren einer ersten Beleuchtungseinrichtung (5.1), einer zweiten Beleuchtungseinrichtung (5.2) und eines optischen Sensors (7) nach einem der vorhergehenden Ansprüche.
  8. Kalibrierungsvorrichtung (3) mit einer ersten Beleuchtungseinrichtung (5.1), einer zweiten Beleuchtungseinrichtung (5.2), einem optischen Sensor (7) und einer Steuereinrichtung (9) nach Anspruch 7.
  9. Kalibrierungsvorrichtung (3) nach Anspruch 8, wobei die Kalibrierungsvorrichtung (3) mindestens eine Vorrichtung, ausgewählt aus einer Gruppe, bestehend aus einer Kommunikationseinrichtung (16), einer ersten Reinigungsvorrichtung für die erste Beleuchtungseinrichtung (5.1), und einer zweiten Reinigungsvorrichtung für die zweite Beleuchtungseinrichtung (5.2), aufweist.
  10. Kraftfahrzeug (1) mit einer Kalibrierungsvorrichtung (3) nach Anspruch 8 oder Anspruch 9.
DE102020007064.7A 2020-11-19 2020-11-19 Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung Active DE102020007064B4 (de)

Priority Applications (3)

Application Number Priority Date Filing Date Title
DE102020007064.7A DE102020007064B4 (de) 2020-11-19 2020-11-19 Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung
CN202180077494.1A CN116670541A (zh) 2020-11-19 2021-10-07 用于校准第一照明装置、第二照明装置和光学传感器的方法、用于执行这种方法的控制装置、具有这种控制装置的校准装置和具有这种校准装置的机动车
PCT/EP2021/077683 WO2022106116A1 (de) 2020-11-19 2021-10-07 Verfahren zum kalibrieren einer ersten beleuchtungseinrichtung, einer zweiten beleuchtungseinrichtung und eines optischen sensors, steuereinrichtung zur durchführung eines solchen verfahrens, kalibrierungsvorrichtung mit einer solchen steuereinrichtung und kraftfahrzeug mit einer solchen kalibrierungsvorrichtung

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102020007064.7A DE102020007064B4 (de) 2020-11-19 2020-11-19 Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung

Publications (2)

Publication Number Publication Date
DE102020007064A1 DE102020007064A1 (de) 2022-05-19
DE102020007064B4 true DE102020007064B4 (de) 2022-08-11

Family

ID=78085921

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102020007064.7A Active DE102020007064B4 (de) 2020-11-19 2020-11-19 Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung

Country Status (3)

Country Link
CN (1) CN116670541A (de)
DE (1) DE102020007064B4 (de)
WO (1) WO2022106116A1 (de)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5034810A (en) 1989-12-07 1991-07-23 Kaman Aerospace Corporation Two wavelength in-situ imaging of solitary internal waves
DE10250705A1 (de) 2002-10-31 2004-05-13 Bayerische Motoren Werke Ag Verfahren und Vorrichtung zur Schattenkompensation in digitalen Bildern
US20180113200A1 (en) 2016-09-20 2018-04-26 Innoviz Technologies Ltd. Variable flux allocation within a lidar fov to improve detection in a region
EP3308193B1 (de) 2015-06-15 2020-03-18 Microsoft Technology Licensing, LLC Kalibrierung eines flugzeit (tof)-systems
DE102020003199A1 (de) 2020-05-28 2020-08-06 Daimler Ag Verfahren zur Erkennung von Bildartefakten, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Erkennungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Erkennungsvorrichtung
DE102020004989A1 (de) 2020-08-14 2020-11-05 Daimler Ag Verfahren zur Kalibrierung einer Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4356733B2 (ja) * 2006-11-09 2009-11-04 アイシン精機株式会社 車載用画像処理装置とその制御方法
DE102011109440A1 (de) * 2010-10-16 2012-04-19 Daimler Ag Verfahren zum Justieren und/oder Kalibrieren zumindest eines Scheinwerfers eines Fahrzeugs
DE102010051602A1 (de) * 2010-11-16 2012-05-16 Hans-Heinrich Götting jun. Verfahren zur Erfassung von Merkmalen in der Umgebung

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5034810A (en) 1989-12-07 1991-07-23 Kaman Aerospace Corporation Two wavelength in-situ imaging of solitary internal waves
DE10250705A1 (de) 2002-10-31 2004-05-13 Bayerische Motoren Werke Ag Verfahren und Vorrichtung zur Schattenkompensation in digitalen Bildern
EP3308193B1 (de) 2015-06-15 2020-03-18 Microsoft Technology Licensing, LLC Kalibrierung eines flugzeit (tof)-systems
US20180113200A1 (en) 2016-09-20 2018-04-26 Innoviz Technologies Ltd. Variable flux allocation within a lidar fov to improve detection in a region
DE102020003199A1 (de) 2020-05-28 2020-08-06 Daimler Ag Verfahren zur Erkennung von Bildartefakten, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Erkennungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Erkennungsvorrichtung
DE102020004989A1 (de) 2020-08-14 2020-11-05 Daimler Ag Verfahren zur Kalibrierung einer Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung

Also Published As

Publication number Publication date
WO2022106116A1 (de) 2022-05-27
CN116670541A (zh) 2023-08-29
DE102020007064A1 (de) 2022-05-19

Similar Documents

Publication Publication Date Title
EP2384295B2 (de) Kameraanordnung und verfahren zur erfassung einer fahrzeugumgebung
EP1053140B1 (de) Verfahren zum detektieren von auf einer lichtdurchlässigen scheibe befindlichen objekten sowie vorrichtung
DE102020004690A1 (de) Verfahren zur Erkennung von Objekten, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Erkennungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Erkennungsvorrichtung
WO2021239323A1 (de) Verfahren zur erkennung von bildartefakten, steuereinrichtung zur durchführung eines solchen verfahrens, erkennungsvorrichtung mit einer solchen steuereinrichtung und kraftfahrzeug mit einer solchen erkennungsvorrichtung
DE102008037266A1 (de) Reinigungssystem für Fahrzeugscheinwerfer
DE102020007064B4 (de) Verfahren zum Kalibrieren einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung
DE102015218500A1 (de) Beleuchtung und kamerabasierte Detektion von Regentropfen auf einer Scheibe
WO2022167343A1 (de) Verfahren zum kalibrieren einer gated-kamera, steuereinrichtung zur durchführung eines solchen verfahrens, kalibrierungsvorrichtung mit einer solchen steuereinrichtung und kraftfahrzeug mit einer solchen kalibrierungsvorrichtung
DE102020007061B4 (de) Verfahren zum Betreiben einer ersten Beleuchtungseinrichtung, einer zweiten Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Gated-Kamera-Vorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Gated-Kamera-Vorrichtung
WO2019110206A1 (de) Lidar-system zur umfelderfassung und verfahren zum betreiben eines lidar-systems
DE102020006273A1 (de) Verfahren zum Synchronisieren einer Beleuchtungseinrichtung, mindestens eines NIR-Sensors und einer Lidar-Einrichtung, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Erfassungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Erfassungsvorrichtung
DE102021004516B3 (de) Verfahren zum Betreiben einer Gated-Kamera, Steuervorrichtung zur Durchführung eines solchen Verfahrens, Gated-Kamera mit einer solchen Steuervorrichtung und Kraftfahrzeug mit einer solchen Gated-Kamera
WO2022042902A1 (de) Verfahren zur objektverfolgung von mindestens einem objekt, steuereinrichtung zur durchführung eines solchen verfahrens, objektverfolgungsvorrichtung mit einer solchen steuereinrichtung und kraftfahrzeug mit einer solchen objektverfolgungsvorrichtung
DE102020100122A1 (de) Vorrichtung und Verfahren zur Funktionsüberwachung von Lichtquellen
DE102020004989A1 (de) Verfahren zur Kalibrierung einer Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung
DE102020005762B4 (de) Verfahren zum Kalibrieren einer Beleuchtungseinrichtung und eines optischen Sensors, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kalibrierungsvorrichtung mit einer solchen Steuereinrichtung sowie Kraftfahrzeug mit einer solchen Kalibrierungsvorrichtung
DE102021004521B4 (de) Gated-Kamera-Vorrichtung und Kraftfahrzeug mit einer solchen Gated-Kamera-Vorrichtung
DE102019006911A1 (de) Vorrichtung und Verfahren zur automatisierten Erfassung eines Fahrtzielbereichs
DE102021003728B4 (de) Verfahren zum Betreiben einer Gated-Kamera, Steuervorrichtung zur Durchführung eines solchen Verfahrens, Gated-Kamera-Vorrichtung mit einer solchen Steuervorrichtung und Kraftfahrzeug mit einer solchen Gated-Kamera-Vorrichtung
DE102022107950A1 (de) Vorrichtung und Verfahren zur Umfelderfassung eines Fahrzeugs
DE102021001175A1 (de) Verfahren zum Betreiben einer Gated-Kamera, Steuereinrichtung zur Durchführung eines solchen Verfahrens, Kameravorrichtung mit einer solchen Steuereinrichtung und Kraftfahrzeug mit einer solchen Kameravorrichtung
DE102021003153A1 (de) Verfahren zum Betreiben einer Gated-Kamera, Steuervorrichtung zur Durchführung eines solchen Verfahrens, Schulterblickvorrichtung mit einer solchen Steuervorrichtung und Kraftfahrzeug mit einer solchen Schulterblickvorrichtung
DE102005037271A1 (de) Regensensor
DE102023004656A1 (de) Verfahren zur Kalibrierung einer an oder in einem Fahrzeug angeordneten Event-Kamera
DE102019003687A1 (de) Kraftfahrzeug-Scheinwerfer-Anordnung mit Degradationsüberwachung

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R081 Change of applicant/patentee

Owner name: DAIMLER TRUCK AG, DE

Free format text: FORMER OWNER: DAIMLER AG, STUTTGART, DE

R018 Grant decision by examination section/examining division
R020 Patent grant now final