DE102019128401A1 - Method and control unit for operating a lighting unit as a light sensor - Google Patents
Method and control unit for operating a lighting unit as a light sensor Download PDFInfo
- Publication number
- DE102019128401A1 DE102019128401A1 DE102019128401.5A DE102019128401A DE102019128401A1 DE 102019128401 A1 DE102019128401 A1 DE 102019128401A1 DE 102019128401 A DE102019128401 A DE 102019128401A DE 102019128401 A1 DE102019128401 A1 DE 102019128401A1
- Authority
- DE
- Germany
- Prior art keywords
- lighting unit
- control unit
- camera
- lighting
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 21
- 238000005259 measurement Methods 0.000 claims abstract description 42
- 239000004065 semiconductor Substances 0.000 claims abstract description 10
- 238000012546 transfer Methods 0.000 claims description 3
- 230000006978 adaptation Effects 0.000 claims description 2
- 230000003993 interaction Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 230000001771 impaired effect Effects 0.000 description 4
- 238000009434 installation Methods 0.000 description 3
- 230000036626 alertness Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000002329 infrared spectrum Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q3/00—Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors
- B60Q3/70—Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors characterised by the purpose
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q3/00—Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors
- B60Q3/80—Circuits; Control arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
Abstract
Es wird eine Steuereinheit (101) zum Betrieb einer Halbleiter-basierten Beleuchtungseinheit (111) beschrieben. Die Steuereinheit (101) ist eingerichtet, die Beleuchtungseinheit (111) in einem ersten Zeitintervall (221) als Lichtquelle zu betreiben, und die Beleuchtungseinheit (111) in einem anderen zweiten Zeitintervall (222) als Lichtsensor zu betreiben, um Messdaten in Bezug auf eine Beleuchtungssituation in einem Umfeld der Beleuchtungseinheit (111) zu erfassen. Des Weiteren ist die Steuereinheit (101) eingerichtet, auf Basis der Messdaten zu bestimmen, ob sich ein Objekt in dem Umfeld der Beleuchtungseinheit (111) befindet.A control unit (101) for operating a semiconductor-based lighting unit (111) is described. The control unit (101) is set up to operate the lighting unit (111) as a light source in a first time interval (221) and to operate the lighting unit (111) as a light sensor in a different second time interval (222) in order to generate measurement data in relation to a Detect the lighting situation in an environment of the lighting unit (111). Furthermore, the control unit (101) is set up to determine on the basis of the measurement data whether an object is located in the vicinity of the lighting unit (111).
Description
Die Erfindung betrifft den kombinierten Betrieb einer Beleuchtungseinheit als Lichtquelle und als Lichtsensor. Insbesondere betrifft die Erfindung eine Steuereinheit und ein entsprechendes Verfahren, insbesondere für ein Fahrzeug, durch die in effizienter Weise erkannt werden kann, ob eine Beleuchtungseinheit durch ein Objekt verdeckt wird.The invention relates to the combined operation of a lighting unit as a light source and as a light sensor. In particular, the invention relates to a control unit and a corresponding method, in particular for a vehicle, by means of which it can be recognized in an efficient manner whether a lighting unit is being covered by an object.
Ein Fahrzeug kann eine Kamera umfassen, die eingerichtet ist, Sensordaten, insbesondere Bilddaten, in Bezug auf einen Innenraum des Fahrzeugs oder in Bezug auf ein Umfeld des Fahrzeugs zu erfassen. Beispielsweise kann ein Fahrzeug eine Kamera umfassen, die auf einen Nutzer, insbesondere auf einen Fahrer, des Fahrzeugs gerichtet ist, um Bilddaten in Bezug auf den Nutzer zu erfassen. Die Bilddaten können ausgewertet werden, um den Aufmerksamkeitszustand des Nutzers zu ermitteln und/oder um eine Geste des Nutzers (z.B. als Teil einer Benutzerschnittstelle des Fahrzeugs) zu erkennen.A vehicle can include a camera which is set up to record sensor data, in particular image data, in relation to an interior of the vehicle or in relation to the surroundings of the vehicle. For example, a vehicle can include a camera that is directed at a user, in particular at a driver, of the vehicle in order to capture image data relating to the user. The image data can be evaluated in order to determine the state of attentiveness of the user and / or to recognize a gesture by the user (e.g. as part of a user interface of the vehicle).
Die Kamera des Fahrzeugs kann in bestimmten Situationen zumindest teilweise durch ein Objekt verdeckt sein. Beispielsweise kann eine hinter einem Lenkrad des Fahrzeugs angeordnete Innenraumkamera zumindest teilweise durch eine Speiche des Lenkrads verdeckt sein. Die Verdeckung der Kamera kann die von der Kamera erfassten Bilddaten und als Folge daraus die auf Basis der Bilddaten bereitgestellte Funktion des Fahrzeugs beeinträchtigen.In certain situations, the camera of the vehicle can be at least partially covered by an object. For example, an interior camera arranged behind a steering wheel of the vehicle can be at least partially covered by a spoke of the steering wheel. The concealment of the camera can impair the image data captured by the camera and, as a result, the function of the vehicle provided on the basis of the image data.
Um die Verdeckung einer Kamera des Fahrzeugs zu detektieren, kann in der direkten Umgebung der Kamera ein dedizierter Annäherungs- bzw. Abstandssensor im Fahrzeug bereitgestellt werden, der eingerichtet ist, ein Objekt zu erkennen, dass sich dem Sensor und damit der Kamera nähert. Der Verbau eines zusätzlichen Annäherungs- bzw. Abstandssensors ist jedoch mit zusätzlichen Kosten und zusätzlichem Bauraumbedarf verbunden.In order to detect the obscuration of a camera in the vehicle, a dedicated proximity or distance sensor can be provided in the vehicle in the immediate vicinity of the camera, which is set up to detect an object that is approaching the sensor and thus the camera. The installation of an additional proximity or distance sensor is associated with additional costs and additional space requirements.
Das vorliegende Dokument befasst sich mit der technischen Aufgabe, ein Verfahren und eine Steuereinheit bereitzustellen, durch die in (kosten- und/oder bauraum-) effizienter Weise die zumindest teilweise Verdeckung einer Kamera und/oder einer Beleuchtungseinheit erkannt werden kann.The present document is concerned with the technical task of providing a method and a control unit by means of which the at least partial concealment of a camera and / or a lighting unit can be detected in an efficient manner (in terms of cost and / or installation space).
Die Aufgabe wird durch jeden der unabhängigen Ansprüche gelöst. Vorteilhafte Ausführungsformen werden u.a. in den abhängigen Ansprüchen beschrieben. Es wird darauf hingewiesen, dass zusätzliche Merkmale eines von einem unabhängigen Patentanspruch abhängigen Patentanspruchs ohne die Merkmale des unabhängigen Patentanspruchs oder nur in Kombination mit einer Teilmenge der Merkmale des unabhängigen Patentanspruchs eine eigene und von der Kombination sämtlicher Merkmale des unabhängigen Patentanspruchs unabhängige Erfindung bilden können, die zum Gegenstand eines unabhängigen Anspruchs, einer Teilungsanmeldung oder einer Nachanmeldung gemacht werden kann. Dies gilt in gleicher Weise für in der Beschreibung beschriebene technische Lehren, die eine von den Merkmalen der unabhängigen Patentansprüche unabhängige Erfindung bilden können.The problem is solved by each of the independent claims. Advantageous embodiments are described, inter alia, in the dependent claims. It is pointed out that additional features of a patent claim dependent on an independent patent claim without the features of the independent patent claim or only in combination with a subset of the features of the independent patent claim can form a separate invention independent of the combination of all features of the independent patent claim, which can be made the subject of an independent claim, a divisional application or a subsequent application. This applies equally to technical teachings described in the description, which can form an invention that is independent of the features of the independent patent claims.
Gemäß einem Aspekt wird eine Steuereinheit zum Betrieb einer Halbleiter-basierten Beleuchtungseinheit beschrieben. Die Beleuchtungseinheit kann ein oder mehrere lichtemittierende Dioden (LEDs) umfassen. Die Beleuchtungseinheit kann eingerichtet sein, Licht zu emittieren, um das Umfeld der Beleuchtungseinheit zu beleuchten. Das von der Beleuchtungseinheit emittierte Licht kann dabei ein Infrarot (IR) Spektrum aufweisen bzw. auf das IR Spektrum beschränkt sein. Insbesondere kann das von der Beleuchtungseinheit emittierte Licht für einen Menschen unsichtbar sein.According to one aspect, a control unit for operating a semiconductor-based lighting unit is described. The lighting unit can comprise one or more light emitting diodes (LEDs). The lighting unit can be set up to emit light in order to illuminate the surroundings of the lighting unit. The light emitted by the lighting unit can have an infrared (IR) spectrum or be limited to the IR spectrum. In particular, the light emitted by the lighting unit can be invisible to a person.
Die Beleuchtungseinheit kann im Umfeld einer Kamera angeordnet sein, die eingerichtet ist, Bilddaten in Bezug auf das Umfeld der Kamera zu erfassen. Dabei kann die Kamera ausgebildet sein, Bilddaten in dem spektralen Bereich des von der Beleuchtungseinheit emittierten Lichts zu erfassen. Die Beleuchtungseinheit kann somit dazu verwendet werden, die Lichtsituation zum Erfassen von Bilddaten durch die Kamera zu verbessern. Insbesondere kann die Beleuchtungseinheit eingerichtet sein, zumindest einen Teil des Erfassungsbereichs der Kamera zu beleuchten.The lighting unit can be arranged in the vicinity of a camera which is set up to capture image data in relation to the environment of the camera. The camera can be designed to capture image data in the spectral range of the light emitted by the lighting unit. The lighting unit can thus be used to improve the light situation for capturing image data by the camera. In particular, the lighting unit can be set up to illuminate at least part of the detection area of the camera.
Die Steuereinheit kann eingerichtet sein, die Beleuchtungseinheit in einem ersten Zeitintervall (insbesondere in einem ersten Pulsintervall aus einer Sequenz von Pulsintervallen) als Lichtquelle zu betreiben. Dabei kann die Beleuchtungseinheit als Ganzes als Lichtquelle betrieben werden. Insbesondere können als LEDs der Beleuchtungseinheit als Lichtquelle betrieben werden.The control unit can be set up to operate the lighting unit as a light source in a first time interval (in particular in a first pulse interval from a sequence of pulse intervals). The lighting unit can be operated as a light source as a whole. In particular, LEDs of the lighting unit can be operated as a light source.
Des Weiteren kann die Steuereinheit eingerichtet sein, die Beleuchtungseinheit in einem anderen zweiten Zeitintervall (insbesondere in einem zweiten Pulsintervall der Sequenz von Pulsintervallen) als Lichtsensor zu betreiben, um Messdaten in Bezug auf eine Beleuchtungssituation in dem Umfeld der Beleuchtungseinheit zu erfassen. Dabei kann die Beleuchtungseinheit als Ganzes, insbesondere können alle LEDs der Beleuchtungseinheit, als Lichtsensor betrieben werden. Alternativ können einzelne LEDs, d.h. nur ein Teil der LEDs, der Beleuchtungseinheit als Sensor betrieben werden.Furthermore, the control unit can be set up to operate the lighting unit in a different second time interval (in particular in a second pulse interval of the sequence of pulse intervals) as a light sensor in order to acquire measurement data relating to a lighting situation in the vicinity of the lighting unit. The lighting unit as a whole, in particular all LEDs of the lighting unit, can be operated as a light sensor. Alternatively, individual LEDs, i.e. only some of the LEDs, of the lighting unit can be operated as sensors.
Es kann somit ein zeitlich disjunkter Betrieb der (gesamten) Beleuchtungseinheit entweder als Lichtquelle oder als Lichtsensor erfolgen. So kann in (kosten- und/oder bauraum-) effizienter Weise die zumindest teilweise Verdeckung einer Beleuchtungseinheit und damit einer Kamera in der Umgebung der Beleuchtungseinheit erkannt werden. Insbesondere kann auf Basis der von der Beleuchtungseinheit bereitgestellten Messdaten bestimmt werden, ob sich ein Objekt in dem Umfeld der Beleuchtungseinheit befindet, und/oder ob die Kamera durch ein Objekt verdeckt wird oder nicht.The (entire) lighting unit can thus be operated at disjoint time either as a light source or as a light sensor. So can the at least partial concealment of a lighting unit and thus a camera in the vicinity of the lighting unit can be detected in a (cost- and / or space-) efficient manner. In particular, it can be determined on the basis of the measurement data provided by the lighting unit whether or not an object is located in the vicinity of the lighting unit and / or whether the camera is covered by an object.
Des Weiteren kann auf Basis der Messdaten Abstandsinformation in Bezug auf den Abstand des Objekts zu der Beleuchtungseinheit und/oder zu der Kamera ermittelt werden. Dabei kann ggf. davon ausgegangen werden, dass bei einem sinkenden Abstand des Objekts typischerweise die Lichtstärke des Lichts, das auf die Beleuchtungseinheit auftrifft, sinkt. Somit kann auf Basis der durch die Messdaten angezeigten Lichtstärke auf den Abstand des Objekts zu der Beleuchtungseinheit und/oder zu der Kamera geschlossen werden.Furthermore, distance information relating to the distance of the object to the lighting unit and / or to the camera can be determined on the basis of the measurement data. In this case, it can possibly be assumed that with a decreasing distance of the object, the luminous intensity of the light that strikes the lighting unit typically decreases. Thus, on the basis of the light intensity indicated by the measurement data, conclusions can be drawn about the distance of the object from the lighting unit and / or from the camera.
Die Betriebszeit der Beleuchtungseinheit kann in eine Sequenz von direkt aufeinanderfolgenden Pulsintervallen unterteilt werden. Dabei können die Pulsintervalle der Sequenz von Pulsintervallen mit einer Pulsfrequenz aufeinander folgen. Die Pulsfrequenz kann z.B. 30Hz oder mehr, oder 50Hz oder mehr sein.The operating time of the lighting unit can be divided into a sequence of directly successive pulse intervals. The pulse intervals of the sequence of pulse intervals can follow one another with a pulse frequency. The pulse frequency can be, for example, 30Hz or more, or 50Hz or more.
Die Steuereinheit kann eingerichtet sein, in einem (insbesondere in jedem) Pulsintervall der Sequenz von Pulsintervallen die Beleuchtungseinheit entweder als Lichtquelle oder als Lichtsensor zu betreiben. Es kann somit ein gepulster Betrieb der Beleuchtungseinheit erfolgen, um in effizienter und zuverlässiger Weise eine Aufteilung der verfügbaren Zeit für den Betrieb als Lichtquelle und für den Betrieb als Lichtsensor zu ermöglichen.The control unit can be set up to operate the lighting unit either as a light source or as a light sensor in one (in particular in each) pulse interval of the sequence of pulse intervals. The lighting unit can thus be operated in a pulsed manner in order to enable the time available for operation as a light source and for operation as a light sensor to be divided up in an efficient and reliable manner.
Die Steuereinheit kann eingerichtet sein, die Beleuchtungseinheit mit einer Sensorfrequenz als Lichtsensor zu betreiben. Die Beleuchtungseinheit kann dann ansonsten in den Pulsintervallen der Sequenz von Pulsintervallen als Lichtquelle betrieben werden. Dabei kann das Verhältnis aus Pulsfrequenz zu Sensorfrequenz eine ganze Zahl sein. In einem bevorzugten Beispiel ist die Pulsfrequenz um einen Faktor 10 oder mehr größer als die Sensorfrequenz. So kann sichergestellt werden, dass die Hauptfunktion der Beleuchtungseinheit, d.h. die Beleuchtung des Umfelds der Beleuchtungseinheit, nicht wesentlich von der zusätzlichen Sensorfunktion der Beleuchtungseinheit beeinträchtigt wird.The control unit can be set up to operate the lighting unit with a sensor frequency as a light sensor. The lighting unit can then otherwise be operated as a light source in the pulse intervals of the sequence of pulse intervals. The ratio of the pulse frequency to the sensor frequency can be an integer. In a preferred example, the pulse frequency is greater than the sensor frequency by a factor of 10 or more. It can thus be ensured that the main function of the lighting unit, i.e. the lighting of the surroundings of the lighting unit, is not significantly impaired by the additional sensor function of the lighting unit.
Wie bereits oben dargelegt, kann die Beleuchtungseinheit eine (ggf. genau eine) lichtemittierende Diode (insbesondere eine IR Diode) umfassen. Die Messdaten können dann einen Strom durch die Diode und/oder eine Spannung an der Diode anzeigen, die durch Licht bewirkt werden, das in dem zweiten Zeitintervall (insbesondere in dem zweiten Pulsintervall) auf die Diode trifft. Der Strom und/oder die Spannung können z.B. mit einem elektrischen Messwiderstand erfasst werden. Durch das Erfassen des Stroms und/oder der Spannung können in effizienter Weise präzise Messdaten in Bezug auf die Lichtsituation im Umfeld der Beleuchtungseinheit bereitgestellt werden.As already explained above, the lighting unit can comprise one (possibly precisely one) light-emitting diode (in particular an IR diode). The measurement data can then indicate a current through the diode and / or a voltage across the diode, which are caused by light which strikes the diode in the second time interval (in particular in the second pulse interval). The current and / or the voltage can be recorded with an electrical measuring resistor, for example. By detecting the current and / or the voltage, precise measurement data relating to the light situation in the vicinity of the lighting unit can be provided in an efficient manner.
Die Steuereinheit kann eingerichtet sein, einen durch die Messdaten angezeigten Lichtstärkewert des Lichts in der Umgebung der Beleuchtungseinheit mit einem Lichtstärke-Schwellenwert zu vergleichen. Der Lichtstärke-Schwellenwert kann dabei im Vorfeld (experimentell) ermittelt und gespeichert werden. Es kann dann in besonders präziser und zuverlässiger Weise in Abhängigkeit von dem Vergleich bestimmt werden, ob sich ein Objekt in dem Umfeld von der Beleuchtungseinheit und/oder vor der Kamera befindet oder nicht. Des Weiteren kann durch die Verwendung von unterschiedlichen Lichtstärke-Schwellenwerten für unterschiedliche Abstände, auf Basis des durch die Messdaten angezeigten Lichtstärkewerts (durch Auffinden des nächstliegenden Lichtstärke-Schwellenwertes) der Abstand eines Objektes zu der Beleuchtungseinheit und/oder zu der Kamera ermittelt werden.The control unit can be set up to compare a luminous intensity value of the light in the vicinity of the lighting unit, which is indicated by the measurement data, with a luminous intensity threshold value. The light intensity threshold value can be determined in advance (experimentally) and saved. It can then be determined in a particularly precise and reliable manner as a function of the comparison whether or not an object is located in the vicinity of the lighting unit and / or in front of the camera. Furthermore, by using different light intensity threshold values for different distances, based on the light intensity value displayed by the measurement data (by finding the closest light intensity threshold value), the distance of an object to the lighting unit and / or to the camera can be determined.
Die Steuereinheit kann eingerichtet sein, den Betrieb der Kamera zum Erfassen von Bilddaten mit dem Betrieb der Beleuchtungseinheit als Lichtquelle zeitlich zu synchronisieren. Insbesondere kann die Steuereinheit eingerichtet sein, die Kamera zu veranlassen, Bilddaten zu erfassen, wenn die Beleuchtungseinheit als Lichtquelle betrieben wird, und/oder die Kamera zu veranlassen, keine Bilddaten zu erfassen, wenn die Beleuchtungseinheit als Lichtsensor betrieben wird. So können die Güte der von der Kamera erfassten Bilddaten und damit die Güte einer auf den Bilddaten basierenden Funktion erhöht werden.The control unit can be set up to time-synchronize the operation of the camera for capturing image data with the operation of the lighting unit as a light source. In particular, the control unit can be set up to cause the camera to record image data when the lighting unit is operated as a light source and / or to cause the camera not to record any image data when the lighting unit is operated as a light sensor. In this way, the quality of the image data captured by the camera and thus the quality of a function based on the image data can be increased.
Die Steuereinheit kann eingerichtet sein, die von der Kamera erfassten Bilddaten für eine Funktion eines Fahrzeugs zu verwenden. Beispielsweise kann auf Basis der Bilddaten eine Überwachung der Aufmerksamkeit eines Fahrers des Fahrzeugs erfolgen. Die Kamera kann z.B. ausgebildet sein, Bilddaten in Bezug auf den Fahrer, insbesondere in Bezug auf das Gesicht des Fahrers, des Fahrzeugs zu erfassen. Die Steuereinheit kann eingerichtet sein, auf Basis der Bilddaten Aufmerksamkeitsinformation darüber zu ermitteln, wie aufmerksam der Fahrer in Bezug auf eine Fahraufgabe des Fahrzeugs ist. Des Weiteren kann die Steuereinheit eingerichtet sein, in Abhängigkeit von der Aufmerksamkeitsinformation eine Sicherheitsmaßnahme für den Betrieb des Fahrzeugs zu veranlassen. Beispielsweise kann der Fahrer des Fahrzeugs durch Ausgabe eines Hinweises veranlasst werden, eine Pause einzulegen, wenn die Aufmerksamkeitsinformation anzeigt, dass der Fahrer ermüdet ist.The control unit can be set up to use the image data captured by the camera for a function of a vehicle. For example, the attention of a driver of the vehicle can be monitored on the basis of the image data. The camera can be designed, for example, to capture image data relating to the driver, in particular relating to the driver's face, of the vehicle. The control unit can be set up to determine, on the basis of the image data, attention information about how attentive the driver is to a driving task of the vehicle. Furthermore, the control unit can be set up to initiate a safety measure for the operation of the vehicle as a function of the attention information. For example, the driver of the vehicle can output a message can be made to take a break when the alerting information indicates that the driver is tired.
Alternativ oder ergänzend kann die Steuereinheit eingerichtet sein, eine Maßnahme in Bezug auf die Funktion des Fahrzeugs zu veranlassen, wenn auf Basis der Messdaten bestimmt wird, dass sich ein Objekt vor der Kamera und/oder vor der Beleuchtungseinheit befindet. Wenn erkannt wird, dass sich ein Objekt vor der Kamera und/oder vor der Beleuchtungseinheit befindet, so ist dies ein Hinweis darauf, dass die Güte der von der Kamera erfassten Bilddaten und damit die Güte der Funktion des Fahrzeugs beeinträchtigt ist.Alternatively or additionally, the control unit can be set up to initiate a measure with regard to the function of the vehicle if it is determined on the basis of the measurement data that an object is located in front of the camera and / or in front of the lighting unit. If it is recognized that an object is in front of the camera and / or in front of the lighting unit, this is an indication that the quality of the image data captured by the camera and thus the quality of the function of the vehicle is impaired.
Eine beispielhafte Maßnahme kann die Ausgabe eines Hinweises in Bezug auf die verdeckte Kamera an einen Nutzer, insbesondere an den Fahrer, des Fahrzeugs sein, um zu bewirken, dass das verdeckende Objekt entfernt wird. Weitere beispielhafte Maßnahme sind: das Anpassen einer Funktion zum zumindest teilweise automatisierten Längs- und/oder Querführen des Fahrzeugs, und/oder das automatisierte Überführen des Fahrzeugs in einen sicheren Zustand. Somit können die Güte der Funktion des Fahrzeugs und/oder die Sicherheit des Fahrzeugs erhöht werden.An exemplary measure can be the output of a message relating to the concealed camera to a user, in particular to the driver, of the vehicle in order to cause the concealing object to be removed. Further exemplary measures are: the adaptation of a function for at least partially automated longitudinal and / or lateral guidance of the vehicle, and / or the automated transfer of the vehicle to a safe state. The quality of the function of the vehicle and / or the safety of the vehicle can thus be increased.
Es kann eine Mehrzahl von (ggf. baugleichen) Beleuchtungseinheiten in einem bestimmten Bereich (z.B. in einem bestimmten Bereich eines Fahrzeugs) bereitgestellt werden. Die oben beschriebene Beleuchtungseinheit kann dann eine erste Beleuchtungseinheit aus der Mehrzahl von Beleuchtungseinheiten sein. Des Weiteren kann die Mehrzahl von Beleuchtungseinheiten eine zweite Beleuchtungseinheit aufweisen.A plurality of (possibly structurally identical) lighting units can be provided in a certain area (e.g. in a certain area of a vehicle). The lighting unit described above can then be a first lighting unit from the plurality of lighting units. Furthermore, the plurality of lighting units can have a second lighting unit.
Die Steuereinheit kann eingerichtet sein, die erste Beleuchtungseinheit als Lichtsensor zu betreiben, während die andere zweite Beleuchtungseinheit, die sich in dem Umfeld der ersten Beleuchtungseinheit befindet, als Lichtquelle betrieben wird. Des Weiteren kann die Steuereinheit eingerichtet sein, auf Basis der Messdaten der ersten Beleuchtungseinheit zu bestimmen, ob sich ein Objekt zwischen der zweiten Beleuchtungseinheit und der ersten Beleuchtungseinheit befindet. So kann (ggf. auch ohne Verwendung eines vordefinierten Lichtstärke-Schwellenwertes) in besonders zuverlässiger Weise die Verdeckung einer Beleuchtungseinheit erkannt werden.The control unit can be set up to operate the first lighting unit as a light sensor, while the other second lighting unit, which is located in the vicinity of the first lighting unit, is operated as a light source. Furthermore, the control unit can be set up to determine, on the basis of the measurement data from the first lighting unit, whether an object is located between the second lighting unit and the first lighting unit. In this way, the obscuration of a lighting unit can be detected in a particularly reliable manner (possibly even without using a predefined light intensity threshold value).
In einem bevorzugten Beispiel ist die Kamera zwischen der ersten und der zweiten Beleuchtungseinheit angeordnet. Es kann dann in besonders zuverlässiger Weise auf Basis der Messdaten bestimmt werden, ob die Kamera durch ein Objekt verdeckt wird oder nicht.In a preferred example, the camera is arranged between the first and the second lighting unit. It can then be determined in a particularly reliable manner on the basis of the measurement data whether or not the camera is being covered by an object.
Die Steuereinheit kann eingerichtet sein, an dem ersten Zeitpunkt die erste Beleuchtungseinheit als Lichtsensor zu betreiben, während die zweite Beleuchtungseinheit als Lichtquelle betrieben wird. Des Weiteren kann die Steuereinheit eingerichtet sein, an einem nachfolgenden zweiten Zeitpunkt die zweite Beleuchtungseinheit als Lichtsensor zu betreiben, während die erste Beleuchtungseinheit als Lichtquelle betrieben wird. Die Funktionen der ersten und der zweiten Beleuchtungseinheit können somit (ggf. wiederholt und/oder alternierend) ausgetauscht werden. So kann in zuverlässiger Weise ein Abgleich der Messdaten der beiden Beleuchtungseinheiten erfolgen, so dass in besonders zuverlässiger Weise die Verdeckung einer Beleuchtungseinheit erkannt werden kann.The control unit can be set up to operate the first lighting unit as a light sensor at the first point in time, while the second lighting unit is operated as a light source. Furthermore, the control unit can be set up to operate the second lighting unit as a light sensor at a subsequent second point in time, while the first lighting unit is operated as a light source. The functions of the first and the second lighting unit can thus be exchanged (possibly repeatedly and / or alternately). In this way, the measurement data of the two lighting units can be compared in a reliable manner, so that the concealment of a lighting unit can be detected in a particularly reliable manner.
Gemäß einem weiteren Aspekt wird ein (Straßen-) Kraftfahrzeug (insbesondere ein Personenkraftwagen oder ein Lastkraftwagen oder ein Bus oder ein Motorrad) beschrieben, das eine Halbleiter-basierte Beleuchtungseinheit und die in diesem Dokument beschriebene Steuereinheit umfasst.According to a further aspect, a (road) motor vehicle (in particular a passenger car or a truck or a bus or a motorcycle) is described which comprises a semiconductor-based lighting unit and the control unit described in this document.
Des Weiteren kann das Fahrzeug eine Kamera umfassen, die eingerichtet ist, Bilddaten zu erfassen. Die Beleuchtungseinheit kann eingerichtet ist, das Umfeld und/oder zumindest einen Teil des Erfassungsbereichs der Kamera zu beleuchten, wenn die Beleuchtungseinheit als Lichtquelle betrieben wird. Des Weiteren kann die Steuereinheit eingerichtet ist, auf Basis der Messdaten, die von der Beleuchtungseinheit bereitgestellt werden, wenn die Beleuchtungseinheit als Lichtsensor betrieben wird, zu bestimmen, ob die Kamera durch ein Objekt verdeckt wird oder nicht.Furthermore, the vehicle can include a camera that is set up to capture image data. The lighting unit can be set up to illuminate the surroundings and / or at least a part of the detection area of the camera when the lighting unit is operated as a light source. Furthermore, the control unit can be set up to determine, on the basis of the measurement data provided by the lighting unit when the lighting unit is operated as a light sensor, whether or not the camera is covered by an object.
Gemäß einem weiteren Aspekt wird ein Verfahren zum Betrieb einer Halbleiter-basierten Beleuchtungseinheit (insbesondere einer LED bzw. einer Gruppe von LEDs) beschrieben. Das Verfahren umfasst das Betreiben der Beleuchtungseinheit in einem ersten Zeitintervall als Lichtquelle, und das Betreiben der Beleuchtungseinheit in einem anderen zweiten Zeitintervall als Lichtsensor, um Messdaten in Bezug auf eine Beleuchtungssituation in einem Umfeld der Beleuchtungseinheit zu erfassen. Des Weiteren umfasst das Verfahren das Bestimmen, auf Basis der Messdaten, ob sich ein Objekt in dem Umfeld der Beleuchtungseinheit befindet oder nicht.According to a further aspect, a method for operating a semiconductor-based lighting unit (in particular an LED or a group of LEDs) is described. The method comprises operating the lighting unit as a light source in a first time interval and operating the lighting unit as a light sensor in a different second time interval in order to acquire measurement data relating to a lighting situation in an area surrounding the lighting unit. Furthermore, the method includes determining, on the basis of the measurement data, whether or not an object is located in the vicinity of the lighting unit.
Gemäß einem weiteren Aspekt wird ein Software (SW) Programm beschrieben. Das SW Programm kann eingerichtet werden, um auf einem Prozessor (z.B. auf einem Steuergerät eines Fahrzeugs) ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen.According to a further aspect, a software (SW) program is described. The SW program can be set up to be executed on a processor (e.g. on a control unit of a vehicle) and thereby to execute the method described in this document.
Gemäß einem weiteren Aspekt wird ein Speichermedium beschrieben. Das Speichermedium kann ein SW Programm umfassen, welches eingerichtet ist, um auf einem Prozessor ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen.According to a further aspect, a storage medium is described. The storage medium may comprise a SW program which is set up to be executed on a processor and thereby to execute the method described in this document.
Es ist zu beachten, dass die in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systeme sowohl alleine, als auch in Kombination mit anderen in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systemen verwendet werden können. Des Weiteren können jegliche Aspekte der in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systemen in vielfältiger Weise miteinander kombiniert werden. Insbesondere können die Merkmale der Ansprüche in vielfältiger Weise miteinander kombiniert werden.It should be noted that the methods, devices and systems described in this document can be used both alone and in combination with other methods, devices and systems described in this document. Furthermore, any aspects of the methods, devices and systems described in this document can be combined with one another in diverse ways. In particular, the features of the claims can be combined with one another in diverse ways.
Im Weiteren wird die Erfindung anhand von Ausführungsbeispielen näher beschrieben. Dabei zeigen
-
1a beispielhafte Komponenten eines Fahrzeugs; -
1b ein beispielhaftes Interaktionsmodul für ein Fahrzeug; -
2a eine beispielhafte Beleuchtungseinheit; -
2b eine beispielhafte Sequenz von Pulsintervallen; und -
3 ein Ablaufdiagramm eines beispielhaften Verfahrens zum Betrieb einer Beleuchtungseinheit.
-
1a exemplary components of a vehicle; -
1b an exemplary interaction module for a vehicle; -
2a an exemplary lighting unit; -
2 B an exemplary sequence of pulse intervals; and -
3 a flowchart of an exemplary method for operating a lighting unit.
Wie eingangs dargelegt, befasst sich das vorliegende Dokument damit, in effizienter und zuverlässiger Weise zu erkennen, ob eine Kamera, insbesondere eine Kamera in einem Fahrzeug, durch ein Objekt verdeckt wird. In diesem Zusammenhang zeigt
Das Fahrzeug
Des Weiteren kann das Interaktionsmodul
Das Interaktionsmodul
Eine Beleuchtungseinheit
Andererseits kann die LED
Eine Beleuchtungseinheit
Die Beleuchtungseinheit
Die Beleuchtungseinheit
Die Sensorfrequenz kann dabei ein Bruchteil der Pulsfrequenz sein. Beispielsweise kann die Sensorfrequenz 1Hz oder weniger sein. Insbesondere können die Sensorfrequenz derart niedrig und/oder die Pulsfrequenz derart hoch sein, dass die aufgrund der Sensorfunktion fehlenden Lichtpulse
Das Erfassen von Bilddaten durch die Kamera
Eine Beleuchtungseinheit
Beispielsweise kann eine durch die Messdaten angezeigte Lichtstärke mit einem Lichtstärke-Schwellenwert verglichen werden. Der Lichtstärke-Schwellenwert kann z.B. die Lichtstärke anzeigen, die vorliegen sollte, wenn die Beleuchtungseinheit
Bei Verwendung von zumindest zwei Beleuchtungseinheiten
Der Betrieb der beiden Beleuchtungseinheiten
Ein und dieselbe IR LED
Das Konzept kann z.B. in Zusammenhang mit einer Kamera
Das Verfahren
Das Verfahren
Durch die in diesem Dokument beschriebenen Maßnahmen kann die Verdeckung und/oder die Annäherung an eine Kamera
Die vorliegende Erfindung ist nicht auf die gezeigten Ausführungsbeispiele beschränkt. Insbesondere ist zu beachten, dass die Beschreibung und die Figuren nur das Prinzip der vorgeschlagenen Verfahren, Vorrichtungen und Systeme veranschaulichen sollen.The present invention is not restricted to the exemplary embodiments shown. In particular, it should be noted that the description and the figures are only intended to illustrate the principle of the proposed methods, devices and systems.
Claims (16)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102019128401.5A DE102019128401A1 (en) | 2019-10-21 | 2019-10-21 | Method and control unit for operating a lighting unit as a light sensor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102019128401.5A DE102019128401A1 (en) | 2019-10-21 | 2019-10-21 | Method and control unit for operating a lighting unit as a light sensor |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102019128401A1 true DE102019128401A1 (en) | 2021-04-22 |
Family
ID=75268528
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102019128401.5A Pending DE102019128401A1 (en) | 2019-10-21 | 2019-10-21 | Method and control unit for operating a lighting unit as a light sensor |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102019128401A1 (en) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005042082A1 (en) * | 2005-09-05 | 2007-03-08 | Austriamicrosystems Ag | Circuit arrangement e.g. for motor vehicle dashboard, has measuring device coupled to LED for measurement of ambience brightness |
DE102008032345A1 (en) * | 2008-07-09 | 2010-01-14 | Hella Kgaa Hueck & Co. | Headlight for use in motor vehicle, has LED source corresponding to responding sensor element, which is switched-off or dimmed down in dimmed beam position for forming dimmed region, where traffic object is located in region |
DE102011016772A1 (en) * | 2011-04-12 | 2012-10-18 | Daimler Ag | Method and device for monitoring at least one vehicle occupant and method for operating at least one assistance device |
DE102014204386A1 (en) * | 2014-03-11 | 2015-09-17 | Bayerische Motoren Werke Aktiengesellschaft | Method for controlling a lighting device in a motor vehicle |
DE102015218886A1 (en) * | 2015-09-30 | 2017-03-30 | Robert Bosch Gmbh | Device for illuminating a driver of a motor vehicle for a driver observation system |
DE102016207355A1 (en) * | 2016-04-29 | 2017-11-02 | Ford Global Technologies, Llc | LED arrangement and method for ambient light-dependent brightness control of LEDs |
DE102017119916A1 (en) * | 2017-08-30 | 2019-02-28 | Automotive Lighting Reutlingen Gmbh | Device for influencing a light cone emitted by a luminaire with at least one light source and interior light of a motor vehicle |
-
2019
- 2019-10-21 DE DE102019128401.5A patent/DE102019128401A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005042082A1 (en) * | 2005-09-05 | 2007-03-08 | Austriamicrosystems Ag | Circuit arrangement e.g. for motor vehicle dashboard, has measuring device coupled to LED for measurement of ambience brightness |
DE102008032345A1 (en) * | 2008-07-09 | 2010-01-14 | Hella Kgaa Hueck & Co. | Headlight for use in motor vehicle, has LED source corresponding to responding sensor element, which is switched-off or dimmed down in dimmed beam position for forming dimmed region, where traffic object is located in region |
DE102011016772A1 (en) * | 2011-04-12 | 2012-10-18 | Daimler Ag | Method and device for monitoring at least one vehicle occupant and method for operating at least one assistance device |
DE102014204386A1 (en) * | 2014-03-11 | 2015-09-17 | Bayerische Motoren Werke Aktiengesellschaft | Method for controlling a lighting device in a motor vehicle |
DE102015218886A1 (en) * | 2015-09-30 | 2017-03-30 | Robert Bosch Gmbh | Device for illuminating a driver of a motor vehicle for a driver observation system |
DE102016207355A1 (en) * | 2016-04-29 | 2017-11-02 | Ford Global Technologies, Llc | LED arrangement and method for ambient light-dependent brightness control of LEDs |
DE102017119916A1 (en) * | 2017-08-30 | 2019-02-28 | Automotive Lighting Reutlingen Gmbh | Device for influencing a light cone emitted by a luminaire with at least one light source and interior light of a motor vehicle |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2443586A1 (en) | Method and device for detecting a rear vehicle light | |
EP3099547A1 (en) | Assembly module | |
DE102013020946A1 (en) | Method for operating a rear view camera system of a motor vehicle after detection of a flasher, rear view camera system and motor vehicle | |
DE102014105297A1 (en) | Method for detecting an object in a surrounding area of a motor vehicle by means of a camera system of the motor vehicle, camera system and motor vehicle | |
EP2710573A1 (en) | Method and apparatus for identifying a possible collision object | |
DE102009014437B4 (en) | Object Recognition System and Method | |
WO2019063341A1 (en) | Method for detecting a roadway condition of a roadway for a motor vehicle, driver assistance system and motor vehicle | |
DE102011085002A1 (en) | Method for avoiding collision or reducing damage due to collision during accident of leading vehicle with following vehicle, involves determining small distance or high relative speed between vehicles by driver assistance system | |
WO2017182115A1 (en) | Method and device for controlling the headlights of a vehicle | |
EP2050619B1 (en) | Method and device for calculating an operating parameter of at least one illuminant of a light source for a motor vehicle | |
DE102005020950B4 (en) | Active night vision system with fully synchronized light source and receiver | |
DE102013210097A1 (en) | Driver information device | |
DE102012109390A1 (en) | Monitoring device for safety-critical unit, particularly conveyer of conveyer system, has first video sensor unit, which is adapted to generate first image as representation formed from line by first monitoring area of safety-critical unit | |
DE102019128401A1 (en) | Method and control unit for operating a lighting unit as a light sensor | |
DE102016006847B4 (en) | Method for operating a lighting device of a motor vehicle, device for a motor vehicle and motor vehicle | |
DE102017010495A1 (en) | Method and device for projecting at least one piece of information onto a projection surface | |
DE102019126812A1 (en) | Device and method for recognizing a pulsed light source | |
WO2021001258A1 (en) | Apparatus and method for determining image data of the eyes, eye positions or a line of sight of a vehicle user | |
DE102017207729A1 (en) | Method and device for detecting an object that is not located in a detection area of a camera | |
DE102020007760A1 (en) | Method for classification of road markings and vehicle | |
EP3583540A1 (en) | System and method for detecting the fatigue of a vehicle driver | |
EP3465533A2 (en) | Linearly polarized light emission by a vehicle headlight, for use in a camera-based driver assistance system | |
DE102012000949A1 (en) | Method for warning a driver of a motor vehicle before a risk of collision with help of a collision warning system, involves recording a temporal sequence of images of surrounding areas of motor vehicle by camera of collision warning system | |
DE102011108865A1 (en) | Method for operating driver assistance system of vehicle, involves timely validating detected release event before activation of assistance function in dependence of momentary vehicle position and/or direction of travel of vehicle | |
DE102020104959A1 (en) | Method and device for the automated detection of impairment of light emission in a lighting device for a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R163 | Identified publications notified | ||
R081 | Change of applicant/patentee |
Owner name: CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, DE Free format text: FORMER OWNERS: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, 80809 MUENCHEN, DE; CONTINENTAL AUTOMOTIVE GMBH, 30165 HANNOVER, DE Owner name: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, DE Free format text: FORMER OWNERS: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, 80809 MUENCHEN, DE; CONTINENTAL AUTOMOTIVE GMBH, 30165 HANNOVER, DE |
|
R081 | Change of applicant/patentee |
Owner name: CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, DE Free format text: FORMER OWNERS: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, 80809 MUENCHEN, DE; CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, 30165 HANNOVER, DE Owner name: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, DE Free format text: FORMER OWNERS: BAYERISCHE MOTOREN WERKE AKTIENGESELLSCHAFT, 80809 MUENCHEN, DE; CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, 30165 HANNOVER, DE |