DE102016013538A1 - Method for color classification of an object in the environment of a motor vehicle - Google Patents
Method for color classification of an object in the environment of a motor vehicle Download PDFInfo
- Publication number
- DE102016013538A1 DE102016013538A1 DE102016013538.7A DE102016013538A DE102016013538A1 DE 102016013538 A1 DE102016013538 A1 DE 102016013538A1 DE 102016013538 A DE102016013538 A DE 102016013538A DE 102016013538 A1 DE102016013538 A1 DE 102016013538A1
- Authority
- DE
- Germany
- Prior art keywords
- color
- light source
- data processing
- processing device
- motor vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 21
- 238000001514 detection method Methods 0.000 claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 31
- 230000006978 adaptation Effects 0.000 claims abstract description 6
- 238000001454 recorded image Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- BUHVIAUBTBOHAG-FOYDDCNASA-N (2r,3r,4s,5r)-2-[6-[[2-(3,5-dimethoxyphenyl)-2-(2-methylphenyl)ethyl]amino]purin-9-yl]-5-(hydroxymethyl)oxolane-3,4-diol Chemical compound COC1=CC(OC)=CC(C(CNC=2C=3N=CN(C=3N=CN=2)[C@H]2[C@@H]([C@H](O)[C@@H](CO)O2)O)C=2C(=CC=CC=2)C)=C1 BUHVIAUBTBOHAG-FOYDDCNASA-N 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
Abstract
Die Erfindung betrifft ein Verfahren zur Farbklassifizierung eines Objekts (20, 22) im Umfeld (12) eines Kraftwagens (10), mit den Schritten: – Erzeugen eines Bildes des Umfeldes (12) mit dem Objekt (20, 22) und mit einer Lichtquelle (16) mittels einer Detektionseinrichtung (28) des Kraftwagens (10); – Erfassen der Lichtquelle (16) innerhalb des Bildes mittels einer Datenverarbeitungseinrichtung (30); – Erfassen des Objekts (20, 22), welches durch die Lichtquelle (16) angestrahlt wird, mittels der Detektionseinrichtung (28), und Bestimmen der Farbe des Objekts (20, 22) innerhalb des Bildes mittels der Datenverarbeitungseinrichtung (30); – Bestimmen der Farbtemperatur der Lichtquelle (16) innerhalb des Bildes mittels der Datenverarbeitungseinrichtung (30); – Erzeugen eines Anpassungswerts in Abhängigkeit der Farbtemperatur der Lichtquelle (16) mittels der Datenverarbeitungseinrichtung (30); und – Anpassen der ermittelten Farbe des Objekts (20, 22) mittels des Anpassungswerts durch die Datenverarbeitungseinrichtung (30) zur Farbklassifizierung des Objekts (20, 22).The invention relates to a method for color classification of an object (20, 22) in the environment (12) of a motor vehicle (10), comprising the steps of: - generating an image of the environment (12) with the object (20, 22) and with a light source (16) by means of a detection device (28) of the motor vehicle (10); - Detecting the light source (16) within the image by means of a data processing device (30); - Detecting the object (20, 22), which is illuminated by the light source (16), by means of the detection device (28), and determining the color of the object (20, 22) within the image by means of the data processing device (30); - determining the color temperature of the light source (16) within the image by means of the data processing device (30); - generating an adjustment value as a function of the color temperature of the light source (16) by means of the data processing device (30); and - adjusting the determined color of the object (20, 22) by means of the adaptation value by the data processing device (30) for color classification of the object (20, 22).
Description
Die Erfindung betrifft ein Verfahren zur Farbklassifizierung eines Objekts im Umfeld eines Kraftwagens gemäß dem Oberbegriff des Patentanspruchs 1.The invention relates to a method for color classification of an object in the environment of a motor vehicle according to the preamble of patent claim 1.
Zur Bestimmung einer Farbe eines Objekts – zum Beispiel eines Bordsteins oder Verkehrszeichens – kann die Farbe durch eine sich in der Umgebung des Kraftwagens befindende Lichtquelle verfälscht werden. Dies kann dazu führen, dass die Farbklassifizierung fehlerbehaftet sein kann. Insbesondere aus der Optik ist es bereits dazu bekannt, dass beispielsweise Methoden wie der Weißabgleich, Tone Mapping oder High Dynamic Range zur Verbesserung der Farbklassifizierung eingesetzt werden.To determine a color of an object - for example, a curb or traffic sign - the color can be falsified by a located in the vicinity of the motor vehicle light source. This can cause the color classification to be error-prone. In particular from the field of optics it is already known that, for example, methods such as white balance, tone mapping or high dynamic range are used to improve the color classification.
Die
Aus der
Es ist Aufgabe der vorliegenden Erfindung, ein Verfahren der eingangs genannten Art zu schaffen, mittels welchem eine Falschklassifikationsrate der Farbe eines Objekts reduziert wird.It is an object of the present invention to provide a method of the type mentioned, by means of which a Falschklassifikationsrate the color of an object is reduced.
Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Patentanspruchs 1 gelöst. Vorteilhafte Ausgestaltungsformen sind in den Unteransprüchen angegeben.This object is achieved by a method having the features of patent claim 1. Advantageous embodiments are specified in the subclaims.
Um ein Verfahren zur Farbklassifizierung eines Objekts derart weiterzuentwickeln, dass eine Falschklassifikationsrate der Farbe reduziert wird, ist es erfindungsgemäß vorgesehen, dass mittels der Detektionseinrichtung das Objekt, welches durch die Lichtquelle angestrahlt erfasst wird, und die Farbe des Objekts innerhalb des Bildes mittels der Datenverarbeitungseinrichtung bestimmt wird. Die Datenverarbeitungseinrichtung bestimmt dabei die Farbtemperatur der Lichtquelle innerhalb des Bildes. In Abhängigkeit der Farbtemperatur der Lichtquelle wird mittels der Datenverarbeitungseinrichtung ein Anpassungswert erzeugt. Zur Farbklassifizierung des Objekts wird durch die Datenverarbeitungseinrichtung die ermittelte Farbe des Objekts mittels des Anpassungswerts angepasst.In order to further develop a method for color classification of an object such that a false classification rate of the color is reduced, it is provided according to the invention that the object detected by the light source and the color of the object within the image are determined by means of the data processing device by means of the detection device becomes. The data processing device determines the color temperature of the light source within the image. Depending on the color temperature of the light source, an adaptation value is generated by means of the data processing device. For color classification of the object, the determined color of the object is adjusted by means of the adaptation value by the data processing device.
Mit anderen Worten kann in dem aufgenommenen Bild die Lichtquelle und deren Farbtemperatur identifiziert werden. Die Farbtemperatur von zu bestimmenden farbigen und von der Lichtquelle angestrahlten Objekten kann mit der bestimmten Farbtemperatur korrigiert werden. Hierdurch wird eine korrekte Farbklassifikation des Objektes ermöglicht, insbesondere wird dadurch die Falschklassifikationsrate der Farbe des Objektes reduziert.In other words, the light source and its color temperature can be identified in the captured image. The color temperature of color to be determined and illuminated by the light source objects can be corrected with the specific color temperature. As a result, a correct color classification of the object is made possible, in particular by the Falschklassifikationsrate the color of the object is reduced.
Bei dem Objekt kann es sich insbesondere um Verkehrszeichen beziehungsweise Hindernisse im Straßenverkehr handeln. Insbesondere bei der Erkennung von Verkehrszeichen können diese innerhalb der Datenverarbeitungseinrichtung weiterverarbeitet werden, sodass beispielsweise ein autonomes Fahren des Kraftwagens mittels der Objekterkennung insbesondere der Farbklassifizierung des Objektes nutzbar ist.The object may in particular be traffic signs or obstacles in road traffic. In particular, in the detection of traffic signs they can be further processed within the data processing device, so that, for example, an autonomous driving of the motor vehicle by means of the object recognition in particular the color classification of the object is usable.
Gemäß einer vorteilhaften Ausgestaltungsform des Verfahrens kann die Farbtemperatur der Kraftwagenfarbe des Kraftwagens auf dem Bild mittels der Detektionseinrichtung erfasst und mittels der Datenverarbeitungseinrichtung bestimmt werden und mit einem in der Datenverarbeitungseinrichtung gespeicherten Farbwert der Kraftwagenfarbe verifiziert werden. Dies hat den Vorteil, dass, sollte beispielsweise keine Lichtquelle innerhalb des Bildes erfasst werden können, der gespeicherte Farbwert der Kraftwagenfarbe zur Erzeugung des Anpassungswertes in Abhängigkeit der Farbtemperatur der Kraftwagenfarbe mittels der Datenverarbeitungseinrichtung herangezogen werden kann. Somit kann ein redundantes Verfahren zur Reduzierung der Falschklassifikationsrate der Farbe bereitgestellt werden.According to an advantageous embodiment of the method, the color temperature of the motor vehicle color of the motor vehicle can be detected on the image by means of the detection device and determined by the data processing device and verified with a stored in the data processing device color value of the car color. This has the advantage that if, for example, no light source can be detected within the image, the stored color value of the motor vehicle color can be used to generate the adaptation value as a function of the color temperature of the motor vehicle color by means of the data processing device. Thus, a redundant method of reducing the misclassification rate of the color can be provided.
Es hat sich weiterhin als vorteilhaft erwiesen, wenn die bestimmte Farbtemperatur der Lichtquelle mit der Farbtemperatur der Kraftwagenfarbe verglichen und verifiziert wird, wobei die Farbtemperatur der Kraftwagenfarbe mittels der Detektionseinrichtung erfasst und mittels der Datenverarbeitungseinrichtung bestimmt wird. Bei dieser Ausgestaltungsform kann somit die Kraftwagenfarbe als Referenzwert für die Bestimmung der Farbtemperatur der Lichtquelle herangezogen werden. Somit kann die Farbtemperatur der Lichtquelle über die Kraftwagenfarbe verifiziert werden. Dies führt dazu, dass die Falschklassifikationsrate der Farbe für Objekte noch weiter reduziert werden kann.It has also proven to be advantageous if the specific color temperature of the light source is compared with the color temperature of the car color and verified, wherein the color temperature of the car color is detected by means of the detection device and determined by the data processing device. In this embodiment, therefore, the car color as Reference value for the determination of the color temperature of the light source are used. Thus, the color temperature of the light source can be verified via the car color. As a result, the false classification rate of the color for objects can be further reduced.
Es hat sich weiterhin als vorteilhaft erwiesen, wenn die Detektionseinrichtung als Kamera ausgebildet wird. Insbesondere mittels der Kamera kann dann beispielsweise das Bild auch auf eine Anzeigeeinrichtung des Kraftwagens angezeigt werden, sodass einem Insassen, insbesondere einem Fahrer des Kraftwagens, das Bild angezeigt werden kann. Des Weiteren handelt es sich bei Kameras bereits im Kraftwagenbau etablierte Detektionseinrichtungen, die insbesondere bauraumsparend und hochfunktionell als Detektionseinrichtung für das beschriebene Verfahren eingesetzt werden können. Eine Ausfallrate der Detektionseinrichtung kann damit verhindert werden, was zu einer höheren Reliabilität des Verfahrens führt.It has also proven to be advantageous if the detection device is designed as a camera. In particular, by means of the camera can then be displayed, for example, the image on a display device of the motor vehicle, so that an occupant, especially a driver of the motor vehicle, the image can be displayed. Furthermore, cameras already have established detection devices in motor vehicle construction, which in particular can be used in a space-saving and highly functional manner as a detection device for the described method. A failure rate of the detection device can thus be prevented, which leads to a higher reliability of the method.
Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus der nachfolgenden Beschreibung eines bevorzugten Ausführungsbeispiels sowie anhand der Zeichnung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in der einzigen Figur alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen.Further advantages, features and details of the invention will become apparent from the following description of a preferred embodiment and from the drawing. The features and feature combinations mentioned above in the description as well as the features and feature combinations mentioned below in the figure description and / or alone in the single figure can be used not only in the respectively indicated combination but also in other combinations or alone, without the frame to leave the invention.
Die einzige Figur zeigt eine schematische Ansicht eines Kraftwagens in einem Umfeld.The single figure shows a schematic view of a motor vehicle in an environment.
In der Zeichnung sind gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen.In the drawing, the same or functionally identical elements are provided with the same reference numerals.
Die Fig. zeigt einen Kraftwagen
In der Umgebung
Das erste Objekt
An dem Kraftwagen
Ein durch die Detektionseinrichtung
Es kann weiterhin vorgesehen sein, dass innerhalb des Erfassungsbereiches A der Detektionseinrichtung
Es kann weiterhin vorgesehen sein, dass das aufgenommene Bild der Detektionseinrichtung
Mittels des Verfahrens kann also in einem insbesondere aufgenommenen Kamerabild die Lichtquelle
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 1010
- Kraftwagenmotor vehicle
- 1212
- Umfeldenvironment
- 1414
- StraßeStreet
- 1616
- Lichtquellelight source
- 1818
- Lichtlight
- 2020
- erstes Objektfirst object
- 2222
- zweites Objektsecond object
- 2424
- erster Bereichfirst area
- 2626
- Zweiter BereichSecond area
- 2828
- Detektionseinrichtungdetection device
- 3030
- DatenverarbeitungseinrichtungData processing device
- 3232
- KraftwagenfarbeAutomobile color
- 3434
- Anzeigeeinrichtungdisplay
- 3636
- FahrerassistenzsystemDriver assistance system
- AA
- Erfassungsbereichdetection range
- A1A1
- Erfassungsgrenzedetection limit
- A2A2
- Erfassungsgrenzedetection limit
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- DE 102012108861 A1 [0003] DE 102012108861 A1 [0003]
- EP 1921967 A1 [0004] EP 1921967 A1 [0004]
Claims (4)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102016013538.7A DE102016013538A1 (en) | 2016-11-14 | 2016-11-14 | Method for color classification of an object in the environment of a motor vehicle |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102016013538.7A DE102016013538A1 (en) | 2016-11-14 | 2016-11-14 | Method for color classification of an object in the environment of a motor vehicle |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102016013538A1 true DE102016013538A1 (en) | 2017-05-18 |
Family
ID=58640041
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102016013538.7A Withdrawn DE102016013538A1 (en) | 2016-11-14 | 2016-11-14 | Method for color classification of an object in the environment of a motor vehicle |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102016013538A1 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1921967A1 (en) | 2005-08-18 | 2008-05-21 | Daewoo Electronics Corporation | Vacuum cleaner |
DE102012108861A1 (en) | 2012-09-20 | 2014-05-28 | Continental Teves Ag & Co. Ohg | Method for calibrating a color-resolving vehicle camera |
-
2016
- 2016-11-14 DE DE102016013538.7A patent/DE102016013538A1/en not_active Withdrawn
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1921967A1 (en) | 2005-08-18 | 2008-05-21 | Daewoo Electronics Corporation | Vacuum cleaner |
DE102012108861A1 (en) | 2012-09-20 | 2014-05-28 | Continental Teves Ag & Co. Ohg | Method for calibrating a color-resolving vehicle camera |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2179381B1 (en) | Method and apparatus for recognizing traffic signs | |
DE102017207960A1 (en) | METHOD AND DEVICE FOR LOCALLY DETECTED DETECTION FROM A VEHICLE-EXTINGUISHED OBJECT USING A SENSOR BUILT IN A VEHICLE | |
WO2014079852A1 (en) | Method and device for detecting variable-message signs | |
EP2150939A1 (en) | Method and device for determining the position of a road sign | |
DE102016218277A1 (en) | Method for functional testing of a driver assistance system and control unit and reference device for a driver assistance system | |
DE102007021580B4 (en) | Method and device for determining vehicle-relevant traffic signs | |
DE102015223500B4 (en) | Method and device for testing the functionality of an outside light device of a vehicle | |
EP2229770A1 (en) | Method and device for image detection for motor vehicles | |
DE102016101149A1 (en) | A method for detecting smoke in an environmental area of a motor vehicle with the aid of a camera of the motor vehicle, driver assistance system and motor vehicle | |
DE102006037600A1 (en) | Method for resolution based representation of ambience of motor vehicle for use in parking system, involves capturing ambience information from ambience of motor vehicle by image sensor | |
DE102021000323A1 (en) | Stationary traffic monitoring system for monitoring a detection area of a traffic area | |
DE102014207994A1 (en) | Device for detecting precipitation for a motor vehicle | |
DE102016013538A1 (en) | Method for color classification of an object in the environment of a motor vehicle | |
DE102015209550A1 (en) | METHOD AND DEVICE FOR DETECTING OBJECTS IN A VEHICLE ENVIRONMENT ENVIRONMENT | |
DE102014224903A1 (en) | Optical environment sensor for vehicles | |
DE102014209863A1 (en) | Method and device for operating a stereo camera for a vehicle and stereo camera for a vehicle | |
DE102007021579A1 (en) | Traffic sign i.e. circular traffic sign, classifying method, involves classifying object in dependence of classification process and/or classification result, by another different classification process for classification of traffic sign | |
DE102012104131A1 (en) | Method for automatically adjusting e.g. frame frequency of complementary metal oxide imager for image-based driver assistance system, involves adjusting control parameters of imager based on recognized dense periodic structures of light | |
DE102020215651A1 (en) | Vehicle vision system | |
DE102018205146A1 (en) | Test method for high-resolution headlamps using AI | |
DE102019128948A1 (en) | Determination of a traffic light status | |
EP2149107A1 (en) | Method and device for recognising road signs | |
EP3001383B1 (en) | Calibration of surround view systems | |
DE102012108860A1 (en) | Method for performing automatic color matching of a vehicle-mounted color camera | |
DE102019209061B3 (en) | Image processing device for improving night vision, method and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R230 | Request for early publication | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |