WO2019158361A1 - Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug - Google Patents

Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug Download PDF

Info

Publication number
WO2019158361A1
WO2019158361A1 PCT/EP2019/052188 EP2019052188W WO2019158361A1 WO 2019158361 A1 WO2019158361 A1 WO 2019158361A1 EP 2019052188 W EP2019052188 W EP 2019052188W WO 2019158361 A1 WO2019158361 A1 WO 2019158361A1
Authority
WO
WIPO (PCT)
Prior art keywords
camera
image
information
motor vehicle
monitor
Prior art date
Application number
PCT/EP2019/052188
Other languages
English (en)
French (fr)
Inventor
Tobias Schmalriede
Wolfgang Endress
Thomas Smits
Thomas Garschke
Original Assignee
Continental Automotive Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive Gmbh filed Critical Continental Automotive Gmbh
Publication of WO2019158361A1 publication Critical patent/WO2019158361A1/de

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
    • B60R2300/406—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components using wireless transmission
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
    • B60R2300/605—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint the adjustment being automatic
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images

Definitions

  • the invention relates to a method for operating a camera monitor system for a motor vehicle.
  • the invention further relates to a device which is designed to carry out the method.
  • Motor vehicles may include a camera and a monitor that displays images of the camera to a user of the motor vehicle.
  • a camera and a monitor that displays images of the camera to a user of the motor vehicle.
  • mirror replacement systems are known in which the viewing areas of conventional exterior mirrors are imaged by means of the camera and the monitor.
  • the invention is characterized by a method for operating a camera monitor system for a motor vehicle and by a corresponding device that is designed to carry out the method.
  • the camera monitor system has a camera.
  • the camera is set up to take a picture of a section of an environment of the motor vehicle.
  • the camera monitor system has a monitor for displaying images of the camera.
  • An image of the camera is provided.
  • Environmental data is received.
  • the environment data contain at least one presentation-relevant information.
  • the picture becomes a second one Image transformed depending on the environment data.
  • the second picture is displayed on the monitor.
  • the monitor does not display the original image of the camera as provided by the camera. Before displaying on the monitor, the image of the camera is transformed to the second image. The image is converted based on the environmental data before it is displayed as a second image on the monitor.
  • influences from the environment when displaying the environment on the monitor to be.
  • errors in the display on the monitor can be compensated, which can occur conventionally due to environmental influences. For example, it is possible to compensate for overexposure and / or underexposure, depending on the environmental data, which contain, for example, information about light sources in the environment of the motor vehicle.
  • the environment data comprises in-vehicle data.
  • the environmental data on the vehicle external data.
  • Vehicle-internal data for example, a location of the
  • Motor vehicle a state of a lighting system of the motor vehicle, a state of the motor vehicle as a Ge speed and / or other information that are provided by the motor vehicle itself and / or concern elements of the motor vehicle.
  • Vehicle external data are, for example, the time of day, in formations about the weather and / or information about an object to be displayed and / or other information that is provided from outside the motor vehicle and / or elements outside the motor vehicle.
  • the environmental data is received from an on-vehicle information system.
  • An on-board control unit or several on-board control units provide the environmental data available, for example, if headlights and / or direction indicator of the motor vehicle are active or not.
  • the environment data is received from an off-vehicle information system.
  • the environmental data is received by another motor vehicle that is in the vicinity of the motor vehicle.
  • the environment data is provided by information providers, such as weather services and / or map providers.
  • the environment data is received by means of the wireless connection.
  • the environment data is received by means of a wireless connection from the vehicle-external information system.
  • the environment data is received by the wireless connection directly from an object to be displayed.
  • the environment data is received by the wireless connection from an information provider.
  • the image is provided by means of an HDR (High Dynamic Range Camera) camera.
  • HDR High Dynamic Range Camera
  • a high dynamic range of the environment is mapped. Due to the conversion of the image of the HDR camera depending on the environment data, a reliable representation of the second image on the monitor is possible, even if the monitor has a lower dynamic range.
  • providing the image comprises applying default presets to the image prior to transforming the image. For example, historical presentation-relevant information is used to adapt the image of the camera to known environmental influences. This allows efficient implementation of the method.
  • the camera monitor system has a power supply independent of the motor vehicle.
  • the camera-monitor system and the device have a common independent from the power system of the motor vehicle power supply.
  • Figure 1 is a schematic representation of a motor vehicle with a camera-monitor system according to an embodiment
  • FIG. 2 shows a method sequence according to an embodiment.
  • Figure 1 shows a schematic representation of a motor vehicle 101 according to an embodiment with a Kame
  • the camera monitor system 100 is, for example, a mirror replacement system.
  • the Kame ra monitor system 100 is used, for example, to represent an environment that is not displayed with conventional exterior mirrors and / or rear-view mirror of the motor vehicle 101.
  • the camera monitor system 100 includes a camera 102. It is also possible to provide a plurality of cameras 102 on different sides of the motor vehicle 101. The cameras 102 each serve to receive a portion of an environment 105.
  • the camera monitor system 100 includes a monitor 104. It is also possible to provide a plurality of monitors 104. In operation, an image of the camera 102 is displayed on the monitor 104. Also the Images of multiple cameras 102 can be displayed on the monitor 104.
  • a camera 103 is optionally provided.
  • the camera 103 is not for providing image data for display on the monitor 104.
  • the camera 102 is in particular a so-called HDR camera (high dynamic range camera).
  • the camera 102 is configured to record the environment 105 at a high dynamic range.
  • a device 110 is provided, which is signal-coupled with the camera 102 and the monitor 104.
  • the device 110 is configured to control both the camera 102 and the monitor 104.
  • the device 110 is a control device or a part of a control device of the motor vehicle 101.
  • the device 110 is in particular signal-coupled with other systems that provide information for image processing.
  • An on-vehicle information system 106 is provided.
  • the in-vehicle information system 106 is signal technically coupled to the device 110.
  • the vehicle's own information system provides environmental data available that has presentation-relevant information.
  • the on-vehicle information system 106 has a controller area network (CAN).
  • the in-vehicle information system has a Local Interconnect Network (LIN).
  • CAN controller area network
  • LIN Local Interconnect Network
  • Other systems are also possible that provide information about the vehicle.
  • a navigation system a digital map (eHorizon), information about the type of vehicle and vehicle condition, example, whether a trailer on the motor vehicle 101 is present or not, a gyrosensor and / or acceleration sensor or other information transmitter.
  • the camera 103 may also be part of the vehicle's own information system 106 and provide a characteristic and / or geometry of the environment ahead of the motor vehicle 101, for example the road.
  • a motor vehicle external information system 107 also serves to provide environmental data.
  • the data of the vehicle-external information system 107 are transmitted to the motor vehicle 101 by means of a wireless connection 108.
  • the wireless connection 108 is a radio connection, in particular WLAN, UMTS, Bluetooth, NFC or another wireless connection.
  • the wireless connection 108 is a radio connection, in particular WLAN, UMTS, Bluetooth, NFC or another wireless connection.
  • the wireless connection 108 is a radio connection, in particular WLAN, UMTS, Bluetooth, NFC or another wireless connection.
  • Wireless connection 108 is a C2C, a C2X and / or a C2I connection. Also a connection to an Internet data provider is possible.
  • the motor vehicle external information system 107 provides in particular data that can not be directly provided by the motor vehicle 101 itself, for example information about the weather, about an object 120 to be displayed, or other data external to the vehicle.
  • the on-vehicle information system 107 has a drone that provides information about a more widely spaced environment 105.
  • the drone is an unmanned aircraft or vehicle having sensors to detect the vehicle's external data. Satellite information, in particular from low-lying satellites, can also be provided via the vehicle-external information system 107.
  • FIG. 2 shows a method sequence according to an exemplary embodiment.
  • step 201 first of all historical data is provided which may influence the representation of an image of the camera 102 on the monitor 104.
  • step 202 an image of a camera 102 or a plurality of images of the camera 102 is received.
  • step 203 the environment data of the information systems 106 and 107 are received.
  • step 204 the image from step 202 is transformed in response to the environmental data from step 203.
  • step 205 the transformed image is displayed on the monitor 104.
  • a necessary transformation is determined, for example, by means of a conversion table (look-up table) or other information.
  • the object 120 is a variable-traffic light-emitting traffic sign in which the sign is represented by means of light-emitting diodes.
  • the environmental data includes information about the frequency at which the LEDs emit light.
  • the environmental data include information about a lighting system 109 of the motor vehicle 101.
  • the surrounding data includes, for example, information about which lights of the lighting system 109 are active. Al ternativ or additionally, for example, information about the type of lights are provided, for example, whether LED lights are used or halogen lights and, for example, which type.
  • influences of the lighting system 109 on the environment may be compensated.
  • the environmental data includes information information about the status of a direction indicator and its frequency.
  • the device 110 is aware of when the object 120 is irradiated by the direction indicator and when not. Accordingly, the transformation of the image occurs in step 204.
  • the environmental data includes information about the state of the road on which the motor vehicle 101 is located. For example, an inclination of the road and / or optical properties, such as reflection properties of the road, may be taken into account. For example, when the power vehicle 101 travels to a steep slope of the road with the lighting system 109 turned on, and the road is reflective due to rain, reflections of the lighting system 109 in the image of the camera 102 may be compensated.
  • the optional pretreatment of the image in step 201 allows, for example, an optimization of the exposure of the image sensor of the camera and / or a gamma correction and / or a tone value correction.
  • the method can be used, for example, to reduce the intensity of a headlight on the display on the monitor 104.
  • the image of the camera 102 is locally transformed in an area in which the front headlight meets the ground.
  • the area in the image is in example as a function of the gyro sensor and / or the Be admirungssensors, GPS information and / or other information, such as a digital map, he averages.
  • information about the type of headlight is taken into account, for example, whether an LED headlamp and / or a halogen headlight or another headlamp is used. Due to the environmental data, it is thus possible to optimize the effects of the headlight on the surroundings 105 and in particular the image of the camera 102. In particular, it is also possible to distinguish which influences come from the front headlights and which of other light sources, for example, from a low sun.
  • the yellow influences in a region of the direction indicators it is known which lane of the direction indicator emits to the surroundings 104.
  • the frequency of the direction indicator is known, for example by means of CAN.
  • the motor vehicle own information system 106 knows which areas are illuminated by the brake light and with which color location. Accordingly, a transformation can take place in these areas in order to Minimize radiation when it has been detected that a user of the motor vehicle 101 brakes.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Studio Devices (AREA)

Abstract

Ein Verfahren zum Betreiben eines Kamera-Monitor-Systems (100) für ein Kraftfahrzeug(101), bei dem das Kamera-Monitor-System (100) eine Kamera (102, 103) und einen Monitor (104) aufweist zum Darstellen von Bildern der Kamera (102, 103), umfasst: - Bereitstellen eines Bildes der Kamera (102), - Empfangen von Umgebungsdaten, die eine darstellungsrelevante Information enthalten, - Transformieren des Bildes zu einem zweiten Bild in Abhängigkeit von den Umgebungsdaten, - Darstellen des zweiten Bildes auf dem Monitor (104).

Description

Beschreibung
Verfahren und Vorrichtung zum Betreiben eines Kamera- Monitor-Systems für ein Kraftfahrzeug
Die Erfindung betrifft ein Verfahren zum Betreiben eines Ka- mera-Monitor-Systems für ein Kraftfahrzeug. Die Erfindung betrifft weiterhin eine Vorrichtung, die dazu ausgebildet ist, das Verfahren durchzuführen.
Kraftfahrzeuge können eine Kamera aufweisen und einen Monitor, der Bilder der Kamera für einen Nutzer des Kraftfahrzeugs darstellt. Beispielsweise sind Spiegelersatzsysteme bekannt, bei denen mittels der Kamera und des Monitors die Sichtbereiche von herkömmlichen Außenspiegeln abgebildet werden.
Es ist wünschenswert, ein Verfahren zum Betreiben eines Ka- mera-Monitor-Systems für ein Kraftfahrzeug anzugeben, das eine zuverlässige Darstellung eines Bildes der Kamera ermöglicht. Es ist weiterhin wünschenswert, eine Vorrichtung zum Betreiben eines Kamera-Monitor-Systems anzugeben, die ein zuverlässiges Darstellen des Bildes der Kamera auf dem Monitor ermöglicht.
Die Erfindung zeichnet sich aus durch ein Verfahren zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug sowie durch eine korrespondierende Vorrichtung, die dazu ausgebildet ist, das Verfahren auszuführen.
Gemäß zumindest einer Ausführungsform weist das Kame- ra-Monitor-System eine Kamera auf. Die Kamera ist insbesondere eingerichtet, ein Bild eines Ausschnitts einer Umgebung des Kraftfahrzeugs aufzunehmen. Das Kamera-Monitor-System weist einen Monitor auf zum Darstellen von Bildern der Kamera.
Ein Bild der Kamera wird bereitgestellt. Umgebungsdaten werden empfangen. Die Umgebungsdaten enthalten mindestens eine dar stellungsrelevante Information. Das Bild wird zu einem zweiten Bild transformiert in Abhängigkeit von den Umgebungsdaten. Das zweite Bild wird auf dem Monitor dargestellt.
Auf dem Monitor wird nicht das ursprüngliche Bild der Kamera dargestellt, wie es von der Kamera bereitgestellt wird. Vor dem Darstellen auf dem Monitor wird das Bild der Kamera zu dem zweiten Bild transformiert. Das Bild wird in Abhängigkeit von den Umgebungsdaten umgewandelt, bevor es als zweites Bild auf dem Monitor dargestellt wird. Somit ist es möglich, Einflüsse aus der Umgebung beim Darstellen der Umgebung auf dem Monitor zu be rücksichtigen. Somit können Fehler in der Darstellung auf dem Monitor ausgeglichen werden, die herkömmlich aufgrund von Umgebungseinflüssen auftreten können. Beispielsweise ist es möglich, eine Überbelichtung und/oder eine Unterbelichtung auszugleichen, abhängig von den Umgebungsdaten, die bei spielsweise eine Information über Lichtquellen in der Umgebung des Kraftfahrzeugs enthalten.
Gemäß zumindest einer Ausführungsform weisen die Umgebungsdaten fahrzeuginterne Daten auf. Alternativ oder zusätzlich weisen die Umgebungsdaten fahrzeugexterne Daten auf.
Fahrzeuginterne Daten sind beispielsweise eine Lage des
Kraftfahrzeugs, ein Zustand eines Beleuchtungssystems des Kraftfahrzeugs, ein Zustand des Kraftfahrzeugs wie eine Ge schwindigkeit und/oder andere Informationen, die von dem Kraftfahrzeug selbst zur Verfügung gestellt werden und/oder Elemente des Kraftfahrzeugs betreffen.
Fahrzeugexterne Daten sind beispielsweise die Tageszeit, In formationen über das Wetter und/oder Informationen über ein darzustellendes Objekt und/oder weitere Informationen, die von außerhalb des Kraftfahrzeugs zur Verfügung gestellt werden und/oder Elemente außerhalb des Kraftfahrzeugs betreffen.
Gemäß zumindest einer Ausführungsform werden die Umgebungsdaten von einem kraftfahrzeugeigenen Informationssystem empfangen. Ein fahrzeugeigenes Steuergerät oder mehrere fahrzeugeigene Steuergeräte stellen die Umgebungsdaten zur Verfügung, bei spielsweise ob Scheinwerfer und/oder Fahrtrichtungsanzeiger des Kraftfahrzeugs aktiv sind oder nicht.
Gemäß zumindest einer Ausführungsform werden die Umgebungsdaten von einem kraftfahrzeugexternen Informationssystem empfangen. Beispielsweise werden die Umgebungsdaten von einem weiteren Kraftfahrzeug empfangen, das sich in der Umgebung des Kraft fahrzeugs aufhält. Beispielsweise werden die Umgebungsdaten von Informationsanbietern bereitgestellt, wie von Wetterdiensten und/oder Kartenanbietern.
Gemäß zumindest einer Ausführungsform werden die Umgebungsdaten mittels der Drahtlosverbindung empfangen. Beispielsweise werden die Umgebungsdaten mittels einer Drahtlosverbindung von dem kraftfahrzeugexternen Informationssystem empfangen. Bei spielsweise werden die Umgebungsdaten mittels der Drahtlos verbindung direkt von einem darzustellenden Objekt empfangen. Alternativ oder zusätzlich werden die Umgebungsdaten mittels der Drahtlosverbindung von einem Informationsanbieter empfangen.
Gemäß zumindest einer Ausführungsform wird das Bild mittels einer HDR-Kamera (High Dynamic Range Kamera; Kamera mit hohem Dy namikumfang) bereitgestellt. Somit ist ein hoher Dynamikumfang der Umgebung abbildbar. Aufgrund der Umwandlung des Bildes der HDR-Kamera in Abhängigkeit von den Umgebungsdaten ist ein zuverlässiges Darstellen des zweiten Bildes auf dem Monitor möglich, auch wenn der Monitor einen geringeren Dynamikumfang aufweist .
Gemäß zumindest einer Ausführungsform umfasst das Bereitstellen des Bildes ein Anwenden von vorgegebenen Voreinstellungen für das Bild vor dem Transformieren des Bildes. Beispielsweise werden historische darstellungsrelevante Informationen verwendet, um das Bild der Kamera an bekannte Umgebungseinflüsse anzupassen. Dies ermöglicht eine effiziente Durchführung des Verfahrens. Gemäß zumindest einer Ausführungsform weist das Kame- ra-Monitor-System eine vom Kraftfahrzeug unabhängige Strom versorgung auf. Beispielsweise weisen das Kamera-Monitor-System und die Vorrichtung eine gemeinsame vom Stromversorgungssystem des Kraftfahrzeugs unabhängige eigene Stromversorgung auf.
Weitere Vorteile, Merkmale und Weiterbildungen ergeben sich aus den nachfolgenden, in Verbindung mit den Figuren erläuterten Beispielen .
Es zeigen:
Figur 1 eine schematische Darstellung eines Kraftfahrzeugs mit einem Kamera-Monitor-System gemäß einem Ausführungsbeispiel, und
Figur 2 einen Verfahrensablauf gemäß einem Ausführungsbeispiel.
Figur 1 zeigt eine schematische Darstellung eines Kraftfahrzeugs 101 gemäß einem Ausführungsbeispiel mit einem Kame
ra-Monitor-System 100.
Das Kamera-Monitor-System 100 ist beispielsweise ein Spie- gelersatzsystem. Alternativ oder zusätzlich dient das Kame ra-Monitor-System 100 beispielsweise zum Darstellen einer Umgebung, die mit herkömmlichen Außenspiegeln und/oder Rück spiegeln des Kraftfahrzeugs 101 nicht darstellbar ist.
Das Kamera-Monitor-System 100 weist eine Kamera 102 auf. Es können auch mehrere Kameras 102 an unterschiedlichen Seiten des Kraftfahrzeugs 101 vorgesehen sein. Die Kameras 102 dienen jeweils dazu, einen Teil einer Umgebung 105 aufzunehmen.
Das Kamera-Monitor-System 100 weist einen Monitor 104 auf. Es können auch mehrere Monitore 104 vorgesehen sein. Im Betrieb wird ein Bild der Kamera 102 auf dem Monitor 104 dargestellt. Auch die Bilder mehrerer Kameras 102 können auf dem Monitor 104 dar gestellt werden.
Eine Kamera 103 ist optional vorgesehen. Die Kamera 103 dient beispielsweise nicht dazu, Bilddaten zum Darstellen auf dem Monitor 104 zur Verfügung zu stellen. Beispielsweise dienen die Bilder der Kamera 103 als Eingangssignal für ein Fahrzeugas sistenzsystem, beispielsweise zur Fahrspurerkennung oder zur Abstandsmessung .
Die Kamera 102 ist insbesondere eine sogenannte HDR-Kamera (High Dynamic Range Kamera) . Somit ist die Kamera 102 ausgebildet, die Umgebung 105 mit einem hohen Dynamikumfang aufzuzeichnen.
Eine Vorrichtung 110 ist vorgesehen, die mit der Kamera 102 und dem Monitor 104 signaltechnisch gekoppelt ist. Die Vorrichtung 110 ist eingerichtet, sowohl die Kamera 102 als auch den Monitor 104 zu steuern. Beispielsweise ist die Vorrichtung 110 ein Steuergerät oder ein Teil eines Steuergeräts des Kraftfahrzeugs 101. Die Vorrichtung 110 ist insbesondere mit weiteren Systemen signaltechnisch gekoppelt, die Informationen zur Bildbear beitung bereitstellen .
Ein kraftfahrzeugeigenes Informationssystem 106 ist vorgesehen. Das kraftfahrzeugeigene Informationssystem 106 ist signal technisch mit der Vorrichtung 110 gekoppelt. Das kraftfahr zeugeigene Informationssystem stellt Umgebungsdaten zur Ver fügung, die darstellungsrelevante Informationen aufweisen.
Beispielsweise weist das fahrzeugeigene Informationssystem 106 ein Controller Area Network (CAN) auf . Alternativ oder zusätzlich weist das fahrzeugeigene Informationssystem ein Local Inter- connect Network (LIN) auf. Auch weitere Systeme sind möglich, die Informationen über das Fahrzeug bereitstellen . Beispielsweise ein Navigationssystem, eine digitale Karte (eHorizon) , eine Information über Fahrzeugart und Fahrzeugzustand, beispiels weise ob ein Anhänger am Kraftfahrzeug 101 vorhanden ist oder nicht, ein Gyrosensor und/oder Beschleunigungssensor oder weitere Informationsgeber. Auch die Kamera 103 kann Teil des fahrzeugeigenen Informationssystems 106 sein und eine Cha rakteristik und/oder Geometrie der Umgebung vor dem Kraft fahrzeug 101, beispielsweise der Straße, bereitstellen .
Ein kraftfahrzeugexternes Informationssystem 107 dient eben falls zum Bereitstellen von Umgebungsdaten. Beispielsweise werden die Daten des fahrzeugexternen Informationssystems 107 mittels einer Drahtlosverbindung 108 an das Kraftfahrzeug 101 übermittelt. Beispielsweise ist die Drahtlosverbindung 108 eine Funkverbindung, insbesondere WLAN, UMTS, Bluetooth, NFC oder eine andere Drahtlosverbindung. Beispielsweise ist die
Drahtlosverbindung 108 eine C2C-, eine C2X- und/oder eine C2I-Verbindung. Auch eine Verbindung zu einem Internetdaten anbieter ist möglich.
Das kraftfahrzeugexterne Informationssystem 107 stellt ins besondere Daten zur Verfügung, die nicht das Kraftfahrzeug 101 unmittelbar selbst bereitstellen kann, beispielsweise Infor mationen über das Wetter, über ein darzustellendes Objekt 120, oder andere fahrzeugexterne Daten. Beispielsweise weist das kraftfahrzeugexterne Informationssystem 107 eine Drohne auf, die Informationen über eine weiter beabstandete Umgebung 105 be reitstellt. Die Drohne ist insbesondere ein unbemanntes Flugzeug oder Fahrzeug, das eine Sensorik aufweist, um die fahrzeug externen Daten zu ermitteln. Auch Satelliteninformationen, insbesondere von tieffliegenden Satelliten, können über das kraftfahrzeugexterne Informationssystem 107 bereitgestellt werden .
Figur 2 zeigt einen Verfahrensablauf gemäß einem Ausfüh rungsbeispiel .
Im optionalen Schritt 201 werden zunächst historische Daten bereitgestellt, die Einfluss auf die Darstellung eines Bildes der Kamera 102 auf den Monitor 104 haben können. In Schritt 202 wird ein Bild einer Kamera 102 beziehungsweise eine Vielzahl von Bildern der Kamera 102 empfangen.
In Schritt 203 werden die Umgebungsdaten der Informationssysteme 106 und 107 empfangen.
In Schritt 204 wird das Bild aus Schritt 202 in Abhängigkeit der Umgebungsdaten aus Schritt 203 transformiert.
In Schritt 205 wird das transformierte Bild auf dem Monitor 104 dargestellt .
In Schritt 204 wird beispielsweise mittels einer Umset zungstabelle (Look-up-Tabelle) oder anderen Informationen eine notwendige Transformation ermittelt.
Beispielsweise ist das Objekt 120 ein lichtemittierendes Wechselverkehrszeichen, bei dem das Zeichen mittels licht emittierenden Dioden dargestellt wird. Die Umgebungsdaten umfassen beispielsweise Informationen über die Frequenz, mit der die LEDs Licht emittieren. Somit ist es möglich, bei der Darstellung des Bildes der Kamera 102 dieses Flackern des Verkehrszeichens verlässlich auszugleichen, ohne dass das Flackern negative Einflüsse auf die Darstellung anderer Objekte hat .
Beispielsweise umfassen die Umgebungsdaten Informationen über ein Beleuchtungssystem 109 des Kraftfahrzeugs 101. Die Umge bungsdaten umfassen beispielsweise Informationen darüber, welche Leuchten des Beleuchtungssystem 109 aktiv sind. Al ternativ oder zusätzlich werden beispielsweise Informationen über die Art der Leuchten zur Verfügung gestellt, beispielsweise ob LED-Leuchten verwendet werden oder Halogenleuchten und beispielsweise welcher Typ. Somit können in Schritt 204 Einflüsse des Beleuchtungssystems 109 auf die Umgebung ausgeglichen werden. Beispielsweise umfassen die Umgebungsdaten Informa- tionen über den Zustand eines Fahrtrichtungsanzeigers und seine Frequenz. Somit ist der Vorrichtung 110 bekannt, wann das Objekt 120 von dem Fahrtrichtungsanzeiger bestrahlt wird und wann nicht. Entsprechend erfolgt die Transformation des Bildes in Schritt 204.
Beispielsweise umfassen die Umgebungsdaten Informationen über den Zustand der Straße, auf der sich das Kraftfahrzeug 101 befindet. Beispielsweise kann eine Neigung der Straße und/oder optische Eigenschaften, wie beispielsweise Reflexionseigen schaften der Straße, berücksichtigt werden. Wenn das Kraft fahrzeug 101 beispielsweise mit eingeschaltetem Beleuch tungssystem 109 auf einen steilen Anstieg der Straße zufährt, und die Straße aufgrund von Regen reflektierend ist, können Re flexionen des Beleuchtungssystems 109 im Bild der Kamera 102 ausgeglichen werden.
Die optionale Vorbehandlung des Bildes in Schritt 201 ermöglicht beispielsweise eine Optimierung der Belichtung des Bildsensors der Kamera und/oder eine Gammakorrektur und/oder ein Ton wertkorrektur .
Das Verfahren kann beispielsweise dazu eingesetzt werden, um die Intensität eines Frontscheinwerfers auf der Darstellung auf dem Monitor 104 zu reduzieren. Hierzu wird in einem Bereich, in dem der Frontscheinwerfer auf den Grund trifft, das Bild der Kamera 102 lokal transformiert. Der Bereich in dem Bild wird bei spielsweise in Abhängigkeit des Gyrosensors und/oder des Be schleunigungssensors, GPS-Informationen und/oder weiteren Informationen, beispielsweise aus einer digitalen Karte, er mittelt .
Alternativ oder zusätzlich wird eine Information über die Art des Frontscheinwerfers berücksichtigt, beispielsweise ob ein LED-Scheinwerfer und/oder ein Halogenscheinwerfer oder ein anderer Scheinwerfer eingesetzt ist. Aufgrund der Umgebungsdaten ist es somit möglich, die Einflüsse des Frontscheinwerfers auf die Umgebung 105 und insbesondere das Bild der Kamera 102 zu optimieren. Insbesondere ist es auch möglich zu unterscheiden, welche Einflüsse von dem Front scheinwerfer stammen und welche von anderen Lichtquellen, beispielsweise von einer tiefstehenden Sonne.
Alternativ oder zusätzlich ist es möglich, die Informationen der Kamera 103 zum Transformieren des Bildes zu berücksichtigen. Dadurch ist es beispielsweise möglich, eine Struktur und/oder Charakteristik der Straße vor dem Kraftfahrzeug 101 zu ermitteln . Daraus lassen sich weitere Einflussfaktoren für das Trans formieren des Bildes vor dem Darstellen auf dem Monitor 104 ermitteln .
Alternativ oder zusätzlich ist es möglich, die gelben Einflüsse in einer Region der Fahrtrichtungsanzeiger zu reduzieren. Zum einen ist bekannt, welche Fahrborte der Fahrtrichtungsanzeiger auf die Umgebung 104 emittiert. Zum anderen ist die Frequenz des Fahrtrichtungsanzeigers bekannt, beispielsweise mittels CAN.
Beim Kraftfahrzeug 101 mit einem Anhänger ist es beispielsweise möglich, die Einflüsse der Beleuchtung des Anhängers zu re duzieren .
Beispielsweise ist es möglich, die negativen Einflüsse von Reflexionen auf dem Anhänger im dargestellten Bild auf dem Monitor 104 zu reduzieren. Hierzu werden beispielsweise In formationen über eine Länge des Anhängers, eine Geschwindigkeit und/oder einen Lenkwinkel berücksichtigt.
Alternativ oder zusätzlich ist es möglich, den Einfluss von Bremslichtern im dargestellten Bild auf dem Monitor 104 zu reduzieren. Dem kraftfahrzeugeigenen Informationssystem 106 ist bekannt, welche Bereiche von dem Bremslicht angestrahlt werden und mit welchem Farbort. Entsprechend kann in diesen Bereichen eine Transformation erfolgen, um die Einflüsse der roten An- Strahlung zu minimieren, wenn erkannt wurde, dass ein Nutzer des Kraftfahrzeugs 101 bremst.
Aufgrund der Umgebungsdaten der Informationssysteme 106 und 107 ist es somit möglich, die automatischen Bildbearbeitungsvorgänge der Kameras 102 in Abhängigkeit von weiteren Informationen zu optimieren. Somit kann die Genauigkeit der Bildkorrekturen erhöht werden. Zum Transformieren des Bildes werden Informa tionen verwendet, die der Kamera 102 selbst nicht zur Verfügung stehen. Somit können Darstellungsfehler auf dem Monitor 104 verringert werden. Die Darstellung der Umgebung 105 ist mit einem hohen Dynamikumfang möglich.

Claims

Patentansprüche
1. Verfahren zum Betreiben eines Kamera-Monitor-Systems (100) für ein Kraftfahrzeug (101), bei dem das Kamera-Monitor-System (100) eine Kamera (102, 103) und einen Monitor (104) aufweist zum Darstellen von Bildern der Kamera (102, 103), umfassend:
- Bereitstellen eines Bildes der Kamera (102),
- Empfangen von Umgebungsdaten, die eine darstellungsrelevante Information enthalten,
- Transformieren des Bildes zu einem zweiten Bild in Abhängigkeit von den Umgebungsdaten,
- Darstellen des zweiten Bildes auf dem Monitor (104) .
2. Verfahren nach Anspruch 1, bei dem die Umgebungsdaten fahrzeuginterne Daten aufweisen.
3. Verfahren nach Anspruch 1 oder 2, bei dem die Umgebungsdaten fahrzeugexterne Daten aufweisen.
4. Verfahren nach einem der Ansprüche 1 bis 3, bei dem die Umgebungsdaten mindestens eines umfassen aus:
- eine Information über die Tageszeit,
- eine Information über die Lage des Kraftfahrzeugs (101),
- eine Information über das Wetter,
- eine Information über einen Zustand Beleuchtungssystem (109) des Kraftfahrzeugs (101),
- eine Information über einen Zustand des Kraftfahrzeugs (101), und
- eine Information über ein darzustellendes Objekt (120) .
5. Verfahren nach einem der Ansprüche 1 bis 4, umfassend:
- Empfangen der Umgebungsdaten von einem kraftfahrzeugeigenen Informationssystem (106).
6. Verfahren nach einem der Ansprüche 1 bis 5, umfassend:
- Empfangen der Umgebungsdaten von einem kraftfahrzeugexternen Informationssystem (107).
7. Verfahren nach einem der Ansprüche 1 bis 6, umfassend:
- Empfangen der Umgebungsdaten mittels einer Drahtlosverbindung (108) .
8. Verfahren nach einem der Ansprüche 1 bis 7, umfassend:
- Bereitstellen des Bildes mittels einer HDR Kamera (102) .
9. Verfahren nach einem der Ansprüche 1 bis 8, bei dem das Bereitstellen des Bildes umfasst:
- Anwenden von vorgegebenen Voreinstellungen für das Bild vor dem Transformieren des Bildes.
10. Vorrichtung für ein Kraftfahrzeug, die ausgebildet ist, ein Verfahren nach einem der Ansprüche 1 bis 9 auszuführen.
PCT/EP2019/052188 2018-02-15 2019-01-30 Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug WO2019158361A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102018202319.0 2018-02-15
DE102018202319.0A DE102018202319A1 (de) 2018-02-15 2018-02-15 Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug

Publications (1)

Publication Number Publication Date
WO2019158361A1 true WO2019158361A1 (de) 2019-08-22

Family

ID=65268934

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2019/052188 WO2019158361A1 (de) 2018-02-15 2019-01-30 Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug

Country Status (2)

Country Link
DE (1) DE102018202319A1 (de)
WO (1) WO2019158361A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115297257A (zh) * 2020-06-28 2022-11-04 杭州海康威视数字技术股份有限公司 一种多路视频流获取方法、装置及设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050190260A1 (en) * 2004-02-26 2005-09-01 Yiling Xie A wide-angled image display system for automobiles
US20120050024A1 (en) * 2010-08-25 2012-03-01 Delphi Technologies, Inc. Vehicle camera system
EP2947874A1 (de) * 2014-05-23 2015-11-25 LG Electronics Inc. Stereokamera und fahrerassistenzvorrichtung und fahrzeug damit
US20160152185A1 (en) * 2014-11-27 2016-06-02 Elektrobit Automotive Gmbh Wearable apparatus for use by a driver of a motor vehicle
US20170050569A1 (en) * 2014-05-26 2017-02-23 Panasonic Intellectual Property Management Co., Ltd. In-vehicle display apparatus, control method for controlling same, and non-transitory computer readable medium recording program
US20170088053A1 (en) * 2015-09-25 2017-03-30 Ford Global Technologies, Llc Active detection and enhanced visualization of upcoming vehicles

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013012810A1 (de) * 2013-08-01 2015-02-05 Connaught Electronics Ltd. Verfahren zum Aktivieren und Deaktivieren einer Bildkorrekturfunktion, Kamerasystem und Kraftfahrzeug
DE102015209784A1 (de) * 2014-05-29 2015-12-03 Ford Global Technologies, Llc System und Verfahren zum Ändern einer Bilderfassungseinstellung
GB2548598B (en) * 2016-03-23 2019-11-06 Jaguar Land Rover Ltd Display system and method
DE102016112483A1 (de) * 2016-07-07 2018-01-11 Connaught Electronics Ltd. Verfahren zum Reduzieren von Störsignalen in einem Draufsichtbild, das ein Kraftfahrzeug und einen Umgebungsbereich des Kraftfahrzeugs zeigt, Fahrerassistenzsystem sowie Kraftfahrzeug

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050190260A1 (en) * 2004-02-26 2005-09-01 Yiling Xie A wide-angled image display system for automobiles
US20120050024A1 (en) * 2010-08-25 2012-03-01 Delphi Technologies, Inc. Vehicle camera system
EP2947874A1 (de) * 2014-05-23 2015-11-25 LG Electronics Inc. Stereokamera und fahrerassistenzvorrichtung und fahrzeug damit
US20170050569A1 (en) * 2014-05-26 2017-02-23 Panasonic Intellectual Property Management Co., Ltd. In-vehicle display apparatus, control method for controlling same, and non-transitory computer readable medium recording program
US20160152185A1 (en) * 2014-11-27 2016-06-02 Elektrobit Automotive Gmbh Wearable apparatus for use by a driver of a motor vehicle
US20170088053A1 (en) * 2015-09-25 2017-03-30 Ford Global Technologies, Llc Active detection and enhanced visualization of upcoming vehicles

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115297257A (zh) * 2020-06-28 2022-11-04 杭州海康威视数字技术股份有限公司 一种多路视频流获取方法、装置及设备
CN115297257B (zh) * 2020-06-28 2024-02-02 杭州海康威视数字技术股份有限公司 一种多路视频流获取方法、装置及设备

Also Published As

Publication number Publication date
DE102018202319A1 (de) 2019-08-22

Similar Documents

Publication Publication Date Title
EP2578996B1 (de) Fahrzeugsystem zur Navigation und/oder Fahrerassistenz
EP3830523B1 (de) Verfahren zur aktualisierung einer umgebungskarte, vorrichtung für die fahrzeugseitige durchführung von verfahrensschritten des verfahrens, fahrzeug, vorrichtung für die zentralrechnerseitige durchführung von verfahrensschritten des verfahrens sowie computerlesbares speichermedium
DE102013200862B4 (de) Optimaler Blickort an Anzeige für gesamte Frontscheibe
DE102019115783A1 (de) Kollisionsverhinderung für ein verbundenes fahrzeug auf der grundlage eines digitalen verhaltenszwillings
DE102017115318A1 (de) Heads-Up-Anzeige zum Beobachten von Fahrzeugwahrnehmungsaktivität
DE102009016580A1 (de) Datenverarbeitungssystem und Verfahren zum Bereitstellen mindestens einer Fahrerassistenzfunktion
DE102018120677A1 (de) Systeme und Verfahren für die Gleichmäßigkeitsanpassung der Fahrzeuggeschwindigkeitssteuerung
DE102014216954A1 (de) System und Verfahren für das Bereitstellen von Wetterinformation
DE102017223431B4 (de) Verfahren zum Assistieren eines Fahrers eines Kraftfahrzeugs bei einem Überholvorgang; Kraftfahrzeug; sowie System
CN103988240A (zh) 车辆数据传输和显示系统
DE102008029112A1 (de) Geschwindigkeitssteuerung für ein Fahrzeug
DE102019106798A1 (de) Fahrzeugsysteme und verfahren zum teilen von videos eines zielfahrzeugs bei überholereignissen
DE102011084084A1 (de) Anzeigeverfahren und Anzeigesystem für ein Fahrzeug
DE102018132487A1 (de) Fahrzeugüberwachung von infrastrukturbeleuchtung
WO2019158361A1 (de) Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug
DE102013212010A1 (de) Verfahren und Vorrichtung zum Unterstützen einer Engstellendurchfahrung für ein Fahrzeug, Verfahren zum Unterstützen einer Engstellendurchfahrung für ein Nachfolgefahrzeug und Verfahren zum Verwalten von Vermessungsinformationen zum Unterstützen von Engstellendurchfahrungen von Fahrzeugen
DE102012213132B4 (de) Verfahren und Vorrichtung zur Fusion von Kameraaufnahmen von zumindest zwei Fahrzeugen
DE102008018163A1 (de) Fahrerassistenz mit Pufferspeicher
WO2020193442A1 (de) Verfahren, vorrichtung, server und system zur kalibrierung mindestens einer kamera eines fahrerassistenzsystems
DE102008039833A1 (de) Übermittlung des Zustands eines Bremslichts per DSRC
DE102018200099A1 (de) Verfahren zur Darstellung von Informationen an einer Außenseite eines Fahrzeugs
DE10338764B4 (de) Verfahren und System zur Aktivierung eines Nachtsichtsystems
CN110550036B (zh) 驾驶辅助设备、车辆及驾驶辅助系统
DE102020201357A1 (de) Verfahren und Vorrichtung zur Durchführung einer optischen Drahtloskommunikation mit einem Fortbewegungsmittel
DE112019004125T5 (de) Bildverarbeitungsgerät, bildverarbeitungsverfahren und programm

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19702576

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19702576

Country of ref document: EP

Kind code of ref document: A1