DE102018209192B3 - Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug - Google Patents

Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug Download PDF

Info

Publication number
DE102018209192B3
DE102018209192B3 DE102018209192.7A DE102018209192A DE102018209192B3 DE 102018209192 B3 DE102018209192 B3 DE 102018209192B3 DE 102018209192 A DE102018209192 A DE 102018209192A DE 102018209192 B3 DE102018209192 B3 DE 102018209192B3
Authority
DE
Germany
Prior art keywords
camera
image
motor vehicle
monitor
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102018209192.7A
Other languages
English (en)
Inventor
Andreas Weinlich
Thomas Smits
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Continental Automotive Technologies GmbH
Original Assignee
Continental Automotive GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive GmbH filed Critical Continental Automotive GmbH
Priority to JP2020564369A priority Critical patent/JP2021524105A/ja
Priority to PCT/EP2019/061624 priority patent/WO2019219440A1/de
Priority to KR1020207032890A priority patent/KR102468922B1/ko
Priority to CA3097948A priority patent/CA3097948A1/en
Priority to CN201980032744.2A priority patent/CN112119398B/zh
Priority to EP19722607.9A priority patent/EP3794500A1/de
Priority to MX2020012215A priority patent/MX2020012215A/es
Application granted granted Critical
Publication of DE102018209192B3 publication Critical patent/DE102018209192B3/de
Priority to US17/098,661 priority patent/US11766971B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/30—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/46—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for vehicle-to-vehicle communication [V2V]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/176—Camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/202—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used displaying a blind spot scene on the vehicle part responsible for the blind spot
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/50—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the display information being shared, e.g. external display, data transfer to other traffic participants or centralised traffic controller
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Instrument Panels (AREA)
  • Image Analysis (AREA)

Abstract

Ein Verfahren zum Betreiben eines Kamera-Monitor-Systems (100) für ein Kraftfahrzeug (101), bei dem das Kamera-Monitor-System (100) eine Kamera (102) aufweist, die dazu ausgebildet ist, ein Bild einer Umgebung (105) des Kraftfahrzeugs (101) bereit zu stellen, und einen Monitor (104) aufweist zum Darstellen von Bildern der Kamera (102), umfasst:
- Bereitstellen eines Bildes (201) der Kamera (102),
- Ermitteln eines aufmerksamkeitsrelevanten Objekts (103) in der Umgebung (105),
- vorübergehendes Verändern mindestens einer Darstellungseigenschaft des Bildes (201) in Abhängigkeit von dem ermittelten Objekt (103) zu einem veränderten Bild (202),
- Darstellen des veränderten Bildes (202) auf dem Monitor (102) .

Description

  • Es wird ein Verfahren zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug angegeben. Es wird weiterhin eine Vorrichtung angegeben, die dazu ausgebildet ist, das Verfahren durchzuführen.
  • Kraftfahrzeuge können eine Kamera aufweisen und einen Monitor, der Bilder der Kamera für einen Nutzer des Kraftfahrzeugs darstellt. Beispielsweise sind Spiegelersatzsysteme bekannt, bei denen mittels der Kamera und des Monitors die Sichtbereiche von herkömmlichen Außenspiegeln abgebildet werden.
  • Die Dokumente DE 10 2006 012 773 A1 , DE 10 2015 011 536 A1 , DE 10 2012 002 149 B3 und DE 10 2008 017 833 A1 beschreiben jeweils ein Kamera-Monitor-System, bei dem Informationen in der Darstellung auf dem Monitor gesondert hervorgehoben werden können.
  • Es ist wünschenswert, ein Verfahren zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug anzugeben, das einen zuverlässigen Betrieb des Systems ermöglicht. Es ist weiterhin wünschenswert, eine Vorrichtung zum Betreiben eines Kamera-Monitor-Systems anzugeben, die einen zuverlässigen Betrieb ermöglicht.
  • Die Erfindung zeichnet sich aus durch ein Verfahren zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug gemäß Anspruch 1 sowie durch eine korrespondierende Vorrichtung gemäß Anspruch 9, die dazu ausgebildet ist, das Verfahren auszuführen.
  • Gemäß zumindest einer Ausführungsform weist das Kamera-Monitor-System eine Kamera auf. Die Kamera ist insbesondere eingerichtet, ein Bild einer Umgebung des Kraftfahrzeugs aufzunehmen und bereitzustellen. Das Kamera-Monitor-System weist einen Monitor auf zum Darstellen von Bildern der Kamera.
  • Ein Bild der Kamera wird bereitgestellt. Ein aufmerksamkeitsrelevantes Objekt wird in der Umgebung ermittelt. Mindestens eine Darstellungseigenschaft des Bildes wird in Abhängigkeit von dem ermittelten Objekt verändert, sodass ein verändertes Bild bereitgestellt wird. Die mindestens eine Darstellungseigenschaft wird vorübergehend verändert. Das veränderte Bild wird auf dem Monitor dargestellt.
  • Mittels des Kamera-Monitor-Systems ist es möglich, die Umgebung des Kraftfahrzeugs auf den Monitor des Kamera-Monitor-Systems zumindest ausschnittsweise für einen Fahrer des Kraftfahrzeugs darzustellen. Auf herkömmliche Außenspiegel kann dadurch verzichtet werden. Die Kamera ist insbesondere einer Längsseite des Kraftfahrzeugs zugeordnet und eingerichtet, mindestens den Teil der Umgebung abzubilden, der herkömmlich mittels eines herkömmlichen Außenspiegels einsehbar ist.
  • Das aufmerksamkeitsrelevante Objekt ist insbesondere ein Objekt, auf das die Aufmerksamkeit des Nutzers des Kraftfahrzeugs gerichtet und gelenkt werden soll. Beispielsweise ist das aufmerksamkeitsrelevante Objekt ein Fußgänger, ein Einsatzfahrzeug mit Blaulicht, ein überholendes Fahrzeug oder ein anderes sich insbesondere bewegendes Objekt, das im Einflussbereich des Kraftfahrzeugs liegt.
  • Mittels des vorübergehenden Veränderns der Darstellungseigenschaften des Bildes wird die Aufmerksamkeit des Nutzers auf den Monitor gelenkt. Beispielsweise wird die Helligkeit des Bildes erhöht. Somit ist es möglich, den Nutzer darauf hinzuweisen, dass in der Umgebung ein Objekt ist, das vom Nutzer des Kraftfahrzeugs beachtet und berücksichtigt werden sollte. Die Darstellungseigenschaft wird nicht für einen längeren Zeitraum oder dauerhaft verändert, sondern nur vorübergehend. Danach wird das Bild wieder mit den unveränderten Darstellungseigenschaften dargestellt. Somit wird vermieden, dass der Nutzer gestört wird. Beispielsweise ist so vermeidbar, dass der Nutzer bei einer Nachtfahrt von dem Monitor über längere Zeit geblendet wird. Bei Nachfahrten beispielsweise auf einer Autobahn ist üblicherweise kaum etwas auf dem Monitor abgebildet, außer es nähert sich ein Licht wie beispielsweise ein anderes Fahrzeug mit Frontscheinwerfer. Die Helligkeit des Monitors wird so nachgeregelt, dass der Fahrer nicht durch zu viel Bewegung und Bildrauschen im Monitor gestört wird. Mittels der vorübergehenden Veränderung der Darstellungseigenschaft, beispielsweise einem Anheben der Helligkeit des Monitors, wird dennoch eine Warnwirkung erzielt. Somit wird der Nutzer auch beim Einsatz des Spiegelersatzsystems statt einem herkömmlichen Außenspiegel auf das Objekt aufmerksam gemacht.
  • Gemäß zumindest einer Ausführungsform wird das Objekt mittels eines Objekterkennungsverfahrens in dem bereitgestellten Bild ermittelt. Beispielsweise werden die Bildinhalte softwarebasiert ausgewertet. Eine Objekterkennung ermöglicht das Identifizieren des aufmerksamkeitsrelevanten Objekts in dem bereitgestellten Bild.
  • Gemäß zumindest einer Ausführungsform wird das Objekt alternativ oder zusätzlich mittels mindestens eines weiteren Sensors des Kraftfahrzeugs ermittelt. Beispielsweise wird ein Radar, ein LIDAR, weitere Kameras oder Abstandssensoren verwendet, um das aufmerksamkeitsrelevante Objekt in der Umgebung zu ermitteln.
  • Gemäß zumindest einer Ausführungsform wird das Objekt alternativ oder zusätzlich mittels einer Fahrzeug-zu-Fahrzeug-Kommunikation ermittelt (car2car Kommunikation). Das aufmerksamkeitsrelevante Objekt und das Kraftfahrzeug können somit direkt miteinander kommunizieren und beispielsweise Informationen über Lage, Geschwindigkeit oder geplante Routen miteinander austauschen. Dies erfolgt beispielsweise mittels eines WLAN-Standards, über Bluetooth oder eine andere drahtlose Kommunikationsschnittstelle. Alternativ oder zusätzlich kommuniziert ein weiteres Objekt dem Kraftfahrzeug, um Informationen über das aufmerksamkeitsrelevante Objekt mitzueilten. Beispielsweise teilt das weitere Objekt dem Kraftfahrzeug die Position des aufmerksamkeitsrelevanten Objekts mit.
  • Gemäß zumindest einer Ausführungsform umfasst das Verändern der Darstellungseigenschaft ein Verändern einer Helligkeit. Alternativ oder zusätzlich umfasst das Verändern der Darstellungseigenschaft ein Verändern einer Farbe. Alternativ oder zusätzlich umfasst das Verändern der Darstellungseigenschaft ein Darstellen eines zusätzlichen grafischen Elements. Weitere Veränderungen der Darstellungseigenschaft sind möglich, die geeignet sind, die Aufmerksamkeit des Nutzers auf das dargestellte Bild zu lenken.
  • Gemäß zumindest einer Ausführungsform wird ein Darstellungsbereich des Objekts in dem Bild auf dem Monitor ermittelt. Die Darstellungseigenschaft wird in dem Darstellungsbereich beibehalten und außerhalb des Darstellungsbereichs verändert. Somit bleibt das aufmerksamkeitsrelevante Objekt gut erkennbar. Zudem ist es möglich, die Aufmerksamkeit auf das dargestellte Bild auf dem Monitor zu lenken. Somit kann beispielsweise gewährleistet werden, dass ein Blaulicht eines Einsatzfahrzeuges weiterhin gut erkennbar im Darstellungsbereich dargestellt wird. Außerhalb des Darstellungsbereichs wird durch das Verändern der Darstellungseigenschaft eine erhöhte Aufmerksamkeit erzielt.
  • Ein Schwellwert für die Aufmerksamkeitsrelevanz wird ermittelt. Ein Wert der Aufmerksamkeitsrelevanz des Objekts wird ermittelt. Die Darstellungseigenschaft wird verändert, wenn der ermittelte Wert größer ist als der Schwellwert. Der Schwellwert wird in Abhängigkeit von einem Nutzer des Kamera-Monitor-Systems ermittelt. Somit ist es möglich, die Darstellungseigenschaft situativ anzupassen. Dadurch wird beispielsweise ermöglicht, dass die Darstellungseigenschaft nur dann verändert wird, wenn dies tatsächlich notwendig ist. Beispielsweise wird der Schwellwert in Abhängigkeit von dem Objekt ermittelt. Beispielsweise wird der Schwellwert in Abhängigkeit einer ermittelten Konzentrationsfähigkeit des Nutzers ermittelt. Beispielsweise wird eine Müdigkeit des Nutzers ermittelt. Beispielsweise wird ermittelt, ob der Nutzer verhältnismäßig abgelenkt ist, beispielsweise durch Benutzung anderer Geräte des Kraftfahrzeugs wie beispielsweise des Radios. Beispielsweise wird der Schwellwert in Abhängigkeit davon festgelegt, ob sich das Objekt schnell oder langsam nähert. Zudem ist es möglich, den Schwellwert in Abhängigkeit von Umgebungsvariablen festzulegen, wie beispielsweise einer Tageszeit, einer Helligkeit, einem Verkehrsaufkommen oder weiteren Einflussfaktoren.
  • Gemäß zumindest einer Ausführungsform wird ein Zeitraum für das Verändern der Darstellungseigenschaft ermittelt. Der Zeitraum wird in Abhängigkeit von dem Objekt und/oder von einem Nutzer des Kamera-Monitor-Systems ermittelt. Die Darstellungseigenschaft wird für den ermittelten Zeitraum verändert. Das veränderte Bild wird innerhalb des ermittelten Zeitraums dargestellt. Das Bild wird mit der unveränderten Darstellungseigenschaft dargestellt außerhalb des Zeitraums, insbesondere nach dem Zeitraum. Somit ist die Dauer der Darstellung des veränderten Bildes in Abhängigkeit von Umgebungsvariablen und Einheiten des Nutzers möglich.
  • Weitere Vorteile, Merkmale und Weiterbildungen ergeben sich aus den nachfolgenden, in Verbindung mit den Figuren erläuterten Beispielen. Gleiche, gleichartige und gleichwirkende Elemente können figurenübergreifend mit den gleichen Bezugszeichen versehen sein.
  • Es zeigen:
    • 1 eine schematische Darstellung eines Kraftfahrzeugs mit einem Kamera-Monitor-System gemäß einem Ausführungsbeispiel,
    • 2 eine schematische Darstellung eines Ablaufdiagramms eines Verfahrens gemäß einem Ausführungsbeispiel,
    • 3 eine schematische Darstellung eines Bildes gemäß einem Ausführungsbeispiel,
    • 4 eine schematische Darstellung des Bildes der 3 mit veränderten Darstellungseigenschaften,
    • 5 eine schematische Darstellung eines Bildes gemäß einem Ausführungsbeispiel,
    • 6 eine schematische Darstellung des Bildes der 5 mit veränderten Darstellungseigenschaften,
    • 7 eine schematische Darstellung eines Bildes gemäß einem Ausführungsbeispiel, und
    • 8 eine schematische Darstellung des Bildes der 7 mit veränderten Darstellungseigenschaften.
  • 1 zeigt eine schematische Darstellung eines Kraftfahrzeugs 101 gemäß einem Ausführungsbeispiel von oben. Das Kraftfahrzeug 101 ist beispielsweise ein Lastkraftwagen. Gemäß weiteren Ausführungsbeispielen ist das Kraftfahrzeug ein Bus und/oder ein Personenkraftwagen.
  • Das Kraftfahrzeug 101 weist ein Kamera-Monitor-System 100 als Spiegelersatzsystem auf. Das Kamera-Monitor-System 100 weist je Längsseite 106 eine Kamera 102 auf. Die Kameras 102 dienen jeweils dazu, einen Teil einer Umgebung 105 des Kraftfahrzeugs 101 aufzunehmen. Gemäß weiteren Ausführungsbeispielen sind je Seite 106 mehrere Kameras vorgesehen, beispielsweise zwei Kameras oder mehr. Gemäß weiteren Ausführungsbeispielen ist die Kamera 102 lediglich an einer Seite 106 des Kraftfahrzeugs 101 vorgesehen. Die Kamera 102 ist insbesondere einer Längsseite des Kraftfahrzeugs 101 zugeordnet. Die Kamera 102 dient insbesondere dazu, einen Teil der Umgebung 105 aufzuzeichnen, der im Sichtbereich herkömmlicher Außenspiegel liegt.
  • Das Kamera-Monitor-System 100 weist zwei Monitore 104 auf. Im Betrieb wird auf dem Monitor 104 jeweils ein Ausschnitt der zugehörigen Umgebung 105 auf der zugehörigen Seite 106 dargestellt. Insbesondere wird das Bild der zugehörigen Kamera 102 auf dem Monitor 104 dargestellt. Somit unterscheiden sich die dargestellten Bilder 400 auf den Monitoren 104 voneinander.
  • Eine Vorrichtung 110 ist vorgesehen, mit der die Kameras 102 und die Monitore 104 signaltechnisch gekoppelt sind. Die Vorrichtung 110 ist eingerichtet, sowohl die Kameras 102 als auch die Monitore 104 zu steuern. Beispielsweise ist die Vorrichtung 110 ein Steuergerät oder Teil eines Steuergeräts des Kraftfahrzeugs 101. Insbesondere ist die Vorrichtung 110 zur Bildverarbeitung eingerichtet.
  • 2 zeigt ein Ablaufdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel. In Schritt 301 erfolgt zunächst eine Erkennung eines Objekts 103 (1) in der Umgebung 105 des Kraftfahrzeugs 101. Es wird ermittelt, ob das Objekt 103 ein aufmerksamkeitsrelevantes Objekt ist. Ein aufmerksamkeitsrelevantes Objekt ist beispielsweise ein Objekt, von dem eine potentielle Gefahr für den Nutzer des Kraftfahrzeugs 101 ausgeht und/oder für den das Kraftfahrzeug 101 eine potentielle Gefahr darstellt. Ein aufmerksamkeitsrelevantes Objekt ist insbesondere eine Person, ein sich näherndes Kraftfahrzeug wie beispielsweise ein Motorrad oder beispielsweise ein anderes sich näherndes Objekt.
  • Zur Erkennung des aufmerksamkeitsrelevanten Objekts 103 wird insbesondere eine Sensorik 107 des Kraftfahrzeugs verwendet. Beispielsweise werden Informationen über ein CAN und/oder einer ADAS Einheit oder ähnlichen Informationsquellen verwendet. Auch Helligkeitssensoren, Geschwindigkeit und weitere Daten können berücksichtigt werden. Alternativ oder zusätzlich wird zur Ermittlung des Objekts 103 eine weitere Kamera 108 verwendet. Alternativ oder zusätzlich wird zur Ermittlung des Objekts 103 die Kamera 102 des Kamera-Monitor-Systems verwendet. Die Kamera 108 ist beispielsweise eine Infrarotkamera. Alternativ oder zusätzlich wird ein weiteres Steuergerät 109 des Kraftfahrzeugs 101 verwendet, um das Objekt 103 zu erkennen. Alternativ oder zusätzlich werden Informationen mittels einer Kommunikationsschnittstelle 111 von fahrzeugexternen Informationsquellen empfangen und bei der Ermittlung des Objekts 103 berücksichtigt. Beispielsweise werden Informationen über eine car2car oder eine car2x Schnittstelle empfangen. Nachfolgend wird im Schritt 302 ermittelt, ob der Nutzer auf das Objekt 103 besonders aufmerksam gemacht werden soll oder nicht. Wenn nicht, wird das Verfahren in Schritt 301 fortgesetzt.
  • Wenn in Schritt 302 ermittelt wird, dass das aufmerksamkeitsrelevante Objekt 103 eines besonderen Hinweises bedarf, wird in Schritt 303 eine Darstellungseigenschaft eines Bildes 201 (3, 5 und 7) der Kamera 102 beziehungsweise der Darstellung auf dem Monitor 104 verändert. Beispielsweise wird die Helligkeit des Monitors erhöht. Alternativ oder zusätzlich wird die Darstellung auf dem Monitor in einer vorgegebenen Farbe eingefärbt.
  • Das Bild wird in Schritt 304 für einen vorgegebenen Zeitraum auf dem Monitor 104 mit den geänderten Darstellungseigenschaften dargestellt. Nachfolgend wird in Schritt 305 die Darstellungseigenschaft wieder zurückgesetzt und das Bild 201 unverändert auf dem Monitor 104 dargestellt.
  • Die Entscheidung in Schritt 302 wird beispielsweise in Abhängigkeit einer Sichtbarkeit 112 des Kraftfahrzeugs 101 getroffen. Beispielsweise bei Nacht und/oder Nebel und/oder einer kurvigen Straße kann die Sichtbarkeit 112 reduziert sein. Alternativ oder zusätzlich wird die Entscheidung 302 in Abhängigkeit einer Historie 113 getroffen. Die Historie 113 umfasst insbesondere Informationen, wann und wie oft in der Vergangenheit in Schritt 303 die Darstellungseigenschaften geändert wurden. Alternativ oder zusätzlich wird die Entscheidung in Schritt 302 in Abhängigkeit einer Aufmerksamkeitserkennung 114 getroffen. Die Aufmerksamkeitserkennung umfasst beispielsweise eine Müdigkeiterkennung des Fahrers. Alternativ oder zusätzlich wird ermittelt, ob der Fahrer anderweitig abgelenkt ist, beispielsweise durch Benutzung anderer Geräte des Kraftfahrzeugs 101. Die Entscheidung in Schritt 302 wird alternativ oder zusätzlich in Abhängigkeit von einer Kritikalität 115 getroffen. Somit wird beispielsweise berücksichtigt, wie akut eine Gefahrensituation durch das Objekt 103 ist.
  • Beispielsweise wird als Objekt 103 ein sich näherndes Fahrzeug erkannt. Dies erfolgt beispielsweise durch ein automatisches Erkennungssystem, beispielsweise mittels mindestens einer der Elemente 107, 108, 109, 111. Alternativ oder zusätzlich ist auch eine abrupte Helligkeitsabregelung der Kameraautomatik eine Möglichkeit, ein sich näherndes Fahrzeug mit Scheinwerfern zu erkennen. Nachfolgend wird für eine kurze Zeit von beispielsweise 0,1 s bis 5 s die Helligkeit des Monitors 104 erhöht. Auch ein anderer Zeitraum ist möglich, beispielsweise ist der Zeitraum von einem Nutzer einstellbar oder in Abhängigkeit des ermittelten Objekts 103 vorgegeben.
  • Beispielsweise wird die Helligkeit des Monitors 104 durch ein Anheben der Hintergrundbeleuchtung erreicht. Alternativ oder zusätzlich wird die Helligkeit der Darstellung auf den Monitor im Allgemeinen erhöht, beispielsweise durch Anhebung der Lichtdurchlässigkeit der Flüssigkristalle im Monitor oder korrespondierendes bei anderen Monitortechnologien. Die Veränderung der Darstellung auf dem Monitor 104 erregt die Aufmerksamkeit des Fahrers. Dadurch wird eine Gefährdung durch das Objekt 103 vermieden. Zudem wird durch das schnell folgende Wiederherabsetzen der Helligkeit der Fahrer beispielsweise vom Scheinwerfer des sich nähernden Fahrzeugs nicht weiter geblendet. Insbesondere auf Langstreckenfahrten kann somit die Helligkeit des Monitors 104 ohne Gefahr sehr stark reduziert werden, um in normalen Gefahrsituationen keine Ablenkung hervorzurufen. Sobald ein aufmerksamkeitsrelevantes Objekt 103 ermittelt wird, wird der Fahrer intuitiv auf dieses aufmerksam gemacht.
  • Ein anderes Beispiel für ein aufmerksamkeitsrelevantes Objekt 103 ist neben dem sich nähernden Fahrzeug auch eine sich nähernde Person.
  • Alternativ oder zusätzlich zu der Erhöhung der Helligkeit ist es möglich, die Darstellung auf dem Monitor 104 für den vorgegebenen Zeitraum in einer Farbe einzufärben. Durch entsprechende Farbwahl, beispielsweise rot, wird die Aufmerksamkeit des Fahrers weiter erhöht. Alternativ oder zusätzlich wird dem Fahrer mittels der Farbwahl eine Information vermittelt. Eine vorgegebene Farbe dient beispielsweise dazu, eine geringe, mittlere und hohe Gefahr anzuzeigen. Alternativ oder zusätzlich ist es mittels der Farbwahl möglich, eine gering, mittlere und hohe Geschwindigkeit des sich nähernden Fahrzeugs darzustellen. Es ist möglich, einen Rahmen um das gesamte Display einzufärben. Alternativ oder zusätzlich ist es möglich, einen Rahmen um das Sichtfeld einzufärben. Es ist auch möglich, einen Rahmen um das Objekt 103 in der Darstellung auf dem Monitor 104 einzufärben.
  • Alternativ oder zusätzlich ist es möglich, verschiedene Gefahren, beispielsweise ein sich näherndes Fahrzeug, einen Fußgänger, einen Überholvorgang farbkodiert darzustellen. Im Fall eines sich nähernden Blaulichtfahrzeuges kann beispielsweise ein Rahmen in Blau kodiert werden. Gemäß weiteren Ausführungsbeispielen wird eine andere Farbe als Blau verwendet, damit das eigentliche Blaulicht auch entsprechend gut dargestellt und erkannt wird.
  • Alternativ oder zusätzlich zur Farbkodierung wird gemäß Ausführungsbeispielen für die genannten Anwendungszwecke eine Abstufung der Helligkeitserhöhung verwendet, beispielsweise stufenweise, niedrig, mittelhoch, oder durch eine kontinuierliche Veränderung der Helligkeit.
  • Wenn ein Monitor 104 verwendet wird, der eine hohe Helligkeit darstellen kann, ist es möglich, das Verfahren ohne Einschränkungen tagsüber zu verwenden.
  • Die Informationen zu den Gefahrensituationen, also insbesondere zur Ermittlung des Objekts 103, werden von dem Kamera-Monitor-System 100 gemäß Ausführungsbeispiel durch systeminterne Quellen bereitgestellt. Alternativ oder zusätzlich werden die Informationen durch externe Warnsysteme bereitgestellt. Dies betrifft beispielsweise fahrzeuginterne Informationen, die beispielsweise mittels CAN oder einer ADAS Einheit oder ähnlichen Informationsquellen bereitgestellt werden, beispielsweise mittels des Sensors 107, der Kamera 108 und/oder dem Steuergerät 109. Alternativ oder zusätzlich werden fahrzeugexterne Informationen berücksichtigt, die beispielsweise über eine car2car Kommunikation oder eine car2x Kommunikation an das Kraftfahrzeug 101 übermittelt werden. Hierdurch ist es möglich, dass der Fahrer beispielsweise bereits vor einem sich nähernden Fahrzeug und/oder vor auf der Strecke liegenden Hindernissen gewarnt wird, die noch nicht von der Kamera 102 oder der anderen Sensorik des Kraftfahrzeugs 101 erkennbar beziehungsweise sichtbar sind, beispielsweise also in Kurven hinter oder vor dem Fahrzeug.
  • Damit bei Nachtfahrten und höherem Verkehrsaufkommen nicht ständig der Fahrer durch die optische Warnung gestört wird, können unterschiedliche Schwellwerte definiert werden, ab wann das System den Fahrer warnen soll. Diese werden insbesondere in Schritt 302 berücksichtigt. Der Schwellwert wird beispielsweise vom Fahrer vorgegeben. Alternativ oder zusätzlich ist der Schwellwert ab Werk konfigurierbar.
  • Gemäß zumindest einer Ausführungsform wird vom Festlegen des Schwellwerts die Aufmerksamkeit des Fahrers miteinbezogen. Ist der Fahrer abgelenkt, beispielsweise durch längere Bedienung des Navigationssystems oder des Radios, wird der Schwellwert beispielsweise niedriger angesetzt. Somit wird der Fahrer frühzeitiger gewarnt. Alternativ oder zusätzlich wird die Aufmerksamkeit mittels einer Müdigkeitserkennung abgeschätzt, die in dem Kamera-Monitor-System 100 selbst realisiert ist oder von externen Steuergeräten bereitgestellt wird, insbesondere von der Aufmerksamkeitserkennung 114. Zudem ist es möglich, die Blickrichtung des Fahrers zu ermitteln und insbesondere auf das Objekt 103 hinzuweisen, wenn der Fahrer in eine andere Richtung blickt.
  • Alternativ oder zusätzlich wird der Schwellwert in Abhängigkeit der Kritikalität 115 festgelegt. Durch Objekterkennung und andere Steuergeräte und/oder durch die car2car Kommunikation liegen beispielsweise detaillierte Informationen über das Objekt 103 vor. Eine kritische Situation wird in Abhängigkeit der Informationen über das Objekt 103, insbesondere ein Bewegungsvektor und eine daraus abgeleitete Trajektorie, ein Fahrzeugtyp, ein Beleuchtungszustand und weitere Eigenschaften, in Abhängigkeit von der eigenen Trajektorie sowie Fahrspur und weitere Informationen über das Kraftfahrzeug 101 ermittelt. Gemäß Ausführungsbeispielen wird der Schwellwert entsprechend hoch gesetzt, um eine Warnung gegebenenfalls zu unterdrücken, oder bei potentieller Gefahr entsprechend zu warnen. Beispielsweise wird der Schwellwert in Abhängigkeit einer Geschwindigkeit eines sich nähernden Objekts 103 festgelegt. Beispielsweise nähert sich von hinten ein Fahrzeug mit hoher Geschwindigkeit und der Fahrer des Kraftfahrzeugs 101 wird durch die Veränderung der Darstellung des Bilds auf dem Monitor 104 gewarnt.
  • Alternativ oder zusätzlich ist es möglich, den Schwellwert in Abhängigkeit einer Sichtbarkeit des Objekts 103 festzulegen. Beispielsweise ist das Objekt 103 verdeckt hinter einer langgezogenen Kurve. Die mittels der car2car Kommunikation übertragene Position wird berücksichtigt und mittels beispielsweise detaillierten Kartendaten kombiniert, sodass ein Information über die langgezogene Kurve vorliegt.
  • Alternativ oder zusätzlich wird das Objekt 103 in dem Bild 201 der Kamera 102 des Kamera-Monitor-Systems 100 mittels Objekterkennung ermittelt.
  • Alternativ oder zusätzlich wird mittels des weiteren Steuergeräts 109 ermittelt, ob das Objekt 103 für den Fahrer des Kraftfahrzeugs 101 bereits sichtbar sein müsste. Beispielsweise erfolgt dies mittels Radarsensoren der LIDAR.
  • Gemäß Ausführungsbeispielen wird für die Art und Weise, wie und wann die Darstellungseigenschaft geändert werden soll und dadurch gewarnt werden soll, die Historie 113 miteinbezogen. Wenn das Kraftfahrzeug 101 beispielsweise auf einer Autobahn bewegt wird, ist es möglich, dass sich für eine längere Zeit kein anderes Auto und damit kein Objekt 103 annähert. Somit wird der Schwellwert vergleichsweise niedrig angesetzt, um eine Warnung frühzeitig auszugeben. Bei der Autobahnfahrt, bei der sich längere Zeit kein Auto angenähert hat, wird somit insbesondere von einer geringeren Konzentration des Fahrers ausgegangen als bei hohem Verkehrsaufkommen. Folgt auf die vorherige Warnung relativ zeitnah ein weiteres Fahrzeug, so könnte die nächste Warnung beispielsweise entsprechend weniger intensiv ausfallen oder sogar ausbleiben.
  • 3 zeigt das Bild 201 der Kamera 102 mit unveränderten Darstellungseigenschaften gemäß einem Ausführungsbeispiel.
  • 4 zeigt ein verändertes Bild 202 gemäß einem Ausführungsbeispiel. Das veränderte Bild 202 wird auf dem Monitor 104 dargestellt, um den Fahrer auf das aufmerksamkeitsrelevante Objekt 103 aufmerksam zu machen beziehungsweise zu warnen. In 3 ist die herkömmliche Darstellung des Bildes 201 gezeigt, bei der das Kamera-Monitor-System 100 die Darstellungseigenschaften so wählt, um möglichst viele Details der Umgebung 104 darstellen zu können. Hierfür wird beispielsweise die Helligkeit in dem Bereich der Scheinwerfer des sich nähernden Kraftfahrzeugs 103 reduziert. Um den Fahrer des Kraftfahrzeugs 101 dennoch auf das sich nähernde Fahrzeug 103 hinzuweisen, ähnlich wie bei einem herkömmlichen Seitenspiegel, wird die Helligkeit des Monitors 104 erhöht. Dies ist in 4 dargestellt. Das veränderte Bild 202 mit den geänderten Darstellungseigenschaften simuliert beispielsweise kurzzeitig ein Blenden, das bei einem herkömmlichen Seitenspiegel auftreten könnte.
  • 5 zeigt das Bild 201 gemäß einem weiteren Ausführungsbeispiel. Das aufmerksamkeitsrelevante Objekt 103 ist ein Fußgänger im Bereich des Kraftfahrzeugs 100. Wie in 6 dargestellt, werden die Darstellungseigenschaften so geändert, dass das im Monitor 104 dargestellte veränderte Bild 202 farblich eingefärbt ist. Beispielsweise wird ein gelber Schleier dargestellt, um den Nutzer des Kraftfahrzeugs 101 auf die Person 103 im Bereich des Kraftfahrzeugs 101 hinzuweisen und vor dieser zu warnen.
  • 7 zeigt das Bild 201 gemäß einem weiteren Ausführungsbeispiel. Das aufmerksamkeitsrelevante Objekt 103 ist ein sich von hinten näherndes Motorrad. Die Darstellungseigenschaften werden geändert und das veränderte Bild 202 dargestellt, wie in 8 beispielhaft gezeigt. Um den Nutzer des Kraftfahrzeugs 101 zu warnen, wird beispielsweise ein grafisches Element 203 eingeblendet. Das grafische Element 203 ist im gezeigten Ausführungsbeispiel ein Rahmen, insbesondere in einer vorgegebenen Farbe, der auf dem Monitor 104 dargestellt wird. Beispielsweise wird der Rahmen 203 am Außenumfang des Monitors 104 dargestellt. Gemäß weiteren Ausführungsbeispielen wird der Rahmen im Bereich des sicherheitsrelevanten Objekts 103 dargestellt.
  • Alternativ oder zusätzlich wird ein Darstellungsbereich 204 ermittelt, in dem das sicherheitsrelevante Objekt 103 auf dem Monitor 104 dargestellt wird. Das Bild 202 wird nur außerhalb des Darstellungsbereichs 204 verändert, um den Nutzer des Kraftfahrzeugs 101 zu warnen. Innerhalb des Darstellungsbereichs 204 wird das unveränderte Bild 201 dargestellt. Somit wird das aufmerksamkeitsrelevante Objekt 103 möglichst detailreich dargestellt. Es wird vermieden, dass wichtige Informationen aufgrund der Veränderung der Darstellungseigenschaft nicht auf dem Monitor 104 angezeigt werden, beispielsweise ein Blaulicht eines Einsatzfahrzeugs.
  • Die unterschiedlichen beschriebenen Beispiele für die Änderung der Darstellungseigenschaften können beliebig kombiniert werden. Beispielsweise wird bei dem veränderten Bild 202 gemäß 8 die Darstellung außerhalb des Darstellungsbereichs 204 farbig eingefärbt, wie in Verbindung mit 6 erläutert.
  • Das beschriebene Verfahren sowie das beschriebene Kamera-Monitor-System 100 ermöglichen ein Informieren des Fahrers des Kraftfahrzeugs 101 über Gefahren, ohne dass der Fahrer dabei direkt auf einen der Monitore 104 blicken muss. Mit Hilfe der Farb- oder Helligkeitskodierung werden zudem unterschiedliche Typen von Gefahrensituationen mitgeteilt. Zudem wird die Blendwirkung von sich nähernden Fahrzeugscheinwerfern vermieden. Die Sicherheit für den Fahrer und andere Personen wird dadurch erhöht. Es ist auch möglich, den Fahrer über Bewegungen außerhalb des Fahrzeugs 101 im Stand zu informieren, beispielsweise als Diebstahlwarnsystem. Alternativ oder zusätzlich ist es möglich, den Fahrer vor dem Aussteigen bei einem sich nähernden Fahrzeug zu warnen. Dies wird beispielsweise durch einen Griff zur Türklinke ausgelöst.
  • Es ist auch möglich, das beschriebene Verfahren mit einem akustischen Warnverfahren zu kombinieren. Ein derartiges Verfahren ist beispielsweise in der deutschen Patentanmeldung 102017220394.3 mit dem Titel „Verfahren und Vorrichtung zum Betreiben eines Fahrerassistenzsystems für ein Kraftfahrzeug und Kraftfahrzeug“ beschrieben. Somit ist es möglich, den Fahrer umfassend auf ein aufmerksamkeitsrelevantes Objekt hinzuweisen.
  • Die Umgebung 105 ist im Monitor 104 detailreich und gut erkennbar. Insbesondere bei Nacht ist es möglich, die Displayhelligkeit ausreichend zu reduzieren. Dennoch ist eine Warnwirkung realisiert, indem die Darstellung auf dem Monitor 104 kurzzeitig verändert wird.

Claims (9)

  1. Verfahren zum Betreiben eines Kamera-Monitor-Systems (100) für ein Kraftfahrzeug (101), bei dem das Kamera-Monitor-System (100) eine Kamera (102) aufweist, die dazu ausgebildet ist, ein Bild einer Umgebung (105) des Kraftfahrzeugs (101) bereit zu stellen, und einen Monitor (104) aufweist zum Darstellen von Bildern der Kamera (102), umfassend: - Bereitstellen eines Bildes (201) der Kamera (102), - Ermitteln eines aufmerksamkeitsrelevanten Objekts (103) in der Umgebung (105), - Ermitteln eines Schwellwerts für die Aufmerksamkeitsrelevanz in Abhängigkeit von einem Nutzer des Kamera-Monitor-Systems (100), - Ermitteln eines Werts der Aufmerksamkeitsrelevanz des Objekts (103), - vorübergehendes Verändern mindestens einer Darstellungseigenschaft des Bildes (201) in Abhängigkeit von dem ermittelten Objekt (103) zu einem veränderten Bild (202), wenn der ermittelte Wert größer ist als der Schwellwert, - Darstellen des veränderten Bildes (202) auf dem Monitor (104).
  2. Verfahren nach Anspruch 1, umfassend: - Ermitteln des Objekts (103) mittels eines Objekterkennungsverfahrens in dem bereitgestellten Bild (201).
  3. Verfahren nach Anspruch 1 oder 2, umfassend: - Ermitteln des Objekts (103) mittels mindestens eines weiteren Sensors (107) des Kraftfahrzeugs (101).
  4. Verfahren nach einem der Ansprüche 1 bis 3, umfassend: - Ermitteln des Objekts (103) mittels einer Fahrzeug-zu-Fahrzeug-Kommunikation.
  5. Verfahren nach einem der Ansprüche 1 bis 4, bei dem das Verändern der Darstellungseigenschaft mindestens eines umfasst aus: - Verändern einer Helligkeit, - Verändern einer Farbe, - Darstellen eines zusätzlichen grafischen Elements (203).
  6. Verfahren nach einem der Ansprüche 1 bis 5, umfassend: - Ermitteln eines Darstellungsbereichs (204) des Objekts (103) in dem Bild auf dem Monitor (104), - Beibehalten der Darstellungseigenschaft in dem Darstellungsbereich (204), und - Verändern der Darstellungseigenschaft außerhalb des Darstellungsbereichs (204).
  7. Verfahren nach Anspruch 1, umfassend: - Ermitteln des Schwellwerts in Abhängigkeit von dem Objekt (103) und/oder von einer Historie der Veränderung der Darstellungseigenschaft.
  8. Verfahren nach einem der Ansprüche 1 bis 7, bei dem das vorübergehende Verändern der Darstellungseigenschaft umfasst: - Ermitteln eines Zeitraums für das Verändern in Abhängigkeit von dem Objekt (103) und/oder von einem Nutzer des Kamera-Monitor-Systems (100), - Verändern der Darstellungseigenschaft für den ermittelten Zeitraum, - Darstellen des veränderten Bildes (202) innerhalb des ermittelten Zeitraums, - Darstellen des Bildes (201) mit der unveränderten Darstellungseigenschaft nach dem Zeitraum.
  9. Vorrichtung für ein Kraftfahrzeug, die ausgebildet ist, ein Verfahren nach einem der Ansprüche 1 bis 8 auszuführen.
DE102018209192.7A 2018-05-17 2018-06-08 Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug Active DE102018209192B3 (de)

Priority Applications (8)

Application Number Priority Date Filing Date Title
PCT/EP2019/061624 WO2019219440A1 (de) 2018-05-17 2019-05-07 Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug
KR1020207032890A KR102468922B1 (ko) 2018-05-17 2019-05-07 자동차용 카메라 모니터 시스템을 동작시키는 방법 및 장치
CA3097948A CA3097948A1 (en) 2018-05-17 2019-05-07 Method and apparatus for operating a camera-monitor system for a motor vehicle
CN201980032744.2A CN112119398B (zh) 2018-05-17 2019-05-07 用于运行机动车的摄像机-监视器系统的方法和设备
JP2020564369A JP2021524105A (ja) 2018-05-17 2019-05-07 自動車用のカメラモニターシステムを動作させる方法および装置
EP19722607.9A EP3794500A1 (de) 2018-05-17 2019-05-07 Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug
MX2020012215A MX2020012215A (es) 2018-05-17 2019-05-07 Metodo y aparato para operar un sistema de camara-monitor para un vehiculo motorizado.
US17/098,661 US11766971B2 (en) 2018-05-17 2020-11-16 Method and apparatus for operating a camera-monitor system for a motor vehicle

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102018207762 2018-05-17
DE102018207762.2 2018-05-17

Publications (1)

Publication Number Publication Date
DE102018209192B3 true DE102018209192B3 (de) 2019-05-09

Family

ID=66179169

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018209192.7A Active DE102018209192B3 (de) 2018-05-17 2018-06-08 Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug

Country Status (9)

Country Link
US (1) US11766971B2 (de)
EP (1) EP3794500A1 (de)
JP (1) JP2021524105A (de)
KR (1) KR102468922B1 (de)
CN (1) CN112119398B (de)
CA (1) CA3097948A1 (de)
DE (1) DE102018209192B3 (de)
MX (1) MX2020012215A (de)
WO (1) WO2019219440A1 (de)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT202100020852A1 (it) * 2021-08-03 2023-02-03 X Ender S R L Metodo di integrazione alla vista per un utente
DE102022105187A1 (de) 2022-03-04 2023-09-07 Audi Aktiengesellschaft Verfahren zum Darstellen einer Umgebung eines Fahrzeugs

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018209192B3 (de) * 2018-05-17 2019-05-09 Continental Automotive Gmbh Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006012773A1 (de) 2006-03-17 2006-11-30 Daimlerchrysler Ag Virtuelles Spotlight zur Kennzeichnung von interessierenden Objekten in Bilddaten
DE102008017833A1 (de) 2008-02-06 2009-08-20 Daimler Ag Verfahren zum Betrieb einer Bildaufnahmevorrichtung und eine Bildaufnahmevorrichtung
DE102012002149B3 (de) 2012-02-04 2013-06-20 Audi Ag Verfahren zur Visualisierung des Umfelds eines Kraftfahrzeugs und zugehöriges Kraftfahrzeug
DE102015011536A1 (de) 2015-09-02 2017-03-02 Man Truck & Bus Ag Spiegelersatzsystem als Kamera-Monitor-System (KMS) eines Kraftfahrzeugs, insbesondere eines Nutzfahrzeugs

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4696339B2 (ja) * 2000-07-11 2011-06-08 マツダ株式会社 車両の制御装置
DE102005020772A1 (de) * 2005-05-02 2006-11-09 Siemens Ag Anzeigesystem zur Darstellung der Umgebung eines Kraftfahrzeuges
JP4940767B2 (ja) * 2006-06-05 2012-05-30 マツダ株式会社 車両周辺情報報知装置
JP2009205268A (ja) * 2008-02-26 2009-09-10 Honda Motor Co Ltd 障害物表示装置
JP2011180873A (ja) * 2010-03-02 2011-09-15 Panasonic Corp 運転支援装置、及び運転支援方法
DE102012006679A1 (de) * 2012-03-31 2012-09-20 Daimler Ag Verfahren zum Erfassen und Darstellen einer Fahrzeugumgebung eines Fahrzeugs
WO2014053134A1 (de) * 2012-10-01 2014-04-10 Conti Temic Microelectronic Gmbh Verfahren zur unterstützung eines fahrers an einer ampel für ein fahrzeug
US9576208B2 (en) * 2013-12-11 2017-02-21 Continental Automotive Systems, Inc. Emergency vehicle detection with digital image sensor
EP3118515B1 (de) * 2014-03-03 2020-12-30 Koito Manufacturing Co., Ltd. Fahrzeugscheinwerfer mit laserlichtquelle
KR20170036077A (ko) * 2014-07-24 2017-03-31 엠.브루베이커 커티스 모바일 광고, 미디어, 및 통신 플랫폼에 크리티컬 매스를 발생시키기 위한 시스템, 방법, 및 디바이스
US20160063761A1 (en) * 2014-08-27 2016-03-03 Toyota Jidosha Kabushiki Kaisha Communication of spatial information based on driver attention assessment
FR3068945B1 (fr) * 2017-07-11 2019-08-30 Institut Francais Des Sciences Et Technologies Des Transports, De L'amenagement Et Des Reseaux Vehicule routier et methode de reengagement de la conduite manuelle
DE102017220394A1 (de) 2017-11-15 2019-05-16 Continental Automotive Gmbh Verfahren und Vorrichtung zum Betreiben eines Fahrerassistenzsystems für ein Kraftfahrzeug und Kraftfahrzeug
US11347218B2 (en) * 2017-11-21 2022-05-31 Shawn Wang Portable universal autonomous driving system
DE102018209192B3 (de) * 2018-05-17 2019-05-09 Continental Automotive Gmbh Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug
US11726184B2 (en) * 2019-03-08 2023-08-15 Leddartech Inc. Component for a LIDAR sensor system, LIDAR sensor system, LIDAR sensor device, method for a LIDAR sensor system and method for a LIDAR sensor device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006012773A1 (de) 2006-03-17 2006-11-30 Daimlerchrysler Ag Virtuelles Spotlight zur Kennzeichnung von interessierenden Objekten in Bilddaten
DE102008017833A1 (de) 2008-02-06 2009-08-20 Daimler Ag Verfahren zum Betrieb einer Bildaufnahmevorrichtung und eine Bildaufnahmevorrichtung
DE102012002149B3 (de) 2012-02-04 2013-06-20 Audi Ag Verfahren zur Visualisierung des Umfelds eines Kraftfahrzeugs und zugehöriges Kraftfahrzeug
DE102015011536A1 (de) 2015-09-02 2017-03-02 Man Truck & Bus Ag Spiegelersatzsystem als Kamera-Monitor-System (KMS) eines Kraftfahrzeugs, insbesondere eines Nutzfahrzeugs

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT202100020852A1 (it) * 2021-08-03 2023-02-03 X Ender S R L Metodo di integrazione alla vista per un utente
DE102022105187A1 (de) 2022-03-04 2023-09-07 Audi Aktiengesellschaft Verfahren zum Darstellen einer Umgebung eines Fahrzeugs
DE102022105187B4 (de) 2022-03-04 2024-06-20 Audi Aktiengesellschaft Verfahren zum Darstellen einer Umgebung eines Fahrzeugs und Anzeigesystem

Also Published As

Publication number Publication date
CN112119398A (zh) 2020-12-22
US11766971B2 (en) 2023-09-26
CN112119398B (zh) 2024-06-04
CA3097948A1 (en) 2019-11-21
EP3794500A1 (de) 2021-03-24
KR102468922B1 (ko) 2022-11-21
KR20200142571A (ko) 2020-12-22
WO2019219440A1 (de) 2019-11-21
MX2020012215A (es) 2021-01-29
US20210061184A1 (en) 2021-03-04
JP2021524105A (ja) 2021-09-09

Similar Documents

Publication Publication Date Title
EP3401166B1 (de) Spiegelersatzsystem als kamera-monitor-system (kms) eines kraftfahrzeugs, insbesondere eines nutzfahrzeugs
EP2172801B1 (de) Verfahren für eine Anzeige einer visuellen Warndarstellung
DE102013012891B4 (de) Verfahren zum Projizieren eines graphisch darstellbaren Anzeigeinhaltes durch ein Kraftfahrzeug in eine Umgebung des Kraftfahrzeugs
DE10131720B4 (de) Head-Up Display System und Verfahren
EP3717954B1 (de) Verfahren zur anzeige des verlaufs einer trajektorie vor einem fahrzeug oder einem objekt mit einer anzeigeeinheit, vorrichtung zur durchführung des verfahrens
DE102017221191A1 (de) Verfahren zur Anzeige des Verlaufs einer Sicherheitszone vor einem Fahrzeug oder einem Objekt mit einer Anzeigeeinheit, Vorrichtung zur Durchführung des Verfahrens sowie Kraftfahrzeug und Computerprogramm
DE112013007344T5 (de) Fahrzeugmontierte Anzeigesteuervorrichtung
DE102018209192B3 (de) Verfahren und Vorrichtung zum Betreiben eines Kamera-Monitor-Systems für ein Kraftfahrzeug
EP1931538A1 (de) Nachtsichteinrichtung für ein kraftfahrzeug
EP1751728A1 (de) Assistenzsystem für kraftfahrzeuge
DE102007011122A1 (de) System und Vorrichtung zur Fahrassistenz
DE102009020328A1 (de) Verfahren zur Darstellung von unterschiedlich gut sichtbaren Objekten aus der Umgebung eines Fahrzeugs auf der Anzeige einer Anzeigevorrichtung
DE102005054972A1 (de) Verfahren zur Totwinkelüberwachung bei Fahrzeugen
DE102015210645A1 (de) Sicherheitsbestätigungsunterstützungssystem für Fahrzeugführer und zugehöriges Verfahen
DE102009027755A1 (de) Verfahren zum Unterstützen eines Fahrbetriebs eines Kraftfahrzeugs sowie Fahrerassistenzvorrichtung
DE102016013820A1 (de) Verkehrszeichenerkennungssystem, Verfahren zum Steuern desselben und Computerprogrammprodukt
DE102016007522A1 (de) Spiegelersatzsystem für ein Fahrzeug
DE112017007217T5 (de) Fahrmodusumschaltsteuereinrichtung, System, Verfahren und Programm
DE102020127764A1 (de) Fahrzeuganzeigenverbesserung
DE102016013821A1 (de) Verkehrszeichenerkennungssystem, Verfahren zum Steuern desselben und Computerprogrammprodukt
DE102017212432A1 (de) Verfahren und Vorrichtung zum Betreiben eines Fahrerassistenzsystems eines Kraftfahrzeugs und Fahrerassistenzsysteme
DE102017223439B4 (de) Warnvorrichtung vor Gefahrensituationen für ein Kraftfahrzeug
DE102012018556B4 (de) Assistenzsystem zur Ermöglichung einer erweiterten Vorausschau für nachfolgende Verkehrsteilnehmer
EP3583488B1 (de) Automatisierte aktivierung eines sichtunterstützungssystems
DE102012012783A1 (de) Kamera-Monitor-System zur Überwachung des toten Winkels oder der Umgebung für Kraftfahrzeuge

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final
R081 Change of applicant/patentee

Owner name: CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, DE

Free format text: FORMER OWNER: CONTINENTAL AUTOMOTIVE GMBH, 30165 HANNOVER, DE

R081 Change of applicant/patentee

Owner name: CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, DE

Free format text: FORMER OWNER: CONTINENTAL AUTOMOTIVE TECHNOLOGIES GMBH, 30165 HANNOVER, DE