EP3596920A1 - Betriebsverfahren für ein kamera-anzeigesystem, kamera-anzeigesystem und fahrzeug - Google Patents

Betriebsverfahren für ein kamera-anzeigesystem, kamera-anzeigesystem und fahrzeug

Info

Publication number
EP3596920A1
EP3596920A1 EP18710004.5A EP18710004A EP3596920A1 EP 3596920 A1 EP3596920 A1 EP 3596920A1 EP 18710004 A EP18710004 A EP 18710004A EP 3596920 A1 EP3596920 A1 EP 3596920A1
Authority
EP
European Patent Office
Prior art keywords
camera
display
unit
units
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP18710004.5A
Other languages
English (en)
French (fr)
Inventor
Philipp Hoffmann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Publication of EP3596920A1 publication Critical patent/EP3596920A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/84—Mounting of dashboard components
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system

Definitions

  • the present invention relates to an operating method for a camera display system, in particular for a vehicle, a camera display system as such and a vehicle, in particular a motor vehicle, a
  • the invention has for its object to provide an operating method for a camera display system, a camera display system as such and a vehicle, in which by simple means and in a reliable manner
  • the object underlying the invention is in an operating method for a camera display system according to the invention with the features of independent claim 1, the camera display system as such according to the invention with the features of independent claim 8 and in a vehicle according to the invention with the features of
  • camera units are used to acquire images of an environment which are independent of one another, in particular in the manner of a sequence of individual images, for example in the manner of a film. Images of the environment are displayed on a display unit, combined with each other. Furthermore, an error status of
  • Captured camera units when an error occurs in a camera unit, the images of the surroundings of camera units are combined with one another without error and displayed. This makes it possible to reliably fall back on non-defective image sources.
  • the image of a camera unit with an error in a display is not taken into consideration altogether.
  • the error with which a camera unit is affected is not so serious that the image data generated by the defective camera unit can not be profitably used.
  • the image of a camera unit with error in the display at least partially
  • the camera units used can be operated differently. This is also dependent on how the individual camera units are positioned and / or oriented relative to each other.
  • the display of the image information recorded by the camera units may be performed differently in a combined manner.
  • the combined pictorial representation in the form of separated images for example in the form of a polyptych - as a generalization of a triptych for three images or a diptych for two images on n images - possible.
  • so-called fusion images can be generated from a plurality of images initially separated from one another, in which mutually overlapping regions are brought to coincidence by algorithms and computation methods known per se, in order to generate a jointly overlapping overall image from a plurality of initially separate images of the environment to bring to the display. So it is according to another embodiment of the invention
  • the operating method according to the invention generally reflects the structure and configuration of the camera display system to be operated.
  • Exterior mirror camera as a second camera unit and a centrally arranged third camera unit, in particular in the manner of a stereo camera unit with a first and left camera and a second and right camera, and / or a reversing camera unit as an auxiliary camera, in particular in the manner of a
  • the security level of the operating method according to the invention can also be helpful with regard to the control of the display units.
  • Dashboard display can be used as a third display unit as a display system.
  • a so-called rearview mirror display can be used as the primary display unit in general because this - especially in
  • a camera display system is also proposed, in particular for a vehicle.
  • the camera display system is configured with a camera system with a plurality of camera units, with a display system with one or more display units and with a detection and control unit which is connected or connectable via at least one detection and control line to the camera system and the display system and which is arranged to carry out the operating method according to the invention.
  • the camera system has a left exterior mirror camera as a first camera unit, a right exterior mirror camera as a second camera unit and a centrally arranged third camera unit, in particular in the manner of a stereo camera unit with a first and left camera and a second and right camera, and / or a reversing camera unit as an auxiliary camera, in particular in the manner of a fisheye camera and / or in each case with im Substantially counter to a main direction of travel X of the underlying vehicle aligned field of view.
  • the display system has a rearview mirror display as the first
  • Display unit a center console display as a second display unit and / or a dashboard display as a third display unit.
  • a vehicle is proposed as such, in particular a motor vehicle, a passenger car or a truck.
  • the vehicle according to the invention is designed with a camera display system designed according to the invention.
  • Figure 1 shows schematically in the manner of a block diagram a
  • Figures 2 and 3 show a view of an embodiment of the
  • FIGS. 4A to 1 B illustrate the adaptation of display results to FIG.
  • FIG. 12 schematically shows another embodiment of the invention
  • inventive vehicle with focus on the interior and the structure of the display system provided there.
  • FIGS. 1 to 12
  • FIG. 1 schematically shows, in the manner of a block diagram, an embodiment of the camera display system 40 according to the invention in connection with an embodiment of the vehicle 100 according to the invention.
  • the camera display system 40 according to the invention according to FIG. 1 consists of a camera system 10, a display system 20 and a detection and control unit 30 in its core.
  • the camera system 10 consists of a first camera unit 1 in the form of a first or a left
  • Exterior mirror camera a second camera unit 2 in the form of a second or right exterior mirror camera, a third camera unit 5 in the manner of a stereo camera unit with a first or left camera 3 and a second or right camera 4 and a fourth camera unit 6, which in the manner of a rearview camera unit with a fisheye camera or a camera with fisheye lens is formed and thus provides a wide-angle view. All camera units and cameras 1 to 6 are operatively connected to the detection and control unit via a first detection and control line 31 in order to be controlled or regulated.
  • the display system 20 consists of a first display unit 21 in the manner of a rear-view mirror display or in the manner of a rear-view mirror in the spatial area of a vehicle 100 typically
  • a second display unit 22 in the manner of a center console display or in the manner of a center console monitor in the area of a center console 107 of the vehicle 100 and a third display unit 23 in the manner of a dashboard display or the manner of a dashboard monitor, which on the side facing away from the driver side of a steering wheel 105 of the Vehicle 100 is arranged.
  • the first to third display units 21, 20, 30 of the display system 20 are connected via a second detection and control line 32 with the
  • Detection and control unit 30 operatively connected to be controlled or regulated.
  • the detection and control unit 30 is configured and set up, an embodiment of the invention
  • Execute operating method and in particular to ensure that when an error occurs in one of the camera units 1 to 6 images of the environment of the camera units 1 to 6 without error combined with each other image on at least one of the display units 21 to 23 are brought to display for display.
  • FIGS. 2 and 3 show a view of one embodiment of the invention
  • inventive vehicle 100 from the side and a rear view. Shown there are an embodiment of the invention
  • first and second detection and control lines 31 and 32 are not explicitly shown here. Alternative to such lines are also known as corresponding first and second detection and control lines 31 and 32.
  • FIGS. 4A to 1 1B illustrate the adaptation of display results based on embodiments of the method of operation according to the invention.
  • FIGS 4A to 1 1 B show in schematic form the treatment of various error scenarios. These will be below
  • FIG. A shows the error-free situation and FIG. B describes the treatment of the respective error case.
  • FIGS. 4A, 5A, 6A the representation in the error-free case takes place in the manner of a panoramic image or fusion image, in each case from the images of the cameras 1 to 4.
  • FIG. 4B handles the failure of the right-hand camera 4 of FIG.
  • Stereo camera unit 5 namely by transition to a triptych
  • FIG. 5B deals with the failure of the left-hand exterior mirror camera 1 with a transition to a panorama or fusion display with an extended field of view with respect to the images of the cameras 2 to 4.
  • FIG. 6B illustrates the case where both the left-side mirror camera 1 and the left-side camera 3 of the reversing-camera unit 5 have failed, with the transition to a dreaded-field diptych with respect to the cameras 2 and 4.
  • FIGS. 7A to 10B describe a situation in which, in addition to the right and left exterior mirror cameras 1 and 2, a single central camera 5 is formed, which as such does not constitute a stereo camera. In the error-free case is assumed in each case of a combined pictorial representation in the manner of a triptych.
  • FIG. 7B deals with the failure of the left-hand exterior mirror camera 1 with a transition to a diptych with an extended field of view, in particular for the central camera 5.
  • FIG. 8B describes the error case at the central camera 5 with a transition to a separate diptych with an extended field of view for both exterior mirror cameras 1 and 2.
  • Exterior mirror cameras 1 and 2 treated by transition to a single view with extended field of view for the central camera 5.
  • Reversing camera 6 each come with extended field of view to fruition.
  • FIG. 12 schematically shows another embodiment of the invention
  • Vehicle 100 with focus on its interior 103 and the structure of the display system 20 provided there.
  • the display system 20 is designed with a first display unit 21 in the manner of a rearview mirror monitor.
  • the second display unit 22 is a kind of
  • Center console display or in the manner of a center console monitor slightly above the center console at the height of the instrument panel 106 of the vehicle 100 is formed.
  • the third display unit 23 is located on the side facing away from the driver of the steering wheel 105 and is designed in the manner of a dashboard display or the type of dashboard monitor and thus directly in the area of the dashboard 106, for example in overlap with or in the vicinity of the usual
  • the first display unit 21 acts as a primary display unit and thus supports that for a user
  • the second display unit 22 and / or the third display 23 are switched.
  • the present invention relates in particular to a motor vehicle 100, which is provided with a plurality of cameras 1 to 6 and with a
  • Computer device 30 is equipped to process the images.
  • a method is also provided for operating a camera system 10 in a motor vehicle 100.
  • the present invention proposes a degradation concept for camera display systems 40.
  • This degradation concept should come into force on the following premises:
  • Case 1 Failure of a camera 4 of the stereo camera arrangement 5 in FIG.
  • Stereo camera 3 to be changed.
  • Case 2 Failure of a camera 1 of the pages in the merged image according to Figures 5A and 5B
  • the panorama can be changed to a partially fused image
  • the rear camera 5 receives more field of view on the failed side (FOV: Field of View)
  • the message "Camera Failed” may appear. It can be a camera restart, for example, with experiments five times per minute.
  • Case 3 Failure of two cameras in the merged image according to FIGS. 6A and 6B. According to the invention of the panorama on two Cameras 2 and 4 are changed in diptych.
  • Case 4 failure of a side camera 1 in the triptych according to FIGS. 7A and 7B.
  • the rear camera 5 can get more field of view on the failed side. It can be a camera restart with 5 attempts per minute. It is also conceivable to send a message, e.g. according to CCM broadcast 914 dec.
  • Case 5 failure of the rear camera 5 in the triptych according to FIGS. 8A and 8B.
  • According to the invention can be changed to an alternative rear view camera. If this is not possible, a message is sent in accordance with CCM 914 dec. It can be a camera restart with 5 attempts per minute.
  • the images of the side cameras 1 and 2 are proportionally displayed with more field of view. The failure of the central image is only in case of unsuccessful restart of the second stereo camera.
  • Triptych according to Figures 10A and 10B.
  • According to the invention can be changed to the return camera 6 for the central image.
  • the image of the side camera 2 is proportionally displayed with more field of view.
  • a message can be sent in accordance with CCM broadcast 785 dec. "Please stop immediately"
  • a restart of the entire system with five attempts per minute is conceivable.
  • Case 8 Failure of all cameras or the display according to FIG. 1 1.
  • According to the invention can be changed to the display of the reversing camera 6 instead of the CMS cameras. This is done with a lower angular resolution, but at least a picture emerges.
  • a message can be sent after CCM broadcast 785 dec. "Please stop immediately" Alternatively, a chime or another warning sound can be heard
  • Case 9 Failure of the primary indicating display 21, in particular according to FIG. 12.
  • the display on the interior mirror display or on the rear-view mirror display 21 is strongly delayed in time or there is a faulty display or there is no display.
  • the central information display (a) The central information display (CID) is used immediately for display.
  • the head unit should switch Prio 1 a panel similar to the parking board and superimpose all other content, so that the customer can still drive to the workshop.
  • Messages are occupied is the freely programmable combination display of the driver format-filling and exclusively to fill with the contents of the rear display.
  • the speed and the gait are displayed via the HUD.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Betriebsverfahren für ein Kamera-Anzeigesystem (40) - insbesondere für ein Fahrzeug (100) - mit einem Kamerasystem (10) mit mehreren Kameraeinheiten (1, 2, 3, 4, 5, 6) und mit einem Anzeigesystem (20) mit einer oder mit mehreren Anzeigeeinheiten (21, 22, 23), bei welchem mit Kameraeinheiten (1, 2, 3, 4, 5, 6) voneinander unabhängige Bilder einer Umgebung erfasst werden und Bilder der Umgebung auf einer Anzeigeeinheit (21, 22, 23) miteinander bildlich kombiniert zur Anzeige gebracht werden, ein Fehlerstatus von Kameraeinheiten (1, 2, 3, 4, 5, 6) erfasst wird und beim Auftreten eines Fehlers bei einer Kameraeinheit (1, 2, 3, 4, 5, 6) die Bilder der Umgebung von Kameraeinheiten (1, 2, 3, 4, 5, 6) ohne Fehler miteinander bildlich kombiniert zur Anzeige gebracht werden. Die Erfindung betrifft ferner ein Kamera-Anzeigesystem (40) sowie ein Fahrzeug (100).

Description

Betriebsverfahren für ein Kamera-Anzeigesystem, Kamera- Anzeigesystem und Fahrzeug Beschreibung
Die vorliegende Erfindung betrifft ein Betriebsverfahren für ein Kamera- Anzeigesystem, insbesondere für ein Fahrzeug, ein Kamera-Anzeigesystem als solches sowie ein Fahrzeug, insbesondere ein Kraftfahrzeug, einen
Personenwagen oder einen Lastkraftwagen. Im Bereich der Fahrzeugtechnik, insbesondere bei Kraftfahrzeugen,
Personenkraftwagen und Lastkraftwagen, wird zur Verbesserung des Komforts und der Sicherheit vermehrt auf Kamera-Anzeigesysteme zurückgegriffen, die dem Benutzer in einfacher Weise eine zuverlässige Sicht auf die Umgebung eines zu Grunde liegenden Fahrzeugs erlauben. Dabei werden häufig
bestehende Spiegelsysteme, zum Beispiel Seitenspiegel und Rückspiegel ersetzt durch Kameras und Monitore. Damit werden der Bewegungsaufwand,
Schulterblick und dergleichen, und die Notwendigkeit, sich auf mehrere
Sichtpunkte zu konzentrieren, reduziert.
Problematisch bei diesem Vorgehen ist jedoch die bisher nicht gelöste
Handhabung von Fehlerfällen, wenn zum Beispiel ein oder mehrere Kameras oder die Anzeige oder Teile davon Defekte aufweisen und eine Anzeige fehlerhaft ist oder ausfällt.
Der Erfindung liegt die Aufgabe zu Grunde, ein Betriebsverfahren für ein Kamera- Anzeigesystem, ein Kamera-Anzeigesystem als solches und ein Fahrzeug zu schaffen, bei welchen mit einfachen Mitteln und in zuverlässiger Weise
Fehlerfälle behandelbar sind und Sicherheitsstandards eingehalten werden können.
Die der Erfindung zu Grunde liegende Aufgabe wird bei einem Betriebsverfahren für ein Kamera-Anzeigesystem erfindungsgemäß mit den Merkmalen des unabhängigen Patentanspruchs 1 , beim Kamera-Anzeigesystem als solchem erfindungsgemäß mit den Merkmalen des unabhängigen Patentanspruchs 8 sowie bei einem Fahrzeug erfindungsgemäß mit den Merkmalen des
unabhängigen Patentanspruchs 10 gelöst. Vorteilhafte Weiterbildungen sind Gegenstand der jeweiligen abhängigen Ansprüche.
Gemäß einem ersten Aspekt der vorliegenden Erfindung wird ein
Betriebsverfahren für ein Kamera-Anzeigesystem, insbesondere für ein Fahrzeug geschaffen, wobei das Kamera-Anzeigesystem mit einem Kamerasystem mit mehreren Kameraeinheiten und mit einem Anzeigesystem mit einer oder mit mehreren Anzeigeeinheiten ausgebildet ist.
Bei dem erfindungsgemäßen Betriebsverfahren werden mit Kameraeinheiten voneinander unabhängige Bilder einer Umgebung erfasst, insbesondere jeweils nach Art einer Abfolge von Einzelbildern, zum Beispiel nach Art eines Films. Es werden Bilder der Umgebung auf einer Anzeigeeinheit, miteinander bildlich kombiniert, zur Anzeige gebracht. Ferner wird ein Fehlerstatus von
Kameraeinheiten erfasst. Erfindungsgemäß werden beim Auftreten eines Fehlers bei einer Kameraeinheit die Bilder der Umgebung von Kameraeinheiten ohne Fehler miteinander bildlich kombiniert und zur Anzeige gebracht. Auf diese Weise kann zuverlässig auf nicht mit Fehlern behaftete Bildquellen zurückgegriffen werden.
Ein besonders hohes Maß an Zuverlässigkeit stellt sich ein, wenn gemäß einer bevorzugten Ausführungsform des erfindungsgemäßen Betriebsverfahrens das Bild einer Kameraeinheit mit Fehler bei einer Anzeige insgesamt nicht berücksichtigt wird. Häufig ist jedoch der Fehler, mit welchem eine Kameraeinheit behaftet ist, nicht derart gravierend, dass die von der fehlerhaften Kameraeinheit erzeugten Bilddaten nicht doch gewinnbringend genutzt werden können. So ist es gemäß einer anderen bevorzugten Ausführungsform vorgesehen, das Bild einer Kameraeinheit mit Fehler bei der Anzeige zumindest teilweise zu
berücksichtigen. Dies setzt voraus, dass durch ein entsprechendes Bewertungsverfahren das Bild der mit einem Fehler behafteten Kamera bewertet wird, bevor es zum Einsatz kommt.
Die zum Einsatz kommenden Kameraeinheiten können unterschiedlich betrieben werden. Dies ist auch davon abhängig, wie die einzelnen Kameraeinheiten relativ zueinander positioniert und/oder orientiert sind.
So ist es bei einer anderen vorteilhaften Ausgestaltungsform des
erfindungsgemäßen Betriebsverfahrens vorgesehen, dass beim Erfassen von Bildern der Umgebung mit einer oder mehreren Kameraeinheiten Bilder der Umgebung mit nicht beschränktem oder erweitertem Sichtfeld erfasst werden; in diesem Fall kommt also das gesamte Sichtfeld der jeweiligen Kameraeinheit beim eigentlichen Erzeugen von Bildern der Umgebung zum Einsatz.
Zusätzlich oder alternativ kann es bei einer anderen Weiterbildung des erfindungsgemäßen Betriebsverfahrens vorgesehen sein, dass beim Erfassen von Bildern der Umgebung mit Kameraeinheiten Bilder der Umgebung mit teilweise überlappendem Sichtfeld erfasst werden. Dies erzeugt primär eine gewisse Redundanz der bildlich aufgezeichneten Information, hat jedoch im Hinblick auf Sicherheitsaspekte des Betriebsverfahrens Vorteile, wie dies auch nachfolgend beschrieben wird, weil beim Ausfall von Kameraeinheiten auf entsprechende Überlappungsbereiche anderer Kameraeinheiten zurückgegriffen werden kann.
Das Anzeigen der durch die Kameraeinheiten aufgezeichneten Bildinformation kann in kombinierter Art und Weise unterschiedlich erfolgen. Grundsätzlich ist die kombinierte bildliche Darstellung nach Art separierter Bilder, zum Beispiel in Form eines Polyptychons - als Verallgemeinerung eines Triptychons für drei Bilder oder eines Diptychons für zwei Bilder auf n Bilder - möglich. Alternativ oder zusätzlich können aus einer Mehrzahl zunächst voneinander getrennter Bilder so genannte Fusionsbilder erzeugt werden, bei welchen miteinander überlappende Bereiche durch an sich bekannte Algorithmen und Rechenverfahren zur Deckung gebracht werden, umso aus einer Mehrzahl zunächst getrennter Bilder der Umgebung ein gemeinsam überdeckendes Gesamtbild zu erzeugen und zur Anzeige zu bringen. So ist es gemäß einer anderen Weiterbildung des erfindungsgemäßen
Verfahrens vorgesehen, dass im fehlerfreien Fall bei der Anzeige Bilder von Kameraeinheiten nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit einer Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit beschränktem Sichtfeld, vorzugsweise beim Überlappen von Sichtfeldern von Kameraeinheiten und/oder erfasster Bilder.
Alternativ oder zusätzlich kann es vorgesehen sein, dass im Fehlerfall bei der Anzeige Bilder von Kameraeinheiten ohne Fehler nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit entsprechend reduzierter Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit nicht beschränktem oder mit erweitertem Sichtfeld.
Das erfindungsgemäße Betriebsverfahren spiegelt im Allgemeinen die Struktur und Konfiguration des zu betreibenden Kamera-Anzeigesystems wieder.
So ist es bei einer anderen Weiterbildung des erfindungsgemäßen
Betriebsverfahrens vorgesehen, dass bei einem zu Grunde liegenden Fahrzeug eine linke Außenspiegelkamera als erste Kameraeinheit, eine rechte
Außenspiegelkamera als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit, insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera und einer zweiten und rechten Kamera, und/oder eine Rückfahrkameraeinheit als Hilfskamera, insbesondere nach Art einer
Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung X des zu Grunde liegenden Fahrzeugs ausgerichtet im Sichtfeld, als Kamerasystem verwendet werden.
Das Sicherheitsniveau des erfindungsgemäßen Betriebsverfahrens kann auch im Hinblick auf die Ansteuerung der Anzeigeeinheiten hilfreich sein.
So ist es bei einer anderen Weiterbildung des erfindungsgemäßen
Betriebsverfahrens vorgesehen, dass beim Vorliegen einer Mehrzahl von Anzeigeeinheiten ein Fehlerstatus von Anzeigeeinheiten erfasst wird und beim Auftreten eines Fehlers bei einer Anzeigeeinheit zum Anzeigen der Bilder eine Anzeigeeinheit ohne Fehler verwendet wird, gegebenenfalls durch Wechseln der verwendeten Anzeigeeinheit, wobei beim Auftreten eines Fehlers bei sämtlichen Anzeigeeinheiten das Erzeugen und das Ausgeben eines - insbesondere akustischen - Warnsignals veranlasst oder ausgeführt werden, insbesondere mittels einer Audioanlage des zu Grunde liegenden Fahrzeugs. Ferner kann es von Vorteil sein, wenn gemäß einer anderen vorteilhaften
Weiterbildung des erfindungsgemäßen Betriebsverfahrens bei einem zu Grunde liegenden Fahrzeug eine Rückspiegelanzeige als erste Anzeigeeinheit, eine Mittelkonsolenanzeige als zweite Anzeigeeinheit und/oder eine
Armaturenbrettanzeige als dritte Anzeigeeinheit als Anzeigesystem verwendet werden.
Dabei kann im Allgemeinen eine so genannte Rückspiegelanzeige als primäre Anzeigeeinheit verwendet werden, weil dies - insbesondere im
Kraftfahrzeugbereich - den Sehgewohnheiten eines Fahrzeugführers entspricht.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird auch ein Kamera-Anzeigesystem - insbesondere für ein Fahrzeug - vorgeschlagen.
Das erfindungsgemäße Kamera-Anzeigesystem ist ausgebildet mit einem Kamerasystem mit mehreren Kameraeinheiten, mit einem Anzeigesystem mit einer oder mit mehreren Anzeigeeinheiten und mit einer Erfassungs- und Steuereinheit, welche über mindestens eine Erfassungs- und Steuerleitung mit dem Kamerasystem und mit dem Anzeigesystem verbunden oder verbindbar ist und welche eingerichtet ist, das erfindungsgemäße Betriebsverfahren auszuführen.
Bei einer vordersten Weiterbildung des erfindungsgemäßen Kamera- Anzeigesystems weist das Kamerasystem eine linke Außenspiegelkamera als erste Kameraeinheit, eine rechte Außenspiegelkamera als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit, insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera und einer zweiten und rechten Kamera, und/oder eine Rückfahrkameraeinheit als Hilfskamera, insbesondere nach Art einer Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung X des zu Grunde liegenden Fahrzeugs ausgerichtetem Sichtfeld auf.
Alternativ oder zusätzlich weist bei dem erfindungsgemäßen Kamera- Anzeigesystem das Anzeigesystem eine Rückspiegelanzeige als erste
Anzeigeeinheit, eine Mittelkonsolenanzeige als zweite Anzeigeeinheit und/oder eine Armaturenbrettanzeige als dritte Anzeigeeinheit auf.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird auch ein Fahrzeug als solches vorgeschlagen, insbesondere ein Kraftfahrzeug, ein Personenkraftwagen oder ein Lastkraftwagen. Das erfindungsgemäße Fahrzeug ist mit einem erfindungsgemäß ausgestalteten Kamera-Anzeigesystem ausgebildet.
Kurzbeschreibung der Figuren
Weitere Einzelheiten, Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung und den Figuren. Figur 1 zeigt schematisch nach Art eines Blockdiagramms eine
Ausführungsform des erfindungsgemäßen Kamera- Anzeigesystems im Zusammenhang mit einem
erfindungsgemäßen Fahrzeug.
Figuren 2 und 3 zeigen eine Ansicht einer Ausführungsform des
erfindungsgemäßen Fahrzeugs von der Seite bzw.
Rückansicht.
Figuren 4A bis 1 1 B illustrieren die Anpassung von Anzeigeergebnissen auf der
Grundlage von Ausführungsformen des erfindungsgemäßen Betriebsverfahrens. Figur 12 zeigt schematisch eine andere Ausführungsform des
erfindungsgemäßen Fahrzeugs mit Fokus auf dessen Innenraum und dem Aufbau des dort vorgesehenen Anzeigesystems. Nachfolgend werden unter Bezugnahme auf die Figuren 1 bis 12
Ausführungsbeispiele und der technische Hintergrund der Erfindung im
Detail beschrieben. Gleiche und äquivalente sowie gleich oder äquivalent wirkende Elemente und Komponenten werden mit denselben
Bezugszeichen bezeichnet. Nicht in jedem Fall ihres Auftretens wird die Detailbeschreibung der bezeichneten Elemente und Komponenten
wiedergegeben.
Die dargestellten Merkmale und weiteren Eigenschaften können in
beliebiger Form voneinander isoliert und beliebig miteinander kombiniert werden, ohne den Kern der Erfindung zu verlassen.
Figur 1 zeigt schematisch nach Art eines Blockdiagramms eine Ausführungsform des erfindungsgemäßen Kamera-Anzeigesystems 40 im Zusammenhang mit einer Ausführungsform des erfindungsgemäßen Fahrzeugs 100.
Die schematische Darstellung der Figur 1 beschreibt nach Art eines
Blockdiagramms den Aufbau eines erfindungsgemäßen Kamera- Anzeigesystems 40 als eine Ausführungsform des erfindungsgemäßen
Fahrzeugs 100.
Das erfindungsgemäße Kamera-Anzeigesystem 40 gemäß Figur 1 besteht dem Kern nach aus einem Kamerasystem 10, einem Anzeigesystem 20 sowie einer Erfassungs- und Steuereinheit 30.
Das Kamerasystem 10 besteht in der Ausführungsform gemäß Figur 1 aus einer ersten Kameraeinheit 1 in Form einer ersten oder linken
Außenspiegelkamera, einer zweiten Kameraeinheit 2 in Form einer zweiten oder rechten Außenspiegelkamera, einer dritten Kameraeinheit 5 nach Art einer Stereokameraeinheit mit einer ersten oder linken Kamera 3 und einer zweiten oder rechten Kamera 4 sowie einer vierten Kameraeinheit 6, welche nach Art einer Rückfahrkameraeinheit mit einer Fischaugenkamera oder einer Kamera mit Fischaugenobjektiv ausgebildet ist und damit eine Weitwinkelansicht liefert. Sämtliche Kameraeinheiten und Kameras 1 bis 6 sind über eine erste Erfassungs- und Steuerleitung 31 mit der Erfassungs- und Steuereinheit wirkungsverbunden, um gesteuert oder geregelt zu werden.
Das Anzeigesystem 20 besteht aus einer ersten Anzeigeeinheit 21 nach Art einer Rückspiegelanzeige oder nach Art eines Rückspiegelmonitors im räumlichen Bereich eines üblicherweise in einem Fahrzeug 100
vorgesehenen Rückspiegels, einer zweiten Anzeigeeinheit 22 nach Art einer Mittelkonsolenanzeige oder nach Art eines Mittelkonsolenmonitors im Bereich einer Mittelkonsole 107 des Fahrzeugs 100 und einer dritten Anzeigeeinheit 23 nach Art einer Armaturenbrettanzeige oder nach Art eines Armaturenbrettmonitors, welche auf der vom Fahrer abgewandten Seite eines Lenkrads 105 des Fahrzeugs 100 angeordnet ist.
Die ersten bis dritten Anzeigeeinheiten 21 , 20, 3 20 des Anzeigesystems 20 sind über eine zweite Erfassungs- und Steuerleitung 32 mit der
Erfassungs- und Steuereinheit 30 wirkungsverbunden, um gesteuert oder geregelt zu werden.
Die Erfassungs- und Steuereinheit 30 ist erfindungsgemäß so ausgestaltet und eingerichtet, eine Ausführungsform des erfindungsgemäßen
Betriebsverfahrens auszuführen und insbesondere dafür zu sorgen, dass beim Auftreten eines Fehlers bei einer der Kameraeinheiten 1 bis 6 Bilder der Umgebung der Kameraeinheiten 1 bis 6 ohne Fehler miteinander bildlich kombiniert an mindestens einer der Anzeigeeinheiten 21 bis 23 zur Anzeige zur Anzeige gebracht werden.
Auf diese Weise ist es möglich, dass auch beim teilweisen oder
vollständigen Ausfall einer oder mehrerer der Kameraeinheiten 1 bis 6 eine für die Sicherheit des Betriebs des Fahrzeugs relevante Anzeige von Bildern der Umgebung an mindestens einer der Anzeigeeinheiten 21 bis 23 des Anzeigesystems 20 möglich ist.
Figuren 2 und 3 zeigen eine Ansicht eine Ausführungsform des
erfindungsgemäßen Fahrzeugs 100 von der Seite bzw. eine Rückansicht. Dargestellt sind dort eine Ausführungsform des erfindungsgemäßen
Kamera-Anzeigesystems 40 und deren Anzeigesystem, Anzeigeeinheiten 21 bis 23 sowie deren Kamerasystem 10 mit Kameraeinheiten 1 sowie 3 bis 6. Vorgesehen ist des Weiteren eine Erfassungs- und Steuereinheit 30
wirkverbunden oder wirkungsverbunden mit dem Anzeigesystem 20 und dem Kamerasystem 10 und deren Komponenten. Die entsprechenden ersten und zweiten Erfassungs- und Steuerleitungen 31 bzw. 32 sind hier nicht explizit dargestellt. Alternativ zu derartigen Leitungen sind auch
drahtlose Verbindungen denkbar.
Figuren 4A bis 1 1 B illustrieren die Anpassung von Anzeigeergebnissen auf der Grundlage von Ausführungsformen des erfindungsgemäßen Betriebsverfahrens.
Die Figuren 4A bis 1 1 B zeigen in schematischer Form die Behandlung verschiedener Fehlerszenarien. Diese werden nachfolgend
zusammenfassend kurz umrissen und weiter unten im Detail dargestellt.
Dabei zeigt eine jeweilige Figur A die fehlerfreie Situation und die Figur B beschreibt die Behandlung des jeweiligen Fehlerfalls.
Bei den mit den Figuren 4 A bis 6 B dargestellten Situationen wird vom
Vorhandensein einer linken Außenspiegelkamera 1 , einer rechten
Außenspiegelkamera 2 und einer Stereokamera 5 mit einer linken Kamera 3 in einer rechten Kamera 4 ausgegangen.
In den Figuren 4A, 5A, 6A erfolgt die Darstellung im fehlerfreien Fall nach Art eines Panoramabildes oder Fusionsbildes, jeweils aus den Bildern der Kameras 1 bis 4. Figur 4B handhabt den Ausfall der rechten Kamera 4 der
Stereokameraeinheit 5, nämlich durch Übergang zu einer Triptychon
Darstellung unter ausschließlicher Verwendung der Bilder der Kameras 1 bis 3. Figur 5B behandelt den Ausfall der linken Außenspiegelkamera 1 mit einem Übergang zu einer Panorama- oder Fusionsdarstellung mit erweitertem Sichtfeld in Bezug auf die Bilder der Kameras 2 bis 4.
Figur 6B illustriert den Fall, dass sowohl die linke Außenspiegelkamera 1 als auch die linke Kamera 3 der Rückfahrkameraeinheit 5 ausgefallen sind, und zwar mit Übergang zu einem Diptychon mit erweitertem Sichtfeld in Bezug auf die Kameras 2 und 4.
Die Figuren 7A bis 10B beschreiben eine Situation, bei welcher neben den rechten und linken Außenspiegelkameras 1 und 2 eine einzelne zentrale Kamera 5 ausgebildet ist, die als solche keine Stereokamera darstellt. Im fehlerfreien Fall wird jeweils von einer kombinierten bildlichen Darstellung nach Art eines Triptychons ausgegangen.
Figur 7B behandelt den Ausfall der linken Außenspiegelkamera 1 mit einem Übergang zu einem Diptychon mit erweitertem Sichtfeld, insbesondere für die zentrale Kamera 5.
Figur 8B beschreibt den Fehlerfall an der zentralen Kamera 5 mit einem Übergang zu einem getrennten Diptychon mit erweitertem Sichtfeld für beide Außenspiegelkameras 1 und 2.
In der Situation gemäß Figur 9B wird der Ausfall beider
Außenspiegelkameras 1 und 2 durch Übergang zu einer Einzelansicht mit erweitertem Sichtfeld für die zentrale Kamera 5 behandelt.
Beim Ausfall sowohl der linken Außenspiegelkamera 1 als auch der zentralen Kamera 5 wird gemäß Figur 10B beim Vorhandensein einer zusätzlichen Rückfahrkamera 6 die Situation nach Art eines Diptychons angezeigt, wobei die rechte Außenspiegelkamera 2 und das Bild der
Rückfahrkamera 6 jeweils mit erweitertem Sichtfeld zum Tragen kommen.
Figur 1 1 behandelt den Fall dass sämtliche regulären Kameras 1 bis 5 ausgefallen sind, jedoch eine Rückfahrkamera 6 ausgebildet ist, deren Bild dann als Panoramabild zur Anzeige gebracht wird. Figur 12 zeigt schematisch eine andere Ausführungsform des
erfindungsgemäßen Fahrzeugs 100 mit Fokus auf dessen Innenraum 103 und dem Aufbau des dort vorgesehenen Anzeigesystems 20.
Bei der Ausführungsform gemäß Figur 12 ist das Anzeigesystem 20 mit einer ersten Anzeigeeinheit 21 nach Art eines Rückspiegelmonitors ausgebildet. Die zweite Anzeigeeinheit 22 ist nach Art einer
Mittelkonsolenanzeige oder nach Art eines Mittelkonsolenmonitors leicht oberhalb der Mittelkonsole auf der Höhe des Armaturenbretts 106 des Fahrzeugs 100 ausgebildet. Die dritte Anzeigeeinheit 23 befindet sich auf der vom Fahrer abgewandten Seite des Lenkrads 105 und ist nach Art einer Armaturenbrettanzeige oder nach Art eines Armaturenbrettmonitors ausgebildet und somit direkt im Bereich des Armaturenbretts 106, zum Beispiel in Überlappung mit oder in der Nachbarschaft zur üblichen
Geschwindigkeitsanzeige. Bei der Ausführungsform gemäß Figur 12 agiert die erste Anzeigeeinheit 21 als primäre Anzeigeeinheit und unterstützt damit das für einen
Fahrzeugführer übliche Beobachtungsverhalten im Hinblick auf die
Rückspiegelanzeige.
Gemäß einer Ausführungsform des erfindungsgemäßen Betriebsverfahrens wird bei einem Fehler im Bereich der ersten Anzeige 21 auf die zweite Anzeigeeinheit 22 und/oder auf die dritte Anzeige einer 23 gewechselt.
Sind sämtliche Anzeigeeinheiten einen 20 bis 23 mit einem Fehler behaftet, so kann optional ein akustisches und/oder haptisches Warnsignal
ausgegeben werden, welches auf diesen Umstand hinweist. Diese und weitere Merkmale und Eigenschaften der vorliegenden
Erfindung werden an Hand der folgenden Darlegungen weiter erläutert:
Die vorliegende Erfindung betrifft insbesondere ein Kraftfahrzeug 100, welches mit mehreren Kameras 1 bis 6 versehen und mit einer
Rechnereinrichtung 30 zum Verarbeiten der Bilder ausgestattet ist. Es wird außerdem ein Verfahren zum Betreiben eines Kamerasystems 10 in einem Kraftfahrzeug 100 angegeben.
Die vorliegende Erfindung schlägt insbesondere ein Degradationskonzept für Kamera-Anzeigesysteme 40 vor. Dieses Degradationskonzept soll unter den folgenden Prämissen in Kraft treten:
(a) Bei einem Bildausfall oder dem Verlust großer Bildteile oder bei zu starker Verschmutzung wird über die gesamte Wirkkette die Störung rechtzeitig erkannt, z.B. mit Hilfe von Watchdogsoftware. (b) Die Architektur des Bordnetzes ermöglicht alternative
Signallaufwege.
Um den vollen Umfang der Erfindung deutlich zu machen, soll das Konzept nun anhand der oben schon einmal beschriebenen Fälle verdeutlicht werden. Fall 1 : Ausfall einer Kamera 4 der Stereokameraanordnung 5 im
fusionierten Bild gemäß den Figuren 4A und 4B. Erfindungsgemäß kann vom Panorama auf das Triptychon mit der ersten
Stereokamera 3 gewechselt werden. Es kann die Meldung „Bildfusion gestört" erscheinen. Fall 2: Ausfall einer Kamera 1 der Seiten im fusionierten Bild gemäß den Figuren 5A und 5B. Erfindungsgemäß kann vom Panorama auf ein teilfusioniertes Bild gewechselt werden. Die Heckkamera 5 bekommt auf der ausgefallenen Seite mehr Sichtfeld (FOV : Field of View). Es kann die Meldung„Kamera ausgefallen" erscheinen. Es kann ein Kameraneustart erfolgen, zum Beispiel mit Versuchen fünfmal pro Minute.
Fall 3: Ausfall zweier Kameras im fusionierten Bild gemäß den Figuren 6A und 6B. Erfindungsgemäß kann vom Panorama auf zwei Kameras 2 und 4 im Diptychon gewechselt werden. Ein
Kameraneustart mit fünf Versuchen pro Minute ist denkbar.
Fall 4: Ausfall einer Seitenkamera 1 im Triptychon gemäß den Figuren 7A und 7B. Erfindungsgemäß kann vom Panorama auf zwei Kameras 2 und 5 Diptychon gewechselt werden. Die Heckkamera 5 kann auf der ausgefallenen Seite mehr Sichtfeld erhalten. Es kann ein Kameraneustart mit 5 Versuchen pro Minute erfolgen. Denkbar ist auch das Absetzen einer Nachricht, z.B. gemäß CCM-Sendung 914 dez. Fall 5: Ausfall der Heckkamera 5 im Triptychon gemäß den Figuren 8A und 8B. Erfindungsgemäß kann auf eine alternative Heckkamera gewechselt werden. Falls das nicht möglich ist, erfolgt eine Meldung gemäß CCM 914 dez. Es kann ein Kamera Neustart mit 5 Versuchen pro Minute erfolgen. Die Bilder der Seitenkameras 1 und 2 werden anteilig mit mehr Sichtfeld angezeigt. Der Ausfall des zentralen Bildes liegt nur beim erfolglosen Neustart der zweiten Stereokamera vor.
Fall 6: Ausfall der zwei Seitenkameras 1 und 2 im Triptychon gemäß den Figuren 9A und 9B. Erfindungsgemäß kann sich der horizontale Öffnungswinkel der verbleibenden Kamera 5 voll öffnen. Eine Nachricht gemäß CCM-Sendung 785 dez.„Bitte sofort anhalten" ist denkbar. Ein Neustart des Gesamtsystems mit 5 Versuchen pro Minute kann erfolgen.
Fall 7: Ausfall einer Seitenkamera 1 und einer Stereokamera 5 beim
Triptychon gemäß den Figuren 10A und 10B. Erfindungsgemäß kann auf die Rückfahrtkamera 6 für das zentrale Bild gewechselt werden. Das Bild der Seitenkamera 2 wird anteilig mit mehr Sichtfeld angezeigt. Es kann eine Meldung gemäß CCM-Sendung 785 dez.„Bitte sofort anhalten" abgesetzt werden. Ein Neustart des Gesamtsystems mit fünf Versuchen pro Minute ist denkbar. Fall 8: Ausfall aller Kameras oder des Displays gemäß Figur 1 1 .
Erfindungsgemäß kann auf die Anzeige der Rückfahrkamera 6 gewechselt werden statt der CMS-Kameras. Dies erfolgt mit einer geringeren Winkelauflösung, aber immerhin entsteht ein Bild. Es kann eine Meldung nach CCM-Sendung 785 dez.„Bitte sofort anhalten" abgesetzt werden. Alternativ können ein Gong oder ein anderer Warnton erklingen. Es kann ein Neustart des
Gesamtsystems mit einer Wiederholrate von fünf pro Minute erfolgen.
Fall 9: Ausfall des primären anzeigenden Displays 21 , insbesondere gemäß Figur 12. Die Anzeige auf dem Innenspiegeldisplay oder auf der Rückspiegelanzeige 21 ist stark zeitlich verzögert oder es kommt zu einer fehlerhaften Darstellung oder es kommt zu keiner Anzeige.
(a) Das zentrale Informationsdisplay (CID) wird umgehend zur Anzeige genutzt. Die Head-Unit soll mit Prio 1 eine Tafel ähnlich der Parktafel schalten und alle anderen Inhalte überlagern, damit der Kunde immer noch zur Werkstatt fahren kann.
(b) Sollte das CID nicht verfügbar oder bereits mit Prio 1
Meldungen belegt sein ist das frei programmierbare Kombidisplay des Fahrers formatfüllend und ausschließlich mit dem Inhalt der rückwärtigen Anzeige zu füllen. Die Anzeige der Geschwindigkeit und des Gangs erfolgt dann über das HUD.
Es stellen sich unter anderem folgende Vorteile ein:
- Ein Liegenbleiben wird vermieden oder über mehrere Defekte lange verzögert, weil mindestens zwei von drei Einrichtungen zur indirekten Sicht (gemäß ECE-R46) intakt bleiben und zur Anzeige führen.
- Der Weg zur Werkstatt kann immer ermöglicht werden, weil sogar nach Ausfall aller CMS-Kameras und mindestens eines Bildschirms die Surroundviewkameras, zum Beispiel im Sinne einer Rückfahrkamera 6, immer noch das gleiche Sichtfeld ermöglichen, wenn auch niedriger aufgelöst. Damit ermöglicht dieses mehrstufige Degradationskonzept quasi immer den Rückweg zur Werkstatt, obwohl mehrere Schäden ein Fahrzeug mit Spiegel längst zum Nothalt gezwungen hätte (beide Spiegel ab).
Bezugszeichenliste: 1 (erste) Kamera, Kameraeinheit, erste oder linke Außenspiegelkamera
2 (zweite) Kamera, Kameraeinheit, zweite oder rechte Außenspiegelkamera
3 Kamera, Kameraeinheit, erste oder linke Kamera der
Stereokameraeinheit 5
4 Kamera, Kameraeinheit, zweite oder rechte Kamera der
Stereokameraeinheit 5
5 (dritte) Kameraeinheit, Stereokameraeinheit
6 (vierte) Kameraeinheit, Rückfahrkameraeinheit
10 Kamerasystem
20 Anzeigesystem
21 (erste) Anzeigeeinheit, Rückspiegelanzeige oder -monitor
22 (zweite) Anzeigeeinheit, Mittelkonsolenanzeige oder -monitor
23 (dritte) Anzeigeeinheit, Armaturenbrettanzeige oder -monitor
30 Erfassungs- und Steuereinheit
31 (erste) Erfassungs- und Steuerleitung
32 (zweite) Erfassungs- und Steuerleitung 40 Kamera-Anzeigesystem
100 Fahrzeug
102 Karosserie
103 Innenraum
104 Rad
105 Lenkrad
106 Armaturenbrett 107 Mittelkonsole
X Fahrzeuglängsrichtung, Fahrtrichtung x Raumrichtungen
y Raumrichtungen
z Raumrichtungen

Claims

Patentansprüche:
Betriebsverfahren für ein Kamera-Anzeigesystem (40) - insbesondere für ein Fahrzeug (100) - mit einem Kamerasystem (10) mit mehreren Kameraeinheiten (1 , 2, 3, 4, 5, 6) und mit einem Anzeigesystem (20) mit einer oder mit mehreren Anzeigeeinheiten (21 , 22, 23), bei welchem
- mit Kameraeinheiten (1 , 2, 3, 4, 5, 6) voneinander unabhängige Bilder einer Umgebung erfasst werden und
- Bilder der Umgebung auf einer Anzeigeeinheit (21 , 22, 23) miteinander bildlich kombiniert zur Anzeige gebracht werden,
- ein Fehlerstatus von Kameraeinheiten (1 , 2, 3, 4, 5, 6) erfasst wird und
- beim Auftreten eines Fehlers bei einer Kameraeinheit (1 , 2, 3, 4, 5, 6) die Bilder der Umgebung von Kameraeinheiten (1 , 2, 3, 4, 5, 6) ohne Fehler miteinander bildlich kombiniert zur Anzeige gebracht werden.
Betriebsverfahren nach Anspruch 1 ,
bei welchem das Bild einer Kameraeinheit (1 , 2, 3, 4, 5, 6) mit Fehler bei der Anzeige nicht oder nur teilweise berücksichtigt wird.
Betriebsverfahren nach einem der vorangehenden Ansprüche, bei welchem beim Erfassen von Bildern der Umgebung
- mit Kameraeinheiten (1 , 2, 3, 4, 5, 6) Bilder der Umgebung mit nicht beschränktem oder erweitertem Sichtfeld erfasst werden und/oder
- mit Kameraeinheiten (1 , 2, 3, 4, 5, 6) Bilder der Umgebung mit teilweise überlappendem Sichtfeld erfasst werden.
Betriebsverfahren nach einem der vorangehenden Ansprüche, bei welchem
- im fehlerfreien Fall bei der Anzeige Bilder von Kameraeinheiten (1 , 2, 3, 4, 5, 6) nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit einer Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit beschränktem Sichtfeld, vorzugsweise beim Uberlappen von Sichtfeldern von Kameraeinheiten (1 , 2, 3, 4, 5, 6) und erfasster Bilder, und/oder
- im Fehlerfall bei der Anzeige Bilder von Kameraeinheiten (1 , 2, 3, 4, 5, 6) ohne Fehler nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit entsprechend reduzierter Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit nicht beschränktem oder mit erweitertem Sichtfeld.
Betriebsverfahren nach einem der vorangehenden Ansprüche,
bei welchem bei einem zu Grunde liegenden Fahrzeug (100) eine linke Außenspiegelkamera (1 ) als erste Kameraeinheit, eine rechte Außenspiegelkamera (2) als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit (5), insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera (3) und einer zweiten und rechten Kamera (4), und/oder eine Rückfahrkameraeinheit (6) als Hilfskamera, insbesondere nach Art einer Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung (X) des zu Grunde liegenden Fahrzeugs (100) ausgerichtet im Sichtfeld, als Kamerasystem (10) verwendet werden.
Betriebsverfahren nach einem der vorangehenden Ansprüche, bei welchem beim Vorliegen einer Mehrzahl von Anzeigeeinheiten (21 , 22, 23)
- ein Fehlerstatus von Anzeigeeinheiten (21 , 22, 23) erfasst wird und
- beim Auftreten eines Fehlers bei einer Anzeigeeinheit (21 , 22, 23) zum Anzeigen der Bilder eine Anzeigeeinheit (21 , 22, 23) ohne Fehler verwendet wird, gegebenenfalls durch Wechseln der verwendeten Anzeigeeinheit (21 , 22, 23)
- wobei beim Auftreten eines Fehlers bei sämtlichen Anzeigeeinheiten (21 , 22, 23) das Erzeugen und das Ausgeben eines - insbesondere akustischen - Warnsignals veranlasst oder ausgeführt werden, insbesondere mittels einer Audioanlage des zu Grunde liegenden Fahrzeugs (100). Betriebsverfahren nach einem der vorangehenden Ansprüche,
bei welchem bei einem zu Grunde liegenden Fahrzeug (100) eine Rückspiegelanzeige (21 ) als erste Anzeigeeinheit, eine Mittelkonsolenanzeige (22) als zweite Anzeigeeinheit und/oder eine Armaturenbrettanzeige (23) als dritte Anzeigeeinheit als Anzeigesystem (20) verwendet werden.
Kamera-Anzeigesystem (40), insbesondere für ein Fahrzeug (100), mit:
- einem Kamerasystem (10) mit mehreren Kameraeinheiten (1 , 2, 3, 4,
5, 6),
- einem Anzeigesystem (20) mit einer oder mit mehreren Anzeigeeinheiten (21 , 22, 23) und
- einer Erfassungs- und Steuereinheit (30), welche über mindestens eine Erfassungs- und Steuerleitung (31 , 32) mit dem Kamerasystem (10) und mit dem Anzeigesystem (20) verbunden oder verbindbar ist und welche eingerichtet ist, ein Betriebsverfahren nach einem der Ansprüche 1 bis 7 auszuführen.
Kamera-Anzeigesystem (40) nach Anspruch 8, bei welchem
- das Kamerasystem (10) eine linke Außenspiegelkamera (1 ) als erste Kameraeinheit, eine rechte Außenspiegelkamera (2) als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit (5), insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera (3) und einer zweiten und rechten Kamera (4), und/oder eine Rückfahrkameraeinheit (6) als Hilfskamera, insbesondere nach Art einer Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung (X) des zu Grunde liegenden Fahrzeugs (100) ausgerichtetem Sichtfeld aufweist und/oder
- das Anzeigesystem (20) eine Rückspiegelanzeige (21 ) als erste Anzeigeeinheit, eine Mittelkonsolenanzeige (22) als zweite Anzeigeeinheit und/oder eine Armaturenbrettanzeige (23) als dritte Anzeigeeinheit aufweist.
10. Fahrzeug (100) und insbesondere Kraftfahrzeug, Personenkraftwagen oder Lastkraftwagen, welches mit einem Kamera-Anzeigesystem (40) nach Anspruch 8 oder 9 ausgebildet ist.
EP18710004.5A 2017-03-14 2018-03-06 Betriebsverfahren für ein kamera-anzeigesystem, kamera-anzeigesystem und fahrzeug Withdrawn EP3596920A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102017204168.4A DE102017204168B4 (de) 2017-03-14 2017-03-14 Betriebsverfahren für ein Kamera-Anzeigesystem, Kamera-Anzeigesystem und Fahrzeug
PCT/EP2018/055451 WO2018166841A1 (de) 2017-03-14 2018-03-06 Betriebsverfahren für ein kamera-anzeigesystem, kamera-anzeigesystem und fahrzeug

Publications (1)

Publication Number Publication Date
EP3596920A1 true EP3596920A1 (de) 2020-01-22

Family

ID=61616998

Family Applications (1)

Application Number Title Priority Date Filing Date
EP18710004.5A Withdrawn EP3596920A1 (de) 2017-03-14 2018-03-06 Betriebsverfahren für ein kamera-anzeigesystem, kamera-anzeigesystem und fahrzeug

Country Status (5)

Country Link
US (1) US20200007790A1 (de)
EP (1) EP3596920A1 (de)
CN (1) CN110115031A (de)
DE (1) DE102017204168B4 (de)
WO (1) WO2018166841A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210100431A (ko) * 2020-02-06 2021-08-17 삼성전기주식회사 차량용 카메라 시스템
DE102021132018B3 (de) 2021-12-06 2022-12-22 Audi Aktiengesellschaft Verfahren und System zum Darstellen einer Umgebung eines Fahrzeugs

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10012023A1 (de) 2000-03-11 2001-09-20 Bosch Gmbh Robert Verfahren zur Überwachung der Funktion einer optischen Anzeige
DE102013220506A1 (de) * 2013-10-11 2015-04-16 Application Solutions (Electronics and Vision) Ltd. Ausfallsicheres Kamerasystem
JP6330383B2 (ja) * 2014-03-12 2018-05-30 株式会社デンソー 合成画像生成装置、および合成画像生成プログラム
DE102014106035A1 (de) * 2014-04-30 2015-11-05 Connaught Electronics Ltd. Verfahren zum Betreiben eines Fahrerassistenzsystems mit einem elektronischen Rückspiegel, Fahrerassistenzsystem und Kraftfahrzeug
DE102014224795A1 (de) * 2014-12-03 2016-06-09 Conti Temic Microelectronic Gmbh Verfahren und System zum Darstellen einer Fahrzeugumgebung eines Kraftfahrzeuges auf einer im Kraftfahrzeug angeordneten Anzeigevorrichtung

Also Published As

Publication number Publication date
CN110115031A (zh) 2019-08-09
DE102017204168B4 (de) 2024-07-18
US20200007790A1 (en) 2020-01-02
WO2018166841A1 (de) 2018-09-20
DE102017204168A1 (de) 2018-09-20

Similar Documents

Publication Publication Date Title
DE102016213045B4 (de) System und verfahren zum bereitstellen von bildinformationen einer fahrzeugumgebung
DE102011079913A1 (de) Sichtunterstützungssystem für einen Fahrer und Fahrzeug mit einem solchen System
EP3176047B1 (de) Betriebssystem für den fahrbetrieb eines fahrzeugs, insbesondere eines nutzfahrzeugs
EP3833575B1 (de) Kameraüberwachungssystem
EP3539826B1 (de) Fahrerassistenzsystem sowie verfahren für ein kraftfahrzeug zum anzeigen einer erweiterten realität
DE102014106035A1 (de) Verfahren zum Betreiben eines Fahrerassistenzsystems mit einem elektronischen Rückspiegel, Fahrerassistenzsystem und Kraftfahrzeug
DE102018212286A1 (de) Verfahren und Vorrichtung zur Unterstützung einer Aufmerksamkeit und/oder Fahrbereitschaft eines Fahrers bei einem automatisierten Fahrvorgang eines Fahrzeugs
WO2016005232A1 (de) Zusammenfügen von teilbildern zu einem abbild einer umgebung eines fortbewegungsmittels
DE102013001326A1 (de) Kraftwagen mit Car-to-X-Funktionalität
DE102019118604A1 (de) Systeme und verfahren zur steuerung von fahrzeugfunktionen über fahrer- und fahrgast-hud
DE102013220506A1 (de) Ausfallsicheres Kamerasystem
DE102015101183A1 (de) Verfahren zum Betreiben eines Fahrerassistenzsystems eines Kraftfahrzeugs mit Anzeige von Umgebungsdaten in einem autonomen Fahrmodus, Fahrerassistenzsystem sowie Kraftfahrzeug
DE102018121917A1 (de) Fahrzeugkommunikationsverwaltungssysteme und -verfahren
DE102019217273A1 (de) Fahrzeuginterne Informationsanzeigevorrichtung und Verfahren zum Steuern derselben
WO2016086929A1 (de) Verfahren und system zum darstellen einer fahrzeugumgebung eines kraftfahrzeuges auf einer im kraftfahrzeug angeordneten anzeigevorrichtung
DE102017204168B4 (de) Betriebsverfahren für ein Kamera-Anzeigesystem, Kamera-Anzeigesystem und Fahrzeug
DE102016221380A1 (de) Seiten- und Rückwärts-Überwachungssystem eines Fahrzeugs mit ausfallsicherer Funktion und Verfahren hiervon
DE102017116628A1 (de) Anzeigevorrichtug für ein fahrzeug
DE102020118631B4 (de) Elektronisches Spiegelsystem für ein Fahrzeug
DE102019118183A1 (de) System und Verfahren zur Information
EP3162635A1 (de) Kamerabasiertes anzeigesystem
DE102018203951A1 (de) Verfahren zum Darstellen eines Umgebungsbereichs eines Kraftfahrzeugs einer Fahrzeugkolonne, sowie Fahrerassistenzsystem
DE102020135098B4 (de) Fahrzeuganzeigesteuervorrichtung, fahrzeuganzeigesteuersystem und fahrzeuganzeigesteuerverfahren
DE102016221791B4 (de) Spiegelersatzsystem sowie Verfahren zum Betrieb eines Spiegelersatzsystems für ein Fahrzeug
DE102019207181B4 (de) Verfahren zum Betreiben einer Anzeigevorrichtung eines vollautonomen Kraftfahrzeugs, Steuereinrichtung, und vollautonomes Kraftfahrzeug

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20190507

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20210125

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN WITHDRAWN

18W Application withdrawn

Effective date: 20220707