EP3596920A1 - Operating method for a camera display system, camera display system, and vehicle - Google Patents

Operating method for a camera display system, camera display system, and vehicle

Info

Publication number
EP3596920A1
EP3596920A1 EP18710004.5A EP18710004A EP3596920A1 EP 3596920 A1 EP3596920 A1 EP 3596920A1 EP 18710004 A EP18710004 A EP 18710004A EP 3596920 A1 EP3596920 A1 EP 3596920A1
Authority
EP
European Patent Office
Prior art keywords
camera
display
unit
units
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP18710004.5A
Other languages
German (de)
French (fr)
Inventor
Philipp Hoffmann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Publication of EP3596920A1 publication Critical patent/EP3596920A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B60K2360/84—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system

Abstract

The invention relates to an operating method for a camera display system (40), in particular for a vehicle (100), comprising a camera system (10) with multiple camera units (1, 2, 3, 4, 5, 6) and a display system (20) with one or more display units (21, 22, 23). Independent images of a surrounding area are captured using the camera units (1, 2, 3, 4, 5, 6), and images of the surrounding area are displayed in a visually combined manner on a display unit (21, 22, 23). An error status of camera units (1, 2, 3, 4, 5, 6) is detected, and if an error has occurred in a camera unit (1, 2, 3, 4, 5, 6), the images of the surrounding area captured by camera units (1, 2, 3, 4, 5, 6) without errors are displayed in a visually combined manner. The invention additionally relates to a camera display system (40) and a vehicle (100).

Description

Betriebsverfahren für ein Kamera-Anzeigesystem, Kamera- Anzeigesystem und Fahrzeug Beschreibung  Operating Procedures for a Camera Display System, Camera Display System and Vehicle Description
Die vorliegende Erfindung betrifft ein Betriebsverfahren für ein Kamera- Anzeigesystem, insbesondere für ein Fahrzeug, ein Kamera-Anzeigesystem als solches sowie ein Fahrzeug, insbesondere ein Kraftfahrzeug, einen  The present invention relates to an operating method for a camera display system, in particular for a vehicle, a camera display system as such and a vehicle, in particular a motor vehicle, a
Personenwagen oder einen Lastkraftwagen. Im Bereich der Fahrzeugtechnik, insbesondere bei Kraftfahrzeugen, Passenger car or a truck. In the field of vehicle technology, especially in motor vehicles,
Personenkraftwagen und Lastkraftwagen, wird zur Verbesserung des Komforts und der Sicherheit vermehrt auf Kamera-Anzeigesysteme zurückgegriffen, die dem Benutzer in einfacher Weise eine zuverlässige Sicht auf die Umgebung eines zu Grunde liegenden Fahrzeugs erlauben. Dabei werden häufig  Passenger cars and trucks, is increasingly used to improve comfort and safety on camera display systems that allow the user in a simple manner, a reliable view of the environment of an underlying vehicle. It will be common
bestehende Spiegelsysteme, zum Beispiel Seitenspiegel und Rückspiegel ersetzt durch Kameras und Monitore. Damit werden der Bewegungsaufwand, existing mirror systems, for example side mirrors and rear-view mirrors replaced by cameras and monitors. Thus, the movement effort,
Schulterblick und dergleichen, und die Notwendigkeit, sich auf mehrere Shoulder glance and the like, and the need to concentrate on several
Sichtpunkte zu konzentrieren, reduziert. Focusing viewpoints is reduced.
Problematisch bei diesem Vorgehen ist jedoch die bisher nicht gelöste The problem with this approach, however, is not yet solved
Handhabung von Fehlerfällen, wenn zum Beispiel ein oder mehrere Kameras oder die Anzeige oder Teile davon Defekte aufweisen und eine Anzeige fehlerhaft ist oder ausfällt. Handling of error cases, for example, if one or more cameras or the display or parts thereof have defects and a display is faulty or fails.
Der Erfindung liegt die Aufgabe zu Grunde, ein Betriebsverfahren für ein Kamera- Anzeigesystem, ein Kamera-Anzeigesystem als solches und ein Fahrzeug zu schaffen, bei welchen mit einfachen Mitteln und in zuverlässiger Weise The invention has for its object to provide an operating method for a camera display system, a camera display system as such and a vehicle, in which by simple means and in a reliable manner
Fehlerfälle behandelbar sind und Sicherheitsstandards eingehalten werden können. Error cases are treatable and safety standards can be met.
Die der Erfindung zu Grunde liegende Aufgabe wird bei einem Betriebsverfahren für ein Kamera-Anzeigesystem erfindungsgemäß mit den Merkmalen des unabhängigen Patentanspruchs 1 , beim Kamera-Anzeigesystem als solchem erfindungsgemäß mit den Merkmalen des unabhängigen Patentanspruchs 8 sowie bei einem Fahrzeug erfindungsgemäß mit den Merkmalen des The object underlying the invention is in an operating method for a camera display system according to the invention with the features of independent claim 1, the camera display system as such according to the invention with the features of independent claim 8 and in a vehicle according to the invention with the features of
unabhängigen Patentanspruchs 10 gelöst. Vorteilhafte Weiterbildungen sind Gegenstand der jeweiligen abhängigen Ansprüche. independent claim 10 solved. Advantageous developments are the subject of the respective dependent claims.
Gemäß einem ersten Aspekt der vorliegenden Erfindung wird ein According to a first aspect of the present invention is a
Betriebsverfahren für ein Kamera-Anzeigesystem, insbesondere für ein Fahrzeug geschaffen, wobei das Kamera-Anzeigesystem mit einem Kamerasystem mit mehreren Kameraeinheiten und mit einem Anzeigesystem mit einer oder mit mehreren Anzeigeeinheiten ausgebildet ist. Operating method for a camera display system, in particular created for a vehicle, wherein the camera display system is formed with a camera system with a plurality of camera units and with a display system with one or more display units.
Bei dem erfindungsgemäßen Betriebsverfahren werden mit Kameraeinheiten voneinander unabhängige Bilder einer Umgebung erfasst, insbesondere jeweils nach Art einer Abfolge von Einzelbildern, zum Beispiel nach Art eines Films. Es werden Bilder der Umgebung auf einer Anzeigeeinheit, miteinander bildlich kombiniert, zur Anzeige gebracht. Ferner wird ein Fehlerstatus von In the operating method according to the invention, camera units are used to acquire images of an environment which are independent of one another, in particular in the manner of a sequence of individual images, for example in the manner of a film. Images of the environment are displayed on a display unit, combined with each other. Furthermore, an error status of
Kameraeinheiten erfasst. Erfindungsgemäß werden beim Auftreten eines Fehlers bei einer Kameraeinheit die Bilder der Umgebung von Kameraeinheiten ohne Fehler miteinander bildlich kombiniert und zur Anzeige gebracht. Auf diese Weise kann zuverlässig auf nicht mit Fehlern behaftete Bildquellen zurückgegriffen werden.  Captured camera units. According to the invention, when an error occurs in a camera unit, the images of the surroundings of camera units are combined with one another without error and displayed. This makes it possible to reliably fall back on non-defective image sources.
Ein besonders hohes Maß an Zuverlässigkeit stellt sich ein, wenn gemäß einer bevorzugten Ausführungsform des erfindungsgemäßen Betriebsverfahrens das Bild einer Kameraeinheit mit Fehler bei einer Anzeige insgesamt nicht berücksichtigt wird. Häufig ist jedoch der Fehler, mit welchem eine Kameraeinheit behaftet ist, nicht derart gravierend, dass die von der fehlerhaften Kameraeinheit erzeugten Bilddaten nicht doch gewinnbringend genutzt werden können. So ist es gemäß einer anderen bevorzugten Ausführungsform vorgesehen, das Bild einer Kameraeinheit mit Fehler bei der Anzeige zumindest teilweise zu A particularly high degree of reliability arises when, according to a preferred embodiment of the operating method according to the invention, the image of a camera unit with an error in a display is not taken into consideration altogether. Frequently, however, the error with which a camera unit is affected is not so serious that the image data generated by the defective camera unit can not be profitably used. Thus, it is provided according to another preferred embodiment, the image of a camera unit with error in the display at least partially
berücksichtigen. Dies setzt voraus, dass durch ein entsprechendes Bewertungsverfahren das Bild der mit einem Fehler behafteten Kamera bewertet wird, bevor es zum Einsatz kommt. consider. This assumes that by an appropriate Assessment method the image of the faulty camera is evaluated before it is used.
Die zum Einsatz kommenden Kameraeinheiten können unterschiedlich betrieben werden. Dies ist auch davon abhängig, wie die einzelnen Kameraeinheiten relativ zueinander positioniert und/oder orientiert sind. The camera units used can be operated differently. This is also dependent on how the individual camera units are positioned and / or oriented relative to each other.
So ist es bei einer anderen vorteilhaften Ausgestaltungsform des So it is in another advantageous embodiment of the
erfindungsgemäßen Betriebsverfahrens vorgesehen, dass beim Erfassen von Bildern der Umgebung mit einer oder mehreren Kameraeinheiten Bilder der Umgebung mit nicht beschränktem oder erweitertem Sichtfeld erfasst werden; in diesem Fall kommt also das gesamte Sichtfeld der jeweiligen Kameraeinheit beim eigentlichen Erzeugen von Bildern der Umgebung zum Einsatz. Operating method according to the invention provided that when capturing images of the environment with one or more camera units images of the environment are detected with unrestricted or extended field of view; In this case, therefore, the entire field of view of the respective camera unit is used in the actual generation of images of the environment.
Zusätzlich oder alternativ kann es bei einer anderen Weiterbildung des erfindungsgemäßen Betriebsverfahrens vorgesehen sein, dass beim Erfassen von Bildern der Umgebung mit Kameraeinheiten Bilder der Umgebung mit teilweise überlappendem Sichtfeld erfasst werden. Dies erzeugt primär eine gewisse Redundanz der bildlich aufgezeichneten Information, hat jedoch im Hinblick auf Sicherheitsaspekte des Betriebsverfahrens Vorteile, wie dies auch nachfolgend beschrieben wird, weil beim Ausfall von Kameraeinheiten auf entsprechende Überlappungsbereiche anderer Kameraeinheiten zurückgegriffen werden kann. Additionally or alternatively, it can be provided in another development of the operating method according to the invention that when capturing images of the environment with camera units images of the environment are detected with partially overlapping field of view. This primarily provides some redundancy of the imaged information, but has advantages in terms of security aspects of the operating method, as will also be described below, because when camera units fail, corresponding overlapping areas of other camera units can be used.
Das Anzeigen der durch die Kameraeinheiten aufgezeichneten Bildinformation kann in kombinierter Art und Weise unterschiedlich erfolgen. Grundsätzlich ist die kombinierte bildliche Darstellung nach Art separierter Bilder, zum Beispiel in Form eines Polyptychons - als Verallgemeinerung eines Triptychons für drei Bilder oder eines Diptychons für zwei Bilder auf n Bilder - möglich. Alternativ oder zusätzlich können aus einer Mehrzahl zunächst voneinander getrennter Bilder so genannte Fusionsbilder erzeugt werden, bei welchen miteinander überlappende Bereiche durch an sich bekannte Algorithmen und Rechenverfahren zur Deckung gebracht werden, umso aus einer Mehrzahl zunächst getrennter Bilder der Umgebung ein gemeinsam überdeckendes Gesamtbild zu erzeugen und zur Anzeige zu bringen. So ist es gemäß einer anderen Weiterbildung des erfindungsgemäßen The display of the image information recorded by the camera units may be performed differently in a combined manner. Basically, the combined pictorial representation in the form of separated images, for example in the form of a polyptych - as a generalization of a triptych for three images or a diptych for two images on n images - possible. Alternatively or additionally, so-called fusion images can be generated from a plurality of images initially separated from one another, in which mutually overlapping regions are brought to coincidence by algorithms and computation methods known per se, in order to generate a jointly overlapping overall image from a plurality of initially separate images of the environment to bring to the display. So it is according to another embodiment of the invention
Verfahrens vorgesehen, dass im fehlerfreien Fall bei der Anzeige Bilder von Kameraeinheiten nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit einer Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit beschränktem Sichtfeld, vorzugsweise beim Überlappen von Sichtfeldern von Kameraeinheiten und/oder erfasster Bilder. Provided that in the error-free case in the display images of camera units in the manner of a fusion image or in the manner of a polyptych combined with a number of individual images are displayed, in particular with limited field of view, preferably overlapping fields of view of camera units and / or captured images ,
Alternativ oder zusätzlich kann es vorgesehen sein, dass im Fehlerfall bei der Anzeige Bilder von Kameraeinheiten ohne Fehler nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit entsprechend reduzierter Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit nicht beschränktem oder mit erweitertem Sichtfeld. Alternatively or additionally, it can be provided that in the event of an error in the display images of camera units without error in the manner of a fusion image or in the manner of a polyptych combined with a correspondingly reduced number of frames are displayed, in particular with unrestricted or with extended field of view.
Das erfindungsgemäße Betriebsverfahren spiegelt im Allgemeinen die Struktur und Konfiguration des zu betreibenden Kamera-Anzeigesystems wieder. The operating method according to the invention generally reflects the structure and configuration of the camera display system to be operated.
So ist es bei einer anderen Weiterbildung des erfindungsgemäßen So it is in another embodiment of the invention
Betriebsverfahrens vorgesehen, dass bei einem zu Grunde liegenden Fahrzeug eine linke Außenspiegelkamera als erste Kameraeinheit, eine rechte Operation method provided that in a vehicle underlying a left wing mirror camera as the first camera unit, a right
Außenspiegelkamera als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit, insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera und einer zweiten und rechten Kamera, und/oder eine Rückfahrkameraeinheit als Hilfskamera, insbesondere nach Art einer Exterior mirror camera as a second camera unit and a centrally arranged third camera unit, in particular in the manner of a stereo camera unit with a first and left camera and a second and right camera, and / or a reversing camera unit as an auxiliary camera, in particular in the manner of a
Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung X des zu Grunde liegenden Fahrzeugs ausgerichtet im Sichtfeld, als Kamerasystem verwendet werden.  Fisheye camera and / or in each case with substantially opposite to a main direction of travel X of the underlying vehicle aligned in the field of view, be used as a camera system.
Das Sicherheitsniveau des erfindungsgemäßen Betriebsverfahrens kann auch im Hinblick auf die Ansteuerung der Anzeigeeinheiten hilfreich sein. The security level of the operating method according to the invention can also be helpful with regard to the control of the display units.
So ist es bei einer anderen Weiterbildung des erfindungsgemäßen So it is in another embodiment of the invention
Betriebsverfahrens vorgesehen, dass beim Vorliegen einer Mehrzahl von Anzeigeeinheiten ein Fehlerstatus von Anzeigeeinheiten erfasst wird und beim Auftreten eines Fehlers bei einer Anzeigeeinheit zum Anzeigen der Bilder eine Anzeigeeinheit ohne Fehler verwendet wird, gegebenenfalls durch Wechseln der verwendeten Anzeigeeinheit, wobei beim Auftreten eines Fehlers bei sämtlichen Anzeigeeinheiten das Erzeugen und das Ausgeben eines - insbesondere akustischen - Warnsignals veranlasst oder ausgeführt werden, insbesondere mittels einer Audioanlage des zu Grunde liegenden Fahrzeugs. Ferner kann es von Vorteil sein, wenn gemäß einer anderen vorteilhaftenOperating method provided that in the presence of a plurality of display units, an error status of display units is detected and when an error occurs in a display unit for displaying the images, a display unit is used without errors, possibly by changing the used display unit, wherein upon the occurrence of an error in all display units, the generation and output of a - especially acoustic - warning signal causes or executed, in particular by means of an audio system of the underlying vehicle. Furthermore, it may be advantageous if, according to another advantageous
Weiterbildung des erfindungsgemäßen Betriebsverfahrens bei einem zu Grunde liegenden Fahrzeug eine Rückspiegelanzeige als erste Anzeigeeinheit, eine Mittelkonsolenanzeige als zweite Anzeigeeinheit und/oder eine Development of the operating method according to the invention in a vehicle underlying a rearview mirror display as a first display unit, a center console display as a second display unit and / or a
Armaturenbrettanzeige als dritte Anzeigeeinheit als Anzeigesystem verwendet werden. Dashboard display can be used as a third display unit as a display system.
Dabei kann im Allgemeinen eine so genannte Rückspiegelanzeige als primäre Anzeigeeinheit verwendet werden, weil dies - insbesondere im In this case, a so-called rearview mirror display can be used as the primary display unit in general because this - especially in
Kraftfahrzeugbereich - den Sehgewohnheiten eines Fahrzeugführers entspricht. Motor vehicle sector - the viewing habits of a driver corresponds.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird auch ein Kamera-Anzeigesystem - insbesondere für ein Fahrzeug - vorgeschlagen. According to a further aspect of the present invention, a camera display system is also proposed, in particular for a vehicle.
Das erfindungsgemäße Kamera-Anzeigesystem ist ausgebildet mit einem Kamerasystem mit mehreren Kameraeinheiten, mit einem Anzeigesystem mit einer oder mit mehreren Anzeigeeinheiten und mit einer Erfassungs- und Steuereinheit, welche über mindestens eine Erfassungs- und Steuerleitung mit dem Kamerasystem und mit dem Anzeigesystem verbunden oder verbindbar ist und welche eingerichtet ist, das erfindungsgemäße Betriebsverfahren auszuführen. The camera display system according to the invention is configured with a camera system with a plurality of camera units, with a display system with one or more display units and with a detection and control unit which is connected or connectable via at least one detection and control line to the camera system and the display system and which is arranged to carry out the operating method according to the invention.
Bei einer vordersten Weiterbildung des erfindungsgemäßen Kamera- Anzeigesystems weist das Kamerasystem eine linke Außenspiegelkamera als erste Kameraeinheit, eine rechte Außenspiegelkamera als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit, insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera und einer zweiten und rechten Kamera, und/oder eine Rückfahrkameraeinheit als Hilfskamera, insbesondere nach Art einer Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung X des zu Grunde liegenden Fahrzeugs ausgerichtetem Sichtfeld auf. In a most advanced development of the camera display system according to the invention, the camera system has a left exterior mirror camera as a first camera unit, a right exterior mirror camera as a second camera unit and a centrally arranged third camera unit, in particular in the manner of a stereo camera unit with a first and left camera and a second and right camera, and / or a reversing camera unit as an auxiliary camera, in particular in the manner of a fisheye camera and / or in each case with im Substantially counter to a main direction of travel X of the underlying vehicle aligned field of view.
Alternativ oder zusätzlich weist bei dem erfindungsgemäßen Kamera- Anzeigesystem das Anzeigesystem eine Rückspiegelanzeige als erste Alternatively or additionally, in the camera display system according to the invention, the display system has a rearview mirror display as the first
Anzeigeeinheit, eine Mittelkonsolenanzeige als zweite Anzeigeeinheit und/oder eine Armaturenbrettanzeige als dritte Anzeigeeinheit auf. Display unit, a center console display as a second display unit and / or a dashboard display as a third display unit.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird auch ein Fahrzeug als solches vorgeschlagen, insbesondere ein Kraftfahrzeug, ein Personenkraftwagen oder ein Lastkraftwagen. Das erfindungsgemäße Fahrzeug ist mit einem erfindungsgemäß ausgestalteten Kamera-Anzeigesystem ausgebildet. According to a further aspect of the present invention, a vehicle is proposed as such, in particular a motor vehicle, a passenger car or a truck. The vehicle according to the invention is designed with a camera display system designed according to the invention.
Kurzbeschreibung der Figuren Brief description of the figures
Weitere Einzelheiten, Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung und den Figuren. Figur 1 zeigt schematisch nach Art eines Blockdiagramms eine Further details, features and advantages of the invention will become apparent from the following description and the figures. Figure 1 shows schematically in the manner of a block diagram a
Ausführungsform des erfindungsgemäßen Kamera- Anzeigesystems im Zusammenhang mit einem  Embodiment of the camera display system according to the invention in connection with a
erfindungsgemäßen Fahrzeug.  vehicle according to the invention.
Figuren 2 und 3 zeigen eine Ansicht einer Ausführungsform des Figures 2 and 3 show a view of an embodiment of the
erfindungsgemäßen Fahrzeugs von der Seite bzw.  inventive vehicle from the side or
Rückansicht.  Rear View.
Figuren 4A bis 1 1 B illustrieren die Anpassung von Anzeigeergebnissen auf der FIGS. 4A to 1 B illustrate the adaptation of display results to FIG
Grundlage von Ausführungsformen des erfindungsgemäßen Betriebsverfahrens. Figur 12 zeigt schematisch eine andere Ausführungsform des  Basis of embodiments of the operating method according to the invention. FIG. 12 schematically shows another embodiment of the invention
erfindungsgemäßen Fahrzeugs mit Fokus auf dessen Innenraum und dem Aufbau des dort vorgesehenen Anzeigesystems. Nachfolgend werden unter Bezugnahme auf die Figuren 1 bis 12 inventive vehicle with focus on the interior and the structure of the display system provided there. Hereinafter, with reference to FIGS. 1 to 12
Ausführungsbeispiele und der technische Hintergrund der Erfindung im Exemplary embodiments and the technical background of the invention in
Detail beschrieben. Gleiche und äquivalente sowie gleich oder äquivalent wirkende Elemente und Komponenten werden mit denselben Detail described. Equal and equivalent as well as equivalent or equivalent elements and components are used with the same
Bezugszeichen bezeichnet. Nicht in jedem Fall ihres Auftretens wird die Detailbeschreibung der bezeichneten Elemente und Komponenten Reference numeral. Not in every case of their occurrence is the detailed description of the designated elements and components
wiedergegeben. played.
Die dargestellten Merkmale und weiteren Eigenschaften können in The illustrated features and other features can be found in
beliebiger Form voneinander isoliert und beliebig miteinander kombiniert werden, ohne den Kern der Erfindung zu verlassen. any form isolated from each other and combined with each other, without departing from the gist of the invention.
Figur 1 zeigt schematisch nach Art eines Blockdiagramms eine Ausführungsform des erfindungsgemäßen Kamera-Anzeigesystems 40 im Zusammenhang mit einer Ausführungsform des erfindungsgemäßen Fahrzeugs 100. FIG. 1 schematically shows, in the manner of a block diagram, an embodiment of the camera display system 40 according to the invention in connection with an embodiment of the vehicle 100 according to the invention.
Die schematische Darstellung der Figur 1 beschreibt nach Art eines The schematic representation of Figure 1 describes the manner of a
Blockdiagramms den Aufbau eines erfindungsgemäßen Kamera- Anzeigesystems 40 als eine Ausführungsform des erfindungsgemäßen Block diagram of the structure of a camera display system 40 according to the invention as an embodiment of the invention
Fahrzeugs 100. Vehicle 100.
Das erfindungsgemäße Kamera-Anzeigesystem 40 gemäß Figur 1 besteht dem Kern nach aus einem Kamerasystem 10, einem Anzeigesystem 20 sowie einer Erfassungs- und Steuereinheit 30. The camera display system 40 according to the invention according to FIG. 1 consists of a camera system 10, a display system 20 and a detection and control unit 30 in its core.
Das Kamerasystem 10 besteht in der Ausführungsform gemäß Figur 1 aus einer ersten Kameraeinheit 1 in Form einer ersten oder linken In the embodiment according to FIG. 1, the camera system 10 consists of a first camera unit 1 in the form of a first or a left
Außenspiegelkamera, einer zweiten Kameraeinheit 2 in Form einer zweiten oder rechten Außenspiegelkamera, einer dritten Kameraeinheit 5 nach Art einer Stereokameraeinheit mit einer ersten oder linken Kamera 3 und einer zweiten oder rechten Kamera 4 sowie einer vierten Kameraeinheit 6, welche nach Art einer Rückfahrkameraeinheit mit einer Fischaugenkamera oder einer Kamera mit Fischaugenobjektiv ausgebildet ist und damit eine Weitwinkelansicht liefert. Sämtliche Kameraeinheiten und Kameras 1 bis 6 sind über eine erste Erfassungs- und Steuerleitung 31 mit der Erfassungs- und Steuereinheit wirkungsverbunden, um gesteuert oder geregelt zu werden. Exterior mirror camera, a second camera unit 2 in the form of a second or right exterior mirror camera, a third camera unit 5 in the manner of a stereo camera unit with a first or left camera 3 and a second or right camera 4 and a fourth camera unit 6, which in the manner of a rearview camera unit with a fisheye camera or a camera with fisheye lens is formed and thus provides a wide-angle view. All camera units and cameras 1 to 6 are operatively connected to the detection and control unit via a first detection and control line 31 in order to be controlled or regulated.
Das Anzeigesystem 20 besteht aus einer ersten Anzeigeeinheit 21 nach Art einer Rückspiegelanzeige oder nach Art eines Rückspiegelmonitors im räumlichen Bereich eines üblicherweise in einem Fahrzeug 100 The display system 20 consists of a first display unit 21 in the manner of a rear-view mirror display or in the manner of a rear-view mirror in the spatial area of a vehicle 100 typically
vorgesehenen Rückspiegels, einer zweiten Anzeigeeinheit 22 nach Art einer Mittelkonsolenanzeige oder nach Art eines Mittelkonsolenmonitors im Bereich einer Mittelkonsole 107 des Fahrzeugs 100 und einer dritten Anzeigeeinheit 23 nach Art einer Armaturenbrettanzeige oder nach Art eines Armaturenbrettmonitors, welche auf der vom Fahrer abgewandten Seite eines Lenkrads 105 des Fahrzeugs 100 angeordnet ist. provided rearview mirror, a second display unit 22 in the manner of a center console display or in the manner of a center console monitor in the area of a center console 107 of the vehicle 100 and a third display unit 23 in the manner of a dashboard display or the manner of a dashboard monitor, which on the side facing away from the driver side of a steering wheel 105 of the Vehicle 100 is arranged.
Die ersten bis dritten Anzeigeeinheiten 21 , 20, 3 20 des Anzeigesystems 20 sind über eine zweite Erfassungs- und Steuerleitung 32 mit der The first to third display units 21, 20, 30 of the display system 20 are connected via a second detection and control line 32 with the
Erfassungs- und Steuereinheit 30 wirkungsverbunden, um gesteuert oder geregelt zu werden. Detection and control unit 30 operatively connected to be controlled or regulated.
Die Erfassungs- und Steuereinheit 30 ist erfindungsgemäß so ausgestaltet und eingerichtet, eine Ausführungsform des erfindungsgemäßen The detection and control unit 30 according to the invention is configured and set up, an embodiment of the invention
Betriebsverfahrens auszuführen und insbesondere dafür zu sorgen, dass beim Auftreten eines Fehlers bei einer der Kameraeinheiten 1 bis 6 Bilder der Umgebung der Kameraeinheiten 1 bis 6 ohne Fehler miteinander bildlich kombiniert an mindestens einer der Anzeigeeinheiten 21 bis 23 zur Anzeige zur Anzeige gebracht werden. Execute operating method and in particular to ensure that when an error occurs in one of the camera units 1 to 6 images of the environment of the camera units 1 to 6 without error combined with each other image on at least one of the display units 21 to 23 are brought to display for display.
Auf diese Weise ist es möglich, dass auch beim teilweisen oder In this way it is possible that even when partial or
vollständigen Ausfall einer oder mehrerer der Kameraeinheiten 1 bis 6 eine für die Sicherheit des Betriebs des Fahrzeugs relevante Anzeige von Bildern der Umgebung an mindestens einer der Anzeigeeinheiten 21 bis 23 des Anzeigesystems 20 möglich ist. complete failure of one or more of the camera units 1 to 6 relevant to the safety of the operation of the vehicle display of images of the environment at least one of the display units 21 to 23 of the display system 20 is possible.
Figuren 2 und 3 zeigen eine Ansicht eine Ausführungsform des FIGS. 2 and 3 show a view of one embodiment of the invention
erfindungsgemäßen Fahrzeugs 100 von der Seite bzw. eine Rückansicht. Dargestellt sind dort eine Ausführungsform des erfindungsgemäßen inventive vehicle 100 from the side and a rear view. Shown there are an embodiment of the invention
Kamera-Anzeigesystems 40 und deren Anzeigesystem, Anzeigeeinheiten 21 bis 23 sowie deren Kamerasystem 10 mit Kameraeinheiten 1 sowie 3 bis 6. Vorgesehen ist des Weiteren eine Erfassungs- und Steuereinheit 30 Camera display system 40 and its display system, display units 21 to 23 and their camera system 10 with camera units 1 and 3 to 6. Furthermore, a detection and control unit 30 is provided
wirkverbunden oder wirkungsverbunden mit dem Anzeigesystem 20 und dem Kamerasystem 10 und deren Komponenten. Die entsprechenden ersten und zweiten Erfassungs- und Steuerleitungen 31 bzw. 32 sind hier nicht explizit dargestellt. Alternativ zu derartigen Leitungen sind auch operatively connected or operatively connected to the display system 20 and the camera system 10 and their components. The corresponding first and second detection and control lines 31 and 32 are not explicitly shown here. Alternative to such lines are also
drahtlose Verbindungen denkbar. wireless connections conceivable.
Figuren 4A bis 1 1 B illustrieren die Anpassung von Anzeigeergebnissen auf der Grundlage von Ausführungsformen des erfindungsgemäßen Betriebsverfahrens. FIGS. 4A to 1 1B illustrate the adaptation of display results based on embodiments of the method of operation according to the invention.
Die Figuren 4A bis 1 1 B zeigen in schematischer Form die Behandlung verschiedener Fehlerszenarien. Diese werden nachfolgend Figures 4A to 1 1 B show in schematic form the treatment of various error scenarios. These will be below
zusammenfassend kurz umrissen und weiter unten im Detail dargestellt. briefly outlined in summary and shown in detail below.
Dabei zeigt eine jeweilige Figur A die fehlerfreie Situation und die Figur B beschreibt die Behandlung des jeweiligen Fehlerfalls. A respective FIG. A shows the error-free situation and FIG. B describes the treatment of the respective error case.
Bei den mit den Figuren 4 A bis 6 B dargestellten Situationen wird vom In the situations shown with the figures 4 A to 6 B is from
Vorhandensein einer linken Außenspiegelkamera 1 , einer rechten Presence of a left wing mirror camera 1, a right
Außenspiegelkamera 2 und einer Stereokamera 5 mit einer linken Kamera 3 in einer rechten Kamera 4 ausgegangen. Outside mirror camera 2 and a stereo camera 5 with a left camera 3 in a right camera 4 gone out.
In den Figuren 4A, 5A, 6A erfolgt die Darstellung im fehlerfreien Fall nach Art eines Panoramabildes oder Fusionsbildes, jeweils aus den Bildern der Kameras 1 bis 4. Figur 4B handhabt den Ausfall der rechten Kamera 4 der In FIGS. 4A, 5A, 6A, the representation in the error-free case takes place in the manner of a panoramic image or fusion image, in each case from the images of the cameras 1 to 4. FIG. 4B handles the failure of the right-hand camera 4 of FIG
Stereokameraeinheit 5, nämlich durch Übergang zu einer Triptychon  Stereo camera unit 5, namely by transition to a triptych
Darstellung unter ausschließlicher Verwendung der Bilder der Kameras 1 bis 3. Figur 5B behandelt den Ausfall der linken Außenspiegelkamera 1 mit einem Übergang zu einer Panorama- oder Fusionsdarstellung mit erweitertem Sichtfeld in Bezug auf die Bilder der Kameras 2 bis 4. Representation with the exclusive use of the images of the cameras 1 to 3. FIG. 5B deals with the failure of the left-hand exterior mirror camera 1 with a transition to a panorama or fusion display with an extended field of view with respect to the images of the cameras 2 to 4.
Figur 6B illustriert den Fall, dass sowohl die linke Außenspiegelkamera 1 als auch die linke Kamera 3 der Rückfahrkameraeinheit 5 ausgefallen sind, und zwar mit Übergang zu einem Diptychon mit erweitertem Sichtfeld in Bezug auf die Kameras 2 und 4. FIG. 6B illustrates the case where both the left-side mirror camera 1 and the left-side camera 3 of the reversing-camera unit 5 have failed, with the transition to a dreaded-field diptych with respect to the cameras 2 and 4.
Die Figuren 7A bis 10B beschreiben eine Situation, bei welcher neben den rechten und linken Außenspiegelkameras 1 und 2 eine einzelne zentrale Kamera 5 ausgebildet ist, die als solche keine Stereokamera darstellt. Im fehlerfreien Fall wird jeweils von einer kombinierten bildlichen Darstellung nach Art eines Triptychons ausgegangen. FIGS. 7A to 10B describe a situation in which, in addition to the right and left exterior mirror cameras 1 and 2, a single central camera 5 is formed, which as such does not constitute a stereo camera. In the error-free case is assumed in each case of a combined pictorial representation in the manner of a triptych.
Figur 7B behandelt den Ausfall der linken Außenspiegelkamera 1 mit einem Übergang zu einem Diptychon mit erweitertem Sichtfeld, insbesondere für die zentrale Kamera 5. FIG. 7B deals with the failure of the left-hand exterior mirror camera 1 with a transition to a diptych with an extended field of view, in particular for the central camera 5.
Figur 8B beschreibt den Fehlerfall an der zentralen Kamera 5 mit einem Übergang zu einem getrennten Diptychon mit erweitertem Sichtfeld für beide Außenspiegelkameras 1 und 2. FIG. 8B describes the error case at the central camera 5 with a transition to a separate diptych with an extended field of view for both exterior mirror cameras 1 and 2.
In der Situation gemäß Figur 9B wird der Ausfall beider In the situation according to FIG. 9B, the failure of both becomes
Außenspiegelkameras 1 und 2 durch Übergang zu einer Einzelansicht mit erweitertem Sichtfeld für die zentrale Kamera 5 behandelt. Exterior mirror cameras 1 and 2 treated by transition to a single view with extended field of view for the central camera 5.
Beim Ausfall sowohl der linken Außenspiegelkamera 1 als auch der zentralen Kamera 5 wird gemäß Figur 10B beim Vorhandensein einer zusätzlichen Rückfahrkamera 6 die Situation nach Art eines Diptychons angezeigt, wobei die rechte Außenspiegelkamera 2 und das Bild derIn case of failure both the left outside mirror camera 1 and the central camera 5, the situation is displayed in the manner of a diptych, in accordance with Figure 10B in the presence of an additional rear view camera 6, wherein the right outside mirror camera 2 and the image of the
Rückfahrkamera 6 jeweils mit erweitertem Sichtfeld zum Tragen kommen. Reversing camera 6 each come with extended field of view to fruition.
Figur 1 1 behandelt den Fall dass sämtliche regulären Kameras 1 bis 5 ausgefallen sind, jedoch eine Rückfahrkamera 6 ausgebildet ist, deren Bild dann als Panoramabild zur Anzeige gebracht wird. Figur 12 zeigt schematisch eine andere Ausführungsform des Figure 1 1 deals with the case that all regular cameras 1 to 5 have failed, but a reversing camera 6 is formed, the image is then displayed as a panoramic image for display. FIG. 12 schematically shows another embodiment of the invention
erfindungsgemäßen Fahrzeugs 100 mit Fokus auf dessen Innenraum 103 und dem Aufbau des dort vorgesehenen Anzeigesystems 20. Vehicle 100 according to the invention with focus on its interior 103 and the structure of the display system 20 provided there.
Bei der Ausführungsform gemäß Figur 12 ist das Anzeigesystem 20 mit einer ersten Anzeigeeinheit 21 nach Art eines Rückspiegelmonitors ausgebildet. Die zweite Anzeigeeinheit 22 ist nach Art einer In the embodiment according to FIG. 12, the display system 20 is designed with a first display unit 21 in the manner of a rearview mirror monitor. The second display unit 22 is a kind of
Mittelkonsolenanzeige oder nach Art eines Mittelkonsolenmonitors leicht oberhalb der Mittelkonsole auf der Höhe des Armaturenbretts 106 des Fahrzeugs 100 ausgebildet. Die dritte Anzeigeeinheit 23 befindet sich auf der vom Fahrer abgewandten Seite des Lenkrads 105 und ist nach Art einer Armaturenbrettanzeige oder nach Art eines Armaturenbrettmonitors ausgebildet und somit direkt im Bereich des Armaturenbretts 106, zum Beispiel in Überlappung mit oder in der Nachbarschaft zur üblichen Center console display or in the manner of a center console monitor slightly above the center console at the height of the instrument panel 106 of the vehicle 100 is formed. The third display unit 23 is located on the side facing away from the driver of the steering wheel 105 and is designed in the manner of a dashboard display or the type of dashboard monitor and thus directly in the area of the dashboard 106, for example in overlap with or in the vicinity of the usual
Geschwindigkeitsanzeige. Bei der Ausführungsform gemäß Figur 12 agiert die erste Anzeigeeinheit 21 als primäre Anzeigeeinheit und unterstützt damit das für einen Speed indicator. In the embodiment according to FIG. 12, the first display unit 21 acts as a primary display unit and thus supports that for a user
Fahrzeugführer übliche Beobachtungsverhalten im Hinblick auf die Driver's usual observation behavior with regard to
Rückspiegelanzeige. Rear-view screen.
Gemäß einer Ausführungsform des erfindungsgemäßen Betriebsverfahrens wird bei einem Fehler im Bereich der ersten Anzeige 21 auf die zweite Anzeigeeinheit 22 und/oder auf die dritte Anzeige einer 23 gewechselt. According to one embodiment of the operating method according to the invention, when an error occurs in the area of the first display 21, the second display unit 22 and / or the third display 23 are switched.
Sind sämtliche Anzeigeeinheiten einen 20 bis 23 mit einem Fehler behaftet, so kann optional ein akustisches und/oder haptisches Warnsignal If all display units 20 to 23 have an error, then optionally an audible and / or haptic warning signal
ausgegeben werden, welches auf diesen Umstand hinweist. Diese und weitere Merkmale und Eigenschaften der vorliegenden issued, which indicates this fact. These and other features and characteristics of the present
Erfindung werden an Hand der folgenden Darlegungen weiter erläutert:  The invention will be further elucidated on the basis of the following statements:
Die vorliegende Erfindung betrifft insbesondere ein Kraftfahrzeug 100, welches mit mehreren Kameras 1 bis 6 versehen und mit einer The present invention relates in particular to a motor vehicle 100, which is provided with a plurality of cameras 1 to 6 and with a
Rechnereinrichtung 30 zum Verarbeiten der Bilder ausgestattet ist. Es wird außerdem ein Verfahren zum Betreiben eines Kamerasystems 10 in einem Kraftfahrzeug 100 angegeben. Computer device 30 is equipped to process the images. A method is also provided for operating a camera system 10 in a motor vehicle 100.
Die vorliegende Erfindung schlägt insbesondere ein Degradationskonzept für Kamera-Anzeigesysteme 40 vor. Dieses Degradationskonzept soll unter den folgenden Prämissen in Kraft treten: In particular, the present invention proposes a degradation concept for camera display systems 40. This degradation concept should come into force on the following premises:
(a) Bei einem Bildausfall oder dem Verlust großer Bildteile oder bei zu starker Verschmutzung wird über die gesamte Wirkkette die Störung rechtzeitig erkannt, z.B. mit Hilfe von Watchdogsoftware. (b) Die Architektur des Bordnetzes ermöglicht alternative (a) In the event of image loss or loss of large image portions or excessive contamination, the malfunction is recognized in good time throughout the chain of action, e.g. with the help of watchdog software. (b) The architecture of the electrical system allows alternative
Signallaufwege.  Signal propagation paths.
Um den vollen Umfang der Erfindung deutlich zu machen, soll das Konzept nun anhand der oben schon einmal beschriebenen Fälle verdeutlicht werden. Fall 1 : Ausfall einer Kamera 4 der Stereokameraanordnung 5 im To clarify the full scope of the invention, the concept will now be illustrated with reference to the cases already described above. Case 1: Failure of a camera 4 of the stereo camera arrangement 5 in FIG
fusionierten Bild gemäß den Figuren 4A und 4B. Erfindungsgemäß kann vom Panorama auf das Triptychon mit der ersten  fused image according to Figures 4A and 4B. According to the invention of the panorama on the triptych with the first
Stereokamera 3 gewechselt werden. Es kann die Meldung „Bildfusion gestört" erscheinen. Fall 2: Ausfall einer Kamera 1 der Seiten im fusionierten Bild gemäß den Figuren 5A und 5B. Erfindungsgemäß kann vom Panorama auf ein teilfusioniertes Bild gewechselt werden. Die Heckkamera 5 bekommt auf der ausgefallenen Seite mehr Sichtfeld (FOV : Field of View). Es kann die Meldung„Kamera ausgefallen" erscheinen. Es kann ein Kameraneustart erfolgen, zum Beispiel mit Versuchen fünfmal pro Minute.  Stereo camera 3 to be changed. Case 2: Failure of a camera 1 of the pages in the merged image according to Figures 5A and 5B According to the invention, the panorama can be changed to a partially fused image The rear camera 5 receives more field of view on the failed side (FOV: Field of View) The message "Camera Failed" may appear. It can be a camera restart, for example, with experiments five times per minute.
Fall 3: Ausfall zweier Kameras im fusionierten Bild gemäß den Figuren 6A und 6B. Erfindungsgemäß kann vom Panorama auf zwei Kameras 2 und 4 im Diptychon gewechselt werden. Ein Case 3: Failure of two cameras in the merged image according to FIGS. 6A and 6B. According to the invention of the panorama on two Cameras 2 and 4 are changed in diptych. One
Kameraneustart mit fünf Versuchen pro Minute ist denkbar.  Camera restart with five attempts per minute is conceivable.
Fall 4: Ausfall einer Seitenkamera 1 im Triptychon gemäß den Figuren 7A und 7B. Erfindungsgemäß kann vom Panorama auf zwei Kameras 2 und 5 Diptychon gewechselt werden. Die Heckkamera 5 kann auf der ausgefallenen Seite mehr Sichtfeld erhalten. Es kann ein Kameraneustart mit 5 Versuchen pro Minute erfolgen. Denkbar ist auch das Absetzen einer Nachricht, z.B. gemäß CCM-Sendung 914 dez. Fall 5: Ausfall der Heckkamera 5 im Triptychon gemäß den Figuren 8A und 8B. Erfindungsgemäß kann auf eine alternative Heckkamera gewechselt werden. Falls das nicht möglich ist, erfolgt eine Meldung gemäß CCM 914 dez. Es kann ein Kamera Neustart mit 5 Versuchen pro Minute erfolgen. Die Bilder der Seitenkameras 1 und 2 werden anteilig mit mehr Sichtfeld angezeigt. Der Ausfall des zentralen Bildes liegt nur beim erfolglosen Neustart der zweiten Stereokamera vor. Case 4: failure of a side camera 1 in the triptych according to FIGS. 7A and 7B. According to the invention can be changed from the panorama to two cameras 2 and 5 diptych. The rear camera 5 can get more field of view on the failed side. It can be a camera restart with 5 attempts per minute. It is also conceivable to send a message, e.g. according to CCM broadcast 914 dec. Case 5: failure of the rear camera 5 in the triptych according to FIGS. 8A and 8B. According to the invention can be changed to an alternative rear view camera. If this is not possible, a message is sent in accordance with CCM 914 dec. It can be a camera restart with 5 attempts per minute. The images of the side cameras 1 and 2 are proportionally displayed with more field of view. The failure of the central image is only in case of unsuccessful restart of the second stereo camera.
Fall 6: Ausfall der zwei Seitenkameras 1 und 2 im Triptychon gemäß den Figuren 9A und 9B. Erfindungsgemäß kann sich der horizontale Öffnungswinkel der verbleibenden Kamera 5 voll öffnen. Eine Nachricht gemäß CCM-Sendung 785 dez.„Bitte sofort anhalten" ist denkbar. Ein Neustart des Gesamtsystems mit 5 Versuchen pro Minute kann erfolgen. Case 6: Failure of the two side cameras 1 and 2 in the triptych according to FIGS. 9A and 9B. According to the invention, the horizontal opening angle of the remaining camera 5 can fully open. A message in accordance with CCM broadcast 785 dec. "Please stop immediately" is conceivable. A restart of the entire system with 5 attempts per minute can be made.
Fall 7: Ausfall einer Seitenkamera 1 und einer Stereokamera 5 beim Case 7: Failure of a side camera 1 and a stereo camera 5 at
Triptychon gemäß den Figuren 10A und 10B. Erfindungsgemäß kann auf die Rückfahrtkamera 6 für das zentrale Bild gewechselt werden. Das Bild der Seitenkamera 2 wird anteilig mit mehr Sichtfeld angezeigt. Es kann eine Meldung gemäß CCM-Sendung 785 dez.„Bitte sofort anhalten" abgesetzt werden. Ein Neustart des Gesamtsystems mit fünf Versuchen pro Minute ist denkbar. Fall 8: Ausfall aller Kameras oder des Displays gemäß Figur 1 1 . Triptych according to Figures 10A and 10B. According to the invention can be changed to the return camera 6 for the central image. The image of the side camera 2 is proportionally displayed with more field of view. A message can be sent in accordance with CCM broadcast 785 dec. "Please stop immediately" A restart of the entire system with five attempts per minute is conceivable. Case 8: Failure of all cameras or the display according to FIG. 1 1.
Erfindungsgemäß kann auf die Anzeige der Rückfahrkamera 6 gewechselt werden statt der CMS-Kameras. Dies erfolgt mit einer geringeren Winkelauflösung, aber immerhin entsteht ein Bild. Es kann eine Meldung nach CCM-Sendung 785 dez.„Bitte sofort anhalten" abgesetzt werden. Alternativ können ein Gong oder ein anderer Warnton erklingen. Es kann ein Neustart des  According to the invention can be changed to the display of the reversing camera 6 instead of the CMS cameras. This is done with a lower angular resolution, but at least a picture emerges. A message can be sent after CCM broadcast 785 dec. "Please stop immediately" Alternatively, a chime or another warning sound can be heard
Gesamtsystems mit einer Wiederholrate von fünf pro Minute erfolgen.  Complete system with a repetition rate of five per minute.
Fall 9: Ausfall des primären anzeigenden Displays 21 , insbesondere gemäß Figur 12. Die Anzeige auf dem Innenspiegeldisplay oder auf der Rückspiegelanzeige 21 ist stark zeitlich verzögert oder es kommt zu einer fehlerhaften Darstellung oder es kommt zu keiner Anzeige. Case 9: Failure of the primary indicating display 21, in particular according to FIG. 12. The display on the interior mirror display or on the rear-view mirror display 21 is strongly delayed in time or there is a faulty display or there is no display.
(a) Das zentrale Informationsdisplay (CID) wird umgehend zur Anzeige genutzt. Die Head-Unit soll mit Prio 1 eine Tafel ähnlich der Parktafel schalten und alle anderen Inhalte überlagern, damit der Kunde immer noch zur Werkstatt fahren kann. (a) The central information display (CID) is used immediately for display. The head unit should switch Prio 1 a panel similar to the parking board and superimpose all other content, so that the customer can still drive to the workshop.
(b) Sollte das CID nicht verfügbar oder bereits mit Prio 1 (b) If the CID is not available or already prio 1
Meldungen belegt sein ist das frei programmierbare Kombidisplay des Fahrers formatfüllend und ausschließlich mit dem Inhalt der rückwärtigen Anzeige zu füllen. Die Anzeige der Geschwindigkeit und des Gangs erfolgt dann über das HUD.  Messages are occupied is the freely programmable combination display of the driver format-filling and exclusively to fill with the contents of the rear display. The speed and the gait are displayed via the HUD.
Es stellen sich unter anderem folgende Vorteile ein: There are, among others, the following advantages:
- Ein Liegenbleiben wird vermieden oder über mehrere Defekte lange verzögert, weil mindestens zwei von drei Einrichtungen zur indirekten Sicht (gemäß ECE-R46) intakt bleiben und zur Anzeige führen. - Lingering is avoided or delayed for several defects, because at least two out of three devices for indirect vision (according to ECE-R46) remain intact and lead to the display.
- Der Weg zur Werkstatt kann immer ermöglicht werden, weil sogar nach Ausfall aller CMS-Kameras und mindestens eines Bildschirms die Surroundviewkameras, zum Beispiel im Sinne einer Rückfahrkamera 6, immer noch das gleiche Sichtfeld ermöglichen, wenn auch niedriger aufgelöst. Damit ermöglicht dieses mehrstufige Degradationskonzept quasi immer den Rückweg zur Werkstatt, obwohl mehrere Schäden ein Fahrzeug mit Spiegel längst zum Nothalt gezwungen hätte (beide Spiegel ab). - The way to the workshop can always be made possible, because even after failure of all CMS cameras and at least one screen, the Surroundviewkameras, for example in the sense of a rear-view camera 6, still allow the same field of view, albeit at a lower resolution. Thus, this multi-stage degradation concept almost always allows the way back to the workshop, although several damages would have forced a vehicle with mirror long to emergency stop (both mirrors from).
Bezugszeichenliste: 1 (erste) Kamera, Kameraeinheit, erste oder linke AußenspiegelkameraList of Reference Signs: 1 (first) camera, camera unit, first or left exterior mirror camera
2 (zweite) Kamera, Kameraeinheit, zweite oder rechte Außenspiegelkamera2 (second) camera, camera unit, second or right exterior mirror camera
3 Kamera, Kameraeinheit, erste oder linke Kamera der 3 camera, camera unit, first or left camera of the
Stereokameraeinheit 5  Stereo camera unit 5
4 Kamera, Kameraeinheit, zweite oder rechte Kamera der  4 camera, camera unit, second or right camera
Stereokameraeinheit 5  Stereo camera unit 5
5 (dritte) Kameraeinheit, Stereokameraeinheit  5 (third) camera unit, stereo camera unit
6 (vierte) Kameraeinheit, Rückfahrkameraeinheit  6 (fourth) camera unit, reversing camera unit
10 Kamerasystem 10 camera system
20 Anzeigesystem 20 display system
21 (erste) Anzeigeeinheit, Rückspiegelanzeige oder -monitor  21 (first) display unit, rearview mirror display or monitor
22 (zweite) Anzeigeeinheit, Mittelkonsolenanzeige oder -monitor  22 (second) display unit, center console display or monitor
23 (dritte) Anzeigeeinheit, Armaturenbrettanzeige oder -monitor  23 (third) display unit, dashboard display or monitor
30 Erfassungs- und Steuereinheit 30 detection and control unit
31 (erste) Erfassungs- und Steuerleitung  31 (first) detection and control line
32 (zweite) Erfassungs- und Steuerleitung 40 Kamera-Anzeigesystem  32 (second) detection and control line 40 camera display system
100 Fahrzeug 100 vehicle
102 Karosserie  102 bodywork
103 Innenraum  103 interior
104 Rad 104 wheel
105 Lenkrad  105 steering wheel
106 Armaturenbrett 107 Mittelkonsole 106 dashboard 107 center console
X Fahrzeuglängsrichtung, Fahrtrichtung x Raumrichtungen X vehicle longitudinal direction, direction of travel x spatial directions
y Raumrichtungen y spatial directions
z Raumrichtungen z spatial directions

Claims

Patentansprüche: claims:
Betriebsverfahren für ein Kamera-Anzeigesystem (40) - insbesondere für ein Fahrzeug (100) - mit einem Kamerasystem (10) mit mehreren Kameraeinheiten (1 , 2, 3, 4, 5, 6) und mit einem Anzeigesystem (20) mit einer oder mit mehreren Anzeigeeinheiten (21 , 22, 23), bei welchemOperating method for a camera display system (40) - in particular for a vehicle (100) - with a camera system (10) with a plurality of camera units (1, 2, 3, 4, 5, 6) and with a display system (20) with one or more with several display units (21, 22, 23), in which
- mit Kameraeinheiten (1 , 2, 3, 4, 5, 6) voneinander unabhängige Bilder einer Umgebung erfasst werden und - Are detected with camera units (1, 2, 3, 4, 5, 6) independent images of an environment and
- Bilder der Umgebung auf einer Anzeigeeinheit (21 , 22, 23) miteinander bildlich kombiniert zur Anzeige gebracht werden,  - images of the environment on a display unit (21, 22, 23) are combined with each other pictorially displayed,
- ein Fehlerstatus von Kameraeinheiten (1 , 2, 3, 4, 5, 6) erfasst wird und - An error status of camera units (1, 2, 3, 4, 5, 6) is detected and
- beim Auftreten eines Fehlers bei einer Kameraeinheit (1 , 2, 3, 4, 5, 6) die Bilder der Umgebung von Kameraeinheiten (1 , 2, 3, 4, 5, 6) ohne Fehler miteinander bildlich kombiniert zur Anzeige gebracht werden. - When an error occurs in a camera unit (1, 2, 3, 4, 5, 6), the images of the environment of camera units (1, 2, 3, 4, 5, 6) without error combined with each other image combined displayed.
Betriebsverfahren nach Anspruch 1 , Operating method according to claim 1,
bei welchem das Bild einer Kameraeinheit (1 , 2, 3, 4, 5, 6) mit Fehler bei der Anzeige nicht oder nur teilweise berücksichtigt wird.  in which the image of a camera unit (1, 2, 3, 4, 5, 6) with error in the display is not or only partially taken into account.
Betriebsverfahren nach einem der vorangehenden Ansprüche, bei welchem beim Erfassen von Bildern der Umgebung Operating method according to one of the preceding claims, wherein when capturing images of the environment
- mit Kameraeinheiten (1 , 2, 3, 4, 5, 6) Bilder der Umgebung mit nicht beschränktem oder erweitertem Sichtfeld erfasst werden und/oder - Captured with camera units (1, 2, 3, 4, 5, 6) images of the environment with unrestricted or extended field of view and / or
- mit Kameraeinheiten (1 , 2, 3, 4, 5, 6) Bilder der Umgebung mit teilweise überlappendem Sichtfeld erfasst werden. - With camera units (1, 2, 3, 4, 5, 6) images of the environment are detected with partially overlapping field of view.
Betriebsverfahren nach einem der vorangehenden Ansprüche, bei welchem Operating method according to one of the preceding claims, in which
- im fehlerfreien Fall bei der Anzeige Bilder von Kameraeinheiten (1 , 2, 3, 4, 5, 6) nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit einer Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit beschränktem Sichtfeld, vorzugsweise beim Uberlappen von Sichtfeldern von Kameraeinheiten (1 , 2, 3, 4, 5, 6) und erfasster Bilder, und/oder in the error-free case when displaying images of camera units (1, 2, 3, 4, 5, 6) in the manner of a fusion image or in the manner of a polyptych combined with a number of individual images displayed, in particular with limited field of view, preferably when overlapping fields of view of camera units (1, 2, 3, 4, 5, 6) and captured images, and / or
- im Fehlerfall bei der Anzeige Bilder von Kameraeinheiten (1 , 2, 3, 4, 5, 6) ohne Fehler nach Art eines Fusionsbildes oder nach Art eines Polyptychons mit entsprechend reduzierter Anzahl von Einzelbildern kombiniert zur Anzeige gebracht werden, insbesondere mit nicht beschränktem oder mit erweitertem Sichtfeld.  - In the case of an error in the display images of camera units (1, 2, 3, 4, 5, 6) without errors in the manner of a fusion image or in the manner of a polyptych combined with a correspondingly reduced number of individual images combined brought to the display, in particular with unrestricted or with extended field of view.
Betriebsverfahren nach einem der vorangehenden Ansprüche, Operating method according to one of the preceding claims,
bei welchem bei einem zu Grunde liegenden Fahrzeug (100) eine linke Außenspiegelkamera (1 ) als erste Kameraeinheit, eine rechte Außenspiegelkamera (2) als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit (5), insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera (3) und einer zweiten und rechten Kamera (4), und/oder eine Rückfahrkameraeinheit (6) als Hilfskamera, insbesondere nach Art einer Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung (X) des zu Grunde liegenden Fahrzeugs (100) ausgerichtet im Sichtfeld, als Kamerasystem (10) verwendet werden. in which, in an underlying vehicle (100), a left exterior mirror camera (1) as a first camera unit, a right exterior mirror camera (2) as a second camera unit and a centrally arranged third camera unit (5), in particular in the manner of a stereo camera unit with a first and left Camera (3) and a second and right camera (4), and / or a reversing camera unit (6) as an auxiliary camera, in particular in the manner of a fisheye camera and / or in each case with substantially against a main direction of travel (X) of the underlying vehicle (100 ) aligned in the field of view, can be used as a camera system (10).
Betriebsverfahren nach einem der vorangehenden Ansprüche, bei welchem beim Vorliegen einer Mehrzahl von Anzeigeeinheiten (21 , 22, 23) Operating method according to one of the preceding claims, wherein in the presence of a plurality of display units (21, 22, 23)
- ein Fehlerstatus von Anzeigeeinheiten (21 , 22, 23) erfasst wird und - An error status of display units (21, 22, 23) is detected and
- beim Auftreten eines Fehlers bei einer Anzeigeeinheit (21 , 22, 23) zum Anzeigen der Bilder eine Anzeigeeinheit (21 , 22, 23) ohne Fehler verwendet wird, gegebenenfalls durch Wechseln der verwendeten Anzeigeeinheit (21 , 22, 23) when a fault occurs in a display unit (21, 22, 23) for displaying the images, a display unit (21, 22, 23) is used without error, possibly by changing the display unit (21, 22, 23) used
- wobei beim Auftreten eines Fehlers bei sämtlichen Anzeigeeinheiten (21 , 22, 23) das Erzeugen und das Ausgeben eines - insbesondere akustischen - Warnsignals veranlasst oder ausgeführt werden, insbesondere mittels einer Audioanlage des zu Grunde liegenden Fahrzeugs (100). Betriebsverfahren nach einem der vorangehenden Ansprüche, - When an error occurs in all display units (21, 22, 23), the generation and output of a - be warned or executed - in particular by means of an audio system of the underlying vehicle (100) - in particular acoustic warning signal. Operating method according to one of the preceding claims,
bei welchem bei einem zu Grunde liegenden Fahrzeug (100) eine Rückspiegelanzeige (21 ) als erste Anzeigeeinheit, eine Mittelkonsolenanzeige (22) als zweite Anzeigeeinheit und/oder eine Armaturenbrettanzeige (23) als dritte Anzeigeeinheit als Anzeigesystem (20) verwendet werden. in which in an underlying vehicle (100) a rearview mirror display (21) as a first display unit, a center console display (22) as a second display unit and / or a dashboard display (23) as a third display unit as a display system (20) are used.
Kamera-Anzeigesystem (40), insbesondere für ein Fahrzeug (100), mit:Camera display system (40), in particular for a vehicle (100), with:
- einem Kamerasystem (10) mit mehreren Kameraeinheiten (1 , 2, 3, 4,a camera system (10) with a plurality of camera units (1, 2, 3, 4,
5, 6), 5, 6),
- einem Anzeigesystem (20) mit einer oder mit mehreren Anzeigeeinheiten (21 , 22, 23) und  a display system (20) having one or more display units (21, 22, 23) and
- einer Erfassungs- und Steuereinheit (30), welche über mindestens eine Erfassungs- und Steuerleitung (31 , 32) mit dem Kamerasystem (10) und mit dem Anzeigesystem (20) verbunden oder verbindbar ist und welche eingerichtet ist, ein Betriebsverfahren nach einem der Ansprüche 1 bis 7 auszuführen.  a detection and control unit (30) which is connected or connectable via at least one detection and control line (31, 32) to the camera system (10) and to the display system (20) and which is set up, an operating method according to one of Claims 1 to 7 execute.
Kamera-Anzeigesystem (40) nach Anspruch 8, bei welchem A camera display system (40) according to claim 8, wherein
- das Kamerasystem (10) eine linke Außenspiegelkamera (1 ) als erste Kameraeinheit, eine rechte Außenspiegelkamera (2) als zweite Kameraeinheit und eine zentral angeordnete dritte Kameraeinheit (5), insbesondere nach Art einer Stereokameraeinheit mit einer ersten und linken Kamera (3) und einer zweiten und rechten Kamera (4), und/oder eine Rückfahrkameraeinheit (6) als Hilfskamera, insbesondere nach Art einer Fischaugenkamera und/oder jeweils mit im Wesentlichen entgegen einer Hauptfahrtrichtung (X) des zu Grunde liegenden Fahrzeugs (100) ausgerichtetem Sichtfeld aufweist und/oder  - The camera system (10) a left outside mirror camera (1) as a first camera unit, a right exterior mirror camera (2) as a second camera unit and a centrally arranged third camera unit (5), in particular in the manner of a stereo camera unit with a first and left camera (3) and a second and right camera (4), and / or a reversing camera unit (6) as an auxiliary camera, in particular in the manner of a fisheye camera and / or each with essentially against a main direction of travel (X) of the underlying vehicle (100) aligned field of view and /or
- das Anzeigesystem (20) eine Rückspiegelanzeige (21 ) als erste Anzeigeeinheit, eine Mittelkonsolenanzeige (22) als zweite Anzeigeeinheit und/oder eine Armaturenbrettanzeige (23) als dritte Anzeigeeinheit aufweist. - The display system (20) has a rearview mirror display (21) as a first display unit, a center console display (22) as a second display unit and / or a dashboard display (23) as a third display unit.
10. Fahrzeug (100) und insbesondere Kraftfahrzeug, Personenkraftwagen oder Lastkraftwagen, welches mit einem Kamera-Anzeigesystem (40) nach Anspruch 8 oder 9 ausgebildet ist. 10. Vehicle (100) and in particular motor vehicle, passenger car or truck, which is formed with a camera display system (40) according to claim 8 or 9.
EP18710004.5A 2017-03-14 2018-03-06 Operating method for a camera display system, camera display system, and vehicle Withdrawn EP3596920A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102017204168.4A DE102017204168A1 (en) 2017-03-14 2017-03-14 Operating method for a camera display system, camera display system and vehicle
PCT/EP2018/055451 WO2018166841A1 (en) 2017-03-14 2018-03-06 Operating method for a camera display system, camera display system, and vehicle

Publications (1)

Publication Number Publication Date
EP3596920A1 true EP3596920A1 (en) 2020-01-22

Family

ID=61616998

Family Applications (1)

Application Number Title Priority Date Filing Date
EP18710004.5A Withdrawn EP3596920A1 (en) 2017-03-14 2018-03-06 Operating method for a camera display system, camera display system, and vehicle

Country Status (5)

Country Link
US (1) US20200007790A1 (en)
EP (1) EP3596920A1 (en)
CN (1) CN110115031A (en)
DE (1) DE102017204168A1 (en)
WO (1) WO2018166841A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210100431A (en) * 2020-02-06 2021-08-17 삼성전기주식회사 Camera system for vehicle
DE102021132018B3 (en) 2021-12-06 2022-12-22 Audi Aktiengesellschaft Method and system for displaying an environment of a vehicle

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10012023A1 (en) 2000-03-11 2001-09-20 Bosch Gmbh Robert Monitoring function of visual display involves detecting defect in visual display and outputting signal detectable by vehicle driver, e.g. steering wheel vibrations, if display defective
DE102013220506A1 (en) * 2013-10-11 2015-04-16 Application Solutions (Electronics and Vision) Ltd. Fail-safe camera system
JP6330383B2 (en) * 2014-03-12 2018-05-30 株式会社デンソー Composite image generation apparatus and composite image generation program
DE102014106035A1 (en) * 2014-04-30 2015-11-05 Connaught Electronics Ltd. Method for operating a driver assistance system with an electronic rearview mirror, driver assistance system and motor vehicle
DE102014224795A1 (en) * 2014-12-03 2016-06-09 Conti Temic Microelectronic Gmbh Method and system for representing a vehicle environment of a motor vehicle on a display device arranged in the motor vehicle

Also Published As

Publication number Publication date
WO2018166841A1 (en) 2018-09-20
US20200007790A1 (en) 2020-01-02
DE102017204168A1 (en) 2018-09-20
CN110115031A (en) 2019-08-09

Similar Documents

Publication Publication Date Title
DE102016213045B4 (en) SYSTEM AND METHOD FOR PROVIDING IMAGE INFORMATION OF A VEHICLE ENVIRONMENT
DE102011079913A1 (en) Visual assistance system for a driver and vehicle with such a system
EP3176047B1 (en) Operating system for the driving of a vehicle, in particular of a commercial vehicle
EP3833575B1 (en) Surveillance camera system
DE102014106035A1 (en) Method for operating a driver assistance system with an electronic rearview mirror, driver assistance system and motor vehicle
EP3826897A1 (en) Method and device for assisting an attentiveness and/or driving readiness of a driver during an automated driving process of a vehicle
EP3539826B1 (en) Driver assistance system and method for a motor vehicle for displaying augmented reality displays
WO2016005232A1 (en) Merging of partial images to form an image of surroundings of a mode of transport
DE102005025102A1 (en) Dual Image Display
DE102013001326A1 (en) Motor vehicle i.e. car, has car-to-car communication unit outputting warning signal e.g. warning symbol, to driver of car if technical device of particular motor vehicle within environment of car is not activated
DE102013220506A1 (en) Fail-safe camera system
DE102015101183A1 (en) Method for operating a driver assistance system of a motor vehicle with display of environmental data in an autonomous driving mode, driver assistance system and motor vehicle
DE102018121917A1 (en) Vehicle communication management systems and methods
DE102019118604A1 (en) SYSTEMS AND METHODS FOR CONTROLLING VEHICLE FUNCTIONS VIA DRIVER AND PASSENGER HUD
DE102019217273A1 (en) In-vehicle information display device and method of controlling the same
WO2016086929A1 (en) Method and system for representing vehicle surroundings of a motor vehicle on a display device located in the motor vehicle
DE102016221380A1 (en) Side-and-rear monitoring system of a fail-safe vehicle and method thereof
EP3596920A1 (en) Operating method for a camera display system, camera display system, and vehicle
DE102016002232B4 (en) Method for operating a motor vehicle
DE102017116628A1 (en) DISPLAY DEVICE FOR A VEHICLE
DE102020118631B4 (en) Electronic mirror system for a vehicle
DE102020103653A1 (en) VEHICLE IMAGE DISPLAY SYSTEM AND METHOD FOR A PARKING SOLUTION
DE102012025580A1 (en) Method of operating camera system of motor vehicle, involves setting current parameter value of parameter of slave camera in dependence on current parameter value of same parameter of master camera
DE102019118183A1 (en) Information system and process
EP3162635A1 (en) Camera-based display system

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20190507

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20210125

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN WITHDRAWN

18W Application withdrawn

Effective date: 20220707