DE102011011048B4 - Überwachung des Nahbereichs rund um ein Nutzfahrzeug - Google Patents

Überwachung des Nahbereichs rund um ein Nutzfahrzeug Download PDF

Info

Publication number
DE102011011048B4
DE102011011048B4 DE102011011048.8A DE102011011048A DE102011011048B4 DE 102011011048 B4 DE102011011048 B4 DE 102011011048B4 DE 102011011048 A DE102011011048 A DE 102011011048A DE 102011011048 B4 DE102011011048 B4 DE 102011011048B4
Authority
DE
Germany
Prior art keywords
vehicle
outer edge
image
distance
parallel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102011011048.8A
Other languages
English (en)
Other versions
DE102011011048B9 (de
DE102011011048A1 (de
Inventor
Dr. Lang Werner
Dr. Bauer Stefan
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mekra Lang GmbH and Co KG
Original Assignee
Mekra Lang GmbH and Co KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to DE102011011048.8A priority Critical patent/DE102011011048B9/de
Application filed by Mekra Lang GmbH and Co KG filed Critical Mekra Lang GmbH and Co KG
Priority to US13/983,264 priority patent/US9232195B2/en
Priority to EP12704687A priority patent/EP2520088A1/de
Priority to BR112013020327-7A priority patent/BR112013020327B1/pt
Priority to KR1020137023938A priority patent/KR101547415B1/ko
Priority to PCT/EP2012/000613 priority patent/WO2012107238A1/de
Publication of DE102011011048A1 publication Critical patent/DE102011011048A1/de
Publication of DE102011011048B4 publication Critical patent/DE102011011048B4/de
Application granted granted Critical
Publication of DE102011011048B9 publication Critical patent/DE102011011048B9/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Traffic Control Systems (AREA)

Abstract

Elektronisches Sichtsystem zur Aufnahme und Anzeige eines Teilraumes U des nicht direkt einsehbaren Raumes im Umfeld eines Nutzfahrzeuges,mit einer Einrichtung zur Bildaufnahme, bestehend aus wenigstens einer Einheit zur Aufnahme eines Raums U und einer im Inneren des Fahrzeugs angeordneten Einrichtung zur Bildanzeige zur Anzeige einer Abbildung A des Raumes U, bestehend aus wenigstens einer Einheit zur Bildanzeige,wobei die Einrichtung zur Bildaufnahme wenigstens eine Punktemenge P ∈ U, darunter zwei beliebige Punkte Q und R, aufnimmt,eine Bodenebene (4) durch die Achsen xv (7) und yv (6) eines kartesischen Bezugskoordinatensystems (xv, yv) aufgespannt wird,wobei xv (7) in der Fahrzeugmittellängsachse (12) liegt,wobei die Einrichtung zur Bildanzeige ein Abbild P' der Punktemenge P in einer Ebene (22) anzeigt, darunter das Abbild Q' des Punktes Q und das Abbild R' des Punktes R und wobei die Ebene (22) durch die Achsen xv' (15) und yv' (14) eines kartesischen Bildbezugskoordinatensystems (xv', yv') aufgespannt wird,dadurch gekennzeichnet, dasssich die Punktemenge P aus dem Schnitt der Bodenebene (4) mit dem Teilraum U ergibt, xv' die Abbildung der Fahrzeugmittellängsachse (12) ist,die Projektion (QR, xv) (18) des VektorsQR→(16) auf xv (7) und die Projektion (Q'R', xv') (20) des VektorsQ'R'→(17) auf xv' (15) die gleiche Richtung besitzen,und die Projektion (QR, yv) (19) des VektorsQR→(16) auf yv (6) und die Projektion (Q'R', yv') (21) des VektorsQ'R'→auf yv' (14) die gleiche Richtung besitzen.

Description

  • Zweck der Erfindung, Problemstellung
  • Im Nahbereich rund um ein Nutzfahrzeug gibt es Teilbereiche, die nicht direkt vom Fahrer eingesehen werden können.
  • Zum Stand der Technik gibt es umfangreiche Vorschriften über anzubringende Spiegel zur Herstellung indirekter Sicht, die dieses Problem in einem gewissen Umfang entschärfen. Die Aufgabe der optimalen Darbietung und Aufbereitung der nötigen Bildinformationen im Hinblick auf nicht direkt einsehbare Bereiche ist damit jedoch-noch nicht-gelöst:
    • Die für die Einleitung eines Fahrmanövers nötige Bildinformation wird auf eine Vielzahl von Spiegeln verteilt und aufgrund sehr kleiner Wölbungsradien im Nahbereich zudem stark verzerrt dargestellt. Diese Komplexität der vermittelten Information birgt das Risiko der Überforderung des Fahrers in schwierigen Fahrsituationen und stellt somit eine Sicherheitsgefahr dar.
  • Aufgabe der vorliegenden Erfindung ist es daher, dem Fahrer Information über mögliche kritische Objekte in den von ihm nicht direkt einsehbaren Teilbereichen zu vermitteln, die er möglichst vollständig, schnell und richtig erfassen und interpretieren kann
  • Charakteristik des Standes der Technik
  • Spiegellösungen
    • • Zum Stand der Technik sind Spiegellösungen nach den Sichtfeldklassen der Richtlinie ECE R-46 (vgl. ) bekannt, die
      • o Sichtfeld Klasse V (1) mit einem Spiegel einsehbar machen
      • o Sichtfeld Klasse VI (2)mit einem Spiegel einsehbar machen
      • o Sichtfeld Klasse V und VI (1,2) mit einem Spiegel einsehbar machen
      • o Sichtfeld Klasse IV (2) mit zwei Spiegeln (links und rechts) einsehbar machen
  • Frontkameras
    • • Zum Stand der Technik sind Kamera-Monitor-Systeme bekannt, die dem Fahrer das Sichtfeld VI (2) sichtbar machen
  • Bird-View-Technologie
    • • Zum Stand der Technik sind Systeme bekannt, die das Fahrzeugumfeld aus der Vogelperspektive zeigen (Birdview-Systeme). Hierbei werden mehrere Einzelbilder entsprechend umgerechnet und zusammengefügt.
    • • Birdview-Systeme werden von einigen PKW-Herstellern angeboten. Charakteristisch für diese zum Stand der Technik verfügbaren PKW-Birdview-Systeme sind folgende Eigenschaften
      • o Trennlinien zwischen Einzelbildern sind nicht mehr erkennbar
      • o Kamerabilder sind aufeinander abgestimmt (Weißabgleich, usw.)
      • o Es gibt immer noch tote Bereiche in dieser Darstellung
    • • Im Nutzfahrzeugmarkt sind Lösungen für Spezialfahrzeuge (Müllfahrzeuge,...) bekannt. In diesem Segment wird jedoch auf eine echte Zusammenführung der Einzelbilder verzichtet. Trennlinien sind klar erkennbar.
  • Sensorlösungen (ohne Videobild-Wiedergabe)
    • • Bekannt sind Nahbereichs-Überwachungssysteme, z. B. auf Basis von Ultraschall- und Radarsensoren
  • DE 195 39 642 A1 betrifft ein Verfahren zur Visualisierung eines nicht unmittelbar einsehbaren Überwachungsraums durch Verwendung einer Kamera mit Weitwinkelobjektiv, die zwischen einer Ruheposition und einer Betriebsposition schwenkbar ist, wobei eine elektronische Streckenentzerrung eines aufgenommenen realen Bilds durchgeführt wird.
  • DE 10 2008 034 606 A1 betrifft ein Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit, die mindestens ein Bildsignal von dem Fahrzeug drahtlos empfängt zur Generierung einer Darstellung auf der mobilen Einheit, welche wenigstens eine perspektivisch angeordnete virtuelle Ebene enthält, auf welcher wenigsten ein mit einem Aufnahmemittel des Fahrzeugs aufgenommenes Bild, umfassend zumindest einen Teil der Umgebung des Fahrzeuges, abgebildet ist.
  • Nachteile des Standes der Technik
  • Spiegellösungen
    • • Die für die Einleitung eines Fahrmanövers nötige Bildinformation wird auf eine Vielzahl von Spiegeln verteilt und aufgrund sehr kleiner Wölbungsradien im Nahbereich zudem stark verzerrt dargestellt. Diese Komplexität der vermittelten Information birgt das Risiko der Überforderung des Fahrers in schwierigen Fahrsituationen und stellt somit eine Sicherheitsgefahr dar
  • Frontkamera
    • • Substitution Frontspiegel durch Frontkamera führt noch nicht zu einer Reduzierung der Komplexität der Information
  • Bird-View-Technologie
    • • Derzeitige verfügbare Systeme stellen Bildinformation stark verzerrt dar, bedingt auch durch die bauartbedingte geringe Anbauhöhe der erforderlichen Kameras im PKW-Bereich
    • • Zum Stand der Technik verfügbare Bird-View-Systeme weisen den Nachteil auf, dass in den Übergangsbereichen zwischen den Einzelbildern aufgrund perspektivischer Unterschiede „blinde“ Bereiche entstehen, innerhalb derer Objekte nicht dargestellt werden können
  • Sensorlösungen (ohne Videobild-Wiedergabe)
    • • Zum Stand der Technik sind die verfügbaren Systeme nicht zu 100% verlässlich
    • • Ein Warnsignal ohne zusätzliche Information über die Ursache der Warnung für Fahrer schwer kognitiv zu verarbeiten
  • Lösung der Aufgabe (Beschreibung der Erfindung)
  • Randbedingungen
    • • Die erfinderische Lösung der Aufgabe erfolgt spezifisch und ausschließlich für Nutzfahrzeuge unter besonderer Berücksichtigung der gegebenen Rahmenbedingungen bei diesen Fahrzeugklassen
      • o Bauhöhe
      • o Zu überwachende Gesamtfläche
      • o Direkte Sicht
    • • Die Lösung der Aufgabe beruht auf die im Nachgang erläuterte erfinderische Art und Weise der Definition und Abgrenzung nicht direkt einsehbarer Teilbereiche
    • • Die Lösung der Aufgabe beinhaltet
      • o Für jeden nicht direkt einsehbaren Teilbereich jeweils wenigstens eine Einrichtung zur Bildaufnahme
      • o Eine Einrichtung zur Bilddatenübertragung
      • o Eine Einrichtung zur Bilddatenverarbeitung
      • o Wenigstens eine Einrichtung zur Bildwiedergabe
    • • Die Lösung der Aufgabe beruht weiterhin auf einem erfinderischen Konzept zur Abbildung der nicht direkt einsehbaren Teilbereiche in den Bildbereich der Einrichtung zur Bildanzeige
  • Definition und Abgrenzung nicht direkt einsehbarer Teilbereiche am Beispiel eines Lastkraftwagens der Klasse N2 oder N3 (vgl. Abb. 2)
  • A1
    direkt sichtbarer Bereich vorne
    A2
    direkt sichtbarer Bereich beifahrerseitig
    A3
    direkt sichtbarer Bereich fahrerseitig
    B1
    nicht direkt sichtbarer Bereich vorne und vorne seitlich
    B2, B3
    nicht direkt sichtbarer Bereich, mitte seitlich
    B4
    nicht direkt sichtbarer Bereich, hinten
    • • Betrachtet wird ein Nutzfahrzeug, welches auf einer im Wesentlichen ebenen Fläche steht (Bodenebene) (4)
    • • Am Beispiel eines LkWs ist aus der Position der Fahreraugpunkte (5)
      • ◯ durch die Frontscheibe ein Teilbereich (A1) auf Bodenebene direkt einsehbar
      • ◯ durch das Seitenfenster beifahrerseitig ein Teilbereich (A2) direkt einsehbar
      • ◯ durch das Seitenfenster fahrerseitig ein Teilbereich (A3) direkt einsehbar
    • • Der nicht direkt einsehbare Gesamtbereich (B) entspricht der Bodenebene abzüglich der Bereiche (A1, A2, A3)
    • • Für den nicht direkt einsehbaren Gesamtbereich (B) werden in erfinderischer Weise folgende nicht direkt einsehbare Teilbereiche definiert
      • ◯ Teilbereich (B1) (vorne und seitlich vorne)
        • • Teilbereich (B1) stellt eine Teilmenge von (B) dar
        • • Teilbereich (B1) ist begrenzt durch
          • • Eine Parallele zur Fahrzeugaußenkante beifahrerseitig (8) im Abstand (a2) >= 4,5m in negativer yv-Richtung (6)
          • • Eine Parallele zur Fahrzeugaußenkante vorne (9) im Abstand (b) >= 3m in positiver xv-Richtung (7)
          • • Eine Parallele zur Fahrzeugaußenkante vorne (9) im Abstand (c) >= 0,75m zu den Fahreraugpunkten (5) in negativer xv-Richtung (7)
          • • Eine Parallele zur Fahrzeugaußenkante fahrerseitig (10) im Abstand (a1) >=1m in positiver yv-Richtung (6)
      • ◯ Teilbereiche (B2) und (B3) (seitlich und seitlich hinten)
        • • (B2) und (B3) sind Teilmengen von (B)
        • • Teilbereich (B2) ist begrenzt durch
          • • Fahrzeugaußenkante beifahrerseitig (8)
          • • Eine Parallele zur Fahrzeugaußenkante beifahrerseitig (8) im Abstand (a2) >= 4,5m in negativer yv-Richtung (6)
          • • Eine Parallele zur Fahrzeugaußenkante vorne (9) im Abstand (c) <= 0,75m zu den Fahreraugpunkten (5) in negativer xv-Richtung (7)
          • • Eine Parallele zur Fahrzeugaußenkante vorne (9) im Abstand (d) >= 30m zu den Fahreraugpunkten (5) in negativer xv-Richtung (7)
        • • Teilbereich (B3) ist begrenzt durch
          • • Fahrzeugaußenkante fahrerseitig (10)
          • • Eine Parallele zur Fahrzeugaußenkante fahrerseitig (10) im Abstand (a1) >= 1m in positiver yv-Richtung (6)
          • • Eine Parallele zur Fahrzeugaußenkante vorne (9) im Abstand (c) <= 0,75m zu den Fahreraugpunkten (5) in negativer xv-Richtung (7)
          • • Eine Parallele zur Fahrzeugaußenkante vorne (9) im Abstand (d) >= 30m zu den Fahreraugpunkten (5) in negativer xv-Richtung (7)
      • ◯ Teilbereich (B4) (hinten)
        • • (B4) ist Teilmenge von (B)
        • • Teilbereich (B4) ist begrenzt durch
          • • Fahrzeugaußenkante hinten (11)
          • • Parallele zu Fahrzeugaußenkante fahrerseitig (10) in einem Abstand (x1) >= 0 in positiver yv-Richtung (6)
          • • Parallele zu Fahrzeugaußenkante beifahrerseitig (8) in einem Abstand (x2) >= 0 in negativer yv-Richtung (6)
          • • Parallele zu Fahrzeugaußenkante hinten (11) im Abstand (e) >= 9m in negativer xv-Richtung (7)
    • • Obenstehende Definition der Grenzen der Bereiche (B1, B2, B3, B4) sind am Beispiel eines LKWs angegeben, kann jedoch angepasst und in ähnlicher Form auf beliebige Nutzfahrzeuge übertragen werden
  • Bildaufnahme
    • • Aufnahme wenigstens einer Punktemenge (P), welche einen der Bereiche
      • ◯ (B1) oder
      • ◯ (B1) ∪ (B4) oder
      • ◯ (B1) ∪ (B2) ∪ (B4) oder
      • ◯ (B1) ∪ (B2) ∪ (B3) ∪ (B4)
      beschreibt, darunter die Punkte (Q) und (R) (vgl. ) mit der Einrichtung zur Bildaufnahme
    • • Anbauhöhe h der Bildaufnahmeeinheiten 1,40m <= h <= 3,80m
    • • Bezugssystem (vgl. Fehler! Verweisquelle konnte nicht gefunden werden. und )
      • ◯ Ebenes, kartesisches Bezugskoordinatensystem xv (7), yv (6) auf Bodenebene (4)
      • ◯ xv (7) liegt auf ebener Projektion der Fahrzeugmittellängsachse (12)
      • ◯ yv (6) liegt senkrecht dazu
      • ◯ Koordinatenursprung (13) entspricht den auf Bodenebene (4) projizierter Mittelpunkt der äußersten vorderen Fahrzeugkante (9)
  • Bildwiedergabe
    • • Wiedergabe mit einem System zur Bildwiedergabe, bestehend aus wenigstens einer Einrichtung zur Bildwiedergabe (vgl. )
    • • Wiedergabe der Teilbereiche (B1) und (B4) mit dem System zur Bildwiedergabe
      • ◯ Wiedergabe von Bereich (B1) bei Stillstand oder bei Vorwärtsfahrt
      • ◯ Wiedergabe von Bereich (B4) bei eingelegtem Rückwärtsgang
      • ◯ Denkbar sind Weiterbildungen der Erfindung, in denen ein Teilbereich (B2) u (B3) bei aktivierter Zündung wiedergegeben wird
    • • Für alle zu einem bestimmten Zeitpunkt gleichzeitig wiedergegebenen Teilbereiche:
      • ◯ Wiedergabe eines Abbildes (P') einer Teilmenge der Punktemenge (P) (vgl. und )
      • ◯ (Q) wird durch (Q') wiedergegeben
      • ◯ (R) wird durch (R') wiedergegeben
      • ◯ Abbildung des ursprünglichen Bezugskoordinatensystem xv (7) und yv (6) auf das Bildbezugskoordinatensystem xv' (15) und yv' (14), wobei
        • • xv' (15) auf Abbildung der Fahrzeugmittellängsachse (12) liegt
        • • yv' (14) senkrecht zu xv' (15) liegt
      • ◯ Wiedergabe gekennzeichnet durch
        • • Gleichheit Richtung Verktorkomponente qr',yv' (21) und Richtung der Vektorkomponente qr,yv (19)
        • • Gleichheit Richtung Verktorkomponente qr',xv' (20) und Richtung der Vektorkomponente qr,xv (18)
  • Warnung vor kritischen Objekten
    • • Denkbar sind Weiterbildungen der Erfindung, die eine Erfassung von kritischen Objekten und deren Relativgeschwindigkeiten zum Fahrzeug, sowie eine Warnung bei Kollisionsgefahr (zusätzlich zu bildliche Wiedergabe des Überwachungsbereiches) aufweisen
  • Vorteile der Erfindung
    • • Interpretation des wiedergegebenen Bildes leicht möglich
      • ◯ durch leichte Orientierung im angezeigten Bild (Anordnung Objekte in bildlicher Darstellung entspricht Anordnung der Objekte im Erfassungsbereich
      • ◯ durch eine geringe Bildverzerrung aufgrund günstiger Anbauhöhe (möglich durch Beschränkung auf Nutzfahrzeuge)
    • • Aufmerksamkeitslenkung durch zusätzliche Warnung bei Anwesendheit eines kritischen Objektes
  • Beschreibung von Ausführungsbeispielen
  • Darstellung Bereich (B1) mit drei Einheiten zur Bildaufnahme und einer Einheit zur Bildwiedergabe
  • In einem bevorzugten Ausführungsbeispiel wird der Bereich (B1) wie in dargestellt mit drei Einheiten zur Bildaufnahme (KE1, KE2, KE3) mit deren Erfassungsbereich (AE1, AE2, AE3) erfasst und wie in gezeigt mit einer Einheit zur Bildwiedergabe (AE1', AE2', AE3') wiedergegeben.
  • Darstellung Bereich (B1) mit zwei Einheiten zur Bildaufnahme und einer Einheit zur Bildwiedergabe
  • In einem weiteren bevorzugten Ausführungsbeispiel wird der Bereich (B1) wie in dargestellt mit zwei Einheiten zur Bildaufnahme (KE1, KE2) mit deren Erfassungsbereich (AE1, AE2) erfasst und wie in gezeigt mit einer Einheit zur Bildwiedergabe (AE1', AE2') wiedergegeben.

Claims (14)

  1. Elektronisches Sichtsystem zur Aufnahme und Anzeige eines Teilraumes U des nicht direkt einsehbaren Raumes im Umfeld eines Nutzfahrzeuges, mit einer Einrichtung zur Bildaufnahme, bestehend aus wenigstens einer Einheit zur Aufnahme eines Raums U und einer im Inneren des Fahrzeugs angeordneten Einrichtung zur Bildanzeige zur Anzeige einer Abbildung A des Raumes U, bestehend aus wenigstens einer Einheit zur Bildanzeige, wobei die Einrichtung zur Bildaufnahme wenigstens eine Punktemenge P ∈ U, darunter zwei beliebige Punkte Q und R, aufnimmt, eine Bodenebene (4) durch die Achsen xv (7) und yv (6) eines kartesischen Bezugskoordinatensystems (xv, yv) aufgespannt wird, wobei xv (7) in der Fahrzeugmittellängsachse (12) liegt, wobei die Einrichtung zur Bildanzeige ein Abbild P' der Punktemenge P in einer Ebene (22) anzeigt, darunter das Abbild Q' des Punktes Q und das Abbild R' des Punktes R und wobei die Ebene (22) durch die Achsen xv' (15) und yv' (14) eines kartesischen Bildbezugskoordinatensystems (xv', yv') aufgespannt wird, dadurch gekennzeichnet, dass sich die Punktemenge P aus dem Schnitt der Bodenebene (4) mit dem Teilraum U ergibt, xv' die Abbildung der Fahrzeugmittellängsachse (12) ist, die Projektion (QR, xv) (18) des Vektors Q R
    Figure DE102011011048B4_0005
    (16) auf xv (7) und die Projektion (Q'R', xv') (20) des Vektors Q ' R '
    Figure DE102011011048B4_0006
    (17) auf xv' (15) die gleiche Richtung besitzen, und die Projektion (QR, yv) (19) des Vektors Q R
    Figure DE102011011048B4_0007
    (16) auf yv (6) und die Projektion (Q'R', yv') (21) des Vektors Q ' R '
    Figure DE102011011048B4_0008
    auf yv' (14) die gleiche Richtung besitzen.
  2. Elektronisches Sichtsystem nach Anspruch 1, dadurch gekennzeichnet, dass das Nutzfahrzeug ein Lastkraftwagen der Klasse N2 oder N3 oder ein Bus der Klasse M2 oder M3 ist.
  3. Elektronisches Sichtsystem nach Anspruch 2, dadurch gekennzeichnet, dass die Punktemenge P einen Bereich B1 beschreibt, wobei B1 durch eine Parallele zur Fahrzeugaußenkante beifahrerseitig im Abstand a2 >= 4,5m in negativer yv-Richtung und durch eine Parallele zur Fahrzeugaußenkante vorne im Abstand b >= 3m in positiver xv-Richtung und durch eine Parallele zur Fahrzeugaußenkante vorne im Abstand c >= 0,75m zu den Fahreraugpunkten in negativer xv-Richtung und durch eine Parallele zur Fahrzeugaußenkante fahrerseitig im Abstand a1 >= 1m in positiver yv-Richtung begrenzt ist.
  4. Elektronisches Sichtsystem nach Anspruch 2, dadurch gekennzeichnet, dass die Punktemenge P einen Bereich B2 beschreibt, wobei B2 durch die Fahrzeugaußenkante beifahrerseitig und durch eine Parallele zur Fahrzeugaußenkante beifahrerseitig im Abstand a2 >= 4,5m in negativer yv-Richtung und durch eine Parallele zur Fahrzeugaußenkante vorne im Abstand c <= 0,75m zu den Fahreraugpunkten in negativer xv-Richtung und durch eine Parallele zur Fahrzeugaußenkante vorne im Abstand d >= 30m zu den Fahreraugpunkten in negativer xv-Richtung begrenzt ist.
  5. Elektronisches Sichtsystem nach Anspruch 2, dadurch gekennzeichnet, dass die Punktemenge P einen Bereich B3 beschreibt, wobei B3 durch die Fahrzeugaußenkante fahrerseitig und durch eine Parallele zur Fahrzeugaußenkante fahrerseitig im Abstand a1 >= 1m in positiver yv-Richtung und durch eine Parallele zur Fahrzeugaußenkante vorne im Abstand c <= 0,75m zu den Fahreraugpunkten in negativer xv-Richtung und durch eine Parallele zur Fahrzeugaußenkante vorne im Abstand d >= 30m zu den Fahreraugpunkten in negativer xv-Richtung begrenzt ist.
  6. Elektronisches Sichtsystem nach Anspruch 2, dadurch gekennzeichnet, dass die Punktemenge P einen Bereich B4 beschreibt, wobei B4 durch die Fahrzeugaußenkante hinten und durch eine Parallele zur Fahrzeugaußenkante fahrerseitig in einem Abstand xi >= 0 in positiver yv-Richtung und durch eine Parallele zur Fahrzeugaußenkante beifahrerseitig in einem Abstand x2 >= 0 in negativer yv-Richtung und durch eine Parallele zur Fahrzeugaußenkante hinten im Abstand e >= 9m in negativer xv-Richtung begrenzt ist.
  7. Elektronisches Sichtsystem nach den Ansprüchen 2, 3 und 6, dadurch gekennzeichnet, dass die Punktemenge P die Vereinigungsmenge der Bereiche B1 und B4 beschreibt.
  8. Elektronisches Sichtsystem nach den Ansprüchen 2, 3 und 4, dadurch gekennzeichnet, dass die Punktemenge P die Vereinigungsmenge der Bereiche B1 und B2 beschreibt.
  9. Elektronisches Sichtsystem nach den Ansprüchen 2, 3, 4 und 6, dadurch gekennzeichnet, dass die Punktemenge P die Vereinigungsmenge der Bereiche B1, B2 und B4 beschreibt.
  10. Elektronisches Sichtsystem nach den Ansprüchen 2 bis 5, dadurch gekennzeichnet, dass die Punktemenge P die Vereinigungsmenge der Bereiche B1, B2 und B3 beschreibt.
  11. Elektronisches Sichtsystem nach den Ansprüchen 2 bis 6, dadurch gekennzeichnet, dass die Punktemenge P die Vereinigungsmenge der Bereiche B1, B2, B3 und B4 beschreibt.
  12. Elektronisches Sichtsystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Auswahl der dargestellten Bereiche von der Fahrsituation abhängt.
  13. Elektronisches Sichtsystem nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Einheit zur Aufnahme auf einer Höhe h über der Fahrbahn angeordnet ist, wobei 1,40m <= h <= 3,80m.
  14. Nutzfahrzeug, dadurch gekennzeichnet, dass es ein elektronisches Sichtsystem nach einem der vorhergehenden Ansprüche aufweist.
DE102011011048.8A 2011-02-11 2011-02-11 Überwachung des Nahbereichs rund um ein Nutzfahrzeug Active DE102011011048B9 (de)

Priority Applications (6)

Application Number Priority Date Filing Date Title
DE102011011048.8A DE102011011048B9 (de) 2011-02-11 2011-02-11 Überwachung des Nahbereichs rund um ein Nutzfahrzeug
EP12704687A EP2520088A1 (de) 2011-02-11 2012-02-10 Überwachung des nahbereichs rund um ein nutzfahrzeug
BR112013020327-7A BR112013020327B1 (pt) 2011-02-11 2012-02-10 Sistema de visualização eletrônica para capturar e exibir um subespaço do espaço não diretamente visível nos arredores de um veículo comercial e veículo comercial
KR1020137023938A KR101547415B1 (ko) 2011-02-11 2012-02-10 상용차량 주위 근접부의 모니터링
US13/983,264 US9232195B2 (en) 2011-02-11 2012-02-10 Monitoring of the close proximity around a commercial vehicle
PCT/EP2012/000613 WO2012107238A1 (de) 2011-02-11 2012-02-10 Überwachung des nahbereichs rund um ein nutzfahrzeug

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102011011048.8A DE102011011048B9 (de) 2011-02-11 2011-02-11 Überwachung des Nahbereichs rund um ein Nutzfahrzeug

Publications (3)

Publication Number Publication Date
DE102011011048A1 DE102011011048A1 (de) 2012-08-16
DE102011011048B4 true DE102011011048B4 (de) 2021-06-24
DE102011011048B9 DE102011011048B9 (de) 2021-10-07

Family

ID=45688418

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102011011048.8A Active DE102011011048B9 (de) 2011-02-11 2011-02-11 Überwachung des Nahbereichs rund um ein Nutzfahrzeug

Country Status (6)

Country Link
US (1) US9232195B2 (de)
EP (1) EP2520088A1 (de)
KR (1) KR101547415B1 (de)
BR (1) BR112013020327B1 (de)
DE (1) DE102011011048B9 (de)
WO (1) WO2012107238A1 (de)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011010624B4 (de) 2011-02-08 2014-10-16 Mekra Lang Gmbh & Co. Kg Anzeigevorrichtung für Sichtfelder eines Nutzfahrzeugs
DE102011011048B9 (de) 2011-02-11 2021-10-07 Mekra Lang Gmbh & Co. Kg Überwachung des Nahbereichs rund um ein Nutzfahrzeug
US9511711B2 (en) * 2012-01-30 2016-12-06 Klear-View Camera, Llc System and method for providing front-oriented visual information to vehicle driver
US20140139669A1 (en) 2012-01-30 2014-05-22 Steven Petrillo System and method for providing front-oriented visual information to vehicle driver
DE102012015398B3 (de) 2012-08-03 2013-10-24 Mekra Lang Gmbh & Co. Kg Spiegelersatzsystem für ein Fahrzeug
DE102013002111B4 (de) 2013-02-08 2021-11-18 Mekra Lang Gmbh & Co. Kg Sichtsystem für Fahrzeuge, insbesondere Nutzfahrzeuge
WO2014206406A1 (de) 2013-06-26 2014-12-31 Conti Temic Microelectronic Gmbh Spiegelersatzvorrichtung und fahrzeug
US10861338B2 (en) * 2016-05-05 2020-12-08 Harman International Industries, Incorporated Systems and methods for driver assistance
FR3120860B1 (fr) * 2021-03-17 2023-05-12 Haulotte Group Nacelle élévatrice à visibilité améliorée

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19539642A1 (de) * 1995-10-25 1996-11-14 Daimler Benz Ag Verfahren zur Visualisierung eines nicht unmittelbar einsehbaren Überwachungsraumes insbesondere bei einem Fahrzeug, und Vorrichtung zur Visualisierung eines nicht unmittelbar einsehbaren Überwachungsraumes
DE10254035B4 (de) * 2002-11-20 2004-12-09 Kurt Scharfenberger Lastkraftwagen
DE102008034606A1 (de) * 2008-07-25 2010-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0396938U (de) 1990-01-24 1991-10-04
JPH0471939A (ja) 1990-07-10 1992-03-06 Nec Home Electron Ltd 車両後方確認システム
US5670935A (en) * 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
ES1028357Y (es) 1994-06-03 1995-06-16 Cortes Luis Leon Lamata Dispositivo receptor para pantalla retrovisora.
JPH0884277A (ja) 1994-09-09 1996-03-26 Mitsubishi Electric Corp 車載用カメラ
US6891563B2 (en) * 1996-05-22 2005-05-10 Donnelly Corporation Vehicular vision system
US6172613B1 (en) 1998-02-18 2001-01-09 Donnelly Corporation Rearview mirror assembly incorporating vehicle information display
US6693524B1 (en) * 1998-06-02 2004-02-17 George R. Payne Vehicle backup monitoring and alarm system
US6268803B1 (en) * 1998-08-06 2001-07-31 Altra Technologies Incorporated System and method of avoiding collisions
DE19900498B4 (de) 1999-01-08 2009-01-29 Volkswagen Ag Verfahren und Einrichtung zur Einsichtnahme des rückwärtigen Beobachtungsraumes bei Kraftfahrzeugen
GB2351055A (en) 1999-06-16 2000-12-20 Albert Franks Vehicle reversing aid
JP2001114048A (ja) 1999-10-20 2001-04-24 Matsushita Electric Ind Co Ltd 車載運転支援情報表示装置
US8818647B2 (en) 1999-12-15 2014-08-26 American Vehicular Sciences Llc Vehicular heads-up display system
WO2001064481A2 (en) 2000-03-02 2001-09-07 Donnelly Corporation Video mirror systems incorporating an accessory module
JP4479070B2 (ja) 2000-07-04 2010-06-09 株式会社ニコン 画像データ収集装置
JP3803021B2 (ja) 2000-10-02 2006-08-02 松下電器産業株式会社 運転支援装置
DE20106977U1 (de) 2001-04-23 2002-08-29 Mekra Lang Gmbh & Co Kg Warneinrichtung in Kraftfahrzeugen
JP4520661B2 (ja) 2001-04-24 2010-08-11 ヴイストン株式会社 車両用周辺監視装置
KR100866450B1 (ko) 2001-10-15 2008-10-31 파나소닉 주식회사 차량 주위 감시 장치 및 그 조정 방법
US7212653B2 (en) * 2001-12-12 2007-05-01 Kabushikikaisha Equos Research Image processing system for vehicle
JP3860039B2 (ja) 2002-01-18 2006-12-20 株式会社オートネットワーク技術研究所 撮像カメラ
JP2003320911A (ja) 2002-04-26 2003-11-11 Sumitomo Electric Ind Ltd 車載制御システム、制御装置、及び中継装置
US20040036768A1 (en) 2002-06-19 2004-02-26 Green L. Derek System and method for electronically viewing behind a vehicle
KR20040003216A (ko) 2002-07-02 2004-01-13 기아자동차주식회사 차량의 전방필러에 의한 운전사각 모니터장치
JP3996498B2 (ja) 2002-12-02 2007-10-24 株式会社オートネットワーク技術研究所 カメラ装置及び車両周辺視認装置
CN1261787C (zh) 2003-03-10 2006-06-28 京瓷株式会社 摄像装置
JP4766841B2 (ja) 2003-09-08 2011-09-07 株式会社オートネットワーク技術研究所 車両に搭載されるカメラ装置及び車両周辺監視装置
JP5036891B2 (ja) 2003-09-08 2012-09-26 株式会社オートネットワーク技術研究所 車両に搭載されるカメラ装置及び車両周辺監視装置
JP2005110202A (ja) 2003-09-08 2005-04-21 Auto Network Gijutsu Kenkyusho:Kk カメラ装置及び車両周辺監視装置
US7308341B2 (en) 2003-10-14 2007-12-11 Donnelly Corporation Vehicle communication system
JP3765422B2 (ja) 2004-04-28 2006-04-12 コナミ株式会社 画像生成装置、加速度表示方法、および、プログラム
DE202004014778U1 (de) 2004-09-22 2006-02-09 Mekra Lang Gmbh & Co. Kg Nutzfahrzeuge mit Kameraeinrichtung sowie Kameraeinrichtung hierfür
DE102004045974A1 (de) 2004-09-22 2006-03-23 Mekra Lang Gmbh & Co. Kg System zur Übertragung von Signalen in einem Kraftfahrzeug
DE202005004675U1 (de) 2005-03-22 2006-08-03 Mekra Lang Gmbh & Co. Kg Kamera für den Außenbereich
US8130269B2 (en) 2005-03-23 2012-03-06 Aisin Aw Co., Ltd. Visual recognition apparatus, methods, and programs for vehicles
DE102005028144B4 (de) 2005-06-17 2022-01-13 Robert Bosch Gmbh Kameraanordnung mit Bildsensorabdichtung gegen Umwelteinflüsse
JP2007091186A (ja) 2005-09-28 2007-04-12 Yasuharu Kawabata 車両周囲状況の撮影表示方法および撮影表示システム
JP2007110572A (ja) 2005-10-14 2007-04-26 Alpine Electronics Inc 複数カメラ画像合成表示装置
ATE422057T1 (de) 2006-01-31 2009-02-15 Mekra Lang Gmbh & Co Kg Rückspiegel für fahrzeuge mit einer elektronischen display zur anzeige von objektion in einem überwachten bereich zur kollisionsvermeidung
CA2675974C (en) 2006-04-04 2012-10-02 Bae Systems Information And Electronic Systems Integration Inc. Method and apparatus for protecting troops
JP2007282098A (ja) 2006-04-11 2007-10-25 Denso Corp 画像処理装置及び画像処理プログラム
DE102006020511A1 (de) 2006-05-03 2007-11-08 Efkon Mobility Gmbh Einrichtung und Verfahren zum Übertragen von Videosignalen bei Kraftfahrzeugen
JP2007320359A (ja) 2006-05-30 2007-12-13 Mitsubishi Electric Corp ドライブレコーダシステムおよび車載装置
EP1927876A1 (de) 2006-08-10 2008-06-04 MEKRA Lang GmbH & Co. KG Weitwinkelobjektiv und Weitwinkelkamera
US8004394B2 (en) 2006-11-07 2011-08-23 Rosco Inc. Camera system for large vehicles
US8182125B2 (en) * 2006-11-07 2012-05-22 Rosco Inc. External safety illumination for a bus with light mounted to mirror arm
US8075169B2 (en) * 2006-11-07 2011-12-13 Rosco Inc. External safety illumination for a bus
JP2008149764A (ja) 2006-12-14 2008-07-03 Alpine Electronics Inc 車両周辺監視装置
US10168179B2 (en) 2007-01-26 2019-01-01 Honeywell International Inc. Vehicle display system and method with enhanced vision system and synthetic vision system image display
JP4793307B2 (ja) 2007-04-03 2011-10-12 株式会社デンソー 車両周辺監視装置
JP2009060499A (ja) * 2007-09-03 2009-03-19 Sanyo Electric Co Ltd 運転支援システム及び連結車両
ES2368463T3 (es) 2008-02-19 2011-11-17 Saab Ab Pantalla de visualización frontal con control de brillo.
KR101003746B1 (ko) 2009-02-03 2010-12-24 (주)다위실업정공 멀티 사이드 미러
ES2538827T3 (es) 2009-09-01 2015-06-24 Magna Mirrors Of America, Inc. Sistema de formación de imágenes y de exhibición para un vehículo
JP2011095321A (ja) 2009-10-27 2011-05-12 Toshiba Alpine Automotive Technology Corp 車両用画像表示装置
US20110115913A1 (en) 2009-11-17 2011-05-19 Werner Lang Automated vehicle surrounding area monitor and display system
JP5619873B2 (ja) 2010-03-26 2014-11-05 本田技研工業株式会社 車両の運転を支援するための装置
JP2012010026A (ja) 2010-06-23 2012-01-12 Seiko Epson Corp 撮像装置及び撮像制御回路
US20120013742A1 (en) 2010-07-16 2012-01-19 Delphi Technologies, Inc. Vision system and method for displaying a field of view dependent upon detecting an object
EP2431226B1 (de) 2010-09-17 2016-07-27 SMR Patents S.à.r.l. Rückblickeinrichtung für ein Kraftfahrzeug
DE102011010624B4 (de) 2011-02-08 2014-10-16 Mekra Lang Gmbh & Co. Kg Anzeigevorrichtung für Sichtfelder eines Nutzfahrzeugs
DE102011011048B9 (de) 2011-02-11 2021-10-07 Mekra Lang Gmbh & Co. Kg Überwachung des Nahbereichs rund um ein Nutzfahrzeug
DE102012015398B3 (de) 2012-08-03 2013-10-24 Mekra Lang Gmbh & Co. Kg Spiegelersatzsystem für ein Fahrzeug

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19539642A1 (de) * 1995-10-25 1996-11-14 Daimler Benz Ag Verfahren zur Visualisierung eines nicht unmittelbar einsehbaren Überwachungsraumes insbesondere bei einem Fahrzeug, und Vorrichtung zur Visualisierung eines nicht unmittelbar einsehbaren Überwachungsraumes
DE10254035B4 (de) * 2002-11-20 2004-12-09 Kurt Scharfenberger Lastkraftwagen
DE102008034606A1 (de) * 2008-07-25 2010-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit

Also Published As

Publication number Publication date
WO2012107238A1 (de) 2012-08-16
KR20140003585A (ko) 2014-01-09
US9232195B2 (en) 2016-01-05
EP2520088A1 (de) 2012-11-07
US20130314539A1 (en) 2013-11-28
BR112013020327B1 (pt) 2022-07-12
DE102011011048B9 (de) 2021-10-07
DE102011011048A1 (de) 2012-08-16
BR112013020327A2 (pt) 2017-08-08
KR101547415B1 (ko) 2015-08-25

Similar Documents

Publication Publication Date Title
DE102011011048B4 (de) Überwachung des Nahbereichs rund um ein Nutzfahrzeug
DE102010052304A1 (de) Verfahren und Vorrichtung zum Unterstützen eines Fahrers eines Kraftfahrzeugs beim Ausparken aus einer Parklücke und Kraftfahrzeug
DE102005054972A1 (de) Verfahren zur Totwinkelüberwachung bei Fahrzeugen
DE102006011481A1 (de) Verfahren und Vorrichtung zum Unterstützen eines Führens eines Fahrzeugs
DE112010005448T5 (de) Kollisionsbeurteilungsvorrichtung für ein Fahrzeug
DE102018108433A1 (de) Bildanzeigevorrichtung
DE102012019506A1 (de) Fahrzeug mit einem Anzeigeinstrument
DE102017117518B4 (de) Bild-Konvertierungs-Vorrichtung
DE102014226185A1 (de) Verfahren zum Bestimmen einer Blickrichtung einer Person
DE102014211803A1 (de) Augmented-Reality-System für ein Kraftfahrzeug
EP2500216B1 (de) Verfahren und Vorrichtung für ein bildgebendes Fahrerassistenzsystem
DE10257484A1 (de) Vorrichtung und Verfahren zum Darstellen der Umgebung eines Fahrzeugs
DE102012012501A1 (de) Kamerasystem für ein Kraftfahrzeug
DE102007055182A1 (de) Einmündungs-Assistent
DE102012201322B4 (de) Verfahren, Vorrichtung und Computerprogrammprodukt zum Ansteuern eines Anzeigegerätes zur Unterdrückung einer Blendwirkung für Fahrzeuginsassen
DE112014001072B4 (de) System und Verfahren zum Präsentieren von Informationen auf einer Fensterscheibe eines Fahrzeugs mit wenigstens einem Spiegel, sowie Computerprogramm und Computerprogrammprodukt
DE102018108438A1 (de) Informationdarstellungsvorrichtung
DE102011010860A1 (de) Verfahren und Fahrerassistenzsystem zum Anzeigen von Bildern in einem Kraftfahrzeug sowie Kraftfahrzeug
DE102009003220B4 (de) Verfahren zur Kollisionswarnung sowie Kollisionswarneinrichtung
DE102015015676A1 (de) Verfahren zum automatischen Aufschalten eines Umgebungsbildes auf eine Anzeigeeinheit eines Fahrzeuges
DE102010042248A1 (de) Verfahren und Vorrichtung zur optischen Darstellung einer Umgebung eines Fahrzeugs
DE102012012783A1 (de) Kamera-Monitor-System zur Überwachung des toten Winkels oder der Umgebung für Kraftfahrzeuge
DE102006037600A1 (de) Verfahren zur auflösungsabhängigen Darstellung der Umgebung eines Kraftfahrzeugs
DE102007042966A1 (de) Vorrichtung zur Darstellung der Information der Einparkhilfe eines Kraftfahrzeuges
DE102010034127A1 (de) Verfahren zum Anzeigen von Bildern auf einer Anzeigeeinrichtung in einem Kraftfahrzeug, Fahrerassistenzsystem und Kraftfahrzeug

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed
R082 Change of representative

Representative=s name: KRAMER - BARSKE - SCHMIDTCHEN, DE

R081 Change of applicant/patentee

Owner name: MEKRA LANG GMBH & CO. KG, DE

Free format text: FORMER OWNER: MEKRA LANG GMBH & CO. KG, 90765 FUERTH, DE

Effective date: 20140604

R082 Change of representative

Representative=s name: KRAMER BARSKE SCHMIDTCHEN PATENTANWAELTE PARTG, DE

Effective date: 20140604

Representative=s name: KRAMER - BARSKE - SCHMIDTCHEN, DE

Effective date: 20140604

R016 Response to examination communication
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final
R082 Change of representative

Representative=s name: ALPSPITZ IP ALLGAYER UND PARTNER PATENTANWAELT, DE