EP2723622B1 - Einrichtung und verfahren zum steuern eines schienenfahrzeugs - Google Patents

Einrichtung und verfahren zum steuern eines schienenfahrzeugs Download PDF

Info

Publication number
EP2723622B1
EP2723622B1 EP12750541.0A EP12750541A EP2723622B1 EP 2723622 B1 EP2723622 B1 EP 2723622B1 EP 12750541 A EP12750541 A EP 12750541A EP 2723622 B1 EP2723622 B1 EP 2723622B1
Authority
EP
European Patent Office
Prior art keywords
image
rail vehicle
control command
control
cab
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Not-in-force
Application number
EP12750541.0A
Other languages
English (en)
French (fr)
Other versions
EP2723622A1 (de
Inventor
Karsten Rahn
Ulrich Bock
Christian Bode
Winfried ERNST
Claus FÜHNER
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of EP2723622A1 publication Critical patent/EP2723622A1/de
Application granted granted Critical
Publication of EP2723622B1 publication Critical patent/EP2723622B1/de
Not-in-force legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L3/00Devices along the route for controlling devices on the vehicle or vehicle train, e.g. to release brake, to operate a warning signal
    • B61L3/02Devices along the route for controlling devices on the vehicle or vehicle train, e.g. to release brake, to operate a warning signal at selected places along the route, e.g. intermittent control simultaneous mechanical and electrical control
    • B61L3/06Devices along the route for controlling devices on the vehicle or vehicle train, e.g. to release brake, to operate a warning signal at selected places along the route, e.g. intermittent control simultaneous mechanical and electrical control controlling by electromagnetic or particle radiation, e.g. by light beam
    • B61L3/065Devices along the route for controlling devices on the vehicle or vehicle train, e.g. to release brake, to operate a warning signal at selected places along the route, e.g. intermittent control simultaneous mechanical and electrical control controlling by electromagnetic or particle radiation, e.g. by light beam controlling optically

Description

  • Die Erfindung bezieht sich auf eine Einrichtung und ein Verfahren zum Steuern eines Schienenfahrzeugs.
  • Schienenfahrzeuge werden heutzutage überwiegend durch Fahrzeugführer gesteuert, die sich in einem Führerstand des Schienenfahrzeugs befinden und zur Steuerung vorgesehene Bedienelemente, beispielsweise in Form von Knöpfen, Hebeln oder Schaltern, bedienen.
  • Außerdem ist, insbesondere aus dem Bereich des Personennahverkehrs, bekannt, Schienenfahrzeuge automatisiert zu steuern.
  • Darüber hinaus gibt es Schienenfahrzeuge, wie beispielsweise die Rangierlok der Deutschen Bahn V6, die über Funk von einer nicht im Führerstand befindlichen, sondern auf oder neben der Schienenstrecke in Fahrzeugnähe stehenden Bedienperson mit Hilfe eines Bedienpultes ferngesteuert werden.
  • Weiterhin ist aus der veröffentlichten europäischen Patentanmeldung EP 0 893 322 A1 eine Einrichtung gemäß dem Oberbegriff des Anspruchs 1 bekannt.
  • Der Erfindung liegt die Aufgabe zugrunde, eine Einrichtung zum Steuern eines Schienenfahrzeugs anzugeben, die von ihrem Aufbau her kostengünstig ist und eine einfache Schienenfahrzeugsteuerung ermöglicht.
  • Diese Aufgabe wird erfindungsgemäß durch eine Einrichtung mit den Merkmalen gemäß Patentanspruch 1 gelöst. Vorteilhafte Ausgestaltungen der erfindungsgemäßen Einrichtung sind in Unteransprüchen angegeben.
  • Danach ist erfindungsgemäß eine Einrichtung zum Steuern eines Schienenfahrzeugs vorgesehen, die gekennzeichnet ist durch eine Bilderfassungseinrichtung zum Aufnehmen eines Bildes oder einer Bildsequenz, und eine mit der Bilderfassungseinrichtung in Verbindung stehende Bilderkennungseinrichtung, die geeignet ist, ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung in dem von der Bilderfassungseinrichtung aufgenommenen Bild oder in der von der Bilderfassungseinrichtung aufgenommenen Bildsequenz zu erkennen und ein dem Steuerbefehlzeichen oder der Steuerbefehlbewegung entsprechendes Steuersignal zur Steuerung des Schienenfahrzeugs zu erzeugen, wobei die Bilderkennungseinrichtung geeignet ist, eine in der Bildsequenz gezeigte Bedienbewegung einer Bedienperson zu erkennen und ein der Bedienbewegung entsprechendes Steuersignal zu erzeugen.
  • Ein wesentlicher Vorteil der erfindungsgemäßen Einrichtung besteht darin, dass diese - im Vergleich zu heutzutage üblichen Führerständen, die eine Vielzahl an Bedienelementen umfassen - mit sehr wenigen Komponenten auskommt; so erfordert die erfindungsgemäße Einrichtung lediglich eine Bilderfassungseinrichtung und eine Bilderkennungseinrichtung. Zusätzliche Bedienelemente, wie beispielsweise Hebel, Schalter oder Knöpfe, die aufwändig verkabelt werden müssen, sind bei der erfindungsgemäßen Einrichtung zum Steuern des Schienenfahrzeugs nicht erforderlich.
  • Besonders einfach und damit vorteilhaft lässt sich das Schienenfahrzeug dadurch steuern, dass die Bilderkennungseinrichtung geeignet ist, eine in der Bildsequenz gezeigte Bedienbewegung (z. B. Handbewegung) einer Bedienperson zu erkennen und ein der Bedienbewegung entsprechendes Steuersignal zu erzeugen. Das Schienenfahrzeug kann also beispielsweise allein durch Gesten einer Bedienperson gesteuert werden.
  • Ein weiterer wesentlicher Vorteil der erfindungsgemäßen Einrichtung ist darin zu sehen, dass diese je nach Ausrichtung der Bilderfassungseinrichtung wahlweise eine Steuerung des Schienenfahrzeugs vom Inneren des Fahrzeugs, also beispielsweise von innerhalb eines Führerstandes des Schienenfahrzeugs, oder alternativ von außerhalb des Schienenfahrzeugs erlaubt. Um eine Steuerung vom Inneren des Führerstandes zu ermöglichen, ist die Bilderfassungseinrichtung lediglich derart auszurichten, dass diese den Führerstand zumindest abschnittsweise zeigt. Soll das Schienenfahrzeug stattdessen von außerhalb, beispielsweise von der Strecke aus, gesteuert werden, so ist die Bilderfassungseinrichtung entsprechend auf die Umgebung des Schienenfahrzeugs zu richten.
  • Mit Blick auf eine Steuerung des Schienenfahrzeugs von außen wird es als vorteilhaft angesehen, wenn die Bilderfassungseinrichtung derart am Schienenfahrzeug angeordnet und ausgerichtet ist, dass sie einen Umgebungsabschnitt der Umgebung des Schienenfahrzeugs erfasst, und die Bilderkennungseinrichtung geeignet ist, ein im aufgenommenen Umgebungsabschnitt vorhandenes Steuerbefehlzeichen oder eine im aufgenommenen Umgebungsabschnitt vorhandene Steuerbefehlbewegung zu erkennen. Aufgrund der Anordnung und Ausrichtung der Bilderfassungseinrichtung ist es somit möglich, Steuerbefehle zum Steuern des Schienenfahrzeugs zu erzeugen, ohne dass sich ein Fahrzeugführer im Führerstand befinden muss. Eine Steuerung von außerhalb ist insbesondere bei liegengebliebenen bzw. defekten Schienenfahrzeugen von Vorteil; ein Zusteigen eines Fahrzeugführers in ein liegengebliebenes bzw. defektes Schienenfahrzeug erfordert in der Regel vorherige Sicherungsmaßnahmen (z. B. Sichern des Schienenfahrzeugs gegen Wegrollen, Abstellen des Stromes), die unter Umständen sehr aufwändig sind. Wird nun ein liegengebliebenes bzw. defektes Schienenfahrzeug von außen gesteuert, sind die genannten Sicherungsmaßnahmen entbehrlich.
  • Alternativ oder zusätzlich kann die Bilderfassungseinrichtung derart in oder am Führerstand angeordnet sein, dass sie einen Abschnitt des Führerstandes des Schienenfahrzeugs erfasst. Bei einer solchen Ausgestaltung wird es als vorteilhaft angesehen, wenn die Bilderkennungseinrichtung geeignet ist, ein im aufgenommenen Abschnitt des Führerstandes vorhandenes Steuerbefehlzeichen oder eine im aufgenommenen Abschnitt des Führerstandes vorhandene Steuerbefehlbewegung zu erkennen. Bei dieser Ausgestaltung ist eine Steuerung des Schienenfahrzeugs im Führerstand ohne Benutzung der sonst üblichen Knöpfe, Schalter oder Hebel möglich. Auf derartige Komponenten kann bei Benutzung der beschriebenen Ausgestaltung der Messeinrichtung also ersatzlos verzichtet werden, wodurch sich Kosten und vor allem Platz einsparen lassen.
  • Darüber hinaus wird es als vorteilhaft angesehen, wenn die Bilderkennungseinrichtung geeignet ist, in dem Bild oder der Bildsequenz ein Steuerschild mit einem darauf befindlichen Steuersymbol zu erkennen und ein dem Steuersymbol entsprechendes Steuersignal zu erzeugen. Bei dem Steuersymbol handelt es sich vorzugsweise um ein optisches Steuersymbol, beispielsweise um ein zeitlich nicht veränderliches (statisches) Steuersymbol oder um ein zeitlich veränderliches (dynamisches) Steuersymbol. Das Steuerschild, auf dem sich das Steuersymbol befindet, kann dabei ortsfest sein oder auch beweglich. Beispielsweise wird das Steuerschild von einer Bedienperson bewegt, so dass eine Bildsequenz entsteht, die die Bewegung des beweglichen Steuerschildes zeigt.
  • Vorzugsweise ist die Bilderkennungseinrichtung geeignet, einen auf dem Steuerschild befindlichen ein- oder zweidimensionalen Barcode zu erkennen und ein dem ein- oder zweidimensionalen Barcode entsprechendes Steuersignal zu erzeugen. Barcodes erlauben es bekanntermaßen, eine sehr hohe Informationsdichte auf einer sehr kleinen Fläche unterzubringen, so dass auch sehr komplexe Steuerbefehle mit Hilfe eines Barcodes übermittelt werden können.
  • Alternativ oder zusätzlich kann die Bilderkennungseinrichtung geeignet sein, auf dem Steuerschild ein Piktogramm zu erkennen, das beispielsweise einen Fahrbefehl (z. B. Stoppen, Vorwärtsfahrt, Rückwärtsfahrt) definiert, und ein dem Piktogramm entsprechendes Steuersignal zu erzeugen.
  • Die Bilderfassungseinrichtung umfasst vorzugsweise eine Kamera, die im Bereich des optisch sichtbaren Lichts arbeitet.
  • Zusätzlich oder alternativ kann die Bilderfassungseinrichtung geeignet sein, Infrarotlicht zu erfassen und Bildsignale zu erzeugen, die ein zweidimensionales Bild des Umgebungsabschnitts oder des Führerstandes beschreiben.
  • Zusätzlich oder alternativ kann die Bilderfassungseinrichtung eine Ultraschallsende- und Ultraschallempfangseinrichtung umfassen, die geeignet ist, Ultraschallsignale auszusenden, reflektierte Ultraschallsignale zu messen und Bildsignale zu erzeugen, die ein Bild des Umgebungsabschnitts oder des Führerstandes beschreiben.
  • Mit Blick auf eine Erkennung besonders komplexer Bewegungsabläufe wird es als vorteilhaft angesehen, wenn die Bilderfassungseinrichtung zumindest zwei unterschiedliche Signale verarbeitet, beispielsweise eine Kombination von optisch sichtbarem Licht und infrarotem Licht, eine Kombination von optisch sichtbarem Licht und Ultraschallsignalen oder eine Kombination von infrarotem Licht und Ultraschallsignalen. Besonders bevorzugt wird die Bilderfassungseinrichtung optisch sichtbares Licht, infrarotes Licht und Ultraschallsignale empfangen.
  • Um die Sicherheit der Steuerinformationen zu erhöhen, können Bilder aus unterschiedlichen Quellen gegeneinander plausibilisiert werden.
  • Die Bilderkennungseinrichtung ist vorzugsweise derart ausgestaltet, dass sie die von der Bilderfassungseinrichtung aufgenommenen Bilder oder Bildsequenzen separat nach ihrer Quelle (zum Beispiel nach optisch sichtbarem Licht, Infrarotlicht, Ultraschall) auswertet und ein Steuersignal zur Steuerung des Schienenfahrzeugs nur dann erzeugt, wenn die in den Bildern oder Bildsequenzen der unterschiedlichen Kanäle identifizierten Steuerbefehlzeichen oder Steuerbefehlbewegungen einander entsprechen oder sich zumindest nicht widersprechen.
  • Bezüglich des Aufbaus der Bilderkennungseinrichtung wird es als vorteilhaft angesehen, wenn die Bilderkennungseinrichtung eine Recheneinrichtung (Computer) und einen Speicher umfasst, in dem ein Auswertprogramm zur Steuerung der Recheneinrichtung enthalten ist. Das Auswertprogramm wird bei Ausführung durch die Recheneinrichtung das von der Bilderfassungseinrichtung aufgenommene Bild oder die von der Bilderfassungseinrichtung aufgenommene Bildsequenz mit einem Bild- oder Bildsequenzerkennungsverfahren auswerten und erkennen, ob in dem Bild oder der Bildsequenz ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung enthalten ist, und nach Erkennen eines solchen Steuerbefehlzeichens oder einer solchen Steuerbefehlbewegung ein dem Steuerbefehlzeichen oder der Steuerbefehlbewegung entsprechendes Steuersignal zur Steuerung des Schienenfahrzeugs erzeugen.
  • Um eine missbräuchliche Steuerung des Schienenfahrzeugs zu unterbinden, wird es als vorteilhaft angesehen, wenn eine separate Authentifizierung erfolgt. In diesem Zusammenhang wird es als vorteilhaft angesehen, wenn die Bilderkennungseinrichtung zur Gesichtserkennung geeignet ist und ein Steuersignal zur Steuerung des Schienenfahrzeugs nur dann erzeugt, wenn ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung von einer autorisierten Person stammt, deren Gesicht erkannt wurde. Alternativ kann eine Authentifizierung auch mittels Schlüssel, Chipkarte, Fingerabdruckleser, oder Passworteingabe erfolgen.
  • Die Erfindung bezieht sich darüber hinaus auf ein Schienenfahrzeug mit einer Einrichtung, wie sie oben beschrieben worden ist. Bezüglich der Vorteile des erfindungsgemäßen Schienenfahrzeugs sei auf die obigen Erläuterungen zu den Vorteilen der erfindungsgemäßen Einrichtung verwiesen, da die Vorteile der erfindungsgemäßen Einrichtung denen des erfindungsgemäßen Schienenfahrzeugs im Wesentlichen entsprechen.
  • Als vorteilhaft wird es angesehen, wenn in dem Führerstand des Schienenfahrzeugs eine Anzeigeeinrichtung vorhanden ist, die Informationen zur Steuerung des Schienenfahrzeugs anzeigt.
  • Als besonders vorteilhaft wird es angesehen, wenn die Anzeigeeinrichtung mit der Bilderkennungseinrichtung in Verbindung steht und die Bilderkennungseinrichtung auf der Anzeigeeinrichtung das jeweils aktuell erkannte Steuerbefehlzeichen oder die jeweils aktuell erkannte Steuerbefehlbewegung anzeigt.
  • Die Erfindung bezieht sich darüber hinaus auf ein Verfahren zum Steuern eines Schienenfahrzeugs. Erfindungsgemäß ist vorgesehen, dass mit einer Bilderfassungseinrichtung ein Bild oder eine Bildsequenz aufgenommen wird und geprüft wird, ob in dem Bild oder der Bildsequenz ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung gezeigt wird und - im Falle des Erkennens eines Steuerbefehlzeichens oder einer Steuerbefehlbewegung - ein dem erkannten Steuerbefehlzeichen oder der erkannten Steuerbefehlbewegung entsprechendes Steuersignal erzeugt wird, das einen Steuerbefehl zum Steuern des Schienenfahrzeugs beschreibt. Erfindungsgemäß wird hierbei eine in der Bildsequenz gezeigte Bedienbewegung einer Bedienperson (100) erkannt und ein der Bedienbewegung entsprechendes Steuersignal (ST, ST') erzeugt.
  • Bezüglich der Vorteile des erfindungsgemäßen Verfahrens sei auf die obigen Ausführungen zur erfindungsgemäßen Einrichtung verwiesen, da die Vorteile des erfindungsgemäßen Verfahrens denen der erfindungsgemäßen Einrichtung im Wesentlichen entsprechen.
  • Als vorteilhaft wird es angesehen, wenn zum Steuern des Schienenfahrzeugs ein einen gewünschten Fahrtbefehl für das Schienenfahrzeug definierendes Steuerbefehlzeichen oder eine einen gewünschten Fahrtbefehl für das Schienenfahrzeug definierende Steuerbefehlbewegung erkannt wird.
  • Vorzugsweise werden zusätzlich zu dem Steuerbefehl (Fahrtbefehl) für das Schienenfahrzeug auch Informationen, die das zu steuernde Schienenfahrzeug eindeutig identifizieren, übermittelt. Dadurch lässt sich vermeiden, dass versehentlich andere als das zu steuernde Schienenfahrzeug mitgesteuert werden.
  • Die Erfindung wird nachfolgend anhand von Ausführungsbeispielen näher erläutert; dabei zeigen beispielhaft
  • Figur 1
    ein Ausführungsbeispiel für ein erfindungsgemäßes Schienenfahrzeug mit einer erfindungsgemäßen Einrichtung zum Steuern des Schienenfahrzeugs, die eine Steuerung von außerhalb des Schienenfahrzeugs ermöglicht, wobei in der Figur 1 die Übermittlung eines Stoppsignals dargestellt ist,
    Figur 2
    das Schienenfahrzeug gemäß Figur 1, wobei die Übermittlung des Fahrtbefehls "Vorwärtsfahrt" von außerhalb des Schienenfahrzeugs dargestellt ist,
    Figur 3
    ein Ausführungsbeispiel für ein Schienenfahrzeug, bei dem die Steuerung innerhalb eines Führerstandes des Schienenfahrzeugs erfolgt, wobei in der Figur 3 die Übermittlung eines Stoppbefehls vom Führerstand aus dargestellt ist,
    Figur 4
    das Schienenfahrzeug gemäß Figur 3, wobei die Übermittlung des Fahrtbefehls "Vorwärtsfahrt" vom Führerstand aus dargestellt ist,
    Figur 5
    ein Ausführungsbeispiel für ein Schienenfahrzeug, bei dem zwei Bilderfassungseinrichtungen eine Steuerung des Schienenfahrzeugs sowohl vom Führerstand als auch von außerhalb des Führerstands aus ermöglichen,
    Figur 6
    ein Ausführungsbeispiel für ein Schienenfahrzeug, bei dem eine Bilderfassungseinrichtung eine Steuerung des Schienenfahrzeugs sowohl vom Führerstand als auch von außerhalb des Führerstands aus ermöglicht,
    Figur 7
    ein Ausführungsbeispiel für eine Steuerung des Schienenfahrzeugs mittels eines eindimensionalen Barcodes und
    Figur 8
    ein Ausführungsbeispiel für eine Steuerung des Schienenfahrzeugs mittels eines zweidimensionalen Barcodes.
  • In den Figuren werden der Übersicht halber für identische oder vergleichbare Komponenten stets dieselben Bezugszeichen verwendet.
  • In der Figur 1 sieht man ein Schienenfahrzeug 10, das mit einer technischen Einrichtung zum Steuern des Schienenfahrzeugs ausgestattet ist. Diese Einrichtung umfasst eine Bilderfassungseinrichtung 20, die mit einer technischen und ohne menschliche Mithilfe arbeitenden Bilderkennungseinrichtung 30 verbunden ist. Die Bilderfassungseinrichtung 20 ist an dem Schienenfahrzeug 10 derart angeordnet und derart ausgerichtet, dass sie einen Umgebungsabschnitt U der Umgebung des Schienenfahrzeugs 10 erfassen kann. Hierzu weist die Bilderfassungseinrichtung 20 beispielsweise drei Bilderfassungsmodule 21, 22 und 23 auf, zum Beispiel in Form einer Kamera (vgl. Bezugszeichen 21) zum Aufnehmen bzw. Erfassen von sichtbarem Licht, einer Infrarotkamera (vgl. Bezugszeichen 22) zum Aufnehmen bzw. Erfassen von infrarotem Licht und einem Ultraschallmodul (vgl. Bezugszeichen 23) mit einer Ultraschallsende- und Ultraschallempfangseinrichtung.
  • Auf Basis der Informationen von den Bilderfassungsmodulen erzeugt die Bilderfassungseinrichtung 20 Bildsignale B, die zu einer Recheneinrichtung 40 (Computer) der Bilderkennungseinrichtung 30 übermittelt werden. Die Recheneinrichtung 40 steht mit einem Speicher 50 in Verbindung, in dem ein Computerprogramm P zur Steuerung der Recheneinrichtung 40 abgespeichert ist. Führt die Recheneinrichtung 40 das Computerprogramm P aus, so wird sie die Bildsignale B der Bilderfassungseinrichtung 20 auswerten und prüfen, ob in dem von der Bilderfassungseinrichtung 20 aufgenommenen Bild bzw. in der von der Bilderfassungseinrichtung 20 aufgenommenen Bildsequenz ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung erkennbar sind, die in dem Computerprogramm P vordefiniert und in dem Speicher 50 hinterlegt sind. Die Bildsignale B der Bilderfassungseinrichtung 20 können unverarbeitet oder bereits vorverarbeitet sein, beispielsweise vorgefiltert oder vorinterpretiert.
  • Erkennt die Recheneinrichtung 40 ein vordefiniertes Steuerbefehlzeichen oder eine vordefinierte Steuerbefehlbewegung, so erzeugt sie ein entsprechendes Steuersignal ST, mit dem das Schienenfahrzeug 10 gesteuert wird. Beispielsweise wird das Steuersignal ST unmittelbar oder mittelbar über ein nicht gezeigtes Zugsteuerungssystem zu einem Antrieb 70 des Schienenfahrzeugs 10 übermittelt, um die Fahrbewegung des Schienenfahrzeugs 10 zu steuern.
  • In der Figur 1 sieht man außerdem eine Bedienperson 100, die ihre Hand 110 kreisförmig schwenkt. Diese kreisförmige Schwenkbewegung soll beispielsweise den Steuerbefehl "Stopp" übermitteln. Sobald die Bilderfassungseinrichtung 20 den Umgebungsabschnitt U mit der Bedienperson 100 sowie die Kreisbewegung erfasst und ein entsprechendes Bildsignal B zu der Recheneinrichtung 40 der Bilderkennungseinrichtung 30 übermittelt, wird die Recheneinrichtung 40 die kreisförmige Bewegung der Bedienperson 100 erkennen und den entsprechenden Steuerbefehl "Stopp" ermitteln. Der entsprechende Stoppbefehl wird in Form des Steuersignals ST an den Antrieb 70 übermittelt, so dass das Schienenfahrzeug 10 zum Stehen kommt.
  • Das Computerprogramm P kann mit Blick auf die Erkennung von Steuerbefehlzeichen oder Steuerbefehlbewegungen analog zu heutzutage im Bereich der Spielkonsolen bekannten Bilderkennungsverfahren programmiert sein. So ist beispielsweise von der Spielkonsole "XBox Kinect" der Firma Microsoft bekannt, dass Bewegungen von Personen erkannt und entsprechende Steuersignale erzeugt werden können.
  • Bei dem Ausführungsbeispiel gemäß Figur 1 weist die Bilderfassungseinrichtung 20 drei Bilderfassungsmodule 21, 22 und 23 auf. Alternativ kann die Bilderfassungseinrichtung 20 auch nur ein einziges oder nur zwei der drei genannten Bilderfassungsmodule aufweisen.
  • In der Figur 1 lässt sich erkennen, dass der Führerstand 130 des Schienenfahrzeugs 10 nicht besetzt sein muss, wenn ein Übermitteln von Steuerbefehlen von außerhalb des Schienenfahrzeugs 10, also von der Umgebung U aus, erfolgt.
  • Die Figur 2 zeigt beispielhaft das Schienenfahrzeug 10 gemäß Figur 1, wenn sich in der Umgebung U eine Bedienperson 100 befindet, die einen anderen Fahrtbefehl, nämlich "Vorwärtsfahrt", übermittelt. Dieser Fahrtbefehl kann beispielsweise durch ein Heben und Senken der Hand 110 der Bedienperson 100 angezeigt werden. Sobald die Bilderfassungseinrichtung 20 die Bedienperson 100 mit der sich hebenden und senkenden Hand 110 detektiert und die Handbewegung von der Recheneinrichtung 40 entsprechend erkannt wird, wird ein Steuersignal ST' zur Infahrtsetzung des Schienenfahrzeugs 10 an den Antrieb 70 übermittelt.
  • Auch bei der Steuerung gemäß Figur 2 kann (darf) der Führerstand 130 des Schienenfahrzeugs 10 unbesetzt sein, wenn ein Übermitteln der Steuerbefehle von außerhalb des Schienenfahrzeugs 10 aus erfolgt.
  • Die Figur 3 zeigt ein Ausführungsbeispiel für ein Schienenfahrzeug, bei dem die Bilderfassungseinrichtung 20 nicht auf die Umgebung U des Schienenfahrzeugs 10 hin ausgerichtet ist, sondern sich innerhalb des Führerstandes 130 des Schienenfahrzeugs 10 befindet und zumindest einen Abschnitt des Führerstandes 130 zeigt.
  • Es lässt sich in der Figur 3 erkennen, dass durch Schwenken der Hand der im Führerstand 130 befindlichen Bedienperson 100 im Kreis ein "Stopp"-Befehl erzeugt und über die Bilderfassungseinrichtung 20 zu der Bilderkennungseinrichtung 30 hin übermittelt werden kann. Die Recheneinrichtung 40 wird die kreisförmige Schwenkbewegung der Hand der Bedienperson 100 erkennen und ein Steuersignal ST zum Stoppen des Antriebs 70 des Schienenfahrzeugs 10 erzeugen.
  • In der Figur 3 erkennt man darüber hinaus eine Anzeigeeinrichtung (Display) 140, die über eine nicht gezeigte Steuerleitung mit der Recheneinrichtung 40 in Verbindung stehen kann. Auf der Anzeigeeinrichtung 140 kann die Recheneinrichtung 40 beispielsweise Informationen anzeigen, die zur Steuerung des Schienenfahrzeugs nützlich sein können (z. B. Informationen zum aktuellen Fahrzustand, Zustand der Gleisanlage, usw.). Alternativ oder zusätzlich können auf der Anzeigeeinrichtung 140 Befehlselemente angezeigt werden, die durch vorgegebene Bewegungen (z. B. Handbewegungen) der im Führerstand 130 befindlichen Bedienperson 100 "bewegt" werden können, um die Steuerung des Schienenfahrzeugs 10 vorzunehmen.
  • Anstelle der Anzeigeeinrichtung 140 kann auch eine Projektionseinrichtung vorhanden sein, die die anzuzeigenden Informationen, den erkannten Steuerbefehl und/oder die Befehlselemente auf die Frontscheibe oder eine andere Fläche des Schienenfahrzeugs projiziert.
  • Darüber hinaus ist es möglich, dass die Recheneinrichtung 40 auf der Anzeigeeinrichtung 140 den jeweils erkannten Steuerbefehl ST zur Steuerung des Schienenfahrzeugs anzeigt, um der im Führerstand 130 befindlichen Bedienperson 100 anzuzeigen, welcher Bedienbefehl jeweils aktuell erkannt worden ist.
  • Die Figur 4 zeigt das Schienenfahrzeug 10 nochmals mit einer im Führerstand 130 befindlichen Bedienperson 100, wobei diese jedoch anstelle eines Stoppbefehls einen "Fahrt"-Befehl übermittelt. Hierzu hebt und senkt die Bedienperson 100 ihre Hand, was von der Bilderfassungseinrichtung 20 erfasst und in Form von Bildsignalen B zur Recheneinrichtung 40 übermittelt wird. Die Recheneinrichtung 40 erkennt die entsprechende Geste der Bedienperson 100 und erzeugt ein Steuersignal ST' für den Antrieb 70, um das Schienenfahrzeug 10 in Bewegung zu setzen.
  • Die Figur 5 zeigt ein Ausführungsbeispiel für ein Schienenfahrzeug 10, bei dem zwei Bilderfassungseinrichtungen vorhanden sind, von denen eine mit dem Bezugszeichen 20 und die andere mit dem Bezugszeichen 20' gekennzeichnet ist. Die eine Bilderfassungseinrichtung 20 ist auf die Umgebung U des Schienenfahrzeugs 10 hin ausgerichtet und ermöglicht eine Erfassung von Steuerbefehlzeichen oder Steuerbefehlbewegungen (vgl. Bildsignal B), die außerhalb des Schienenfahrzeugs in der Umgebung U erzeugt werden.
  • Die Bilderfassungseinrichtung 20' befindet sich innerhalb des Führerstandes 130 und zeigt mit Bildsignalen B' zumindest einen Abschnitt des Führerstandes, so dass Steuerbefehlzeichen oder Steuerbefehlbewegungen auch innerhalb des Führerstandes 130 erzeugt, erfasst und umgesetzt werden können. Im Übrigen sei auf die obigen Ausführungen im Zusammenhang mit den Figuren 1-4 verwiesen, die hier entsprechend gelten.
  • Die Figur 6 zeigt ein Ausführungsbeispiel für ein Schienenfahrzeug 10, das eine verstellbare Bilderfassungseinrichtung 20 umfasst. So kann die Bilderfassungseinrichtung 20 auf den Führerstand 130 hin ausgerichtet werden (z. B. durch Schwenken, vgl. Pfeil), um eine im Führerstand 130 befindliche Bedienperson 100 zu erfassen. Alternativ kann die Bilderfassungseinrichtung 20 auch nach draußen hin ausgerichtet werden (z. B. durch Schwenken, vgl. Pfeil), um eine außerhalb des Schienenfahrzeugs befindliche Bedienperson 100 erfassen zu können.
  • Die Figur 7 zeigt beispielhaft ein von einer Bedienperson 100 vor die Bilderfassungseinrichtung 20 gehaltenes Steuerschild 300, auf dem ein eindimensionaler Barcode 310 als Steuersymbol abgebildet ist. Wird das Steuerschild 300 in den Bereich der Bilderfassungseinrichtung 20 gebracht, so wird diese entsprechende Bildsignale B zur Recheneinrichtung 40 übertragen. Die Recheneinrichtung 40 wird den Barcode 310 erkennen und einen entsprechenden Steuerbefehl in Form des Steuersignals ST für den Antrieb 70 erzeugen.
  • Die Figur 8 zeigt ein Ausführungsbeispiel zur Steuerung des Schienenfahrzeugs 10, bei dem von einer Bedienperson 100 ein Steuerschild 400 mit einem zweidimensionalen Barcode 410 zur Steuerung des Schienenfahrzeugs 10 eingesetzt wird. Sobald das Steuerschild 400 in den Bereich der Bilderfassungseinrichtung 20 gebracht wird, wird diese Bildsignale B erzeugen, die zur Recheneinrichtung 40 der Bilderkennungseinrichtung 30 gelangen. Die Recheneinrichtung 40 wird das Steuersymbol erkennen und ein dem Steuersymbol entsprechendes Steuersignal ST für den Antrieb 70 erzeugen.
  • Obwohl die Erfindung im Detail durch die bevorzugten Ausführungsbeispiele näher illustriert und beschrieben wurde, so ist die Erfindung nicht durch die offenbarten Beispiele eingeschränkt und andere Variationen können vom Fachmann hieraus abgeleitet werden, ohne den Schutzumfang der Erfindung zu verlassen.

Claims (9)

  1. Einrichtung zum Steuern eines Schienenfahrzeugs (10), mit
    - einer Bilderfassungseinrichtung (20, 20') zum Aufnehmen eines Bildes oder einer Bildsequenz und
    - einer mit der Bilderfassungseinrichtung (20, 20') in Verbindung stehende Bilderkennungseinrichtung (30), die geeignet ist, ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung in dem von der Bilderfassungseinrichtung (20, 20') aufgenommenen Bild oder in der von der Bilderfassungseinrichtung (20, 20') aufgenommenen Bildsequenz zu erkennen und ein dem Steuerbefehlzeichen oder der Steuerbefehlbewegung entsprechendes Steuersignal (ST, ST') zur Steuerung des Schienenfahrzeugs (10) zu erzeugen,
    dadurch gekennzeichnet, dass die Bilderkennungseinrichtung (30) eingerichtet ist, eine in der
    Bildsequenz gezeigte Bedienbewegung einer Bedienperson (100) zu erkennen und ein der Bedienbewegung entsprechendes Steuersignal (ST, ST') zu erzeugen.
  2. Einrichtung nach Anspruch 1,
    dadurch gekennzeichnet, dass
    - die Bilderfassungseinrichtung (20, 20') derart am Schienenfahrzeug (10) angeordnet und ausgerichtet ist, dass sie einen Umgebungsabschnitt (U) der Umgebung des Schienenfahrzeugs (10) erfasst, und
    - die Bilderkennungseinrichtung (30) geeignet ist, ein im aufgenommenen Umgebungsabschnitt (U) vorhandenes Steuerbefehlzeichen oder eine im aufgenommenen Umgebungsabschnitt (U) vorhandene Steuerbefehlbewegung zu erkennen.
  3. Einrichtung nach Anspruch 1 oder 2,
    dadurch gekennzeichnet, dass
    - die Bilderfassungseinrichtung (20, 20') derart im oder am Führerstand (130) angeordnet und ausgerichtet ist, dass sie einen Abschnitt des Führerstandes (130) des Schienenfahrzeugs (10) erfasst, und
    - die Bilderkennungseinrichtung (30) geeignet ist, ein im aufgenommenen Abschnitt des Führerstandes (130) vorhandenes Steuerbefehlzeichen oder eine im aufgenommenen Abschnitt des Führerstandes vorhandene Steuerbefehlbewegung zu erkennen.
  4. Einrichtung nach einem der voranstehenden Ansprüche,
    dadurch gekennzeichnet, dass die Bilderkennungseinrichtung (30) geeignet ist, in dem Bild (B, B') oder der Bildsequenz ein Steuerschild (300, 400) mit einem darauf befindlichen Steuersymbol zu erkennen und ein dem Steuersymbol entsprechendes Steuersignal zu erzeugen.
  5. Einrichtung nach Anspruch 4,
    dadurch gekennzeichnet, dass die Bilderkennungseinrichtung (30) geeignet ist, einen auf dem Steuerschild (300, 400) befindlichen ein- oder zweidimensionalen Barcode (310, 410) zu erkennen und ein dem ein- oder zweidimensionalen Barcode (310, 410) entsprechendes Steuersignal (ST, ST') zu erzeugen.
  6. Einrichtung nach einem der voranstehenden Ansprüche,

    dadurch gekennzeichnet, dass die Bilderfassungseinrichtung (20, 20') eine Kamera umfasst, die im Bereich des optisch sichtbaren Lichts und/oder im infraroten Bereich arbeitet und geeignet ist, Bildsignale (B, B') zu erzeugen, die ein zweidimensionales Bild des Umgebungsabschnitts (U) oder des Führerstandes (130) beschreiben.
  7. Einrichtung nach einem der voranstehenden Ansprüche,
    dadurch gekennzeichnet, dass die Bilderfassungseinrichtung (20, 20') eine Ultraschallsende- und Ultraschallempfangseinrichtung umfasst, die geeignet ist, Ultraschallsignale auszusenden und reflektierte Ultraschallsignale zu erfassen und Bildsignale zu erzeugen, die ein Bild des Umgebungsabschnitts oder des Führerstandes beschreiben.
  8. Schienenfahrzeug (10) mit einer Einrichtung nach einem der voranstehenden Ansprüche.
  9. Verfahren zum Steuern eines Schienenfahrzeugs (10), wobei
    - mit einer Bilderfassungseinrichtung (20, 20') ein Bild oder eine Bildsequenz aufgenommen wird und
    - mit einer Bilderkennungseinrichtung (30) geprüft wird, ob in dem Bild oder der Bildsequenz ein Steuerbefehlzeichen oder eine Steuerbefehlbewegung gezeigt wird und - im Falle des Erkennens eines Steuerbefehlzeichens oder einer Steuerbefehlbewegung - ein dem erkannten Steuerbefehlzeichen oder der erkannten Steuerbefehlbewegung entsprechendes Steuersignal (ST, ST'), das einen Steuerbefehl zum Steuern des Schienenfahrzeugs (10) beschreibt, erzeugt wird,
    dadurch gekennzeichnet, dass eine in der Bildsequenz gezeigte Bedienbewegung einer Bedienperson (100) erkannt und ein der Bedienbewegung entsprechendes Steuersignal (ST, ST') erzeugt wird.
EP12750541.0A 2011-08-08 2012-07-27 Einrichtung und verfahren zum steuern eines schienenfahrzeugs Not-in-force EP2723622B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE201110080592 DE102011080592A1 (de) 2011-08-08 2011-08-08 Einrichtung und Verfahren zum Steuern eines Schienenfahrzeugs
PCT/EP2012/064792 WO2013020837A1 (de) 2011-08-08 2012-07-27 Einrichtung und verfahren zum steuern eines schienenfahrzeugs

Publications (2)

Publication Number Publication Date
EP2723622A1 EP2723622A1 (de) 2014-04-30
EP2723622B1 true EP2723622B1 (de) 2016-04-27

Family

ID=46724345

Family Applications (1)

Application Number Title Priority Date Filing Date
EP12750541.0A Not-in-force EP2723622B1 (de) 2011-08-08 2012-07-27 Einrichtung und verfahren zum steuern eines schienenfahrzeugs

Country Status (4)

Country Link
EP (1) EP2723622B1 (de)
DE (1) DE102011080592A1 (de)
ES (1) ES2585088T3 (de)
WO (1) WO2013020837A1 (de)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012219901A1 (de) * 2012-10-31 2014-04-30 Siemens Aktiengesellschaft Verfahren und Vorrichtung zur Erhöhung der Haltegenauigkeit eines bewegten Objektes
DE102014211851A1 (de) * 2014-06-20 2015-12-24 Robert Bosch Gmbh Verfahren und Vorrichtung zum Ausgeben eines akustischen Warnsignals eines Schienenfahrzeugs und Warnsystem für ein Schienenfahrzeug
DE102018210242A1 (de) * 2018-06-22 2019-12-24 Siemens Aktiengesellschaft Anordnung zur Sicherung eines Schienenfahrzeugs gegen Handlungen von unbefugten Personen
CN115520247B (zh) * 2022-08-19 2024-04-12 昆明聚讯科技有限公司 一种铁路运输作业记录管理平台及方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19538022C1 (de) * 1995-10-12 1997-01-09 Schaltbau Ag Vorrichtung zur Steuerung eines Schienenfahrzeugs
US5978718A (en) * 1997-07-22 1999-11-02 Westinghouse Air Brake Company Rail vision system
JP3752246B2 (ja) * 2003-08-11 2006-03-08 学校法人慶應義塾 ハンドパターンスイッチ装置
DE102007038820A1 (de) * 2007-08-16 2009-02-26 Deutsches Zentrum für Luft- und Raumfahrt e.V. Rangierüberwachungsvorrichtung
US8233662B2 (en) * 2008-07-31 2012-07-31 General Electric Company Method and system for detecting signal color from a moving video platform
US8712610B2 (en) * 2008-09-18 2014-04-29 General Electric Company System and method for determining a characterisitic of an object adjacent to a route
US8073581B2 (en) * 2008-11-21 2011-12-06 Lockheed Martin Corporation Efficient data acquisition for track databases

Also Published As

Publication number Publication date
WO2013020837A1 (de) 2013-02-14
EP2723622A1 (de) 2014-04-30
ES2585088T3 (es) 2016-10-03
DE102011080592A1 (de) 2013-02-14

Similar Documents

Publication Publication Date Title
EP3194241B1 (de) Türsystem mit sensoreinheit und kommunikationselement
DE102013012466B4 (de) Bediensystem und Verfahren zum Bedienen einer fahrzeugseitigen Vorrichtung
DE102014113567B4 (de) Türsystem mit Sensoreinheit zur berührungslosen Fahrgastraumüberwachung
WO2013001084A1 (de) Vorrichtung und verfahren zur berührungslosen erfassung von gegenständen und/oder personen und von diesen ausgeführten gesten und/oder bedienvorgängen
EP2723622B1 (de) Einrichtung und verfahren zum steuern eines schienenfahrzeugs
DE102016211494A1 (de) Steuerungseinrichtung für ein Kraftfahrzeug
WO2009071345A1 (de) Zentrales steuergerät für mehrere in einem kraftfahrzeug vorgesehene assistenzsysteme und kraftfahrzeug
DE102013213161A1 (de) Vorrichtung zum Erkennen von Gegenständen oder Lebewesen innerhalb eines Gefahrenbereichs unterhalb eines Fahrzeuges
EP3024713B1 (de) Verfahren sowie vorrichtung zum erkennen einer positionsänderung eines zumindest teilweisen abgeschalteten fahrzeugs
EP2921325A1 (de) Verfahren und vorrichtung zum fernsteuern eines kraftfahrzeugs, elektronisches kraftfahrzeugsteuersystem und kraftfahrzeug damit
DE112019002604T5 (de) Virtuelle Bildanzeigevorrichtung
EP3254172B1 (de) Bestimmung einer position eines fahrzeugfremden objekts in einem fahrzeug
EP3230828A1 (de) Erfassungsvorrichtung zum erkennen einer geste und/oder einer blickrichtung eines insassen eines kraftfahrzeugs durch synchrone ansteuerung von leuchteinheiten
DE19938266A1 (de) Verfahren und Einrichtung zur elektronischen bzw. elektronisch visuellen Erkennung von Verkehrszeichen
DE102016211495A1 (de) Steuerungseinrichtung für ein Kraftfahrzeug
DE102012021422A1 (de) Vorrichtung und Verfahren zur Steuerung von Maschinen mit mindestens einem beweglichen Element, insbesondere Kranen
DE102014219538A1 (de) Verfahren zum Betreiben von mobilen Plattformen und mobile Plattform
DE102012203197A1 (de) Verfahren und System zum Steuern eines Prozesses
DE102017129214B4 (de) System und Verfahren zur Verbesserung eines Blickfelds
WO2018157887A1 (de) System und verfahren zur anzeige benutzerspezifischer informationen an einem bahnsteigtürsystem
DE102018213554A1 (de) Verfahren und Anzeigeeinrichtung zur Visualisierung einer Anordnung sowie Wirkungsweise von Umfeldsensoren eines Kraftfahrzeugs
DE102022121885B4 (de) Kameraanordnung für ein Kraftfahrzeug sowie Interaktionseinrichtung, Monitorsystem und Kraftfahrzeug
DE102016202526A1 (de) Verfahren und Vorrichtung zur Erkennung einer Bediengeste eines Nutzers, insbesondere in einem Kraftfahrzeug
DE102007059807A1 (de) Modelleisenbahnsystem
DE102011004462A1 (de) Anordnung sowie Verfahren zum Erzeugen eines Weichenstellbefehls für eine elektrisch ortsgestellte Weiche

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20140123

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

RIN1 Information on inventor provided before grant (corrected)

Inventor name: FUEHNER, CLAUS

Inventor name: BOCK, ULRICH

Inventor name: RAHN, KARSTEN

Inventor name: BODE, CHRISTIAN

Inventor name: ERNST, WINFRIED

DAX Request for extension of the european patent (deleted)
GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

INTG Intention to grant announced

Effective date: 20151111

RIN1 Information on inventor provided before grant (corrected)

Inventor name: FUEHNER, CLAUS

Inventor name: ERNST, WINFRIED

Inventor name: BOCK, ULRICH

Inventor name: RAHN, KARSTEN

Inventor name: BODE, CHRISTIAN

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 794408

Country of ref document: AT

Kind code of ref document: T

Effective date: 20160515

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502012006940

Country of ref document: DE

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 5

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2585088

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20161003

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160727

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160829

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160728

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20160731

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502012006940

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

26N No opposition filed

Effective date: 20170130

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20160731

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20160731

REG Reference to a national code

Ref country code: IE

Ref legal event code: MM4A

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 6

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20160727

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20160727

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20170713

Year of fee payment: 6

Ref country code: DE

Payment date: 20170919

Year of fee payment: 6

Ref country code: FR

Payment date: 20170713

Year of fee payment: 6

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: AT

Payment date: 20170606

Year of fee payment: 6

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: ES

Payment date: 20171023

Year of fee payment: 6

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20120727

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20160427

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 502012006940

Country of ref document: DE

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 794408

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180727

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20180727

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180727

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190201

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180727

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180731

REG Reference to a national code

Ref country code: ES

Ref legal event code: FD2A

Effective date: 20190917

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180728