EP2833349B1 - Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands - Google Patents

Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands Download PDF

Info

Publication number
EP2833349B1
EP2833349B1 EP14178345.6A EP14178345A EP2833349B1 EP 2833349 B1 EP2833349 B1 EP 2833349B1 EP 14178345 A EP14178345 A EP 14178345A EP 2833349 B1 EP2833349 B1 EP 2833349B1
Authority
EP
European Patent Office
Prior art keywords
comparison
test
result
image data
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP14178345.6A
Other languages
English (en)
French (fr)
Other versions
EP2833349A1 (de
Inventor
Rudolf Dr. Ganz
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Deuta Werke GmbH
Original Assignee
Deuta Werke GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Deuta Werke GmbH filed Critical Deuta Werke GmbH
Priority to PL14178345T priority Critical patent/PL2833349T3/pl
Publication of EP2833349A1 publication Critical patent/EP2833349A1/de
Application granted granted Critical
Publication of EP2833349B1 publication Critical patent/EP2833349B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/006Electronic inspection or testing of displays and display drivers, e.g. of LED or LCD displays
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/10Dealing with defective pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/12Test circuits or failure detection circuits included in a display system, as permanent part thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Definitions

  • the invention generally relates to the field of safety technology.
  • the invention relates to a method and a device for reliably displaying a safety-relevant state with a display, in particular with a TFT screen.
  • a computer taking account of state information, creates an image data stream which contains representation values, in particular color values. These serve to drive the individual pixels of the display, i. to display an image, and are forwarded to the display in the image stream.
  • the image data stream is supplied to a test unit for performing a computational safety test.
  • This relates to a surveillance area, which comprises at least a plurality of pixels, usually a plurality of pixels, of the respective image to be displayed.
  • a generic method and a corresponding device are, for example, from the international patent application WO 2012/003872 A1 or European patents EP 2 353 089 B1 and EP 2 273 369 B1 previously known.
  • the computational security check is performed by deterministic calculation of a check code taking into account the representation values of all pixels within the monitoring area, ie by a data reduction of all image data concerning the monitoring area to a considerably reduced check code in the data volume. Based on this check code, an inference is made to a possible input variable and its comparison with the actual input variable, which can represent a state information, for example.
  • Related methods are also out EP 2 254 039 B1 or off DE 3 411 015 C2 known.
  • EP 0 584 895 A2 Another method, namely the signaling technically safe display traffic information, is in EP 0 584 895 A2 disclosed.
  • a checking routine the stored color value of a selected pixel of a symbol to be checked is read out and compared with the date for the relevant element. at Inequality of the color value and the comparison value, an error message is generated.
  • a selected pixel for example the vertex of a symbol known in its coordinates, is supplied from the memory to a comparator. Only if the operating state represented by the color value of this single pixel exactly matches the actual operating state does the comparator provide a positive comparison result.
  • this type of check has the disadvantage that certain fault modes can not be detected and, on the other hand, that imperceptible, only minor faults generate an error message that is in principle unnecessary.
  • the US 2007/0046680 A1 discloses an aircraft display system with improved availability of information.
  • the graphic is redundantly generated on two channels.
  • the check for example on the basis of checksums, can trigger a reaction for the purpose of tolerance to short-term interference pulses only if the same error is detected over several image repetition cycles.
  • a safety-related condition is to be signaled in a simple manner.
  • a control lamp depending on their luminous color, such as green or red, an operating state signaled and easily monitored by the user.
  • the correct function of the lamp is checked by a measurement of the lamp current to ensure safety.
  • the method is characterized by a method according to the preamble
  • claim 1 is characterized in that firstly a reference value which is valid for all pixels of the monitoring area is determined, for example by the test unit or a secure control computer, and that the test unit stores this reference value.
  • the test unit based on the image data stream, computationally determines a result variable and, for this purpose, subjects each pixel to a selection of pixels of the monitoring area of a test sequence.
  • the selection of the pixels for the test sequence comprises at least every other pixel of the monitored monitoring area and consists in the simplest case of all pixels of the surveillance area.
  • the test unit performs a comparison operation between at least one display value of the respective pixel, ie the pixel currently being examined in the test sequence, and the predetermined, stored reference value and forms a comparison result from this comparison operation. Furthermore, the test unit takes into account the respective comparison result to the current pixel, in order to be able to computationally determine the result variable. This consideration can be made in particular by incrementally increasing or decreasing the result variables depending on the respective comparison result. If necessary, the test sequence can extend over more than one image frame (English frame) or screen refresh. Finally, the invention provides that, after the test sequence has been performed, the result variable that has been computationally determined from the individual comparison results generated by image-wise comparison with a threshold value.
  • This comparison is made by the test unit itself or externally after output of the result variables by the test unit and is used to form either a positive or negative result of the safety test. This overall result can then be used to trigger a safety-related Reaction, for example, to issue a warning signal or to a safety shutdown of the display, are used.
  • the device is therefore characterized in that it comprises a test unit in which a reference value valid for all pixels of the monitoring area is stored and the test unit is designed to carry out a test sequence starting from the image data stream, such that the test unit successively for each Pixels of a selection comprising at least every second of the pixels of the monitoring area a comparison operation between at least one representation value, in particular a color value, performs the currently considered in the sequence pixel and the stored reference value and forms a comparison result. Furthermore, the test unit takes into account the respective comparison result for the purpose of computational determination of the result variables, for example by incrementally increasing or decreasing them.
  • the test unit can output the result variable or even compare it with a threshold value. Based on this, externally or through the test unit, the formation of a positive or negative result of the safety test can take place.
  • the threshold value for the result variable is determined such that a positive result of the safety check is already established when a predetermined proportion of the selection of pixels taken for the test sequence meets the comparison criterion of the comparison operation and this proportion is less than 100%.
  • EMC-induced changes in the image data stream can lead to insignificant changes in the individual Lead image, which the viewer can not recognize, are excluded in a simple manner.
  • a positive test result can be formed, for example, if instead of 100% of the pixels, 90% of the pixels have a desired color value.
  • the solution according to the invention is particularly easy to implement in the case of a digital image data stream, but in principle can also be used in an analog-controlled display.
  • the monitoring area can be specified variable to the test unit or can be stored in this fixed.
  • the term "surveillance area" means contiguous sets of individual pixels with respect to the image to be displayed, and includes any geometric shapes in the image to be displayed, in particular, but not limited to, polygonal or elliptical areas, including rectangular or circular areas.
  • all pixels of the predetermined monitoring range of the test sequence according to the invention are subjected. However, it is also possible to make a selection with a smaller number of pixels, but subject at least every other pixel to the comparison operation and consideration in the result variable.
  • An essential feature of the solution according to the invention is the fact that a plurality of pixels or pixels of the monitored area to be tested are compared with at least one of their display values for driving the display with one or only a few predetermined reference values.
  • the solution according to the invention also makes possible the complementary approach of recognizing maximum staining. It can thus be ensured, for example, that in the monitoring area a certain area proportion in the color green is only displayed if the status information corresponds to a safe operating state.
  • the comparison operation according to the invention can be implemented in different ways. Particularly simple is an identity comparison of a digital representation value with a digital reference value which has the same word length as the representation value. However, the comparison operation may also be performed as an inequality comparison. In particular, when it is to be checked whether the representation values for the individual pixels lie within a certain tolerance range, the comparison operation can be performed as a comparison, depending on whether the reference value represents an upper or lower limit value, that is currently in the test sequence considered representation value is smaller, less than / equal to, greater than / equal to, or greater than the reference value. Tolerance comparison is also technically easy to implement in other ways.
  • only a portion of the bits of the representation value that is of higher significance in the bit value may be compared to a reference value of lesser word length for identity. Due to the restriction to the higher-order bits, a tolerance for slight deviations, for example in the case of different color values of a hue, can be realized in a simple manner. Apart from the inequality comparison, which optionally uses upper and lower reference values, typically only one reference value is needed for the entire selection of items to be checked Pixels from the surveillance area.
  • test unit or the method can provide parallel or simultaneous execution of several test sequences relating to several separate or partially overlapping monitoring areas.
  • test sequence can be repeated individually for each screen layout or screen refresh. However, in order to reduce the required computing power and / or to introduce a temporal test tolerance, the test sequence can also extend over more than one image structure and preferably has a repetition rate in the range of human detectable, typically less than 30 Hz. The repetition rate of the test sequence can be expedient for a surveillance area, the 1 / n fraction of the refresh rate f.
  • the representation of an image comprises a color area whose color is determined by the computer depending on the state information.
  • the color surface can symbolize a control or warning light or represent the background of a security-relevant, dynamically variable display, such as a tachometer.
  • the threshold value for the result variable is determined as proposed according to the invention (see above).
  • the test sequence is the stepwise Increase or decrease a pixel counter.
  • the threshold value for forming the result of the security check can be determined as a function of the pixel counter, for example as a percentage of the tested total number of pixels.
  • the threshold value therefore does not have to be specified separately, but is automatically determined by the test sequence, depending on the size of the monitoring area and the selection made for the pixels to be tested.
  • the reference value valid for all pixels of the monitored area to be checked and / or the monitored area to be tested itself are also determined by the test unit. This is preferably done as a function of the status information which is supplied to the test unit for the determination of the reference value and / or the monitoring area.
  • the color values for the primary colors of a color space are used as display values in the image data stream.
  • at least one color value, preferably all color values are then subjected as representation value to each pixel of the comparison operation according to the invention.
  • the comparison operation in the test sequence can be carried out in particular as a tolerance comparison, for example, if the actual pixel under consideration in all or one of its color values, in absolute or relative terms, is more than a certain percentage of a target color value as the reference value different.
  • the color-by-color comparison operation may be performed by considering the individual color values.
  • This type of comparison operation allows e.g. Also, consideration of different color settings by the performing computer, for example, depending on user preferences and still recognizes the desired hues.
  • the test sequence according to the invention can extend over each individual image structure. To reduce the computing power or energy saving, it may be provided, for example, that the test sequence only extends over regularly intermittent image structures in the sense of a sampling. In certain applications, a safety-related check is already ensured if, for example, every second image buildup is correct. Accordingly, it is sufficient in these cases not to examine the image directly but at regular intervals to examine it.
  • An intermittent execution of the test sequence also allows the verification of a flashing display area.
  • a further test sequence is preferably provided, which extends in comparison to the abovementioned intermittent image structures on this alternately intermittent image structures and performs a comparison operation with a further, additionally stored reference value.
  • the state information is determined by a signal-technically secure control computer and, on the one hand, supplied to the computer, which generates the image data stream, and, on the other hand, to the test unit.
  • test unit For retrofitting existing systems, it is particularly appropriate to run the test unit as a separate module separate from the display and separate from the computer. For safety reasons, it is expedient if the test unit for connection to the image data line, in particular parallel to the display, has a read-only input, and thus can not change the image data stream.
  • test unit is conveniently implemented using an FPGA or ASIC. These can be readily configured or programmed to perform a method with the features described above.
  • the test unit expediently has, in addition to an input for the status information and the input for connection to the image data line, also an output for outputting the result of the safety test.
  • This output can be connected, for example, to the fail-safe control computer for the purpose of initiating a safety-related reaction.
  • the invention also relates to a test unit for use in a device according to one of the embodiments described above, and finally also to the use of the device according to the invention in a vehicle, in particular in a rail vehicle.
  • FIG. 1 shows the basic structure of a safety device 2 for carrying out the method according to the invention, for example in the cab of the railcar of a train.
  • the safety device 2 which is designated as a whole by 2, consists essentially of a commercially available PC 4, which generates image data as a representative computer and hereby activates a display consisting of a TFT panel or TFT display 6.
  • the TFT display is connected via an image data line 8, e.g. of the LVDS type, connected to the PC 4 for driving the individual pixels via a sequential image data stream, such that line by line and ultimately page by page, an image is constructed and displayed by the TFT display 6.
  • the safety device 2 comprises a test unit 10, which consists of microprocessors and, inter alia, an FPGA 12.
  • state information which characterizes a safety-relevant system state is supplied to the PC 4 and the test unit 10 via the data connection designated by the reference numeral 14. This value is taken into account within the PC 4 when creating the image data.
  • image data are supplied as a serial image data stream via the image data line 8 to the TFT display 6.
  • safety-relevant information eg a speedometer similar to a tachometer
  • a demarcated portion of the PC TFT displays 6 shown which is to be monitored as a monitoring area 16 safety.
  • the displayed image including the security-relevant information in the monitoring area 16 is "pre-rendered" and thus predefined.
  • the monitoring area hatched with a background in a warning color, for example in red, yellow or orange can be deposited.
  • the corresponding background should be displayed when the status information via the data connection 14, in particular from a signal-technically secure control computer 20, signals a critical condition (eg immediate stop with a red background, stop at the next possible opportunity with an orange background or maintenance required with a yellow background).
  • a critical condition eg immediate stop with a red background, stop at the next possible opportunity with an orange background or maintenance required with a yellow background.
  • the invention now makes it possible in a simple, reliable and efficient manner to check such monitoring areas 16 as to whether the state to be displayed is actually displayed correctly.
  • the image data stream fed via the LVDS image data line 8 to the TFT display 6 is tapped without change by the FPGA 12 of the test unit 10 via the read-back line 18 and a read-only input.
  • the FPGA 12 subjects the image data to the surveillance area 16 of a security audit.
  • the RGB color values ie in each case 24 bits to each of the selected pixels or pixels of the monitoring area, are successively read in pixel by pixel from the read-back line into a FIFO memory, eg a simple shift register 22 with no feedback with a width of 24 bits.
  • the contents of the shift register are compared with a reference color value stored in a register 24 contained in the FPGA. If all bits to the respective RGB color value, or as with the circuit in FIG.2 testable in the sense of a tolerance comparison, the higher-order ones Bit are identical to the reference color value, a success counter 26 is increased by one value.
  • a pixel counter (not shown) can be increased for each pixel tested or selected within the monitoring area 16.
  • test sequence e.g. After a complete screen refresh, it is then checked how high the proportion of those pixels of the monitoring area 16 is that is actually displayed with the color corresponding to the state information.
  • the test unit 10 If a predefinable threshold, which may also correspond to a proportion of the pixels, e.g. a proportion between 80% and 99%, the test unit 10 generates an output signal, e.g. to the secure control computer 20 which indicates the result of the security check, i. whether or not the color area is displayed correctly enough. For this purpose, the count of the success counter 26 is read out as the result variable after each test sequence.
  • a colored deposit of the tachometer does not have an exact color but a certain hue without requiring and checking an exact pixel-by-pixel match. This is in principle equal to the activation of a warning lamp whose display is monitored by current measurement.
  • FIG.2 shows a circuit that can easily exclude single pixel error as a safety-related error criterion. This is done in two stages, first by a tolerance comparison, which for each of the three RGB color values in the shift register 22 only the four most significant bits (Engl. Most significant bits) with a 4bit wide Compare reference value that is unchanged or fixed in register 24 for all pixels of the monitoring area 16.
  • a second step it is checked whether the result variable determined as counter result by the counter 26 represents a sufficient, predetermined proportion of the pixels in the monitoring area 16, eg 85% if about 10% of the pixels do not serve as background, but to display other information, eg to show the speedometer in FIG.1 , At the same time, the variable presentation of information, which has no actual background, can be included without affecting the result of the safety check.
  • FIG.3 shows an embodiment in which the color display to be tested takes place instead of by the PC 4 or in addition to the PC 4, by another, code-based test module 30 in the pixel data line.
  • This code-based test module 30 may have a structure according to EP2353089B1 respectively.
  • EP2273369B1 or according to EP2254039B1 exhibit.
  • a test unit 10 according to the present invention is connected downstream of the test module 30 and, according to the present invention, checks whether a safety-relevant display by the code-based test unit 30 is carried out correctly.
  • test unit 10 takes place at the same time to display an image on the display 16. This is achieved with little effort by serial processing of the data stream from the image data line 8 in a test sequence according to the invention. For this purpose, the computing power of commercially available FPGA is sufficient.
  • the test unit 10 can also use other suitable processor-like components instead of an FPGA 12, e.g. use an ASIC.
  • the comparison operation instead of a purely serial processing can also be realized multi-channel, ie with several parallel-fed individual shift registers correspondingly smaller bit width.
  • the test unit 12 can generate an output signal for the purpose of initiating a safety-related reaction, in particular for switching off the display or output of a warning signal, as a function of the test result.
  • the monitoring area 16 is in the picture shown after FIG.1 suitably rectangular, but may have any geometry and does not have to consist of contiguous pixels.
  • a display 6 any type of technical device can be used in the security device 2 and within the scope of the invention with which any information can be represented visually detectable by controlling individual pixels (English pixel).

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Description

  • Die Erfindung betrifft allgemein den Bereich der Sicherheitstechnik (engl. safety technology). Die Erfindung betrifft insbesondere ein Verfahren und eine Vorrichtung zur zuverlässigen Darstellung eines sicherheitsrelevanten Zustands mit einer Anzeige, insbesondere mit einem TFT-Bildschirm.
  • Bei gattungsgemäßen Verfahren und Vorrichtungen erstellt ein Rechner unter Berücksichtigung einer Zustandsinformation einen Bilddatenstrom, welcher Darstellungswerte, insbesondere Farbwerte, enthält. Diese dienen zum Ansteuern der einzelnen Bildpunkte der Anzeige, d.h. zum Darstellen eines Bildes, und werden im Bilddatenstrom an die Anzeige weitergeleitet.
  • Aufgrund der Komplexität der typisch zur Grafikerzeugung verwendeten Rechner sind diese im signaltechnischen Sinne als unsicher einzustufen.
  • Deshalb wird bei gattungsgemäßen Verfahren der Bilddatenstrom einer Prüfeinheit zugeführt zum Durchführen einer rechentechnischen Sicherheitsprüfung. Diese betrifft einen Überwachungsbereich, welcher zumindest mehrere Bildpunkte, in der Regel eine Vielzahl Bildpunke, des jeweils darzustellenden Bildes umfasst.
  • Ein gattungsgemäßes Verfahren und eine entsprechende Vorrichtung sind beispielsweise aus der internationalen Patentanmeldung WO 2012/003872 A1 bzw. den europäischen Patenten EP 2 353 089 B1 und EP 2 273 369 B1 vorbekannt. Bei diesem Ansatz erfolgt die rechentechnische Sicherheitsprüfung durch deterministische Berechnung eines Prüfcodes unter Berücksichtigung der Darstellungswerte aller Pixel innerhalb des Überwachungsbereichs, d.h. durch eine Datenreduktion aller Bilddaten betreffend den Überwachungsbereich auf einen im Datenumfang erheblich reduzierten Prüfcode. Ausgehend von diesem Prüfcode erfolgt dann ein Rückschluss auf eine mögliche Eingangsgröße und deren Vergleich mit der tatsächlichen Eingangsgröße, welche beispielsweise eine Zustandsinformation darstellen kann. Artverwandte Verfahren sind ebenfalls aus EP 2 254 039 B1 oder aus DE 3 411 015 C2 bekannt.
  • Ein wesentlicher Vorteil dieser Ansätze ist darin zu sehen, dass mit einem handelsüblichen Standardrechner, welcher meist die Erfordernisse für eine sicherheitstechnische Zertifizierung nicht erfüllt, dennoch eine sichere Darstellung gewährleistet werden. Diese Verfahren erkennen zuverlässig jede auch nur geringfügige Abweichung der Bilddaten von den Sollbilddaten. Ein Ansatz mit Datenreduktion durch Prüfcodebildung ist jedoch nicht für jeden Anwendungsfall ideal geeignet.
  • Weitere Verfahren zur Überprüfung von pixelformatierten Displaydaten zur Darstellung auf einem Anzeigegerät in einem Fahrzeug sind z.B. aus den Offenlegungsschriften EP 2 439 722 A1 und WO 2009/050106 A1 vorbekannt.
  • Ein weiteres Verfahren, nämlich zur signaltechnisch sicheren Anzeige verkehrstechnischer Information, wird in EP 0 584 895 A2 offenbart. Hierbei wird in einer Überprüfungsroutine der gespeicherte Farbwert eines ausgewählten Bildpunktes eines zu überprüfenden Symbols ausgelesen und mit dem Datum für das betreffende Element verglichen. Bei Ungleichheit des Farbwertes und des Vergleichswertes wird eine Fehlermeldung generiert. _Zur Überprüfung eines ausgewählten Symbols wird dabei aus dem Speicher ein ausgewählter Bildpunkt - beispielweise der in seinen Koordinaten bekannte Eckpunkt eines Symbols - einem Vergleicher zugeführt. Nur wenn der von dem Farbwert dieses einzelnen Bildpunktes repräsentierte Betriebszustand mit dem tatsächlichen Betriebszustand genau übereinstimmt liefert der Vergleicher ein positives Vergleichsergebnis. Diese Art der Überprüfung hat einerseits den Nachteil, dass bestimmte Fehlermodi nicht erkannt werden können und andererseits, dass nicht wahrnehmbare, nur geringfügige Störungen eine im Prinzip unnötige Fehlermeldung generieren.
  • Die US 2007/0046680 A1 offenbart ein Anzeigesystem für Flugzeuge mit verbesserter Verfügbarkeit der Information. Hierbei wird die Grafik redundant zweikanalig generiert. Die Überprüfung, z.B. anhand von Prüfsummen, kann dabei, zwecks Toleranz gegenüber kurzzeitigen Störimpulsen, eine Reaktion erst auslösen, wenn der gleiche Fehler über mehrere Bildwiederholzyklen erkannt wird.
  • In vielen Anwendungen soll dem Benutzer einer Mensch-Maschine-Schnittstelle (engl. HMI) auch ohne komplexe Darstellung, wie beispielsweise bei einem Tachometer erforderlich, auf einfache Weise ein sicherheitsrelevanter Zustand signalisiert werden. So kann beispielsweise durch eine Kontrolllampe je nach deren Leuchtfarbe, beispielsweise grün oder rot, ein Betriebszustand signalisiert und leicht vom Benutzer überwacht werden. Bei bekannten Systemen mit solchen Kontrollleuchten wird durch eine Messung des Lampenstroms die korrekte Funktion der Lampe überprüft um die Sicherheit zu gewährleisten.
  • Da auch in sicherheitskritischen Anwendungen vermehrt Anzeigen wie beispielsweise TFT-Bildschirme eingesetzt werden sollen, ist es wünschenswert, die Funktion solcher Kontroll- oder Warnlampen in das auf der Anzeige dargestellte Bild zu integrieren.
    Für die sicherheitstechnische Funktionsprüfung der Anzeige entsprechender Zustandsinformation sind die eingangs angegebenen Ansätze mit Datenreduktion zwar grundsätzlich geeignet, jedoch relativ aufwendig in der Umsetzung. Außerdem erfordert die Datenreduktion durch Prüfcodebildung eine Identität zwischen Sollbild und Istbild, so dass geringfügige für den Benutzer nicht wahrnehmbare Fehler, wie etwa einzelne Pixelfehler oder EMV-bedingte sogenannte Bitkipper, zu einem eigentlich unnötigen Fehlerfall führen.
    Als Alternative zu den eingangs genannten Ansätzen wäre es denkbar, eine Lösung zu verwenden, bei welcher ein zweiter Bildaufbau unabhängig bzw. redundant erzeugt wird und das erste Bild mit dem redundanten Bild bildpunktweise verglichen wird. Ein solcher Ansatz ist beispielsweise aus der EP0856792B1 bekannt. Dieser Ansatz bedingt jedoch einen erheblich größeren Hardwareaufwand, da sowohl eine redundante d.h. doppelt ausgeführte rechentechnische Erstellung des Bilddatenstroms, als auch eine zweifache vollständige Speicherung der für einen Bildaufbau benötigten Bilddaten erforderlich ist.
    Eine Aufgabe der vorliegenden Erfindung ist es mithin, ein Verfahren und eine Vorrichtung vorzuschlagen, welche die sicherheitstechnisch zuverlässige Darstellung eines sicherheitsrelevanten Zustands auf besonders einfache Weise ermöglichen und zugleich eine gewisse Toleranz gegenüber vernachlässigbaren Darstellungsfehlern gestatten.
    Diese Aufgabe wird gelöst durch ein Verfahren nach Anspruch 1 und durch eine Vorrichtung nach Anspruch 10. Verfahrensseitig zeichnet sich ein Verfahren gemäß dem Oberbegriff aus Anspruch 1 erfindungsgemäß dadurch aus, dass zunächst ein für alle Bildpunkte des Überwachungsbereichs gleichsam geltender Referenzwert bestimmt wird, zum Beispiel durch die Prüfeinheit oder einen sicheren Steuerrechner, und dass die Prüfeinheit diesen Referenzwert speichert. Ferner zeichnet sich die Erfindung dadurch aus, dass die Prüfeinheit, ausgehend vom Bilddatenstrom, rechentechnisch eine Ergebnisvariable bestimmt und hierzu jeden Bildpunkt einer Auswahl von Bildpunkten des Überwachungsbereichs einer Prüfsequenz unterzieht. Die Auswahl der Bildpunkte für die Prüfsequenz umfasst mindestens jeden zweiten Bildpunkt des zu prüfenden Überwachungsbereichs und besteht im einfachsten Fall aus allen Bildpunkten des Überwachungsbereichs. In der Prüfsequenz führt die Prüfeinheit erfindungsgemäß Bildpunktfür-Bildpunkt eine Vergleichsoperation zwischen mindestens einem Darstellungswert des jeweiligen Bildpunkts, d.h. des aktuell in der Prüfsequenz betrachteten Pixels, und dem vorgegebenen, gespeicherten Referenzwert durch und bildet aus dieser Vergleichsoperation ein Vergleichsergebnis. Ferner berücksichtigt die Prüfeinheit das jeweilige Vergleichsergebnis zum aktuellen Bildpunkt, um rechentechnisch die Ergebnisvariable bestimmen zu können. Diese Berücksichtigung kann insbesondere durch schrittweises Erhöhen oder Verringern der Ergebnisvariablen in Abhängigkeit des jeweiligen Vergleichsergebnisses erfolgen. Die Prüfsequenz kann sich gegebenenfalls über mehr als einen Bildaufbau (Engl. frame) bzw. Bildschirmrefresh erstrecken. Schließlich sieht die Erfindung vor, dass nach erfolgter Prüfsequenz die aus den einzelnen, bildpunktweise erzeugten Vergleichsergebnissen rechentechnisch bestimmte Ergebnisvariable mit einem Schwellwert verglichen wird. Dieser Vergleich erfolgt durch die Prüfeinheit selbst oder aber extern nach Ausgabe der Ergebnisvariablen durch die Prüfeinheit und wird zur Bildung entweder eines positiven oder negativen Ergebnisses der Sicherheitsprüfung genutzt. Dieses Gesamtergebnis kann anschließend zur Veranlassung einer sicherheitsgerichteten Reaktion, beispielsweise zur Ausgabe eines Warnsignals oder zu einer Sicherheitsabschaltung der Anzeige, genutzt werden.
  • Die erfindungsgemäße Vorrichtung zeichnet sich demnach dadurch aus, dass diese eine Prüfeinheit umfasst, in welcher ein für alle Bildpunkte des Überwachungsbereichs geltender Referenzwert gespeichert ist und die Prüfeinheit ausgeführt ist, um ausgehend vom Bilddatenstrom eine Prüfsequenz durchzuführen, dergestalt, dass die Prüfeinheit jeweils nacheinander für jeden Bildpunkt einer Auswahl umfassend mindestens jeden zweiten der Bildpunkte des Überwachungsbereichs eine Vergleichsoperation zwischen mindestens einem Darstellungswert, insbesondere einem Farbwert, zum aktuell in der Sequenz betrachteten Bildpunkt und dem gespeicherten Referenzwert durchführt und daraus ein Vergleichsergebnis bildet. Ferner berücksichtigt die Prüfeinheit das jeweilige Vergleichsergebnis zwecks rechentechnischer Bestimmung der Ergebnisvariablen, beispielsweise durch deren schrittweises Erhöhen oder Verringern. Die Prüfeinheit kann nach erfolgter Prüfsequenz, insbesondere jeweils nach jeder einzelnen oder nach einer Folge von Prüfsequenzen, die Ergebnisvariable ausgeben oder selbst mit einem Schwellwert vergleichen. Gestützt hierauf kann extern oder durch die Prüfeinheit die Bildung eines positiven oder negativen Ergebnisses der Sicherheitsprüfung erfolgen.
  • Erfindungsgemäß ist der Schwellwert für die Ergebnisvariable so bestimmt, dass ein positives Ergebnis der Sicherheitsprüfung bereits dann festgestellt wird, wenn ein vorbestimmter Anteil der für die Prüfsequenz getroffenen Auswahl von Bildpunkten das Vergleichskriterium der Vergleichsoperation erfüllt und dieser Anteil kleiner ist als 100%.
  • Dieser Ansatz ermöglicht es, einzelne Bildpunktfehler als sicherheitsrelevantes Fehlerkriterium auszuschließen. So können beispielsweise EMV-bedingte Veränderungen im Bilddatenstrom, die zu unerheblichen Veränderungen des einzelnen Bildes führen, welche der Betrachter nicht erkennen kann, auf einfache Weise ausgeschlossen werden. Ein positives Prüfergebnis kann beispielsweise gebildet werden, wenn anstatt 100 % der Bildpunkte, 90 % der Bildpunkte einen gewünschten Farbwert aufweisen.
  • Die erfindungsgemäße Lösung ist besonders leicht umzusetzen bei einem digitalen Bilddatenstrom, kann jedoch grundsätzlich auch bei einer analog gesteuerten Anzeige eingesetzt werden. Der Überwachungsbereich kann der Prüfeinheit variabel angegeben oder aber in dieser fest hinterlegt sein. Der Begriff "Überwachungsbereich" bedeutet hier mit Bezug auf das darzustellende Bild zusammenhängende Mengen einzelner Pixel bzw. Bildpunkte und umfasst jegliche geometrischen Formen im darzustellenden Bild, insbesondere aber nicht ausschließlich polygon- oder ellipsenförmige Bereiche, einschließlich rechteckiger oder kreisförmiger Bereiche. Zweckmäßig werden alle Bildpunkte des vorgegebenen Überwachungsbereichs der erfindungsgemäßen Prüfsequenz unterzogen. Es ist jedoch auch möglich, eine Auswahl mit einer geringeren Anzahl von Bildpunkten zu treffen, jedoch mindestens jeden zweiten Bildpunkt der Vergleichsoperation und Berücksichtigung in der Ergebnisvariablen zu unterziehen.
  • Eine wesentliche Eigenschaft der erfindungsgemäßen Lösung ist darin zu sehen, dass eine Vielzahl von Bildpunkten bzw. Pixeln des zu prüfenden Überwachungsbereichs hinsichtlich mindestens eines ihrer Darstellungswerte zur Ansteuerung der Anzeige mit jeweils einem oder lediglich einigen wenigen vorbestimmten Referenzwerten verglichen werden. Hierdurch kann auf rechentechnisch besonders einfache Weise und mit besonders geringem Hardwareaufwand die zuverlässige Darstellung eines sicherheitsrelevanten Zustands in einer Vielzahl von Anwendungsfällen überprüft und gewährleistet werden.
  • Es kann zum Beispiel sicher erkannt werden, ob eine bestimmte Fläche in hinreichendem Maße in einer bestimmten Farbe angezeigt wird. So lässt sich beispielsweise sicherstellen, dass ein anzuzeigender Warnhinweis auch tatsächlich angezeigt wird. Im Gegensatz zu dieser Sicherstellung einer Minimaleinfärbung ermöglicht die erfindungsgemäße Lösung auch den hierzu komplementären Ansatz, eine Maximaleinfärbung zu erkennen. So kann zum Beispiel sichergestellt werden, dass im Überwachungsbereich ein bestimmter Flächenanteil in der Farbe Grün nur dann angezeigt ist, wenn die Zustandsinformation einem sicheren Betriebszustand entspricht.
  • Die erfindungsgemäße Vergleichsoperation kann auf unterschiedliche Arten implementiert werden. Besonders einfach ist ein Identitätsvergleich eines digitalen Darstellungswerts mit einem digitalen Referenzwert, welcher die gleiche Wortlänge wie der Darstellungswert aufweist. Die Vergleichsoperation kann jedoch auch als Ungleichungsvergleich ausgeführt sein. Insbesondere, wenn geprüft werden soll, ob die Darstellungswerte zu den einzelnen Bildpunkten innerhalb eines bestimmten Toleranzbereichs liegen, kann die Vergleichsoperation, je nachdem, ob der Referenzwert einen oberen oder unteren Grenzwert darstellt, als ein Vergleich dahingehend ausgeführt sein, ob der aktuell in der Prüfsequenz betrachtete Darstellungswert kleiner, kleiner/gleich, größer/gleich oder größer als der Referenzwert ist. Ein Toleranzvergleich ist digitaltechnisch auch auf andere Weise leicht zu implementieren. Insbesondere kann beispielsweise lediglich ein in der Bitwertigkeit höherwertige Teil der Bits des Darstellungswerts mit einem Referenzwert geringerer Wortlänge auf Identität verglichen werden. Durch die Beschränkung auf die höherwertigen Bits wird auf einfache Weise eine Toleranz hinsichtlich geringfügiger Abweichungen, beispielsweise bei unterschiedlichen Farbwerten eines Farbtons, realisiert werden. Abgesehen vom Ungleichungsvergleich, welcher gegebenenfalls einen oberen und einen unteren Referenzwert verwendet, wird in der Regel lediglich ein Referenzwert benötigt für die gesamte Auswahl von zu prüfenden Bildpunkten aus dem Überwachungsbereich.
  • Die Prüfeinheit bzw. das Verfahren kann vorsehen, parallel bzw. zeitgleich mehrere Prüfsequenzen betreffend mehrere getrennte oder teilweise überlappende Überwachungsbereiche durchzuführen.
  • Die Prüfsequenz kann jeweils für jeden Bildaufbau bzw. Bildschirmrefresh einzeln wiederholt werden. Zur Reduzierung der erforderlichen Rechenleistung und/oder zur Einführung einer zeitlichen Prüftoleranz kann sich die Prüfsequenz jedoch auch über mehr als einen Bildaufbau erstrecken und weist vorzugsweise eine Wiederholungsrate im Bereich der vom Menschen erfassbaren auf, typisch weniger als 30 Hz. Zweckmäßig kann die Wiederholungsrate der Prüfsequenz für einen Überwachungsbereich den 1/n-Bruchteil der Bildwiederholfrequenz f betragen.
  • In bevorzugter Ausführungsform des Verfahrens bzw. der Vorrichtung umfasst das Darstellen eines Bildes eine Farbfläche, deren Farbe abhängig von der Zustandsinformation durch den Rechner bestimmt wird. Die Farbfläche kann insbesondere eine Kontroll- oder Warnleuchte symbolisieren oder den Hintergrund einer sicherheitsrelevanten, dynamisch veränderlichen Anzeige, wie beispielsweise eines Tachometers, darstellen.
  • Insbesondere in Fällen in denen die Anzahl der Bildpunkte die veränderliche Information anzeigen nicht oder nur geringfügig ändert, wie beispielsweise bei einer typischen, analogen Tachometeranzeige, und bei der Sicherheitsprüfung von Farbflächen ist es zweckmäßig, vorzusehen, dass der Schwellwert für die Ergebnisvariable so bestimmt ist, wie erfindungsgemäß vorgeschlagen (s. oben).
  • In einer rechentechnisch einfachen Bestimmung des Schwellwerts ist vorgesehen, dass die Prüfsequenz das schrittweise Erhöhen oder Verringern eines Bildpunktzählers umfasst. So kann der Schwellwert zur Bildung des Ergebnisses der Sicherheitsprüfung in Abhängigkeit des Bildpunktzählers bestimmt werden, beispielsweise als prozentualer Anteil der geprüften Gesamtzahl an Bildpunkten. Der Schwellwert muss somit nicht gesondert vorgegeben werden, sondern wird automatisch je nach Größe des Überwachungsbereichs und getroffener Auswahl zu prüfender Bildpunkte durch die Prüfsequenz bestimmt.
  • In einer zweckmäßigen Ausführung kann weiterhin vorgesehen sein, dass auch der für alle Bildpunkte des zu prüfenden Überwachungsbereichs geltende Referenzwert und/oder der zu prüfende Überwachungsbereich selbst jeweils durch die Prüfeinheit bestimmt wird. Dies erfolgt vorzugsweise in Abhängigkeit von der Zustandsinformation, welche der Prüfeinheit für die Bestimmung des Referenzwerts und/oder des Überwachungsbereichs zugeführt wird.
  • In einer für viele Anwendungen, insbesondere für Warnhinweise, zweckmäßigen Ausführung ist vorgesehen, dass als Darstellungswerte im Bilddatenstrom die Farbwerte zu den Grundfarben eines Farbraums, insbesondere eines RGB-Farbraums mit jeweils 8 Bit Wortbreite pro Farbwert, verwendet werden. Inder Prüfsequenz wird dann mindestens ein Farbwert, vorzugsweise werden alle Farbwerte, als Darstellungswert zu jedem Bildpunkt der erfindungsgemäßen Vergleichsoperation unterzogen.
  • Zum Farbwertvergleich kann die Vergleichsoperation in der Prüfsequenz insbesondere als Toleranzvergleich ausgeführt sein, beispielsweise dahingehend, ob sich der aktuelle in der Prüfsequenz betrachtete Bildpunkt in allen oder in einem seiner Farbwerte, absolut oder relativ betrachtet, um mehr als einen bestimmten Prozentsatz von einem Sollfarbwert als Referenzwert unterscheidet.
  • Somit kann, anstatt eines bitweisen Identitätsvergleichs der gesamten Darstellungswerte für die Ansteuerung des Bildpunkts, die Vergleichsoperation Farbwert-für-Farbwert unter Betrachtung der einzelnen Farbwerte durchgeführt werden. Diese Art der Vergleichsoperation ermöglicht z.B. auch eine Berücksichtigung von unterschiedlichen Farbeinstellungen durch den darstellenden Rechner, beispielsweise in Abhängigkeit von Nutzerpräferenzen und erkennt dennoch die gewünschten Farbtöne. Die erfindungsgemäße Prüfsequenz kann sich über jeden einzelnen Bildaufbau erstrecken. Zur Reduzierung der Rechenleistung oder Energieeinsparung kann beispielsweise vorgesehen sein, dass die Prüfsequenz sich lediglich über regelmäßig intermittierende Bildaufbauten im Sinne eines Sampling erstreckt. In bestimmten Anwendungsfällen ist eine sicherheitsgerichtete Überprüfung bereits gewährleistet, wenn beispielsweise jeder zweite Bildaufbau korrekt erfolgt. Demnach ist es in diesen Fällen ausreichend, nicht unmittelbar, sondern in periodischen Abständen aufeinander folgende Bildaufbauten der Prüfung zu unterziehen.
  • Ein intermittierendes Ausführen der Prüfsequenz gestattet zudem auch die Überprüfung einer blinkend anzuzeigenden Fläche. Hierzu ist vorzugsweise eine weitere Prüfsequenz vorgesehen, welche sich im Vergleich zu den vorgenannten intermittierenden Bildaufbauten über hierzu alternierend intermittierende Bildaufbauten erstreckt und eine Vergleichsoperation mit einem weiteren, zusätzlich gespeicherten Referenzwert durchführt.
  • In einer zweckmäßigen Ausführungsform wird die Zustandsinformation von einem signaltechnisch sicheren Steuerrechner bestimmt und einerseits dem Rechner, welcher den Bilddatenstrom erstellt, und andererseits der Prüfeinheit, zugeführt.
  • Zum Nachrüsten bestehender Systeme ist es besonders zweckmäßig, die Prüfeinheit als separates Modul getrennt von der Anzeige und getrennt vom Rechner auszuführen. Aus sicherheitstechnischen Gründen ist es zweckmäßig, wenn die Prüfeinheit zur Verbindung mit der Bilddatenleitung, insbesondere parallel zur Anzeige, einen Nur-Lese-Eingang aufweist, und somit den Bilddatenstrom nicht verändern kann.
  • Die Prüfeinheit wird zweckmäßig unter Verwendung eines FPGA oder ASIC realisiert. Diese lassen sich ohne weiteres zur Durchführung eines Verfahrens mit den zuvor beschriebenen Merkmalen konfigurieren bzw. programmieren.
  • Zweckmäßig verfügt die Prüfeinheit neben einem Eingang für die Zustandsinformation und dem Eingang zum Anschluss an die Bilddatenleitung auch über einen Ausgang für die Ausgabe des Ergebnisses der Sicherheitsprüfung. Dieser Ausgang kann beispielsweise mit dem signaltechnisch sicheren Steuerrechner verbunden werden zwecks Veranlassung einer sicherheitsgerichteten Reaktion.
  • Die Erfindung betrifft schließlich auch eine Prüfeinheit zur Verwendung in einer Vorrichtung gemäß einer der vorstehend beschriebenen Ausführungsformen und schließlich auch die Verwendung der erfindungsgemäßen Vorrichtung ein einem Fahrzeug, insbesondere in einem Schienenfahrzeug.
  • Weitere Einzelheiten, Vorteile und Merkmale der Erfindung lassen sich dem nachfolgenden Teil der Beschreibung entnehmen, in der bevorzugte Ausführungsbeispiele des erfindungsgemäßen Verfahrens und Vorrichtungen zu dessen Umsetzung anhand von 2 Zeichnungen näher erläutert sind. Es zeigen:
  • FIG.1
    eine schematische Darstellung einer Ausführungsform einer erfindungsgemäßen Vorrichtung z.B. für ein Schienenfahrzeug;
    FIG.2
    eine schematische Darstellung einer möglichen Digitalschaltung zur Durchführung der Prüfsequenz gemäß dem erfindungsgemäßen Verfahren;
    FIG.3
    eine schematische Darstellung einer zweiten Ausführungsform einer erfindungsgemäßen Vorrichtung z.B. für ein Schienenfahrzeug.
  • Gleiche und entsprechende Bestandteile sind mit denselben Bezugszeichen versehen.
  • FIG. 1 zeigt den prinzipiellen Aufbau einer Sicherheitsvorrichtung 2 zur Durchführung des erfindungsgemäßen Verfahrens z.B. im Führerstand des Triebwagens eines Zuges.
  • Die insgesamt mit 2 bezeichnete Sicherheitsvorrichtung 2 beseht im Wesentlichen aus einem handelsüblichen PC 4, welcher als darstellender Rechner Bilddaten erstellt und hiermit eine aus einem TFT-Panel bzw. TFT-Display 6 bestehende Anzeige ansteuert. Das TFT-Display ist über eine Bilddatenleitung 8, z.B. vom LVDS-Typ, mit dem PC 4 verbunden zur Ansteuerung der einzelnen Bildpunkte über einen sequenziellen Bilddatenstrom, derart, dass zeilenweise und letztlich seitenweise ein Bild aufgebaut und durch das TFT-Display 6 dargestellt wird. Ferner umfasst die Sicherheitsvorrichtung 2 eine Prüfeinheit 10, welche aus Mikroprozessoren und unter anderem einem FPGA 12 besteht.
  • In dem dargestellten Beispiel wird über die mit dem Bezugszeichen 14 bezeichnete Datenverbindung dem PC 4 und der Prüfeinheit 10 eine Zustandsinformation zugeführt, welche einen sicherheitsrelevanten Systemzustand charakterisiert. Dieser Wert wird innerhalb des PCs 4 bei der Erstellung der Bilddaten berücksichtigt. Diese Bilddaten werden als serieller Bilddatenstrom über die Bilddatenleitung 8 dem TFT-Display 6 zugeführt werden.
  • Durch den PC 4 werden unter anderem sicherheitsrelevante Informationen, z.B. eine Geschwindigkeitsanzeige ähnlich einem Tachometer, auf einem abgegrenzten Teilbereich des TFT-Displays 6 dargestellt, der als Überwachungsbereich 16 sicherheitstechnisch zu überprüfen ist. Das angezeigte Bild einschließlich der sicherheitsrelevanten Information im Überwachungsbereich 16 ist "vorgerendert" und damit fest vordefiniert. Um den Benutzer über einen sicherheitsrelevanten, kritischen Zustand zu informieren, kann der schraffiert dargestellte Überwachungsbereich 16 mit einem Hintergrund in einer Warnfarbe, z.B. in Rot, Gelb oder Orange hinterlegt werden. Der entsprechende Hintergrund soll angezeigt werden, wenn die Zustandsinformation über die Datenverbindung 14, insbesondere von einem signaltechnisch sicheren Steuerrechner 20, einen kritischen Zustand signalisiert (z.B. unverzüglich Anhalten bei rotem Hintergrund, bei nächstmöglichster Gelegenheit anhalten bei orangefarbenem Hintergrund oder Wartung erforderlich bei gelbem Hintergrund).
  • Die Erfindung ermöglicht nun, auf einfache, zuverlässige und effiziente Weise derartige Überwachungsbereiche 16 dahingehend zu prüfen, ob der anzuzeigende Zustand tatsächlich korrekt angezeigt wird.
  • Der über die LVDS-Bilddatenleitung 8 zum TFT-Display 6 geführte Bilddatenstrom wird vom FPGA 12 der Prüfeinheit 10 über die Rückleseleitung 18 und einen Nur-Lese-Eingang veränderungslos abgegriffen. Der FPGA 12 unterzieht die Bilddaten zum Überwachungsbereich 16 einer Sicherheitsprüfung.
  • Hierzu werden als Darstellungswerte die RGB Farbwerte, d.h. jeweils 24bit zu jedem der ausgewählten Pixel bzw. Bildpunkte des Überwachungsbereichs nacheinander und pixelweise von der Rückleseleitung seriell in einen FIFO-Speicher, z.B. ein einfaches Schieberegister 22 ohne Rückkopplung mit 24bit Breite eingelesen. Der Inhalt des Schieberegisters wird mit einem im FPGA enthaltenen, in einem Register 24 zwischengespeicherten Referenzfarbwert verglichen. Falls alle Bit zum jeweiligen RGB-Farbwert, oder wie mit der Schaltung in FIG.2 im Sinne eines Toleranzvergleichs prüfbar, die höherwertigen Bit identisch zum Referenzfarbwert sind, wird ein Erfolgszähler 26 um einen Wert erhöht. Zugleich kann für jeden geprüften Bildpunkt bzw. aus der Auswahl innerhalb des Überwachungsbereichs 16 ein Pixelzähler (nicht gezeigt) erhöht werden.
  • Nach Abschluss einer Prüfsequenz, z.B. nach einem vollständigen Bild- bzw. Seitenaufbau (Engl. screen refresh), wird dann geprüft, wie hoch der Anteil derjenigen Bildpunkte des Überwachungsbereichs 16 ist, die tatsächlich mit der entsprechend der Zustandsinformation korrekten Farbe angezeigt werden.
  • Wird eine vordefinierbare Schwelle, welche auch einem Anteil der Bildpunkte entsprechen kann, z.B. einem Anteil zw. 80% und 99%, überschritten, so erzeugt die Prüfeinheit 10 ein Ausgangssignal, z.B. an den sicheren Steuerrechner 20, welches das Ergebnis der Sicherheitsprüfung anzeigt, d.h. ob oder ob nicht die Farbfläche in hinreichendem Maße korrekt angezeigt wird. Hierzu wird als Ergebnisvariable nach jeder Prüfsequenz der Zählerstand des Erfolgszählers 26 ausgelesen.
  • So kann beispielsweise für den Überwachungsbereich 16 festgestellt werden, ob eine farbliche Hinterlegung des Tachometers nicht eine exakte Farbe, sondern einen bestimmten Farbton aufweist, ohne hierfür eine exakte pixelweise Übereinstimmung zu fordern und zu prüfen. Dies kommt im Grundsatz der Ansteuerung einer Warnlampe gleich, deren Anzeige durch Strommessung überwacht wird.
  • FIG.2 zeigt eine Schaltung, die auf einfache Weise Einzelpixelfehler als sicherheitsrelevantes Fehlerkriterium ausschließen kann. Dies erfolgt zweistufig, zunächst durch einen Toleranzvergleich, welcher für jeden der drei RGB Farbwert im Schieberegister 22 lediglich die vier höchstwertigen Bit (Engl. most significant bits) mit einem 4bit breiten Referenzwert vergleicht, der für alle Pixel des Überwachungsbereichs 16 unverändert bzw. fest im Register 24 hinterlegt ist. Auf einer zweiten Stufe wird geprüft, ob die als Zählerergebnis durch den Zähler 26 bestimmte Ergebnisvariable einen hinreichenden, vorbestimmen Anteil der Pixel im Überwachungsbereich 16 darstellt, z.B. 85% falls etwa 10% der Pixel nicht als Hintergrund, sondern zur Darstellung anderer Information dienen, z.B. zur Darstellung des Tachometers in FIG.1. So kann zugleich die variable Informationsdarstellung, die keinen eigentlichen Hintergrund hat, mit einbezogen werden, ohne das Ergebnis der Sicherheitsprüfung zu beeinträchtigen.
  • FIG.3 zeigt eine Ausführung, bei welcher die zu prüfende farbliche Einblendung statt durch den PC 4 oder zusätzlich zum PC 4, durch ein weiteres, codebasierte Prüfmodul 30 in der Pixeldatenleitung erfolgt. Dieses codebasierte Prüfmodul 30 kann einen Aufbau gemäß EP2353089B1 bzw. EP2273369B1 oder gemäß EP2254039B1 aufweisen. Eine Prüfeinheit 10 gemäß vorliegender Erfindung ist dem Prüfmodul 30 nachgeschaltet und prüft gemäß der vorliegenden Erfindung, ob eine sicherheitsrelevante Einblendung durch die codebasierte Prüfeinheit 30 korrekt erfolgt.
  • Die Sicherheitsprüfung durch die Prüfeinheit 10 erfolgt zeitgleich zum Darstellen eines Bildes an der Anzeige 16. Dies wird mit geringem Aufwand durch serielle Verarbeitung des Datenstroms aus der Bilddatenleitung 8 in einer erfindungsgemäßen Prüfsequenz erreicht. Hierzu ist die Rechenleistung handelsüblicher FPGA ausreichend. Die Prüfeinheit 10 kann anstelle eines FPGA 12 auch andere geeignete, prozessorähnliche Komponenten z.B. einen ASIC verwenden.
  • Zur Reduzierung der Taktrate kann die Vergleichsoperation anstatt einer rein seriellen Verarbeitung auch mehrkanalig realisiert werden, d.h. mit mehreren parallel gespeisten einzelnen Schieberegistern entsprechend geringerer Bitbreite.
  • In Anlehnung an die Lehre aus EP2353089B1 kann die Prüfeinheit 12 in Abhängigkeit des Prüfergebnisses ein Ausgangssignal zwecks Veranlassung einer sicherheitsgerichteten Reaktion, insbesondere zur Abschaltung der Anzeige oder Ausgabe eines Warnsignals, erzeugen.
  • Der Überwachungsbereich 16 ist im dargestellten Bild nach FIG.1 zweckmäßig rechteckig, kann jedoch eine beliebige Geometrie haben und muss nicht aus zusammenhängenden Bildpunkten bestehen. Als Anzeige 6 kann in der Sicherheitsvorrichtung 2 und im Rahmen der Erfindung jede Art von technischer Vorrichtung eingesetzt werden, mit welcher durch Steuerung einzelner Bildpunkte (Engl. Pixel) eine beliebige Information visuell erfassbar dargestellt werden kann.
  • Bezugszeichenliste
  • FIG.1-3
  • 2
    Sicherheitsvorrichtung
    4
    PC
    6
    TFT-Display
    8
    LVDS Bilddatenleitung
    10
    Prüfeinheit
    12
    FPGA
    14
    Datenleitung
    16
    Überwachungsbereich
    20
    übergeordneter Sicherheitsrechner
    22
    Schieberegister (FIFO Speicher)
    24
    Register
    26
    Erfolgszähler
    30
    codebasierte Prüfeinheit

Claims (14)

  1. Verfahren zur Darstellung eines sicherheitsrelevanten Zustands mit einer Anzeige (6), umfassend:
    Erstellen eines Bilddatenstroms durch einen Rechner (4) unter Berücksichtigung einer Zustandsinformation, wobei der Bilddatenstrom Darstellungswerte, insbesondere Farbwerte, enthält; Weiterleiten des Bilddatenstroms (8) an die Anzeige (6) zum Darstellen eines Bildes durch Ansteuern von Bildpunkten anhand der Darstellungswerte; sowie
    Zuführen des Bilddatenstroms zu einer Prüfeinheit (10) zum Durchführen einer rechentechnischen Sicherheitsprüfung eines Überwachungsbereichs (16), welcher eine zusammenhängende Menge mit einer Vielzahl einzelner Bildpunkte eines darzustellenden Bildes umfasst;
    DADURCH GEKENNZEICHNET, DASS
    ein für alle Bildpunkte des Überwachungsbereichs (16) geltender Referenzwert bestimmt wird und die Prüfeinheit (10) diesen Referenzwert speichert (24);
    die Prüfeinheit (10) ausgehend vom Bilddatenstrom in einer Prüfsequenz rechentechnisch eine Ergebnisvariable bestimmt und hierzu jeweils nacheinander für jeden Bildpunkt einer Auswahl von Bildpunkten des Überwachungsbereichs (16), wobei die Auswahl mindestens jeden zweiten Bildpunkt des zu prüfenden Überwachungsbereichs umfasst,
    - eine Vergleichsoperation zwischen mindestens einem Darstellungswert des jeweiligen Bildpunkts und dem gespeicherten Referenzwert durchführt und daraus ein Vergleichsergebnis bildet; sowie
    - zum Bestimmen der Ergebnisvariablen das jeweilige Vergleichsergebnis zu jedem Bildpunkt der Auswahl berücksichtigt, insbesondere durch schrittweises Erhöhen oder Verringern der Ergebnisvariablen;
    und nach erfolgter Prüfsequenz die Ergebnisvariable, welche die Prüfeinheit rechentechnisch in Abhängigkeit der Vergleichsergebnisse bestimmt hat, mit einem Schwellwert verglichen wird, vorzugsweise durch die Prüfeinheit (10), zur Bildung entweder eines positiven oder negativen Ergebnisses der Sicherheitsprüfung, wobei der Schwellwert für die Ergebnisvariable so bestimmt ist, dass ein positives Ergebnis der Sicherheitsprüfung festgestellt wird, wenn ein vorbestimmter Anteil der Auswahl von Bildpunkten das Vergleichskriterium erfüllt und dieser Anteil kleiner ist als 100%.
  2. Verfahren nach Anspruch 1, DADURCH GEKENNZEICHNET, DASS die Vergleichsoperation als
    - Identitätsvergleich des digitalen Darstellungswerts mit einem digitalen Referenzwert identischer Wortlänge; als
    - Ungleichungsvergleich, insbesondere als Kleinervergleich, Kleinergleichvergleich, Größergleichvergleich oder Größervergleich; oder als
    - Toleranzvergleich, insbesondere eines in der Bitwertigkeit höherwertigen Teils der Bits des Darstellungswerts mit einem Referenzwert geringerer Wortlänge, ausgeführt wird.
  3. Verfahren nach Anspruch 1 oder 2, DADURCH GEKENNZEICHNET, DASS die Prüfsequenz sich über mehr als einen Bildaufbau erstreckt und vorzugsweise eine Wiederholungsrate von f/n aufweist, wobei f die Bildrate der Anzeige (6) und n eine ganze Zahl > 1 ist.
  4. Verfahren nach einem der vorhergehenden Ansprüche, DADURCH GEKENNZEICHNET, DASS das Darstellen eines Bildes eine Farbfläche umfasst, deren Farbe abhängig von der Zustandsinformation durch den Rechner (4) bestimmt wird, wobei die Farbfläche insbesondere eine Kontroll- oder Warnleuchte symbolisiert oder den Hintergrund einer dynamisch veränderlichen sicherheitsrelevanten Anzeige (6) darstellt.
  5. Verfahren nach einem der vorhergehenden Ansprüche, insbesondere nach Anspruch 4, DADURCH GEKENNZEICHNET, DASS die Prüfsequenz das schrittweise Erhöhen oder Verringern eines Bildpunktzählers (26) umfasst und der Schwellwert zur Bildung des Ergebnisses der Sicherheitsprüfung in Abhängigkeit des Bildpunktzählers bestimmt wird.
  6. Verfahren nach einem der vorhergehenden Ansprüche, GEKENNZEICHNET DURCH Zuführen der Zustandsinformation (14) zur Prüfeinheit (10) und Bestimmen des für alle Bildpunkte des Überwachungsbereichs geltenden Referenzwerts und/oder des Überwachungsbereichs durch die Prüfeinheit (10) und in Abhängigkeit der Zustandsinformation.
  7. Verfahren nach einem der vorhergehenden Ansprüche, DADURCH GEKENNZEICHNET, DASS als Darstellungswerte die Farbwerte zu den Grundfarben eines Farbraums, insbesondere eines RGB-Farbraums mit jeweils 8 Bit Wortbreite pro Farbwert, verwendet werden, und in der Prüfsequenz mindestens ein Farbwert, vorzugsweise alle Farbwerte als Darstellungswert zu jedem Bildpunkt der Vergleichsoperation unterzogen werden, insbesondere einer als Toleranzvergleich ausgeführten Vergleichsoperation.
  8. Verfahren nach einem der vorhergehenden Ansprüche, insbesondere nach Anspruch 3, DADURCH GEKENNZEICHNET, DASS die Prüfsequenz sich über regelmäßig intermittierende Bildaufbauten erstreckt, und vorzugsweise eine weitere Prüfsequenz sich über alternierend intermittierende Bildaufbauten erstreckt und eine Vergleichsoperation mit einem weiteren gespeicherten Referenzwert durchführt.
  9. Verfahren nach einem der vorhergehenden Ansprüche, GEKENNZEICHNET DURCH Zuführen einer oder mehrerer Zustandsinformationen (14) von einem signaltechnisch sicheren Steuerrechner (20) zum Rechner (4), welcher den Bilddatenstrom erstellt, und zur Prüfeinheit (10).
  10. Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands, umfassend:
    eine Anzeige (6), insbesondere ein TFT-Display;
    einen Rechner (4) zum rechnergestützten Erstellen eines Bilddatenstroms unter Berücksichtigung einer Zustandsinformation, wobei der Bilddatenstrom Darstellungswerte, insbesondere Farbwerte, enthält und zum Weiterleiten des Bilddatenstroms (8) an die Anzeige (6) zum Darstellen eines Bildes durch Ansteuern der Bildpunkte anhand der Darstellungswerte; sowie
    eine Prüfeinheit (10), welcher der Bilddatenstrom zugeführt wird zum Durchführen einer rechentechnischen Sicherheitsprüfung eines Überwachungsbereichs (16), welcher eine zusammenhängende Menge mit einer Vielzahl einzelner Bildpunkte im darzustellenden Bild umfasst;
    DADURCH GEKENNZEICHNET, DASS
    in der Prüfeinheit (10) ein für alle Bildpunkte des Überwachungsbereichs geltender Referenzwert gespeichert (24) ist;
    die Prüfeinheit (10) ausgeführt ist, um ausgehend vom Bilddatenstrom in einer Prüfsequenz rechentechnisch eine Ergebnisvariable zu bestimmen und hierzu jeweils nacheinander für jeden Bildpunkt einer Auswahl von Bildpunkten des Überwachungsbereichs (16), wobei die Auswahl mindestens jeden zweiten Bildpunkt des zu prüfenden Überwachungsbereichs umfasst,
    - eine Vergleichsoperation zwischen mindestens einem Darstellungswert des jeweiligen Bildpunkts und dem gespeicherten Referenzwert durchzuführen und daraus ein Vergleichsergebnis bildet; sowie
    - zum Bestimmen der Ergebnisvariablen das jeweilige Vergleichsergebnis zu jedem Bildpunkt der Auswahl berücksichtigt, insbesondere durch schrittweises Erhöhen oder Verringern der Ergebnisvariablen;
    und um nach erfolgter Prüfsequenz die Ergebnisvariable, welche die Prüfeinheit (10) rechentechnisch in Abhängigkeit der Vergleichsergebnisse bestimmt hat, auszugeben oder mit einem Schwellwert zu vergleichen, zur Bildung entweder eines positiven oder negativen Ergebnisses der Sicherheitsprüfung, wobei der Schwellwert für die Ergebnisvariable so bestimmt ist, dass ein positives Ergebnis der Sicherheitsprüfung festgestellt wird, wenn ein vorbestimmter Anteil der Auswahl von Bildpunkten das Vergleichskriterium erfüllt und dieser Anteil kleiner ist als 100%.
  11. Vorrichtung nach Anspruch 10, DADURCH GEKENNZEICHNET, DASS die Prüfeinheit (10) als separates Modul getrennt von der Anzeige (6) und getrennt vom Rechner (4) ausgeführt ist, und einen Nur-Lese-Eingang (18) aufweist, welcher parallel an eine die Anzeige mit dem Rechner verbindende Bilddatenleitung (8) anschließbar ist.
  12. Vorrichtung nach Anspruch 10 oder 11, DADURCH GEKENNZEICHNET, DASS die Prüfeinheit einen FPGA (12) oder ASIC umfasst, welcher zur Durchführung des Verfahrens gemäß den kennzeichnenden Merkmalen aus einem der Ansprüche 1 bis 9 konfiguriert ist.
  13. Vorrichtung nach einem der Ansprüche 10 bis 12, DADURCH GEKENNZEICHNET, DASS die Prüfeinheit (10) einen Eingang (14) für die Zustandsinformation und einen Ausgang für die Ausgabe des Ergebnisses der Sicherheitsprüfung aufweist.
  14. Fahrzeug, insbesondere ein Schienenfahrzeug, umfasssend eine Vorrichtung nach einem der Ansprüche 10 bis 13.
EP14178345.6A 2013-07-31 2014-07-24 Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands Active EP2833349B1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PL14178345T PL2833349T3 (pl) 2013-07-31 2014-07-24 Sposób przedstawiania stanu istotnego z punktu widzenia bezpieczeństwa

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102013012679.7A DE102013012679A1 (de) 2013-07-31 2013-07-31 Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands

Publications (2)

Publication Number Publication Date
EP2833349A1 EP2833349A1 (de) 2015-02-04
EP2833349B1 true EP2833349B1 (de) 2018-04-04

Family

ID=51229810

Family Applications (1)

Application Number Title Priority Date Filing Date
EP14178345.6A Active EP2833349B1 (de) 2013-07-31 2014-07-24 Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands

Country Status (3)

Country Link
EP (1) EP2833349B1 (de)
DE (1) DE102013012679A1 (de)
PL (1) PL2833349T3 (de)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016200826A1 (de) * 2016-01-21 2017-07-27 Robert Bosch Gmbh Vorrichtung und Verfahren zum Überprüfen einer Gültigkeit von Bilddaten in einer Anzeigeeinrichtung
WO2018041777A1 (de) 2016-08-31 2018-03-08 Siemens Aktiengesellschaft Überwachen einer anzeige eines führerstands eines verkehrsmittels
DE102016217518A1 (de) 2016-09-14 2018-03-15 Robert Bosch Gmbh Vorrichtung und Verfahren zur Überwachung einer Nichtanzeige eines vorgegebenen Bildes, insbesondere eines Warnsymbols, in einem Display einer Anzeigevorrichtung
DE102017200915A1 (de) 2017-01-20 2018-07-26 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zum Anzeigen eines Hinweises für einen Anwender und Arbeitsvorrichtung
DE102017205458A1 (de) * 2017-03-30 2018-10-04 Robert Bosch Gmbh System und ein Verfahren zur Erkennung von Augen und Händen, insbesondere für ein Kraftfahrzeug
EP3547180A1 (de) * 2018-03-29 2019-10-02 Deuta-Werke GmbH Optimierung der sicherheitsprüfung zur darstellung sicherheitsrelevanter bilddaten
EP4052990A1 (de) * 2021-03-04 2022-09-07 Deuta-Werke GmbH Sicheres head-up display im führerstand eines schienenfahrzeugs

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3411015A1 (de) 1984-03-24 1985-09-26 Standard Elektrik Lorenz Ag, 7000 Stuttgart Verfahren und einrichtung zur signaltechnisch sicheren bildschirmdarstellung eines meldebildes
DE4228917A1 (de) * 1992-08-28 1994-03-03 Siemens Ag Verfahren zum signaltechnisch sicheren Anzeigen verkehrstechnischer Informationen eines Verkehrswegesystems
DE19703574A1 (de) 1997-01-31 1998-08-06 Alsthom Cge Alcatel Verfahren zur sicheren Darstellung eines Bildes auf einem Monitor
US7724259B2 (en) * 2005-08-24 2010-05-25 Innovative Solutions And Support, Inc. Aircraft flat panel display system with improved information availability
DE102007048608A1 (de) 2007-10-10 2009-04-16 Robert Bosch Gmbh Testeinrichtung, Anzeigevorrichtung und Verfahren zum Überprüfen einer Gültigkeit von Anzeigesignalen
PL2254039T3 (pl) 2009-05-20 2013-05-31 Bombardier Transp Gmbh Moduł wyświetlacza z kontrolą wyświetlanych danych za pomocą sumy kontrolnej
ATE535864T1 (de) * 2009-07-06 2011-12-15 Deuta Werke Gmbh Verfahren zur darstellung einer sicherheitsrelevanten information auf einer anzeigevorrichtung und vorrichtung zur durchführung des verfahrens
JP5588000B2 (ja) 2009-07-06 2014-09-10 ドイタ ヴェルケ ゲーエムベーハー ディスプレイ上にセーフティ関連情報の表示をする方法、及びその方法を適用する装置
KR101654667B1 (ko) 2010-07-08 2016-09-06 오스람 오엘이디 게엠베하 탄성 전극을 갖는 광전자 디바이스
EP2439722B1 (de) * 2010-09-20 2013-06-19 Pixy AG Verfahren zur Überprüfung von pixelformatierten Displaydaten zur Darstellung auf einem Bildschirm eines Anzeigegerätes in einem Fahrzeug

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
None *

Also Published As

Publication number Publication date
PL2833349T4 (pl) 2018-11-30
EP2833349A1 (de) 2015-02-04
PL2833349T3 (pl) 2018-11-30
DE102013012679A1 (de) 2015-02-05

Similar Documents

Publication Publication Date Title
EP2833349B1 (de) Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands
EP3953774B1 (de) Vorrichtung zum auffinden von alarmursachen
DE102007048608A1 (de) Testeinrichtung, Anzeigevorrichtung und Verfahren zum Überprüfen einer Gültigkeit von Anzeigesignalen
EP3571085B1 (de) Verfahren und vorrichtung zum anzeigen eines hinweises für einen anwender und arbeitsvorrichtung
EP2367083A1 (de) Vorrichtung zur Erstellung eines Programms für eine speicherprogrammierbare Steuerung, Programmiereinrichtung und Verfahren zur Programmierung einer speicherprogrammierbaren Steuerung
EP3269578A1 (de) Verfahren zum betreiben eines fahrzeuginformationssystems mit zumindest einer ersten und einer zweiten anzeigefläche und fahrzeuginformationssystem
DE102022114705A1 (de) Vorrichtung und Verfahren zur Erkennung eines Bildschirmeinfrierfehlers einer Fahrzeuganzeige
DE102012207439A1 (de) Verfahren zur Darstellung sicherheitskritischer Daten durch eine Anzeigeneinheit; Anzeigeneinheit
DE112020002402T5 (de) Lenksteuervorrichtung und -verfahren sowie lenksteuersystem
DE102015012889B4 (de) Anzeigevorrichtung und Verfahren zur Überprüfung von Anzeigeinhalten
EP2439722B1 (de) Verfahren zur Überprüfung von pixelformatierten Displaydaten zur Darstellung auf einem Bildschirm eines Anzeigegerätes in einem Fahrzeug
DE102012217291A1 (de) Verfahren zur Fehleroffenbarung bei einem Stellwerksrechnersystems und Stellwerksrechnersystem
WO2014048641A1 (de) Benutzerschnittstelle und verfahren zur fehlerdiagnose einer industriellen anlage
DE102010026392B4 (de) Verfahren zur sicheren Parametrierung eines Sicherheitsgeräts
EP3899915A1 (de) Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium
EP1901148B1 (de) Anzeigesystem zur grafischen Darstellung von Alarmmeldungen einer technischen Anlage oder eines technischen Prozesses
DE102008021241B4 (de) Messwert-Anzeige, insbesondere im Führerstand eines Schienenfahrzeugs
EP3646313B1 (de) Verfahren und vorrichtung zur ausgabe von bilddaten für eine sichere anzeige
DE112021005730T5 (de) Verfahren zur erzeugung eines anomalieerkennungsmodells
WO2019179712A1 (de) Verfahren und einrichtung zur abgesicherten anzeige eines bedienungsrelevanten bildinhalts für die darstellung auf einem display in einem kraftfahrzeug
WO2019238155A1 (de) Fortbewegungsmittel und vorrichtung zur ausgabe einer aufforderung zur übernahme einer fahrzeugführung
EP2439644B1 (de) Verfahren zur Kennzeichnung sicherheitsrelevanter und nichtsicherheitsrelevanter Bildschirmseiten auf einem Anzeigegerät mittels eines optischen Markers
DE102016003013A1 (de) Überwachungsvorrichtung und Verfahren zum Überwachen eines Betriebs eines Steuergeräts eines Kraftfahrzeugs
EP4432273A1 (de) Verfahren zum rechnergestützten betreiben einer sicheren optischen anzeige
DE102019133209A1 (de) Verfahren und Überwachungsvorrichtung zur automatischen Überwachung eines Head-Up-Displays

Legal Events

Date Code Title Description
17P Request for examination filed

Effective date: 20140724

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

R17P Request for examination filed (corrected)

Effective date: 20150804

RBV Designated contracting states (corrected)

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

17Q First examination report despatched

Effective date: 20151202

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

INTG Intention to grant announced

Effective date: 20171011

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 986392

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180415

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502014007819

Country of ref document: DE

REG Reference to a national code

Ref country code: CH

Ref legal event code: NV

Representative=s name: ISLER AND PEDRAZZINI AG, CH

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 5

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20180404

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180704

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180704

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180705

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: AT

Payment date: 20181019

Year of fee payment: 15

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180806

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502014007819

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: PL

Payment date: 20180716

Year of fee payment: 5

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

26N No opposition filed

Effective date: 20190107

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180724

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20180731

REG Reference to a national code

Ref country code: IE

Ref legal event code: MM4A

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180724

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: CH

Payment date: 20190725

Year of fee payment: 6

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CZ

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190724

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20140724

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180404

Ref country code: MK

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180404

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180804

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190724

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 986392

Country of ref document: AT

Kind code of ref document: T

Effective date: 20200724

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200731

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200731

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200724

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230518

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20240925

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20240723

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20240724

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20240731

Year of fee payment: 11